使用Flow Service API探索雲儲存系統

本教學課程使用Flow Service API來探索協力廠商雲端儲存系統。

快速入門

本指南需要妥善了解下列Adobe Experience Platform元件：

• 來源: Experience Platform 可讓您從各種來源擷取資料，同時使用服務來建構、加標籤及增強傳入 Platform 資料。
• 沙箱: Experience Platform 提供可將單一執行個體分割成個 Platform 別虛擬環境的虛擬沙箱，以協助開發及改進數位體驗應用程式。

以下各節提供您需要了解的其他資訊，以便使用Flow Service API成功連接到雲儲存系統。

取得連線ID

若要使用Platform API探索第三方雲端儲存空間，您必須擁有有效的連線ID。 如果您尚未連接要使用的儲存，則可以通過以下教程建立連接：

• Amazon S3
• Azure Blob
• Azure Data Lake Storage Gen2
• Azure File Storage
• FTP
• Google Cloud Storage
• HDFS
• Oracle Object Storage
• SFTP

讀取範例API呼叫

本教學課程提供範例API呼叫，以示範如何設定要求格式。 這些功能包括路徑、必要標題和格式正確的請求裝載。 也提供API回應中傳回的範例JSON。 如需範例API呼叫檔案中所使用慣例的資訊，請參閱Experience Platform疑難排解指南中如何讀取範例API呼叫一節。

收集必要標題的值

若要呼叫Platform API，您必須先完成authentication tutorial。 完成驗證教學課程後，將提供所有Experience Platform API呼叫中每個必要標題的值，如下所示：

• Authorization: Bearer {ACCESS_TOKEN}
• x-api-key: {API_KEY}
• x-gw-ims-org-id: {IMS_ORG}

Experience Platform中的所有資源，包括屬於Flow Service的資源，都與特定虛擬沙箱隔離。 對Platform API的所有請求都需要標題，以指定作業將在下列位置進行的沙箱名稱：

• x-sandbox-name: {SANDBOX_NAME}

所有包含裝載(POST、PUT、PATCH)的請求都需要其他媒體類型標題：

• Content-Type: application/json

探索雲端儲存空間

使用雲端儲存空間的連線ID，您可以執行GET請求來探索檔案和目錄。 執行GET請求以探索雲端儲存空間時，您必須包含下表所列的查詢參數：

使用以下調用查找要帶入Platform的檔案的路徑：

API格式

GET /connections/{CONNECTION_ID}/explore?objectType=root
GET /connections/{CONNECTION_ID}/explore?objectType=folder&object={PATH}

要求

curl -X GET \
    'http://platform.adobe.io/data/foundation/flowservice/connections/{CONNECTION_ID}/explore?objectType=folder&object=/some/path/' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {IMS_ORG}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}'

回應

成功的響應返回在查詢的目錄中找到的檔案和資料夾陣列。 記下您要上傳之檔案的path屬性，因為您必須在下一個步驟中提供該屬性以檢查其結構。

[
    {
        "type": "file",
        "name": "account.csv",
        "path": "/test-connectors/testFolder-fileIngestion/account.csv",
        "canPreview": true,
        "canFetchSchema": true
    },
    {
        "type": "file",
        "name": "profileData.json",
        "path": "/test-connectors/testFolder-fileIngestion/profileData.json",
        "canPreview": true,
        "canFetchSchema": true
    },
    {
        "type": "file",
        "name": "sampleprofile--3.parquet",
        "path": "/test-connectors/testFolder-fileIngestion/sampleprofile--3.parquet",
        "canPreview": true,
        "canFetchSchema": true
    }
]

Inspect檔案結構

若要從雲端儲存體檢查資料檔案的結構，請執行GET要求，同時提供檔案的路徑和類型作為查詢參數。

您可以在提供檔案路徑和類型的同時，執行GET請求，以檢查雲端儲存來源中的資料檔案結構。 您也可以在查詢參數中指定不同的檔案類型，以檢查不同的檔案類型，例如CSV、TSV或壓縮的JSON和分隔檔案。

API格式

GET /connections/{CONNECTION_ID}/explore?objectType=file&object={FILE_PATH}&fileType={FILE_TYPE}&{QUERY_PARAMS}&preview=true
GET /connections/{CONNECTION_ID}/explore?objectType=file&object={FILE_PATH}&preview=true&fileType=delimited&columnDelimiter=\t
GET /connections/{CONNECTION_ID}/explore?objectType=file&object={FILE_PATH}&preview=true&fileType=delimited&compressionType=gzip;

要求

curl -X GET \
    'http://platform.adobe.io/data/foundation/flowservice/connections/{CONNECTION_ID}/explore?objectType=file&object=/aep-bootcamp/Adobe%20Pets%20Customer%2020190801%20EXP.json&fileType=json&preview=true' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {IMS_ORG}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}'

回應

成功的響應返回查詢的檔案的結構，包括表名和資料類型。

[
    {
        "name": "Id",
        "type": "String"
    },
    {
        "name": "FirstName",
        "type": "String"
    },
    {
        "name": "LastName",
        "type": "String"
    },
    {
        "name": "Email",
        "type": "String"
    },
    {
        "name": "Phone",
        "type": "String"
    }
]

使用查詢參數

Flow Service API支援使用查詢參數來預覽和檢查不同的檔案類型。

後續步驟

依照本教程，您已探索雲儲存系統，找到要帶入Platform的檔案路徑，並檢視其結構。 您可以在下一個教學課程中使用此資訊，以從您的雲端儲存空間收集資料，並將其匯入Platform🔗。