建立 Apache Spark 於 Azure HDInsights基本連線使用 Flow Service API

注意

此 Apache Spark 於 Azure HDInsights 聯結器為測試版。 請參閱 來源概觀 以取得使用Beta標籤聯結器的詳細資訊。

基礎連線代表來源和Adobe Experience Platform之間已驗證的連線。

本教學課程將逐步引導您完成建立基礎連線的步驟。 Apache Spark 於 Azure HDInsights (以下稱"Spark")使用 Flow Service API.

快速入門

本指南需要您實際瞭解下列Adobe Experience Platform元件：

  • 來源： Experience Platform 允許從各種來源擷取資料，同時讓您能夠使用來建構、加標籤和增強傳入資料 Platform 服務。
  • 沙箱： Experience Platform 提供分割單一區域的虛擬沙箱 Platform 將執行個體整合至個別的虛擬環境中，以協助開發及改進數位體驗應用程式。

以下小節提供成功連線所需瞭解的其他資訊 Spark 使用 Flow Service API。

收集必要的認證

為了 Flow Service 以連線 Spark，您必須提供下列連線屬性的值：

認證 說明
host 的IP位址或主機名稱 Spark 伺服器。
username 您用來存取的使用者名稱 Spark 伺服器。
password 與使用者對應的密碼。
connectionSpec.id 連線規格會傳回來源的聯結器屬性，包括與建立基礎連線和來源連線相關的驗證規格。 的連線規格ID Spark 為： 6a8d82bc-1caf-45d1-908d-cadabc9d63a6

如需入門的詳細資訊，請參閱 此Spark檔案.

使用平台API

如需如何成功呼叫Platform API的詳細資訊，請參閱以下指南中的 Platform API快速入門.

建立基礎連線

基礎連線會保留您的來源和平台之間的資訊，包括來源的驗證認證、連線的目前狀態，以及您唯一的基本連線ID。 基本連線ID可讓您瀏覽和瀏覽來源內的檔案，並識別您要擷取的特定專案，包括其資料型別和格式的資訊。

POST若要建立基本連線ID，請向 /connections 端點，同時提供 Spark 要求引數中的驗證認證。

API格式

POST /connections

要求

下列要求會建立 Spark：

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "Spark test connection",
        "description": "A Spark test connection",
        "auth": {
            "specName": "HDInsights Basic Authentication",
        "params": {
            "host":  "{HOST}",
            "username": "{USERNAME}",
            "password":"{PASSWORD}"
            }
        },
        "connectionSpec": {
            "id": "6a8d82bc-1caf-45d1-908d-cadabc9d63a6",
            "version": "1.0"
        }
    }'
參數 說明
auth.params.host 的主機 Spark 伺服器。
auth.params.username 與您的相關聯的使用者名稱 Spark 連線。
auth.params.password 與您的關聯的密碼 Spark 連線。
connectionSpec.id 此 Spark 連線規格ID： 6a8d82bc-1caf-45d1-908d-cadabc9d63a6.

回應

成功回應會傳回新建立連線的詳細資料，包括其唯一識別碼(id)。 在下一個教學課程中探索您的資料時，需要此ID。

{
    "id": "a45f2f58-e3a2-46ba-9f2f-58e3a2b6baf2",
    "etag": "\"900009d6-0000-0200-0000-5e8500010000\""
}

後續步驟

依照本教學課程，您已建立 Spark 基礎連線使用 Flow Service API。 您可以在下列教學課程中使用此基本連線ID：

本頁內容