建立 Apache Spark 上 Azure HDInsights基連接使用 Flow Service API

注意

的 Apache Spark 上 Azure HDInsights 連接器位於beta中。 查看 源概述 的子菜單。

基連接表示源和Adobe Experience Platform之間經過驗證的連接。

本教程將指導您完成建立基本連接的步驟 Apache Spark 上 Azure HDInsights (以下簡稱:Spark")使用 Flow Service API

快速入門

本指南要求對Adobe Experience Platform的下列組成部分有工作上的理解:

  • : Experience Platform 允許從各種源接收資料,同時讓您能夠使用 Platform 服務。
  • 沙箱: Experience Platform 提供虛擬沙箱,將單個沙箱 Platform 實例到獨立的虛擬環境,以幫助開發和發展數字型驗應用程式。

以下各節提供了要成功連接到所需的其他資訊 Spark 使用 Flow Service API。

收集所需憑據

為了 Flow Service 連接 Spark,必須為以下連接屬性提供值:

憑據 說明
host 的IP地址或主機名 Spark 伺服器。
username 用於訪問的用戶名 Spark 伺服器。
password 與用戶對應的密碼。
connectionSpec.id 連接規範返回源的連接器屬性,包括與建立基連接和源連接相關的驗證規範。 連接規範ID Spark 為: 6a8d82bc-1caf-45d1-908d-cadabc9d63a6

有關入門的詳細資訊,請參閱 此Spark文檔

使用平台API

有關如何成功調用平台API的資訊,請參見上的指南 平台API入門

建立基本連接

基本連接將保留源和平台之間的資訊,包括源的驗證憑據、連接的當前狀態和唯一的基本連接ID。 基本連接ID允許您從源中瀏覽和導航檔案,並標識要攝取的特定項目,包括有關其資料類型和格式的資訊。

要建立基本連接ID,請向 /connections 提供端點 Spark 身份驗證憑據作為請求參數的一部分。

API格式

POST /connections

要求

以下請求為 Spark:

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "Spark test connection",
        "description": "A Spark test connection",
        "auth": {
            "specName": "HDInsights Basic Authentication",
        "params": {
            "host":  "{HOST}",
            "username": "{USERNAME}",
            "password":"{PASSWORD}"
            }
        },
        "connectionSpec": {
            "id": "6a8d82bc-1caf-45d1-908d-cadabc9d63a6",
            "version": "1.0"
        }
    }'
參數 說明
auth.params.host 主機 Spark 伺服器。
auth.params.username 與您的 Spark 連接。
auth.params.password 與您的 Spark 連接。
connectionSpec.id 的 Spark 連接規範ID: 6a8d82bc-1caf-45d1-908d-cadabc9d63a6

回應

成功的響應返回新建立的連接的詳細資訊,包括其唯一標識符(id)。 在下一教程中瀏覽資料時需要此ID。

{
    "id": "a45f2f58-e3a2-46ba-9f2f-58e3a2b6baf2",
    "etag": "\"900009d6-0000-0200-0000-5e8500010000\""
}

後續步驟

按照本教程,您建立了 Spark 基本連接使用 Flow Service API。 您可以在以下教程中使用此基本連接ID:

本頁內容