文件Experience Platform來源連接器指南

[Beta]{class="badge informative"} [Ultimate]{class="badge positive"}

Databricks

Last update: Wed Sep 24 2025 00:00:00 GMT+0000 (Coordinated Universal Time)
  • 主題：

建立對象：

  • 開發人員
AVAILABILITY

  • Databricks來源可在來源目錄中提供給已購買Real-Time CDP Ultimate的使用者。

  • Databricks來源是測試版。 閱讀來源概觀中的條款與條件，以取得有關使用測試版標籤之來源的詳細資訊。

Databricks是雲端型平台，專為資料分析、機器學習和AI而設計。 您可以使用Databricks來整合及提供整體環境，以大規模建置、部署及管理資料解決方案。

使用Databricks來源連線您的帳戶並將您的Databricks資料擷取到Adobe Experience Platform。

先決條件

完成先決條件步驟，成功將您的Databricks帳戶連線至Experience Platform。

擷取您的容器認證

擷取您的Experience Platform Azure Blob Storage認證，讓您的Databricks帳戶稍後可以存取。

若要擷取您的認證，請向/credentials API的Connectors端點發出GET請求。

API格式

GET /data/foundation/connectors/landingzone/credentials?type=dlz_databricks_source

要求

下列要求會擷取您Experience Platform Azure Blob Storage的認證。

檢視請求範例
code language-shell 
curl -X GET \
  'https://platform.adobe.io/data/foundation/connectors/landingzone/credentials?type=dlz_databricks_source' \
  -H 'Authorization: Bearer {ACCESS_TOKEN}' \
  -H 'x-api-key: {API_KEY}' \
  -H 'x-gw-ims-org-id: {ORG_ID}' \
  -H 'x-sandbox-name: {SANDBOX_NAME}' \
  -H 'Content-Type: application/json' \

回應

成功的回應提供您的認證(containerName、SASToken、storageAccountName)，以供稍後在Apache Spark的Databricks設定中使用。

檢視回應範例
code language-json 
{
    "containerName": "dlz-databricks-container",
    "SASToken": "sv=2020-10-02&si=dlz-b1f4060b-6bbd-4043-9bd9-a5f5be72de30&sr=c&sp=racwdlm&sig=zVQfmuElZJzOKkUk8z5lChrJ3YQUE2h6EShDZOsVeMc%3D",
    "storageAccountName": "sndbxdtlndga8m7ajbvgc64k",
    "SASUri": "https://sndbxdtlndga8m7ajbvgc64k.blob.core.windows.net/dlz-databricks-container?sv=2020-10-02&si=dlz-b1f4060b-6bbd-4043-9bd9-a5f5be72de30&sr=c&sp=racwdlm&sig=zVQfmuElZJzOKkUk8z5lChrJ3YQUE2h6EShDZOsVeMc%3D",
    "expiryDate": "2025-07-05"
}
table 0-row-2 1-row-2 2-row-2 3-row-2 4-row-2 5-row-2
屬性 說明
containerName Azure Blob Storage容器的名稱。 稍後當您完成Apache Spark的Databricks設定時，將會使用此值。
SASToken 您的Azure Blob Storage的共用存取權簽章權杖。 此字串包含授權請求所需的所有資訊。
storageAccountName 儲存體帳戶的名稱。
SASUri 您的Azure Blob Storage的共用存取權簽章URI。 此字串是Azure Blob Storage的URI組合，您要對其驗證以及它對應的SAS權杖。
expiryDate 您的SAS Token到期的日期。 您必須在到期日之前重新整理您的權杖，才能繼續在您的應用程式中使用它來上傳資料到Azure Blob Storage。 如果您未在所述的到期日之前手動重新整理權杖，則會在執行GET認證呼叫時自動重新整理並提供新權杖。

重新整理您的認證

NOTE
您重新整理認證後，現有的認證將會被撤銷。 因此，每當您重新整理儲存體認證時，都必須相應地更新Spark設定。 否則，您的資料流將會失敗。

若要重新整理您的認證，請提出POST要求並加入action=refresh作為查詢引數。

API格式

POST /data/foundation/connectors/landingzone/credentials?type=dlz_databricks_source&action=refresh

要求

下列要求會重新整理您Azure Blob Storage的認證。

檢視請求範例
code language-shell 
curl -X POST \
  'https://platform.adobe.io/data/foundation/connectors/landingzone/credentials?type=dlz_databricks_source&action=refresh' \
  -H 'Authorization: Bearer {ACCESS_TOKEN}' \
  -H 'x-api-key: {API_KEY}' \
  -H 'x-gw-ims-org-id: {ORG_ID}' \
  -H 'x-sandbox-name: {SANDBOX_NAME}' \
  -H 'Content-Type: application/json' \

回應

成功的回應會傳回您的新認證。

檢視回應範例
code language-json 
{
    "containerName": "dlz-databricks-container",
    "SASToken": "sv=2020-10-02&si=dlz-6e17e5d6-de18-4efc-88c7-45f37d242617&sr=c&sp=racwdlm&sig=wvA4K3fcEmqAA%2FPvcMhB%2FA8y8RLwVJ7zhdWbxvT1uFM%3D",
    "storageAccountName": "sndbxdtlndga8m7ajbvgc64k",
    "SASUri": "https://sndbxdtlndga8m7ajbvgc64k.blob.core.windows.net/dlz-databricks-container?sv=2020-10-02&si=dlz-6e17e5d6-de18-4efc-88c7-45f37d242617&sr=c&sp=racwdlm&sig=wvA4K3fcEmqAA%2FPvcMhB%2FA8y8RLwVJ7zhdWbxvT1uFM%3D",
    "expiryDate": "2025-07-20"
}

設定對您Azure Blob Storage的存取權

IMPORTANT

  • 如果您的叢集已終止，服務會在流程執行期間自動重新啟動。 不過，在建立連線或資料流時，您必須確保您的叢集為作用中。 此外，如果您正在執行資料預覽或探索等動作，您的叢集必須處於作用中狀態，因為這些動作無法提示自動重新啟動已終止的叢集。

  • 您的Azure容器包含名為adobe-managed-staging的資料夾。 為確保資料能順暢擷取，不要 ​修改此資料夾。

接下來，您必須確定您的Databricks叢集可以存取Experience Platform Azure Blob Storage帳戶。 如此一來，您就可以使用Azure Blob Storage作為寫入delta lake資料表資料的臨時位置。

若要提供存取權，您必須在Databricks叢集上設定SAS權杖，作為Apache Spark設定的一部分。

在您的Databricks介面中，選取​ Advanced options，然後在Spark config輸入方塊中輸入下列內容。

fs.azure.sas.{CONTAINER_NAME}.{STORAGE-ACCOUNT}.blob.core.windows.net {SAS-TOKEN}
屬性
說明
容器名稱
容器的名稱。 您可以擷取Azure Blob Storage認證以取得此值。
儲存體帳戶
儲存體帳戶的名稱。 您可以擷取Azure Blob Storage認證以取得此值。
SAS 權杖
您的Azure Blob Storage的共用存取權簽章權杖。 您可以擷取Azure Blob Storage認證以取得此值。

Azure上的Databricks UI。

如果未提供，則流程執行中的複製活動會失敗並傳回下列錯誤：

Unable to access container '{CONTAINER_NAME}' in account '{STORAGE_ACCOUNT}.blob.core.windows.net' using anonymous credentials. No credentials found in the configuration. Public access is not permitted on this storage account.

將Databricks連線至Experience Platform

現在您已完成先決條件步驟，您可以繼續並將Databricks帳戶連線至Experience Platform：

recommendation-more-help
337b99bb-92fb-42ae-b6b7-c7042161d089