使用Flow Service API创建Azure Data Lake Storage Gen2基本连接

基本连接表示源与Adobe Experience Platform之间经过验证的连接。

本教程将指导您完成使用Flow Service API为Azure Data Lake Storage Gen2(以下称“ADLS Gen2”)创建基本连接的步骤。

快速入门

本指南要求您对Adobe Experience Platform的以下组件有一定的了解:

  • 来源: Experience Platform 允许从各种源摄取数据,同时让您能够使用服务来构建、标记和增强传入数 Platform 据。
  • 沙盒: Experience Platform 提供将单个Platform实例分区为单独虚拟环境的虚拟沙盒,以帮助开发和改进数字体验应用程序。

以下部分提供了您需要了解的其他信息,以便您能够使用Flow Service API成功创建ADLS Gen2源连接。

收集所需的凭据

要使Flow Service连接到ADLS Gen2,必须为以下连接属性提供值:

凭据 描述
url ADLS Gen2的端点。 端点模式为:https://<accountname>.dfs.core.windows.net
servicePrincipalId 应用程序的客户端ID。
servicePrincipalKey 应用程序的密钥。
tenant 包含您的应用程序的租户信息。
connectionSpec.id 连接规范返回源的连接器属性,包括与创建基连接和源连接相关的验证规范。 ADLS Gen2的连接规范ID是:0ed90a81-07f4-4586-8190-b40eccef1c5a

有关这些值的更多信息,请参阅此ADLS Gen2文档

使用Platform API

有关如何成功调用Platform API的信息,请参阅Platform API入门指南

创建基本连接

基本连接保留了源和平台之间的信息,包括源的身份验证凭据、连接的当前状态和唯一基本连接ID。 基本连接ID允许您从源中浏览和导航文件,并标识要摄取的特定项目,包括有关其数据类型和格式的信息。

要创建基本连接ID,请在请求参数中提供ADLS Gen2身份验证凭据时,向/connections端点发出POST请求。

API格式

POST /connections

请求

以下请求为ADLS Gen2创建基本连接:

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {IMS_ORG}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "adls-gen2",
        "description": "Connection for adls-gen2",
        "auth": {
            "specName": "Basic Authentication for adls-gen2",
            "params": {
                "url": "{URL}",
                "servicePrincipalId": "{SERVICE_PRINCIPAL_ID}",
                "servicePrincipalKey": "{SERVICE_PRINCIPAL_KEY}",
                "tenant": "{TENANT}"
            }
        },
        "connectionSpec": {
            "id": "0ed90a81-07f4-4586-8190-b40eccef1c5a",
            "version": "1.0"
        }
    }'
属性 描述
auth.params.url 您的ADLS Gen2帐户的URL端点。
auth.params.servicePrincipalId 您的ADLS Gen2帐户的服务主体ID。
auth.params.servicePrincipalKey 您的ADLS Gen2帐户的服务主密钥。
auth.params.tenant 您的ADLS Gen2帐户的租户信息。
connectionSpec.id ADLS Gen2连接规范ID:0ed90a81-07f4-4586-8190-b40eccef1c5a1

响应

成功的响应返回新创建的基本连接的详细信息,包括其唯一标识符(id)。 在下一步中需要此ID才能创建源连接。

{
    "id": "7497ad71-6d32-4973-97ad-716d32797304",
    "etag": "\"23005f80-0000-0200-0000-5e1d00a20000\""
}

后续步骤

通过阅读本教程,您已使用API创建了ADLS Gen2连接,并且获取了作为响应主体一部分的唯一ID。 您可以使用此连接ID来使用流量服务API使用流量服务API摄取Parquet数据来浏览云存储。

在此页面上