使用Flow Service API创建 YOURSOURCE 连接

Last update: Tue Jul 16 2024 00:00:00 GMT+0000 (Coordinated Universal Time)

主题：

创建对象：

开发人员

浏览此模板时，替换或删除所有斜体段落（从此段落开始）。

从更新页面顶部的元数据（标题和描述）开始。请忽略此页面上的所有DNL实例。此标记可帮助我们的机器翻译流程将页面正确翻译为我们支持的多种语言。我们将在您提交文档后向文档中添加标记。

概述

提供贵公司的简短概述，包括贵公司为客户提供的价值。包含指向产品文档主页的链接以进一步阅读。

IMPORTANT

此源连接器和文档页面由 YourSource 团队创建和维护。对于任何查询或更新请求，请直接通过 插入链接或电子邮件地址与他们联系，您可以在此联系以获取更新。

先决条件

在此部分添加有关客户在Adobe Experience Platform用户界面中开始设置源之前需要了解的任何信息。这可能大约为：

需要添加到允许列表
电子邮件散列的要求
你方的任何帐户详情
如何获取API密钥以连接到您的平台

收集所需的凭据

为了将 YOURSOURCE 连接到Experience Platform，必须提供以下连接属性的值：

凭据

描述

示例

凭据1

请在此处 向源身份验证凭据添加简要说明

请在此处添加源身份验证凭据的示例

凭据二

请在此处 向源身份验证凭据添加简要说明

请在此处添加源身份验证凭据的示例

凭据三

请在此处 向源身份验证凭据添加简要说明

请在此处添加源身份验证凭据的示例

有关这些凭据的详细信息，请参阅 YOURSOURCE 身份验证文档。 请在此处 添加指向您平台的身份验证文档的链接。

使用Flow Service API将 YOURSOURCE 连接到平台

以下教程将指导您完成创建 YOURSOURCE 源连接和创建数据流以使用Flow Service API将 YOURSOURCE 数据引入Platform的步骤。

创建基本连接 base-connection

基本连接会保留您的源和平台之间的信息，包括源的身份验证凭据、连接的当前状态以及唯一的基本连接ID。基本连接ID允许您浏览和浏览源中的文件，并标识要摄取的特定项目，包括有关其数据类型和格式的信息。

要创建基本连接ID，请在提供 YOURSOURCE 身份验证凭据作为请求正文的一部分时向/connections端点发出POST请求。

API格式

POST /connections

请求

以下请求为 YOURSOURCE 创建基本连接：

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "{YOURSOURCE} base connection",
        "description": "{YOURSOURCE} base connection to authenticate to Platform",
        "connectionSpec": {
            "id": "6360f136-5980-4111-8bdf-15d29eab3b5a",
            "version": "1.0"
        },
        "auth": {
            "specName": "OAuth generic-rest-connector",
            "params": {
                "accessToken": "{ACCESS_TOKEN}",
                "refreshToken": "{REFRESH_TOKEN}",
                "expirationDate": "{EXPIRATION_DATE}"
            }
        }
    }'

属性

描述

name

基础连接的名称。确保基本连接的名称是描述性的，因为您可以使用此名称查找有关基本连接的信息。

description

可包含的可选值，用于提供有关基本连接的更多信息。

connectionSpec.id

源的连接规范ID。在您的源通过Flow Service API注册和批准后，可以检索此ID。

auth.specName

用于向Platform验证源的身份验证类型。

auth.params.

包含对源进行身份验证所需的凭据。

响应

成功的响应返回新创建的基本连接，包括其唯一连接标识符(id)。在下一步中浏览源的文件结构和内容时，需要此ID。

{
     "id": "70383d02-2777-4be7-a309-9dd6eea1b46d",
     "etag": "\"d64c8298-add4-4667-9a49-28195b2e2a84\""
}

浏览您的源 explore

使用在上一步中生成的基本连接ID，可以通过执行GET请求来浏览文件和目录。
使用以下调用查找要带入Platform的文件的路径：

API格式

GET /connections/{BASE_CONNECTION_ID}/explore?objectType=rest&object={OBJECT}&fileType={FILE_TYPE}&preview={PREVIEW}&sourceParams={SOURCE_PARAMS}

执行GET请求以浏览源的文件结构和内容时，必须包括下表列出的查询参数：

参数

描述

{BASE_CONNECTION_ID}

上一步中生成的基本连接ID。

objectType=rest

您希望探索的对象类型。目前，此值始终设置为rest。

{OBJECT}

只有在查看特定目录时才需要此参数。其值表示您希望浏览的目录的路径。

fileType=json

您要带到Platform的文件类型。当前，json是唯一支持的文件类型。

{PREVIEW}

一个布尔值，定义连接的内容是否支持预览。

{SOURCE_PARAMS}

为要带到Platform的源文件定义参数。要检索{SOURCE_PARAMS}的已接受格式类型，必须在base64中编码整个list_id字符串。在以下示例中，以base64编码的"list_id": "10c097ca71"等于eyJsaXN0SWQiOiIxMGMwOTdjYTcxIn0=。

请求

curl -X GET \
    'https://platform.adobe.io/data/foundation/flowservice/connections/70383d02-2777-4be7-a309-9dd6eea1b46d/explore?objectType=rest&object=json&fileType=json&preview=true&sourceParams=eyJsaXN0SWQiOiIxMGMwOTdjYTcxIn0=' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}'

响应

成功的响应将返回查询文件的结构。

{
  "data": [
    {
      "members": [
        {
          "id": "cff65fb4c5f5828666ad846443720efd",
          "email_address": "roykent@gmail.com",
          "unique_email_id": "72c758cbf1",
          "full_name": "Roy Kent",
          "web_id": 547094062,
          "email_type": "html",
          "status": "subscribed",
          "merge_fields": {
            "FNAME": "Roy",
            "LNAME": "Kent",
            "ADDRESS": {
              "addr1": "",
              "addr2": "",
              "city": "Richmond",
              "state": "Virginia",
              "zip": "",
              "country": "US"
            },
            "PHONE": "",
            "BIRTHDAY": ""
          },
          "stats": {
            "avg_open_rate": 0,
            "avg_click_rate": 0
          },
          "ip_signup": "",
          "timestamp_signup": "",
          "ip_opt": "103.43.112.97",
          "timestamp_opt": "2021-06-01T15:31:36+00:00",
          "member_rating": 2,
          "last_changed": "2021-06-01T15:31:36+00:00",
          "language": "",
          "vip": false,
          "email_client": "",
          "location": {
            "latitude": 0,
            "longitude": 0,
            "gmtoff": 0,
            "dstoff": 0,
            "country_code": "",
            "timezone": ""
          },
          "source": "Admin Add",
          "tags_count": 0,
          "tags": [

          ],
          "list_id": "10c097ca71"
        }
      ],
      "list_id": "10c097ca71",
      "total_items": 2,
      "_links": [
        {
          "rel": "self",
          "href": "https://us6.api.mailchimp.com/3.0/lists/10c097ca71/members",
          "method": "GET",
          "targetSchema": "https://us6.api.mailchimp.com/schema/3.0/Definitions/Lists/Members/CollectionResponse.json",
          "schema": "https://us6.api.mailchimp.com/schema/3.0/Paths/Lists/Members/Collection.json"
        },
        {
          "rel": "parent",
          "href": "https://us6.api.mailchimp.com/3.0/lists/10c097ca71",
          "method": "GET",
          "targetSchema": "https://us6.api.mailchimp.com/schema/3.0/Definitions/Lists/Members/Response.json"
        },
        {
          "rel": "create",
          "href": "https://us6.api.mailchimp.com/3.0/lists/10c097ca71/members",
          "method": "POST",
          "targetSchema": "https://us6.api.mailchimp.com/schema/3.0/Definitions/Lists/Members/Response.json",
          "schema": "https://us6.api.mailchimp.com/schema/3.0/Definitions/Lists/Members/POST.json"
        }
      ]
    }
  ]
}

创建源连接 source-connection

您可以通过向Flow Service API发出POST请求来创建源连接。源连接由连接ID、源数据文件的路径以及连接规范ID组成。

API格式

POST /sourceConnections

请求

以下请求为 YOURSOURCE 创建源连接：

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/sourceConnections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "{YOURSOURCE} Source Connection",
        "description": "{YOURSOURCE} Source Connection",
        "baseConnectionId": "70383d02-2777-4be7-a309-9dd6eea1b46d",
        "connectionSpec": {
            "id": "6360f136-5980-4111-8bdf-15d29eab3b5a",
            "version": "1.0"
        },
        "data": {
            "format": "json"
        },
        "params": {
            "server": "us6",
            "listId": "10c097ca71"
        }
    }'

属性

描述

name

源连接的名称。请确保源连接的名称是描述性的，因为您可以使用此名称查找有关源连接的信息。

description

可包含的可选值，用于提供有关源连接的更多信息。

baseConnectionId

YOURSOURCE 的基本连接ID。此ID是在前面的步骤中生成的。

connectionSpec.id

与源对应的连接规范ID。

data.format

要摄取的 YOURSOURCE 数据的格式。当前，唯一支持的数据格式为json。

响应

成功的响应返回新创建的源连接的唯一标识符(id)。此ID是稍后步骤创建数据流所必需的。

{
     "id": "246d052c-da4a-494a-937f-a0d17b1c6cf5",
     "etag": "\"712a8c08-fda7-41c2-984b-187f823293d8\""
}

创建目标XDM架构 target-schema

为了在Platform中使用源数据，必须创建目标架构，以根据您的需求构建源数据。然后，使用目标架构创建包含源数据的Platform数据集。

通过向架构注册表API执行POST请求，可以创建目标XDM架构。

有关如何创建目标XDM架构的详细步骤，请参阅有关使用API 创建架构的教程。

创建目标数据集 target-dataset

可以通过向目录服务API执行POST请求，在有效负载中提供目标架构的ID来创建目标数据集。

有关如何创建目标数据集的详细步骤，请参阅有关使用API创建数据集的教程。

创建目标连接 target-connection

目标连接表示与要存储所摄取数据的目标的连接。要创建目标连接，必须提供与Data Lake对应的固定连接规范ID。此ID为： c604ff05-7f1a-43c0-8e18-33bf874cb11c。

您现在具有目标架构、目标数据集以及到Data Lake的连接规范ID的唯一标识符。使用这些标识符，您可以使用Flow Service API创建目标连接，以指定将包含入站源数据的数据集。

API格式

POST /targetConnections

请求

以下请求为 YOURSOURCE 创建目标连接：

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/targetConnections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "{YOURSOURCE} Target Connection",
        "description": "{YOURSOURCE} Target Connection",
        "connectionSpec": {
            "id": "c604ff05-7f1a-43c0-8e18-33bf874cb11c",
            "version": "1.0"
        },
        "data": {
            "format": "json"
        },
        "params": {
            "dataSetId": "5ef4551c52e054191a61a99f"
        }
    }'

属性

描述

name

目标连接的名称。确保目标连接的名称是描述性的，因为您可以使用此名称查找有关目标连接的信息。

description

可包含的可选值，用于提供有关目标连接的更多信息。

connectionSpec.id

对应于Data Lake的连接规范ID。此固定ID为： c604ff05-7f1a-43c0-8e18-33bf874cb11c。

data.format

要带到Platform的 YOURSOURCE 数据的格式。

params.dataSetId

在上一步中检索到的目标数据集ID。

响应

成功的响应返回新目标连接的唯一标识符(id)。此ID在后续步骤中是必需的。

{
     "id": "7c96c827-3ffd-460c-a573-e9558f72f263",
     "etag": "\"a196f685-f5e8-4c4c-bfbd-136141bb0c6d\""
}

创建映射 mapping

要将源数据摄取到目标数据集中，必须首先将其映射到目标数据集所遵循的目标架构。这是通过向Data Prep API执行POST请求来实现的，该请求具有在请求有效负载中定义的数据映射。

API格式

POST /conversion/mappingSets

请求

curl -X POST \
    'https://platform.adobe.io/data/foundation/conversion/mappingSets' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "version": 0,
        "xdmSchema": "https://ns.adobe.com/{TENANT_ID}/schemas/995dabbea86d58e346ff91bd8aa741a9f36f29b1019138d4",
        "xdmVersion": "1.0",
        "id": null,
        "mappings": [
            {
                "destinationXdmPath": "_id",
                "sourceAttribute": "Id",
                "identity": false,
                "identityGroup": null,
                "namespaceCode": null,
                "version": 0
            },
            {
                "destinationXdmPath": "person.name.firstName",
                "sourceAttribute": "FirstName",
                "identity": false,
                "identityGroup": null,
                "namespaceCode": null,
                "version": 0
            },
            {
                "destinationXdmPath": "person.name.lastName",
                "sourceAttribute": "LastName",
                "identity": false,
                "identityGroup": null,
                "namespaceCode": null,
                "version": 0
            }
        ]
    }'

属性

描述

xdmSchema

在之前的步骤中生成的目标XDM架构的ID。

mappings.destinationXdmPath

源属性将映射到的目标XDM路径。

mappings.sourceAttribute

需要映射到目标XDM路径的源属性。

mappings.identity

一个布尔值，指定映射集是否将标记为Identity Service。

响应

成功的响应返回新创建的映射的详细信息，包括其唯一标识符(id)。在后续步骤中需要使用此值来创建数据流。

{
    "id": "bf5286a9c1ad4266baca76ba3adc9366",
    "version": 0,
    "createdDate": 1597784069368,
    "modifiedDate": 1597784069368,
    "createdBy": "{CREATED_BY}",
    "modifiedBy": "{MODIFIED_BY}"
}

创建流 flow

将数据从 YOURSOURCE 引入Platform的最后一步是创建数据流。现在，您已准备以下必需值：

Source连接Id
目标连接ID
映射 ID

数据流负责从源中计划和收集数据。您可以通过在有效负载中提供上述值时执行POST请求来创建数据流。

要计划摄取，您必须先将开始时间值设置为纪元时间（以秒为单位）。然后，必须将频率值设置为五个选项之一： once、minute、hour、day或week。间隔值用于指定两次连续摄取之间的时间段，但是，创建一次性摄取不需要设置间隔。对于所有其他频率，间隔值必须设置为等于或大于15。

API格式

POST /flows

请求

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/flows' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "{YOURSOURCE} dataflow",
        "description": "{YOURSOURCE} dataflow",
        "flowSpec": {
            "id": "6499120c-0b15-42dc-936e-847ea3c24d72",
            "version": "1.0"
        },
        "sourceConnectionIds": [
            "246d052c-da4a-494a-937f-a0d17b1c6cf5"
        ],
        "targetConnectionIds": [
            "7c96c827-3ffd-460c-a573-e9558f72f263"
        ],
        "transformations": [
            {
                "name": "Mapping",
                "params": {
                    "mappingId": "bf5286a9c1ad4266baca76ba3adc9366",
                    "mappingVersion": "0"
                }
            }
        ],
        "scheduleParams": {
            "startTime": "1625040887",
            "frequency": "minute",
            "interval": 15
        }
    }'

属性

描述

name

您的数据流的名称。确保数据流的名称是描述性的，因为您可以使用此名称查找数据流上的信息。

description

可包含的可选值，用于提供有关数据流的更多信息。

flowSpec.id

创建数据流所需的流规范ID。此固定ID为： 6499120c-0b15-42dc-936e-847ea3c24d72。

flowSpec.version

流规范ID的相应版本。此值默认为1.0。

sourceConnectionIds

在之前的步骤中生成的源连接ID。

targetConnectionIds

在之前的步骤中生成的目标连接ID。

transformations

此属性包含需要应用于数据的各种转换。将不符合XDM的数据引入到Platform时需要此属性。

transformations.name

分配给转换的名称。

transformations.params.mappingId

在之前的步骤中生成的映射ID。

transformations.params.mappingVersion

映射ID的相应版本。此值默认为0。

scheduleParams.startTime

此属性包含有关数据流的摄取计划的信息。

scheduleParams.frequency

数据流收集数据的频率。可接受的值包括： once、minute、hour、day或week。

scheduleParams.interval

间隔指定两次连续流运行之间的周期。间隔的值应为非零整数。当频率设置为once时不需要间隔，其他频率值应大于或等于15。

响应

成功的响应返回新创建的数据流的ID (id)。您可以使用此ID监视、更新或删除数据流。

{
     "id": "993f908f-3342-4d9c-9f3c-5aa9a189ca1a",
     "etag": "\"510bb1d4-8453-4034-b991-ab942e11dd8a\""
}

附录

以下部分提供了有关监视、更新和删除数据流的步骤的信息。

监测数据流

创建数据流后，您可以监视通过它摄取的数据，以查看有关流运行、完成状态和错误的信息。有关完整的API示例，请阅读有关使用API监视源数据流的指南。

更新您的数据流

通过提供数据流的ID，向Flow Service API的/flows端点发出PATCH请求，更新数据流的详细信息，例如其名称和描述，以及其运行计划和关联的映射集。发出PATCH请求时，必须在If-Match标头中提供数据流唯一的etag。有关完整的API示例，请阅读有关使用API 更新源数据流的指南

更新您的帐户

在提供您的基本连接ID作为查询参数的同时，通过执行对Flow Service API的PATCH请求来更新源帐户的名称、描述和凭据。发出PATCH请求时，必须在If-Match标头中提供源帐户的唯一etag。有关完整的API示例，请阅读有关使用API更新源帐户的指南。

删除您的数据流

在查询参数中提供要删除的数据流的ID时，通过向Flow Service API执行DELETE请求来删除数据流。有关完整的API示例，请阅读有关使用API删除数据流的指南。

删除您的帐户

在提供要删除的帐户的基本连接ID时，通过向Flow Service API执行DELETE请求来删除您的帐户。有关完整的API示例，请阅读有关使用API🔗删除源帐户的指南。

recommendation-more-help

337b99bb-92fb-42ae-b6b7-c7042161d089

使用Flow Service API创建​ YOURSOURCE ​连接

概述

先决条件

收集所需的凭据

使用Flow Service API将​ YOURSOURCE ​连接到平台

创建基本连接 base-connection

浏览您的源 explore

创建源连接 source-connection

创建目标XDM架构 target-schema

创建目标数据集 target-dataset

创建目标连接 target-connection

创建映射 mapping

创建流 flow

附录

监测数据流

更新您的数据流

更新您的帐户

删除您的数据流

删除您的帐户

使用Flow Service API创建 YOURSOURCE 连接

使用Flow Service API将 YOURSOURCE 连接到平台