만들기 Amazon Kinesis 흐름 서비스 API를 사용한 소스 연결

이 자습서에서는 연결하는 단계를 안내합니다 Amazon Kinesis (이하 "라 한다) Kinesis")를 사용하여 Experience Platform Flow Service API.

시작하기

이 안내서에서는 Adobe Experience Platform의 다음 구성 요소를 이해하고 있어야 합니다.

  • 소스: Experience Platform을 사용하면 데이터를 다양한 소스에서 수집할 수 있으며 를 사용하여 들어오는 데이터를 구조화, 레이블 지정 및 향상시키는 기능을 제공할 수 있습니다 Platform 서비스.
  • 샌드박스: Experience Platform은 단일 파티션으로 분할하는 가상 샌드박스 제공 Platform 디지털 경험 애플리케이션을 개발하고 발전시키는 데 도움이 되는 별도의 가상 환경으로 인스턴스를 구축할 수 있습니다.

다음 섹션에서는 성공적으로 연결하기 위해 알아야 하는 추가 정보를 제공합니다 Kinesis 를 사용하여 플랫폼 구현 Flow Service API.

필요한 자격 증명 수집

대상 Flow Service 와 연결 Amazon Kinesis 계정에서는 다음 연결 속성에 대한 값을 제공해야 합니다.

자격 증명 설명
accessKeyId 액세스 키 ID는 사용자의 인증을 위해 사용되는 액세스 키 쌍의 절반입니다 Kinesis Platform에 계정을 설정합니다.
secretKey 비밀 액세스 키는 사용자의 인증을 위해 사용되는 액세스 키 쌍의 다른 절반입니다 Kinesis Platform에 계정을 설정합니다.
region 귀하의 지역 Kinesis 계정이 필요합니다. 다음 안내서를 참조하십시오. 허용 목록에 IP 주소 추가 를 참조하십시오.
connectionSpec.id 연결 사양은 기본 및 소스 연결 생성과 관련된 인증 사양이 포함된 소스의 커넥터 등록 정보를 반환합니다. 다음 Kinesis 연결 사양 ID는 다음과 같습니다. 86043421-563b-46ec-8e6c-e23184711bf6.

자세한 내용은 Kinesis 액세스 키 및 생성 방법을 참조하십시오. AWS IAM 사용자의 액세스 키 관리에 대한 가이드.

플랫폼 API 사용

Platform API를 성공적으로 호출하는 방법에 대한 자세한 내용은 플랫폼 API 시작.

기본 연결 만들기

소스 연결을 만드는 첫 번째 단계는 Kinesis 소스 및 기본 연결 ID를 생성합니다. 기본 연결 ID를 사용하면 소스 내에서 파일을 탐색 및 탐색하고, 데이터 유형 및 형식에 대한 정보를 포함하여 수집할 특정 항목을 식별할 수 있습니다.

기본 연결 ID를 만들려면 /connections 제공하는 동안 엔드포인트 Kinesis 요청 매개 변수의 일부로 인증 자격 증명.

API 형식

POST /connections

요청

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "Amazon Kinesis connection",
        "description": "Connector for Amazon Kinesis",
        "providerId": "521eee4d-8cbe-4906-bb48-fb6bd4450033",
        "auth": {
            "specName": "Aws Kinesis authentication credentials",
            "params": {
                "accessKeyId": "{ACCESS_KEY_ID}",
                "secretKey": "{SECRET_KEY}",
                "region": "{REGION}"
            }
        },
        "connectionSpec": {
            "id": "86043421-563b-46ec-8e6c-e23184711bf6",
            "version": "1.0"
        }
    }'
속성 설명
auth.params.accessKeyId 사용자의 액세스 키 ID입니다 Kinesis 계정이 필요합니다.
auth.params.secretKey 사용자의 비밀 액세스 키 Kinesis 계정이 필요합니다.
auth.params.region 귀하의 지역 Kinesis 계정이 필요합니다.
connectionSpec.id 다음 Kinesis 연결 사양 ID: 86043421-563b-46ec-8e6c-e23184711bf6

응답

성공적인 응답은 고유 식별자(id). 이 ID는 소스 연결을 만들려면 다음 단계에서 필요합니다.

{
    "id": "4cb0c374-d3bb-4557-b139-5712880adc55",
    "etag": "\"6507cfd8-0000-0200-0000-5e18fc600000\""
}

소스 연결 만들기

소스 연결은 데이터를 수집하는 외부 소스와의 연결을 만들고 관리합니다. 소스 연결은 데이터 흐름을 만드는 데 필요한 데이터 소스, 데이터 형식 및 소스 연결 ID와 같은 정보로 구성됩니다. 소스 연결 인스턴스는 테넌트 및 IMS 조직에 따라 다릅니다.

소스 연결을 만들려면 /sourceConnections 의 끝점 Flow Service API.

API 형식

POST /sourceConnections

요청

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/sourceConnections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "AWS Kinesis source connection",
        "description": "A source connection for AWS Kinesis",
        "baseConnectionId": "4cb0c374-d3bb-4557-b139-5712880adc55",
        "connectionSpec": {
            "id": "86043421-563b-46ec-8e6c-e23184711bf6",
            "version": "1.0"
        },
        "data": {
            "format": "json"
        },
        "params": {
            "stream": "{STREAM}",
            "dataType": "raw",
            "reset": "latest"
        }
    }'
속성 설명
name 소스 연결의 이름입니다. 소스 연결에 대한 정보를 조회하는 데 사용할 수 있으므로 소스 연결의 이름이 설명적인지 확인합니다.
description 소스 연결에 대한 자세한 정보를 포함하도록 제공할 수 있는 선택적 값입니다.
baseConnectionId 사용자의 기본 연결 ID입니다 Kinesis 이전 단계에서 생성된 소스.
connectionSpec.id 에 대한 고정 연결 사양 ID Kinesis. 이 ID는 다음과 같습니다. 86043421-563b-46ec-8e6c-e23184711bf6
data.format 의 형식 Kinesis 수집할 데이터입니다. 현재 지원되는 데이터 형식은 json.
params.stream 레코드를 가져올 데이터 스트림의 이름입니다.
params.dataType 이 매개 변수는 수집할 데이터의 유형을 정의합니다. 지원되는 데이터 유형은 다음과 같습니다. rawxdm.
params.reset 이 매개 변수는 데이터를 읽는 방법을 정의합니다. 사용 latest 최신 데이터에서 읽기를 시작하고 earliest 스트림의 사용 가능한 첫 번째 데이터에서 읽기를 시작합니다.

응답

성공적인 응답은 고유 식별자(id) 내의 아무 곳에나 삽입할 수 있습니다. 이 ID는 데이터 흐름을 만들려면 다음 자습서에서 필요합니다.

{
    "id": "e96d6135-4b50-446e-922c-6dd66672b6b2",
    "etag": "\"66013508-0000-0200-0000-5f6e2ae70000\""
}

다음 단계

이 자습서에 따라 다음을 만들었습니다 Kinesis 소스 연결 Flow Service API. 다음 자습서에서는 이 소스 연결 ID를 사용하여 다음을 수행할 수 있습니다 를 사용하여 스트리밍 데이터 흐름 만들기 Flow Service API.

이 페이지에서는