Amazon Kinesis 커넥터

Adobe Experience Platform은 AWS, Google Cloud Platform, 및 Azure. 이러한 시스템의 데이터를 Platform.

클라우드 스토리지 소스는 고유한 데이터를 Platform 를 다운로드하거나, 형식을 지정하거나, 업로드할 필요가 없습니다. 수집된 데이터는 XDM JSON, XDM Parquet 또는 구분된 형식으로 지정할 수 있습니다. 프로세스의 모든 단계는 소스 워크플로우에 통합됩니다. Platform 에서 데이터를 가져올 수 있습니다. Amazon Kinesis 실시간으로

노트

다음에 대한 배율 인수 Kinesis 대용량 데이터를 수집해야 하는 경우 증가해야 합니다. 현재 사용자에서 가져올 수 있는 최대 데이터 볼륨 Kinesis Platform에 대한 계정은 초당 4,000개의 레코드입니다. 더 높은 볼륨 데이터를 확장 및 수집하려면 Adobe 담당자에게 문의하십시오.

전제 조건

다음 섹션에서는 생성 전에 필요한 전제 조건 설정에 대한 추가 정보를 제공합니다 Kinesis 소스 연결.

액세스 정책 설정

A Kinesis 스트림에는 소스 연결을 만들려면 다음 권한이 필요합니다.

  • GetShardIterator
  • GetRecords
  • DescribeStream
  • ListStreams

이러한 권한은 Kinesis 자격 증명을 입력하고 데이터 스트림을 선택하면 Platform에서 콘솔 및 를 확인합니다.

아래 예에는 Kinesis 소스 연결.

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": [
                "kinesis:GetShardIterator",
                "kinesis:GetRecords",
                "kinesis:DescribeStream",
                "kinesis:ListStreams"
            ],
            "Resource": [
                "arn:aws:kinesis:us-east-2:901341027596:stream/*"
            ]
        }
    ]
}
속성 설명
kinesis:GetShardIterator 레코드를 통과하는 데 필요한 작업입니다.
kinesis:GetRecords 특정 오프셋 또는 공유 ID에서 레코드를 가져오는 데 필요한 작업입니다.
kinesis:DescribeStream 샤드 ID를 생성하는 데 필요한 샤드 맵을 포함하는 스트림에 대한 정보를 반환하는 작업입니다.
kinesis:ListStreams UI에서 선택할 수 있는 사용 가능한 스트림을 나열하는 데 필요한 작업입니다.

액세스 제어에 대한 자세한 정보 Kinesis 데이터 스트림에 대해서는 다음을 참조하십시오 Kinesis 문서.

반복자 유형 구성

Kinesis 에서는 데이터를 읽는 순서를 지정할 수 있도록 다음 반복기 유형을 지원합니다.

반복기 유형 설명
AT_SEQUENCE_NUMBER 데이터는 특정 시퀀스 번호로 식별되는 위치부터 읽습니다.
AFTER_SEQUENCE_NUMBER 데이터는 특정 시퀀스 번호로 식별된 위치 이후에 읽습니다.
AT_TIMESTAMP 특정 타임스탬프로 식별된 위치에서 데이터를 읽습니다.
TRIM_HORIZON 데이터는 가장 오래된 데이터 레코드부터 읽습니다.
LATEST 데이터는 최신 데이터 레코드에서 시작하여 읽습니다.

A Kinesis 현재 UI 소스는 TRIM_HORIZON를 지원하는 반면 API는 두 가지 모두를 지원합니다 TRIM_HORIZON 및 LATEST 데이터를 가져오기 위한 모드입니다. Platform이 Kinesis 소스: TRIM_HORIZON.

반복기 유형에 대한 자세한 내용은 다음을 참조하십시오 Kinesis 문서.

Connect Amazon Kinesis to Platform

아래 설명서에서는 연결 방법에 대한 정보를 제공합니다 Amazon Kinesis to Platform api 또는 사용자 인터페이스 사용:

API 사용

UI 사용

이 페이지에서는