만들기 Apache Spark 날짜 Azure 를 사용하는 HDInsights 기본 연결 Flow Service API

NOTE
다음 Apache Spark 날짜 Azure HDInsights 커넥터가 Beta 버전입니다. 다음을 참조하십시오. 소스 개요 beta 레이블이 지정된 커넥터 사용에 대한 자세한 정보를 제공합니다.

기본 연결은 소스와 Adobe Experience Platform 간의 인증된 연결을 나타냅니다.

이 자습서에서는 기본 연결을 만드는 단계를 안내합니다. Apache Spark 날짜 Azure HDInsights (이하 "라고 한다) Spark") 사용 Flow Service API.

시작하기

이 안내서를 사용하려면 Adobe Experience Platform의 다음 구성 요소에 대해 이해하고 있어야 합니다.

  • 소스: Experience Platform 를 사용하여 수신 데이터를 구조화하고 레이블을 지정하고 개선하는 기능을 제공하면서 다양한 소스에서 데이터를 수집할 수 있습니다. Platform 서비스.
  • 샌드박스: Experience Platform 단일 파티션을 만드는 가상 샌드박스를 제공합니다. Platform 인스턴스를 별도의 가상 환경으로 전환하여 디지털 경험 애플리케이션을 개발하고 발전시킵니다.

다음 섹션에서는 에 성공적으로 연결하기 위해 알아야 하는 추가 정보를 제공합니다 Spark 사용 Flow Service API.

필요한 자격 증명 수집

주문 Flow Service 연결 대상 Spark, 다음 연결 속성에 대한 값을 제공해야 합니다.

자격 증명
설명
host
의 IP 주소 또는 호스트 이름 Spark 서버입니다.
username
액세스하는 데 사용하는 사용자 이름 Spark 서버.
password
사용자에 해당하는 암호입니다.
connectionSpec.id
연결 사양은 기본 및 소스 연결 만들기와 관련된 인증 사양을 포함하여 소스의 커넥터 속성을 반환합니다. 에 대한 연결 사양 ID Spark 은(는) 6a8d82bc-1caf-45d1-908d-cadabc9d63a6

시작에 대한 자세한 내용은 다음을 참조하십시오. 이 Spark 문서.

Platform API 사용

Platform API를 성공적으로 호출하는 방법에 대한 자세한 내용은 의 안내서를 참조하십시오. platform API 시작하기.

기본 연결을 만듭니다

기본 연결은 소스의 인증 자격 증명, 연결의 현재 상태 및 고유한 기본 연결 ID를 포함하여 소스와 플랫폼 간에 정보를 유지합니다. 기본 연결 ID를 사용하면 소스 내에서 파일을 탐색 및 탐색하고 데이터 유형 및 형식에 대한 정보를 포함하여 수집할 특정 항목을 식별할 수 있습니다.

POST 기본 연결 ID를 만들려면 /connections 을(를) 제공하는 동안 엔드포인트 Spark 요청 매개 변수의 일부로 인증 자격 증명을 사용합니다.

API 형식

POST /connections

요청

다음 요청은에 대한 기본 연결을 만듭니다. Spark:

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "Spark test connection",
        "description": "A Spark test connection",
        "auth": {
            "specName": "HDInsights Basic Authentication",
        "params": {
            "host":  "{HOST}",
            "username": "{USERNAME}",
            "password":"{PASSWORD}"
            }
        },
        "connectionSpec": {
            "id": "6a8d82bc-1caf-45d1-908d-cadabc9d63a6",
            "version": "1.0"
        }
    }'
매개변수
설명
auth.params.host
의 호스트 Spark 서버입니다.
auth.params.username
와(과) 연계된 사용자 이름 Spark 연결.
auth.params.password
과(와) 연계된 암호 Spark 연결.
connectionSpec.id
다음 Spark 연결 사양 ID: 6a8d82bc-1caf-45d1-908d-cadabc9d63a6.

응답

성공한 응답은 고유 식별자를 포함하여 새로 생성된 연결의 세부 정보를 반환합니다(id). 이 ID는 다음 자습서에서 데이터를 탐색하는 데 필요합니다.

{
    "id": "a45f2f58-e3a2-46ba-9f2f-58e3a2b6baf2",
    "etag": "\"900009d6-0000-0200-0000-5e8500010000\""
}

다음 단계

이 자습서를 따라 Spark 를 사용한 기본 연결 Flow Service API. 다음 자습서에서 이 기본 연결 ID를 사용할 수 있습니다.

recommendation-more-help
337b99bb-92fb-42ae-b6b7-c7042161d089