Flow Service API를 사용하여 Azure HDInsights 기본 연결에 Apache Spark을(를) 만듭니다

노트

Azure HDInsights 커넥터의 Apache Spark이 베타 버전입니다. 베타 레이블이 지정된 커넥터 사용에 대한 자세한 내용은 소스 개요 를 참조하십시오.

기본 연결은 소스와 Adobe Experience Platform 간의 인증된 연결을 나타냅니다.

이 자습서에서는 Flow Service API를 사용하여 Azure HDInsights에서 Apache Spark (이하 "Spark"라 함)에 대한 기본 연결을 만드는 단계를 안내합니다.

시작하기

이 안내서에서는 Adobe Experience Platform의 다음 구성 요소를 이해하고 있어야 합니다.

  • 소스: Experience Platform 서비스를 사용하여 들어오는 데이터를 구조화, 레이블 지정 및 향상시키는 기능을 제공하면서 다양한 소스에서 데이터를 수집할 수 Platform 있습니다.
  • 샌드박스: Experience Platform 에서는 디지털 경험 애플리케이션을 개발하고 발전시키는 데 도움이 Platform 되는 단일 인스턴스를 별도의 가상 환경으로 분할하는 가상 샌드박스를 제공합니다.

다음 섹션에서는 Flow Service API를 사용하여 Spark에 성공적으로 연결하기 위해 알고 있어야 하는 추가 정보를 제공합니다.

필요한 자격 증명 수집

Flow Service이 Spark과 연결하려면 다음 연결 속성에 값을 제공해야 합니다.

자격 증명 설명
host Spark 서버의 IP 주소 또는 호스트 이름입니다.
username Spark 서버에 액세스하는 데 사용하는 사용자 이름입니다.
password 사용자에 해당하는 암호입니다.
connectionSpec.id 연결 사양은 기본 및 소스 연결 생성과 관련된 인증 사양이 포함된 소스의 커넥터 등록 정보를 반환합니다. Spark에 대한 연결 사양 ID는 다음과 같습니다. 6a8d82bc-1caf-45d1-908d-cadabc9d63a6

시작하는 방법에 대한 자세한 내용은 이 스파크 문서를 참조하십시오.

플랫폼 API 사용

플랫폼 API를 성공적으로 호출하는 방법에 대한 자세한 내용은 플랫폼 API 시작의 안내서를 참조하십시오.

기본 연결 만들기

기본 연결은 소스의 인증 자격 증명, 현재 연결 상태 및 고유한 기본 연결 ID를 포함하여 소스와 플랫폼 간의 정보를 유지합니다. 기본 연결 ID를 사용하면 소스 내에서 파일을 탐색 및 탐색하고 해당 데이터 유형 및 형식에 대한 정보를 포함하여 수집할 특정 항목을 식별할 수 있습니다.

기본 연결 ID를 만들려면 요청 매개 변수의 일부로 Spark 인증 자격 증명을 제공하는 동안 /connections 끝점에 POST 요청을 하십시오.

API 형식

POST /connections

요청

다음 요청은 Spark에 대한 기본 연결을 만듭니다.

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {IMS_ORG}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "Spark test connection",
        "description": "A Spark test connection",
        "auth": {
            "specName": "HDInsights Basic Authentication",
        "params": {
            "host" :  "{HOST}",
            "username" : "{USERNAME}",
            "password" :"{PASSWORD}"
            }
        },
        "connectionSpec": {
            "id": "6a8d82bc-1caf-45d1-908d-cadabc9d63a6",
            "version": "1.0"
        }
    }'
매개 변수 설명
auth.params.host Spark 서버의 호스트입니다.
auth.params.username Spark 연결에 연결된 사용자 이름입니다.
auth.params.password Spark 연결에 연결된 암호입니다.
connectionSpec.id Spark 연결 사양 ID: 6a8d82bc-1caf-45d1-908d-cadabc9d63a6.

응답

성공적인 응답은 해당 고유 식별자(id)를 포함하여 새로 생성된 연결의 세부 정보를 반환합니다. 이 ID는 다음 자습서에서 데이터를 탐색하는 데 필요합니다.

{
    "id": "a45f2f58-e3a2-46ba-9f2f-58e3a2b6baf2",
    "etag": "\"900009d6-0000-0200-0000-5e8500010000\""
}

다음 단계

이 자습서를 따라 Flow Service API를 사용하여 Spark 연결을 만들고 연결의 고유 ID 값을 받았습니다. 다음 자습서에서는 Flow Service API를 사용하여 데이터베이스를 탐색하는 방법을 배울 때 이 ID를 사용할 수 있습니다.

이 페이지에서는