O conector Apache HDFS está na versão beta. Consulte a Visão geral das fontes para obter mais informações sobre o uso de conectores rotulados com beta.
Uma conexão base representa a conexão autenticada entre uma origem e o Adobe Experience Platform.
Este tutorial guiará você pelas etapas para criar uma conexão básica para Apache Hadoop Distributed File System (a seguir designado por "HDFS") usando o Flow Service API.
Este manual necessita de uma compreensão funcional dos seguintes componentes da Adobe Experience Platform:
As seções a seguir fornecem informações adicionais que você precisará saber para se conectar com êxito ao HDFS usando o Flow Service API.
Credencial | Descrição |
---|---|
url |
O URL define parâmetros de autenticação necessários para a conexão com o HDFS anonimamente. Para obter mais informações sobre como obter esse valor, consulte este HDFS documento. |
connectionSpec.id |
A especificação de conexão retorna as propriedades do conector de uma origem, incluindo especificações de autenticação relacionadas à criação das conexões de base e de origem. A ID da especificação de conexão para AdWords é: 54e221aa-d342-4707-bcff-7a4bceef0001 . |
Para obter informações sobre como fazer chamadas para APIs da Platform com êxito, consulte o manual em introdução às APIs da Platform.
Uma conexão base retém informações entre sua origem e a Platform, incluindo as credenciais de autenticação da origem, o estado atual da conexão e sua ID de conexão base exclusiva. A ID de conexão básica permite explorar e navegar pelos arquivos de dentro da origem e identificar os itens específicos que deseja assimilar, incluindo informações sobre os tipos de dados e formatos.
Para criar um ID de conexão base, faça uma solicitação POST ao /connections
ao fornecer sua HDFS credenciais de autenticação como parte dos parâmetros de solicitação.
Formato da API
POST /connections
Solicitação
A solicitação a seguir cria uma conexão básica para HDFS:
curl -X POST \
'https://platform.adobe.io/data/foundation/flowservice/connections' \
-H 'Authorization: Bearer {ACCESS_TOKEN}' \
-H 'x-api-key: {API_KEY}' \
-H 'x-gw-ims-org-id: {ORG_ID}' \
-H 'x-sandbox-name: {SANDBOX_NAME}' \
-H 'Content-Type: application/json' \
-d '{
"name": "HDFS test connection",
"description": "A test connection for an HDFS source",
"auth": {
"specName": "Anonymous Authentication",
"params": {
"url": "{URL}"
}
},
"connectionSpec": {
"id": "54e221aa-d342-4707-bcff-7a4bceef0001",
"version": "1.0"
}
}'
Propriedade | Descrição |
---|---|
auth.params.url |
O URL que define os parâmetros de autenticação necessários para a conexão com o HDFS anonimamente |
connectionSpec.id |
A variável HDFS ID da especificação de conexão: 54e221aa-d342-4707-bcff-7a4bceef0001 . |
Resposta
Uma resposta bem-sucedida retorna detalhes da conexão recém-criada, incluindo seu identificador exclusivo (id
). Essa ID é necessária para explorar seus dados no próximo tutorial.
{
"id": "6a6a880a-2b15-4051-aa88-0a2b1570516d",
"etag": "\"1801bb7d-0000-0200-0000-5ed6ad580000\""
}
Ao seguir este tutorial, você criou um HDFS conexão usando o Flow Service e obtiveram o valor de ID exclusivo da conexão. Você pode usar essa ID no próximo tutorial enquanto aprende a explore um armazenamento em nuvem de terceiros usando a API do serviço de fluxo.