Le connecteur Apache HDFS est en version bêta. Pour plus d'informations sur l'utilisation de connecteurs bêta, consultez l'Présentation des sources.
Flow Service sert à collecter et à centraliser les données client provenant de diverses sources disparates pour les importer dans Adobe Experience Platform. Le service fournit une interface utilisateur et une API RESTful à partir de laquelle toutes les sources prises en charge sont connectables.
Ce didacticiel utilise l'API Flow Service pour vous guider dans les étapes de connexion d'un système de fichiers distribué Apache Hadoop (ci-après appelé "HDFS") à Experience Platform.
Ce guide nécessite une compréhension professionnelle des composants suivants d’Adobe Experience Platform :
Les sections suivantes fournissent des informations supplémentaires que vous devez connaître pour établir une connexion réussie à HDFS à l'aide de l'API Flow Service.
Informations d’identification | Description |
---|---|
url |
L’URL définit les paramètres d’authentification requis pour la connexion anonyme à HDFS. Pour plus d'informations sur la façon d'obtenir cette valeur, consultez ce document HDFS. |
connectionSpec.id |
Identificateur nécessaire pour créer une connexion. L'ID de spécification de connexion fixe pour HDFS est 54e221aa-d342-4707-bcff-7a4bceef0001 . |
Ce tutoriel fournit des exemples d’appels API pour démontrer comment formater vos requêtes. Il s’agit notamment de chemins d’accès, d’en-têtes requis et de payloads de requêtes correctement formatés. L’exemple JSON renvoyé dans les réponses de l’API est également fourni. Pour plus d’informations sur les conventions utilisées dans la documentation pour les exemples d’appels d’API, voir la section concernant la lecture d’exemples d’appels d’API dans le guide de dépannageExperience Platform.
Pour lancer des appels aux API Platform, vous devez d’abord suivre le tutoriel d’authentification. Le tutoriel d’authentification fournit les valeurs de chacun des en-têtes requis dans tous les appels d’API Experience Platform, comme indiqué ci-dessous :
Authorization: Bearer {ACCESS_TOKEN}
x-api-key: {API_KEY}
x-gw-ims-org-id: {IMS_ORG}
Toutes les ressources de Experience Platform, y compris celles appartenant à Flow Service, sont isolées dans des sandbox virtuels spécifiques. Toutes les requêtes d'API Platform nécessitent un en-tête spécifiant le nom du sandbox dans lequel l'opération aura lieu :
x-sandbox-name: {SANDBOX_NAME}
Toutes les requêtes qui contiennent un payload (POST, PUT, PATCH) nécessitent un en-tête de type de média supplémentaire :
Content-Type: application/json
Une connexion spécifie une source et contient vos informations d’identification pour cette source. Une seule connexion est requise par compte HDFS, car elle peut être utilisée pour créer plusieurs connecteurs source pour importer des données différentes.
Format d’API
POST /connections
Requête
La demande suivante crée une nouvelle connexion HDFS, configurée par les propriétés fournies dans la charge utile :
curl -X POST \
'https://platform.adobe.io/data/foundation/flowservice/connections' \
-H 'Authorization: Bearer {ACCESS_TOKEN}' \
-H 'x-api-key: {API_KEY}' \
-H 'x-gw-ims-org-id: {IMS_ORG}' \
-H 'x-sandbox-name: {SANDBOX_NAME}' \
-H 'Content-Type: application/json' \
-d '{
"name": "HDFS test connection",
"description": "A test connection for an HDFS source",
"auth": {
"specName": "Anonymous Authentication",
"params": {
"url": "{URL}"
}
},
"connectionSpec": {
"id": "54e221aa-d342-4707-bcff-7a4bceef0001",
"version": "1.0"
}
}'
Propriété | Description |
---|---|
auth.params.url |
URL qui définit les paramètres d'authentification requis pour la connexion anonyme à HDFS |
connectionSpec.id |
ID de spécification de connexion HDFS : 54e221aa-d342-4707-bcff-7a4bceef0001 . |
Réponse
Une réponse réussie renvoie les détails de la connexion nouvellement créée, y compris son identifiant unique (id
). Cet identifiant est nécessaire pour explorer vos données dans le didacticiel suivant.
{
"id": "6a6a880a-2b15-4051-aa88-0a2b1570516d",
"etag": "\"1801bb7d-0000-0200-0000-5ed6ad580000\""
}
En suivant ce didacticiel, vous avez créé une connexion HDFS à l'aide de l'API Flow Service et obtenu la valeur d'ID unique de la connexion. Vous pouvez utiliser cet identifiant dans le didacticiel suivant lorsque vous apprendrez à explorer un enregistrement cloud tiers à l’aide de l’API Flow Service.