La Apache Spark su Azure HDInsights connettore in versione beta. Consulta la sezione Panoramica delle origini per ulteriori informazioni sull’utilizzo dei connettori con etichetta beta.
Una connessione di base rappresenta la connessione autenticata tra un'origine e Adobe Experience Platform.
Questa esercitazione descrive i passaggi necessari per creare una connessione di base per Apache Spark su Azure HDInsights (in appresso denominato "Spark") utilizzando Flow Service API.
Questa guida richiede una buona comprensione dei seguenti componenti di Adobe Experience Platform:
Le sezioni seguenti forniscono informazioni aggiuntive che sarà necessario conoscere per connettersi correttamente a Spark utilizzando Flow Service API.
Per Flow Service per connettersi con Spark, è necessario fornire valori per le seguenti proprietà di connessione:
Credenziali | Descrizione |
---|---|
host |
Indirizzo IP o nome host del Spark server. |
username |
Nome utente utilizzato per accedere a Spark Server. |
password |
La password corrispondente all'utente. |
connectionSpec.id |
La specifica di connessione restituisce le proprietà del connettore di un'origine, incluse le specifiche di autenticazione relative alla creazione delle connessioni di base e di origine. ID della specifica di connessione per Spark è: 6a8d82bc-1caf-45d1-908d-cadabc9d63a6 |
Per ulteriori informazioni su come iniziare, consulta documento Spark.
Per informazioni su come effettuare correttamente le chiamate alle API di Platform, consulta la guida su guida introduttiva alle API di Platform.
Una connessione di base conserva le informazioni tra l'origine e la piattaforma, incluse le credenziali di autenticazione dell'origine, lo stato corrente della connessione e l'ID di connessione di base univoco. L’ID di connessione di base consente di esplorare e navigare tra i file di origine e di identificare gli elementi specifici da acquisire, comprese le informazioni relative ai tipi di dati e ai formati corrispondenti.
Per creare un ID di connessione di base, invia una richiesta POST al /connections
l'endpoint durante la fornitura del Spark credenziali di autenticazione come parte dei parametri della richiesta.
Formato API
POST /connections
Richiesta
La richiesta seguente crea una connessione di base per Spark:
curl -X POST \
'https://platform.adobe.io/data/foundation/flowservice/connections' \
-H 'Authorization: Bearer {ACCESS_TOKEN}' \
-H 'x-api-key: {API_KEY}' \
-H 'x-gw-ims-org-id: {ORG_ID}' \
-H 'x-sandbox-name: {SANDBOX_NAME}' \
-H 'Content-Type: application/json' \
-d '{
"name": "Spark test connection",
"description": "A Spark test connection",
"auth": {
"specName": "HDInsights Basic Authentication",
"params": {
"host": "{HOST}",
"username": "{USERNAME}",
"password":"{PASSWORD}"
}
},
"connectionSpec": {
"id": "6a8d82bc-1caf-45d1-908d-cadabc9d63a6",
"version": "1.0"
}
}'
Parametro | Descrizione |
---|---|
auth.params.host |
L'host del Spark server. |
auth.params.username |
Il nome utente associato al tuo Spark connessione. |
auth.params.password |
La password associata al Spark connessione. |
connectionSpec.id |
La Spark ID specifica di connessione: 6a8d82bc-1caf-45d1-908d-cadabc9d63a6 . |
Risposta
Una risposta corretta restituisce i dettagli della nuova connessione creata, incluso il relativo identificatore univoco (id
). Questo ID è necessario per esplorare i dati nell’esercitazione successiva.
{
"id": "a45f2f58-e3a2-46ba-9f2f-58e3a2b6baf2",
"etag": "\"900009d6-0000-0200-0000-5e8500010000\""
}
Seguendo questa esercitazione, hai creato un Spark connessione di base utilizzando Flow Service API. Puoi usare questo ID di connessione di base nelle seguenti esercitazioni: