Crear una conexión base Google BigQuery mediante la API Flow Service

Last update: Fri Sep 20 2024 00:00:00 GMT+0000 (Coordinated Universal Time)

Temas:

Creado para:

Desarrollador

IMPORTANT

El origen Google BigQuery está disponible en el catálogo de orígenes para los usuarios que han adquirido Real-time Customer Data Platform Ultimate.

Una conexión base representa la conexión autenticada entre un origen y Adobe Experience Platform.

Lea esta guía para aprender a crear una conexión base para Google BigQuery mediante la Flow Service API.

Introducción

Esta guía requiere una comprensión práctica de los siguientes componentes de Experience Platform:

Fuentes: El Experience Platform permite la ingesta de datos de varias fuentes, al tiempo que le ofrece la capacidad de estructurar, etiquetar y mejorar los datos entrantes mediante los servicios de Platform.
Zonas protegidas: El Experience Platform proporciona zonas protegidas virtuales que dividen una sola instancia de Platform en entornos virtuales independientes para ayudar a desarrollar y evolucionar aplicaciones de experiencia digital.

Las secciones siguientes proporcionan información adicional que necesitará conocer para conectarse correctamente a Google BigQuery mediante la API Flow Service.

Recopilar credenciales necesarias

Lea la Google BigQuery guía de autenticación para ver los pasos detallados sobre cómo recopilar las credenciales requeridas.

Uso de API de Platform

Para obtener información sobre cómo realizar llamadas correctamente a las API de Platform, consulte la guía sobre introducción a las API de Platform.

Crear una conexión base

Una conexión base retiene información entre el origen y Platform, incluidas las credenciales de autenticación del origen, el estado actual de la conexión y el ID único de conexión base. El ID de conexión base le permite explorar y navegar por archivos desde el origen e identificar los elementos específicos que desea introducir, incluida la información sobre sus tipos de datos y formatos.

Para crear un identificador de conexión base, realice una solicitud de POST al extremo /connections y proporcione las credenciales de autenticación Google BigQuery como parte de los parámetros de solicitud.

Formato de API

POST /connections

Usar autenticación básica

Solicitud

La siguiente solicitud crea una conexión base para Google BigQuery mediante autenticación básica:

code language-shell

code language-shell
curl -X POST \ 'https://platform.adobe.io/data/foundation/flowservice/connections' \ -H 'Authorization: Bearer {ACCESS_TOKEN}' \ -H 'x-api-key: {API_KEY}' \ -H 'x-gw-ims-org-id: {ORG_ID}' \ -H 'x-sandbox-name: {SANDBOX_NAME}' \ -H 'Content-Type: application/json' \ -d '{ "name": "Google BigQuery connection with basic authentication", "description": "Google BigQuery connection with basic authentication", "auth": { "specName": "Basic Authentication", "type": "OAuth2.0", "params": { "project": "{PROJECT}", "clientId": "{CLIENT_ID}, "clientSecret": "{CLIENT_SECRET}", "refreshToken": "{REFRESH_TOKEN}" } }, "connectionSpec": { "id": "3c9b37f8-13a6-43d8-bad3-b863b941fedd", "version": "1.0" } }'

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "Google BigQuery connection with basic authentication",
        "description": "Google BigQuery connection with basic authentication",
        "auth": {
            "specName": "Basic Authentication",
            "type": "OAuth2.0",
            "params": {
                    "project": "{PROJECT}",
                    "clientId": "{CLIENT_ID},
                    "clientSecret": "{CLIENT_SECRET}",
                    "refreshToken": "{REFRESH_TOKEN}"
                }
        },
        "connectionSpec": {
            "id": "3c9b37f8-13a6-43d8-bad3-b863b941fedd",
            "version": "1.0"
        }
    }'

table 0-row-2 1-row-2 2-row-2 3-row-2 4-row-2 5-row-2
Propiedad	Descripción
`auth.params.project`	Identificador de proyecto del proyecto predeterminado Google BigQuery que se va a consultar. en contra.
`auth.params.clientId`	El valor de ID utilizado para generar el token de actualización.
`auth.params.clientSecret`	Valor de cliente utilizado para generar el token de actualización.
`auth.params.refreshToken`	El token de actualización obtenido de Google se usó para autorizar el acceso a Google BigQuery.
`connectionSpec.id`	Identificador de especificación de conexión Google BigQuery: `3c9b37f8-13a6-43d8-bad3-b863b941fedd`.

Respuesta

Una respuesta correcta devuelve detalles de la conexión recién creada, incluido su identificador único (id). Este ID es necesario para explorar los datos en el siguiente tutorial.

code language-json
`{ "id": "6990abad-977d-41b9-a85d-17ea8cf1c0e4", "etag": "\"ca00acbf-0000-0200-0000-60149e1e0000\"" }`

Usar autenticación de servicio

Solicitud

La siguiente solicitud crea una conexión base para Google BigQuery mediante la autenticación de servicio:

code language-shell

code language-shell
curl -X POST \ 'https://platform.adobe.io/data/foundation/flowservice/connections' \ -H 'Authorization: Bearer {ACCESS_TOKEN}' \ -H 'x-api-key: {API_KEY}' \ -H 'x-gw-ims-org-id: {ORG_ID}' \ -H 'x-sandbox-name: {SANDBOX_NAME}' \ -H 'Content-Type: application/json' \ -d '{ "name": "Google BigQuery base connection with service account", "description": "Google BigQuery connection with service account", "auth": { "specName": "Service Authentication", "params": { "projectId": "{PROJECT_ID}", "keyFileContent": "{KEY_FILE_CONTENT}, "largeResultsDataSetId": "{LARGE_RESULTS_DATASET_ID}" } }, "connectionSpec": { "id": "3c9b37f8-13a6-43d8-bad3-b863b941fedd", "version": "1.0" } }'

curl -X POST \
    'https://platform.adobe.io/data/foundation/flowservice/connections' \
    -H 'Authorization: Bearer {ACCESS_TOKEN}' \
    -H 'x-api-key: {API_KEY}' \
    -H 'x-gw-ims-org-id: {ORG_ID}' \
    -H 'x-sandbox-name: {SANDBOX_NAME}' \
    -H 'Content-Type: application/json' \
    -d '{
        "name": "Google BigQuery base connection with service account",
        "description": "Google BigQuery connection with service account",
        "auth": {
            "specName": "Service Authentication",
            "params": {
                    "projectId": "{PROJECT_ID}",
                    "keyFileContent": "{KEY_FILE_CONTENT},
                    "largeResultsDataSetId": "{LARGE_RESULTS_DATASET_ID}"
                }
        },
        "connectionSpec": {
            "id": "3c9b37f8-13a6-43d8-bad3-b863b941fedd",
            "version": "1.0"
        }
    }'

table 0-row-2 1-row-2 2-row-2 3-row-2
Propiedad	Descripción
`auth.params.projectId`	Identificador de proyecto del proyecto predeterminado Google BigQuery que se va a consultar. en contra.
`auth.params.keyFileContent`	El archivo de clave que se utiliza para autenticar la cuenta de servicio. Debe codificar el contenido del archivo de claves en Base64.
`auth.params.largeResultsDataSetId`	(Opcional) El ID del conjunto de datos Google BigQuery creado previamente que es necesario para habilitar la compatibilidad con grandes conjuntos de resultados.

Respuesta

Una respuesta correcta devuelve detalles de la conexión recién creada, incluido su identificador único (id). Este ID es necesario para explorar los datos en el siguiente tutorial.

code language-json
`{ "id": "6990abad-977d-41b9-a85d-17ea8cf1c0e4", "etag": "\"ca00acbf-0000-0200-0000-60149e1e0000\"" }`

Pasos siguientes

Siguiendo este tutorial, ha creado una conexión base Google BigQuery mediante la API Flow Service. Puede utilizar este ID de conexión base en los siguientes tutoriales:

recommendation-more-help

337b99bb-92fb-42ae-b6b7-c7042161d089