Validación de ingesta de streaming

La introducción por transmisión le permite cargar los datos en Adobe Experience Platform mediante transmisión por secuencias de puntos finales en tiempo real. Las API de ingesta de transmisión admiten dos modos de validación: sincrónico y asincrónico.

Primeros pasos

Esta guía requiere una comprensión práctica de los siguientes componentes de Adobe Experience Platform:

Leer llamadas de API de muestra

Este tutorial proporciona llamadas de API de ejemplo para demostrar cómo dar formato a las solicitudes. Estas incluyen rutas, encabezados obligatorios y cargas de solicitud con el formato correcto. También se proporciona el JSON de muestra devuelto en las respuestas de API. Para obtener información sobre las convenciones utilizadas en la documentación de las llamadas de API de ejemplo, consulte la sección sobre cómo leer llamadas de API de ejemplo en el Experience Platform guía de solución de problemas.

Recopilar valores para los encabezados obligatorios

Para realizar llamadas a Platform API, primero debe completar el tutorial de autenticación. Al completar el tutorial de autenticación, se proporcionan los valores para cada uno de los encabezados necesarios en todas las Experience Platform Llamadas de API, como se muestra a continuación:

Todos los recursos de Experience Platform, incluidos los que pertenecen al Schema Registry, están aisladas para zonas protegidas virtuales específicas. Todas las solicitudes a Platform Las API requieren un encabezado que especifique el nombre de la zona protegida en la que se realizará la operación:

Todas las solicitudes que contienen una carga útil (POST, PUT, PATCH) requieren un encabezado adicional:

Cobertura de validación

Streaming Validation Service abarca la validación en las siguientes áreas:

Validación sincrónica

La validación sincrónica es un método de validación que proporciona información inmediata sobre el motivo por el que ha fallado una ingesta. Sin embargo, si se produce un error, se pierden los registros que no superan la validación y se impide que se envíen de forma descendente. Como resultado, la validación sincrónica solo debe utilizarse durante el proceso de desarrollo. Al realizar la validación sincrónica, se informa a los llamadores tanto del resultado de la validación XDM como, si falla, del motivo del error.

De forma predeterminada, la validación sincrónica no está activada. Para habilitarlo, debe pasar el parámetro de consulta opcional syncValidation=true al realizar llamadas de API. Además, la validación sincrónica solo está disponible actualmente si el punto final de la secuencia se encuentra en el centro de datos de VA7.

Si un mensaje falla durante la validación sincrónica, no se escribirá en la cola de salida, que proporciona comentarios inmediatos a los usuarios.

Formato de API

POST /collection/{CONNECTION_ID}?syncValidation=true

Solicitud

Envíe la siguiente solicitud para introducir datos a la entrada de datos con validación sincrónica:

curl -X POST https://dcs.adobedc.net/collection/{CONNECTION_ID}?syncValidation=true \
  -H "Content-Type: application/json" \
  -d '{JSON_PAYLOAD}'

Respuesta

Con la validación sincrónica habilitada, una respuesta correcta incluye los errores de validación encontrados en su carga útil:

{
    "type": "http://ns.adobe.com/adobecloud/problem/data-collection-service/inlet",
    "status": 400,
    "title": "Invalid XDM Message Format",
    "report": {
        "message": "inletId: [6aca7aa2d87ebd6b2780ca5724d94324a14475f140a2b69373dd5c714430dfd4] imsOrgId: [7BF122A65C5B3FE40A494026@AdobeOrg] Message is invalid",
        "cause": {
            "_streamingValidation": [
                {
                    "schemaLocation": "#",
                    "pointerToViolation": "#",
                    "causingExceptions": [
                        {
                            "schemaLocation": "#",
                            "pointerToViolation": "#",
                            "causingExceptions": [],
                            "keyword": "additionalProperties",
                            "message": "extraneous key [workEmail] is not permitted"
                        },
                        {
                            "schemaLocation": "#",
                            "pointerToViolation": "#",
                            "causingExceptions": [],
                            "keyword": "additionalProperties",
                            "message": "extraneous key [person] is not permitted"
                        },
                        {
                            "schemaLocation": "#/properties/_id",
                            "pointerToViolation": "#/_id",
                            "causingExceptions": [],
                            "keyword": "type",
                            "message": "expected type: String, found: Long"
                        }
                    ],
                    "message": "3 schema violations found"
                }
            ]
        }
    }
}

La respuesta anterior enumera cuántas violaciones de esquema se encontraron y cuáles fueron. Por ejemplo, esta respuesta indica que las claves workEmail y person no se definieron en el esquema y, por lo tanto, no están permitidos. También indica el valor de _id como incorrecto, ya que el esquema esperaba un string, pero a long en su lugar. Tenga en cuenta que una vez que se encuentren cinco errores, el servicio de validación parada Procesando ese mensaje. Sin embargo, se seguirán analizando otros mensajes.

Validación asincrónica

La validación asincrónica es un método de validación que no proporciona comentarios inmediatos. En su lugar, los datos se envían a un lote fallido en Data Lake para evitar la pérdida de datos. Estos datos con errores se pueden recuperar más adelante para su análisis y reproducción. Este método debe utilizarse en producción. A menos que se solicite lo contrario, la ingesta de transmisión funciona en modo de validación asincrónico.

Formato de API

POST /collection/{CONNECTION_ID}

Solicitud

Envíe la siguiente solicitud para introducir datos a la entrada de datos con validación asíncrona:

curl -X POST https://dcs.adobedc.net/collection/{CONNECTION_ID} \
  -H "Content-Type: application/json" \
  -d '{JSON_PAYLOAD}'

Respuesta

Con la validación asincrónica habilitada, una respuesta correcta devuelve lo siguiente:

{
    "inletId": "f6ca9706d61de3b78be69e2673ad68ab9fb2cece0c1e1afc071718a0033e6877",
    "xactionId": "1555445493896:8600:8",
    "receivedTimeMs": 1555445493932,
    "syncValidation": {
        "skipped": true
    }
}

Tenga en cuenta cómo la respuesta indica que la validación sincrónica se ha omitido, ya que no se ha solicitado explícitamente.

Apéndice

Esta sección contiene información sobre el significado de los distintos códigos de estado para las respuestas de ingesta de datos.

Códigos de estado