Ingesta por lotes

En Experience Platform, un lote es un conjunto de datos recopilados durante un período de tiempo y procesados juntos como una sola unidad. Los conjuntos de datos están formados por lotes. Puede utilizar la ingesta por lotes para introducir datos en Experience Platform como archivos por lotes. Una vez introducidos, los lotes proporcionan metadatos que describen el número de registros introducidos correctamente, así como los registros con errores y los mensajes de error asociados.

Los archivos de datos cargados manualmente, como los archivos CSV planos (asignados a esquemas XDM) y archivos de parquet, se deben introducir mediante este método.

Para obtener más información, lea la descripción general de la ingesta por lotes.

Fuentes

También puede introducir datos conectándose a fuentes de Experience Platform. Experience Platform mantiene un catálogo de una variedad de fuentes de datos a las que puede conectarse e introducir datos. Estas fuentes pueden ser aplicaciones nativas de Adobe, como la fuente de Adobe Analytics o la fuente de Marketo Engage. También puede conectarse a orígenes de terceros como el origen Amazon S3 y el origen Google Cloud Storage.

Las fuentes se agrupan en diferentes categorías, como almacenamiento en la nube, bases de datos y sistemas CRM. Una fuente determinada puede admitir la ingesta por lotes o de flujo continuo.

Con las fuentes, puede introducir datos de una serie de fuentes de datos diferentes y de diferentes categorías de casos de uso. Además, la ingesta de datos a través de una fuente le ofrece la oportunidad de autenticarse con la fuente de datos externa, configurar una programación de ingesta y administrar el rendimiento de la ingesta.

Para obtener más información, lea la descripción general de orígenes.

Creación de esquemas asistidos por ML

Para integrar rápidamente nuevas fuentes de datos, ahora puede utilizar algoritmos de aprendizaje automático para generar un esquema a partir de datos de ejemplo. Esta automatización simplifica la creación de esquemas precisos, reduce los errores y acelera el proceso desde la recopilación de datos hasta el análisis y las perspectivas.

Consulte la guía de creación de esquemas asistidos por ML para obtener más información sobre este flujo de trabajo.

Preparación de los datos

Aunque la preparación de datos no es un método de ingesta, es una parte importante del proceso de ingesta de datos. Utilice las funciones de preparación de datos para asignar, transformar y validar datos desde y hacia el modelo de datos de experiencia (XDM) antes de crear un flujo de datos para introducir los datos en Experience Platform. La preparación de datos aparece como el paso "Asignación" en la interfaz de usuario de Experience Platform durante el proceso de ingesta de datos.

Para obtener más información, lea la descripción general de la preparación de datos.

Métodos de ingesta por streaming

En la tabla siguiente se describen los distintos métodos que se pueden utilizar para introducir datos de flujo continuo en Experience Platform.

Fuentes de streaming
MétodoCasos de uso comunesProtocolosConsideraciones
Adobe Web/Mobile SDK
  • Recopilación de datos de sitios web y aplicaciones móviles.
  • Método preferido para la colección del lado del cliente.
Push, HTTP, JSON
  • Implemente varias aplicaciones de Adobe aprovechando un solo SDK.
Conector de API HTTP
  • Recopilación de fuentes de flujo continuo, transacciones, eventos y señales relevantes de clientes.
Push, API de REST, JSON
  • Los datos sin procesar o XDM se transmiten directamente al concentrador, sin segmentación de Edge en tiempo real ni reenvío de eventos.
Edge Network API
  • Recopilación de fuentes de flujo continuo, transacciones, eventos relevantes de clientes y señales de Edge Network distribuidos globalmente.
Push, API de REST, JSON
  • Los datos se transmiten a través de Edge Network. Compatibilidad con la segmentación en tiempo real y el reenvío de eventos en Edge.
Aplicaciones Adobe
  • Ingesta de datos desde aplicaciones como Adobe Analytics, Marketo Engage, Adobe Campaign Managed Services, Adobe Target, Adobe Audience Manager
Conectores push y Source y API
  • El método recomendado es migrar al SDK web/móvil en lugar de utilizar los SDK de aplicaciones tradicionales.
Fuentes de streaming
  • Ingesta de un flujo de eventos empresarial, que generalmente se utiliza para compartir datos empresariales con varias aplicaciones de flujo descendente.
Push, API de REST, JSON
  • Los datos se transmiten en formato JSON y se pueden asignar al esquema XDM.

SDK de fuentes de streaming

  • Utilice las funciones de autoservicio de fuentes de autoservicio de SDK de streaming para integrar su propia fuente de datos en el catálogo de fuentes de Experience Platform.
Push, API HTTP, JSON
  • Algunos ejemplos de fuentes de streaming integradas por socios son: Braze, Pendo y RainFocus.

Métodos de ingesta por lotes

En la tabla siguiente se describen los distintos métodos que se pueden utilizar para introducir datos por lotes en Experience Platform.

Orígenes de lotes
MétodoCasos de uso comunesProtocolosConsideraciones
API de ingesta por lotes
  • Ingesta desde una cola administrada por la empresa. Utilice la ingesta por lotes si es necesario preparar y formatear los datos antes de la ingesta.
Push, JSON o Parquet
  • Debe administrar lotes y archivos para la ingesta.
Orígenes de lotes
  • Enfoque común para la ingesta de datos desde el almacenamiento en la nube, CRM y aplicaciones de automatización de marketing.
  • Ideal para ingerir grandes cantidades de datos históricos.
Extraer, CSV, JSON, Parquet
  • Ingesta de Source en función de intervalos programados preconfigurados.
Zona de aterrizaje de datos
  • Almacenamiento de archivos basado en la nube aprovisionado por Adobe. Tiene acceso a un contenedor de zona de aterrizaje de datos por zona protegida.
  • Inserte sus archivos en la zona de aterrizaje de datos para su posterior ingesta en Experience Platform.
Push, CSV, JSON, parquet
  • Experience Platform aplica un plazo de caducidad estricto de siete días a todos los archivos y carpetas cargados en un contenedor de zona de aterrizaje de datos. Todos los archivos y carpetas se eliminan pasados siete días.
SDK de fuentes por lotes
  • Utilice las funciones de autoservicio de SDK por lotes de fuentes de autoservicio para integrar su propia fuente de datos en el catálogo de fuentes de Experience Platform.
  • Ideal para conectores de socios o para una experiencia de flujo de trabajo adaptada para configurar un conector empresarial.
Extracción, API de REST, CSV o JSON
  • Algunos ejemplos de fuentes por lotes integradas por socios son: Mailchimp, OneTrust, Zendesk