Resumen de ingesta de datos
En Adobe Experience Platform, la ingesta de datos consiste en el transporte de datos desde fuentes diversas a un medio de almacenamiento al que una organización puede acceder, utilizar y analizar. La ingesta de datos en Experience Platform se puede agrupar en dos categorías principales: ingesta de transmisión y ingesta por lotes.
En la transmisión por secuencias y la ingesta por lotes hay una serie de métodos diferentes que puede utilizar para introducir los datos en Experience Platform. Estos métodos incluyen el uso de una variedad de orígenes y la conexión a estos orígenes para luego introducir datos en Experience Platform.
Lea este documento para obtener una descripción general de las muchas formas diferentes en que se pueden ingerir datos en Experience Platform.
Ingesta por streaming streaming
Puede utilizar la introducción por transmisión continua para enviar datos desde dispositivos del cliente y del lado del servidor a Experience Platform en tiempo real. Experience Platform admite el uso de entradas de datos para transmitir datos de experiencia entrantes, que persisten en conjuntos de datos habilitados para flujo continuo dentro del lago de datos. Las entradas de datos se pueden configurar para autenticar automáticamente los datos que recopilan, asegurándose de que los datos provengan de una fuente de confianza.
Para obtener más información, lea la descripción general de la ingesta de transmisión.
Ingesta por lotes batch
En Experience Platform, un lote es un conjunto de datos recopilados durante un período de tiempo y procesados juntos como una sola unidad. Los conjuntos de datos están formados por lotes. Puede utilizar la ingesta por lotes para introducir datos en Experience Platform como archivos por lotes. Una vez introducidos, los lotes proporcionan metadatos que describen el número de registros introducidos correctamente, así como los registros con errores y los mensajes de error asociados.
Los archivos de datos cargados manualmente, como los archivos CSV planos (asignados a esquemas XDM) y archivos de parquet, se deben introducir mediante este método.
Para obtener más información, lea la descripción general de la ingesta por lotes.
Fuentes sources
También puede introducir datos conectándose a fuentes de Experience Platform. Experience Platform mantiene un catálogo de una variedad de fuentes de datos a las que puede conectarse e introducir datos. Estas fuentes pueden ser aplicaciones nativas de Adobe, como la fuente de Adobe Analytics o la fuente de Marketo Engage. También puede conectarse a orígenes de terceros como el origen Amazon S3 y el origen Google Cloud Storage.
Las fuentes se agrupan en diferentes categorías, como almacenamiento en la nube, bases de datos y sistemas CRM. Una fuente determinada puede admitir la ingesta por lotes o de flujo continuo.
Con las fuentes, puede introducir datos de una serie de fuentes de datos diferentes y de diferentes categorías de casos de uso. Además, la ingesta de datos a través de una fuente le ofrece la oportunidad de autenticarse con la fuente de datos externa, configurar una programación de ingesta y administrar el rendimiento de la ingesta.
Para obtener más información, lea la descripción general de orígenes.
Creación de esquemas asistidos por ML ml-assisted-schema-creation
Para integrar rápidamente nuevas fuentes de datos, ahora puede utilizar algoritmos de aprendizaje automático para generar un esquema a partir de datos de ejemplo. Esta automatización simplifica la creación de esquemas precisos, reduce los errores y acelera el proceso desde la recopilación de datos hasta el análisis y las perspectivas.
Consulte la guía de creación de esquemas asistidos por ML para obtener más información sobre este flujo de trabajo.
Preparación de los datos data-prep
Aunque la preparación de datos no es un método de ingesta, es una parte importante del proceso de ingesta de datos. Utilice las funciones de preparación de datos para asignar, transformar y validar datos desde y hacia el modelo de datos de experiencia (XDM) antes de crear un flujo de datos para introducir los datos en Experience Platform. La preparación de datos aparece como el paso "Asignación" en la interfaz de usuario de Experience Platform durante el proceso de ingesta de datos.
Para obtener más información, lea la descripción general de la preparación de datos.
Métodos de ingesta por streaming streaming-ingestion-methods
En la tabla siguiente se describen los distintos métodos que se pueden utilizar para introducir datos de flujo continuo en Experience Platform.
Métodos de ingesta por lotes batch-ingestion-methods
En la tabla siguiente se describen los distintos métodos que se pueden utilizar para introducir datos por lotes en Experience Platform.
Pasos siguientes y recursos adicionales
Este documento proporciona una breve introducción a los diferentes aspectos de Data Ingestion en Experience Platform. Continúe leyendo la documentación de información general de cada método de ingesta para familiarizarse con sus diferentes capacidades, casos de uso y prácticas recomendadas. También puede complementar su aprendizaje viendo el siguiente vídeo de información general sobre la ingesta. Para obtener información sobre cómo Experience Platform realiza el seguimiento de los metadatos de los registros ingeridos, consulte la descripción general del servicio de catálogo.
