Visão geral da assimilação de dados

Última atualização: 4 de abril de 2025

Criado para:

  • Desenvolvedor

O Adobe Experience Platform reúne dados de várias fontes para ajudar os profissionais de marketing a entender melhor o comportamento de seus clientes. A assimilação de dados da Adobe Experience Platform representa os vários métodos pelos quais a Experience Platform assimila dados dessas fontes, bem como a forma como esses dados são mantidos no Data Lake para uso pelos serviços downstream da Experience Platform.

Este documento apresenta as três principais maneiras pelas quais os dados são assimilados no Experience Platform, com links para a respectiva documentação de visão geral para informações mais detalhadas.

Assimilação em lote

A assimilação em lote permite assimilar dados em Experience Platform como arquivos em lote. Lotes são unidades de dados que consistem em um ou mais arquivos que serão assimilados como uma única unidade. Depois de assimilados, os lotes fornecem metadados que descrevem o número de registros assimilados com êxito, bem como quaisquer registros com falha e mensagens de erro associadas.

Os arquivos de dados carregados manualmente, como arquivos CSV simples (mapeados para esquemas XDM) e os dataframes do Parquet devem ser assimilados usando esse método.

Consulte a visão geral de assimilação de lotes para obter mais informações.

TIP
Use JSON de linha única em vez de JSON de várias linhas como entrada para assimilação em lote. O JSON de linha única permite melhor desempenho, pois o sistema pode dividir um arquivo de entrada em várias partes e processá-las em paralelo, enquanto o JSON de várias linhas não pode ser dividido. Isso pode reduzir significativamente os custos de processamento de dados e melhorar a latência do processamento em lote.

Assimilação por transmissão

A assimilação de streaming permite enviar dados de dispositivos no lado do cliente e do servidor para o Experience Platform em tempo real. O Experience Platform oferece suporte ao uso de entradas de dados para transmitir dados de experiência recebidos, que são mantidos em conjuntos de dados habilitados para transmissão no Data Lake. As entradas de dados podem ser configuradas para autenticar automaticamente os dados coletados, garantindo que os dados sejam provenientes de uma fonte confiável.

Consulte a visão geral da assimilação de streaming para obter mais informações.

Origens

Experience Platform permite configurar conexões de origem com vários provedores de dados. Essas conexões permitem que você se autentique em suas fontes de dados externas, defina horas para execuções de assimilação e gerencie a taxa de transferência de assimilação.

As conexões do Source podem ser configuradas para coletar dados de outros aplicativos da Adobe (como Adobe Analytics e Adobe Audience Manager), fontes de armazenamento na nuvem de terceiros (como Azure Blob, Amazon S3, servidores FTP e servidores SFTP) e sistemas CRM de terceiros (como Microsoft Dynamics e Salesforce).

Consulte a Visão geral das fontes para obter mais informações.

Criação de esquema com ML

Para integrar rapidamente novas fontes de dados, agora é possível usar algoritmos de aprendizado de máquina do para gerar um esquema a partir de dados de amostra. Essa automação simplifica a criação de esquemas precisos, reduz erros e acelera o processo, da coleta de dados à análise e aos insights.

Consulte o Guia de criação de esquema assistido por aprendizado de máquina para obter mais informações sobre este fluxo de trabalho.