Criar um fluxo de dados de transmissão para uma fonte de armazenamento em nuvem na interface

Última atualização em 2023-12-12
  • Tópicos
  • Sources
    Exibir mais informações sobre este tópico
  • Criado para:
  • Developer
    User
    Admin
    Leader

Um fluxo de dados é uma tarefa agendada que recupera e assimila dados de uma origem para um conjunto de dados do Adobe Experience Platform. Este tutorial fornece etapas para criar um fluxo de dados de transmissão para uma fonte de armazenamento em nuvem na interface do usuário.

Antes de tentar este tutorial, primeiro você deve estabelecer uma conexão válida e autenticada entre sua conta de armazenamento em nuvem e a Platform. Se você ainda não tiver uma conexão autenticada, consulte um dos seguintes tutoriais para obter informações sobre como autenticar suas contas de armazenamento da nuvem de transmissão:

Introdução

Este tutorial requer uma compreensão funcional dos seguintes componentes do Adobe Experience Platform:

  • Fluxos de dados: os fluxos de dados são uma representação de trabalhos de dados que movem os dados pela Plataforma. Os fluxos de dados são configurados em diferentes serviços, de origens a Identity Service, para Profile, e para Destinations.
  • Preparação de dados: o Preparo de dados permite que os engenheiros de dados mapeiem, transformem e validem dados de e para o Experience Data Model (XDM). O Preparo de dados é exibido como uma etapa de "Mapa" nos processos de Assimilação de dados, incluindo o fluxo de trabalho Assimilação de CSV.
  • Experience Data Model (XDM) Sistema: o quadro normalizado pelo qual Experience Platform organiza os dados de experiência do cliente.
  • Real-Time Customer Profile: fornece um perfil de consumidor unificado em tempo real com base em dados agregados de várias fontes.

Adicionar dados

OBSERVAÇÃO

Você só pode criar um fluxo de dados de origem por grupo de consumidores para um determinado Hub de Eventos.

Depois de criar a sua conta de armazenamento em nuvem de streaming, a variável Selecionar dados é exibida, fornecendo uma interface para você selecionar qual fluxo de dados trará para a Platform.

  • A parte esquerda da interface é um navegador que permite visualizar os fluxos de dados disponíveis em sua conta;
  • A parte direita da interface permite visualizar até 100 linhas de dados de um arquivo JSON.

interface

Selecione o fluxo de dados que deseja usar e selecione Escolher arquivo para fazer upload de um schema de amostra.

DICA

Se os dados forem compatíveis com XDM, você poderá ignorar o upload de um esquema de amostra e selecionar Próxima para continuar.

select-stream

Depois que o esquema for carregado, a interface de visualização será atualizada para exibir uma visualização do esquema carregado. A interface de visualização permite inspecionar o conteúdo e a estrutura de um arquivo. Você também pode usar a variável Campo de pesquisa para acessar itens específicos no esquema.

Quando terminar, selecione Próxima.

schema-preview

Mapeamento

A variável Mapeamento é exibida, fornecendo uma interface para mapear os dados de origem para um conjunto de dados da Platform.

Escolha um conjunto de dados para os dados de entrada que serão assimilados. Você pode usar um conjunto de dados existente ou criar um novo.

Novo conjunto de dados

Para assimilar dados em um novo conjunto de dados, selecione Novo conjunto de dados e insira um nome e uma descrição para o conjunto de dados nos campos fornecidos. Para adicionar um esquema, você pode inserir um nome de esquema existente na Selecionar esquema caixa de diálogo. Como alternativa, você pode selecionar Pesquisa avançada de esquema para procurar um esquema apropriado.

novo conjunto de dados

A variável Selecionar esquema é exibida, fornecendo uma lista dos esquemas disponíveis para escolha. Selecione um esquema na lista para atualizar o painel direito para exibir detalhes específicos do esquema selecionado, incluindo informações sobre se o esquema está ativado para Profile.

Depois de identificar e selecionar o esquema que deseja usar, selecione Concluído.

select-schema

A variável Conjunto de dados de destino A página é atualizada com o esquema selecionado exibido como parte do conjunto de dados. Durante essa etapa, é possível habilitar o conjunto de dados para Profile e criar uma visualização integral dos atributos e comportamentos de uma entidade. Os dados de todos os conjuntos de dados habilitados serão incluídos em Profile As alterações e são aplicadas quando você salva o fluxo de dados.

Alterne a Conjunto de dados Perfil botão para ativar o conjunto de dados de destino para Profile.

novo perfil

Conjunto de dados existente

Para assimilar dados em um conjunto de dados existente, selecione Conjunto de dados existente e, em seguida, selecione o ícone do conjunto de dados.

conjunto de dados existente

A variável Selecionar conjunto de dados será exibida, fornecendo uma lista dos conjuntos de dados disponíveis para escolha. Selecione um conjunto de dados na lista para atualizar o painel direito para exibir detalhes específicos do conjunto de dados selecionado, incluindo informações sobre se o conjunto de dados pode ser ativado para Profile.

Depois de identificar e selecionar o conjunto de dados que deseja usar, selecione Concluído.

select-dataset

Depois de selecionar o conjunto de dados, selecione a variável Profile ativar ou desativar o conjunto de dados para Profile.

perfil existente

Mapear campos padrão

Com seu conjunto de dados e esquema estabelecidos, a variável Mapear campos padrão é exibida, permitindo configurar manualmente os campos de mapeamento para seus dados.

DICA

A Platform fornece recomendações inteligentes para campos mapeados automaticamente com base no esquema ou conjunto de dados de destino selecionado. Você pode ajustar manualmente as regras de mapeamento para atender aos seus casos de uso.

Com base nas suas necessidades, você pode optar por mapear campos diretamente ou usar funções de preparação de dados para transformar dados de origem para derivar valores calculados ou calculados. Para obter etapas abrangentes sobre o uso da interface do mapeador e campos calculados, consulte o Guia da interface de preparação de dados.

Após mapear os dados de origem, selecione Próxima.

mapeamento

Detalhes do fluxo de dados

A variável Detalhes do fluxo de dados é exibida, permitindo nomear e fornecer uma breve descrição sobre seu novo fluxo de dados.

Forneça valores para o fluxo de dados e selecione Próxima.

detalhes do fluxo de dados

Revisão

A variável Revisão é exibida, permitindo que você revise seu novo fluxo de dados antes de ele ser criado. Os detalhes são agrupados nas seguintes categorias:

  • Conexão: exibe o nome da conta, o tipo de origem e outras informações diversas específicas da fonte de armazenamento na nuvem de streaming que você está usando.
  • Atribuir conjunto de dados e mapear campos: exibe o conjunto de dados e o esquema de destino que você está usando para o fluxo de dados.

Depois de revisar o fluxo de dados, selecione Concluir e aguarde algum tempo para criar o fluxo de dados.

revisão

Monitorar e excluir seu fluxo de dados

Depois que o fluxo de dados de armazenamento na nuvem de transmissão for criado, você poderá monitorar os dados que estão sendo assimilados por meio dele. Para obter mais informações sobre monitoramento e exclusão de fluxos de dados de transmissão, consulte o tutorial em monitoramento de fluxos de dados de transmissão.

Próximas etapas

Seguindo este tutorial, você criou com êxito um fluxo de dados para transmitir dados de uma fonte de armazenamento na nuvem. Os dados de entrada agora podem ser usados por serviços downstream da plataforma, como Real-Time Customer Profile e Data Science Workspace. Consulte os seguintes documentos para obter mais detalhes:

Nesta página