Noções básicas da composição do esquema

Saiba mais sobre esquemas do Experience Data Model (XDM) e os componentes, princípios e práticas recomendadas para a composição de esquemas no Adobe Experience Platform. Para obter informações gerais sobre o XDM e como ele é usado no Platform, consulte a visão geral do Sistema XDM.

Noções básicas sobre esquemas understanding-schemas

Um esquema é um conjunto de regras que representam e validam a estrutura e o formato dos dados. Em um alto nível, os esquemas fornecem uma definição abstrata de um objeto do mundo real (como uma pessoa) e destacam quais dados devem ser incluídos em cada instância desse objeto (como nome, sobrenome, aniversário e assim por diante).

Além de descrever a estrutura dos dados, os esquemas aplicam restrições e expectativas aos dados para que eles possam ser validados à medida que se movem entre sistemas. Essas definições padrão permitem que os dados sejam interpretados de forma consistente, independentemente da origem, e eliminam a necessidade de tradução entre aplicativos.

O Experience Platform mantém essa normalização semântica usando schemas. Os Esquemas são a maneira padrão de descrever dados na Experience Platform, permitindo que todos os dados que estão em conformidade com os esquemas sejam reutilizados em uma organização sem conflitos ou até compartilhados entre várias organizações.

Os esquemas XDM são ideais para armazenar grandes quantidades de dados complexos em um formato independente. Consulte as seções em objetos inseridos e big data no apêndice deste documento para obter mais informações sobre como o XDM faz isso.

Fluxos de trabalho baseados em esquema no Experience Platform schema-based-workflows

A normalização é um conceito fundamental por trás do Experience Platform. O XDM, orientado pelo Adobe, é um esforço para padronizar os dados de experiência do cliente e definir esquemas padrão para o gerenciamento da experiência do cliente.

A infraestrutura em que o Experience Platform é construído, conhecida como XDM System, facilita fluxos de trabalho baseados em esquema e inclui o Schema Registry, Schema Editor, metadados de esquema e padrões de consumo de serviço. Consulte a Visão geral do sistema XDM para obter mais informações.

Há vários benefícios principais em usar esquemas no Experience Platform. Primeiro, os esquemas permitem uma melhor governança de dados e minimização de dados, o que é especialmente importante com as regulamentações de privacidade. Em segundo lugar, a criação de esquemas com componentes padrão do Adobe permite insights prontos para uso e o uso de serviços de IA/ML com personalizações mínimas. Por último, os esquemas fornecem infraestrutura para compartilhamento de dados, insights e orquestração eficiente.

Planejamento do esquema planning

A primeira etapa na criação de um esquema é determinar o conceito, ou objeto real, que você está tentando capturar no esquema. Depois de identificar o conceito que está tentando descrever, comece a planejar seu esquema pensando em coisas como o tipo de dados, possíveis campos de identidade e como o esquema pode evoluir no futuro.

Comportamentos de dados no Experience Platform data-behaviors

Os dados destinados ao uso em Experience Platform são agrupados em dois tipos de comportamento:

Todos os esquemas XDM descrevem dados que podem ser categorizados como registro ou série de tempo. O comportamento dos dados de um schema é definido pela classe do schema, que é atribuída a um schema quando ele é criado pela primeira vez. As classes XDM são descritas com mais detalhes posteriormente neste documento.

Os esquemas de registro e série temporal contêm um mapa de identidades (xdm:identityMap). Este campo contém a representação de identidade de uma pessoa, desenhada a partir de campos marcados como "Identidade", conforme descrito na próxima seção.

Identidade identity

Os esquemas são usados para assimilar dados no Experience Platform. Esses dados podem ser usados em vários serviços para criar uma visualização única e unificada de uma entidade individual. Portanto, é importante ao projetar esquemas para identidades de clientes considerar quais campos podem ser usados para identificar um assunto, independentemente de onde os dados possam vir.

Para ajudar nesse processo, os campos principais em seus esquemas podem ser marcados como identidades. Após a assimilação de dados, os dados nesses campos são inseridos no "Gráfico de identidade" desse indivíduo. Os dados do gráfico podem ser acessados por Real-Time Customer Profile e outros serviços do Experience Platform para fornecer uma visualização unificada de cada cliente individual.

Os campos comumente marcados como "Identidade" incluem: endereço de email, número de telefone, Experience Cloud ID (ECID), ID do CRM ou outros campos de ID exclusivos. Considere quaisquer identificadores exclusivos específicos da sua organização, pois eles também podem ser bons campos de "Identidade".

É importante pensar nas identidades do cliente durante a fase de planejamento do esquema para ajudar a garantir que os dados estejam sendo trazidos juntos para criar o perfil mais robusto possível. Para saber mais sobre como as informações de identidade podem ajudar você a fornecer experiências digitais aos seus clientes, consulte a visão geral do Serviço de identidade. Consulte o documento de práticas recomendadas de modelagem de dados para dicas sobre o uso de identidades ao criar um esquema.

Há duas maneiras de enviar dados de identidade para a Platform:

identityMap identityMap

identityMap é um campo do tipo mapa que descreve os vários valores de identidade para um indivíduo, juntamente com seus namespaces associados. Este campo pode ser usado para fornecer informações de identidade para seus esquemas, em vez de definir valores de identidade na estrutura do próprio esquema.

A principal desvantagem de usar o identityMap é que as identidades se tornam incorporadas aos dados e, consequentemente, menos visíveis. Se estiver assimilando dados brutos, você deve definir campos de identidade individuais na estrutura do esquema real.

No entanto, os mapas de identidade podem ser úteis se houver um número variável de identidades para um esquema ou se você estiver trazendo dados de fontes que armazenam identidades juntas (como Airship ou Adobe Audience Manager). Além disso, os mapas de identidade serão necessários se você estiver usando o Adobe Experience Platform Mobile SDK.

Um exemplo de um mapa de identidade simples seria semelhante ao seguinte:

"identityMap": {
  "email": [
    {
      "id": "jsmith@example.com",
      "primary": true
    }
  ],
  "ECID": [
    {
      "id": "87098882279810196101440938110216748923",
      "primary": false
    },
    {
      "id": "55019962992006103186215643814973128178",
      "primary": false
    }
  ],
  "CRMID": [
    {
      "id": "2e33192000007456-0365c00000000000",
      "primary": false
    }
  ]
}

Como mostra o exemplo acima, cada chave no objeto identityMap representa um namespace de identidade. O valor de cada chave é uma matriz de objetos, representando os valores de identidade (id) do respectivo namespace. Consulte a documentação Identity Service para obter uma lista de namespaces de identidade padrão reconhecidos por aplicativos Adobe.

Princípios de evolução do esquema evolution

À medida que a natureza das experiências digitais continua a evoluir, o mesmo deve acontecer com os esquemas utilizados para representá-las. Um esquema bem projetado é, portanto, capaz de se adaptar e evoluir conforme necessário, sem causar alterações destrutivas nas versões anteriores do esquema.

Como manter a compatibilidade com versões anteriores é crucial para a evolução do esquema, o Experience Platform impõe um princípio de controle de versão puramente aditivo. Esse princípio garante que qualquer revisão do esquema resulte apenas em atualizações e alterações não destrutivas. Em outras palavras, não há suporte para alterações de quebra.

A tabela a seguir detalha quais alterações são suportadas ao editar esquemas, grupos de campos e tipos de dados:

*Consulte a seção abaixo para considerações importantes sobre a configuração de novos campos obrigatórios.

Campos obrigatórios

Campos de esquema individuais podem ser marcados como obrigatórios, o que significa que quaisquer registros assimilados devem conter dados nesses campos para passar na validação. Por exemplo, definir o campo de identidade principal de um esquema conforme necessário pode ajudar a garantir que todos os registros assimilados participem do Perfil do cliente em tempo real. Da mesma forma, definir um campo de carimbo de data e hora conforme necessário garante que todos os eventos de série temporal sejam preservados cronologicamente.

Definindo campos conforme necessário após a assimilação post-ingestion-required-fields

Se um campo tiver sido usado para assimilar dados e não tiver sido originalmente definido como obrigatório, esse campo poderá ter um valor nulo para alguns registros. Se você definir esse campo como pós-assimilação obrigatória, todos os registros futuros deverão conter um valor para esse campo, mesmo que os registros históricos possam ser nulos.

Ao definir um campo opcional anteriormente como obrigatório, lembre-se do seguinte:

Esquemas e assimilação de dados

Para assimilar dados no Experience Platform, um conjunto de dados deve ser criado primeiro. Os conjuntos de dados são os blocos de construção para transformação e rastreamento de dados para Catalog Service e geralmente representam tabelas ou arquivos que contêm dados assimilados. Todos os conjuntos de dados se baseiam em esquemas XDM existentes, que fornecem restrições sobre o que os dados assimilados devem conter e como devem ser estruturados. Consulte a visão geral em Assimilação de dados Adobe Experience Platform para obter mais informações.

Blocos de construção de um esquema schema-building-blocks

O Experience Platform usa uma abordagem de composição na qual os blocos de construção padrão são combinados para criar esquemas. Essa abordagem promove a reutilização dos componentes existentes e promove a padronização em todo o setor para dar suporte a esquemas e componentes de fornecedores no Platform.

Os esquemas são compostos usando a seguinte fórmula:

Classe + Grupo de Campos de Esquema* = Esquema XDM

*Um esquema é composto por uma classe e zero ou mais grupos de campos de esquema. Isso significa que você pode compor um esquema de conjunto de dados sem usar grupos de campos.

Classe class

A composição de um esquema começa com a atribuição de uma classe. As classes definem os aspectos comportamentais dos dados que o esquema conterá (registro ou série temporal). Além disso, as classes descrevem o menor número de propriedades comuns que todos os esquemas baseados nessa classe precisariam incluir e fornecem uma maneira de vários conjuntos de dados compatíveis serem mesclados.

A classe de um esquema determina quais grupos de campos estão qualificados para uso nesse esquema. Isso é discutido com mais detalhes na próxima seção.

O Adobe fornece várias classes XDM padrão ("núcleo"). Duas dessas classes, XDM Individual Profile e XDM ExperienceEvent, são necessárias para quase todos os processos downstream da Platform. Além dessas classes principais, você também pode criar suas próprias classes personalizadas para descrever casos de uso mais específicos para sua organização. As classes personalizadas são definidas por uma organização quando não há classes principais definidas por Adobe disponíveis para descrever um caso de uso exclusivo.

A captura de tela a seguir demonstra como as classes são representadas na interface do usuário da plataforma. Como o esquema de exemplo mostrado não contém nenhum grupo de campos, todos os campos exibidos são fornecidos pela classe do esquema (Perfil individual XDM).

Para obter a lista mais atualizada de classes XDM padrão disponíveis, consulte o repositório XDM oficial. Como alternativa, consulte o guia em explorando componentes XDM se preferir exibir recursos na interface.

Grupo de campos field-group

Um grupo de campos é um componente reutilizável que define um ou mais campos que implementam determinadas funções, como detalhes pessoais, preferências de hotel ou endereço. Os grupos de campos devem ser incluídos como parte de um esquema que implementa uma classe compatível.

Os grupos de campos definem a(s) classe(s) com a(s) qual(is) eles são compatíveis, com base no comportamento dos dados que representam (registro ou série temporal). Isso significa que nem todos os grupos de campos estão disponíveis para uso com todas as classes.

Experience Platform inclui muitos grupos de campos de Adobe padrão, além de permitir que os fornecedores definam grupos de campos para seus usuários e que os usuários individuais definam grupos de campos para seus próprios conceitos específicos.

Por exemplo, para capturar detalhes como "Nome" e "Endereço Residencial" do esquema "Membros de Fidelidade", você poderá usar grupos de campos padrão que definem esses conceitos comuns. No entanto, os conceitos mais específicos da sua organização (como detalhes do programa de fidelidade personalizado ou atributos do produto) que podem não ser cobertos por grupos de campos padrão. Nesse caso, você deve definir seu próprio grupo de campos para capturar essas informações.

Lembre-se de que os esquemas são compostos de "zero ou mais" grupos de campos, portanto, isso significa que você pode compor um esquema válido sem usar nenhum grupo de campos.

A captura de tela a seguir demonstra como os grupos de campos são representados na interface do usuário da plataforma. Um único grupo de campos (Detalhes Demográficos) foi adicionado a um esquema neste exemplo, que fornece um agrupamento de campos para a estrutura do esquema.

Para obter a lista mais atualizada de grupos de campos XDM padrão disponíveis, consulte o repositório XDM oficial. Como alternativa, consulte o guia em explorando componentes XDM se preferir exibir recursos na interface.

Tipo de dados data-type

Os tipos de dados são usados como tipos de campo de referência em classes ou esquemas da mesma forma que os campos literais básicos. A principal diferença é que os tipos de dados podem definir vários subcampos da mesma forma que os grupos de campos. A principal diferença entre eles é que os tipos de dados podem ser incluídos em qualquer lugar de um esquema adicionando-o como o "tipo de dados" de um campo. Embora os grupos de campos sejam compatíveis apenas com determinadas classes, os tipos de dados podem ser incluídos em qualquer classe principal ou grupo de campos.

O Experience Platform fornece vários tipos de dados comuns como parte do Schema Registry para dar suporte ao uso de padrões padrão para descrever estruturas de dados comuns. Isso é explicado com mais detalhes nos tutoriais do Registro de esquemas e ficará mais claro à medida que você percorrer as etapas para definir os tipos de dados.

A captura de tela a seguir demonstra como os tipos de dados são representados na interface do usuário da plataforma. Um dos campos fornecidos pelo grupo de campos Detalhes Demográficos usa o tipo de dados "Objeto", conforme indicado pelo texto após o caractere de barra vertical (|) ao lado do nome do campo. Esse tipo de dados específico fornece vários subcampos relacionados ao nome de uma pessoa individual, uma construção que pode ser reutilizada para outros campos em que o nome de uma pessoa precisa ser capturado.

Para obter a lista mais atualizada dos tipos de dados XDM padrão disponíveis, consulte o repositório XDM oficial. Como alternativa, consulte o guia em explorando componentes XDM se preferir exibir recursos na interface.

Campo field

Um campo é o bloco de construção mais básico de um esquema. Os campos fornecem restrições relacionadas ao tipo de dados que eles podem conter ao definir um tipo de dados específico. Esses tipos de dados básicos definem um único campo, enquanto os tipos de dados mencionados anteriormente permitem definir vários subcampos e reutilizar a mesma estrutura de vários campos em vários esquemas. Portanto, além de definir o "tipo de dados" de um campo como um dos tipos de dados definidos no registro, o Experience Platform suporta tipos escalares básicos, como:

Os intervalos válidos desses tipos escalares podem ser ainda mais restritos a determinados padrões, formatos, mínimos/máximos ou valores predefinidos. Usando essas restrições, uma grande variedade de tipos de campos mais específicos pode ser representada, incluindo:

Exemplo de composição composition-example

Os esquemas são criados usando um modelo de composição e representam o formato e a estrutura dos dados a serem assimilados em Platform. Como mencionado anteriormente, esses esquemas são compostos de uma classe e zero ou mais grupos de campos compatíveis com essa classe.

Por exemplo, um esquema que descreve compras feitas em uma loja de varejo pode ser chamado de "Transações da loja". O esquema implementa a classe XDM ExperienceEvent combinada com o grupo de campos Commerce padrão e um grupo de campos Informações do Produto definido pelo usuário.

Outro esquema que rastreia o tráfego do site pode ser chamado de "Visitas na Web". Ele também implementa a classe XDM ExperienceEvent, mas desta vez combina o grupo de campos Web padrão.

O diagrama abaixo mostra esses esquemas e os campos contribuídos por cada grupo de campos. Ela também contém dois esquemas baseados na classe XDM Individual Profile, incluindo o esquema "Membros de fidelidade" mencionado anteriormente neste guia.

União union

Embora o Experience Platform permita compor esquemas para casos de uso específicos, ele também permite que você veja uma "união" de esquemas para um tipo de classe específico. O diagrama anterior mostra dois esquemas baseados na classe XDM ExperienceEvent e dois esquemas baseados na classe XDM Individual Profile. A união, mostrada abaixo, agrega os campos de todos os esquemas que compartilham a mesma classe (XDM ExperienceEvent e XDM Individual Profile, respectivamente).

Ao habilitar um esquema para uso com Real-Time Customer Profile, ele é incluído na união para esse tipo de classe. O Profile fornece perfis robustos e centralizados de atributos do cliente e uma conta com carimbo de data e hora de cada evento que o cliente teve em qualquer sistema integrado ao Platform. Profile usa a exibição de união para representar esses dados e fornecer uma exibição holística de cada cliente individual.

Para obter mais informações sobre como trabalhar com Profile, consulte a Visão geral do Perfil do Cliente em Tempo Real.

Mapeamento de arquivos de dados para esquemas XDM mapping-datafiles

Todos os arquivos de dados assimilados no Experience Platform devem estar em conformidade com a estrutura de um esquema XDM. Para obter mais informações sobre como formatar arquivos de dados para estar em conformidade com hierarquias XDM (incluindo arquivos de exemplo), consulte o documento em transformações ETL de amostra. Para obter informações gerais sobre como assimilar arquivos de dados no Experience Platform, consulte a visão geral de assimilação de lotes.

Esquemas para públicos externos

Se estiver trazendo públicos-alvo de sistemas externos para a Platform, você deve usar os seguintes componentes para capturá-los em seus esquemas:

Próximas etapas

Agora que você entende as noções básicas da composição de esquema, está pronto para começar a explorar e criar esquemas usando o Schema Registry.

Para revisar a estrutura das duas classes XDM principais e seus grupos de campos compatíveis comumente usados, consulte a seguinte documentação de referência:

O Schema Registry é usado para acessar o Schema Library no Adobe Experience Platform e fornece uma interface de usuário e uma API RESTful a partir das quais todos os recursos de biblioteca disponíveis podem ser acessados. O Schema Library contém Recursos do setor definidos pelo Adobe, Recursos do fornecedor definidos por parceiros de Experience Platform, e classes, grupos de campos, tipos de dados e esquemas que foram compostos por membros da organização.

Para começar a compor o esquema usando a interface do usuário, siga o tutorial do Editor de esquemas para criar o esquema "Membros de fidelidade" mencionado neste documento.

Para começar a usar a API Schema Registry, comece lendo o guia do desenvolvedor da API do Registro de Esquema. Depois de ler o guia do desenvolvedor, siga as etapas descritas no tutorial sobre criação de um esquema usando a API do Registro de Esquema.

Apêndice

As seções a seguir contêm informações adicionais sobre os princípios da composição do schema.

Tabelas relacionais versus objetos incorporados embedded

Ao trabalhar com bancos de dados relacionais, as práticas recomendadas envolvem normalizar dados ou pegar uma entidade e dividi-la em partes distintas que são exibidas em várias tabelas. Para ler os dados como um todo ou atualizar a entidade, as operações de leitura e gravação devem ser feitas em muitas tabelas individuais usando JOIN.

Ao usar objetos incorporados, os esquemas XDM podem representar diretamente dados complexos e armazená-los em documentos autocontidos com uma estrutura hierárquica. Um dos principais benefícios dessa estrutura é que ela permite consultar os dados sem precisar reconstruir a entidade por junções caras a várias tabelas desnormalizadas. Não há restrições rígidas quanto à quantidade de níveis que sua hierarquia de esquema pode ter.

Esquemas e big data big-data

Sistemas digitais modernos geram grandes quantidades de sinais comportamentais (dados de transação, registros da Web, internet das coisas, exibição e assim por diante). Esses big data oferecem oportunidades extraordinárias para otimizar experiências, mas são desafiadores de usar devido à escala e variedade dos dados. Para obter valor dos dados, sua estrutura, formato e definições devem ser padronizados para que possam ser processados de forma consistente e eficiente.

Os esquemas resolvem esse problema permitindo que os dados sejam integrados de várias fontes, padronizados por meio de estruturas e definições comuns e compartilhados entre as soluções. Isso permite que processos e serviços subsequentes respondam a qualquer tipo de pergunta feita sobre os dados. Ela se afasta da abordagem tradicional de modelagem de dados, em que todas as perguntas a serem feitas sobre os dados são conhecidas antecipadamente e os dados são modelados para se adequar a essas expectativas.

Objetos versus campos de formato livre objects-v-freeform

Há alguns fatores principais a serem considerados ao escolher objetos em vez de campos de formato livre ao projetar seus esquemas:

Objetos

Os prós e contras do uso de objetos em campos de formato livre estão listados abaixo.

Vantagens:

Contras:

Campos de forma livre

Os prós e contras do uso de campos de forma livre sobre objetos estão listados abaixo.

Vantagens:

Contras: