Medidas de proteção para a assimilação de dados
IMPORTANT
As garantias para assimilação em lote e por transmissão são calculadas no nível da organização, e não no nível da sandbox. Isso significa que o uso de dados por sandbox está vinculado ao direito de uso total de licença que corresponde a toda a organização. Além disso, o uso de dados em sandboxes de desenvolvimento é limitado a 10% do total de perfis. Para obter mais informações sobre direitos de uso de licença, leia o guia de práticas recomendadas de gerenciamento de dados.
As garantias são limites que fornecem orientação para o uso de dados e do sistema, otimização do desempenho e prevenção de erros ou resultados inesperados no Adobe Experience Platform. As garantias podem se referir ao uso ou consumo de dados e processamento em relação aos seus direitos de licenciamento.
IMPORTANT
Verifique os direitos de licença em seu Pedido de Venda e a Descrição do Produto correspondente sobre os limites de uso reais, além desta página de medidas de proteção.
Este documento fornece orientação sobre medidas de proteção para a assimilação de dados no Adobe Experience Platform.
Medidas de proteção para a assimilação em lote
A tabela a seguir descreve as medidas de proteção a serem consideradas ao usar a API de assimilação em lote ou fontes:
Tipo de assimilação
Diretrizes
Notas
Assimilação do data lake usando a API de assimilação em lote
- Você pode assimilar até 20 GB de dados por hora no data lake usando a API de assimilação em lote.
- O número máximo de arquivos por lote é 1500.
- O tamanho máximo do lote é de 100 GB.
- O número máximo de propriedades ou campos por linha é 10000.
- O número máximo de lotes por minuto por usuário é 2000.
Assimilação do data lake usando fontes de lote
- Você pode assimilar até 200 GB de dados por hora no data lake usando fontes de assimilação em lote como Azure Blob, Amazon S3 e SFTP.
- O tamanho do lote deve estar entre 256 MB e 100 GB. Isso se aplica a dados descompactados e compactados. Quando dados compactados são descompactados no data lake, essas limitações se aplicam.
- O número máximo de arquivos por lote é 1500.
- O tamanho mínimo de um arquivo ou pasta é de 1 byte. Não é possível assimilar arquivos ou pastas de tamanho 0 byte.
Leia a visão geral das fontes para obter um catálogo de fontes que você pode usar para assimilação de dados.
Assimilação em lote para Perfil
- O tamanho máximo de uma classe de registro é 100 KB (rígido).
- O tamanho máximo de uma classe ExperienceEvent é 10 KB (rígido).
Número de lotes Profile ou ExperienceEvent assimilados por dia
O número máximo de lotes de Profile ou ExperienceEvent assimilados por dia é 90. Isso significa que o total combinado de lotes Profile e ExperienceEvent assimilados a cada dia não pode exceder 90. A ingestão de lotes adicionais afetará o desempenho do sistema.
Este é um limite flexível. É possível ir além de um limite flexível, no entanto, os limites flexíveis fornecem uma diretriz recomendada para o desempenho do sistema.
Assimilação de dados criptografados
O tamanho máximo suportado de um único arquivo criptografado é 1 GB. Por exemplo, embora você possa assimilar 2 ou mais GBs de dados em uma única execução de fluxo de dados, nenhum arquivo individual na execução do fluxo de dados pode exceder 1 GB.
O processo de assimilação de dados criptografados pode levar mais tempo do que a assimilação normal de dados. Leia o guia da API de assimilação de dados criptografados para obter mais informações.
Substituir assimilação em lote
A assimilação de lotes de substituição pode ser até 10x mais lenta do que lotes regulares, portanto, você deve manter seus lotes de substituição abaixo de dois milhões de registros para garantir um tempo de execução eficiente e evitar o bloqueio de outros lotes de serem processados na sandbox.
Embora seja possível assimilar lotes que excedam dois milhões de registros, o tempo de assimilação será significativamente maior devido às limitações de pequenas sandboxes.
Medidas de proteção para assimilação por transmissão
Leia a visão geral da assimilação de streaming para obter informações sobre as medidas de proteção para a assimilação de streaming.
Medidas de proteção para fontes de transmissão
A tabela a seguir descreve as medidas de proteção a serem consideradas ao usar as fontes de transmissão:
Tipo de assimilação
Diretrizes
Notas
Fontes de transmissão
- O tamanho máximo do registro é de 1 MB, com o tamanho recomendado de 10 KB.
- As fontes de transmissão oferecem suporte a entre 4.000 e 5.000 solicitações por segundo ao assimilar no data lake. Isso se aplica a conexões de origem recém-criadas além de conexões de origem existentes. Observação: pode levar até 30 minutos para que a transmissão de dados seja completamente processada para o data lake.
- As fontes de transmissão oferecem suporte a no máximo 1500 solicitações por segundo ao assimilar dados para o perfil ou a segmentação por transmissão.
Fontes de transmissão como Kafka, Azure Event Hubs e Amazon Kinesis não usam a rota Data Collection Core Service (DCCS) e podem ter limites de taxa de transferência diferentes. Consulte a visão geral das fontes para obter um catálogo de fontes que podem ser usadas para assimilação de dados.
Próximas etapas
Consulte a documentação a seguir para obter mais informações sobre outras medidas de proteção dos serviços de Experience Platform, informações de latência de ponta a ponta e informações de licenciamento dos documentos Descrição do produto Real-Time CDP:
- Medidas de proteção do Real-Time CDP
- Diagramas de latência de ponta a ponta para vários serviços de Experience Platform.
- Real-time Customer Data Platform (B2C Edition - Pacotes Prime e Ultimate)
- Real-time Customer Data Platform (B2P - Pacotes Prime e Ultimate)
- Real-time Customer Data Platform (B2B - Pacotes Prime e Ultimate)
recommendation-more-help
2ee14710-6ba4-4feb-9f79-0aad73102a9a