Adobe Experience Platform为通过批量或流式摄取上传的任何数据的完整性、准确性和一致性提供了明确定义的保证。 以下文档概述了中针对批量摄取和流式摄取支持的检查和验证行为 Experience Platform.
批量摄取 | 流式摄取 | |
---|---|---|
数据类型检查 | 是 | 是 |
枚举检查 | 是 | 是 |
范围检查(最小、最大) | 是 | 是 |
必填字段检查 | 是 | 是 |
图案检查 | 否 | 是 |
格式检查 | 否 | 是 |
批量摄取和流式摄取通过将不良数据移动到中进行检索和分析来防止故障数据下游 Data Lake. 数据摄取为批量摄取和流式摄取提供了以下验证。
对批量摄取会执行以下验证:
验证区域 | 描述 |
---|---|
架构 | 确保架构为 非 为空,并包含对合并架构的引用,如下所示: "meta:immutableTags": ["union"] |
identityField |
确保定义了所有有效的身份描述符。 |
createdUser |
确保允许引入批次的用户引入批次。 |
对流式摄取进行了以下验证:
验证区域 | 描述 |
---|---|
架构 | 确保架构为 非 为空,并包含对合并架构的引用,如下所示: "meta:immutableTags": ["union"] |
identityField |
确保定义了所有有效的身份描述符。 |
JSON | 确保JSON有效。 |
组织 | 确保列出的组织是有效的。 |
源名称 | 确保指定数据源的名称。 |
数据集 | 确保指定、启用且未删除数据集。 |
标头 | 确保标头已指定且有效。 |
有关以下内容的更多信息: Platform 监视和验证数据可在中找到 监控数据流文档.
下表概述了为确保成功验证标识值而必须遵循的现有规则。
命名空间 | 验证规则 | 违反规则时的系统行为 |
---|---|---|
ECID |
|
|
非ECID | 标识值不能超过1024个字符。 | 如果标识值超过1024个字符,则会跳过该记录。 |
有关的详细信息 Identity Service 护栏,请参见 Identity Service 护栏概述.