选择正确的数据生命周期管理功能
了解如何根据操作、保留和存储要求管理数据在Adobe Experience Platform中的保留时间。 本指南将介绍可用的保留和删除选项,并帮助您根据自己的需求,确定哪些选项适合您的目标以及何时使用它们。 有关分步说明,请按照每个部分中的实施链接操作。
本指南适用于在Experience Platform中管理数据卷、保留和权利的管理员和开发人员。 它假定您熟悉核心Experience Platform概念,包括数据集、标识、配置文件和沙盒。 在链接的UI和API页面上介绍了每个操作所需的可用性和权限。
为何管理您的数据生命周期 why-manage
Adobe Experience Platform会持续摄取数据,并且您存储的数据量会随着时间的推移而增长。 管理您的数据生命周期可使数据保持与活动用例一致,因此您可以保留继续提供价值的内容,并删除不再提供价值的内容。 明确定义的保留策略还可以帮助您满足组织的数据保留要求,并在许可权利范围内保持数据量。
当数据累积超出用例所需的范围时,您会面临多种风险:
- 相关性降低:如果保留信号超过其有效期,则可能会降低分段、激活和个性化的相关性和可操作性。
- 成本压力:不断增长的数据量可能会使您超出许可权利范围,从而导致超额使用。
- 性能下降:过量数据会增加系统负载,并会降低处理速度。
- 隐私泄露:保留数据时间超过其有效时间会增加隐私风险和法规泄露。
为了避免这些结果,Adobe建议仅保留支持活跃用例的数据。 使用摄取筛选器在摄取时应用相同的原则,以便仅导入用例所需的数据。 行为数据(如事件数据)通常比记录数据占用更多的存储,因此非托管行为数据通常对存储增长的影响最大。 假名配置文件还可以随着时间的推移而积累并增加配置文件计数,因此,请考虑使用假名配置文件数据过期以删除不再需要的非活动假名配置文件。
所有摄取的数据都会保留在Experience Platform中,而管理数据生命周期的一个关键部分就是将这些数据与它提供的工作流进行匹配。 Experience Platform将数据存储在两个具有不同用途的存储库中:
数据集可以支持分析工作流和/或参与工作流。 当体验事件数据在配置文件存储区和数据湖中均可用时,每个存储库都有自己的保留策略。 一个存储库中的数据过期不会自动从另一个存储库中删除相同的数据。 仅保留使用数据的工作流所需的数据,并确保为两个存储库配置了适当的保留策略。
有关跟踪和管理许可证授权的指导,请参阅数据管理许可证授权最佳实践。
选择适当的功能 choose-a-capability
您的数据管理目标决定了要使用哪个保留或删除选项。 下表将常见目标(包括隐私或法规删除请求)映射到适合的选项。 接下来的部分将介绍每个保留和删除选项。
在高级数据生命周期管理选项中,记录删除和数据集过期都是有针对性的,您需要在需要时提交一次性操作。 体验事件过期会自动从配置文件存储中删除旧的体验事件,而假名配置文件数据过期会持续删除不活动的未知配置文件。 数据湖保留策略将行级到期应用于数据湖中的ExperienceEvent数据集。 如果您的目标需要多个选项(例如,在删除特定记录的同时减少正在进行的事件增长),请按照规划您的保留策略中的说明将它们组合起来。
记录删除 record-delete
当出于操作目的(如数据清理或数据最小化)需要删除与主标识关联的记录时,请使用记录删除。 它根据单个记录的主要身份将其从Experience Platform中删除。 默认情况下,记录删除会影响数据湖、Identity Service和实时客户档案。 记录删除不是合规性工具。 对于数据主体或使用者权限请求,请改用Adobe Experience Platform Privacy Service。
记录删除对目标服务使用的主要标识执行的操作。 在使用它之前,请注意以下限制:
- 仅匹配主身份,并且删除与主身份匹配的所有记录。 无法通过辅助标识定位记录。
- 跳过没有填充主标识的记录。
- 无法以这种方式删除在数据集架构中配置主标识之前摄取的数据。
- 具有已计划或正在进行的数据集过期时间的数据集无法接收记录删除请求。 取消计划的过期,或等到过期完成再提交记录删除请求。
- 对于通过Data Mirror与外部源系统同步的关系架构数据集,如果源系统中仍然存在已删除的记录,则可能会重新摄取这些记录。 在删除工作流中更新源。 请参阅Data Mirror和关系架构注意事项。
根据贵组织的配置,您可以从单个数据集或所有数据集中删除记录。
提交请求后,Experience Platform会在处理之前对其进行批处理。 在service level agreement (SLA)中完成您权利的处理。 有关处理阶段以及每个阶段所需的时间,请参阅数据生命周期处理时间线。 记录删除请求也必须遵守每天和每月标识符提交限制。 有关当前限制,请参阅标识符提交配额。
您可以在数据生命周期工作区中或通过API创建记录删除请求。 请参阅为UI工作流创建记录删除请求和为API创建工作单终结点指南。
数据集有效期限 dataset-expiration
当您需要停用用例不再需要的整个数据集时,请使用数据集过期。 它会在您选择的日期安排要删除的数据集,您可以在到期流程开始之前随时修改或取消计划的到期日期。 当数据集到达其到期日期时,数据湖、Identity Service和实时客户档案都开始删除数据集的内容,并且所有三项服务都完成后,到期即完成。
您一次只能有有限数量的计划数据集过期待处理。 限制取决于您的产品和任何Shield授权。 有关当前限制,请参阅待处理到期限制。 高级数据生命周期管理不支持批量数据集删除。
您可以在数据生命周期工作区中或通过API安排数据集过期时间。 请参阅为UI工作流安排数据集过期和为API安排数据集过期终结点指南。
自动保留和到期 automatic-expiration
如果您希望在一段时间内自动修剪来自配置文件存储或数据湖的过时数据,请使用体验事件到期、假名配置文件数据到期或针对行级到期的数据湖保留策略。 配置完毕后,这些设置将根据您设置的保留期或非活动期自动删除符合条件的数据,无需您提交单个请求。 这些设置将继续应用,直到您更改或删除它们。
体验事件过期和假名配置文件数据过期是互补功能,但它们的配置不同。 体验事件过期是按数据集工作区中的数据集配置的,而假名配置文件数据过期是在配置文件设置的沙盒级别单独配置的。
体验事件过期 experience-event-ttl
体验事件过期会在配置的保留期后从配置文件存储中删除体验事件。 对于ExperienceEvent数据集,您可以在数据集工作区中配置其保留期。 此设置适用于数据集级别,并且仅删除事件,而不删除配置文件属性。 如果配置文件没有自己的属性,则该配置文件会在删除其所有事件后停止存在。 最短保留期为一天。 有关配置指导,请参阅设置数据保留策略文档。
假名配置文件数据过期 pseudonymous-profile-ttl
假名配置文件数据过期适用于沙盒级别,并在假名(未知)配置文件在您设置的时段内处于不活动状态之后将其删除。 它会删除事件和配置文件记录。 您可以自行配置设置。 生产沙盒的默认有效期为14天,开发沙盒的默认有效期为3天。 由于删除过程在循环周期中运行,因此不会立即删除符合条件的用户档案。 有关配置指导,请参阅假名配置文件数据过期。
两种到期机制的范围和移除的内容不同:
这两项设置互为补充。 对数据集设置体验事件过期时间,以控制事件数据在配置文件存储中保留的时长,并使用匿名配置文件数据过期时间,根据非活动的未知配置文件保持有效的时间长短,删除这些配置文件。 有关选择持续时间的指导,请参阅规划您的保留策略。
数据湖保留策略 data-lake-retention
对于ExperienceEvent数据集,配置的保留期将决定用户档案存储中的Experience事件何时过期。 ExperienceEvent数据集还可以具有单独的数据湖保留策略。 两者都是从数据集工作区中的同一设置数据保留策略工作流中配置的。
请使用以下指南来区分可用的保留选项:
由于这些保留期是独立的,因此您可以在事件从配置文件存储区过期后,将其保留在数据湖中以供长期分析。 有关数据湖保留指南(包括API配置),请参阅管理体验事件数据集保留(TTL)。
规划您的保留策略 plan-retention
管理您的数据生命周期是一项持续不断的实践,而不是一次性任务。 仅保留支持活动用例的数据,并配置保留期和过期日期以匹配数据保持有用的时间。
指导数据策略的关键注意事项
在配置保留或到期设置之前,请回答每个数据集的以下问题:
- 活动用例是否仍需要此数据? 如果保留的数据超出了您的使用案例的要求,则会增加存储和处理成本,而不会增加价值。
- 此数据是否支持分析工作流和/或参与工作流? 将每个数据集与其提供的工作流保持一致,并相应地管理保留。
- 此数据需要保留多长时间才能保持有用状态? 根据数据支持用例的时间长短设置保留期和过期日期,而不是依赖默认或无限期。
- 您多久查看一次数据使用情况? 定期审查使用情况,以便发现效率低下并调整保留设置,以免影响成本或性能。
设置保留持续时间时,请遵循以下指南:
- 体验事件到期:设置保留期以涵盖受众所需的最长回溯期,并保持受众回溯时段在该期限内,以便分段保持准确。
- 假名配置文件数据过期:如果非活动的未知配置文件早于您保留的体验事件丢失值,请设置更短的过期时间,以更快地删除这些配置文件。
- 数据湖保留策略:为仍需要分析的事件数据设置更长的期限,而不管同一数据何时从配置文件存储过期。 将持续时间与数据的使用方式相匹配:对于经常访问的数据,应缩短持续时间;对于存档需要,应延长持续时间。 请参阅管理体验事件数据集保留(TTL),了解建议的持续时间和最小值。
根据您的数据保留要求应用这些功能。 例如,对于大流量点击流数据,设置一个体验事件过期期限,如果非活动的未知配置文件更快地失去值,则缩短假名配置文件数据过期期限,以控制您的配置文件存储空间。 单独设置更长的数据湖保留期限,以保留相同的事件进行长期分析。
使用数据集到期停用您不再需要的整个数据集,并记录删除以按请求删除特定记录。
有关跟踪和管理许可证授权的指导,请参阅数据管理许可证授权最佳实践。
后续步骤 next-steps
选择正确的保留或删除选项后,请使用关联的实施指南来执行此操作。 如果您正在使用API进行记录删除或数据集过期,另请参阅记录删除和数据集过期请求的最佳实践以获取有关批处理、限制和监视的指导。