监控配置文件的流式摄取
您可以使用Adobe Experience Platform UI中的监控仪表板对贵组织中的流式配置文件摄取进行实时监控。 使用此功能可访问与流数据相关的吞吐量、延迟和数据质量指标的更高透明度。 此外,使用此功能发出主动警报并检索可操作洞察,以帮助识别潜在的容量违规和数据摄取问题。
请阅读以下指南,了解如何使用监视仪表板跟踪组织中流配置文件摄取作业的速率和量度。
快速入门
本指南要求您对Experience Platform的以下组件有一定的了解:
- 数据流:数据流表示跨Experience Platform传输信息的数据作业。 它们可在各种服务中进行配置,以促进数据从源连接器移动到目标数据集以及Identity Service、Real-Time Customer Profile和Destinations。
- 实时客户个人资料: Real-Time Customer Profile将来自多个来源(在线、离线、CRM和第三方)的数据合并到每个客户的单个可操作视图中,从而实现跨所有接触点的一致且个性化的体验。
- 流式摄取:Experience Platform流式摄取为用户提供了一种方法,可实时将数据从客户端和服务器端设备发送到Experience Platform。Experience Platform允许您为每个客户生成实时客户档案,从而提供协调、一致和相关体验。AEM流式摄取在尽可能缩短延迟的情况下构建这些用户档案方面发挥着关键作用。
- 能力:在Experience Platform中,能力让您知道您的组织是否超出了任何护栏,并为您提供如何解决这些问题的信息。
监控配置文件流式摄取的量度 streaming-profile-metrics
可使用量度表获取特定于您的数据流的信息。 有关每列的详细信息,请参阅下表。
- 沙盒/数据流
- 数据流运行
- 沙盒/数据流
- 数据流运行
- 沙盒/数据流:实时监控,每60秒刷新一次数据。
- 数据流运行:15分钟后分组。
- 沙盒/数据流
- 数据流运行
- 沙盒/数据流:实时监控,每60秒刷新一次数据。
- 数据流运行:15分钟后分组。
- 沙盒/数据流
- 数据流运行
- 沙盒/数据流:实时监控,每60秒刷新一次数据。
- 数据流运行:15分钟后分组。
使用监视仪表板进行流式处理配置文件摄取
要访问用于流式处理配置文件摄取的监视仪表板,请转到Experience Platform UI,从左侧导航中选择 监视,然后选择 流式处理端到端。
请参阅 个人资料 量度卡片仪表板的顶部标题。 使用此显示可查看有关已摄取、失败和跳过的记录的信息,以及有关请求吞吐量和延迟的当前状态的信息。
接下来,使用界面查看有关流配置文件摄取量度的详细信息。 使用日历功能在不同的时间范围之间进行切换。 您可以从以下预配置的时间窗口中选择:
- 最近6小时
- 最近12个小时
- 最近24小时
- 最近7天
- 最近30天
或者,您可以使用日历手动配置自己的时间范围。
您可以在监视仪表板中使用三种不同的量度类别来流式处理配置文件摄取:吞吐量、摄取和延迟。
选择 吞吐量 可查看有关Experience Platform在配置的时间段内正在处理的数据量的信息。 请参阅此量度以评估系统的效率和容量。
-
容量:沙盒在定义的条件下可以处理的最大数据量。
-
请求吞吐量:摄取系统接收事件的速率(以每秒事件数衡量)。
-
处理吞吐量:系统成功摄取和处理传入事件负载的速率,以每秒事件数测量。
摄取:选择 摄取 可查看有关沙盒中的摄取作业的信息。 这些摄取作业通过三个不同的指标进行测量。
-
已摄取的记录:在给定时间段内创建的记录总数。 此量度表示沙盒中成功的数据摄取流程。
-
跳过的记录数:由于错误而未引入的记录总数。
-
跳过的记录数:由于违反容量限制而被丢弃的记录总数。
选择 延迟 可查看有关Experience Platform在给定时间段内响应请求或完成操作所花费时间的信息。
使用数据流量度表
数据流表列出了所有流式摄取活动及其对应的实时客户资料量度集。 每个数据流都与其对应的数据集一起列出。
如果您即将达到沙盒级别的容量限制,则可以参考最大吞吐量列,以识别任何影响使用率的现有数据流。 有关数据流管理最佳实践的更多信息,请阅读最佳实践部分。
要监视特定数据流中摄取的数据,请选择数据流名称旁边的过滤器图标
接下来,使用数据流指标界面选择要检查的特定流运行。 选择流运行迭代旁边的过滤器图标
数据流运行代表数据流执行的实例。 例如,如果数据流计划在上午9:00、上午10:00和上午11:00每小时运行,则您将运行三个流实例。 流量运行特定于您的特定组织。
使用数据流运行详细信息页面可查看所选运行迭代的量度和信息。
数据流管理最佳实践 best-practices
有关如何在Experience Platform上以最佳方式管理数据流和优化数据消耗的信息,请阅读以下部分。
评估和优化流摄取数据流
为了确保高效的流式摄取,请审查和调整数据流和处理策略:
- 评估当前使用情况:确定哪些数据流和数据集对吞吐量的贡献最大。
- 优先处理有价值的数据:并非所有数据都是必需的。 排除不支持您的用例的数据,以减少存储并提高效率。
- 优化处理模式:确定是否可以将某些数据从流式转移到批量摄取。 保留流以供需要低延迟的用例使用,例如实时分段。
规划容量和季节性流量
如果当前每秒 1,500个事件的限制 不足,请考虑优化数据策略或增加许可证容量:
- 分析数据集和沙盒使用情况:查看当前和历史数据以了解流量和参与如何影响流式分段吞吐量。
- 考虑季节性:识别由周期性营销活动或特定于行业的周期驱动的峰值流量时段。
- 预测未来需求:根据过去的季节性趋势、计划的促销活动或主要事件来估计即将到来的流量和参与量。
仅摄取用例所需的数据。 确保过滤掉不必要的数据。
- Adobe Analytics:使用行级筛选优化数据摄取。
- 源:使用Flow Service API为支持的源(如和Snowflake)筛选行级数据Google BigQuery。 Edge数据流 :配置 动态数据流 以对来自WebSDK的流量执行行级筛选。
常见问题解答 faq
请阅读此部分,了解有关监控流配置文件摄取的常见问题解答。
为什么我的量度在容量功能板和监控功能板之间在请求吞吐量方面看起来不同?
监控仪表板显示用于摄取和处理的实时量度。 这些数字是在活动时记录的准确量度。 相反,容量仪表板使用平滑机制来计算吞吐量容量。 此机制有助于减少短暂的尖峰,使其不再立即被认定为违规,并确保容量警报侧重于持续趋势,而不是短暂的突发事件。
由于平滑机制,您可能会注意到:
- 监控中未出现在容量中的小峰值。
- 与相同时间戳的监控相比,容量的值略低。
这两个功能板虽然准确无误,但其设计目的却不尽相同。
- 监控:详细的逐时操作可见性。
- 容量:用于标识使用和违规模式的策略视图。
后续步骤 next-steps
通过学习本教程,您已了解如何监控组织中的流式配置文件引入作业。 请阅读以下文档,了解有关监控Real-time Customer Profile数据的更多信息。