数据收集流程的工作原理

上次更新: 2022-10-05
  • 创建对象:
  • User
    Admin
重要

阅读有关Data Workbench 生命周期终止公告.

传感器通过消除传统上涉及数据收集的大量人力,从您的Internet渠道中自动获取数据。

在很多情况下,使用 Sensor 可以极大地简化您的数据管理流程。

当今的大型Internet、Extranet和Intranet站点通常在一系列Web服务器上运行。 生成的日志和数据可能会非常大且繁琐。 例如,如果您的网站运行30台Web服务器,则通常您的一名员工(或外包服务提供商的员工)将提取并整合30台服务器中每台的日志文件,然后对其运行报告。 安装 Sensor 在您的每台web服务器上,都会自动完成整个过程,从而减少您的开支,并使数据实时可用。

要自动执行此过程, Sensor 直接从每个web服务器收集网站上流量的原始信息。 原始数据 Sensor 捕获称为事件数据,与web服务器在其日志文件中记录的数据类型类似。

要捕获此数据,请在 Sensor 记录有关Web服务器处理的每个HTTP请求的信息。 Sensor 然后,缓冲信息以防止网络故障,并通过HTTP/S将信息安全地传输到 data workbench server 指定的。

在 data workbench server 接收数据,它会以高度压缩的方式处理和存储日志文件 .vsl 设置文件格式,使您能够轻松地在廉价硬件上维护大量数据。

有关收集的事件数据字段的信息,请参阅 Sensor in .vsl 文件,请参阅 事件数据记录字段.

在此页面上