数据收集流程的原理

传感器通过消除传统上涉及数据收集的大量人力,从您的Internet渠道中自动获取数据。

在许多情况下,使用Sensor可以极大地简化数据管理过程。

当今的大型Internet、Extranet和Intranet站点通常在一系列Web服务器上运行。 生成的日志和数据可能会非常大且繁琐。 例如,如果您的网站运行30台Web服务器,则通常您的一名员工(或外包服务提供商的员工)将提取并整合30台服务器中每台的日志文件,然后对其运行报告。 在每个Web服务器上安装Sensor将自动完成整个过程,从而减少开支并实时提供数据。

要自动执行此过程,Sensor会直接从每个Web服务器收集网站上流量的原始信息。 Sensor捕获的原始数据称为事件数据,与Web服务器在其日志文件中记录的数据类型类似。

要捕获此数据,Sensor中的工具会记录有关Web服务器处理的每个HTTP请求的信息。 Sensor 然后,缓冲信息以防止网络故障,并通过HTTP/S将信息安全地传输到您指 data workbench server 定的信息。

在data workbench server收到数据后,它会以高度压缩的.vsl格式文件处理并存储日志文件,这样您就可以轻松地在廉价硬件上维护大量数据。

有关Sensor在.vsl文件中收集的事件数据字段的信息,请参阅事件数据记录字段

在此页面上