Comment fonctionne le processus de collecte de données ?

IMPORTANT

En savoir plus sur le Data Workbench Annonce de fin de vie.

Sensor automatise l’acquisition de données à partir de votre canal Internet en supprimant la majeure partie de la main-d’oeuvre traditionnellement impliquée dans la collecte de données.

Dans de nombreux cas, l’utilisation de Sensor peut considérablement simplifier votre processus de gestion des données.

Les grands sites Internet, extranet et intranet d’aujourd’hui s’exécutent souvent sur un large éventail de serveurs web. Les logs et les données produits peuvent être très volumineux et encombrants à gérer. Par exemple, si votre site exécute 30 serveurs web, généralement l’un de vos employés (ou les employés du fournisseur de services externalisé) extrait et consolide chaque fichier journal sur chacun des 30 serveurs, puis exécute des rapports à leur sujet. Installation Sensor sur chacun de vos serveurs web automatise l’ensemble du processus, réduisant vos dépenses et rendant les données disponibles en temps réel.

Pour automatiser ce processus, Sensor collecte des informations brutes sur le trafic sur un site web directement à partir de chaque serveur web. Les données brutes qui Sensor La capture est appelée données d’événement et est similaire au type de données enregistré par votre serveur web dans ses fichiers journaux.

Pour capturer ces données, procédez comme suit : Sensor enregistre des informations sur chaque requête HTTP traitée par votre serveur web. Sensor place ensuite les informations en mémoire tampon afin de les protéger contre les défaillances du réseau et transmet en toute sécurité les informations via HTTP/S au data workbench server que vous spécifiez.

Après la data workbench server reçoit les données, traite et stocke vos fichiers journaux dans des fichiers hautement compressés. .vsl fichiers de format, ce qui vous permet de gérer facilement de très grandes quantités de données sur du matériel peu coûteux.

Pour plus d’informations sur les champs de données d’événement collectés par Sensor in .vsl fichiers, voir Champs d’enregistrement des données d’événement.

Sur cette page