Configuration de la détection des robots pour les flux de données

Le trafic provenant d’entités non humaines, telles que les programmes automatisés, les web-scrapers, les araignées, les scanneurs à scripts, peut rendre plus difficile l’identification des événements provenant de visiteurs humains. Ce type de trafic peut avoir une incidence négative sur les mesures commerciales importantes, ce qui entraîne des rapports de trafic incorrects.

La détection des robots permet d’identifier les événements générés par le SDK Web, le SDK mobile et Server API comme étant générés par des araignées et des robots connus.

En configurant la détection des robots pour vos flux de données, vous pouvez identifier des adresses IP, des plages d’adresses IP et des en-têtes de requête spécifiques que vous souhaitez classer comme événements de robots.

L’identification du trafic de robots peut vous fournir une mesure plus précise de l’activité des utilisateurs sur votre site ou application mobile.

Lorsqu’une requête à l’Edge Network correspond à l’une des règles de détection de robots, le schéma XDM est mis à jour avec une notation de robot (toujours définie sur 1), comme illustré ci-dessous.

{
  "botDetection": {
    "score": 1
  }
}

Ce score de robot permet aux solutions qui reçoivent la demande d’identifier correctement le trafic de robots.

Les règles de détection de robots peuvent prendre jusqu’à 15 minutes pour se propager dans l’Edge Network après sa création.

Conditions préalables prerequisites

Pour que la détection des robots fonctionne sur votre flux de données, vous devez ajouter le groupe de champs Informations sur la détection des robots à votre schéma. Consultez la documentation Schéma XDM pour savoir comment ajouter des groupes de champs à un schéma.

Configuration de la détection des robots pour les flux de données configure

Vous pouvez configurer la détection des robots après avoir créé une configuration de flux de données. Consultez la documentation sur la façon de créer et configurer un flux de données, puis suivez les instructions ci-dessous pour ajouter des fonctionnalités de détection de robots à votre flux de données.

Accédez à la liste des flux de données et sélectionnez le flux de données auquel vous souhaitez ajouter la détection des robots.

Dans la page des détails de la banque de données, sélectionnez l’option Détection de robots sur le rail de droite.

La page Règles de détection des robots s’affiche.

Sur la page Règles de détection des robots , vous pouvez configurer la détection des robots à l’aide des fonctionnalités suivantes :

Utilisation de la liste internationale des robots (Robots) fournie par l’IAB/ABC iab-list

La liste internationale des robots et araignées IAB/ABCest une liste tierce, standard du secteur, d’araignées et de robots Internet, qui vous permet d’identifier le trafic automatisé, tel que les robots de moteur de recherche, les outils de surveillance et d’autres trafics non humains, que vous ne souhaitez peut-être pas afficher dans vos comptes d’analyses.

Pour configurer votre flux de données de manière à utiliser le IAB/ABC International Spiders and Bots List, activez l’option Utiliser la liste internationale des robots et araignées IAB/ABC pour la détection des robots dans cette banque de données, puis sélectionnez Enregistrer pour appliquer les paramètres de détection des robots à votre flux de données.

Création de règles de détection de robots rules

Outre l’utilisation de la liste internationale des robots et araignées IAB/ABC, vous pouvez définir vos propres règles de détection des robots pour chaque flux de données.

Vous pouvez créer des règles de détection de robots basées sur les adresses IP et les plages d’adresses IP.

Si vous avez besoin de règles de détection de robots plus granulaires, vous pouvez combiner les conditions d’IP avec des conditions d’en-tête de requête. Les règles de détection de robots peuvent utiliser les en-têtes suivants :

Pour créer une règle de détection de robots, procédez comme suit :

Exemples de règles de détection de robots examples

Pour vous aider à prendre en main la détection des robots, vous pouvez utiliser les exemples présentés ci-dessous pour créer des règles de détection de robots.

Détection des robots à partir d’une adresse IP one-ip

Pour marquer comme trafic de robots toutes les requêtes provenant d’une adresse IP spécifique, créez une nouvelle règle de détection de robots qui évalue une seule adresse IP, comme illustré dans l’image ci-dessous.

Détection des robots à partir de deux adresses IP two-ip

Pour marquer comme trafic de robots toutes les requêtes provenant de l’une des deux adresses IP spécifiques, créez une nouvelle règle de détection de robots qui évalue deux adresses IP, comme illustré dans l’image ci-dessous.

Détection des robots à partir d’une plage d’adresses IP range

Pour marquer comme trafic de robots toutes les requêtes provenant d’une adresse IP sur une plage spécifique, créez une nouvelle règle de détection de robots qui évalue une plage d’adresses IP entière, comme illustré dans l’image ci-dessous.

Détection des robots à partir d’une adresse IP et d’un en-tête de requête ip-header

Pour marquer toutes les requêtes provenant d’une adresse IP spécifique et contenant un en-tête de requête spécifique comme trafic de robots, créez une règle de détection de robots comme illustré dans l’image ci-dessous.

Cette règle vérifie si la requête provient d’une adresse IP spécifique et si l’en-tête de la requête referer commence par www.adobe.com.

Détection de robots selon plusieurs conditions multiple-conditions

Vous pouvez créer des règles de détection de robots basées sur les éléments suivants :

La règle affichée dans l’image ci-dessous identifie une demande d’origine de robots si les conditions suivantes sont remplies :

La requête provient de l’une des deux adresses IP, l’en-tête referer commence par www.adobe.com et l’en-tête sec-ch-ua-mobile identifie la requête comme provenant d’un navigateur de bureau.