Comprendre et configurer des règles de robot
Les règles de robots vous permettent de supprimer du trafic de votre suite de rapports généré par des araignées et des robots connus. La suppression du trafic de robots permet d’obtenir une mesure plus précise de l’activité des utilisateurs sur votre site web.
Une fois les règles de robots définies, elles servent de critères de comparaison pour tout le trafic entrant. Le trafic qui correspond à l’une de ces règles n’est ni collecté dans la suite de rapports, ni inclus dans les mesures de trafic.
En règle générale, la suppression du trafic de robots réduit le volume des mesures de trafic et de conversion. De nombreux clients estiment que la suppression du trafic de robots entraîne une augmentation des taux de conversion et d’autres mesures d’utilisation.
Les données de trafic de robots sont stockées dans un référentiel distinct en vue d’être affichées dans les rapports Robots et Pages de robots .
Mise à jour ou chargement de règles de robots
La vidéo suivante explique comment configurer des règles de robots :
Pour mettre à jour ou charger des règles de robots :
-
Accédez à Analytics > Admin > Suites de rapports.
-
Sélectionnez la suite de rapports dans laquelle vous souhaitez mettre à jour les règles de robots, puis sélectionnez Modifier les paramètres > Général > Règles de robots.
-
Utilisez l’une des options suivantes pour mettre à jour ou charger des règles de robots pour la suite de rapports :
-
Sélectionnez Activer les règles de filtrage de robots IAB pour supprimer les robots dans la liste internationale des robots (International Spiders & Robots List) fournie par l’IAB (Bureau international d’Advertising) afin de supprimer le trafic de robots.
Il est recommandé de sélectionner au minimum cette option.
Pour plus d’informations, voir la section ci-dessous, Règles de robots IAB standard.
-
Sélectionnez Ajouter une règle pour définir et ajouter des règles de robots personnalisées basées sur des agents utilisateur, des adresses IP ou des plages IP.
Pour plus d’informations, voir la section ci-dessous, Règles de robots personnalisées.
-
En regard de la zone Select CSV Bot file to import , sélectionnez Choose File, puis sélectionnez le fichier CSV qui définit les règles de robots.
Pour plus d’informations, reportez-vous à la section ci-dessous, Télécharger les règles de robots.
-
-
Sélectionnez Enregistrer.
Règles de robots IAB standard
Activez les règles de robots IAB standard en cochant la case Activer les règles de filtrage de robots IAB. Cette sélection va supprimer les robots de la liste internationale des robots (International Spiders & Robots List) fournie par l’IAB (Bureau international de la publicité) pour supprimer le trafic de robots. Adobe met à jour cette liste de lʼIAB tous les mois.
Adobe n’est pas en mesure de fournir la liste des robots IAB détaillée aux clients.Vous pouvez cependant utiliser le rapport Robots pour consulter la liste des robots qui ont accédé à votre site. Pour soumettre un robot à la liste de l’IAB, consultez l’IAB.
Pour plus d’informations sur l’activation des règles de robots IAB standard dans une suite de rapports, voir Mise à jour ou chargement de règles de robots.
Règles de robots personnalisées
Les règles de robots personnalisées vous permettent de filtrer le trafic selon les conditions que vous avez définies. Pour lancer le processus d’activation des règles de robots personnalisées dans une suite de rapports, voir Mise à jour ou chargement de règles de robots.
Les règles de robots personnalisées sont définies à l’aide des types de conditions suivants :
- Agent utilisateur
- Adresse IP
- Plage IP
Plusieurs conditions peuvent être définies pour une seule règle. Dans le cas de conditions multiples, une correspondance est établie à l’aide de l’opérateur « OU ». Si vous indiquez, par exemple, une valeur pour Agent utilisateur et Adresse IP, le trafic est considéré comme du trafic de robots si l’une des conditions est remplie.
Agent utilisateur
Une condition Agent utilisateur vérifie la valeur correspondante afin de déterminer si elle contient ou commence par la chaîne spécifiée. En cas de sélection de l’option contient, une correspondance est établie avec la sous-chaîne si elle est présente dans l’agent utilisateur.
Des valeurs facultatives peuvent être incluses dans la liste ne contient pas afin de définir les valeurs qui ne peuvent pas se trouver dans l’agent utilisateur pour qu’une correspondance soit établie. Vous pouvez inclure plusieurs valeurs, à raison d’une valeur par ligne. Si l’agent utilisateur répond aux critères spécifiés dans la chaîne de correspondance, mais contient également une chaîne reprise dans la liste « ne contient pas », il n’est pas considéré comme une correspondance.
Le champ contient est limité à 100 caractères. La liste « ne contient pas » est limitée à 255 caractères, moins un caractère de séparation pour chaque nouvelle ligne. (Cela équivaut au nombre de chaînes - 1. Si vous indiquez 4 chaînes ne contient pas, 3 caractères de séparation sont obligatoires.) Les correspondances de chaînes ne sont pas sensibles à la casse.
Adresse IP (avec correspondances de caractères génériques)
Établit une correspondance avec une ou plusieurs adresses IP dans le même bloc à l’aide de caractères génériques (*). Indiquez les valeurs numériques de l’adresse IP avec laquelle vous souhaitez établir une correspondance. Remplacez par * toutes les valeurs que vous souhaitez faire correspondre à l’aide d’un caractère générique. La liste suivante contient des exemples de chaînes de correspondance d’adresses IP :
10.10.10.1
10.10.10.*
Plage d’adresses IP
Indiquez les plages de début et de fin des adresses IP avec lesquelles vous souhaitez établir une correspondance. Remplacez par * toutes les valeurs que vous souhaitez faire correspondre à l’aide d’un caractère générique.
Définir une règle de robot personnalisée
- Accédez à Analytics > Admin, sélectionnez une ou plusieurs suites de rapports, puis cliquez sur Général > Règles de robots.
- Cliquez sur Ajouter une règle et définissez ensuite une ou plusieurs conditions de correspondance.
- Cliquez sur Enregistrer. La modification doit normalement être prise en compte dans les 30 minutes.
Télécharger des règles de robots
Pour importer des règles de robots en vrac, vous pouvez télécharger un fichier CSV qui les définit.
-
Pour commencer le processus de chargement de règles de robots vers une suite de rapports, voir Mise à jour ou chargement de règles de robots.
-
Créez un fichier CSV avec les colonnes suivantes, à la ligne 1 de la feuille de calcul, dans l’ordre indiqué :
table 0-row-6 1-row-6 Colonne 1, ligne 1 Colonne 2, ligne 1 Colonne 3, ligne 1 Colonne 4, ligne 1 Colonne 5, ligne 1 Colonne 6, ligne 1 Nom du robot Début IP Fin IP Règle
(contient ou commence par)Agent utilisateur - Inclure Agent utilisateur Exclure
(255 caractères max.)Vous pouvez définir trois types de règles de robots :
- L’agent utilisateur contient ou commence par
- Correspondance d’une seule adresse IP ou d’un seul caractère générique
- Correspondance d’une plage d’adresses IP
Chaque ligne du fichier d’importation ne peut contenir que l’une des définitions de robot suivantes :
note note NOTE Pour établir une correspondance avec un robot à l’aide d’une combinaison de règles associées par un opérateur « OU » (par exemple, agent utilisateur OU adresse IP), indiquez un nom identique pour toutes les règles à combiner dans le champ du nom de robot. Les correspondances « AND » ne sont pas prises en charge. -
L’agent utilisateur contient ou commence par : indiquez une seule chaîne d’agent utilisateur avec laquelle établir une correspondance dans la colonne Agent - Inclure. Indiquez le type de correspondance à effectuer en indiquant contient ou commence par dans le champ Règle de correspondance de l’agent. Vous pouvez inclure une valeur facultative dans la colonne Agent - Exclure pour définir une ou plusieurs chaînes délimitées par une barre verticale (
|
) que l’agent ne contient pas. Les correspondances de chaînes ne sont pas sensibles à la casse. Les colonnes Début IP et Fin IP doivent, toutes deux, être vides. -
Correspondance d’une seule adresse IP ou d’un seul caractère générique : pour établir une correspondance avec une seule adresse IP (
10.10.10.1
) ou une adresse IP avec un caractère générique (10.10.*.*
), indiquez la même valeur dans les colonnes Début IP et Fin IP. Règle de correspondance de l’agent, Agent - Inclure et Agent - Exclure doivent être vides. -
Correspondance de plage IP : définissez une plage d’adresses IP à l’aide des colonnes Début IP et Fin IP. Vous pouvez utiliser des caractères génériques pour faire correspondre des plages d’adresses IP ; par exemple
10.10.10.*
avec10.10.20.*
. Règle de correspondance de l’agent, Agent - Inclure et Agent - Exclure doivent être vides.
-
Sur la page Règles de robots du Gestionnaire de suites de rapports, en regard de la zone Sélectionner le fichier de robot CSV à importer, sélectionnez Choisir le fichier, puis sélectionnez le fichier CSV qui définit les règles de robots à importer.
-
(Facultatif) Cochez la case Remplacer les règles existantes pour supprimer toutes les règles existantes et les remplacer par les règles définies dans le fichier de téléchargement.
-
Sélectionnez Importer un fichier.
-
Dans la zone Jeux de règles, passez en revue les règles qui ont été importées.
-
Sélectionnez Enregistrer.
Exporter des règles de robots
Pour exporter toutes les règles définies dans l’interface utilisateur au format CSV :
-
Accédez à Analytics > Admin > Suites de rapports.
-
Sélectionnez la suite de rapports contenant les règles de robots à exporter, puis sélectionnez Modifier les paramètres > Général > Règles de robots.
-
Sélectionnez Exporter les règles de robots, puis enregistrez le fichier CSV dans votre système de fichiers.
Incidence des règles de robots sur la collecte de données :headding-anchor:section_F01A3130E7A04A9993371CF26F6586F2
Les règles de robots s’appliquent à toutes les données d’analyse. Les données supprimées par les règles de robots ne sont visibles que dans les rapports Robots et Pages de robots.
Les règles VISTA sont appliquées après les règles de robots. Consultez Ordre de traitement dans le guide d’utilisation des notes techniques.
Traitement de visites enregistrant de nombreux accès : si plus de 100 accès se produisent au cours d’une visite, la fonction de création de rapports détermine si la durée de la visite (en secondes) est inférieure ou égale au nombre d’accès. Dans ce cas, compte tenu des coûts de traitement des visites longues et intensives, la création de rapports recommence avec une nouvelle visite. Les visites qui enregistrent de nombreux accès sont généralement causées par des attaques de robots et ne sont pas considérées comme ses sessions de navigation normales effectuées par des visiteurs.
bots
sont facturés comme des appels au serveur.Impact de l’obscurcissement des adresses IP sur le filtrage des robots :headding-anchor:section_92E60B95BE8940D983F28C79E0CD6B12
La liste des robots IAB est basée uniquement sur l’agent-utilisateur. De ce fait, le filtrage basé sur cette liste n’est pas affecté par les paramètres d’obscurcissement d’IP. Pour le filtrage des robots non IAB (règles personnalisées), l’IP peut faire partie des critères de filtrage. Si vous filtrez des robots à l’aide de l’IP, le filtrage se produit une fois que le dernier octet a été supprimé, si ce paramètre est activé, mais avant les autres options d’obscurcissement d’IP, par exemple la suppression de l’ensemble de l’IP ou son remplacement par un ID unique.
Si l’obscurcissement d’IP est activé, l’exclusion de l’adresse IP survient avant l’obscurcissement ; ainsi, les clients n’ont rien à changer lorsqu’ils activent cette option.
Si le dernier octet est supprimé, ceci a lieu avant le filtrage IP. Par conséquent, le dernier octet est remplacé par un 0 et les règles d’exclusion IP doivent être mises à jour afin de correspondre aux adresses IP avec un zéro à la fin. Le * correspondant doit correspondre à 0.