La variable bots tab

Cet onglet contient des informations qui expliquent comment identifier si et quoi. bots provoquent des problèmes sur le site.

Présentation générale de bots:

  • A bot est un logiciel qui exécute des tâches automatisées répétitives. Avec l'intelligence artificielle et l'évolution de l'apprentissage automatique, les tâches, les méthodes et les interactions de bots sont en train de changer. Il y a good bots qui bénéficient aux sites en les indexant et en les ajoutant aux moteurs de recherche internet. Les internautes sont ainsi guidés vers le site par les résultats des moteurs de recherche. A good bot respecte généralement les limites placées sur la variable bot par un robots.txt fichier ou paramètres dans une console de moteur de recherche. Les limites peuvent restreindre l’accès au site ou à certaines parties du site.

  • Malveillant bots ignore la variable robots.txt ou ils peuvent paraitre un bon bot via le champ de l’agent utilisateur de requête des données de requête HTTP. Certaines choses malveillantes bots do :

    • Ajoutez la charge à un site pour refuser aux utilisateurs légitimes l’accès au site.
    • Videz et réutilisez du contenu sans autorisation.
    • Enregistrer des faux comptes pour inonder les services de messagerie ou les adresses ou les rediriger vers d’autres sites (SPAM bots).
    • Créer des vues falsifiées (Viewbots).
    • Acheter des produits ou des billets (Focused bots).
  • Gestion bots

    • Observation for Adobe Commerce contient des vues de bot traffic :

      • Il affiche le total non mis en cache bot activité qui affiche la charge qu’une bot s’ajoute à un site et lorsque cette charge se produit.

      • Elle affiche la variable bots qui génèrent des erreurs. En règle générale, si une variable bot ajoute une charge qui entraîne des problèmes au site, ce qui bot ou l’adresse IP présente la fréquence d’erreurs la plus élevée.

      • Elle affiche bot noms (valeurs des champs de l’agent utilisateur de requête) et adresses IP à gérer par le biais de :

        • Fastly (limitation de débit ou VCLs qui bloquent des adresses IP, des plages ou bots par valeur de nom).
        • Ajouter de bonnes choses bot aux robots.txt field pour restreindre ou restreindre le taux d’accès au site.
        • Gestion Bing ou Google bots via la console du moteur de recherche.

Experimental Potential Malicious Bots frame

Cadre de robots malveillants potentiels expérimentaux

La variable Experimental Potential Malicious Bots frame s’exécute sur 12 requêtes complexes et distinctes. Il détecte les signatures de requête IP malveillantes, puis agrège les résultats, les additionne et les trie par nombre dans l’ordre décroissant. Les requêtes contiennent une multitude de signatures de données d’exploits CVE et d’autres requêtes malveillantes. Même lorsque les exploits sont bloqués par des correctifs ou correctifs de sécurité et ne constituent pas une menace pour le site, la demande doit toujours être traitée par le site web. Le volume de demandes peut devenir très important en peu de temps. Ce cadre n’affiche pas le nombre total de demandes provenant de l’adresse IP, mais plutôt les demandes qui contiennent des signaux indiquant que la demande a eu des intentions suspectes.

Veillez à vérifier que le trafic est suspect et qu’il ne provient pas d’une Content Distributed Network (CDN) adresse qui peut également diffuser des requêtes valides. Si les demandes sont déterminées comme provenant d'une adresse IP du réseau CDN, veuillez contacter ce fournisseur de services pour aider à bloquer le trafic suspect via leur réseau. Si vous devez bloquer l’adresse ou l’URL de demande, reportez-vous à la section Bloquer le trafic malveillant pour Adobe Commerce sur Fastly level dans la base de connaissances de prise en charge d’Adobe Commerce.

Rate of HTTP request per second (top 25) during requested time period

Taux de requêtes HTTP par seconde (25 premières) pendant la période demandée

La variable Rate of HTTP request per second (top 25) during requested time period frame affiche les requêtes les plus élevées par seconde d’adresses IP au cours de la période sélectionnée. Si ces adresses figurent également dans le tableau ci-dessus, vérifiez qu’elles ne sont pas des adresses CDN et malveillantes et bloquez-les via Fastly.

Total Bot traffic by bot name:

Trafic total de robots par nom de robot pendant la période sélectionnée :

La variable Total Bot traffic by bot name during selected time period Le tableau contient le nombre agrégé de requêtes non mises en cache dans lesquelles la variable request_user_agent contient une chaîne de bots dans la valeur . Il peut s’agir du nom bot comme la propriété request_user_agent la valeur du champ peut être mise en file d’attente. La valeur sous Count est la colonne la plus importante.

Total Bot Traffic by Bot name/IP address

Trafic total des robots par nom/adresse IP pendant la période sélectionnée Comment bloquer le trafic des robots à un niveau Fastly OU gérer les robots par le biais de votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

La variable Total Bot Traffic by Bot name/IP address during selected time period How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt Le tableau affiche les mêmes données que le tableau précédent, mais ajoute des adresses IP effectuant les requêtes pour le compte du bot. Comme malveillant bots parodie de bien bots, la ou les adresses IP doivent être vérifiées par le biais de sites web qui identifient les adresses IP abusives ou par whois services ou DNS lookups. Par exemple : Google publie leurs googlebot Adresses IP et Microsoft dispose d’un outil de vérification pour Bingbots.

Graph - Bots with HTTP status errors

Graphique - Robots avec des erreurs d’état HTTP au cours de la période sélectionnée Comment bloquer le trafic de robots à un niveau Fastly OU gérer des robots via votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

La variable Graph - Bots with HTTP status errors during selected time period How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt Le graphique affiche les erreurs sur bots qui se déclarent dans le champ de l’agent utilisateur de requête. Cela ne signifie pas nécessairement que l’erreur est provoquée par le volume de la bot ou tout autre trafic. Les erreurs peuvent être que la variable bot demande des informations qui n’existent pas ou il y a un autre problème dans la requête.

S’il y a un pic d’erreurs sur les adresses IP en cas d’instabilité ou de panne du site, elles peuvent être suspectées d’affecter le problème du site.

Table - IPs that do not identify as bots

Tableau : adresses IP qui ne s’identifient pas comme des robots avec des erreurs d’état HTTP au cours de la période sélectionnée Comment bloquer le trafic de robots à un niveau rapide OU gérer des robots par le biais de votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

La variable Table - IPs that do not identify as bots with HTTP status errors during selected time period How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt Le tableau affiche les requêtes IP avec des codes d’état http non-200 qui NE S’identifient PAS comme bots dans le champ de l’agent utilisateur de requête. Ces adresses IP peuvent être des adresses IP malveillantes, en particulier si le nombre est élevé pour la période sélectionnée.

Si le nombre de codes d’état http non 200 est faible et que les plages d’adresses IP ne sont pas similaires, les adresses peuvent ne pas contribuer aux problèmes du site.

Table – Cache Status ‘ERROR’

Table - Tableau détaillé de l’état du cache ERROR (que font ces adresses IP ?) Comment bloquer le trafic de robots à un niveau Fastly OU gérer les robots par le biais de votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

Lorsque les adresses IP génèrent une fréquence élevée d’erreurs, demandez-vous ce qu’elles font ? La variable Table – Cache Status ‘ERROR’ detail table (what are these IPs doing?) How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt Le tableau affiche l’URL demandée avec la valeur d’état HTTP pour les requêtes ayant un état de cache. ERROR . La fréquence est facettée par l’URL, de sorte que le nombre peut être faible. N’oubliez pas que l’adresse IP peut effectuer des milliers de demandes pendant la période sélectionnée. Il s’agit d’une vue par rapport à 2 000 demandes au cours de la période (limite d’affichage des enregistrements).

Show 5XX status distribution

Afficher la distribution de statut 5XX sur les adresses IP (200 premières adresses) Comment bloquer le trafic de robots sur un niveau Fastly OU gérer les robots via votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

La variable Show 5XX status distribution across IP addresses (top 200 addresses) How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt cadre est puissant. Elle affiche les adresses IP qui comportent des codes d’état http 5XX au cours de la période sélectionnée. Si une adresse IP effectue un volume élevé de requêtes et que le site est affecté au point où il ne peut pas gérer le trafic, alors les adresses IP qui enregistrent la fréquence la plus élevée des requêtes auront généralement le volume d’erreurs le plus élevé. Les codes d’état http 5XX indiquent généralement un site qui a du mal à répondre aux requêtes.

Plus la barre est grande, plus le pourcentage d’erreurs de l’adresse IP est élevé dans le nombre total d’erreurs 5xx durant cette période. Remarque : une adresse IP peut comporter plusieurs segments dans le graphique si elle comporte plusieurs codes d’état http (par exemple, 502 et 503 états http).

Une distribution type serait indiquée vers la droite de la barre où les adresses IP sont égales en largeur ou il y aurait quelques barres larges avec des valeurs très faibles.

Si vous passez la souris sur le segment à barres, le nombre d’erreurs indiquées s’affichera au cours de la période sélectionnée.

IP cache status (MISS, PASS, ERROR) and HTTP status

État du cache IP (MISS, PASS, ERROR) et état http pendant la période sélectionnée Comment bloquer le trafic de robots à un niveau rapide OU gérer les robots par le biais de votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

Ceci IP cache status (MISS, PASS, ERROR) and HTTP status during selected time period How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt Le cadre affiche le nombre de codes d’état HTTPS et les requêtes non mises en cache par IP pendant la période sélectionnée. Cela indique la charge proportionnelle provenant de chaque adresse IP et le volume total. Les adresses IP présentant le plus de requêtes sont alors affichées.

Fastly Cache Summary for selected time period

Résumé rapide du cache pour la période sélectionnée

Si vous cliquez sur l’icône Error dans le graphique ci-dessous, vous pouvez comparer les deux derniers graphiques. Cela peut aider à indiquer où la charge contribue aux problèmes du site.

Vérification rapide des erreurs

Graph - IPs that do not identify as bots

IP qui ne s’identifient pas comme robots sans erreur pendant la période sélectionnée Comment bloquer le trafic de robots à un niveau Fastly OU gérer les robots par le biais de votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

La variable Graph - IPs that do not identify as bots without error during selected time period How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt Le cadre affiche le champ de l’agent utilisateur de requête, l’adresse IP et le code d’état pour les demandes pour lesquelles le champ de l’agent utilisateur de requête n’indique pas de bot. Ce cadre peut afficher des demandes à haute fréquence provenant de n’importe quelle adresse IP, mais prêter attention aux demandes à haute fréquence, en particulier pendant une période où le site peut rencontrer des problèmes.

Graph - Suspicious Non-Bot traffic

Trafic non bot suspect pendant une période sélectionnée

La variable Graph - Suspicious Non-Bot traffic during selected time period graph recherche une valeur d’agent utilisateur de demande Go-http-client, mais sera étendue pour examiner d’autres valeurs d’agent utilisateur de demande suspectes. Cette valeur de l’agent utilisateur de requête est utilisée par les sites pour se connecter à partir de services et peut être valide, mais elle est également utilisée par malicieux. bots.

Graph - Bot traffic by Bot name

Graphique - Trafic de robots par nom de robot pendant la période sélectionnée)

La variable Graph - Bot traffic by Bot name during selected time period L’image affiche les mêmes données que le trafic total de robots par Bot nom au cours de la période sélectionnée dans la partie supérieure de l’onglet. Il affiche les données par le biais de la chronologie afin que vous puissiez voir quand les requêtes de la fonction bots sont faites et leurs distributions.

Graph - Top 250 Bot Names and IP addresses

250 premiers noms de robots et adresses IP au cours d’une période sélectionnée Comment bloquer le trafic de robots à un niveau Fastly OU gérer les robots par le biais de votre fichier robots.txt Bonnes pratiques pour Adobe Commerce robots.txt

La variable Graph - Top 250 Bot Names and IP addresses during selected time period How to block bot traffic on Fastly level OR manage bots through your robots.txt file Best practices for Adobe Commerce robots.txt Le cadre affiche les mêmes données que le total Bot Trafic par nom de robot/adresse IP lors de la période sélectionnée dans la partie supérieure de l’onglet. Il affiche les données via la chronologie et les facette par adresse IP. Cela s’affiche lorsque les requêtes de la fonction bots sont effectuées, l’adresse IP qui effectue des requêtes et la distribution des requêtes.

Blocked Bot name / IP addresses (in Fastly)

Nom de robot/adresses IP bloquées (en Fastly) pendant la période sélectionnée. Ce graphique affiche le trafic de robots et les adresses IP qui ont été renvoyées avec un code d’état HTTP 403 interdit

La variable Blocked Bot name / IP addresses (in Fastly) during selected time period. This graph displays bot traffic and IPs that were returned a 403 Forbidden HTTP Status code frame affiche le nom du robot et les adresses IP qui sont bloquées. Ce graphique montre comment toutes les demandes sont bloquées dans Fastly à venir.

Blocked non-Bot name / IP addresses (in Fastly)

Nom de robot/adresses IP non bloquées (en Fastly) pendant la période sélectionnée. Ce graphique affiche le trafic non robots et les adresses IP qui ont été renvoyées avec un code d’état HTTP 403 interdit

La variable Blocked non-Bot name / IP addresses (in Fastly) during selected time period graph displays non-bot traffic and IPs that were returned a 403 Forbidden HTTP Status code frame affiche les adresses IP qui ne sont pas identifiées comme bot qui ont été bloqués Fastly.

This table shows the number of user agents per IP address, number of successful, unsuccessful and blocked requests:

Ce tableau indique le nombre d’agents utilisateur par adresse IP, le nombre de demandes ayant abouti, ayant échoué et bloquées :

Malveillant bots souvent parodié bots par l’intermédiaire de la valeur de la variable Request User Agent champ . Ce tableau indique le nombre de valeurs uniques de l’adresse IP dans ce champ. Plus la valeur de la variable Request User Agent , plus l’adresse IP est suspicieuse.

IP with non-200 status errors

IP avec des erreurs d’état non 200 - sans état 403

La variable IP with non-200 status errors – without 403 status frame affiche la distribution sur la période sélectionnée des adresses IP avec des codes d’état HTTP autres que 200. Lorsque des valeurs plus élevées s’affichent sur une seule adresse IP ou un groupe d’adresses IP, elles doivent faire l’objet d’une enquête plus approfondie.

IP with 403 status codes:

IP avec des codes d’état 403 :

La variable IP with 403 status codes frame affiche les requêtes non mises en cache sans cache_status=ERROR ayant un état HTTP 403. Cela peut indiquer que le serveur d’origine est la source du 403 (non autorisé) plutôt qu’un bloc de Fastly.

Top 5 with non-200 status codes

5 premiers avec des codes d’état non-200 indiquant cache_status :

La variable Top 5 with non-200 status codes showing cache_status Le tableau affiche au niveau de l’adresse IP/de l’état le nombre de chaque avec la variable cache_status .

Pageview Latency will show as spikes

La latence des pages vues s’affiche sous la forme de pics sur ce graphique :

La variable Pageview Latency will show as spikes on this graph: Le cadre affiche la latence du chargement de la page/de la réponse de l’API qui peut être conforme à la variable bot trafic.

recommendation-more-help
c2d96e17-5179-455c-ad3a-e1697bb4e8c3