Solo PaaS

Prácticas recomendadas para configurar rastreadores web

Última actualización: 5 de mayo de 2025

Creado para:

  • Experimentado
  • Desarrollador

Este artículo proporciona prácticas recomendadas para usar archivos de robots.txt y sitemap.xml en Adobe Commerce, incluida la configuración y la seguridad. Estos archivos indican a los rastreadores web (generalmente robots de motores de búsqueda) cómo rastrear páginas en un sitio web. La configuración de estos archivos puede mejorar el rendimiento del sitio y la optimización de los motores de búsqueda.

NOTA
Estas prácticas recomendadas se aplican únicamente a los proyectos que utilizan la tienda nativa de Adobe Commerce. No se aplican a proyectos de Adobe Commerce que utilizan otras soluciones de tienda (por ejemplo, Adobe Experience Manager, sin encabezado).

Productos y versiones afectados

Todas las versiones compatibles de:

  • Adobe Commerce en la infraestructura en la nube
  • Adobe Commerce local

Adobe Commerce en la infraestructura en la nube

Un proyecto de Adobe Commerce predeterminado contiene una jerarquía que incluye un solo sitio web, tienda y vista de tienda. Para implementaciones más complejas, puedes crear sitios web, tiendas y vistas de tiendas adicionales para una tienda de varios sitios.

Tiendas de un solo sitio

Siga estas prácticas recomendadas al configurar los archivos de robots.txt y sitemap.xml para tiendas de un solo sitio:

  • Asegúrese de que el proyecto esté usando ece-tools versión 2002.0.12 o posterior.

  • Utilice la aplicación Admin para agregar contenido al archivo robots.txt.

    CONSEJO
    Vea el archivo robots.txt generado automáticamente para su tienda en <domain.your.project>/robots.txt.

  • Use la aplicación Admin para generar un archivo de sitemap.xml.

    IMPORTANTE
    Debido al sistema de archivos de solo lectura de Adobe Commerce en los proyectos de infraestructura en la nube, debe especificar la ruta de acceso pub/media antes de generar el archivo.

  • Utilice un fragmento personalizado de VCL de Fastly para redirigir desde la raíz del sitio a la ubicación pub/media/ para ambos archivos:

    {
  "name": "sitemaprobots_rewrite",
  "dynamic": "0",
  "type": "recv",
  "priority": "90",
  "content": "if ( req.url.path ~ \"^/?sitemap.xml$\" ) { set req.url = \"pub/media/sitemap.xml\"; } else if (req.url.path ~ \"^/?robots.txt$\") { set req.url = \"pub/media/robots.txt\";}"
}

  • Pruebe el redireccionamiento viendo los archivos en un explorador web. Por ejemplo, <domain.your.project>/robots.txt y <domain.your.project>/sitemap.xml. Asegúrese de utilizar la ruta raíz para la que configuró el redireccionamiento y no una ruta diferente.

INFORMACIÓN
Consulte Agregar robots de mapa del sitio y de motor de búsqueda para obtener instrucciones detalladas.