Cómo rastrea Google las páginas que se adaptan según la configuración regional
Si tu sitio cuenta con páginas que se adaptan según la configuración regional (es decir, si muestra contenido diferente según el país que se detecte o el idioma preferido del visitante), es posible que Google no rastree, indexe ni clasifique todo tu contenido para diferentes parámetros de configuración regionales. Esto se debe a que las direcciones IP predeterminadas del rastreador de Googlebot parecen corresponder a ubicaciones de EE.UU. Además, el rastreador envía solicitudes HTTP sin configurar Accept-Language
en el encabezado de la solicitud.
Rastreo distribuido geográficamente
Googlebot realiza el rastreo con direcciones IP ubicadas fuera de EE.UU., además de las direcciones IP de EE.UU.
Como siempre recomendamos, cuando parezca que Googlebot proviene de un país determinado, trátalo como a cualquier otro usuario de ese país. Esto quiere decir que, si bloqueas el acceso a tu contenido para los usuarios de EE.UU., pero permites que los visitantes de Australia lo vean, el servidor debería bloquear a Googlebot si parece provenir de EE.UU., pero permitir el acceso a Googlebot si parece provenir de Australia.
Otras consideraciones
- Googlebot usa la misma string de usuario-agente para todas las configuraciones de rastreo. Obtén más información sobre las strings de usuario-agente que usan los rastreadores de Google.
- Puedes verificar los rastreos distribuidos geográficamente de Googlebot con búsquedas de DNS inversas.
- Si tu sitio usa el protocolo de exclusión de robots, asegúrate de aplicarlo de manera coherente en todas las configuraciones regionales. Eso significa que las etiquetas
meta
de robots y el archivo robots.txt deben especificar las mismas reglas para cada configuración regional.