2

Buenas,

Tengo que actualizar el sitemap porque la estructura de mi página ha cambiado, sin embargo quiero evitar indexar ciertas páginas que son por así decirlo, dinámicas. Por ejemplo, tengo una sección de noticias y cada vez que pulsas sobre cualquier noticia te lleva a un noticias.php?ID=10, pongo 10 por poner un número, pero puede ser cualquiera.

El caso es que no consigo que el sitemap se salte ciertas páginas. Lo estoy intentando con el siguiente código en robots.txt:

User-Agent: Googlebot
Disallow: single.php?id=*

User-Agent: Googlebot
Disallow: listado_precios.php?juegosPorPagina=*&Ordenar=*&Genero=*&pagina=*

En los asteriscos se supone que van números, pero me los indexa igualmente.

0

1 respuesta 1

0

Te dejo algunos ejemplos:

Bloquear todas las URL que incluye ?:

  • Disallow: /*?*

Bloquea todas las URL que tenga el parámetro param1

  • Disallow: /*?param1=*

Bloquea todas las URL que tenga el parámetro param1, param2, param3

  • Disallow: /*?param1=*&param2=*&param3=*

Tienes que saber también que no todos los bots aceptan o reconocen el * asterisco, excepto Google y Bing.

+ info

5
  • Gracias por tu respuesta. Lo he probado pero me sigue rastreando las páginas. Tengo por ejemplo una que es single.php?ID=8,pongo 8 pero ahí va un número, y son 2.000 en total...me rastrea muchas con esa estructura, por eso quiero bloquearlo para que no lo indexe, pero usando Disallow: /*single.php?ID=* me lo sigue rastreando.
    – user27826
    Commented el 8 mar. 2017 a las 21:58
  • @JetLagFox - No.. prueba simplemente Disallow: /*?ID=* Commented el 8 mar. 2017 a las 22:00
  • Me lo sigue indexando. Estoy usando esta página, no vaya a ser que sea por eso...enlace
    – user27826
    Commented el 8 mar. 2017 a las 22:28
  • @JetLagFox - Vale entonces cambia: User-Agent: Googlebot a User-Agent: * y me cuentas Commented el 8 mar. 2017 a las 22:30
  • @JetLagFox - O prueba lo con Google Webmaster Tool Commented el 8 mar. 2017 a las 22:35

Tu Respuesta

By clicking “Publica tu respuesta”, you agree to our terms of service and acknowledge you have read our privacy policy.