¿Como controlar esta url https://blogmusicradio.com/toto-hold-the-line/?share=facebook&nb=1 con robots.txt?

blogmusicradio — Fri, 06 Dec 2024 11:18:00 +0000

Foros

Para controlar la URL https://blogmusicradio.com/toto-hold-the-line/?share=facebook&nb=1 con robots.txt, puede agregar la siguiente línea a su archivo robots.txt:


```

Disallow: /*?share=facebook

```

Esta directiva impedirá que los motores de búsqueda rastreen e indexen todas las URLs que contengan el parámetro "?share=facebook". Esto es útil para evitar la indexación de páginas de compartir en redes sociales generadas automáticamente, que a menudo contienen contenido duplicado.
Si desea ser más específico y solo bloquear esta URL en particular, puede usar:


```

Disallow: /toto-hold-the-line/?share=facebook

```

Recuerde que el archivo robots.txt debe estar en la raíz de su sitio web (por ejemplo, https://blogmusicradio.com/robots.txt). Además, tenga en cuenta que mientras robots.txt puede prevenir el rastreo, no garantiza la desindexación de URLs ya indexadas. Para una solución más robusta, considere combinar esto con etiquetas meta noindex o encabezados HTTP.

blogmusicradio Vie, 06/12/2024 - 11:18

¿que problemas puede generar esta configuracion de robots.txt?

ernesto — Tue, 05 Sep 2023 13:03:50 +0000

¿que problemas puede generar esta configuracion de robots.txt?

Foros

SEO

#ROBOTS_AGENCY
User-agent: *
Disallow: /
Allow: /$
https://drupal-9.develop-site.com/es/node/43

ernesto Mar, 05/09/2023 - 13:03