Как запретить индексацию страниц с GET параметрами?

Question

[Валерий Гутин]

Есть ссылка типа: sitename.com/info?id=1

Как запретить всю папку /info независимо от значений get-параметров?

Заранее спасибо.

Answer 1

[entermix]

robots.txt:

User-agent: *

Disallow: /info*

Host: https://sitename.com/
Sitemap: https://sitename.com/sitemap.xml

Comments

[entermix]

Nikolay Petyukh, нет

[Валерий Гутин]

entermix, а что делает * перед слешем? в интернете не нашел инфу

[entermix]

Nikolay Petyukh, а где в условии сказано, что есть такие страницы? К тому же, если Вам не подходит существующее правило - измените его. В чем проблема?

[entermix]

alohamneploha, это запрещает индексацию подобных ссылок:

https://sitename.com/en/info
https://sitename.com/ru/info

Т.е. в Вашем случае можно убрать, обновил ответ

https://webmaster.yandex.ru/tools/robotstxt/
https://www.google.com/webmasters/tools/robots-tes...