Как в robots.txt закрыть от индексации все ?get= запросы?

Question

SvizzZzy @SvizzZzy

robots.txt

Как в robots.txt закрыть от индексации все ?get= запросы?

На одном самописном сайте используется чпу, поэтому там абсолютно нигде нету (?podobnyh=) запросов.
Но непонятно откуда начали появляться дубли вида: site.com/page/1/ == site.com?page=1 и тд
Решил убрать их из индексации через файл robots.txt и нашел такое решение:

Disallow: /*?*

Правильное ли оно?

Вопрос задан более трёх лет назад
3359 просмотров

Комментировать

Подписаться 1 Оценить Комментировать

Помогут разобраться в теме Все курсы

Яндекс Практикум

Python-разработчик

10 месяцев

Далее
Skillfactory

DevOps-инженер

6 месяцев

Далее
Хекслет

Фронтенд-разработчик

10 месяцев

Далее
SF Education

Бэкенд-разработчик на Python

3 месяца

Далее
Stepik

Backend разработка

4 недели

Далее
Merion Academy

Python программист с нуля

4 месяца

Далее
Skypro

Frontend-разработчик с нуля

9 месяцев

Далее
Нетология

Python-разработчик с нуля

6 месяцев

Далее

Решения вопроса 1

4 комментария

Diversia @Diversia

Здравствуйте.
Временем проверено? Нет побочных моментов?

Написано более трёх лет назад
freeeeez @freeeeez

Diversia, как оказалось есть, знак вопроса, стоящий сразу после имени домена, например, site.ru/? равнозначен индексной странице, поэтому есть риск вылета главной из индекса.
Лучше все таки прописать правила под определенные параметры Disallow: /*?*order=

Написано более трёх лет назад
Diversia @Diversia

freeeeez, спасибо за информацию!

Написано более трёх лет назад
Андрей Филимонов @fil_and

freeeeez, да не, не может быть. Вебмастер пишет, что главная индексируется, если просто Disallow: /? сделать

Написано более трёх лет назад