Как правильно сделать редирект?

Question

[Dr_Gonzo]

Коллеги, подскажите плз!

Есть сайт, главная страница - site.com/en или site.com/ru

На главной странице есть табы, первый из них, это собственно сама главная страница - site.com/en (все материалы), второй таб - site.com/en/questions/unanswered (выборка из всех материалов т.е. дубли)

Поисковикам необходимо заблокировать доступ к дублям - site.com/en/questions/unanswered

Делаю так:

Disallow: /en/questions/unanswered
Disallow: /en/questions/unanswered/

Вопрос - какой из вариантов правильный и блокирует текущую страницу?

Answer 1

[vainberg]

Если не редиректе, а о robots.txt, то Disallow: /en/questions/unanswered/

Comments

[Dr_Gonzo]

Т.е. если пропишу так Disallow: /en/questions/unanswered/ , то еще и заблокирую последующий контент (например: /en/questions/unanswered/content_12314)?

[vainberg]

Dr_Gonzo: все верно

Answer 2

[Armando]

User-agent: *
Disallow: /en/questions/unanswered

Comments

[Dr_Gonzo]

Не понял, кто из вас прав? Выше ответ противоположный)))

[Armando]

Dr_Gonzo: https://yandex.ru/support/webmaster/controlling-ro...

[Dr_Gonzo]

Disallow: /cgi-bin/
Обратите внимание на / в конце названия директории! Чтобы запрещать посещение именно каталога "/dir", инструкция должна иметь вид: "Disallow: /dir/". А строка "Disallow: /dir" запрещает посещение всех страниц сервера, полное имя которых (от корня сервера) начинается с "/dir". Например: "/dir.html", "/dir/index.html", "/directory.html".