Как запретить ПС индексировать ссылки на сайте?

Question

[Александр Коновалов]

Всем привет!) Как запретить поисковым системам индексировать ссылки на сайте? Чтобы, если ввести в поиске, например, https://vk.com, то в выдаче не отображался мой сайт.

Answer 1

[Андрей Буров]

www.robotstxt.org/robotstxt.html
т.е. в robots.txt укажите

User-agent: *
Disallow: /

Comments

[Александр Коновалов]

Так это же запретит индексировать весь сайт.

[Александр Коновалов]

Или я ошибаюсь?

[Андрей Буров]

@Huf можете сделать несколько Disallow: для конкретных URL

[Александр Коновалов]

@BuriK666 точно! Я могу запретить ПС индексировать определенные страницы сайта на которых находятся ссылки, которые хочу скрыть. Я прав?

[Андрей Буров]

Да.
Disallow: /lala/
Disallow: /bla/bla.html

и т.п

[Александр Коновалов]

Спасибо!