Задать вопрос
weranda
@weranda

Можно ли загнать в индекс страницу, запрещенную в robots.txt?

Приветствую
Вопрос теоретический. В robots.txt прописан запрет на индексацию конкретной страницы. Можно ли загнать в индекс ПС Яндекс и Google такую страницу? И может ли какой-либо бот ПС посетить такую страницу?
  • Вопрос задан
  • 121 просмотр
Подписаться 1 Простой Комментировать
Ответ пользователя Uber Noob К ответам на вопрос (2)
ubernoob
@ubernoob
Посетить может, в индекс попасть не может
Ответ написан