vox_termen
@vox_termen

Можно ли в robots.txt отдавать разные фиды для разных роботов?

Добрый день!

Интересует вопрос, возможно ли один фид отдавать яндекс боту, а другой фид отдавать боту гугла или рамблер?
  • Вопрос задан
  • 110 просмотров
Пригласить эксперта
Ответы на вопрос 2
Всё в одном robots.txt
User-agent: Yandex
Disallow: /

User-agent: Mail.Ru
Disallow: /

User-agent: StackRambler
Disallow: /

User-agent: Googlebot
Disallow: /

User-agent: googlebot-image
Disallow: /

User-agent: googlebot-mobile
Disallow: /
Ответ написан
Комментировать
secsite
@secsite
Безопасные и быстрые сайты
отдавать

Роботс служит не для разрешений/запретов "отдавать", а для попросить(!) исключить(!!) из выдачи (не путать с индексацией - они все равно всё индексируют :) ). А вот послушаются боты или нет- это их дело.

www.robotstxt.org/robotstxt.html
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы