Задать вопрос
vox_termen
@vox_termen
wordpress

Можно ли в robots.txt отдавать разные фиды для разных роботов?

Добрый день!

Интересует вопрос, возможно ли один фид отдавать яндекс боту, а другой фид отдавать боту гугла или рамблер?
  • Вопрос задан
  • 113 просмотров
Комментировать
Подписаться 1 Оценить Комментировать
Помогут разобраться в теме Все курсы
  • Loftschool
    Комплексное обучение PHP
    6 недель
    Далее
  • Яндекс Практикум
    Фулстек-разработчик расширенный
    20 месяцев
    Далее
  • Stepik
    Верстка и веб-разработка сайтов. Продвинутый уровень Web Develop
    2 недели
    Далее
Пригласить эксперта
Ответы на вопрос 2
AXP-dev
@AXP-dev
Всё в одном robots.txt
User-agent: Yandex
Disallow: /

User-agent: Mail.Ru
Disallow: /

User-agent: StackRambler
Disallow: /

User-agent: Googlebot
Disallow: /

User-agent: googlebot-image
Disallow: /

User-agent: googlebot-mobile
Disallow: /
Ответ написан
Комментировать
Комментировать
secsite
@secsite
Безопасные и быстрые сайты
отдавать

Роботс служит не для разрешений/запретов "отдавать", а для попросить(!) исключить(!!) из выдачи (не путать с индексацией - они все равно всё индексируют :) ). А вот послушаются боты или нет- это их дело.

www.robotstxt.org/robotstxt.html
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Разработчик плагина для Wordpress
TripShock Adventures
от 1 200 до 2 500 $
Web3-разработчик / Blockchain-инженер для ecommerce-проектов (NFT, токены, кош
Спортивное Время
от 100 000 до 250 000 ₽
Linux администратор HPC стека
Сбер • Москва
от 200 000 до 400 000 ₽
Ещё вакансии