@nonconformiste

Как в WP запретить роботам посещать все страницы?

Прошу прощения ща банальный вопрос, но ситуация странная и животрепещущая.
У меня на сайте есть разделы которые полностью открываются путем запроса к платному сторонему API, по статистике использования API запросов слишком много идет, вылазит за все доступные квоты и как следствие очень много ест денег. Я в админке поставил галочку Discourage search engines from indexing this site и в корне сайта закинул robots.txt User-agent: * Disallow: /, но запросы все идут даже прямо сейчас.
  • Вопрос задан
  • 71 просмотр
Пригласить эксперта
Ответы на вопрос 1
@Bright144
Я не веб разработчик, но парсить или использовать сайты в свою пользу через роботов умею. Пока что не встречал сайтов который 100% защищенный от роботов. Только не предсказуемые капча(как у Яндекса) может мешать роботам делать свою работу.
Ответ написан
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы