Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
bro-dev
@bro-dev
robots.txt
Есть какой нибудь поисковик игнорирующий robot.txt?
Есть какой нибудь поисковик игнорирующий robot.txt?
Вопрос задан
более трёх лет назад
323 просмотра
2
комментария
Подписаться
2
Простой
2
комментария
Facebook
Вконтакте
Twitter
Dimonchik
@dimonchik2013
ага, по коду
Написано
более трёх лет назад
bro-dev
@bro-dev
Автор вопроса
При чем здесь код? Поисковики добровольно учитывают ротбот, а иногда и забивают на это, вот я и с прашиваю мб можно как то искать в гугле с ключями какими нибуть чтобы он вообще игнорил его.
Написано
более трёх лет назад
Помогут разобраться в теме
Все курсы
Яндекс Практикум
Python-разработчик
10 месяцев
Далее
Skillfactory
DevOps-инженер
6 месяцев
Далее
Нетология
Python-разработчик с нуля
6 месяцев
Далее
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
0
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
htaccess
+2 ещё
Простой
Вебмастер: Страницы-дубли с GET-параметрами?
1 подписчик
27 мар.
228 просмотров
4
ответа
Поисковая оптимизация
+3 ещё
Простой
Какой путь исправления проблемы (sitemap.xml с дублями) для Яндекс поиска правильнее?
1 подписчик
27 февр.
163 просмотра
5
ответов
WordPress
+2 ещё
Простой
Как закрыть индексацию корзины в Wordpress?
1 подписчик
более года назад
266 просмотров
1
ответ
robots.txt
Простой
Как запретить в robots.txt параметры с #?
1 подписчик
более года назад
65 просмотров
2
ответа
robots.txt
Сложный
Проблема с файлом robots.txt в Google Search Console. Откуда он его берет?
1 подписчик
более года назад
504 просмотра
3
ответа
Поисковая оптимизация
+1 ещё
Простой
Как скрыть от ботов-поисковиков алиас сайта с помощью robots.txt?
1 подписчик
более года назад
78 просмотров
2
ответа
Windows
+3 ещё
Простой
При открывании csv файла в формате .txt появляются символы ("" и ;) как можно открыть csv файл без символов; и «»?
1 подписчик
более года назад
190 просмотров
0
ответов
robots.txt
Простой
Можно ли ограничить в robots.txt страницы с символами в конце?
1 подписчик
более года назад
70 просмотров
0
ответов
Google
+1 ещё
Средний
Почему google не видит robots.txt?
2 подписчика
более года назад
489 просмотров
2
ответа
Поисковая оптимизация
+2 ещё
Простой
Как частично закрыть от индекса /xfsearch/?
1 подписчик
более года назад
78 просмотров
1
ответ
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
Инженер-программист С/С++ (Телекоммуникации и связь)
Специальный Технологический Центр
•
Санкт-Петербург
от 250 000 ₽
Аналитик 1С (телеком)
LIAN
•
Москва
от 270 000 до 300 000 ₽
Руководитель проектов
ЛАНИТ
•
Красноярск
До 190 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама