Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
Пума Тайланд
Просто люблю качественно работать
5144
вклад
266
вопросов
14114
ответов
12%
решений
Ответы пользователя по тегу
robots.txt
Какой путь исправления проблемы (sitemap.xml с дублями) для Яндекс поиска правильнее?
Пума Тайланд
@opium
Просто люблю качественно работать
Фигню какую то пишите зайдите в панель Яндекса и посмотрите что там происходит с индексацией
Ответ написан
28 февр.
Комментировать
Нравится
Комментировать
Почему google не видит robots.txt?
Пума Тайланд
@opium
Просто люблю качественно работать
У Гугла нескольуо списков айпи для сервисов около 6 штук видимо какой то из них вы не добавили в размещенные
Ответ написан
более года назад
6
комментариев
Нравится
6
комментариев
Можно ли хранить sitemap.xml в подпапках домена?
Пума Тайланд
@opium
Просто люблю качественно работать
Сайтмапы можно как угодно
Роботс смотреть поисковик будет только в корне Ам все остальные просто проигнорирует
Ответ написан
более трёх лет назад
Комментировать
Нравится
1
Комментировать
Как редактировать robots.txt на Shopify?
Пума Тайланд
@opium
Просто люблю качественно работать
Да вроде все отлично с ним зачем менять то?
Ответ написан
более трёх лет назад
1
комментарий
Нравится
1
1
комментарий
Почему Robots блокирует google analytics?
Пума Тайланд
@opium
Просто люблю качественно работать
А причем тут Гугл аналитикс , роботс влияет только на индексацию
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Кто встречал ложную ошибку 404 в Google Search Console?
Пума Тайланд
@opium
Просто люблю качественно работать
Ну конечно может, вы же забанили айпи робота
Все поисковики надо разрешить по юзерагенту
Ответ написан
более трёх лет назад
2
комментария
Нравится
1
2
комментария
Как запретить индексацию адресов с верхним регистром символов?
Пума Тайланд
@opium
Просто люблю качественно работать
Проверяйте в коде и делайте ноиндекс
Ответ написан
более трёх лет назад
Комментировать
Нравится
1
Комментировать
Нужно ли закрывать от индексации страницы без поискового спроса?
Пума Тайланд
@opium
Просто люблю качественно работать
если вы видите в этом какой то смысл для вас то конечно надо закрыть, если не видите то не надо
Ответ написан
более трёх лет назад
7
комментариев
Нравится
7
комментариев
Как правильно скрыть от индексации в robots.xtx?
Пума Тайланд
@opium
Просто люблю качественно работать
Каеоникал мне кажется тут куда уместнее
Ответ написан
более трёх лет назад
Комментировать
Нравится
1
Комментировать
Странный robots.txt, что с этим делать?
Пума Тайланд
@opium
Просто люблю качественно работать
Ну ровным счётом зависит от того какая у вас задача стоит
Ответ написан
более трёх лет назад
4
комментария
Нравится
4
комментария
Что запрещать в robots.txt?
Пума Тайланд
@opium
Просто люблю качественно работать
Ничего из этого запрещать не надо, как вы такие глупости выдумали?
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Как правильно добавить несколько sitemap в robots для Google?
Пума Тайланд
@opium
Просто люблю качественно работать
Не трахать мозг и просто добавить их в вебмастере
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Как закрыть от индексации все страницы?
Пума Тайланд
@opium
Просто люблю качественно работать
ну вы пропишите в роботсе ее аллоу
а * звездочку для дизаллоу
Ответ написан
более трёх лет назад
1
комментарий
Нравится
1
комментарий
Необходимо ли исключать UTM-ссылки в robots.txt?
Пума Тайланд
@opium
Просто люблю качественно работать
канонический урл в мета тегах
Ответ написан
более трёх лет назад
Комментировать
Нравится
3
Комментировать
Оценили как «Нравится»
Закрыть
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама