Задать вопрос
FIKSER
@FIKSER
wordpress

Как разлокировать доступ к URL в файле robots.txt?

ROBOTS.TXT
SITEMAP.XML

eCnIaL1wQai3PLLTzkOiTg.png
Что я делаю не так?
  • Вопрос задан
  • 432 просмотра
5 комментариев
Подписаться 2 Простой 5 комментариев
Пригласить эксперта
Ответы на вопрос 1
RotgarSett
@RotgarSett
SEO Эксперт
Это очень похоже на глюк так как в robots.txt нет правил запрещающих эти URL. Как временное решение предложу добавить в robots.txt строки allow для каждого заблокированного URL и отправит на проверку Гуглу.

Также очень сомнительно, но теоретически как-то возможно что Disallow: */page/ не дает индексировать урлы сайтамп:
Значение: https://phuket-discount.ru/sitemap-pt-page-2015-07.xml
Значение: https://phuket-discount.ru/sitemap-pt-page-2015-08.xml
Ответ написан
3 комментария
3 комментария
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
WordPress developer (Contractor, Remote)
Hicaliber
До 2 300 $
Разработчик на Wordpress
Nocodered
от 40 000 до 140 000 ₽
Контент-менеджер, редактор (web3, крипто, финансы)
Bitbanker.ru
от 80 000 до 100 000 ₽
Ещё вакансии
Заказы с Хабр Фриланса
Сделать аудит сайта
19 апр. 2024, в 12:53
1000 руб./за проект
Требуется доработка бота
19 апр. 2024, в 12:41
8000 руб./за проект
Доработать сайт на React + Nest
19 апр. 2024, в 12:05
1500 руб./в час
Ещё заказы