Проиндексировано, несмотря на блокировку в файле robots.txt?

Question

[Денис]

Пришло такое сообщение от гугла. Проиндексировано, несмотря на блокировку в файле robots.txt. Жалуется на ссылку формата sitename/news/?PAGEN_1=11 Посмотрел в robots.txt нашел запись Disallow: /news/?PAGEN* то есть получается раздел новости запрещен к индексации? ..странно... Ну и как исправить предупреждение сервиса? Убрать из robots.txt запись Disallow: /news/?PAGEN* и все?

Comments

[Иван Шумов]

Ссылки-то разные) или ты ошибся при формировании вопроса?

[Денис]

Иван Шумов, да, было чуть не так..поправил

Answer 1

[Нотан Ройамов]

Это похоже на запрет индексирования страниц пагинации (постраничной навигации), а не всех новостей. По идее ничего не нужно удалять, если Вы действительно хотите, чтобы страницы пагинации не индексировались. Гугл сам разрулит.