Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
peindigo
0
вклад
1
вопрос
0
ответов
0%
решений
Комментарии
Информация
Ответы
Вопросы
Комментарии
Подписки
Нравится
Как запретить индексировать определённый текст через robots.txt?
peindigo
@peindigo
Автор вопроса
Я блокирую всё что яндекс роботу индексировать не нужно таким образом:
User-agent: Yandex
Disallow: /wb-store-thumb
Disallow: /wb-store-name
Disallow: /wb-store-item
Disallow: /wb-store-list
Disallow: /wb-store-back btn btn-default
Disallow: /wb-store-imgs-block
Disallow: /wb-store-properties
Disallow: /wb-store-field
Disallow: /wb_element_picture
Disallow: /wb_element wb_gallery
Disallow: /wb_element wb_element_picture
Disallow: /gallery_gen
Disallow: /gallery-slide-image
Disallow: /wb_element_instance12
Disallow: /og:image
Написано
более трёх лет назад
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама
User-agent: Yandex
Disallow: /wb-store-thumb
Disallow: /wb-store-name
Disallow: /wb-store-item
Disallow: /wb-store-list
Disallow: /wb-store-back btn btn-default
Disallow: /wb-store-imgs-block
Disallow: /wb-store-properties
Disallow: /wb-store-field
Disallow: /wb_element_picture
Disallow: /wb_element wb_gallery
Disallow: /wb_element wb_element_picture
Disallow: /gallery_gen
Disallow: /gallery-slide-image
Disallow: /wb_element_instance12
Disallow: /og:image