@Happymalina

Можно ли прописать правило в robots.txt запрещающее индексировать страницы урл которых содержит определенный фрагмента текста ссылки?

Привет! Ранее был задан вопрос как скрыть пустые страницы от индексации яндексом. Решила попробовать закрыть пустые страницы через robots.txt. Урл пустой страницы имеет такой вид peschanoe-letom.ru/s-20-06-2015-po-28-06-2015 . То есть запретить индексацию каталога нельзя, так как он отсутствует в строке( к примеру как рекомендуют в различных статьях в интернете - Disallow: /category/otzivi/ ). Как правильно прописать правило для запрета индексации страниц например с содержанием части текста "-po-", (так как он присутствует во всех урлах пустых страниц)если это вообще возможно? Подскажите пожалуйста.
  • Вопрос задан
  • 123 просмотра
Пригласить эксперта
Ответы на вопрос 1
dimonchik2013
@dimonchik2013
non progredi est regredi
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы