Новые вопросы по тегу «robots.txt». — Хабр Q&A

Задать вопрос

Вопросы

Новые

robots.txt

Средний
Как в robots.txt закрыть от индексации url с определённым содержимым?
- 1 подписчик
- более двух лет назад
- 105 просмотров
1

ответ
Веб-разработка

+3 ещё

Простой
При анализе в вебмастере дублируется строка sitemap в файле robots.txt (webflow), что не так?
- 1 подписчик
- более двух лет назад
- 101 просмотр
1

ответ
WordPress

+2 ещё

Простой
Как запретить индексацию дублей в woocommerce, если структура URL полная?
- 1 подписчик
- более двух лет назад
- 351 просмотр
1

ответ
PHP

+3 ещё

Средний
Как исключить из индекса ссылки с решёткой?
- 2 подписчика
- более двух лет назад
- 214 просмотров
3

ответа
Поисковая оптимизация

+1 ещё

Простой
Как запретить к индексации в robot.txt?
- 1 подписчик
- более двух лет назад
- 91 просмотр
1

ответ
PHP

+2 ещё

Простой
Будут ли дубли при редирикте на чпу?
- 1 подписчик
- более двух лет назад
- 44 просмотра
0

ответов
Яндекс

+1 ещё

Простой
Почему яндекс индексирует запрещенные страницы?
- 1 подписчик
- более двух лет назад
- 385 просмотров
2

ответа
Поисковая оптимизация

+1 ещё

Простой
Robots.txt Как закрыть третий уровень вложенности для всех страниц кроме страниц пагинации?
- 1 подписчик
- более трёх лет назад
- 189 просмотров
1

ответ
Поисковая оптимизация

+1 ещё

Простой
Стоит ли закрывать поддомены для индексации в robots.txt?
- 1 подписчик
- более трёх лет назад
- 328 просмотров
1

ответ
Поисковая оптимизация

+1 ещё

Простой
Как запретить индексировать реферальные ссылки через robots.txt?
- 1 подписчик
- более трёх лет назад
- 148 просмотров
1

ответ
Поисковая оптимизация

+3 ещё

Средний
Как открыть сайт для робота Google Ads (Merchant), но закрыть от поискового робота, чтобы сайт не индексировался в Google (в органике)?
- 1 подписчик
- более трёх лет назад
- 62 просмотра
1

ответ
Поисковая оптимизация

+3 ещё

Простой
Get запросы нужно закрывать или перенаправлять для seo?
- 1 подписчик
- более трёх лет назад
- 569 просмотров
1

ответ
robots.txt

Простой
Как внести ссылку в исключения, но оставить дочерние?
- 1 подписчик
- более трёх лет назад
- 15 просмотров
0

ответов
Поисковая оптимизация

+2 ещё

Простой
Как закрыть ссылки от индексации?
- 1 подписчик
- более трёх лет назад
- 119 просмотров
1

ответ
robots.txt

Простой
Как правильно написать выражение Clean Param?
- 1 подписчик
- более трёх лет назад
- 72 просмотра
0

ответов
WordPress

+1 ещё

Простой
Странное содержание robots в вордпрессе, такое нормально?
- 1 подписчик
- более трёх лет назад
- 62 просмотра
2

ответа
robots.txt

Средний
Можно ли подключить robots внутри главного robots?
- 1 подписчик
- более трёх лет назад
- 27 просмотров
1

ответ
Поисковая оптимизация

+1 ещё

Простой
Как запретить индексирование get параметра?
- 1 подписчик
- более трёх лет назад
- 152 просмотра
0

ответов
Поисковая оптимизация

+1 ещё

Простой
Можно ли хранить sitemap.xml в подпапках домена?
- 1 подписчик
- более трёх лет назад
- 430 просмотров
3

ответа
htaccess

+1 ещё

Простой
Как открыть доступ к robots.txt, при этом заблокировать все остальные .txt файлы через FilesMatch?
- 1 подписчик
- более трёх лет назад
- 39 просмотров
1

ответ

DevOps-инженер

DevTeam.Space

от 1 000 до 2 500 $

Senior/Lead PHP Developer

Boomerangme 🎫

от 4 000 до 7 000 $

Системный аналитик

ДАЛЕЕ • Москва

от 200 000 ₽

Курсы

Python-разработчик

Яндекс Практикум

DevOps-инженер

Skillfactory

Python-разработчик с нуля

Нетология

Бэкенд-разработчик на Python

SF Education

Backend разработка

Stepik

Больше курсов на Хабр Карьере

Близкие теги

1С-Битрикс
- 9k подписчиков
- 10k вопросов
PHP
- 43k подписчиков
- 65k вопросов
WooСommerce
- 1k подписчиков
- 6k вопросов
Веб-разработка
- 49k подписчиков
- 25k вопросов
Поисковая оптимизация
- 8k подписчиков
- 6k вопросов
HTML
- 54k подписчиков
- 59k вопросов
Поисковые системы
- 2k подписчиков
- 798 вопросов
Google
- 25k подписчиков
- 4k вопросов
Создание карты сайта
- 445 подписчиков
- 203 вопроса
Яндекс.Вебмастер
- 413 подписчиков
- 183 вопроса
Все близкие теги