Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
ya_yshel_rabotati_v_teleg
@ya_yshel_rabotati_v_teleg
PHP
HTML
Apache HTTP Server
robots.txt
Будет ли нормально работать такой robots.txt?
User-agent: *
Disallow: /*
Allow: /point
Allow: /point/*
Мне нужно чтоб был запрет всему кроме
domen.com
domen.com/point
domen.com/point/2
Вопрос задан
более трёх лет назад
356 просмотров
1
комментарий
Подписаться
2
Оценить
1
комментарий
Facebook
Вконтакте
Twitter
Volodimir Babeshko
@dady_KK
Есть и в веб-мастере гугла и яндекса инструменты для проверки роботс.тхт - чем они Вам не угодили, точнее чем они никто не скажет
Написано
более трёх лет назад
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
1
Daemon23RUS
@Daemon23RUS
domen.com - Х
domen.com/point -V
domen.com/point/2 -V
P.S. Disallow: /* - запрещает domen.com
Allow: /point/* исключает предыдущий Allow: /point
Ответ написан
более трёх лет назад
2
комментария
Нравится
2
комментария
Facebook
Вконтакте
Twitter
ya_yshel_rabotati_v_teleg
@ya_yshel_rabotati_v_teleg
Автор вопроса
Негде не могу найти информации по использованию ключей robots.txt И как тогда получаеться должны выглядеть запись в итоге ?
Написано
более трёх лет назад
Daemon23RUS
@Daemon23RUS
ya_yshel_rabotati_v_teleg
: Вы правильно написали ключи, но не до конца поняли как они работают.
В Вашем случае я бы сделал Allow: / и добавил в строк Disallow: со списком блокируемых для индексации ресурсов в корне
Написано
более трёх лет назад
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
PHP
+1 ещё
Простой
Как добавить данные в бд mssql 20 с помощью php sqlsrv?
1 подписчик
6 часов назад
71 просмотр
2
ответа
HTML
+2 ещё
Простой
Почему не срабатывает скролл?
1 подписчик
10 часов назад
66 просмотров
1
ответ
PHP
Простой
Как объединить запросы в транзакцию?
2 подписчика
15 часов назад
444 просмотра
2
ответа
PHP
Простой
Разбивка на страницы?
1 подписчик
вчера
138 просмотров
1
ответ
HTML
Простой
Как запрос POST при отправке формы на e-mail превращается в GET и что сделать, чтобы этого не было?
1 подписчик
вчера
71 просмотр
1
ответ
PHP
Простой
Как найти опечатку в номере телефона?
1 подписчик
вчера
136 просмотров
3
ответа
HTML
+4 ещё
Средний
Какие принципы нужно соблюдать при разработке фреймворков по типу Bootstrap/Tabler, UIKit и прочих?
1 подписчик
вчера
117 просмотров
3
ответа
PHP
+1 ещё
Простой
Почему array_count_values возвращает пустой массив?
1 подписчик
16 апр.
125 просмотров
1
ответ
PHP
Простой
Как разбить строку оператором explode?
1 подписчик
16 апр.
122 просмотра
1
ответ
HTML
+1 ещё
Простой
Как сделать соединение точек на сайте линиями?
3 подписчика
15 апр.
210 просмотров
1
ответ
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
Middle PHP-developer / PHP-разработчик
Wanted.
До 250 000 ₽
PHP-разработчик
YCLIENTS
•
Москва
от 250 000 до 350 000 ₽
PHP-разарботчик
Wanted.
До 130 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама