Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
ya_yshel_rabotati_v_teleg
@ya_yshel_rabotati_v_teleg
PHP
HTML
Apache HTTP Server
robots.txt
Будет ли нормально работать такой robots.txt?
User-agent: *
Disallow: /*
Allow: /point
Allow: /point/*
Мне нужно чтоб был запрет всему кроме
domen.com
domen.com/point
domen.com/point/2
Вопрос задан
более трёх лет назад
357 просмотров
1
комментарий
Подписаться
2
Оценить
1
комментарий
Facebook
Вконтакте
Twitter
Volodimir Babeshko
@dady_KK
Есть и в веб-мастере гугла и яндекса инструменты для проверки роботс.тхт - чем они Вам не угодили, точнее чем они никто не скажет
Написано
более трёх лет назад
Помогут разобраться в теме
Все курсы
Skillfactory
Профессия Fullstack веб-разработчик на JavaScript и PHP
20 месяцев
Далее
Хекслет
PHP-разработчик
10 месяцев
Далее
Нетология
Веб-разработчик с нуля: профессия с выбором специализации
14 месяцев
Далее
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
1
Daemon23RUS
@Daemon23RUS
domen.com - Х
domen.com/point -V
domen.com/point/2 -V
P.S. Disallow: /* - запрещает domen.com
Allow: /point/* исключает предыдущий Allow: /point
Ответ написан
более трёх лет назад
2
комментария
Нравится
2
комментария
Facebook
Вконтакте
Twitter
ya_yshel_rabotati_v_teleg
@ya_yshel_rabotati_v_teleg
Автор вопроса
Негде не могу найти информации по использованию ключей robots.txt И как тогда получаеться должны выглядеть запись в итоге ?
Написано
более трёх лет назад
Daemon23RUS
@Daemon23RUS
ya_yshel_rabotati_v_teleg
: Вы правильно написали ключи, но не до конца поняли как они работают.
В Вашем случае я бы сделал Allow: / и добавил в строк Disallow: со списком блокируемых для индексации ресурсов в корне
Написано
более трёх лет назад
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
PHP
+2 ещё
Простой
Как реализовать зеркало сайт Тильда?
1 подписчик
22 окт.
220 просмотров
0
ответов
PHP
+1 ещё
Простой
Почему перестала работать ЮКасса?
1 подписчик
19 окт.
293 просмотра
1
ответ
PHP
Простой
Как вычислить результат математических операций в строке?
1 подписчик
17 окт.
268 просмотров
3
ответа
PHP
Простой
Можно ли в PHP вкладывать однострочные комментарии // в многострочные /* */?
1 подписчик
16 окт.
254 просмотра
4
ответа
PHP
+1 ещё
Простой
Перестал работать php запрос к телеграмм?
1 подписчик
15 окт.
247 просмотров
1
ответ
PHP
+2 ещё
Простой
Как проще отправить изображение на стену канала?
1 подписчик
15 окт.
163 просмотра
1
ответ
PHP
Простой
Как точно работает скрипт на RoadRunner?
1 подписчик
13 окт.
223 просмотра
1
ответ
PHP
+1 ещё
Простой
Стоит ли использовать файловый сервер в проекте?
2 подписчика
13 окт.
269 просмотров
3
ответа
HTML
+1 ещё
Простой
Как в руководстве steam сделать обтекающий картинку текст?
1 подписчик
08 окт.
132 просмотра
1
ответ
PHP
+1 ещё
Средний
Почему некорректно работает регулярное выражение в PHP?
1 подписчик
06 окт.
275 просмотров
3
ответа
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
PHP-разработчик
Остров Сокровищ
от 180 000 до 250 000 ₽
PHP-разработчик (Symfony)
Мегаплан
от 160 000 ₽
Разработчик PHP/Go
ЭТП ГПБ / VESNA
До 220 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама