nauchivse
@nauchivse
Scientist

Как в robots.txt открыть индексацию папки?

Сайт имеет русскую и английскую версию
В клорне страницы ru
В папке en/ страницы на английском
Движка нет, гогый html + css

Затрудняюсь с указанием в фапйле robots.txt правильных значений для индексации всего

User-agent: *
Disallow: 
Host: sitet.com
Sitemap: https://site/sitemap.xml
  • Вопрос задан
  • 40 просмотров
Пригласить эксперта
Ответы на вопрос 3
nauchivse
@nauchivse Автор вопроса
Scientist
тестировал папку английской части смайта и выдало такую картину
60f30fd522ccd220712674.jpeg
Ответ написан
archelon
@archelon
уточните, что именно вы хотите разрешить, а что запретить.
сейчас в коде ошибка:
Disallow:
после двоеточия следует указать, что именно закрыто от индексации

host — устаревшая директива, не поддерживается.
это не ошибка, просто она не нужна
Ответ написан
PageAuditRU
@PageAuditRU
Senior SEO Анализатор
Для индексации всего:

User-agent: *
Allow: /
Ответ написан
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
24 июл. 2021, в 16:35
1500 руб./за проект
24 июл. 2021, в 15:36
50000 руб./за проект
24 июл. 2021, в 15:10
3000 руб./за проект