Как вы относитесь к такому: robots.txt — Allow: .css и Allow: .js?

Question

[Vladiiimiiir]

Наткнулся на старую статью и возникли вопросы, которые можно решить только дискуссией или подтверждением использования в своих проектах.

1. https://webmasters.googleblog.com/2014/10/updating...

• Открываете ли вы доступ css and js в robots.txt?
  
  
• Как лучше применить данное правило, включая роботов Яндекса или нет?
  
  
• Есть ли что-то подобное от разрабов яндекса?
  
  
• Стоит ли вообще обращать на это внимание?
  
  

Answer 1

[zavodp]

ак вы относитесь к такому: robots.txt — Allow: .css и Allow: .js?

Как к глупости.
Индексируется роботом содержимое полезное для чтения человеком.

А CSS текстов человекочитаемым вовсе не содержит.
И JS, как правило, само по себе ничего полезного не содержит.

В упомянутой вами статье пишется совсем об ином - то том, что поисковый бот будет использовать CSS/JS для того, чтобы представить как страница выглядит пред очами человека.

Comments

[Vladiiimiiir]

Вы читали? Я делаю вывод что нет https://webmasters.googleblog.com/2014/10/updating...

[Vladiiimiiir]

В упомянутой вами статье пишется совсем об ином - то том, что поисковый бот будет использовать CSS/JS для того, чтобы представить как страница выглядит пред очами человека.

Вот вот, вы сами от говорите что робот должен сопоставить js и css чтобы понять,\ как это выглядит для человеческого глаза. И при этом вы говорите что это бред....
Если я закрыл пути то робот не может сопоставить js и css как ему требуется

[zavodp]

Vladiiimiiir,
еще раз:

файл robots относится только к человекочитаемому содержимому. HTML/TXT/PHP если вам так проще понять.
Читать или не читать CSS/JS - от файла robots.txt это не зависит.
Но вы можете продолжать упорствовать в своих заблуждениях, мне всё равно, что ваши сайты будут индексироваться не так как вы думаете.

Answer 2

[Артем Гвоздев]

Открывать нужно только то, что влияет на дизайн.
То есть если у вас WP CMS то открывать папки с css и js админки не нужно

Comments

[Vladiiimiiir]

то открывать папки с css и js админки не нужно

Только админки? Не понял немного...
Или вы вообще обо всех css и js файлах говорите

[Артем Гвоздев]

Vladiiimiiir, открывать файлы именно админ-панели и cms не нужно.
Вот например для WP - https://seogio.ru/robots-txt-dlya-wordpress/
Там папка WP - закрыта (внутри нее js + css самого Wordpress)

[Vladiiimiiir]

Артем Гвоздев, Расширенный вариант (отдельные правила для Google и Яндекса)

Allow: /*/*.js
Allow: /*/*.css

[Артем Гвоздев]

Vladiiimiiir, И? смысла нет особого в таких правилах

Answer 3

[Vkok]

оно не несёт смысловой нагрузки. css и js индексировать нужно отдавать, но Allow тут не несет смысла, просто не нужно их закрывать. и это известно достаточно давно https://webmaster.yandex.ru/blog/21369 с гуглом тоже самое