Что не так с моим robots.txt для WordPress ?

Question

[Сергей]

Вот собственно он:

Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments

Disallow: /category/*/*
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

строчкой ниже еще прописаны Host и Sitemap.

Почему у меня в гугл вебмастер заблокировано 214 страниц, а всего на сайте 378, позавчера было заблокировано 197.
Какая строчка может блокировать страницы, все же вроде стандартно?

Answer 1

[Олег Краснов]

Воспользуйтесь инструментом от google:
Инструменты для веб-мастеров - Заблокированные URL

Answer 2

[Дмитрий Энтелис]

Во первых меня смущает строчка Disallow: /category/*/*
Во вторых может быть стоит явно приписать в конец
User-agent: *
Allow: *

Answer 3

[Тимур Бикташев]

Использую такую конструкцию. Уж не помню откуда брал - это было году в 2011, когда только осваивал WordPress и делал первый сайт на нем. Кое-что добавил от себя и по сей день использую эту "конструкцию". Возможно, кто-то и мне подскажет про косяки.

User-agent: *
Disallow: /cgi-bin 
Disallow: /xmlrpc.php 
Disallow: /wp-admin 
Disallow: /wp-includes 
Disallow: /wp-content/plugins 
Disallow: /wp-content/cache 
Disallow: /wp-content/themes 
Disallow: /trackback 
Disallow: */trackback 
Disallow: */*/trackback 
Disallow: */*/feed/*/ 
Disallow: */feed 
Disallow: /*?* 
Disallow: /*? 
Disallow: /?s= 
Disallow: *?replytocom 
Disallow: */comments 
Disallow: /comments 
Disallow: */comment-page-* 
Disallow: /tag 
Disallow: /archive 
Disallow: /attachment* 

Host: site.ru 

Sitemap: http://site.ru/sitemap.xml 
Sitemap: http://site.ru/sitemap.xml.gz