Почему Google жалуется на страницы которые для него запрещены?

Question

[Константин Хаиров]

Всем привет . У меня вот такая проблема Google жалуется на повторяющиеся Title и Description
Вот по этому адресу :

/index.php?do=orderdesc&autor=0dn0bahti0705&sort=date&stats=done
/index.php?do=orderdesc&autor=12032&sort=date&cat=1&stats=done
/index.php?do=orderdesc&autor=22042001alex&cat=2&stats=wait&sort=title
/index.php?do=orderdesc&autor=22042001alex&sort=title&cat=1&stats=wait
/index.php?do=orderdesc&autor=22042001alex&stats=done
/index.php?do=orderdesc&autor=22042001alex&stats=wait&cat=2
/index.php?do=orderdesc&autor=2323&cat=5&sort=title&stats=done
/index.php?do=orderdesc&autor=2323&stats=wait&sort=title
/index.php?do=orderdesc&autor=7000938976&cat=1&sort=date&stats=done
/index.php?do=orderdesc&autor=92915&cat=1&stats=wait
/index.php?do=orderdesc&autor=92915&stats=wait&sort=date
/index.php?do=orderdesc&autor=Dava%2007&stats=done
/index.php?do=orderdesc&autor=Diana&cat=1&stats=done
/index.php?do=orderdesc&autor=Jon%20Jones%20(%20BoneS%20)&stats=done
/index.php?do=orderdesc&autor=KayFariK&stats=wait
/index.php?do=orderdesc&autor=Milady&sort=title&stats=done
/index.php?do=orderdesc&autor=Milady&stats=wait&cat=1
/index.php?do=orderdesc&autor=PerrY&stats=wait&sort=date
/index.php?do=orderdesc&autor=Qobil%20Sodiqov&stats=done&cat=1&sort=date
/index.php?do=orderdesc&autor=Travmatik&sort=date&stats=done&cat=1
/index.php?do=orderdesc&autor=americano&cat=1&stats=wait
/index.php?do=orderdesc&autor=asgamer&stats=done
/index.php?do=orderdesc&autor=den&stats=deny
/index.php?do=orderdesc&autor=den&stats=wait&sort=title
/index.php?do=orderdesc&autor=kamil828&stats=wait
/index.php?do=orderdesc&autor=koshka&cat=1&sort=title&stats=done
/index.php?do=orderdesc&autor=koshka&stats=done&sort=date

Хотя я прописал в robots.txt строку
Disallow: /*do=orderdesc

Почему он все равно индексирует еще и жалуясь на этот контент ? Сталкивался кто нибудь с этим? Как это исправить?

Answer 1

[Евгений Юдин]

Напишите так:
Disallow: /*do=orderdesc*

Но вообще, роботс это рекомендация, а не правило. Соответственно Гугл просто ее игнорирует.

Для пущего эффекта пропишите на этих страницах в head meta-тег noindex. Или запретите краулеру их индексировать на уровне сервера для 100% эффективности.