Как запретить к индексации в robot.txt?

Question

[zebralaska]

Как запретить к индексации в robot.txt подобные страницы

https://8-995-500-25-30.ru/index.php?option=com_content&view=article&id=27

У меня есть такие версии:

Disallow: /*index.php
Disallow: /index.php

Подскажите, чем они отличаются и какая из них поможет?

Comments

[Кирилл Никитин]

А вам точно нужно это, а не canonical url?

Answer 1

[Александр Денисов]

Звёздочка означает, любое количество любых символов.
Соответственно, нужно тогда делать следующее, если вы хотите запретить к сканированию всех страницы с GET-параметрами:
Disallow: /index.php*