Если Вы действительно не желаете, чтобы поисковик индексировал эту страницу, добавьте в html код страницы, в блок head, мета тег вида:
<meta name="robots" content="noindex" />
Подробности про такой метатег можно посмотреть
здесь.
Такой способ не будет проигнорирован Гуглом (в то время как правила robots.txt он позволяет себе иногда игнорировать).