+1 тебе бы еще разрешить ему
он вообще трепетно относится к robots.txt и даже js css файлы с папок дисалоу не берет.
2. не кисло пользоваться гуглом
3. Если совсем сурово
RewriteCond %{HTTP_USER_AGENT} ^GoobleBot*
RewriteRule ^2015/09/06/test-1$ /404.php [L]