Rails 5.0.0.
Файл robots.txt находится в каталоге public приложения.
Также рядом с ним находятся такие файлы, как: sitemap.xml.gz и файлы подтверждения прав (гугла и яндекса). Все эти файлы доступны по site.ru/файл.формат как в development, так и в production.
Но проблема почему-то возникает исключительно с файлом robots.txt. Он был доступен по адресу только в development. Теперь он вообще не доступен. Я перезагружал его на сервер - не помогло.
Команда
curl http://site.ru/robots.txt
возвращает пустоту.
В чем дело?
UPD
Сейчас имею это следующее.
В development режиме:
curl http://site.ru/robots.txt
User-agent: *
Disallow:
Disallow: /user
Disallow: /admin
Sitemap:
В production режиме тоже, что и выше. Но это все кэш. Яндекс не может получить доступ к файлу, когда он в production режиме. В чем дело?