Ну конкретно для robots.txt и сайтмапа то проблем нет, в коде где устанавливаются правила редиректов просто установите правило исключить эти два файла и "отдавать " их в любом случае. А если яндекс вообще на сайт попасть не может то тут надо менять логику.