Будет ли индексироваться sitemap.xml если в robots.txt стоит disallow на папку в которой он находится?

Question

[Alex Clampson]

Добрый вечер. Есть главный сайт, и множество дилерских сайтов работающих на его базе но со своих доменов, в интерфейсе у каждого дилера ряд настроек для seo - туда они загружают свой файл sitemap.xml, но так как страница domain/sitemap.xml для всех общая, там висит скрипт который генерирует xml со ссылкой на файл диллера /upload/folder/folder/sitemap.xml . и всё бы ничего, однако в robots.txt есть инструкция disallow: /upload/ так как папка содержит множество других служебных файлов. Недавно встал вопрос индексируют ли поисковые роботы карту сайта ссылка на которую явно прописана при условии что сам файл находится в неиндексируемом каталоге?

PS. то что можно переделать - понятно, но на данный момент задача стоит разобраться в валидности текущей реализации.

Comments

[Dimonchik]

если фотографироваться с клоуном в Макдональдсе, улыбается ли человек внутри клоуна?

[Dimonchik]

чиста по правилам Роботс ТХТ файл проиндекситься не должен, но это не значит, что робот до него не дойдет (типа дойдет, но не проиндексит) и не значит, что поисковики на Роботс не кладут

но лучше не выделываться, а грузануть сайтмепы через Гугл вебмастерс и что там в Яндексе

Answer 1

[archelon]

попробуйте добавить в роботс после disallow: /upload/ такую строчку:
Allow: /*.xml
а проверить, индексируется ли, можно через webmaster.yandex.ru

Comments

[Alex Clampson]

да, пошёл этим путём только без масски

Answer 2

[Дмитрий Соломакин]

sitemap не индексируется.
Вы напрямую его загружаете в поисковую систему по прямой ссылке на файл.

Comments

[Dimonchik]

с чего бы это? Если в вебмастерс региться лень?

[Дмитрий Соломакин]

по логике не должен индексироваться, точного ответа у меня нет, в таком случае