Где надо хранить sitemap.xml и robots.txt?

Question

[Кирилл Вегеле]

У меня есть два языка ru/en, и все ссылки выглядят как domain.com/ru domain.com/en
И как должен выглядеть robots.txt файл и sitemap.xml, надо их хранить на domain.com и там перечислять все ссылки со всеми вариантами языков, или для каждого языка создавать свой sitemap.xml/robots.txt?
И есть какое-либо ограничение на размер этих файлов, просто у меня sitemap получается на тысячи строк (а это без учета локализации)

Answer 1

[Михаил Р.]

1. Хранить в корне.
2. The ultimate guide to robots.txt, XML-формат файла Sitemap.

И как должен выглядеть robots.txt файл и sitemap.xml

Гугл.

И есть какое-либо ограничение на размер этих файлов

Есть для sitemap - гугл.

Comments

[Кирилл Вегеле]

а как будет правильнее,

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>http://localhost:3000/ru/</loc>
<lastmod>2025-05-02T17:49:36.227Z</lastmod>
<changefreq>always</changefreq>
<priority>1</priority>
</url>
<url>
<loc>http://localhost:3000/en/</loc>
<lastmod>2025-05-02T17:49:36.227Z</lastmod>
<changefreq>always</changefreq>
<priority>1</priority>
</url>
</urlset>

Или

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9" xmlns:xhtml="http://www.w3.org/1999/xhtml">

<url>
<loc>http://localhost:3000</loc>
<xhtml:link rel="alternate" hreflang="ru-RU" href="http://localhost:3000/ru/" />
<xhtml:link rel="alternate" hreflang="en-US" href="http://localhost:3000/en/" />
<lastmod>2025-05-02T17:50:44.483Z</lastmod>
<changefreq>always</changefreq>
<priority>1</priority>
</url>
</urlset>

[Михаил Р.]

Кирилл Вегеле, второй вариант, но я бы его слегка доработал:

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
        xmlns:xhtml="http://www.w3.org/1999/xhtml">

  <url>
    <loc>http://localhost:3000/ru/</loc>
    <xhtml:link rel="alternate" hreflang="ru-RU" href="http://localhost:3000/ru/" />
    <xhtml:link rel="alternate" hreflang="en-US" href="http://localhost:3000/en/" />
    <xhtml:link rel="alternate" hreflang="x-default" href="http://localhost:3000/en/" />
    <lastmod>2025-05-02T17:50:44.483Z</lastmod>
    <changefreq>always</changefreq>
    <priority>1</priority>
  </url>

  <url>
    <loc>http://localhost:3000/en/</loc>
    <xhtml:link rel="alternate" hreflang="ru-RU" href="http://localhost:3000/ru/" />
    <xhtml:link rel="alternate" hreflang="en-US" href="http://localhost:3000/en/" />
    <xhtml:link rel="alternate" hreflang="x-default" href="http://localhost:3000/en/" />
    <lastmod>2025-05-02T17:50:44.483Z</lastmod>
    <changefreq>always</changefreq>
    <priority>1</priority>
  </url>

</urlset>