Как закрыть от индексации саму страницу, но не ссылки на ней?

Question

[Александр Вербицкий]

Вкратце. Есть Инт-магаз, и я решил сделать карту сайта, где будут ссылки не только на категории товаров, но и по разным фильтрам в категориях.

Т.е будет ссылка на "Кроссовки", потом ссылка на "Мужские кроссовки", далее на "Мужские красные кроссовки" и так далее.

В общем итоге более млн разных вариаций.

И т.к все ссылки в одну страницу не впихнуть, сделал пагинацию на странице "карта сайта".

И у меня 2 вопроса.

1. Стоит ли вообще на сайте размещать такую огромную "Карта сайта"? Не скажется ли плохо это на индексации более важных страниц?
   
   
2. И как убрать из индексации поисковиков сами страницы этой карты, а то в добавок ко всем этим ссылкам еще и будут индексироваться все страницы карты. Или достаточно указать canonical?
   

Comments

[Lynn «Кофеман»]

Может вам Sitemap нужен?

[Александр Вербицкий]

Lynn «Кофеман», он есть. Но в нем только категории и сами товары. А я решил расширить. Но расширенный sitemap.xml будет слишком объемным. Ни один поисковик его не примет.

[Дмитрий]

Александр Вербицкий, в файле sitemap.xml можно сделать ссылки на другие карты сайта в xml. Разбейте по категориям ссылки и для каждой категории добавьте свой xml, а ссылку на него в общий. Один xml со ссылками не больше 50мб и 50.000 ссылок. Ничего сложного.

По поводу html-карты - поисковики не тупые, и понимают, что такое карта сайта в html. Даже если она состоит из нескольких частей. Главное, правильная структура url в случае многостраничности и соответствующие метатеги, чтобы не дублировались. Также и h1, чтобы не дублировался. Закрывать от индексации ничего не нужно. Конструкция noindex, follow отошла в прошлое. И гугл неоднократно писал, что в случае такой конструкции он со временем и по ссылкам переходить, которые указаны на странице.

Answer 1

[Александр Денисов]

Исходите из спроса и кластеризации семантики. Если спрос/частотность есть, то можно создавать страницу.
1. Если у вас созданные страницы не дублируются между собой и имеют какой-то спрос, то вероятнее всего, негатива от этого не будет.
2. Т.е. вы хотите сказать, что у вас миллион страниц, а вы переживаете из-за 10 страниц карты сайта?) Сместите фокус на более приоритетные задачи.

Отвечая на вопрос в заголовке, то можно, например, на странице поставить тег meta robots = noindex.
В таком случае краулер не будет добавлять эту страницу в выдачу, но ссылки с неё учитывает в ранжировании.