Ответы пользователя по тегу Веб-разработка
  • Ссылки с разными get параметрами это дубли?

    tarasnick1
    @tarasnick1
    SEO оптимизатор
    Приведенный вами пример является дублем - так как URL-ы страниц различаются, но контент размещенный на них совпадает. Самое простое решения закрыть дубли, генерируемые при помощи get параметров через robots.txt

    У вас на данный момент отсутствует robots.txt на сайте
    Чтобы закрыть от индексации дубль, который Вы привели в качестве примера - в корне сайта необходимо размесить файл robots.txt следующего содержания:
    User-agent: Yandex
    Disallow: /?fakeparam=
    Host: www.somesite.ru/

    Анализатор robots.txt вам в помощь - https://webmaster.yandex.ru/robots.xml#results :)
    Ответ написан
    Комментировать
  • Как исключить списочные разделы из индексирования поисковиками?

    tarasnick1
    @tarasnick1
    SEO оптимизатор
    Сделайте автоматическую перелинковку на детальных страницах с новостями - например,
    Предыдущая новость (ссылка на новость, которая была раньше текущей) и Следующая новость (ссылка на новость, которая была позже текущей) - нужно, чтобы поисковые роботы могли переходить по страницам новостей

    Динамическую XML карту сайта тоже желательно реализовать (в ней должны отсутствовать страницы пагинации новостей)
    Страницы пагинации новостей закройте правилом через robots.txt - главное, чтобы не было запрета на индексацию детальных страниц новостей
    Проверку корректности robots можно проверить здесь
    Ответ написан
    Комментировать