Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
frigolov
@frigolov
Поисковая оптимизация
Парсинг
Поисковые системы
Как правильно парсить контент на сайт, что бы не попасть под фильтры ПС?
Фото, видео, текст(vk,youtube и прочее)
Вопрос задан
более трёх лет назад
429 просмотров
1
комментарий
Подписаться
1
Оценить
1
комментарий
Facebook
Вконтакте
Twitter
Arlou_Dzmitry
@Arlou_Dzmitry
Если рубрика то через файл robots.txt закрываем ветку куда парсите, если там весь контент неуникальный, дополнительно можете использовать тэг noindex
Написано
более трёх лет назад
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
0
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Поисковая оптимизация
+2 ещё
Средний
Нужно ли как-то решать проблему в файле robots (Правило, которое не учитывается Googlebot: host)?
1 подписчик
25 июн.
78 просмотров
1
ответ
Поисковая оптимизация
+1 ещё
Простой
Улучшают ли позиции в ПС разные «оптимизаторы» текстов?
1 подписчик
19 июн.
78 просмотров
1
ответ
Поисковая оптимизация
Средний
Каким способом правильно закупить ссылки на главную и внутренние страницы?
1 подписчик
18 июн.
70 просмотров
1
ответ
Python
+1 ещё
Простой
Парсинг с помощью библиотеки requests для Python. Как указать параметр из API если в нем заключается недопустимое значение с точками?
1 подписчик
16 июн.
180 просмотров
2
ответа
Парсинг
Простой
Как сделать веб-скрейпинг сайта?
3 подписчика
09 июн.
1309 просмотров
3
ответа
Python
+1 ещё
Простой
Почему api золотого яблока блокирует все запросы?
1 подписчик
05 июн.
795 просмотров
2
ответа
WordPress
+1 ещё
Средний
Как повысить релевантность страницы запросу?
1 подписчик
29 мая
163 просмотра
3
ответа
Поисковые системы
Простой
Как подменить домен в поисковике?
2 подписчика
27 мая
144 просмотра
2
ответа
Поисковая оптимизация
Средний
Возможны ли санкции поисковых систем, если в интернет-магазине на странице товара писать просьбу оставить отзыв за вознаграждение?
1 подписчик
22 мая
155 просмотров
3
ответа
Парсинг
+1 ещё
Простой
Как вызвать синтаксическую ошибку (намеренно) в мессенджерах без открытого ИК?
2 подписчика
16 мая
1201 просмотр
0
ответов
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
SEO link builder/контент менеджер
GOAT digital
от 700 $
Ведущий программист 1С
Мастер Софт
•
Саратов
от 200 000 до 260 000 ₽
Интернет-маркетолог
Stream Telecom
•
Санкт-Петербург
от 90 000 до 120 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама