Задать вопрос
@ishimskayamahorka14
crawling

Какие есть бесплатные краулеры?

Какие есть бесплатные краулеры?
Использую обычно SiteAnalyzer, но не хватает фунционала, который позволял бы отсекать лишние URL, указав какой-либо из отрывок из url. Например, не сканировать страницу, которая оканчивается на .html и.т.п.
  • Вопрос задан
  • 85 просмотров
Комментировать
Подписаться 1 Простой Комментировать
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Rust Engineer
Atlantis
от 250 000 до 400 000 ₽
Программист 1С
Автомакон
от 200 000 до 300 000 ₽
Архитектор 1С, Команда координации
Small • Алматы
от 4 000 до 6 000 $
Ещё вакансии