Задать вопрос
@ishimskayamahorka14
crawling

Какие есть бесплатные краулеры?

Какие есть бесплатные краулеры?
Использую обычно SiteAnalyzer, но не хватает фунционала, который позволял бы отсекать лишние URL, указав какой-либо из отрывок из url. Например, не сканировать страницу, которая оканчивается на .html и.т.п.
  • Вопрос задан
  • 85 просмотров
Комментировать
Подписаться 1 Простой Комментировать
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Стажер в отдел IT-рекрутинга (Санкт-Петербург)
Wanted • Санкт-Петербург
от 60 000 до 120 000 ₽
Разработчик WebRTC-сервисов на Go в видеоплатформу
Яндекс • Москва
от 300 000 до 490 000 ₽
Senior Data Analyst
Netwrk • Белград
от 4 000 до 6 000 $
Ещё вакансии