Задать вопрос
@ishimskayamahorka14
crawling

Какие есть бесплатные краулеры?

Какие есть бесплатные краулеры?
Использую обычно SiteAnalyzer, но не хватает фунционала, который позволял бы отсекать лишние URL, указав какой-либо из отрывок из url. Например, не сканировать страницу, которая оканчивается на .html и.т.п.
  • Вопрос задан
  • 85 просмотров
Комментировать
Подписаться 1 Простой Комментировать
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Инженер-механик
ГК «ЭкоНива» • Калуга
от 70 000 ₽
Mobile JS-разработчик
AppsTrain
от 1 200 до 1 800 $
Разработчик в S3
Яндекс • Москва
от 300 000 до 490 000 ₽
Ещё вакансии