Задать вопрос
@damarkuzz
crawling

Какие есть бесплатные краулеры?

Какие есть бесплатные краулеры?
Использую обычно SiteAnalyzer, но не хватает фунционала, который позволял бы отсекать лишние URL, указав какой-либо из отрывок из url. Например, не сканировать страницу, которая оканчивается на .html и.т.п.
  • Вопрос задан
  • 73 просмотра
Комментировать
Подписаться 1 Простой Комментировать
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
Angular frontend developer, разработчик middle+
IT Force • Краснодар
от 200 000 ₽
Middle+ Marketing manager
Правое полушарие Интроверта
от 120 000 ₽
С++ developer
TQB - хай-тек рекрутмент по-хардкору • Москва
от 300 000 ₽
Ещё вакансии
Заказы с Хабр Фриланса
Разработка VST-плагина
19 апр. 2024, в 20:43
20000 руб./за проект
Нарисовать баннер для интернет-магазина
19 апр. 2024, в 20:35
500 руб./в час
Разработать несистемный алерт
19 апр. 2024, в 20:11
500 руб./за проект
Ещё заказы