Есть ли какой-то специальный инструментарий для парсинга сайтов?

Question

[StrangeAttractor]

Хочу парсить несколько сайтов (среди которых как простые новостные, так и более сложные) просто для себя. Обычно решаю такие задачи полностью втупую своим кодм, который пишу с нуля под каждую такую задачу, а тут стало интересно: а модет есть какие-то библиотеки специально для этого?

Answer 1

[Александр]

Пользовался simplehtmldom.sourceforge.net , удобно.

Answer 2

[postgree]

PhantomJS - использую для парсинга сайтов одностраничек и пр. Можно не реверсить JS.

Answer 3

[Валентин]

В каждом языке программирования есть библиотеки для обработки DOM. Например в питоне для этого есть dom.minidom и beutifulsoup

Comments

[Ranwise]

grab

[StrangeAttractor]

@Ranwise Мне кажется это стоило оформить как ответ, а не как комментарий к другому ответу.