• Хорошо ли подходит NodeJS для парсинга сайтов?

    @Sstrax
    Никто не пишет про cheerio.

    Неужели он на столько плох? Мне показалось, что он достаточно облегчен и алгоритм прост (загрузка-расчленение-сохранение). Возникла только проблема с циклом. Когда прогоняешь его по всем страницам в цикле - он пытается этот цикл выполнить одновременно(синхронно). А вот как заставить цикл продолжать выполнение только после завершения предыдущего шага - не понял пока. Если можете - ткните носом, пожалуйста!

    Идея была написать свой API к сайтам, которые этого не предусматривают...
    Ответ написан
    3 комментария