Задать вопрос
@ubirust

Как удешевить расходы на парсинг?

Приветствую! Есть задача: парсить 20 различных интернет-магазинов для последующего анализа, сами по себе сайты не сложные. При этом парсинг должен осуществляться ежедневно. Как и где лучше расположить эти 20 скриптов? В идеале для 1 интернет-магазина - 1 vps/vds сервер (это понятно, но накладно). Может кто сталкивался с похожей задачей, когда необходимо более 10 сайтов парсить и выдавать данные клиентам. Посоветуйте, что можно предпринять в этом случае, чтобы удешевить расходы на парсинг.
  • Вопрос задан
  • 186 просмотров
Подписаться 1 Простой 2 комментария
Помогут разобраться в теме Все курсы
  • Яндекс Практикум
    Python-разработчик
    10 месяцев
    Далее
  • Skillfactory
    Профессия Python-разработчик
    9 месяцев
    Далее
  • Нетология
    Fullstack-разработчик на Python + нейросети
    20 месяцев
    Далее
Пригласить эксперта
Ответы на вопрос 1
InternetMaster
@InternetMaster
Интернет
В идеале для 1 интернет-магазина - 1 vps/vds сервер
Почему? Откуда это значение?

Разбить парсинг по очереди, а не асинхронно делать, и все готово. 20 парсингов в день - это более 1 часа на 1 магазин в день! Разве одного VPS не хватит?
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы