Как реализовать выгрузку товаров в вк?

Question

[Илья Кочкин]

всем доброго времени суток, поделитесь опытом как вы выгружали товары в вк из интернет магазина?
Ведь, товаров бывает большое ко-во - несколько тысяч, соответственно скрипт выполняется долго - увеличивать время ожидания - не вариант не все хостинги разрешают это делать - а еще как вы реализовывали прогрес бар?
я писал скрипт он работает но, хочется узнать ваши варианты

Answer 1

[Иван Шумов]

Очереди ваше все. В данном случае я за Kafka - сможете потом перезапустить отправку с любой (почти) точки

Comments

[Илья Кочкин]

А можете подробней про очереди и kafka написать, я не знаком с этими инструментами

[Иван Шумов]

Илья Кочкин, Kafka и RabbitMQ - два популярных Message Broker'а, каждый из которых для своих требований. Общая концепция - есть очередь для сообщений (популярной формат json). В очередь один скрипт (или несколько) отправляет сообщения. Не другом конце висит демон (как правило, но не обязательно). И обрабатывыыает сообщения по мере поступления.

Детально советую изучить у них туториалы на сайте. Это в любом случае отдельный Софи и ставить его, конечно, отдельно - почти ни у кого нет под них готовых виртуалок

[Илья Кочкин]

Иван Шумов, Спасибо