Как ускорить программу на python (vkapi)?

Question

[timur102]

Здравствуйте. Я сделал программу, которая парсит все посту у группы/человека, но она работает очень медленно(0-7 минут). Смотря сколько постов . Как можно ускроить программу ? Какой-то человек сказал, что надо использовать хэширование, но я не понимаю, как его применить (надо ли вообще?)

Answer 1

[Сергей Горностаев]

Любая оптимизация начинается с профилирования. Когда у вас будет информация о том, какие участки программы с какой скоростью выполняются, станет понятно, что и как ускорять.

Comments

[InoMono]

Есть еще метод - метод "априори".
Априори известно, что тормозит ввод-вывод: диски, сеть, изредка экран (да да да, при выводе на консоль кучи текста).
В данном случае метод "априори" говорит, что параллельные запросы в сеть могут помочь.

Answer 2

[Сергей Соколов]

Где у вас узкое место: в получении постов по одному, не более 3 в секунду? Используйте метод execute() – там можно собирать запросы в пачки до 25 запросов к API ВК. Итого 75 в секунду.

Если вы делаете запросы с токенами не одного, а нескольких аккаунтов, то можно параллелить запросы например, с Octopus HTTP