"Too many requests per second."Можно ли что-то сделать?

Question

[maksustoff]

Приложение,которое получает два ID пользователей в соц.сети и анализирует возможность связи между ними через 6 узлов ("шесть рукопожатий"). Строится структура типа "граф" и для каждой вершины( ключ - ID) получаем список друзей и так далее, через стек. Проблема в ограничении "3 запроса в секунду", получаем только три обрабатывающихся узла, и даже для связи через два узла понадобиться приличное время, для шести "не дождаться". Можно как-то справится с этой проблемой?

Comments

[TomasHuk]

Есть похожий проект, правда на javascript:
https://github.com/artfultom/whom-i-know
Может посмотреть как там сделано?

[Сережа Ахен]

https://vk.com/dev/execute - расширить кол-во запросов до 25.

[maksustoff]

Ahen: спасибо, как раз читаю.

[maksustoff]

TomasHuk: Спасибо огромное за ссылку,посмотрим.

Answer 1

[d-stream]

Ну тут "в лоб" с данностью не побороться. Если оцениваемое число запросов - 300 шт, то с учетом ограничения - 100сек...

Дальше только смотреть - действует это ограничение на один ip или одну учетку, если "на один ip" - ну значит размазываемся по нескольким прокси, если "на учетку" - то делаем несколько учеток.

Answer 2

[Uno]

Хороший вариант - использовать method.execute.
Или обнаружил сейчас такую фичу - создавая сообщество ВКонтакте можно сгенерировать большущее количество access token'ов. Если методы апи, используемые Вами, позволяют - рекомендую этот вариант. 50 токенов это 150 запросов в секунду, что в два раза больше чем при трёх execute'ах/сек.

Comments

[maksustoff]

А как их сгенерировать эти 50 токенов, не очень понимаю, подскажите?

[Uno]

maksustoff: в настройках сообщества есть вкладка "Работа с API" -> "ключи доступа".
Но учтите опять же, не все методы АПИ поддерживают ключи именно сообщества. Если Ваши не поддерживаются - выступаю тоже в пользу execute.

[maksustoff]

Noizefan zzz: понял, благодарю.

[Сережа Ахен]

С токенами глупость. Ограничение идёт на сообщество, а не на токены. Возможность создавать несколько токенов сделана для того, чтобы при использовании различных сервисов, в случае чего, не удалять токен для всех приложений, а снести один единственный. Это стоит учитывать из-за того, что токены практически везде хранятся в открытом виде и мы не знаем взломают ли завтра наш любимый сервис.

Можно, конечно, создать мильон сообществ.... Глупость.
Execute хватает.

[Uno]

Ahen: таки на сообщество?) Хорошо в теме разбираетесь? сейчас 30 в секунду обрабатываю, и всё благодаря токенам.
проведите эксперимент, сами во всём убедитесь)

[Сережа Ахен]

Noizefan zzz: execute и messages.send 100% на сообщество, а иначе и быть не может.

Answer 3

[Tsiren Naimanov]

перед каждым запросом юзайте например
System.Threading.Thread.Sleep(3000);
это грубый вариант решения проблемы
посмотрите исходники vkapi

Comments

[maksustoff]

Спасибо, конечно это способ, но такое построение(в лоб) займет огромное количество времени, как я уже сказал.

[makag]

maksustoff: https://vk.com/dev/execute