Как максимально быстро промотать автоподгружаемую страницу?

Question

[Максим Купрашевич]

Привет всем. Уже давно мучаюсь и не могу придумать элегантное решение.
Надо считать всех друзей, к примеру (тоже самое для результатов поиска и прочего), в фейсбуке. Допустим через моб. версию.
Вот пример: https://m.facebook.com/anastasia.isaeva1?v=friends
Там много друзей и они автоподгружаются по ходу промотки. Все, что я смог сделать, это мотать вниз, пока скроллбар не застопориться на какое-то время, допустим 15 секунд. Это медленно, тормозить постепенно начинает даже на сильных машинах и вообще не элегантно. Пишу из C++ через WebKit. То есть исходники страницы и DOM модель мне доступны, но моих слабых знаний HTML и JS недостаточно, чтобы понять, как сделать это лучше. Пропарсить потом все это не проблема, конечно, а вот промотать реальная проблема. Может есть какой-то сигнал, который можно посылать через HTTP реквесты или еще как-то?
Буду очень признателен за толковую помощь.

Answer 1

[Evsign]

В фейсбуке не сижу, поэтому не могу подсказать готовое решение, но подскажу в каком направлении копать.
Как правило такие вещи скролящиеся делаются через ajax. Вам надо выцепить http реквест, который отправляется каждый раз, когда скролл достигает низа. Как правило это + ещё один параметр в uri.
Может быть что-то в роде queqe=0 при первой загрузке, потом queqe=15 - когда первый раз страница достигла низа, потом queqe=30.... и т.д.
Что бы эту штуку выцепить смотрите вкладку сеть в инструментах разработки, можете включить фильтрацию XHR.
Может повезти и вы получите uri нужного запроса, который отдаёт json.
Ваши варианты с проматыванием - изврат))
А ещё лучше, как вам уже советовали - используйте api.

Comments

[Максим Купрашевич]

Я же довольно развернуто ответил под первым комментом, что у ФБ нет методов для получения всех друзей в АПИ. Почти ничего нету. Нельзя добавить в друзья, получить друзей, все больше отрубают с каждой новой версией. Иначе бы я не стал спрашивать такую банальщину.
Остальная часть вашего ответа толковая, попробую поискать что-нибудь, спасибо.

[Максим Купрашевич]

Вот я выцепил какой реквест шлется, но пытаясь втупую его выполнить в браузере ничего не выходит, всегда 32 друга возвращается в сорцах, какой бы ни был индекс:
https://m.facebook.com/anastasia.isaeva1?v=friends...

[Максим Купрашевич]

А в полной версии запрос посложнее с какими-то collection_token меняющемися

[Evsign]

Максим Купрашевич: https://developers.facebook.com/docs/graph-api/ref...
Только надо, что бы пользователь дал права.
Нашёл тут

А вот тут упоминается как это сделать через апи, но без разрешения пользователя. Особо не вникал...
stackoverflow.com/questions/26802793/how-to-get-fa...
Я бы не стал, говорить, что через апи ну прям ваще никак не получить друзей пользователя. И та ссылка, что вы скинули - не пруф.. Там чувак жалуется, что не может получить пользователей через апи без разрешения пользователя, да и на старой версии апи. Причём по вашей ссылке, в первом же ответе, в конце описывается способ получения разрешения без ведома пользователя... Особо не вникал, но что-то вроде как поддельное приглашение в игру.

[Максим Купрашевич]

Evsign: This will only return any friends who have used (via Facebook Login) the app making the request.
Это не все друзья, или предлагаете сначала запихнуть их всех силой в приложение?

[Evsign]

Максим Купрашевич: К сожалению ваще без понятия как там это устроено) Тыркайтесь, мб чё получится)

[Максим Купрашевич]

Evsign: Я очень слаб в вебе, я прикладной программист, но как я понял, видимо только извраты, т.к. получить результат промотки можно только имея какие-то токены. ФБ в этом плане сделал все, чтобы никак, только через сайт.

Answer 2

[NetBear]

Здесь человек решает похожую задачу:
stackoverflow.com/questions/17196378/detect-scroll...

Ещё полезное:
stackoverflow.com/questions/11715646/scroll-automa...

Answer 3

[Сергей Мельников]

А как насчёт Facebook API?

Comments

[Максим Купрашевич]

Нельзя через API вообще никак. Совсем. Это Фейсбук, увы.

[Максим Купрашевич]

stackoverflow.com/questions/23400204/get-facebook-... вот пруф