Почему авито банит мобильные прокси?

Question

[aqau123]

Запускаю небольшой тестик на 100 запросов асинхронно.
Буквально через 40 запросов начинаю получать 429.
Ведь, по факту, мобильных айпишников не так много, он же не может меня по айпи банить никак.
К слову, пытаюсь достучаться до авито, без проксей вообще всегда 403 сыпется.
В чем может быть дело? Я скорее всего что-то не так понимаю в мобильных прокси, а может и в работе протоколов.

Comments

[shurshur]

Не надо думать, что они банят чисто по IP. Есть много других признаков парсинга.

[aqau123]

shurshur, какие например? хедеры я с них скопировал, сейчас буду еще пробовать куки, из очевидного еще таймауты ставить некоторые.

[shurshur]

aqau123, например, если пользователь просматривает 10 объявлений в секунду, не скачав ни одного js/css, то что это значит? Если пользователь не рендерит canvas и размер шрифта serif у него нельзя вычислить, то что это значит?

[aqau123]

shurshur, благодарю, понял в каком направлении копать

Answer 1

[Владимир Коротенко]

авито банит всех кроме перекупов и кидал.
специально отключал vpn когда к ним заходил

Comments

[shurshur]

Тонко :)

[Владимир Коротенко]

shurshur, мне как то перекуп жаловался на другого перекупа который ему угрожал что напишет в абуз что тот перекуп.

Так что авито забавная контора. А блочат они вообще без мозгов, и все равно это обходится, это как с капчей.

Answer 2

[Сергей Горностаев]

У них хорошая защита от парсинга. Если не ошибаюсь, даже с поведенческим анализом.

Answer 3

[Dimonchik]

отпечаток еще