Как спарсить номер телефона с авито без selenium и различных драйверов?

Question

[i_vovani]

Писал парсер на python,чтобы тянуть номера телефона использовал selenium webdriver,но мне необходим вариант парсинга номера не используя driver

Answer 1

[Сергей Карбивничий]

1)Школьники всё равно в школу не ходят, наймите их за пару баксов, пусть кликают.
2)Ещё как вариант, вручную перепечатывать номера с картинок.
3)Ну если вы очень крутой программер, покопайтесь в js, там всего-то делов, отправить get запрос по адресу

https://www.avito.ru/items/phone/id_объявления

с параметрами:

Половину я вам подсказал, за вами осталось узнать как генерируются pkey и searchHash.

Добавлено:
Вот код, параметры я скопировал из браузера. Если удастся понять как они(вернее как их значения) генерируется, то дело в шляпе):
Внимание! В коде обнаружены костыли!)

import requests
import base64

params = {	'pkey':'dfed69290bc453b834e2e0e2f16bf630',	# Осталось узнать, как генерируется это значение!
			'vsrc':'r',
			'searchHash':'ttv948zc8v4kg0oc4k0o8wok04w8ook'	# И это тоже!
			}

url = 'https://www.avito.ru/items/phone/1315030387'

response = requests.get(url,params=params)

with open("imageToSave.png", "wb") as fh:
    fh.write(base64.decodebytes(response.text[34:-2].encode()))

На выходе получаем картинку с номером для объявления с id 1315030387. На Python распознать не проблема.

Comments

[i_vovani]

то есть через requests делать запрос с такими headers?

[Сергей Карбивничий]

i_vovani,
Вот код, параметры я скопировал из браузера. Если удастся понять как они(вернее как их значения) генерируется, то дело в шляпе):
Внимание! В коде обнаружены костыли!)

import requests
import base64

params = {	'pkey':'dfed69290bc453b834e2e0e2f16bf630',	# Осталось узнать, как генерируется это значение!
			'vsrc':'r',
			'searchHash':'ttv948zc8v4kg0oc4k0o8wok04w8ook'	# И это тоже!
			}

url = 'https://www.avito.ru/items/phone/1315030387'

response = requests.get(url,params=params)

with open("imageToSave.png", "wb") as fh:
    fh.write(base64.decodebytes(response.text[34:-2].encode()))

На выходе получаем картинку с номером для объявления с id 1315030387. На Python распознать не проблема.

[Fox Code]

Зачем картинка, когда можно без нее?

[Сергей Карбивничий]

foxcode85, Статью недавно на хабре прочитали, да? Ну ок.

[Fox Code]

Сергей Карбивничий, не, не читал там ничего.

[Сергей Карбивничий]

foxcode85,

Зачем картинка, когда можно без нее?

Значит так нужно.

[Fox Code]

Сергей Карбивничий, не знаю как Вы делали, я скачивал с компа через adb прогу, открывал через jadx и ковырялся. И никакой капчи, картинок с номерами и т.д.
Иногда, если не находил нужных методов в приложении, пробовал charles proxy и смотрел запросы от приложения, так я кстати и нашел api от Авито, как раз пригодилось, когда себе тачку искал, ибо найти норм фокуса 3 в Ростове - то еще испытание.

[Sanzhar Bazarbek]

К сожалению, сейчас он выдает левые номера с картинки. Какое решение было бы актуально на данный момент?@foxcode85, Сергей Карбивничий

Answer 2

[zkrvndm]

На мобильной версии номер телефона выдается напрямую, отследите откуда он загружается и стучитесь туда с нужными параметрами. Либо, качайте картинку с номером из ПК версии, а далее доступно два варианта на выбор:
1. Отправить картинку на распознание в любой анти-капча сервис
2. Написать либу для распознавания, если умейте работать с массивами, ничего сложного

Пример скрипта для распознавания цифр с картинки.

Comments

[Sanzhar Bazarbek]

К сожалению, сейчас он выдает левые номера с картинки. Какое решение было бы актуально на данный момент?

[zkrvndm]

Sanzhar Bazarbek, нет таких решений, Авито использует подменный фонд номеров, чтобы скрыть номер продавца. Единственный способ получить номер продавца это напрямую спросить его у него.

Собственно, как вариант, парсите не номер телефона, а ссылку на профиль. Если надо, всегда можно будет написать сообщение и связаться через мессенджер Авито.

[Sanzhar Bazarbek]

Надим Закиров, проблема в том что, номера нужно доставать желательно как можно быстрее. То есть, кроме как спросить автора объявлений, больше вариантов нет?

[zkrvndm]

Sanzhar Bazarbek, я о них не слышал, но ты мог бы попробовать погуглить, вдруг решения все же есть.

[Sanzhar Bazarbek]

Надим Закиров, да, уже давно гуглю)

Answer 3

[Fox Code]

Вот простое решение, все работает без распознавания картинок - ссылка на код

Comments

[Даниил Шевкунов]

Спасибо, отличное решение

[M_BOT]

не открывается ссылка

[s-evg13]

M_BOT, Можно архивную версию странички простмотреть:
https://web.archive.org/web/20210301190500/https:/...

[seven7007]

s-evg13, а сейчас это актуально, можешь уточнить? я ищу в списке key ключ и не получается что-либо найти

[s-evg13]

seven7007, Вполне актуально.

[Sanzhar Bazarbek]

s-evg13, а сейчас? К сожалению, сейчас он выдает левые номера с картинки или при запросе на API. Какое решение было бы актуально на данный момент?