Как узнать откуда интернет-магазин подружает товары?

Question

[living_corpse]

Хочу написать скрипт, который будет проверять товар на наличие в интернет магазине (озон). На данный момент написал простой парсер, который вроде как работает, но я уверен, что есть более быстрый способ. Как сайт понимает в наличии товар или нет? Я искал через консоль разработчика, но так и не нашел((( Может быть посоветуете что-нибудь почитать на эту тему.

Answer 1

[Sanes]

На Озоне они все в наличии. Вам надо наполнить базу и периодически проверять по артикулу. Если вернет 404, то его нет. Если 200, то забираем актуальную информацию. Например цену.

Comments

[living_corpse]

К сожалению, такой вариант не устраивает. Насчет товара в наличии (если я вас праивльно понял), то страница с распроданным товаром все равно доступна (например, https://www.ozon.ru/product/geympad-besprovodnoy-p...). Во-вторых, некоторые сайты могут удалять страницу на сайте, но при этом товар все равно будет в наличии (например, его можно забрать только в оффлайн магазине) и этот случай мне тоже надо будет опознать. То есть вопрос немного шире, как мне понять откуда сайт подружает товары.

[Sanes]

living_corpse, что значит откуда? Продавец загружает.

[Sanes]

https://seller.ozon.ru/

[living_corpse]

Sanes, вы немного не поняли мой вопрос.
1) Продавец загрузил какой-то товар
2) Я захожу на страницу этого товара
3) Как озон понимает, что товар в наличии? Куда он отправляет запрос, чтобы вывести мне ответ?
Вопрос: как мне выполнить 3 пункт самому?

[Sanes]

living_corpse, никуда Озон не отправляет. Товарами управляет продавец. Это обычный маркетплейс.

[living_corpse]

Sanes, попробую еще раз перефразировать вопрос.
Почему тут кнопочка "Узнать о поступлении"?
А тут "Добавить в корзину"?
Как сайт понимает какую кнопочку вывести пользователю.

[Евгений]

living_corpse, зашел на мобильную версию озона, очень похоже, что все данные на странице генерит сервер и потом отдает готовую страницу)

[MinTnt]

living_corpse, скорее всего, раз продавцы сами выставляют товар, они и задают статус для товара, в продаже он, или же закончился. Возможно просмотрев какие скрипты подгружаются, можно будет найти скрипт для загрузки статуса

[Sanes]

living_corpse, ну там во-первых есть ограничение по доставке. Только Москва за час.

[living_corpse]

Евгений, в этом и вопрос. На сайте есть много ненужной мне информации (картинки, другие товары, личный кабинет и тд), мне нужна лишь информация о наличии конкретного товара, как получить ТОЛЬКО ее?

[living_corpse]

MinTnt, как понять, какой именно мне нужен скрипт?

[Евгений]

living_corpse, почему вы так уверены, что скрипт гоняет информацию о количестве товара между клиентом и сервером?

[living_corpse]

Евгений, посмотрите, пожалуйста, мой комментарий про кнопочки.

[Евгений]

living_corpse, оке, в шаблоне стоит условие на кнопки, если товар в базе есть - генерится одна кнопка, если нет - другая, и это делает сервер! А не js на клиенте!)

[living_corpse]

Евгений, как мне понять куда и как отправить запрос?

[Евгений]

living_corpse, я не знаю на каком языке написан озон, но на примере php и какого-то шаблонизатора (blade, twig,...) это реализуется очень просто.

Что-то типа:

@if($item->count)
    <button>в корзину</button>
@else
    <button>узнать о поступлении</button>
@endif

На странице получится одна кнопочка из двух в зависимости от количества товара в базе (считай на складе)

[Евгений]

living_corpse, никак, это внутренняя кухня сервера, вы получаете уже готовую html страницу без всех этих проверок, они прошли еще до того как вам отправить разметку! Если нет открытого api, то только парсить на наличие этих кнопочек или по другим маркерам

[living_corpse]

Евгений, уверен, что есть способ, ибо у меня получилось реализовать данную идею для МВидео, а озон никак не поддается.

[MinTnt]

living_corpse, Пока что, вот что заметил. Какой-то POST на https://www.ozon.ru/api/composer-api.bx/widget/json/v2 возращает что-то по типу такого текста если товар есть на сайте..
{state: {title: "Доставит Ozon", availabilityRs: [{type: "text", content: "В наличии"}],…},…}
state: {title: "Доставит Ozon", availabilityRs: [{type: "text", content: "В наличии"}],…}
trackingPayloads: {,…}
если же нету товара, то выдаёт вот такое:
{isSkip: true, state: {error: "no data"}}
isSkip: true
state: {error: "no data"}

но я пока мало что знаю, как и что здесь работает, так что хз

[living_corpse]

MinTnt, спасибо! А можете посоветовать какие-нибудь статьи на эту тему? А то я методом тыка сейчас все пробую

[MinTnt]

living_corpse, Отслеживание скриптов:
Открываем - Ctrl+Shift+C | Или же если проще "Просмотреть код элемента"
Далее вкладка Network, далее XHR, и там список всяких будет(Ctrl+R чтоб загрузить его),
И потом чтоб было проще просматривать информацию о каждом, можно нажать "Preview". Так же иногда информацию шифруется Base64, на эти случаи есть онлайн декодеры

Вот статья по requests, там и другие есть https://requests.readthedocs.io/en/latest/user/adv...

[living_corpse]

MinTnt, спасибо!

Answer 2

[Антон Шаманов]

https://docs.ozon.ru/api/