Почему результат запроса через Aiohttp неверный, а через request все получается?

Question

[Tayrus0]

import requests

burp0_url = "https://m.avito.ru/api/11/items?key=1&priceMin=1&priceMax=9999999&owner[]=private&sort=date&query=iphone&page=1&display=list&limit=30"
burp0_headers = {
    "User-Agent": "Mozilla/5.0 (Linux; Android 11; SAMSUNG SM-G973U) AppleWebKit/537.36 (KHTML, like Gecko) SamsungBrowser/14.2 Chrome/87.0.4280.141 Mobile Safari/537.36",
    "Accept": "application/json, text/plain, */*", "Accept-Language": "ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3",
    "Accept-Encoding": "gzip, deflate", "Content-Type": "application/json;charset=utf-8", "Dnt": "1",
    "Sec-Fetch-Dest": "empty", "Sec-Fetch-Mode": "cors", "Sec-Fetch-Site": "same-origin", "Te": "trailers"}
r = requests.get(burp0_url, headers=burp0_headers).json()
print(r)

Выдает мне

{'error': {'code': 403, 'message': 'Неизвестный ключ'}}

что есть верный результат

url = "https://m.avito.ru/api/11/items?key=1&priceMin=1&priceMax=9999999&owner[]=private&sort=date&query=iphone&page=1&display=list&limit=30"
    headers = {
        "User-Agent": "Mozilla/5.0 (Linux; Android 11; SAMSUNG SM-G973U) AppleWebKit/537.36 (KHTML, like Gecko) SamsungBrowser/14.2 Chrome/87.0.4280.141 Mobile Safari/537.36",
        "Accept": "application/json, text/plain, */*", "Accept-Language": "ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3",
        "Accept-Encoding": "gzip, deflate", "Content-Type": "application/json;charset=utf-8", "Dnt": "1",
        "Sec-Fetch-Dest": "empty", "Sec-Fetch-Mode": "cors", "Sec-Fetch-Site": "same-origin", "Te": "trailers"}
    async with aiohttp.ClientSession() as cs:
        async with cs.get(url, headers=headers) as req:
            items = await req.json()
            print(items)

Выдает мне

{'code': 403, 'error': {'message': 'Доступ с вашего IP-адреса временно ограничен', 'link': 'ru.avito://1/info/ipblock/show'}}

хотя это не так, через Request работает, а через Aiohttp нет не могу понять из-за чего, все точно так же как и в requests, но не работает

Comments

[igorzakhar]

Вы пробовали в браузере открывать свой URL "https://m.avito.ru/api/11/items?key=1&priceMin=1&p..." ? Мне гугл хром выдал ответ "{"error":{"code":403,"message":"Неизвестный ключ"}}". А ответ "{'code': 403, 'error': {'message': 'Доступ с вашего IP-адреса временно ограничен', 'link': 'ru.avito://1/info/ipblock/show'}}" выдает вам, скорее всего, по причине большого числа запросов за небольшой промежуток времени и срабатывет какая-нибудь защита, которая фильтрует запросы путем выявления нестандарной сетевой активности.

[Tayrus0]

igorzakhar, Нет, это точно не это, я шлю сначала запрос с Aiohttp он говорит что ip в блоке, затем сразу же requests и все отдает

[igorzakhar]

Tayrus0, покажи весь код с aiohttp.

[Tayrus0]

igorzakhar,

import asyncio
import requests
import aiohttp


async def main():
    async with aiohttp.ClientSession() as session:
        async with session.get(
                "https://m.avito.ru/api/11/items?key=1") as resp:
            print(resp.status)
            print(await resp.text())
    r = requests.get(
        "https://m.avito.ru/api/11/items?key=1").text
    print(r)


loop = asyncio.get_event_loop()
loop.run_until_complete(main())

[Tayrus0]

Tayrus0, И вот что это выдает

403
{
    "code": 403,
    "error": {
        "message": "Доступ с вашего IP-адреса временно ограничен",
        "link": "ru.avito://1/info/ipblock/show"
    }
}

{"error":{"code":403,"message":"Неизвестный ключ"}}

[igorzakhar]

Запустил твой код у себя, вернулось 2 ответа:

403
{"error":{"code":403,"message":"Неизвестный ключ"}}

{"error":{"code":403,"message":"Неизвестный ключ"}}

[Tayrus0]

igorzakhar, А какая версия Aiohttp у тебя?

[igorzakhar]

aiohttp (3.8.0)

[Tayrus0]

igorzakhar, я запустил даже на сервере, на котором еще ни разу не запускал и мне не отдает как надо

[Tayrus0]

Tayrus0, и впн пробовал все тоже самое

[Tayrus0]

Tayrus0, Я думаю если бы это был блок ip он не должен был отдавать с requests тогда, но почему то отдает