Как осуществить запрос к API с помощью Python?

Question

[Василий Шешунов]

Выполняю запрос к API с помощью скрипта на Python и в ответ должен получить ссылку, но т.к. ответ иногда приходит пустой в котором нет ссылки, приходится повторять запрос еще раз. И к примеру на 2й или 3й повторяющийся запрос в ответ получаю необходимую ссылку.

Подскажите, пожалуйста, как построить структуру такого повторяющегося запроса, м.б. в Python есть какие-то специальные методы в данном случае? Или структура должна выглядеть вот так?

response = requests(параметры запроса)

if  если ответ пустой ждем 3 секунды и повторяем тот же самый запрос в elif
time.sleep(3)

elif если ответ пустой ждем 3 секунды и повторяем тот же самый запрос в elif
time.sleep(3)

elif если ответ пустой ждем 3 секунды и повторяем тот же самый запрос в elif
time.sleep(3)

elif если ответ пустой ждем завершаем процесс и выводим ошибку в else 

else print("Ошибка ответ пустой!")

result_ = response.json()
return result_

Answer 1

[Сергей Соловьев]

while True:
       response = requests()
       if not response.empty:
                break
       time.sleep(3)

Comments

[Василий Шешунов]

Спасибо, попробую.

[Сергей Соловьев]

Василий Шешунов, response.empty - не существует (а может и есть, не знаю), просто проверь, что ответ пустой

[Everything_is_bad]

Сергей Соловьев, бесконечно долбить не нужно, лучше for _ in range(N):

[Сергей Соловьев]

Everything_is_bad, тут сейчас можно докопаться до вещей по типу exponential backoff, circuit breaker, bulkhead и т.д.
Для начала сойдет и простой while True

[Михаил Р.]

Everything_is_bad, еще лучше Tenacity

[Василий Шешунов]

Сергей Соловьев, Сергей Соловьев, тут будет выглядеть во так
response = requests.get(параметры запроса )
if not response.text == "{}":
break
time.sleep(3)

Answer 2

[Михаил Р.]

Tenacity

Tenacity is an Apache 2.0 licensed general-purpose retrying library, written in Python, to simplify the task of adding retry behavior to just about anything. It originates from a fork of retrying which is sadly no longer maintained.

Под Вашу задачу, это будет выглядеть примерно так:

import requests
from tenacity import retry, stop_after_attempt, wait_fixed

@retry(stop=stop_after_attempt(3), wait=wait_fixed(3))
def fetch():
    res = requests.get("https://site.ru")
    # res = requests.get("https://site.ru", params={"key": "value"})
    if res.status_code != 200:
        raise requests.exceptions.HTTPError(res.status_code)

    data = res.json()
    return data
    # return data["link"]

print(fetch())

- wait=wait_fixed(3) - ждать 2 секунды между попытками.
- stop=stop_after_attempt(3) - остановка после 3х попыток.