Как автоматически менять proxy в python скрипте?

Question

[slisesss]

Добрый день!

Имеется скрипт на Python3.

Скрипит делает большое кол-во обращении к интернет-ресурсу, что в последствии приводит к временному бану.
Необходимо осуществить автоматическую смену прокси из словаря:

proxies = {
"http": "1.1.1.1",
"http": "2.2.2.2"
}

Есть в requests просто добавить proxies=proxies то берется последний прокси из словаря и с него идут запросы и со временем он тоже попадает в бан.

Comments

[Animkim]

Оборачиваешь запрос в try except с нужной ошибкой, ловишь исключение, меняешь прокси, повторяешь запрос.

Answer 1

[Emil Revencu]

proxies = [
{"http": "1.1.1.1"},
{"http": "2.2.2.2"}
]
for url in list_urls:
   ip=proxies[0]                # берём первый прокси из списка
   proxies.pop(0)              # Убираем его из списка
   proxies.append(ip)       # Добавляем его в конец списка для повторного использования
   page=requests.get(url, proxies=ip)

Comments

[Animkim]

from itertools import cycle
proxies = cycle([1, 2, 3, 4])
proxies.next()

Answer 2

[Juhani Lahtinen]

Не ветка, а "Веткище"
Как реализовать случайный выбор прокси перед кажды...