Как прасить сайт используя прокси?

Question

[OCCASS OCCASSOVICH]

Мне нужно написать парсер с поддержкой прокси. Пробовал на requests, но там с эти большие проблемы.
Дальше перешел на selenium, но так как прокси с логином и паролем, то надо использовать расширения, но chrome в headless режиме не поддерживает расширения, следовательно вариант с selenium тоже отпадает.
Как мне быть?

Comments

[Kvason]

В селениуме можно прокси настроить, помню сам как-то с этим разбирался, но я потерял решение, погугли

[OCCASS OCCASSOVICH]

Kvason, я с selenium работаю долго. И почему-то не разу не видел такое

[Kvason]

OCCASS OCCASSOVICH, https://qna.habr.com/q/664039 вроде делал что-то такое

[OCCASS OCCASSOVICH]

Kvason, суть в том, что у него прокси без аунтетификаци

[Kvason]

OCCASS OCCASSOVICH, тогда наверное как в requests типа username:pass@host:port

[OCCASS OCCASSOVICH]

Kvason, не, тоже не работает

[OCCASS OCCASSOVICH]

Kvason, и ещё по повод requests. У меня так не работало, возможно, это потом что у меня ipv6 прокси

[Kvason]

OCCASS OCCASSOVICH, тогда не знаю даже, ты указываешь протокол?

[OCCASS OCCASSOVICH]

Kvason, в плане
proxy = {'http': '...'}?

[Kvason]

OCCASS OCCASSOVICH, да

[OCCASS OCCASSOVICH]

Kvason, да, указываю)

[Vindicar]

OCCASS OCCASSOVICH, а https не забыл? Так, из разряда sanity check.

[OCCASS OCCASSOVICH]

Vindicar, нет