Определил что 95% времени тратилось на инициализацию работы с прокси. Притом, что это не совсем логично так как они всё равно не загружались и запрос шёл мимо прокси. Если например попробовать обратиться к url'у к которому доступ разрешён только через прокси то без явного его прописывания в коде питона запрос не выполниться.
Решение моей проблемы на Windows:
os.environ['no_proxy'] = '127.0.0.1,localhost'
