Как запустить multiprocessing Pool в одном из потоков?

Ivan Yakushenko, Ну сейчас это работает как то так.

схема

Синхроный запрос индекса уйдёт на новый поток после того как сменю конфигурацию. Сейчас нужно уменьшить время разбора ответов иначе индекс улетает уходит вперёд и парсер за ним не успевает.

Как запустить multiprocessing Pool в одном из потоков?

Ivan Yakushenko, Да я затупил немного.) Спасибо.

Как запустить multiprocessing Pool в одном из потоков?

Ivan Yakushenko, Спасибо. А что значит запуск без контекста? Тьфу понял о чем речь. )))

Почему функция не продолжает работу цикла?

Данил Самодуров,

Мне нужно чтобы эта функция продолжила работу цикла for, внутри которого она находится, с нового значения.

Замечательно тогда простой вопрос, как сделать так что бы функция, любая, начала работать?

Как реализовать механизм динамического построения диалога (aiogram или telethon или pytelegrambotapi или любой другой фремфорк на питоне)?

В чём сложность имея готовый граф(а граф ли) просто ходить по нему? С регистрацией все просто вы же можете пронумеровать узлы графа ну так каждая кнопка будет содержать id перехода. Не могу понять где у вас сложность если честно.

Selenium - это единственный способ парсить динамические web-страницы?

Не знаю с чем у вас проблема.
Их api видно сразу в запросах.
Api request example

Как обойти блокировку pyTelegramBotApi?

DEUSSS, Есть SOCKS5 у провайдера прокси? В целом сразу перенаправлю сюда. Как запустить телеграм бота из-за прокси?

Python sql select возвращает None. Почему?

jabrik, А вы точно в ту базу смотрите?

Python requests - как авторизоваться?

Когда вы заходите на страницу браузером или в рамках сессии requests сервер в заголовках имеет право попросить сохранить cookies указав в заголовках ответа
set-cookies:'very_hidden_token'
Поэтому зачастую используя для авторизации requests вы обычно должны сначала получить от сайта все cookies а потом уже посылать запрос на авторизацию так как в момент авторизации часть кук может использоваться сервером для своих нужд(система анализа или что угодно.).
На счёт токена он всегда пуст хотя и является часть посылаемых данных. Если проще токен одно из скрытых полей формы иногда они используются для того что бы избежать не слишком умных ботов(но довольно редко) но сейчас он ими визуально не используется.

Выполняйте всегда сначала вход на страницу авторизации через get так как это делает браузер(получая все необходимые куки) а потом уже с полученными куками начинайте посылать все post которые вам необходимо.

Авторизация через Post запрос для формы с помощью requests?

Wolron, Идём далее вы можете активировать параметр allow_redirects=False в своём POST запросе. Это должно оставить вам код 302 если редирект всё же был.
Что бы видеть цепочку запросов нужно смотреть response.history(в отсуствии редиректов пустой список) или response.requests.history посмотрите в документации атрибуты объекта responce сам уже просто не помню как общаться к истории запросов.

print(loging.status_code) # показывает код страницы при авторизации

Показывает код итоговой страницы то есть редирект проскакивается если есть.

UPD
Если вы посылаете такие headers будьте готовы что сервер вас будет отфутболивать при авторизации.
Так же если у вас не получится зайти но редирект был то поищите '_csrf' предположительно на странице авторизации и читайте его оттуда.

Правильный анализ большого ip диапазона?

Спасибо.

есть, но будет же IP ответившего, должен отличаться от сайта,

Не подумал. =)
На счёт прокси проверялок и правда на небольшом пуле положительных результатов(если они будут) не так критично отправлять запросы на проверку.

Как на лету изменять страницы, которые отдаются ботам, делающим слишком много запросов?

Андрей, Ага понял тогда нет вопросов просто вызвал небольшое недоумение такой формат системы защиты. Однако если подразумевается честная дезинформации в нужные моменты то нет никаких вопросов. Из советов только не делайте это слишком часто иначе быстро вычислят и она потеряет смысл.

Стоит ли идти в веб-разработку?

Динара Айтан, Из личного опыта любыми средствами найдите ментора в выбранной области это сократит ваши энергозатраты минимум на порядок.

Почему возникает данная ошибка?

Всегда ваш "google переводчик". ;)

С каких книг начать?

Ernest123, Полезно визуально. Но я не посмотрел всё но как минимум хорошо в начале разжевывал. Касательно общение с вебсокетами как по мне тут неплохо написано и данно явное использование асинхронного кода https://medium.com/nuances-of-programming/%D0%BA%D...

C# Telegram Бот | Как удалить Inline-клавиатуру после взаимодействия с ней?

Sergey Twin,

Пока что 1 IP, тестовый, Нидерданды, дальше расширять буду.

Ага понял, не мне нужны именно ip с точным выбором доступных proxy серверов по конкретному городу. А для формального VPN доступных адресов у меня хватает. =)

C# Telegram Бот | Как удалить Inline-клавиатуру после взаимодействия с ней?

А как можно получить ID сообщения с клавиатурой?

Один из входящих параметров вашей функции обработчика так и называется.

Нет, этот бот выдаёт VPN с сервера, на котором расположен, далее - с других подключенных серверов.

И какой объём данного пула адресов и есть ли возможность выбрать точку выхода?

Как настроить работу Selenium Chrome через прокси?

Тот факт что сообщения об ошибке есть уже говорят что всё работает через прокси. Остальное это качество прокси.

Pythonanewhere не дружит с requests?

Данил Нескажу, Не видел что бы они накладывали какие либо ограничения на это. Вам нужен пул анонимных прокси которые скроют от целевого сервера то что вы посылаете запрос с pythonanywhere.

Парсинг сайтов, как обойти защиту?

del4pp, 2 варианта прокси не анонимные или есть отличия в коде и отброс идёт из-за неправильного запроса.

UPD
Ага вроде понял. Походу лок по геолокации(ну или по провайдерам). Украина?)