Pythonanewhere не дружит с requests?

Данил Нескажу, Так же как и в ссылке на вопрос выше. Совет использовать прокси.

Pythonanewhere не дружит с requests?

Забанен визуально ip хостинга. Что совершенно нормально для pythonanywhere. Телеграм их банном не занимается в принципе по понятным причинам. А хостинг редко когда банит адреса. Так что быстрее ip хостинга в бан листе gabestore.ru.

BS не видит классы при парсинге?

Данил Нескажу, Вам это врят ли поможет но называется это selenium-shark и позволяет эмулировать браузер и изучать запросы которые отправляет страница при загрузке. Аналогичное можно сделать через browser extension но там мороки чутка больше получается.
Но это всё не то чего вы хотите. Вам хочется полный рендеринг страницы без гемороя это автоматизация браузера и как следствие обычно решается через selenium или phantomjs в headless режиме.

Как подкорректировать POST запрос на регистрацию?

kustiktm_kirill, Проще вы должны перейти на страницу и в куках получить токены пользователя и сессии(обычно на автомате делается).
Последовательность такая:
1) сначала делаете GET запрос на страницу авторизации как и обычный браузер
- После этого обычно погружаются все необходимые данные.
2) Когда убедились что после GET запроса ваша сессия содержит все необходимые данные то из неё же делаете POST запрос с телом запроса(Собственно 6 ваших параметров).

Важные моменты:
Посылайте поля с тем же типом данных что и браузер то есть если написано true то посылаете подобным типом данных.

И да поправьте ошибку вы не тот Payload грузите с вас требуют словарь с 2-мя ключами user и provider а вы посылаете значение ключа user а не словарь что его содержит.

BS не видит классы при парсинге?

Данил Нескажу, Конечно может, но для этого нужен совсем другой парсер и другие инструменты.

Платформа для парсера 24/7 и архитектура?

В моё случае это по сути однопоточная идея так как параллелизм стартует только на задаче IO ожидания ответа от сервера. С одной стороны это не совсем верно но с другой я не знаю куда мне надо идти.
У меня задача похожа на спринты, когда я не знаю не объём не ссылки до следующей итерации.

схема

Частично время получение новой пачки урлов помогает уменьшить количество необходимых пользователей.

Касательно скелетов на предыдущем парсере в 1000 домейнов с очень похожей структурой очень помог авто-анализ на основе тех скелетов что уже были в базе.

Буду переделывать на асинхронный вариант.

Как можно реализовать явное ожидание через JS, если любые ожидания выдают Component not initialized?

fandorin_official, Тогда что-то на подобие

//Wait block
function await(){
    var element= document.getElementById('mainblock');
    if (typeof element== 'undefined' || element== null){
        setTimeout(function() {
            await();
        }, 1000);
    }
}
await()

На сколько помню селениум ожидает выполнение скрипта так что проблем быть не должно.

Как можно реализовать явное ожидание через JS, если любые ожидания выдают Component not initialized?

fandorin_official, Эмм а вы в селениуме WebDriverWait используете?

Какая актуальная Road Map для android developer?

Спасибо. =)

На что можно заменить систему файлов для работы бота вк на heroku?

Уильям Хорн, Считываются быстро.

На что можно заменить систему файлов для работы бота вк на heroku?

Роман Мирр, Вы правы, забавно однако сделали.

Как спарсить цену предмета в Steam?

Как вам и сказали ищите их api для запроса цены. Тот html что получает requests визуально не содержит цены, что естественно для такого виджета.

Куда податься с такими навыками?

Зависит от заказчика, но если брать только вменяемых то совершено верная расстановка приоритетов заказчика. =)

Куда податься с такими навыками?

Северное Сияние, Хех вы думаете фрилансеры не используют чужой труд? =)

Куда податься с такими навыками?

Ищите удалёнку/пилите свои сервисы. При таких раскладах лучше что вы можете это работать в направлении поиска удалёнки. Фриланс исключительно как резерв и поиск долгосрочного сотрудничества. Постарайтесь более прорекламировать это

хорошее понимание ***, ***,(не уверен что ооп и мвс сильно вам помогут) Баз данных. Писал много велосипедов на PHP(написано свыше сотни плагинов по обработке данных на PHP звучит веселее).

.
При прочих равных начинайте собеседоваться на удалёные вакансии научитесь показывать себя.
Верстка полезный навык, но проблема убедить человека что ему нужен верстальщик на постоянку с фрилансом вы уже наверно поняли что это редкость.
Так сказать "Мой Круг" в зубы и вперед https://moikrug.ru/vacanciesq=php&currency=rur&rem...

А да, про описания вакансий просто смотрите что нужно уметь и делите на 2. =)

Как скачать модуль в Python, если места впритык?

kolomiec_artiom, А как windows может вам мешать?)

Как скачать модуль в Python, если места впритык?

Можно попробовать поднимать в рантайме если много оперативной памяти. =)

Получение постов из группы в facebook?

Да, вопрос возник так как изучал по туториалу 2-х летней давности. Сейчас визуально законопатили доступ к фиду через api так что действую другим путём.

В чём может быть ошибка?

Ошибка неопределенной переменной решается путём установки пакета. Пойду допью вино и спокойно лягу спать авось забуду.

В чём может быть ошибка?

Гена,

Я так же пробовал импортировать модуль в исполняемом файле

Ошибка должна изменится в таком случае на хотя бы ModuleNotFoundError: No module named 'requests'
name requests is not define уже исключен так как функция имеет доступ к глобальному списку имен в котором сработал импорт и имя уже определенно.
Случай взятие ссылки извне определяется import requests вне функций и в исполняемом фaйле явно указывается что requests = imported_module.requests.

Видя выданную вам ошибку я все же думаю что вы используете другую функцию где действительно нет import requests так как внутри тела функции вы должны либо получить ошибку импорта если он там есть либо по имени модуля иметь к нему доступ.