Надим

Вы можете парсить сайт через браузер, а данные потом отсылать на сервак в нужном вам в виде. Если разбираетесь в JS могу вам болванку для парсера дать.

Никакой, не существует универсальных парсеров. Под любую специфичную задачу нужно создавать свой уникальный парсер. С простыми задачами могут помочь специальные конструкторы типа ZennoPoster, в которых даже не имея навыков можно в графическом режиме создавать алгоритмы действий, но для нестандартных задач практически всегда нужен программист, который смог бы написать код реализующий нужную вам логику.

Короче, я это к чему. С вашим вопросом вам нужно пойти на фрилансим оставить там заявку, так как ну не существует в природе парсеров, которые из под коробки смогут выдать ожидаемый вами результат.

Вручную проходите капчу и смотрите в консоли во вкладке Network какие именно запросы при этом отправлялись для разблокировки, далее делайте у себя все также по аналогии.

Мой совет - идёте на фрилансим и публикуйте задание на создание php-скрипта, который будет парсить и импортировать товары. И не скупитесь на цену, задача у вас хоть и типовая, но муторная, так как после парсинга всех трёх источников надо будет инфу ещё как-то отработать и совместить, с удалением дубликатов.

Вы можете использовать file_get_contents() для парсинга https сайтов. При этом, данная функция совершенно спокойно позволяет при запросе передавать любые заголовки от User -Agent и Cookie до так нужных вам POST-параметров. Можно легко имитировать нужный вам браузер и о обходить какие-то простые защиты.

POST-запрос, инструкция.

Ответ приходит в виде обычного html-кода страницы, который можно записать в переменную и обработать.

На питоне вы это не сделайте никогда, только на JavaScript.

Ищите API спортивных событий. Насколько я знаю, есть даже бесплатные API. Через них можете быстро тянуть инфу по событиям.

На мобильной версии номер телефона выдается напрямую, отследите откуда он загружается и стучитесь туда с нужными параметрами. Либо, качайте картинку с номером из ПК версии, а далее доступно два варианта на выбор:
1. Отправить картинку на распознание в любой анти-капча сервис
2. Написать либу для распознавания, если умейте работать с массивами, ничего сложного

Пример скрипта для распознавания цифр с картинки.

Это все можно банальным юзерскриптом в браузере сделать, но надо знать JavaScript. Мой ответ, на ваш вопрос как: учите js.

Используйте библиотеку PHP Simple HTML DOM Parser или учите API ВКонтакте.