Мож использовать Selenium вместо request? Почти все коммерческие сайты (по крайней мере те, у кого большой трафик) используют разные алгоритмы для борьбы с парсерами. Запросы с помощью request , по моему опыту, не проходят совсем. Парсил американский сайт вакансий, request - такая же ситуация как у вас. С selenium + chromedriver всё норм.