В моем случае сайт делал запросы, перед получением html документа, которые не отображаются в браузерах Chrome и Mozilla. Пришлось воспользоваться сторонним софтом. Особо не разбирался, но в моём случае ожидаемо не приходило или приходило не то значение cf_clearance куки клаудфеера.