Почему при открытии сайта с помощью urlopen выводить b'\x1f\x8b\x08\?

Question

[Conan_Doyle]

from urllib.request import urlopen
html = urlopen("https://wallpaperscraft.ru")
print(html.read())

"""
output:

b'\x1f\x8b\x08\x00\x00\x00\x00\x00\x00\x03\xed]{\x8f\x1b\xc7\x91\xff_\x9fb\x8e\x81#\t\x10\x97\xef\xc7J\xbb\x1b8~\xc09\xe4.\x06\

и так далее...

"""

Comments

[qlkvg]

на решение не претендую, но requests нормально выводит. если впринципе нет жесткого требования использовать только стандартную библиотеку, лучше всегда брать requests

Answer 1

[Egor]

Если посмотреть на заголовки

>>> html.info()
<http.client.HTTPMessage object at 0x10aef1518>
>>> html.info().items()

То там можно заметить ('Content-Encoding', 'gzip')
Это значит, что данные сжаты.
Нужно их распаковать:

>>> data = html.read()
>>> import gzip
>>> gzip.decompress(data)

Для получения страницы можно воспользоваться и другим способом

>>> import requests
>>> response = requests.get("https://wallpaperscraft.ru")
>>> response.content

Answer 2

[marxxt]

У вас gzip, сжаты данные

import urllib
import zlib

html = urllib.urlopen("https://wallpaperscraft.ru")

decompressed_data=zlib.decompress(html.read(), 16+zlib.MAX_WBITS)
print decompressed_data