python - 使用 mechanize 和 Python 2.6 下载 HTML 的编码问题

Question

browser = mechanize.Browser()
page = browser.open(url)
html = page.get_data()

print html

它显示了一些奇怪的字符。我想它是 UTF-8 字符串，但 Python 不知道并且无法正确显示它。

如何将这个字符串转换成unicode字符串

u = u'test'

Answer 1

压缩包

def ungzipResponse(r,b):
    headers = r.info()
    if headers['Content-Encoding']=='gzip':
        import gzip
        gz = gzip.GzipFile(fileobj=r, mode='rb')
        html = gz.read()
        gz.close()
        headers["Content-type"] = "text/html; charset=utf-8"
        r.set_data( html )
        b.set_response(r)

response = browser.open(url)
ungzipResponse(response, browser)
html = response.read()