python - 使用 Python 通过 HTTP 下载压缩内容

Question

使用 Python 下载网页时如何利用 HTTP 1.1 的压缩？

我目前正在使用内置的 urllib用于下载网页内容的模块。通读文档我找不到任何确实使用压缩的信息。

它是否已经内置到 urllib 中，或者是否有另一个我可以使用的库？

Answer 1

httplib2支持 'deflate' 和 'gzip' 压缩。

示例

import httplib2
h = httplib2.Http(".cache")
resp, content = h.request("http://example.org/", "GET")

必要时解压缩内容。