httplib2
社区维护的 Python HTTP 客户端库,支持连接复用、多种认证和基于 ETag 的私有缓存,适合在脚本里反复调用同一接口、需要自己控制缓存行为的开发者。
0 次可以打开平均 6.8 秒
本站从国内机房定期实测。竖条由远及近:绿 = 可以打开,橙 = 国内不可直接访问,灰 = 打不开。httplib2 是一个 Python 的 HTTP 客户端库,最初由 Joe Gregorio 编写,现在由社区维护。它要解决的是标准库之外那些琐碎但常被忽略的请求细节:连接复用、缓存、认证、重定向、压缩,这些它都替你处理掉,调用方只需要关心拿到的响应头和内容。
主要功能
它支持 HTTP 与 HTTPS,前提是编译 Python 时 socket 模块带了 SSL 支持。HTTP 1.1 的 Keep-Alive 能让同一个连接上连续发多个请求,省去反复握手的开销。认证方面覆盖 Basic、Digest 和 WSSE 三种,HTTP 和 HTTPS 下都能用。
缓存是它比较有特点的一块:可以挂一个私有缓存,识别 Cache-Control 头,并用 ETag 和 Last-Modified 做校验;对已经缓存过的资源发 PUT 时,它会自动把 ETag 加回去,用来处理丢失更新问题。此外它不限定请求方法,GET、POST 之外的动词也能发,GET 遇到 3XX 会自动跟随,deflate 和 gzip 两种压缩都能解。
怎么用
装好之后导入,建一个 Http 对象,把缓存目录传进去,然后调 request 拿回响应头和内容。内容已经解压过,不用自己再处理。要往需要 SSL 和 Basic 认证的服务器 PUT 内容,先 add_credentials 再加 body 和 content-type 头即可。缓存行为可以通过请求头里的 cache-control 控制,比如传 no-cache 就绕过缓存。
有一个容易踩的点:响应头是字符串,但内容体是字节,写代码时得区分开。
适合谁
适合用 Python 写脚本或服务、需要自己控制请求层的人,尤其是要处理缓存校验、多种认证或非标准请求方法的场景。项目在 GitHub 上开源,有单元测试,文档放在 readthedocs,示例在 wiki 里。
