python - 检查 s3 url 是否存在

Question

我有以下 url，它存在:

https://s3-us-west-1.amazonaws.com/premiere-avails/458ca3ce-c51e-4f69-8950-7af3e44f0a3d__chapter025.jpg

但这个不是:

https://s3-us-west-1.amazonaws.com/premiere-avails/459ca3ce-c51e-4f69-8950-7af3e44f0a3d__chapter025.jpg

有没有办法在不下载文件(可能是 1GB 的文件)的情况下检查 url 是否有效？请注意，我不想使用 boto 来查看 key 是否存在，我想使用 HTTP 请求。

Answer 1

试试这个:

import httplib
from urlparse import urlparse

def url_exists(url):
    _, host, path, _, _, _ = urlparse(url)
    conn = httplib.HTTPConnection(host)
    conn.request('HEAD', path)
    return conn.getresponse().status < 400