python - Nginx 提前切断静态文件下载

Question

我有一个 Flask 应用程序，它通过 x-accel-redirect 将应该获得静态文件的请求重定向到 NGINX。有时，这些下载会在完成之前被切断。例如，通过 cURL，我会看到:

curl http://my_server/some_static_file.tar > temp.tar
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
 77 14.4G   77 11.2G    0     0  55.8M      0  0:04:24  0:03:25  0:00:59 58.9M
curl: (18) transfer closed with 3449105332 bytes remaining to read

对于非常大的文件 (10gb+)，这似乎更常发生，但我已经看到它也发生在 ~90mb 的小文件上。 Nginx 访问日志显示请求通过并被服务不同的、不完整的数据量:

1.2.3.4 - - [18/Apr/2017:01:16:26 +0000] "GET /some/flask/static/file/path HTTP/1.1" 200 15146008576 "-" "curl/7.38.0" "5.6.7.8"
1.2.3.5 - - [18/Apr/2017:01:16:29 +0000] "GET /some/flask/static/file/path HTTP/1.1" 200 15441739776 "-" "curl/7.38.0" "6.7.8.9"

errors.log 没有任何用处。

我的相关flask配置如下:

response = make_response('')
response.headers.set('X-Accel-Redirect', '/_special_nginx_path/' + file_name)
response.headers.set('Content-Disposition', 'attachment',
                     filename=file_name)
# have tried both with and without setting content-length
response.headers.set('Content-Length', os.path.getsize(file_path))
try:
    response.mimetype = mimetypes.guess_type(file_name)[0]
    if not response.mimetype:
        response.mimetype = 'application/octet-stream'
except AttributeError:
    response.mimetype = 'application/octet-stream'
return response

我的相关 NGINX 配置如下(运行我的 Flask 应用程序的 uWSGI 服务器运行在 127.0.0.1:1234):

location / {
            proxy_pass http://127.0.0.1:1234;
            proxy_redirect off;
            proxy_set_header Host $host;
            proxy_set_header X-Real-IP $remote_addr;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }



location /_special_nginx_path {
           internal;
           alias /path/to/static/files;
    }

Answer 1

请检查您的磁盘使用情况，可能因此而发生，请先检查 nginx 错误日志，错误日志可能有如下日志:

2018/10/28 14:20:24 [crit] 5432#5432: *75 pwritev() "/var/lib/nginx/uwsgi/1/00/0000000001" failed (28: No space left on device) while reading upstream,

首先，确定哪个分区没有可用空间。您可以通过在终端中键入以下命令来执行此操作:

df -h

您现在将在屏幕上看到以下详细信息:

File system. Size. Used. Available. Used. Mounted on.

查看分区详细信息，检查是否有任何分区的磁盘空间使用率达到 100%。

找到分区后，打开它并删除无用的文件，以释放磁盘空间并解决问题。

如果分区挂载在系统内存上(由 TMPFS 目录指示)，请运行以下命令将其卸载。

卸载 path_to_the_directory。

现在，重启 Nginx。该错误现在将从文件中消失。

为防止以后出现no space left on device错误，编辑Nginx配置文件(或您网站的配置文件)并增加key zone的值。

用户遇到这个问题是因为他们将操作系统配置为从 RAM 中提供缓存文件。虽然这可以快速提高站点的性能，但它会减少服务器上运行的其他应用程序可用的 RAM 量，并导致内存不足错误。

如果您的服务器使用 SSD 而不是 HDD，则不必将分区挂载到系统内存中。

感谢 blog这对我有帮助...