python - 文件的部分下载(仅更改了内容)

Question

我执行 url fetch 以从在线 txt 文件获取信息。这是一个大文件(例如 2Mb 并且还在不断增加)，并且会一直自动修改。

我正在使用 Google App Engine 中的内存缓存来保存数据一段时间。但对于每个新请求，传入带宽都会增加，并且我开始出现超出配额错误。

我需要一种方法来部分下载该文件，仅下载更改的内容，而不是下载所有文件。

有什么想法吗？ :)

Answer 1

仅当您知道文件的哪一部分已更改时。

例如，如果您知道该文件仅附加到，那么您可以使用 HTTP Range request仅请求文件末尾。

如果您无法知道文件在哪里被更改，那么只有当服务器向您发送了先前版本的补丁或增量时，它才会起作用。