java - 压缩文件的最佳方式

Question

我正在从数据库读取不同的数据 block 并将每个 block 写入 CSV 文件并将该条目添加到 zip 文件。这是我的问题:

1. 我正在处理大量数据，是否建议在事务开始时打开并在事务结束时关闭 zip 流？如果我这样做，它会在 RAM 中保存所有这些数据并导致任何内存问题吗？

2. 如果我将这些 csv 文件保存在硬盘中并在交易结束时将其压缩，会有什么好处吗？如果是这样，在 Java 中执行此操作的最佳方法是什么？

注意:我们的应用程序使用 Java 1.6。

Answer 1

看看 Java 7 引入的新文件系统

http://fahdshariff.blogspot.com/2011/08/java-7-working-with-zip-files.html

http://docs.oracle.com/javase/7/docs/technotes/guides/io/fsp/zipfilesystemprovider.html

这使您可以像处理文件系统一样处理 zip 文件，只需将数据直接复制或写入 zip 文件内的文件即可。但是，zip 文件系统不支持 Path.toFile() 方法，因此对于所有需要 File 对象的遗留代码，您需要创建一个临时文件，然后将其复制过来。

对于您的应用程序，您可以只使用 Files.newBufferedWriter(...) 之类的东西将文件直接写入 zip 存档，而不必担心具体细节。