c# - 快速替换大文件的第一行

Question

我有很多大型 csv 文件(每个 1-10 GB)，我正在将其导入数据库。对于每个文件，我需要替换第一行，以便将标题格式化为列名。我目前的解决方案是:

using (var reader = new StreamReader(file))
{
    using (var writer = new StreamWriter(fixed))
    {
        var line = reader.ReadLine();
        var fixedLine = parseHeaders(line);
        writer.WriteLine(fixedLine);

        while ((line = reader.ReadLine()) != null)
            writer.WriteLine(line);
    }
}

什么是只替换第 1 行而不遍历这些巨大文件的每一行的更快方法？

Answer 1

如果您可以保证 fixedLine 与 line 的长度相同(或更短)，则可以就地更新文件而不是复制它们。

如果没有，您可以通过访问 StreamReader 和 StreamWriter 的 .BaseStream 并进行大块复制来提高性能(例如，使用一个 32K 字节的缓冲区)进行复制，这至少会消除检查每个字符以查看它是否是行尾字符所花费的时间，就像现在使用 reader.ReadLine().