r - 使用fread导入csv时出现“字符串中嵌入nul”错误

Question

我有一个大文件(3.5G)，我正在尝试使用data.table::fread导入。

它最初是由一个rpt文件创建的，该文件以文本形式打开并另存为CSV。

这对于较小的文件(具有相同类型的数据，相同列的所有文件，都适用。这只适用于更长的时间范围和更广泛的范围)。

当我尝试运行

mydata <- fread("mycsv.csv")

我得到错误:

Error in fread("mycsv.csv") : embedded nul in string: 'y\0e\0a\0r\0'

这是什么意思？

Answer 1

我们可以使用以下命令在命令行上删除空终止符:

sed 's/\\0//g' mycsv.csv > mycsv.csv

或如@marbel所建议，fread允许您在文本内传递sed调用。如:

fread("sed 's/\\0//g' mycsv.csv")