performance - PHP 读取大文本文件

Question

我正在阅读一只苍蝇，其中大约有大约 500,000 行，由 | 分隔开。对于我正在解析并尝试通过 CLI 插入数据库的列。是否有更好的方法来读取它以便我可以使用它？

目前我将其插入为:

$fd = fopen ($txtFileName, "r");  
while (!feof ($fd))  {     
     $buffer = fgets($fd);     
     $lines[] = $buffer;  
} 
fclose ($fd); 

$i=0;
#hearder keys $t = $lines[1];

$keys = explode('|',$t);

但是，对于较大的文件，我开始耗尽内存。任何帮助将不胜感激。谢谢

Answer 1

在开始处理之前，您真的需要将所有数据都存储在内存中吗？一般来说，最好读取一行，进行一些处理(例如计算聚合统计数据或进行数据库更新)，然后丢弃它并继续到下一行。

如果您确实需要对内存中的所有内容执行此操作，那么如果您的系统上没有大量可用内存，我谨建议 PHP 可能不是适合该工作的工具。