entity-framework-6 - 使用 Entity Framework 从 csv 文件批量插入

Question

我想使用 Entity Framework 从 csv 文件批量插入到 MS SQL Server 数据库中。是否有使用 Entity Framework 进行批量插入的内置方法？

谢谢

Answer 1

Entity Framework 不支持批量插入。如果您尝试添加数千个对象，只需将它们添加到 DbSet，然后调用 SaveChanges，您的性能就会显着下降。

using(var db = new Db()) 
{
    foreach(var item from data) 
    {
        db.Items.Add(item);
    }
    db.SaveChanges();
}

发生这种情况是因为 EF 跟踪了每个对象的所有变化，导致内存使用量大和计算量大。

根据您使用的 EF 版本和方法，您可以禁用跟踪更改，按 100 或 1000 个项目中相对较小的部分插入对象，具体取决于它们的大小和在您的情况下的实际性能。然后计算一次变化并保存。例如。

int count = 100;
using (var db = new BloggingContext()) 
{ 
    data.Configuration.AutoDetectChangesEnabled = false; 
    foreach (var item in data) 
    { 
        db.Items.Add(item);
        --count;
        if(count <= 0) 
        {
            count = 100;
            db.SaveChanges();
        }
    } 
    db.SaveChanges(); // To make sure we save everything if the last part was smaller than 100
}

也有一些库支持批量插入。例如:https://github.com/loresoft/EntityFramework.Extended