.NET Разработчик on Telegram: “День 1882. #ЗаметкиНаПолях Массовые Вставки в C#…”

День 1882. #ЗаметкиНаПолях
Массовые Вставки в C# и EF Core. Окончание
Начало

5. Dapper
Dapper — это простой преобразователь SQL в объекты .NET. Он позволяет нам легко вставить коллекцию объектов в БД:

using var conn = new SqlConnection(connString);
conn.Open();

var sql = @"
 INSERT INTO Users (FirstName, LastName, Email, …)
 VALUES (@FirstName, @LastName, @Email, …);";

await conn.ExecuteAsync(sql, GetUsers());

Результаты:

    100 пользователей - 10 мс
   1000 - 113 мс,
  10000 - 1,02 с,
 100000 - 10,9 с,
1000000 - 109,065 с.

6. SQL Bulk Copy
Наконец, для SQL Server мы можем попробовать использовать SqlBulkCopy. Эта реализация немного сложнее. Во-первых, нужно создать объект DataTable, содержащий объекты, которые мы хотим вставить:

DataTable GetUsersDataTable()
{
  var dt = new DataTable();
  dt.Columns.Add(nameof(User.FirstName),
   typeof(string));
  dt.Columns.Add(nameof(User.LastName),
   typeof(string));
  dt.Columns.Add(nameof(User.Email),
   typeof(string));
  …

  foreach (var u in GetUsers())
    dt.Rows.Add(
      u.FirstName, u.LastName, u.Email, …);

  return dt;
}

Теперь настроим SqlBulkCopy для выполнения вставки:

using var bc = new SqlBulkCopy(ConnString);

bc.DestinationTableName = "dbo.Users";
bc.ColumnMappings.Add(
 nameof(User.FirstName), "FirstName");
bc.ColumnMappings.Add(
 nameof(User.LastName), "LastName");
bc.ColumnMappings.Add(
 nameof(User.Email), "Email");

await bc.WriteToServerAsync(GetUsersDataTable());

Производительность невероятно высока:

    100 – 1,7 мс,
   1000 - 7 мс,
  10000 - 68 мс,
 100000 - 646 мс,
1000000 - 7,34 с.

Итого
SqlBulkCopy работает быстрее всех, однако EF Core Bulk Extensions обеспечивают фантастическую производительность, сохраняя при этом простоту использования, которой славится Entity Framework Core. Поэтому выбор зависит от требований вашего проекта:
- Главное – производительность? SqlBulkCopy или EF Core Bulk Extensions.
- Не хочется платить и нужна простота разработки? Грамотное использование EF Core всё равно даёт неплохие результаты.

Источник: https://www.milanjovanovic.tech/blog/fast-sql-bulk-inserts-with-csharp-and-ef-core