自分の環境で計測してみましたが、SQLiteをSSDの環境で実行しても、
1Insert当たり20~30ms程度かかるようです。
問題はSQLの発行回数なので、例えば、
insert into hoge_view values(...),(...)
形式にすれば、SQL発行回数を減らせます。
SQLiteでは40000value句そのまま対応できているみたいなので、1SQLで行けるようです。
ただし、Value句が多くなりすぎると異常に時間がかかり始めるようなので、
1000value句程度で分割すると最も早く処理できます。
下記サンプルを実行したところ、1.5秒程度でした。
using System;
using System.Collections.Generic;
using System.Data.SQLite;
using Dapper;
...
static void Main(string[] args)
{
var length = 40000;
var list = new List<HogeValue>();
for (int i = 0; i < length; i++)
{
var val = new HogeValue()
{
hoge_id1 = i * 10 + 1,
hoge_id2 = i * 10 + 2,
hoge_id3 = i * 10 + 3,
hoge_id4 = i * 10 + 4,
hoge_id5 = i * 10 + 5,
};
list.Add(val);
}
var sw = new System.Diagnostics.Stopwatch();
using (var conn = new SQLiteConnection("Data Source=sqlitedb.db;"))
{
conn.Open();
conn.Query("drop table hoge_view;");
conn.Query("create table hoge_view( hoge_id1 integer, hoge_id2 integer, hoge_id3 integer, hoge_id4 integer, hoge_id5 integer );");
sw.Start();
var sqlpart1 = "insert into hoge_view values";
var sql = sqlpart1;
var counter = 0;
foreach (var i in list)
{
counter++;
sql += $@"({i.hoge_id1}, {i.hoge_id2}, {i.hoge_id3}, {i.hoge_id4}, {i.hoge_id5}),";
if (1000 <= counter)
{
sql = sql.Substring(0, sql.Length - 1);
conn.Query(sql);
counter = 0;
sql = sqlpart1;
}
}
if (counter != 0)
{
sql = sql.Substring(0, sql.Length - 1);
conn.Query(sql);
counter = 0;
}
}
var ms = sw.ElapsedMilliseconds;
Console.WriteLine($"{ms} ms, done!");
Console.WriteLine("end");
}