用 SqlBulk 進行大批量資料匯入速度還是很快的

匯入速度可能跟機器配置有關係，我只測試了這一臺機器

機器配置：4核8G，給資料庫分配了1G記憶體

程式碼：

private void test3()
        {
            var db = excelImportService.BaseRepository();
            var dt = db.FindTable("select * from LR_Excel_Export where 1=2");
            Debug.WriteLine($"{DateTime.Now} 開始構造資料
 
");
            CreateTable(10 * 10000, ref dt);
            Debug.WriteLine($"{DateTime.Now} 構造資料完成");
            db = excelImportService.BaseRepository();
            var conn = db.getDbConnection();
            SqlBulkCopy bulkCopy = new SqlBulkCopy((SqlConnection)conn);
            bulkCopy.DestinationTableName 
 
= "LR_Excel_Export";
            //bulkCopy.BatchSize = dt.Rows.Count;
            bulkCopy.BatchSize = 10000; //每個batch提交一次,預設全部資料
            bulkCopy.BulkCopyTimeout = 60 * 30; //每個batch提交超時,預設30S
            var wt = CommonHelper.TimerStart();
            conn.Open();
            try
            {
                Debug.WriteLine($
 
"{DateTime.Now} 開始提交");
                bulkCopy.WriteToServer(dt);
                var cost = CommonHelper.TimerEnd(wt);
                Debug.WriteLine($"{DateTime.Now} 提交完成，用時：{cost}");
            }
            catch (Exception ex)
            {
                Debug.WriteLine(ex.Message);
            }
            finally
            {
                bulkCopy.Close();
                db.Close();
            }
            Debug.WriteLine("done");
        }

private DataTable CreateTable(int count,ref DataTable dt)
        {
            //var dt = CollectionHelper.CreateTable<ExcelExportEntity>();
            for (int i = 0; i < count; i++)
            {
                DataRow dr = dt.NewRow();
                dr["F_Id"] = Guid.NewGuid().ToString();
                dr["F_Name"] = "檔名稱";
                dr["F_GridId"] = Guid.NewGuid().ToString();
                dr["F_ModuleId"] = Guid.NewGuid().ToString();
                dr["F_ModuleBtnId"] = Guid.NewGuid().ToString();
                dr["F_BtnName"] = "按鈕名稱";
                dr["F_EnabledMark"] = 0;
                dr["F_CreateDate"] = DateTime.Now;
                dr["F_CreateUserId"] = Guid.NewGuid().ToString();
                dr["F_CreateUserName"] = "建立人姓名";
                dr["F_ModifyDate"] = DateTime.Now;
                dr["F_ModifyUserId"] = Guid.NewGuid().ToString();
                dr["F_ModifyUserName"] = "修改人名稱";
                dt.Rows.Add(dr);
            }
            return dt;
        }

測試結果：

RC:RowsCount資料量，單位：萬
BS:BatchSize, N 不設定BatchSize/ Y 設定BatchSize=dt.Rows.Count。如果不設定，預設全部資料。但根據結果看，設定不設定好像還是有區別的
測試結果，單位：毫秒
每次插入前先truncate清空表

從本次測試結果看，BatchSize設為1W是比較理想的值