您好,欢迎来到东饰资讯网。
搜索
您的当前位置:首页海量数据插入数据库效率对比测试---ADO.NET下SqlBulkCopy()对比L

海量数据插入数据库效率对比测试---ADO.NET下SqlBulkCopy()对比L

来源:东饰资讯网


摘要:使用.NET相关技术向数据库中插入海量数据是常用操作。本文对比ADO.NET和LINQ两种技术,分别使用SqlBulkCopy()和InsertAllOnSubmit()方法进行操作。得出结论:相同插入工作量(1w条数据)插入效率相差200倍之巨! 测试场景: 准备两个数据库TestDb和Tes

摘要:使用.NET相关技术向数据库中插入海量数据是常用操作。本文对比ADO.NET和LINQ两种技术,分别使用SqlBulkCopy()和InsertAllOnSubmit()方法进行操作。得出结论:相同插入工作量(1w条数据)插入效率相差200倍之巨!

测试场景:

准备两个数据库TestDb和TestDb2,有表:T_Users。表结构如下图所示:


SqlBulkCopy()插入方法如下:

private static Stopwatch InsertUsingSqlBulkCopy(List list)
 {
 Stopwatch stopWatch = new Stopwatch();
 stopWatch.Start();
 DataTable dt = new DataTable();
 dt.Columns.Add("ID");
 dt.Columns.Add("UserName");
 for (int i = 0; i < list.Count; i++)
 {
 DataRow row = dt.NewRow();
 row["ID"] = list[i].ID;
 row["UserName"] = list[i].UserName;
 dt.Rows.Add(row);
 }
 using (SqlConnection con = new SqlConnection(connStr2))
 {
 con.Open();
 using (SqlBulkCopy bulkCopy = new SqlBulkCopy(con))
 {
 try
 {
 bulkCopy.DestinationTableName = "dbo.T_UserName";
 bulkCopy.ColumnMappings.Add("ID", "ID");
 bulkCopy.ColumnMappings.Add("UserName", "UserName");
 bulkCopy.WriteToServer(dt);
 }
 catch (Exception ex)
 {
 Console.WriteLine(ex.ToString());
 }
 finally { con.Close(); }
 }
 }
 stopWatch.Stop();
 return stopWatch;
 }

LINQ插入方法如下所示:

private static Stopwatch InsertUsingLINQ(List _list)
 {
 Stopwatch stopWatch = new Stopwatch();
 stopWatch.Start();
 DataClasses1DataContext dataContext = new DataClasses1DataContext();
 dataContext.T_Users.InsertAllOnSubmit(_list);
 dataContext.SubmitChanges();
 stopWatch.Stop();
 return stopWatch;
 }

使用上述代码分别导入1万条User数据进入数据库。

得到结果如下图所示:


相同插入工作量(1w条数据)前提下,结论:

1 ADO.NET下SqlBulkCopy()方法是LINQ TO SQL下InsertAllOnSubmit()方法插入效率相差266倍之巨!

2 LINQ使用便捷、代码简短、学习成本低,语言表达优雅;但是,如果对效率要求较高的海量数据相关操作优先推荐使用ADO.NET方法。

相关源码下载地址:http://download.csdn.net/detail/fanrong1985/8130953

Copyright © 2019- huatuoyibo.cn 版权所有

违法及侵权请联系:TEL:199 18 7713 E-MAIL:2724546146@qq.com

本站由北京市万商天勤律师事务所王兴未律师提供法律服务