使用事务和SqlBulkCopy批量插入数据 SqlBulkCopy是.NET Framework 2.0新增的类,位于命名空间System.Data.SqlClient下,主要提供把其他数据源的数据有效批量的加载到SQL Server表中的功能.类似与 Microsoft SQL Server 包中名为 bcp 的命令行应用程序.但是使用 SqlBulkCopy 类可以编写托管代码解决方案,性能上优于bcp命令行应用程序,更优于如Insert方式向SQL Server表加载大量数据.SqlBu…
/// <summary> /// 添加数据 /// 注:DataTable列名必须和数据库列名一致 /// </summary> /// <returns></returns> public bool AddData() { var entityType = typeof(UserMessage); var dataTable = new DataTable(entityType.Name); foreach (var prop in entityType…
var sqlconn = ConfigurationManager.ConnectionStrings["SQLConnStringRead"].ConnectionString; string sql = "select * from TicketRecord where 1=2"; //Database db = new Database(sqlconn); //var ds = db.QueryExtend(sql); DataTable ImportDT…
上篇博客我们介绍了通过拼接sql字符串的方法来对sql数据库进行批量添加,但是通过语句拼接insert语句有个缺点,就是每次最多只能添加1000条.当时我们另外一个界面也用到了批量添加,但是这个界面轻轻一点就需要添加上千条数据,这可如何是好呢,通过查找,我找到了另外一种批量添加的方法,就是通过SqlBulkCopy语句来实现批量添加. 使用SqlBulkCopy语句的效率比使用insert语句来进行批量添加的速度更快,具体的数据我没有记录下来,但是从感觉上来说,效果很明显. 那么什么是SqlBu…
在.Net中经常会遇到批量添加数据,如将Excel中的数据导入数据库,直接在DataGridView控件中添加数据再保存到数据库等等. 方法一:一条一条循环添加 通常我们的第一反应是采用for或foreach循环一条一条的添加.这样的方法可想而知,效率肯定很低,可以慢到操作人员无法接受的那种.经过测试(局域网),1W条数据将会耗时3分42秒842毫秒 ; i < dgv.Rows.Count; i++) { string sql = "insert into ....."; Sq…
在使用SqlBulkCopy类操作DataTable批量插入数据,这种操作插入数据的效率很高,就会导致每一条数据在保存的时间基本一样,在我们分页查询添加的数据是,使用数据的添加时间来排序就会出现每页的数据都是和第一页的数据一样,重复出现. 解决方法: 不用添加时间排序,利用其它值不一样的字段来排序…
自曾列就别往下看 别折腾了   使用 SqlBulkCopy ,dataTable 必须跟sql里面的表字段完全一样 下面在sqlserver中演示 mysql 请google MySqlBulkLoader oracle 请google OracleBulkCopy 表结构 DROP TABLE [dbo].[Product] GO CREATE TABLE [dbo].[Product] ( ) NOT NULL , ) NOT NULL , ,) NOT NULL ) GO ALTER T…
BulkCopy位于System.Data.SqlClient命名空间,允许你使用其他源的数据有效地批量加载 SQL Server 表. 属性: BatchSize :每个批处理中的行数. 在每个批处理结束时,批处理中的行将发送到服务器. BulkCopyTimeout:超时之前可用于完成操作的秒数. ColumnMappings:返回 SqlBulkCopyColumnMapping 项的集合. 列映射定义数据源中的列和目标中的列之间的关系. DestinationTableName:服务器上…
在.Net中经常会遇到批量添加数据,如将Excel中的数据导入数据库,直接在DataGridView控件中添加数据再保存到数据库等等. 方法一:一条一条循环添加 通常我们的第一反应是采用for或foreach循环一条一条的添加.这样的方法可想而知,效率肯定很低,可以慢到操作人员无法接受的那种.经过测试(局域网),1W条数据将会耗时3分42秒842毫秒 ; i < dgv.Rows.Count; i++) { string sql = "insert into ....."; Sq…
通常,我们会对于一个文本文件数据导入到数据库中,不多说,上代码. 首先,表结构如下.   其次,在我当前D盘中有个文本文件名为2.txt的文件. 在数据库中,可以这样通过一句代码插入. Bulk insert T_Demo From 'D:\2.txt' With ( fieldterminator=',', rowterminator='\n' ) 1) bulk insert:  为Sql server 中一个批量插入的操作 2)T_Demo:   要插入的表 3)'D:\2.txt':  …