SqlCommandBuilder类批量更新excel或者CSV数据的方法
程序员文章站
2023-12-22 15:24:40
当你批量操作数据的时候,常常会使用到update table1 from table2的这种方式,这种方式是最简洁的。
但当你从excel或者csv文件更新海量数据时,再...
当你批量操作数据的时候,常常会使用到update table1 from table2的这种方式,这种方式是最简洁的。
但当你从excel或者csv文件更新海量数据时,再使用这种方法,那性能是不是好?字符串拼接又何其之多,大数据是不是需要分组更新?
我不想去检测各种方法的速度,因为我个人比较认可以下方式,欢迎大家批评与指正。
我需要使用到的类主要是sqlcommandbuilder。
/// <param name="table">准备更新的datatable新数据</param> /// <param name="tablename">对应要更新的数据库表名</param> /// <param name="primarykeyname">对应要更新的数据库表的主键名</param> /// <param name="columnsname">对应要更新的列的列名集合</param> /// <param name="limitcolumns">需要在sql的where条件中限定的条件字符串,可为空。</param> /// <param name="onceupdatenumber">每次往返处理的行数</param> /// <returns>返回更新的行数</returns> public static int update(datatable table, string tablename, string primarykeyname, string[] columnsname, string limitwhere,int onceupdatenumber) { if (string.isnullorempty(tablename)) return 0; if (string.isnullorempty(primarykeyname)) return 0; if (columnsname == null || columnsname.length <= 0) return 0; dataset ds = new dataset(); ds.tables.add(table); int result = 0; using (sqlconnection sqlconn = new sqlconnection(sqlhelper.connstring)) { sqlconn.open(); //使用加强读写锁事务 sqltransaction tran = sqlconn.begintransaction(isolationlevel.readcommitted); try { foreach (datarow dr in ds.tables[0].rows) { //所有行设为修改状态 dr.setmodified(); } //为adapter定位目标表 sqlcommand cmd = new sqlcommand(string.format("select * from {0} where {1}", tablename,limitwhere), sqlconn, tran); sqldataadapter da = new sqldataadapter(cmd); sqlcommandbuilder sqlcmdbuilder = new sqlcommandbuilder(da); da.acceptchangesduringupdate = false; string columnsupdatesql = ""; sqlparameter[] paras = new sqlparameter[columnsname.length]; //需要更新的列设置参数是,参数名为"@+列名" for (int i = 0; i < columnsname.length; i++) { //此处拼接要更新的列名及其参数值 columnsupdatesql += ("[" + columnsname[i] + "]" + "=@" + columnsname[i] + ","); paras[i] = new sqlparameter("@" + columnsname[i], columnsname[i]); } if (!string.isnullorempty(columnsupdatesql)) { //此处去掉拼接处最后一个"," columnsupdatesql = columnsupdatesql.remove(columnsupdatesql.length - 1); } //此处生成where条件语句 string limitsql = ("[" + primarykeyname + "]" + "=@" + primarykeyname); sqlcommand updatecmd = new sqlcommand(string.format(" update [{0}] set {1} where {2} ", tablename, columnsupdatesql, limitsql)); //不修改源datatable updatecmd.updatedrowsource = updaterowsource.none; da.updatecommand = updatecmd; da.updatecommand.parameters.addrange(paras); da.updatecommand.parameters.add("@" + primarykeyname, primarykeyname); //每次往返处理的行数 da.updatebatchsize = onceupdatenumber; result = da.update(ds,tablename); ds.acceptchanges(); tran.commit(); } catch { tran.rollback(); } finally { sqlconn.dispose(); sqlconn.close(); } } return result; }
注: 此方法调用时要传入的参数,包括主键名和列名都应与数据库实际的名称相对应。
你可以不传入限定的where条件,如果传入,只需传入:name="chamy" or name="jundy",不需加入“where”等字符,不可以在此处传入主键的限定,你只需要在主键名这个参数上传入名称即可。
以上就是为大家分享的sqlcommandbuilder类批量更新excel或者csv数据的方法,希望对大家的学习有所帮助。