当前位置: 首页 > 编程笔记 >

SqlCommandBuilder类批量更新excel或者CSV数据的方法

后烨煜
2023-03-14
本文向大家介绍SqlCommandBuilder类批量更新excel或者CSV数据的方法,包括了SqlCommandBuilder类批量更新excel或者CSV数据的方法的使用技巧和注意事项,需要的朋友参考一下

当你批量操作数据的时候,常常会使用到update table1 from table2的这种方式,这种方式是最简洁的。
但当你从excel或者CSV文件更新海量数据时,再使用这种方法,那性能是不是好?字符串拼接又何其之多,大数据是不是需要分组更新?
我不想去检测各种方法的速度,因为我个人比较认可以下方式,欢迎大家批评与指正。
我需要使用到的类主要是SqlCommandBuilder

/// <param name="table">准备更新的DataTable新数据</param>
  /// <param name="TableName">对应要更新的数据库表名</param>
  /// <param name="primaryKeyName">对应要更新的数据库表的主键名</param>
  /// <param name="columnsName">对应要更新的列的列名集合</param>
  /// <param name="limitColumns">需要在SQL的WHERE条件中限定的条件字符串,可为空。</param>
  /// <param name="onceUpdateNumber">每次往返处理的行数</param>
  /// <returns>返回更新的行数</returns>
  public static int Update(DataTable table, string TableName, string primaryKeyName, string[] columnsName, string limitWhere,int onceUpdateNumber)
  {
    if (string.IsNullOrEmpty(TableName)) return 0;
    if (string.IsNullOrEmpty(primaryKeyName)) return 0;
    if (columnsName == null || columnsName.Length <= 0) return 0;
    DataSet ds = new DataSet();
    ds.Tables.Add(table);
    int result = 0;
    using (SqlConnection sqlconn = new SqlConnection(SqlHelper.ConnString))
    {
      sqlconn.Open();

      //使用加强读写锁事务  
      SqlTransaction tran = sqlconn.BeginTransaction(IsolationLevel.ReadCommitted);
      try
      {
        foreach (DataRow dr in ds.Tables[0].Rows)
        {
          //所有行设为修改状态  
          dr.SetModified();
        }
        //为Adapter定位目标表  
        SqlCommand cmd = new SqlCommand(string.Format("select * from {0} where {1}", TableName,limitWhere), sqlconn, tran);
        SqlDataAdapter da = new SqlDataAdapter(cmd);
        SqlCommandBuilder sqlCmdBuilder = new SqlCommandBuilder(da);
        da.AcceptChangesDuringUpdate = false;
        string columnsUpdateSql = "";
        SqlParameter[] paras = new SqlParameter[columnsName.Length];
        //需要更新的列设置参数是,参数名为"@+列名"
        for (int i = 0; i < columnsName.Length; i++)
        {
          //此处拼接要更新的列名及其参数值
          columnsUpdateSql += ("[" + columnsName[i] + "]" + "=@" + columnsName[i] + ",");
          paras[i] = new SqlParameter("@" + columnsName[i], columnsName[i]);
        }
        if (!string.IsNullOrEmpty(columnsUpdateSql))
        {
          //此处去掉拼接处最后一个","
          columnsUpdateSql = columnsUpdateSql.Remove(columnsUpdateSql.Length - 1);
        }
        //此处生成where条件语句
        string limitSql = ("[" + primaryKeyName + "]" + "=@" + primaryKeyName);
        SqlCommand updateCmd = new SqlCommand(string.Format(" UPDATE [{0}] SET {1} WHERE {2} ", TableName, columnsUpdateSql, limitSql));
        //不修改源DataTable  
        updateCmd.UpdatedRowSource = UpdateRowSource.None;
        da.UpdateCommand = updateCmd;
        da.UpdateCommand.Parameters.AddRange(paras);
        da.UpdateCommand.Parameters.Add("@" + primaryKeyName, primaryKeyName);
        //每次往返处理的行数
        da.UpdateBatchSize = onceUpdateNumber;
        result = da.Update(ds,TableName);
        ds.AcceptChanges();
        tran.Commit();

      }
      catch
      {
        tran.Rollback();
      }
      finally
      {
        sqlconn.Dispose();
        sqlconn.Close();
      }


    }
    return result;
  }

注:方法调用时要传入的参数,包括主键名和列名都应与数据库实际的名称相对应。
你可以不传入限定的where条件,如果传入,只需传入:Name="chamy" or Name="jundy",不需加入“where”等字符,不可以在此处传入主键的限定,你只需要在主键名这个参数上传入名称即可。

以上就是为大家分享的SqlCommandBuilder类批量更新excel或者CSV数据的方法,希望对大家的学习有所帮助。

 类似资料:
  • 本文向大家介绍php批量添加数据与批量更新数据的实现方法,包括了php批量添加数据与批量更新数据的实现方法的使用技巧和注意事项,需要的朋友参考一下 本文实例讲述了php批量添加数据与批量更新数据的实现方法。分享给大家供大家参考。具体分析如下: php如果要批量保存数据我们只要使用sql的insert into语句就可能实现数据批量保存了,如果是更新数据使用update set就可以完成更新了,操作

  • 本文向大家介绍Thinkphp批量更新数据的方法汇总,包括了Thinkphp批量更新数据的方法汇总的使用技巧和注意事项,需要的朋友参考一下 以下小编给大家列出了三种实现thinkphp批量更新数据的方法,写的不好还请见谅,有意见欢迎提出,共同学习进步! 方法一: 方法二: 即是循环一条一条的更新记录。一条记录update一次,这样性能很差,也很容易造成阻塞。 那么能不能一条sql语句实现批量更新呢

  • 本文向大家介绍Java中excel表数据的批量导入方法,包括了Java中excel表数据的批量导入方法的使用技巧和注意事项,需要的朋友参考一下 本文实例为大家分享了Java中excel表数据的批量导入,供大家参考,具体内容如下 首先看下工具类: 再看下from.jsp页面 主界面jsp 页面点击的效果是,点击导入会跳入from.jsp页面 再看controller层 service层 以上就是本文

  • 本文向大家介绍SQLServer批量更新两个关联表数据的方法,包括了SQLServer批量更新两个关联表数据的方法的使用技巧和注意事项,需要的朋友参考一下 本文实例讲述了SQLServer批量更新两个关联表数据的方法。分享给大家供大家参考,具体如下: 方式1: 方式2: 希望本文所述对大家SQL Server数据库程序设计有所帮助。

  • 问题内容: 有没有办法像在MySQL服务器上那样批量执行查询? 将无法使用,因为如果该字段已经存在,它将直接忽略该字段并且不插入任何内容。 将无法工作,因为如果该字段已经存在,它将首先对其进行处理,然后再次进行处理,而不是对其进行更新。 可以使用,但不能批量使用。 因此,我想知道是否可以批量发出这样的命令(一次不止一次发送)。 问题答案: 您 可以 使用INSERT … ON DUPLICATE

  • 本文向大家介绍java使用POI批量导入excel数据的方法,包括了java使用POI批量导入excel数据的方法的使用技巧和注意事项,需要的朋友参考一下 一、定义 Apache POI是Apache软件基金会的开放源码函式库,POI提供API给Java程序对Microsoft Office格式档案读和写的功能。 二、所需jar包: 三、简单的一个读取excel的demo 1、读取文件方法 2、测