检验Excel中数据是否与数据库中数据重复

#region  记录Excel中的重复列  
  /// <summary>  
  /// 记录Excel中的重复列  
  /// </summary>  
  /// <param name="dt">需要获取重复列的表</param>  
  /// URL:http://www.bianceng.cn/Programming/csharp/201410/45747.htm
  /// <returns>提示重复信息</returns>  
  private string GetDistinctTable(DataTable dt)  
  {  
//DataTable dtClone = dt;这种方式是错误的,因为这种情况,修改dtClone的同时dt也会被修改。  
      DataTable dtClone = dt.Clone(); ;  
      string vsSubAcctNo = string.Empty;  
      string vsAcctNo = string.Empty;  
      string repeatExcel = string.Empty;  
      string vsTransDate = string.Empty;  
      for (int i = dtClone.Rows.Count - 1; i >= 0; i--)  
      {  
          vsSubAcctNo = dtClone.Rows[i][4].ToString().Trim();  
          vsAcctNo = dtClone.Rows[i][1].ToString().Trim();  
          vsTransDate = dtClone.Rows[i][8].ToString().Trim();  
          dtClone.Rows[i].Delete();  
          dtClone.AcceptChanges();  
          for (int j = dtClone.Rows.Count - 1; j >= 0; j--)  
          {  
              if (vsSubAcctNo == dtClone.Rows[j][4].ToString().Trim() && vsAcctNo == dtClone.Rows[j][1].ToString().Trim() && vsTransDate == dtClone.Rows[j][8].ToString().Trim())  
              {  
                  //如果重复了,进行记录  
                  repeatExcel += "第" + (i + 1).ToString() + "行
";  
                  break;  
              }  
          }  
      }  
      return repeatExcel;  
  }  
  #endregion

二、检验Excel中数据是否与数据库中数据重复的方式有:

1、遍历Table并将其中每条数据,在数据库中检验重复。

这种方式适用于Table中数据比较少(100以内),而数据库中要对比表很大的情况。因为这种方式要每对比一条数据,都要连接数据库,并执行查询,很费时间。

大体测试了一下,Excel中有2000条数据,仅仅在数据库中查询,就消耗了7分40秒即4601000 毫秒(ms),大约一条数据耗时:2300.5毫秒

其实,使用方式2导入2000条,耗时也比方式1导入100条,耗时少。

2、将数据库中要对比的表数据取到一个dataset中,遍历Table并将其中每条数据,在dataset中检验重复,代码如下:

strTemp = "AcctNo='" + obZH.ToString() + "' and TransDate='" + obRQ.ToString() + "'  and SubAcctNo='" + obDFZH.ToString() + "'";  
          rowsTemp = dsTemp.Tables[0].Select(strTemp);  
          if (rowsTemp.Length>0)  
          {  
              //如果重复了,进行记录  
              repeatDj += "第" + v.ToString() + "行
";  
          }
原文地址:https://www.cnblogs.com/Echo529/p/6386663.html