关键词搜索

源码搜索 ×
×

C# Excel数据验重及Table数据验重

发布2014-08-06浏览3399次

详情内容

最近在做导入Excel数据的时候,要检验数据是否重复:
        1、要检验Excel数据本身是否有重复?

        2、Excel中的数据是否与数据库中的数据重复?

一、检验Excel中数据是否重复的方式有:
        1、将Table中的数据使用select语句来过滤(此处略,可以参考二)。
        2、使用for循环来手动核对,代码如下:

  1. #region 记录Excel中的重复列
  2. /// <summary>
  3. /// 记录Excel中的重复列
  4. /// </summary>
  5. /// <param name="dt">需要获取重复列的表</param>
  6. /// <returns>提示重复信息</returns>
  7. private string GetDistinctTable(DataTable dt)
  8. {
  9. //DataTable dtClone = dt;这种方式是错误的,因为这种情况,修改dtClone的同时dt也会被修改。
  10. DataTable dtClone = dt.Clone(); ;
  11. string vsSubAcctNo = string.Empty;
  12. string vsAcctNo = string.Empty;
  13. string repeatExcel = string.Empty;
  14. string vsTransDate = string.Empty;
  15. for (int i = dtClone.Rows.Count - 1; i >= 0; i--)
  16. {
  17. vsSubAcctNo = dtClone.Rows[i][4].ToString().Trim();
  18. vsAcctNo = dtClone.Rows[i][1].ToString().Trim();
  19. vsTransDate = dtClone.Rows[i][8].ToString().Trim();
  20. dtClone.Rows[i].Delete();
  21. dtClone.AcceptChanges();
  22. for (int j = dtClone.Rows.Count - 1; j >= 0; j--)
  23. {
  24. if (vsSubAcctNo == dtClone.Rows[j][4].ToString().Trim() && vsAcctNo == dtClone.Rows[j][1].ToString().Trim() && vsTransDate == dtClone.Rows[j][8].ToString().Trim())
  25. {
  26. //如果重复了,进行记录
  27. repeatExcel += "第" + (i + 1).ToString() + "行\r\n";
  28. break;
  29. }
  30. }
  31. }
  32. return repeatExcel;
  33. }
  34. #endregion

小注:

clone应该修改为为copy

二、检验Excel中数据是否与数据库中数据重复的方式有:

       1、遍历Table并将其中每条数据,在数据库中检验重复。
        这种方式适用于Table中数据比较少(100以内),而数据库中要对比表很大的情况。因为这种方式要每对比一条数据,都要连接数据库,并执行查询,很费时间。
        大体测试了一下,Excel中有2000条数据,仅仅在数据库中查询,就消耗了7分40秒即4601000 毫秒(ms),大约一条数据耗时:2300.5毫秒
        其实,使用方式2导入2000条,耗时也比方式1导入100条,耗时少。
        2、将数据库中要对比的表数据取到一个dataset中,遍历Table并将其中每条数据,在dataset中检验重复,代码如下:

  1. strTemp = "AcctNo='" + obZH.ToString() + "' and TransDate='" + obRQ.ToString() + "' and SubAcctNo='" + obDFZH.ToString() + "'";
  2. rowsTemp = dsTemp.Tables[0].Select(strTemp);
  3. if (rowsTemp.Length>0)
  4. {
  5. //如果重复了,进行记录
  6. repeatDj += "第" + v.ToString() + "行\r\n";
  7. }




相关技术文章

最新源码

下载排行榜

点击QQ咨询
开通会员
返回顶部
×
微信扫码支付
微信扫码支付
确定支付下载
请使用微信描二维码支付
×

提示信息

×

选择支付方式

  • 微信支付
  • 支付宝付款
确定支付下载