其中要避免目标库插入重复数据。这重复数据可能是源数据库本身就有重复数据，还有就是已经插入避免重复插入。

过滤自身重复数据解决方案

第一种：采用DataView.ToTable()方法

DataView.ToTable 方法

实例代码

 public static DataTable Distinct(DataTable dt, string[] filedNames)
        {
            DataView dv = dt.DefaultView;
            DataTable DistTable = dv.ToTable("Dist", true, filedNames);
            return DistTable;
        }

第二种方法：循环遍历+DataTable.Select()

利用for循环遍历DataTable的数据行，利用DataTable.Select 方法判断是否重复，如果重复，则利用DataTable.Rows.RemoveAt(Index)删除重复的那一行。

具体看代码。

代码示例

 public DataTable GetDistinctSelf(DataTable SourceDt, string filedName)
        {
 for (int i = SourceDt.Rows.Count - 2; i > 0; i--)
            {
                DataRow[] rows = SourceDt.Select(string.Format("{0}=‘{1}‘", filedName, SourceDt.Rows[i][filedName]));
                if (rows.Length > 1)
                {
                    SourceDt.Rows.RemoveAt(i);
                }
            }
         return SourceDt;

        
        }

第三种方法

利用双循环遍历（不推荐）

 public DataTable GetDistinctSelf(DataTable SourceDt, string filedName)
        {
            for (int i = SourceDt.Rows.Count - 2; i > 0; i--)
            {
                string title = SourceDt.Rows[0][filedName].ToString();
                for (int j = i + 1; j > 0; i--)
                {
                    if (SourceDt.Rows[j][filedName].ToString() == title)
                    {
                        SourceDt.Rows.RemoveAt(i);

                    }
                }

            }
            return SourceDt;
          }

c#中datatable如何去除重复数据

参考技术A两种方法1数据库直接去除重复selectdistinct*from表名去除了重复行distinct2对DataTable直接进行操作DataTabledt=db.GetDt("select*from表名");//获得datatableDataViewdv=newDataView(dt);//虚拟视图吧，我这么认为Dat 查看详情

ps去除元素的三种常用方法

1.仿制图章工具，alt+鼠标左键进行选取复制区域，然后左键点击需要覆盖的区域。 2.套锁工具--选择区域--右键填充--内容识别。   3.修补工具，选中区域--拖动适配。    查看详情

防止表单重复提交的三种方法

防止重复提交的办法-----------------------------------------------------------------jquery的方法$("#btn").one("click",function()//只触发一次　　YouMethod(););　　  ---------------------------------------------- 查看详情

sql：数据去重的三种方法(代码片段)

数据去重的三种方法1、使用distinct去重distinct用来查询不重复记录的条数，用count(distinctid)来返回不重复字段的条数。用法注意：distinct【查询字段】，必须放在要查询字段的开头，即放在第一个参数；只能在SE... 查看详情

js判断一个数组中是否有重复值的三种方法

方法一: vars=ary.join(",")+",";for(vari=0;i<ary.length;i++){if(s.replace(ary[i]+",","").indexOf(ary[i]+",")>-1){alert("数组中有重复元素："+ary[i]);break;}}方法二: varary=newArray("111","22","33","111 查看详情

datatable数据批量写入数据库三种方法比较

DataTable数据批量写入数据库三种方法比较标签：it 分类：C#1)  insert循环插入；2)  sqldataadapter.update(dataset,tablename);3)  sqlbulkcopy.WriteToServer(datatable);1、生成测试的datatable表，表结构如下：UniqueID(主 查看详情

c#使用datasetdatatable更新数据库的三种实现方法

本文以实例形式讲述了使用DataSetDatatable更新数据库的三种实现方法，包括CommandBuilder方法、DataAdapter更新数据源以及使用sql语句更新。分享给大家供大家参考之用。具体方法如下：一、自动生成命令的条件CommandBuilder方法a)动态指... 查看详情

js判断一个数组中是不是有重复值的三种方法

参考技术A我只知道一种，就是通过循环来，然后用一个键值数组来来存储值的出现次数，如上面那个数组的变量名为varjsArr，那么可以下面的方法来记录。vartmp=newArray();for(vari=0,j=jsArr.length;i<j;i++)varv=jsArr[i];tmp[v]=(typeof(tmp[v])!=... 查看详情

datatable中怎样将重复的数据合并

...ablenamenum张三38李四21不能用sql语句实现思路是这样：首先去除不重复的name列，比如name张三李四，可以用datatable.DefaultView.ToTable(true,newstring[]"name");//取出distinct的name列,然后相加用一个方法处理写个方法就行循环原来的datata... 查看详情

js的三种本地存储方法

javaScript有三种数据存储方式，分别是：sessionStoragelocalStoragecookier相同点：都保存在浏览器端不同点：①传递方式不同cookie数据始终在同源的http请求中携带（即使不需要），即cookie在浏览器和服务器间来回传递。sessionStorage和local... 查看详情

java写json的三种方法，java对象转json数据

JAVA写JSON的三种方法，java对象转json数据转自:http://www.xdx97.com/#/single?bid=5afe2ff9-8cd1-67cf-e7bc-437b74c07aef 查看详情

实现viewpager懒加载的三种方法

方法一在Fragment可见时请求数据。此方案仍预加载了前后的页面，但是没有请求数据，只有进入到当前Framgent时才请求数据。优点：实现了数据的懒加载缺点：一次仍是三个Framgment对象，不是完全意义的懒加载12345678910111213141516171... 查看详情

javascript生成对象的三种方法

/**js生成对象的三种方法*///1.通过newObject,然后添加属性示例如下:varpeople1=newObject();people1.name=‘xiaohailong01‘;people1.age=31;alert("name:"+people1.name+",age:"+people1.age);//2.直接接收json数据生成varpeople2={name:‘xiaohail 查看详情

用旭日图展示数据的三种方法

...，能表达清晰的层级和归属关系，以父子层次结构来显示数据构成情况。旭日图中，离远点越近表示级别越高，相邻两层中，是内层包含外层的关系。 在实际项目中使用旭日图，可以更细分溯源分析数据，真正了解数据的具... 查看详情

大数据必学java基础（七十一）：比对非文本文件复制的三种方法的效率

文章目录比对非文本文件复制的三种方法的效率一、缓冲字符流（处理流）二、转换流</ 查看详情

sql：数据去重的三种方法(代码片段)

1、使用distinct去重distinct用来查询不重复记录的条数，用count(distinctid)来返回不重复字段的条数。用法注意：distinct【查询字段】，必须放在要查询字段的开头，即放在第一个参数；只能在SELECT语句中使用，... 查看详情

datatable过滤重复行

///<summary>///去除重复数据///</summary>///<paramname="table"></param>///<returns></returns>publicDataTableFilterRepeatTable(DataTabletable){DataTable_table=table.Clone() 查看详情

[excelvba]自定义排序的三种方法

诸君好，前前期我们聊了VBA编程和数据的常规排序……VBA常用小代码105：Rang对象的排序操作……今天我们再聊下自定义排序……何谓自定义排序，就是按指定的顺序对数据源进行排序呗……今一共... 查看详情