删除重复记录前,先查询了一下要删除的有多少行:
select count(*)
  from tab1 a
where a.rowid < (select max(b.rowid)
                    from tab2 b
                   where a.col1 = b.col1
                     and a.col2 = b.col2);

查询的结果有12万条记录,然后将select count(*)改为delete后开始执行…………4个小时了，现在还没执行完。
有什么办法能加快吗？

用分析函数,参考:

PHP code:



删除重复数据的一种高效的方法


发表人:yaanzy | 发表时间: 2005年二月18日, 13:57


表demo是重复拷贝自dba_objects，有88万左右，不重复的是27323，没有索引


方法一：delete from demo a where a.rowid <> (select max(rowid) from demo b where


                                                                      b.object_id=a.object_id);


            耗时：几个小时以上


方法二： delete from demo where rowid in 


              (select rid from 


                          (select rowid rid,row_number() over(partition by object_id order by rowid) rn


                             from demo)


               where rn <> 1 );


   耗时：30秒


方法三： create table demo2 as 


              select object_id,owner... from


                       (select demo.*,row_number() over(partition by object_id order by rowid) rn from demo)


                         where rn = 1;


              truncate table demo; insert into demo select * from demo2; drop table demo2;


共耗时： 10秒，适合大数据量的情况，产生更少回滚量；





..

建议用方法二

谢谢~！我刚搜了一下，发现还有种办法：

delete cz where (c1,c10) in (select c1,c10 from cz group by c1,c10 having count(*)>1) and rowid not in
(select min(rowid) from cz group by c1,c10 having count(*)>1);

QUOTE:

---

最初由 coohoo 发布
谢谢~！我刚搜了一下，发现还有种办法：

delete cz where (c1,c10) in (select c1,c10 from cz group by c1,c10 having count(*)>1) and rowid not in
(select min(rowid) from cz group by c1,c10 having count(*)>1);

---

这些方法效率都是很低的
建议还是使用oracle 的分析函数比较快一点的

要考虑删除的重复记录占总记录数的比例。

方法二： delete from demo where rowid in
              (select rid from
                          (select rowid rid,row_number() over(partition by object_id order by rowid) rn
                             from demo)
               where rn <> 1 );
对于此方法，如果判断两个字段是否重复，我这样写：
delete from demo where rowid in
              (select rid from
                          (select rowid rid,row_number() over(partition by object_id,object_id2 order by rowid) rn
                             from demo)
               where rn <> 1 );
就是增加了第2个字段object_id2，但发现结果不对。应该怎么写？

oracle的删除和更新操作本来就是很慢的，没有更好的办法，如果你预先分区还好一些

如果没有大的影响，建议 CTAS

没有哪种是最优的，
根据数据(分布，多少等等)情况，上面几种方式会用不一样的表现。