楼主: stone10

删除重复行SQL优化

[复制链接]
论坛徽章:
31
授权会员
日期:2005-10-30 17:05:332012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:23马上有车
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有对象
日期:2014-02-19 11:55:142012新春纪念徽章
日期:2012-02-13 15:09:23
31#
发表于 2005-3-18 16:49 | 只看该作者
在大数据量的数据中DELELE本身就是痛苦的事情
慢是正常的

使用道具 举报

回复
论坛徽章:
168
马上加薪
日期:2014-02-19 11:55:142012新春纪念徽章
日期:2012-02-13 15:10:582012新春纪念徽章
日期:2012-01-04 11:49:54蜘蛛蛋
日期:2011-12-05 16:08:56ITPUB十周年纪念徽章
日期:2011-11-01 16:19:41设计板块每日发贴之星
日期:2011-07-22 01:01:02ITPUB官方微博粉丝徽章
日期:2011-06-30 12:30:16管理团队成员
日期:2011-05-07 01:45:082011新春纪念徽章
日期:2011-01-25 15:42:562011新春纪念徽章
日期:2011-01-25 15:42:33
32#
发表于 2005-3-18 17:20 | 只看该作者
最初由 stone10 发布
[B]太痛苦了!
我现在不想说是谁的SQL好,方正一句话,都很慢! [/B]


对于大批量的数据删除/更新慢是无法避免的,就看如何尽可能的去优化了.

使用道具 举报

回复
论坛徽章:
1
33#
 楼主| 发表于 2005-3-18 20:54 | 只看该作者
删数据用SQL语句,如果时间长的话,回滚是不是很厉害啊?

使用道具 举报

回复
论坛徽章:
31
授权会员
日期:2005-10-30 17:05:332012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:23马上有车
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有对象
日期:2014-02-19 11:55:142012新春纪念徽章
日期:2012-02-13 15:09:23
34#
发表于 2005-3-18 20:58 | 只看该作者
最初由 stone10 发布
[B]删数据用SQL语句,如果时间长的话,回滚是不是很厉害啊? [/B]


回滚快慢主要你看你更新记录多少
以及更新记录的大小有关系的

使用道具 举报

回复
招聘 : Java研发
论坛徽章:
0
35#
发表于 2005-3-18 21:37 | 只看该作者

Re: 删除重复行SQL优化

通过ROWID,如下:
delete from demo_table A where rowid in ( select max_rowid from (select column1, max(rowid)  max_rowid from demo_table group by column1))

偶经常这样做



最初由 stone10 发布
[B]下面这边zbxsrsz是销售流水帐表,数据有1K万条记录,有一次表的唯一索引被人删除了,然后导数据进去,大概有1万行数据重复掉了,于是我就想把这些重复掉的数据删除掉,我写了如下SQL,但是运行非常慢,特此想让各位大虾 help me!

delete work.zbxsrsz a where exists
( select * from work.zbxsrsz                 
where xr_bm = a.xr_bm
and xr_jyrq = a.xr_jyrq
and xr_jh = a.xr_jh and xr_xh < a.xr_xh
and xr_jyrq > to_Date('2005.03.13','yyyy.mm.dd')
and xr_jyrq < to_Date('2005.03.15','yyyy.mm.dd') )

唯一索引段为xr_bm,xr_jyrq,xr_jh,xr_xh(部门、交易日期、机号、序号) [/B]

使用道具 举报

回复
论坛徽章:
22
2010新春纪念徽章
日期:2010-03-01 11:08:33马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:142012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:09
36#
发表于 2005-3-19 00:09 | 只看该作者
最初由 stone10 发布
[B]删数据用SQL语句,如果时间长的话,回滚是不是很厉害啊? [/B]


为什么还没做, 就想着去rollback. :d

使用道具 举报

回复
论坛徽章:
1
37#
 楼主| 发表于 2005-3-19 14:25 | 只看该作者
累了一个晚上,终于搞定,Thanks everybody!
我最后感觉先对速度基本上差不了多少!

我想再请教一下,用 in 、exists 和> <这些查询遍历数据时有什么区别?

使用道具 举报

回复
论坛徽章:
168
马上加薪
日期:2014-02-19 11:55:142012新春纪念徽章
日期:2012-02-13 15:10:582012新春纪念徽章
日期:2012-01-04 11:49:54蜘蛛蛋
日期:2011-12-05 16:08:56ITPUB十周年纪念徽章
日期:2011-11-01 16:19:41设计板块每日发贴之星
日期:2011-07-22 01:01:02ITPUB官方微博粉丝徽章
日期:2011-06-30 12:30:16管理团队成员
日期:2011-05-07 01:45:082011新春纪念徽章
日期:2011-01-25 15:42:562011新春纪念徽章
日期:2011-01-25 15:42:33
38#
发表于 2005-3-19 14:55 | 只看该作者
最初由 stone10 发布
[B]累了一个晚上,终于搞定,Thanks everybody!
我最后感觉先对速度基本上差不了多少!

我想再请教一下,用 in 、exists 和> <这些查询遍历数据时有什么区别? [/B]


最终的解决方案?
"先对速度"是个什么概念?

使用道具 举报

回复
论坛徽章:
31
授权会员
日期:2005-10-30 17:05:332012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:232012新春纪念徽章
日期:2012-02-13 15:09:23马上有车
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有对象
日期:2014-02-19 11:55:142012新春纪念徽章
日期:2012-02-13 15:09:23
39#
发表于 2005-3-19 15:01 | 只看该作者
把解决过程全拿出来
也可以写点心得

使用道具 举报

回复
论坛徽章:
2
授权会员
日期:2005-10-30 17:05:33生肖徽章2007版:鸡
日期:2008-01-02 17:35:53
40#
发表于 2005-3-19 17:13 | 只看该作者
等待,心得!!

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 未成年人举报专区 
京ICP备16024965号-8  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表