查看: 6672|回复: 20

[PL/SQL] oracle千万级数据优化,高手请进

[复制链接]
论坛徽章:
0
发表于 2011-11-27 21:22 | 显示全部楼层 |阅读模式
项目现在编写程序设计到千万级数据,这些数据要按照特定要求被划分为10000个组,进行count和sum运算,并且计算机的结果要插入到一个表格中类似
insert into select ... group by .....

结果程序速度极慢,可能要达到24小时以上,不知道哪位高手有较好的优化方案
现在情况是oracle的内存已经被占满,一部分数据被放在了硬盘上
论坛徽章:
11
2011新春纪念徽章
日期:2011-02-18 11:42:49阿斯顿马丁
日期:2013-10-31 16:33:252013年新春福章
日期:2013-02-25 14:51:24ITPUB 11周年纪念徽章
日期:2012-10-09 18:16:00奥运会纪念徽章:足球
日期:2012-08-19 15:57:15蛋疼蛋
日期:2012-02-22 22:32:12茶鸡蛋
日期:2012-02-14 23:20:502012新春纪念徽章
日期:2012-01-04 11:57:56复活蛋
日期:2011-12-28 11:00:35茶鸡蛋
日期:2011-12-07 17:10:33
发表于 2011-11-27 21:54 | 显示全部楼层
不明白楼主想做什么

使用道具 举报

回复
论坛徽章:
3
ITPUB十周年纪念徽章
日期:2011-11-01 16:24:512012新春纪念徽章
日期:2012-01-04 11:54:462013年新春福章
日期:2013-02-25 14:51:24
发表于 2011-11-27 22:02 | 显示全部楼层
都知道内存不够了,那就加内存咯。

使用道具 举报

回复
论坛徽章:
57
SQL极客
日期:2013-12-09 14:13:35秀才
日期:2016-01-21 13:42:39秀才
日期:2016-01-13 12:14:26SQL大赛参与纪念
日期:2016-01-13 10:32:19SQL数据库编程大师
日期:2016-01-13 10:30:43秀才
日期:2015-12-14 14:47:54秀才
日期:2015-10-19 15:50:392015年新春福章
日期:2015-03-06 11:58:18懒羊羊
日期:2015-03-04 14:52:11优秀写手
日期:2014-11-08 06:00:14
发表于 2011-11-27 22:26 | 显示全部楼层
千万不大,可以用plsql搞定,现在需要搞明白问题出在哪里。

使用道具 举报

回复
论坛徽章:
9
2012新春纪念徽章
日期:2012-01-04 11:49:542012新春纪念徽章
日期:2012-02-07 09:59:35茶鸡蛋
日期:2012-02-16 14:26:00ITPUB 11周年纪念徽章
日期:2012-10-09 18:03:322013年新春福章
日期:2013-02-25 14:51:24ITPUB社区12周年站庆徽章
日期:2013-08-22 17:29:07优秀写手
日期:2014-03-20 06:00:36慢羊羊
日期:2015-03-04 14:19:442015年新春福章
日期:2015-03-06 11:57:31
发表于 2011-11-28 09:00 | 显示全部楼层
场景提供的不全呀,这是个什么系统,平时怎么用的。

使用道具 举报

回复
论坛徽章:
2
ITPUB十周年纪念徽章
日期:2011-11-01 16:20:282012新春纪念徽章
日期:2012-01-04 11:49:54
发表于 2011-11-28 09:38 | 显示全部楼层
alter session set workarea_size_policy=manual;
alter session set sort_area_size = 尽量大一点的值
执行你的sql

使用道具 举报

回复
论坛徽章:
18
紫蛋头
日期:2011-07-25 08:06:53咸鸭蛋
日期:2011-12-27 11:35:38鲜花蛋
日期:2012-01-11 11:08:36奥运会纪念徽章:射击
日期:2012-09-11 08:56:18奥运会纪念徽章:体操
日期:2012-10-25 09:07:51紫蛋头
日期:2012-12-10 13:46:51灰彻蛋
日期:2013-01-28 14:23:202013年新春福章
日期:2013-02-25 14:51:24
发表于 2011-11-28 10:07 | 显示全部楼层
group by 几个列?在这些列上建索引啊,组合的效果更好

使用道具 举报

回复
论坛徽章:
103
操作系统板块每日发贴之星
日期:2005-06-21 01:01:50奥运会纪念徽章:自行车
日期:2012-10-03 15:17:15季节之章:秋
日期:2009-09-26 12:46:26季节之章:春
日期:2009-03-17 18:05:17季节之章:冬
日期:2008-12-01 14:39:08玉石琵琶
日期:2008-05-04 12:15:532008版在线时间
日期:2008-05-01 17:49:02ITPUB元老
日期:2008-03-16 18:47:22祖母绿
日期:2007-10-15 22:01:47BLOG每周发帖之星
日期:2006-10-01 01:35:23
发表于 2011-11-28 12:42 | 显示全部楼层
是在临时表里面处理的嘛?

使用道具 举报

回复
论坛徽章:
1
2013年新春福章
日期:2013-02-25 14:51:24
发表于 2011-11-29 09:45 | 显示全部楼层
千万级不算大。。
1. group by 的字段建索引
2. insert /*+ append */,少写redo log
3. 改善硬件,cpu,内存增加。

使用道具 举报

回复
论坛徽章:
0
发表于 2011-11-29 11:48 | 显示全部楼层
千万级不算大,主要還在INDEX和KEY上,另外重要的是你的SQL 質量問題!90%以上的效率問題都是SQL和INDEX的問題

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会,7折限时优惠重磅来袭!
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。

限时七折期:2019年8月31日前


----------------------------------------

大会官网>>
TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 
京ICP备09055130号-4  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表