查看: 5663|回复: 11

请教oracle大数据量sql优化

[复制链接]
论坛徽章:
0
发表于 2011-9-7 21:32 | 显示全部楼层 |阅读模式


oracle:10G

表A:TMP_VOICE_LIST_201108    数据量:1亿左右
表B:TB_PRD_SERV_INFO_CUR     数据量:1千万左右

表A中索引:CALLED_CODE

表B中索引:ACC_NBR


下面这个SQL不要太慢,小弟头疼中,需要怎么优化一下能提高效率,请高人指点。


  1. INSERT INTO TMP_CPT_VOICE_TEST
  2. SELECT
  3.        B.SERV_ID
  4.        ,B.PRODUCT_TOP_LVL
  5.        ,A.CALLED_CODE
  6.        ,A.CALLED_TSP_CODE
  7.        ,A.CALLED_AREA_CODE
  8.        ,A.CALLED_TOLL_TYPE
  9.        ,A.CALLED_REGION_CODE
  10.        ,A.CALLING_CODE      
  11.        ,A.CALLING_TSP_CODE
  12.        ,A.CALLING_AREA_CODE
  13.        ,A.CALLING_TOLL_TYPE
  14.        ,A.CALLING_REGION_CODE
  15.        ,A.START_TIME
  16. FROM TMP_VOICE_LIST_201108 A
  17. INNER JOIN TB_PRD_SERV_INFO_CUR B
  18. ON A.CALLED_CODE=B.ACC_NBR
  19. AND SUBSTR(A.CALLED_AREA_CODE,2,3)=B.LATN_ID
复制代码
论坛徽章:
5
ITPUB9周年纪念徽章
日期:2010-10-08 09:28:51数据库板块每日发贴之星
日期:2011-07-22 01:01:02蜘蛛蛋
日期:2011-08-24 14:10:13ITPUB十周年纪念徽章
日期:2011-11-01 16:24:042012新春纪念徽章
日期:2012-01-04 11:54:26
发表于 2011-9-7 23:11 | 显示全部楼层

回复 #1 vissalan 的帖子

A,B 表上面几乎都没什么过滤条件 只能全表扫描 你要让它快没得办法

如果你是OLAP 或者 CPU ,IO 有充足资源 可以考虑并行

alter session enable parallel dml;            
INSERT /*+ append parallel(x,4) */ INTO TMP_CPT_VOICE_TEST x
SELECT /*+ parallel(a,4) parallel(b,4) */
       B.SERV_ID
       ,B.PRODUCT_TOP_LVL
       ,A.CALLED_CODE
       ,A.CALLED_TSP_CODE
       ,A.CALLED_AREA_CODE
       ,A.CALLED_TOLL_TYPE
       ,A.CALLED_REGION_CODE
       ,A.CALLING_CODE      
       ,A.CALLING_TSP_CODE
       ,A.CALLING_AREA_CODE
       ,A.CALLING_TOLL_TYPE
       ,A.CALLING_REGION_CODE
       ,A.START_TIME
FROM TMP_VOICE_LIST_201108 A
INNER JOIN TB_PRD_SERV_INFO_CUR B
ON A.CALLED_CODE=B.ACC_NBR
AND SUBSTR(A.CALLED_AREA_CODE,2,3)=B.LATN_ID      

degree 根据自己实际情况设置

使用道具 举报

回复
认证徽章
论坛徽章:
41
ITPUB季度 技术新星
日期:2012-05-22 15:10:11祖母绿
日期:2013-09-13 21:16:10蓝锆石
日期:2013-09-13 21:15:34海蓝宝石
日期:2013-09-13 21:13:45最佳人气徽章
日期:2012-03-13 17:39:18优秀写手
日期:2013-12-18 09:29:11ITPUB社区12周年站庆徽章
日期:2013-10-17 13:56:592013年新春福章
日期:2013-02-25 14:51:24玉石琵琶
日期:2012-02-21 15:04:382011新春纪念徽章
日期:2011-02-18 11:43:35
发表于 2011-9-8 00:03 | 显示全部楼层
dml并发采用这种方式
alter session enable parallel dml;
insert /*+ parallel (emp_big,4) */
  into emp_big select * from emp;
commit;
alter session disable parallel dml;

直接hint无效


建议根据业务,或者分区的特性,分成几段处理

使用道具 举报

回复
论坛徽章:
5
ITPUB9周年纪念徽章
日期:2010-10-08 09:28:51数据库板块每日发贴之星
日期:2011-07-22 01:01:02蜘蛛蛋
日期:2011-08-24 14:10:13ITPUB十周年纪念徽章
日期:2011-11-01 16:24:042012新春纪念徽章
日期:2012-01-04 11:54:26
发表于 2011-9-8 10:47 | 显示全部楼层

回复 #3 xifenfei 的帖子

直接 hint 无效 神马意思?

使用道具 举报

回复
论坛徽章:
1088
金色在线徽章
日期:2007-04-25 04:02:08金色在线徽章
日期:2007-06-29 04:02:43金色在线徽章
日期:2007-03-11 04:02:02在线时间
日期:2007-04-11 04:01:02在线时间
日期:2007-04-12 04:01:02在线时间
日期:2007-03-07 04:01:022008版在线时间
日期:2010-05-01 00:01:152008版在线时间
日期:2011-05-01 00:01:342008版在线时间
日期:2008-06-03 11:59:43ITPUB年度最佳技术原创精华奖
日期:2013-03-22 13:18:30
发表于 2011-9-8 10:48 | 显示全部楼层
还是思密达的对,要insert和select都要parallel才可以达到效果,这个是olap吧,另外最好看下计划

使用道具 举报

回复
论坛徽章:
12
2009新春纪念徽章
日期:2009-01-04 14:52:28优秀写手
日期:2014-06-20 06:00:12蛋疼蛋
日期:2012-02-22 08:52:48ITPUB十周年纪念徽章
日期:2011-11-01 16:24:04生肖徽章2007版:鸡
日期:2009-11-11 13:17:35祖国60周年纪念徽章
日期:2009-10-09 08:28:00ITPUB8周年纪念徽章
日期:2009-09-27 10:21:21生肖徽章2007版:龙
日期:2009-08-09 19:39:29生肖徽章2007版:鸡
日期:2009-08-03 23:22:352009日食纪念
日期:2009-07-22 09:30:00
发表于 2011-9-8 14:17 | 显示全部楼层
你这查出来多少数据?

使用道具 举报

回复
招聘 : 数据库管理员
论坛徽章:
25
生肖徽章2007版:龙
日期:2008-05-06 11:07:48咸鸭蛋
日期:2011-10-19 10:09:12ITPUB十周年纪念徽章
日期:2011-11-01 16:20:282012新春纪念徽章
日期:2012-01-04 11:49:542013年新春福章
日期:2013-02-25 14:51:24
发表于 2011-9-8 14:24 | 显示全部楼层
你这是临时表么?TMP_CPT_VOICE_TEST
能否直接改成create table as

使用道具 举报

回复
论坛徽章:
3
2011新春纪念徽章
日期:2011-02-18 11:43:34蜘蛛蛋
日期:2012-05-17 23:40:002013年新春福章
日期:2013-02-25 14:51:24
发表于 2011-9-8 18:32 | 显示全部楼层
哇 这么大的表,我觉得优化分两部分,一是插入,二是查询。。。我总结一下插入部分的优化 大家看看对不对:

1.插入可以把临时表建在不同的表空间、不同的磁盘,提高I/O效率;
2.禁止临时表上的所有index/constraint/trigger
3.用NOLOGGING模式,减少写redo的时间
4. insert /*+APPEND*/ into 对大表可以提高存储的速度
5./*+PARALLEL*/采用并行操作

使用道具 举报

回复
论坛徽章:
8
数据库板块每日发贴之星
日期:2009-06-12 01:01:02数据库板块每日发贴之星
日期:2009-06-21 01:01:01ITPUB9周年纪念徽章
日期:2010-10-08 09:32:272010广州亚运会纪念徽章:游泳
日期:2010-11-12 16:42:092011新春纪念徽章
日期:2011-02-18 11:42:502010广州亚运会纪念徽章:三项全能
日期:2011-02-26 13:07:50咸鸭蛋
日期:2011-08-30 15:51:05ITPUB十周年纪念徽章
日期:2011-11-01 16:25:22
发表于 2011-9-8 19:26 | 显示全部楼层

回复 #5 dingjun123 的帖子

insert into xx select的时候,只要insert部分parallel,select部分不用加hint,两部分都是并行的。

使用道具 举报

回复
论坛徽章:
400
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
发表于 2011-9-8 19:37 | 显示全部楼层
alter session force parallel query;
alter session force parallel dml;
就完全不用hint

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会,7折限时优惠重磅来袭!
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。

限时七折期:2019年8月31日前


----------------------------------------

大会官网>>
TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 
京ICP备09055130号-4  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表