楼主: coollangzi

又是一个让人崩溃的查询优化

[复制链接]
论坛徽章:
520
奥运会纪念徽章:垒球
日期:2008-09-15 01:28:12生肖徽章2007版:鸡
日期:2008-11-17 23:40:58生肖徽章2007版:马
日期:2008-11-18 05:09:48数据库板块每日发贴之星
日期:2008-11-29 01:01:02数据库板块每日发贴之星
日期:2008-12-05 01:01:03生肖徽章2007版:虎
日期:2008-12-10 07:47:462009新春纪念徽章
日期:2009-01-04 14:52:28数据库板块每日发贴之星
日期:2009-02-08 01:01:03生肖徽章2007版:蛇
日期:2009-03-09 22:18:532009日食纪念
日期:2009-07-22 09:30:00
11#
发表于 2017-5-12 11:18 | 只看该作者
第一个输出有三万行,时间都花在输出上了吧。

使用道具 举报

回复
论坛徽章:
0
12#
 楼主| 发表于 2017-5-12 12:43 | 只看该作者
newkid 发表于 2017-5-12 11:18
第一个输出有三万行,时间都花在输出上了吧。

还真不是,就是计算,plsql输出第一波数据就是30秒。

使用道具 举报

回复
论坛徽章:
407
紫蛋头
日期:2012-05-21 10:19:41迷宫蛋
日期:2012-06-06 16:02:49奥运会纪念徽章:足球
日期:2012-06-29 15:30:06奥运会纪念徽章:排球
日期:2012-07-10 21:24:24鲜花蛋
日期:2012-07-16 15:24:59奥运会纪念徽章:拳击
日期:2012-08-07 10:54:50奥运会纪念徽章:羽毛球
日期:2012-08-21 15:55:33奥运会纪念徽章:蹦床
日期:2012-08-21 21:09:51奥运会纪念徽章:篮球
日期:2012-08-24 10:29:11奥运会纪念徽章:体操
日期:2012-09-07 16:40:00
13#
发表于 2017-5-12 14:17 | 只看该作者
coollangzi 发表于 2017-5-12 12:43
还真不是,就是计算,plsql输出第一波数据就是30秒。

第一个sql执行计划是全表扫描还是索引扫描

使用道具 举报

回复
论坛徽章:
520
奥运会纪念徽章:垒球
日期:2008-09-15 01:28:12生肖徽章2007版:鸡
日期:2008-11-17 23:40:58生肖徽章2007版:马
日期:2008-11-18 05:09:48数据库板块每日发贴之星
日期:2008-11-29 01:01:02数据库板块每日发贴之星
日期:2008-12-05 01:01:03生肖徽章2007版:虎
日期:2008-12-10 07:47:462009新春纪念徽章
日期:2009-01-04 14:52:28数据库板块每日发贴之星
日期:2009-02-08 01:01:03生肖徽章2007版:蛇
日期:2009-03-09 22:18:532009日食纪念
日期:2009-07-22 09:30:00
14#
发表于 2017-5-13 09:34 | 只看该作者
coollangzi 发表于 2017-5-12 12:43
还真不是,就是计算,plsql输出第一波数据就是30秒。

计划是怎么样的?是FAST FULL SCAN 吗?

使用道具 举报

回复
论坛徽章:
0
15#
 楼主| 发表于 2017-5-18 09:13 | 只看该作者
newkid 发表于 2017-5-13 09:34
计划是怎么样的?是FAST FULL SCAN 吗?

index fast full scan .

之前,测试库3000万数据,优化完毕,再加并行8,提高到10秒左右。

今天一看真实库,一亿条数据,我的索引都建立不上,没索引,400秒啊!
一会儿把索引建立上了,再说,昨天索引建立,忘了加并行,而且忘了为空判断,有个脚本执行死活不用索引,才又给删了。

谢谢大家先。

使用道具 举报

回复
论坛徽章:
520
奥运会纪念徽章:垒球
日期:2008-09-15 01:28:12生肖徽章2007版:鸡
日期:2008-11-17 23:40:58生肖徽章2007版:马
日期:2008-11-18 05:09:48数据库板块每日发贴之星
日期:2008-11-29 01:01:02数据库板块每日发贴之星
日期:2008-12-05 01:01:03生肖徽章2007版:虎
日期:2008-12-10 07:47:462009新春纪念徽章
日期:2009-01-04 14:52:28数据库板块每日发贴之星
日期:2009-02-08 01:01:03生肖徽章2007版:蛇
日期:2009-03-09 22:18:532009日食纪念
日期:2009-07-22 09:30:00
16#
发表于 2017-5-18 22:19 | 只看该作者
你这种需求应该建立物化视图。

使用道具 举报

回复
论坛徽章:
0
17#
 楼主| 发表于 2017-5-19 08:47 | 只看该作者
newkid 发表于 2017-5-18 22:19
你这种需求应该建立物化视图。

我是oracle小白,这一个迭代马上结束了,不敢随便造次了,但确实开始的时候,我也提过用快照的方式(虽然当时我不知道快照就是物化视图,刚刚百度了一下才知道,之前只是听过这种概念,没有任何实践)。
刚来这个团队,被小坑了一下

使用道具 举报

回复
论坛徽章:
520
奥运会纪念徽章:垒球
日期:2008-09-15 01:28:12生肖徽章2007版:鸡
日期:2008-11-17 23:40:58生肖徽章2007版:马
日期:2008-11-18 05:09:48数据库板块每日发贴之星
日期:2008-11-29 01:01:02数据库板块每日发贴之星
日期:2008-12-05 01:01:03生肖徽章2007版:虎
日期:2008-12-10 07:47:462009新春纪念徽章
日期:2009-01-04 14:52:28数据库板块每日发贴之星
日期:2009-02-08 01:01:03生肖徽章2007版:蛇
日期:2009-03-09 22:18:532009日食纪念
日期:2009-07-22 09:30:00
18#
发表于 2017-5-19 23:21 | 只看该作者
我很好奇这个需求是想干什么?没有任何过滤条件,输出三万行?是要导出数据给第三方?

使用道具 举报

回复
论坛徽章:
0
19#
 楼主| 发表于 2017-5-23 10:31 | 只看该作者
newkid 发表于 2017-5-19 23:21
我很好奇这个需求是想干什么?没有任何过滤条件,输出三万行?是要导出数据给第三方?

是这样的,这是一个比赛成绩公布的网站,这么多选手,每天来一次核算,相当于排位吧,只是排位的逻辑比较复杂,分数计算相当综合。

一天就计算一次,但这个成绩计算目前一小时,我是要给其提升到4分钟以内,刚来公司没有办法,总得出点成绩。其实现在如果是差不多的服务器,4分钟一点问题没有,我心中原本想的是4秒钟。。。。哈哈

但确实oracle不熟悉,而且纯oracle即时计算4秒钟是不可能的,有一些中间值能先算尽可能先算,无关系的计算尽可能分布式。最后来一个排序就好了,3万条,1秒钟足够排出来了。

使用道具 举报

回复
论坛徽章:
520
奥运会纪念徽章:垒球
日期:2008-09-15 01:28:12生肖徽章2007版:鸡
日期:2008-11-17 23:40:58生肖徽章2007版:马
日期:2008-11-18 05:09:48数据库板块每日发贴之星
日期:2008-11-29 01:01:02数据库板块每日发贴之星
日期:2008-12-05 01:01:03生肖徽章2007版:虎
日期:2008-12-10 07:47:462009新春纪念徽章
日期:2009-01-04 14:52:28数据库板块每日发贴之星
日期:2009-02-08 01:01:03生肖徽章2007版:蛇
日期:2009-03-09 22:18:532009日食纪念
日期:2009-07-22 09:30:00
20#
发表于 2017-5-24 03:55 | 只看该作者
40秒不是大大超过你目标的4分钟吗?

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 未成年人举报专区 
京ICP备16024965号-8  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表