楼主: kelsoncong

[精华] 数据库调优的三板斧[已结贴]

[复制链接]
招聘 : Java研发
论坛徽章:
71
马上加薪
日期:2014-02-19 11:55:14蜘蛛蛋
日期:2012-12-26 18:16:01茶鸡蛋
日期:2012-11-16 08:12:48ITPUB 11周年纪念徽章
日期:2012-10-09 18:05:07奥运会纪念徽章:网球
日期:2012-08-23 14:58:08奥运会纪念徽章:沙滩排球
日期:2012-07-19 17:28:14版主2段
日期:2012-07-07 02:21:02咸鸭蛋
日期:2012-03-23 18:17:482012新春纪念徽章
日期:2012-02-13 15:13:512012新春纪念徽章
日期:2012-02-13 15:13:51
101#
发表于 2012-6-27 09:20 | 只看该作者
yobyin 发表于 2012-6-27 09:12
俺还有问题, 压缩之后是查询的快了,可是这也会让insert  ,这里你的压力是在etl 这。
compress 后,时间 ...

历史数据压缩就行了,新insert的数据并不压缩
关键是历史数据最好不能有更新操作

使用道具 举报

回复
招聘 : Java研发
论坛徽章:
71
马上加薪
日期:2014-02-19 11:55:14蜘蛛蛋
日期:2012-12-26 18:16:01茶鸡蛋
日期:2012-11-16 08:12:48ITPUB 11周年纪念徽章
日期:2012-10-09 18:05:07奥运会纪念徽章:网球
日期:2012-08-23 14:58:08奥运会纪念徽章:沙滩排球
日期:2012-07-19 17:28:14版主2段
日期:2012-07-07 02:21:02咸鸭蛋
日期:2012-03-23 18:17:482012新春纪念徽章
日期:2012-02-13 15:13:512012新春纪念徽章
日期:2012-02-13 15:13:51
102#
发表于 2012-6-27 09:20 | 只看该作者
yobyin 发表于 2012-6-27 09:12
俺还有问题, 压缩之后是查询的快了,可是这也会让insert  ,这里你的压力是在etl 这。
compress 后,时间 ...

历史数据压缩就行了,新insert的数据并不压缩
关键是历史数据最好不能有更新操作

使用道具 举报

回复
论坛徽章:
2
数据库板块每日发贴之星
日期:2009-07-28 01:01:022013年新春福章
日期:2013-02-25 14:51:24
103#
发表于 2012-6-27 09:29 | 只看该作者
kelsoncong 发表于 2012-6-26 16:16
仓库环境下,放在存储过程里面的还是比较多的,避免因为大量数据装载和删除导致的统计信息的问题,加点hint系 ...

我也为认为hint 还是有些必要的, olap 这种环境sql 较稳定。 当然具体问题具体分析

使用道具 举报

回复
论坛徽章:
2
数据库板块每日发贴之星
日期:2009-07-28 01:01:022013年新春福章
日期:2013-02-25 14:51:24
104#
发表于 2012-6-27 09:31 | 只看该作者
kelsoncong 发表于 2012-6-26 20:30
merge操作类似于update+insert,基本还是比较低效的

我们的项目全是用的merge , 方便呀。

使用道具 举报

回复
论坛徽章:
2
数据库板块每日发贴之星
日期:2009-07-28 01:01:022013年新春福章
日期:2013-02-25 14:51:24
105#
发表于 2012-6-27 09:32 | 只看该作者
Lyoohan 发表于 2012-6-26 16:20
单从数据量看,全国可能就是某个省的好几十倍,
如果做多个表连接,每个表都是好几十E行的数据量,那就非常庞大 ...

在rac 节点下采用一些数据,业务隔离的方法还是比较有用的。
这是在底层架构上说的

使用道具 举报

回复
论坛徽章:
2
数据库板块每日发贴之星
日期:2009-07-28 01:01:022013年新春福章
日期:2013-02-25 14:51:24
106#
发表于 2012-6-27 09:34 | 只看该作者
anlinew 发表于 2012-6-27 09:20
历史数据压缩就行了,新insert的数据并不压缩
关键是历史数据最好不能有更新操作

还有问一下楼主,你家的是双胞胎么

使用道具 举报

回复
论坛徽章:
2
2013年新春福章
日期:2013-02-25 14:51:24ITPUB社区OCM联盟徽章
日期:2013-11-21 14:19:26
107#
发表于 2012-6-27 09:34 | 只看该作者
学习!!!!

使用道具 举报

回复
招聘 : Java研发
论坛徽章:
71
马上加薪
日期:2014-02-19 11:55:14蜘蛛蛋
日期:2012-12-26 18:16:01茶鸡蛋
日期:2012-11-16 08:12:48ITPUB 11周年纪念徽章
日期:2012-10-09 18:05:07奥运会纪念徽章:网球
日期:2012-08-23 14:58:08奥运会纪念徽章:沙滩排球
日期:2012-07-19 17:28:14版主2段
日期:2012-07-07 02:21:02咸鸭蛋
日期:2012-03-23 18:17:482012新春纪念徽章
日期:2012-02-13 15:13:512012新春纪念徽章
日期:2012-02-13 15:13:51
108#
发表于 2012-6-27 09:36 | 只看该作者
yobyin 发表于 2012-6-27 09:32
在rac 节点下采用一些数据,业务隔离的方法还是比较有用的。
这是在底层架构上说的

RAC结合parttion,再加业务隔离

使用道具 举报

回复
招聘 : Java研发
论坛徽章:
71
马上加薪
日期:2014-02-19 11:55:14蜘蛛蛋
日期:2012-12-26 18:16:01茶鸡蛋
日期:2012-11-16 08:12:48ITPUB 11周年纪念徽章
日期:2012-10-09 18:05:07奥运会纪念徽章:网球
日期:2012-08-23 14:58:08奥运会纪念徽章:沙滩排球
日期:2012-07-19 17:28:14版主2段
日期:2012-07-07 02:21:02咸鸭蛋
日期:2012-03-23 18:17:482012新春纪念徽章
日期:2012-02-13 15:13:512012新春纪念徽章
日期:2012-02-13 15:13:51
109#
发表于 2012-6-27 09:37 | 只看该作者
yobyin 发表于 2012-6-27 09:34
还有问一下楼主,你家的是双胞胎么

晕,我非楼主啊
镜子照的

使用道具 举报

回复
论坛徽章:
67
现任管理团队成员
日期:2012-06-02 02:10:00ITPUB元老
日期:2012-09-12 14:06:14ITPUB社区千里马徽章
日期:2013-06-09 10:15:34季节之章:冬
日期:2012-09-04 11:05:30季节之章:春
日期:2012-09-05 09:20:36优秀写手
日期:2013-12-18 09:29:09马上有房
日期:2014-04-10 13:35:362014年新春福章
日期:2014-04-14 09:54:08马上有车
日期:2014-02-28 16:43:13马上加薪
日期:2014-02-19 11:55:14
110#
 楼主| 发表于 2012-6-27 10:21 | 只看该作者
newkid 发表于 2012-6-26 23:18
第一板斧:
delete from ta where week='xxx';
insert into ta select * from tranTa where week='xxx ...

第一板斧里面有介绍,我改成了
Alter table ta truncate partition wk_xxx;
insert into ta select * from tranTa where week='xxx';

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 未成年人举报专区 
京ICP备16024965号-8  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表