数据库调优的三板斧[已结贴]

kelsoncong

yobyin 发表于 2012-6-27 09:12
俺还有问题， 压缩之后是查询的快了，可是这也会让insert  ,这里你的压力是在etl 这。
compress 后，时间 ...

这个地方主要存在分层聚合的问题，基本是天->周->月->季度->年，
如果我们在底层的表就设计成了压缩表，则这部分数据在被之后的层级聚合，性能就大大提升了，主要得益于IO的减少

另外你对compress表的了解不是非常的深入，压缩表是由oracle底层的代码实行实时压缩的，不存在是否支持在线压缩的问题

kelsoncong

anlinew 发表于 2012-6-27 09:20
历史数据压缩就行了，新insert的数据并不压缩
关键是历史数据最好不能有更新操作

这个压缩表似乎存在些误解，这个东西是由oracle底层代码实现的实时压缩，因此只要在表里的数据都会被实时压缩的，如果是分区表，则对应分区被指定为开启压缩，也是会被实时压缩的

ZALBB

kelsoncong 发表于 2012-6-27 10:25
这个地方主要存在分层聚合的问题，基本是天->周->月->季度->年，
如果我们在底层的表就设计成了压缩表， ...

在这里问一下ORACLE 的技术人员：

1   basic 压缩和 oltp 压缩 在技术实现上是否一样？ 我之前尝试过几遍，发现 basic 压缩率似乎比
oltp 压缩率要高，是否有必要在oltp 压缩后，当这些数据变为历史数据时，再来一遍basic 压缩？

给我感觉，oltp 压缩似乎没basic 实在。

kelsoncong

yobyin 发表于 2012-6-27 09:31
我们的项目全是用的merge , 方便呀。

写SQL是方便了，性能呢
大数据量背景下，性能还是第一位的

anlinew

kelsoncong 发表于 2012-6-27 10:28
这个压缩表似乎存在些误解，这个东西是由oracle底层代码实现的实时压缩，因此只要在表里的数据都会被实时 ...

11G的OLTP Compression？

kelsoncong

ZALBB 发表于 2012-6-27 10:29
在这里问一下ORACLE 的技术人员：

1   basic 压缩和 oltp 压缩 在技术实现上是否一样？ 我之前尝试过几 ...

这个我之前看过点介绍，是不一样的，
另外我在itpub上看到一篇博文写的很不错，
http://blog.itpub.net/category/42818/66940
他的结论是在一般的oltp的环境下，oltp的压缩率高，但是直接装载的时候，basic压缩率高，具体结论在下面，详细的内容可以参加原文

由以上数据可以看出来常规insert的插入到压缩表,压缩比是
no compress(29)　<　compress basic(26)　<　compress for oltp(13)
append方式插入到压缩表，压缩比是
no compress (29) <　compress for oltp(13) 　< compress basic(11)

kelsoncong

anlinew 发表于 2012-6-27 10:33
11G的OLTP Compression？

yes

anlinew

ZALBB 发表于 2012-6-27 10:29
在这里问一下ORACLE 的技术人员：

1   basic 压缩和 oltp 压缩 在技术实现上是否一样？ 我之前尝试过几 ...

默认情况下basic压缩的表PCTFREE 为0
oltp的为10，光这一项差别就不小了

ZALBB

anlinew 发表于 2012-6-27 10:47
默认情况下basic压缩的表PCTFREE 为0
oltp的为10，光这一项差别就不小了

不知道还有这项差别，

anlinew

kelsoncong 发表于 2012-6-27 10:38
这个我之前看过点介绍，是不一样的，
另外我在itpub上看到一篇博文写的很不错，
http://blog.itpub.net ...

博文里的错误估计也是没考虑pctfree：

1. SQL> SELECT SUM(T.BYTES)/1024/1024 FROM USER_SEGMENTS T WHERE T.SEGMENT_NAME = 'TEST_DBA_OBJECTS_CTAS_NOCOM';
   
2. 
   
3. 
   
4. SUM(T.BYTES)/1024/1024
   
5. 
   
6. ----------------------
   
7. 
   
8. 29
   
9. 
   
10. 
    
11. 
    
12. Packing Compressed Tables
    
13. 
    
14. If you use conventional DML on a table compressed with basic compression, then all inserted and updated rows are stored uncompressed. To "pack" the compressed table such that these rows are compressed, you can use an ALTER TABLE MOVE statement.
    
15. 
    
16. [color=Red]对于本身是压缩表但是插入数据是按照常规插入的情况下，官方虽然说没有压缩但事实之前的实验表明数据占据的空间还是比存在于非压缩表中占用空间要少[/color]，为了让这些数据进一步压缩，可以使用alter table move这种语句来实现，来看一下实验；
    
17. 
    
18. 
    
19. 
    
20. SQL> SELECT SUM(T.BYTES)/1024/1024 FROM USER_SEGMENTS T WHERE T.SEGMENT_NAME = 'TEST_DBA_OBJECTS_INSERT';
    
21. 
    
22. 
    
23. SUM(T.BYTES)/1024/1024
    
24. 
    
25. ----------------------
    
26. 
    
27. 26
    
28. 
    
29. 
    
30. SQL> ALTER TABLE TEST_DBA_OBJECTS_INSERT MOVE ;
    
31. 
    
32. 
    
33. Table altered
    
34. 
    
35. 
    
36. SQL> SELECT SUM(T.BYTES)/1024/1024 FROM USER_SEGMENTS T WHERE T.SEGMENT_NAME = 'TEST_DBA_OBJECTS_INSERT';
    
37. 
    
38. 
    
39. SUM(T.BYTES)/1024/1024
    
40. 
    
41. ----------------------
    
42. 
    
43. 11

复制代码