Oracle数据库应用，热数据的最佳定义是什么？

arron刘 · 发表于 2013-11-13 14:23

闪存的强大应用领域之一是利用闪存作为缓存层。在混合存储架构中，用户既可以利用闪存的高速性能，又可以利用到硬盘的低成本的大存储容量。毋须讳言，对于缓存解决方案，关键在于应用必须有“热数据”- 即频繁访问的数据。

但在我们讨论应用是否有热数据以及如何捕获热数据之前，我们必须先定义什么是热数据，即针对当前应用什么样的数据为“合格”的热数据。大部分的缓存解决方案，包括LSI Nytro产品系列，基本上是基于设备层。其热数据都是在IO块的层次、基于LRU或其变化来定义的。这些方案的好处是透明，但没有考虑到应用中数据访问的特性，从而很难对性能的优化达到极致。

对于数据库应用（如Oracle），热数据是相当典型的。今天的讨论中，希望与大家一起探讨在你们应用实践中对于“热数据”定义的不同观点。

讨论话题：
1.针对常用的Oracle数据库应用，热数据的最佳定义是什么？
2.这些热数据具备怎样的特性（比如热数据的比例，热数据区间的移动变化）？
3.什么方式为热数据最佳捕获方式？是透明缓存方案、还是提供API而由上层应用来管理热数据？
4.对于Oracle数据库应用的缓存方案，还有哪些尚未提及或未开发的需求？

讨论时间：2013.11.12--2013.11.25

活动奖励：活动结束后将会抽取5名会员赠送精美U盘一件。

2009532140
Toms_zhang
nannan5000
pastime_Wang
vikou

2009532140 · 发表于 2013-11-13 14:35

本帖最后由 2009532140 于 2013-11-25 12:39 编辑

1.针对常用的Oracle数据库应用，热数据的最佳定义是什么？
这个没找到具体明确具体的定义，个人认为就是极短的时间内对少量数据进行了过于频繁的访问。
最简单的例子就是，在早晨高峰时间段内大批量员工的用户登录并打卡，这样的操作就会对少数的表进行高频访问就算是这个时间段内的热数据。
在数据库的内部底层表现为热点块，这个在网上有不少的介绍，在此不再赘述。
============================================================
2.这些热数据具备怎样的特性（比如热数据的比例，热数据区间的移动变化）？
① 主要就是短时迸发性。
② 热数据占总数据的比例很小(一般来说)
============================================================
3.什么方式为热数据最佳捕获方式？是透明缓存方案、还是提供API而由上层应用来管理热数据？
① 一般来说，透明缓存方案可以将广域网的流量降至最低。对于公司内联网用户来说，这意味着将内容在本地缓存，而无须通过专用的广域网来访问相关应用。这样可以提高系统吞吐量、减少响应时间、降低磁盘I/O，进而减少应用的等待时间。可以通过查询缓存区的相应数据结构可以得到热数据，这也是我们经常使用的方式之一。
② 上层应用的话用来发现相关的热数据更方便。什么时间做什么，会对什么数据造成热化是显而易见的。
所以说，这两个方式或许可以结合起来使用。
============================================================
4.对于Oracle数据库应用的缓存方案，还有哪些尚未提及或未开发的需求？
对于形成的热数据，数据库系统是否能将相关的热数据进行分散，降低热度。