关于oracle数据块和操作系统块的关系。

shahand

原帖由 sqysl 于 2008-11-10 08:58 发表


应该不能说是绕过吧，我觉得应该是ORACLE在OS首肯的前提下，去做一些本来应该OS来做的工作，相当于OS的劳工吧。我当时只是看什么资料时看了一下，应该有7、8年之久了，之所以现在还记得，就是因为我当时也很疑惑，印象很深，应该还是本英文资料。

是不是bypass filesystem cache，  direct IO 。

sqysl

我的印象里不是，记得好像是ORACLE去执行I/O，而不是申请OS去执行，由于好几年了，我最近翻了所有资料也没查到，希望有看到过类似资料的朋友能说一下。

bluemoon0083

我的理解，这种情况下应该是oracle直接与kernel交互而不通过os，应该是oracle有一部分功能或者代码与kernel整合在了一起
kernel里面肯定有些指令或者驱动来操作设备，而oracle只要能够直接调用这些东西就行了

bluemoon0083

原帖由 bluemoon0083 于 2008-11-12 09:35 发表
我的理解，这种情况下应该是oracle直接与kernel交互而不通过os，应该是oracle有一部分功能或者代码与kernel整合在了一起
kernel里面肯定有些指令或者驱动来操作设备，而oracle只要能够直接调用这些东西就行了

我觉得这个说法应该没有问题，oracle的数据文件有其特有的格式
文件系统是与os相关的，os知道如何来读取文件系统中的文件，如果数据文件放在文件系统那么oracle还要通过os的功能来使用文件系统中的文件
至于裸设备，虽然os不知道如何来读取，但由于oracle自己已经知道其特有的格式，那么直接通过kernel来操作就行了

bluemoon0083

而oracle的机制决定了即使raw的数据文件os不认识oracle也能保证一致性和完整性，因此通常raw的性能比fs要高，绕过了os维护其fs的一致性等功能
当然os的fs是对所有文件，而不仅仅是oracle的文件

以上如有说错的地方请批评指正！

[ 本帖最后由 bluemoon0083 于 2008-11-12 10:28 编辑 ]

sqysl

我比较认可楼上的意思，我也是这里理解的，ORACLE进行I/O时，和OS的信息交互是不可避免的，但具体去执行由ORACLE去做I/O,这样也许比OS去执行ORACLE要求的I/O效率要高一些，包括对其他一些资源的管理也是，比如：内存，ORACLE不可能事无巨细的都把任务抛给OS去做，它只是在必要的时候和OS进行信息交互，然后自己去做具体的实施，这点来说，ORACLE某些功能模块具备OS模块的特征，两者在某些方面紧密的结合在了一起，这点来说，它们的关系比普通应用软件和OS的关系要“亲密”得多，这也是oracle等数据库软件操作动辄上千G数据，性能却如此之高的原因所在，如果数据库每做一个I/O都抛给OS去操作，然后由OS再把结果转给ORACLE的话，我想，数据库得性能是受到影响的，很多其他数据库系统也更加明确的说明了这点。

feng_xin

windows下oracle I/O原理不是很明白。

Unix下的这个kernel分解图可以看得比较明白




对于raw device来说，oracle直接走Device Control那条线调用device driver读写DISK字符设备，所以说创建表空间的时候ORACLE的裸设备必须要选/dev/下的那个disk字符设备而不是块设备.

对于普通的文件系统，oracle走Filesystem那条线，调用OS的文件系统读写块设备.

feng_xin

如果ORACLE使用的是文件系统，应该通过调用OS 的文件系统来读取I/O

每个操作系统filesystem的具体实现方式都应该还有些区别
下面的图是AIX 的I/O栈图




对于direct I/O 来讲，操作会跳过VMM那个阶段，也就是不经过虚拟内存管理，从用户缓冲区直接与磁盘进行数据传输。

feng_xin

对照文件系统的I/O栈图，还是没能理解YongHuang所说的IO  chunksize 跟ORACLE BLOCK的关系

参照上面的两个图，YongHuang所说的“OS space allocation block size ”
是指Block device的block的大小吗？




第二个图(AIX IO栈)的 Block I/O to logical disk的一次I/O是不是就是指block device的block size?

在make filesystem的时候要指定BLOCK的大小，这个block的大小是不是指“I/O Chunk size”？ 也就是第二个图中的I/O to blocks in a filesystemde的block的大小。 对文件logical读写的操作，一次I/O是不是就是指I/O chunk size？

[ 本帖最后由 feng_xin 于 2008-11-13 09:30 编辑 ]

feng_xin

对于raw device来说， I/O 栈应该只包括最下面的三层

那么block I/O to logical disk的大小是不是应该跟oracle的block size有很大的关系？