对user i/o的疑惑

xteitxu

lfree 发表于 2021-4-22 11:48
我给的建议是设置sga小一些，少20G，采用hugepages，这样可以定住数据库使用的内存不在交换。也许性能会好 ...

现在把ES与ORACLE放在一起，是为了减少网络的延迟。之前分开两台机器，因为ES从ORACLE要读很大量的数据，网络带宽基本被吃满。所以这次放到一台机器做了测试。还有ES刷数据的表都比较大，如果SGA小了，可能会有严重的free buffer waits或相关的等待吧。

sqysl

xteitxu 发表于 2021-4-22 12:55
现在把ES与ORACLE放在一起，是为了减少网络的延迟。之前分开两台机器，因为ES从ORACLE要读很大量的数据，网 ...

说实话，这种持续大量读写数据的话，调整SGA解决不了根本问题，想办法增加存储性能，换快盘(高速盘或SSD)或加盘(raid)。瓶颈很清楚，就在存储层面。

sqysl

刚才看了下楼主提供的awr，确认瓶颈就在IO，又看了下SQL部分，看看是否能优化这些SQL，主要是看看这些SQL的条件列上是否存在索引，再就是，看看SQL语句的执行计划是否走了这些索引。

xteitxu

sqysl 发表于 2021-4-22 14:18
刚才看了下楼主提供的awr，确认瓶颈就在IO，又看了下SQL部分，看看是否能优化这些SQL，主要是看看这些SQL的 ...

SQL上我感觉无能为力了。这些SQL中where 字段都有索引。都能正常走索引。IN值基本都在1000，但是IN值不唯一。也就是一条SQL可能跑出来上万行的数据。逻辑读也较大。

sqysl

xteitxu 发表于 2021-4-22 14:57
SQL上我感觉无能为力了。这些SQL中where 字段都有索引。都能正常走索引。IN值基本都在1000，但是IN值不唯一 ...

嗯，我贴出的是按照物理读排序的，如果不能通过优化减少物理读，那么，只能增强存储层面的性能了。其实，这个物理读量也不是太大，只是就一块低速盘，跑满了。

cqiwen

lfree 发表于 2021-4-22 11:26
AnonHugePages:  68372480/1024/1024 = 65.205078125G内存都被它消耗掉了。

它这个根本就没有使用大内存页啊

cqiwen

lfree 发表于 2021-4-22 11:28
》这台服务器上有es服务。es将oracle的数据读到es里。什么叫es，我不懂，能给一些链接之类的吗？

ElasticSearch简称ES。建议还是分批次导入数据至ES。另外就是检查下数据库的IO设置参数，是否开启缓存。

xteitxu

cqiwen 发表于 2021-4-22 17:44
ElasticSearch简称ES。建议还是分批次导入数据至ES。另外就是检查下数据库的IO设置参数，是否开启缓存。

之前做过测试，in 200值，整体速度还没有in 1000的快，就一直延用了in1000。另外你说的IO参数是下面的设置吗？如若不是，请指教。
SQL> show parameter system

NAME                                 TYPE        VALUE
------------------------------------ ----------- ------------------------------
filesystemio_options                 string      ASYNCH
SQL> show parameter disk

NAME                                 TYPE        VALUE
------------------------------------ ----------- ------------------------------
asm_diskgroups                       string
asm_diskstring                       string
disk_asynch_io                       boolean     TRUE

lfree

能查询AnonHugePages是那些地方在用吗?

cqiwen

xteitxu 发表于 2021-4-22 18:49
之前做过测试，in 200值，整体速度还没有in 1000的快，就一直延用了in1000。另外你说的IO参数是下面的设置 ...

可以看下这几个IO参数，另外，本来你的硬盘IO是瓶颈，那边建议给ES单独加一块硬盘，不要两套系统都放一块硬盘上。
SQL> show parameter db_writer

NAME                                     TYPE         VALUE
------------------------------------ ----------- ------------------------------
db_writer_processes                     integer         1
SQL> show parameter disk_async

NAME                                     TYPE         VALUE
------------------------------------ ----------- ------------------------------
disk_asynch_io                             boolean         TRUE

SQL> show parameter io_slave

NAME                                     TYPE         VALUE
------------------------------------ ----------- ------------------------------
backup_tape_io_slaves                     boolean         FALSE
dbwr_io_slaves                             integer         0