对user i/o的疑惑

xteitxu

lfree 发表于 2021-4-22 20:50
能查询AnonHugePages是那些地方在用吗?

[root@localhost ~]# grep -e AnonHugePages /proc/165559/smaps |awk '{ if($2>4) print $0} ' |  awk -F "/"  '{print $0; system("ps -fp 165559")} '|grep AnonHugePages
AnonHugePages:     79872 kB
AnonHugePages:    524288 kB
AnonHugePages:     49152 kB
AnonHugePages:     51200 kB
AnonHugePages:     14336 kB
AnonHugePages:     24576 kB
AnonHugePages:     49152 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:     14336 kB
AnonHugePages:     16384 kB
AnonHugePages:     30720 kB
AnonHugePages:     30720 kB
AnonHugePages:     49152 kB
AnonHugePages:      2048 kB
AnonHugePages:     14336 kB
AnonHugePages:     16384 kB
AnonHugePages:      2048 kB
AnonHugePages:      4096 kB
AnonHugePages:     14336 kB
AnonHugePages:     12288 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:     16384 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      2048 kB
AnonHugePages:      6144 kB
AnonHugePages:      6144 kB
AnonHugePages:      4096 kB
AnonHugePages:      4096 kB
AnonHugePages:     16384 kB
AnonHugePages:      6144 kB
AnonHugePages:     14336 kB
AnonHugePages:     18432 kB
AnonHugePages:     26624 kB
AnonHugePages:     22528 kB
AnonHugePages:     20480 kB
AnonHugePages:     18432 kB
AnonHugePages:     16384 kB
AnonHugePages:     18432 kB
AnonHugePages:     16384 kB
AnonHugePages:      8192 kB
AnonHugePages:     14336 kB
AnonHugePages:    651264 kB
AnonHugePages:  33554432 kB
AnonHugePages:     22528 kB
AnonHugePages:     30720 kB
AnonHugePages:      2048 kB
AnonHugePages:     81920 kB
AnonHugePages:     49152 kB

这个进程是ES进程使用的AnonHugePages。
这台机器部署了两个ES。

xteitxu

cqiwen 发表于 2021-4-23 14:19
可以看下这几个IO参数，另外，本来你的硬盘IO是瓶颈，那边建议给ES单独加一块硬盘，不要两套系统都放一块硬 ...

好的。谢谢。ES目前单独放在一个盘上。

lfree

xteitxu 发表于 2021-4-25 11:28
[root@localhost ~]# grep -e AnonHugePages /proc/165559/smaps |awk '{ if($2>4) print $0} ' |  awk -F  ...

这样就对了，es消耗大量AnonHugePages内存，如果你目前不能分开可以将
数据哭设置在使用hugepage，减少sga的使用，我估计可以减少20g。

另外你还可以设置filesystemio_options=setall,这样sga适当增加，也就是减少10g，不过这个给仔细评估。
另外你备份使用mount nfs吗，如果使用ilesystemio_options=setall我的测试不行。

lfree

你也可以使用你写的脚本查询那个进程使用swap。

lfree

grep -e AnonHugePages /proc/*/smaps |awk '{ if($2>0) print $0} ' | awk -F '/' '{print $3}'| paste -sd,
grep -e AnonHugePages /proc/*/smaps |awk '{ if($2>0) print $0} ' | awk -F '/' '{print $3}'| paste -sd, | xargs ps -fp

xteitxu

lfree 发表于 2021-4-26 08:43
这样就对了，es消耗大量AnonHugePages内存，如果你目前不能分开可以将数据哭设置在使用hugepage，减少sga的 ...

收到。谢谢版主的建议。