【讨论】请教，LINUX RAC，共享存储的盘符不一致，有无影响？

ZALBB

LINUX5.8,  RAC11203, 2节点。

节点1的存储情况，其中，暗红色为ASM的共享存储。

[root@rac1 ~]# fdisk -l

Disk /dev/sda: 48.3 GB, 48318382080 bytes
255 heads, 63 sectors/track, 5874 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sda1   *           1          13      104391   83  Linux
/dev/sda2              14        5874    47078482+  8e  Linux LVM

Disk /dev/sdb: 365.0 GB, 365072220160 bytes
255 heads, 63 sectors/track, 44384 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdb1               1       44384   356514448+  83  Linux

Disk /dev/sdc: 319.9 GB, 319975063552 bytes
255 heads, 63 sectors/track, 38901 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdc1               1       38901   312472251   83  Linux

Disk /dev/sdd: 9663 MB, 9663676416 bytes
64 heads, 32 sectors/track, 9216 cylinders
Units = cylinders of 2048 * 512 = 1048576 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdd1               1        9216     9437168   83  Linux

Disk /dev/sde: 8589 MB, 8589934592 bytes
64 heads, 32 sectors/track, 8192 cylinders
Units = cylinders of 2048 * 512 = 1048576 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sde1               1        8192     8388592   83  Linux

Disk /dev/sdf: 212.6 GB, 212600881152 bytes
255 heads, 63 sectors/track, 25847 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdf1               1       25847   207615996   83  Linux

Disk /dev/dm-0: 43.9 GB, 43989860352 bytes
255 heads, 63 sectors/track, 5348 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-0 doesn't contain a valid partition table

Disk /dev/dm-1: 4194 MB, 4194304000 bytes
255 heads, 63 sectors/track, 509 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-1 doesn't contain a valid partition table
[root@rac1 ~]#


节点2的存储情况，
起初，节点2的盘符和节点1的一样，但在往节点2添加了一块100G的存储后，系统自动命名为 /dev/sdc，导致节点2上的ASM共享的盘符变化了（都往后挪动了一位），请问：这种变化会不会影响系统使用？ 我担心
重启节点1服务器后，出现共享存储异常。谢谢。

[root@rac2 ~]# fdisk -l

Disk /dev/sda: 48.3 GB, 48318382080 bytes
255 heads, 63 sectors/track, 5874 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sda1   *           1          13      104391   83  Linux
/dev/sda2              14        5874    47078482+  8e  Linux LVM

Disk /dev/sdb: 107.3 GB, 107374182400 bytes
255 heads, 63 sectors/track, 13054 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdb1               1       13054   104856223+  8e  Linux LVM

Disk /dev/sdc: 107.3 GB, 107374182400 bytes
255 heads, 63 sectors/track, 13054 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/sdc doesn't contain a valid partition table

Disk /dev/sde: 9663 MB, 9663676416 bytes
64 heads, 32 sectors/track, 9216 cylinders
Units = cylinders of 2048 * 512 = 1048576 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sde1               1        9216     9437168   83  Linux

Disk /dev/sdd: 319.9 GB, 319975063552 bytes
255 heads, 63 sectors/track, 38901 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdd1               1       38901   312472251   83  Linux

Disk /dev/sdf: 8589 MB, 8589934592 bytes
64 heads, 32 sectors/track, 8192 cylinders
Units = cylinders of 2048 * 512 = 1048576 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdf1               1        8192     8388592   83  Linux

Disk /dev/sdg: 212.6 GB, 212600881152 bytes
255 heads, 63 sectors/track, 25847 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdg1               1       25847   207615996   83  Linux

Disk /dev/dm-0: 43.9 GB, 43989860352 bytes
255 heads, 63 sectors/track, 5348 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-0 doesn't contain a valid partition table

Disk /dev/dm-1: 4194 MB, 4194304000 bytes
255 heads, 63 sectors/track, 509 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-1 doesn't contain a valid partition table
[root@rac2 ~]#

raysuen

盘符不能乱

yinghuabanwo

肯定会有影响的，我之前在虚拟机上试验过，ASM直接就起不来了

ZALBB

hoplite 发表于 2015-1-4 15:05
影响,

使用UDEV绑定

我的测试环境，就是用UDEV绑定的，刚才测试了一把，没有影响，
虽然两边的盘符不一致，但ASM能正常使用。


这是重启后的情况，RAC1
[root@rac41 ~]# fdisk -l

Disk /dev/sda: 42.9 GB, 42949672960 bytes
255 heads, 63 sectors/track, 5221 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sda1   *           1          13      104391   83  Linux
/dev/sda2              14        5221    41833260   8e  Linux LVM

Disk /dev/sdb: 1073 MB, 1073741824 bytes
255 heads, 63 sectors/track, 130 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdb1               1         130     1044193+  83  Linux

Disk /dev/sdc: 8589 MB, 8589934592 bytes
255 heads, 63 sectors/track, 1044 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdc1               1        1044     8385898+  83  Linux

Disk /dev/sdd: 2147 MB, 2147483648 bytes
255 heads, 63 sectors/track, 261 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdd1               1         261     2096451   83  Linux

Disk /dev/dm-0: 36.5 GB, 36574330880 bytes
255 heads, 63 sectors/track, 4446 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-0 doesn't contain a valid partition table

Disk /dev/dm-1: 6241 MB, 6241124352 bytes
255 heads, 63 sectors/track, 758 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-1 doesn't contain a valid partition table
[root@rac41 ~]#



这是重启后的情况，RAC2
[root@rac42 ~]# fdisk -l

Disk /dev/sda: 42.9 GB, 42949672960 bytes
255 heads, 63 sectors/track, 5221 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sda1   *           1          13      104391   83  Linux
/dev/sda2              14        5221    41833260   8e  Linux LVM

Disk /dev/sdb: 524 MB, 524288000 bytes
64 heads, 32 sectors/track, 500 cylinders
Units = cylinders of 2048 * 512 = 1048576 bytes

Disk /dev/sdb doesn't contain a valid partition table

Disk /dev/sdc: 1073 MB, 1073741824 bytes
255 heads, 63 sectors/track, 130 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdc1               1         130     1044193+  83  Linux

Disk /dev/sdd: 8589 MB, 8589934592 bytes
255 heads, 63 sectors/track, 1044 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sdd1               1        1044     8385898+  83  Linux

Disk /dev/sde: 2147 MB, 2147483648 bytes
255 heads, 63 sectors/track, 261 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

   Device Boot      Start         End      Blocks   Id  System
/dev/sde1               1         261     2096451   83  Linux

Disk /dev/dm-0: 36.5 GB, 36574330880 bytes
255 heads, 63 sectors/track, 4446 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-0 doesn't contain a valid partition table

Disk /dev/dm-1: 6241 MB, 6241124352 bytes
255 heads, 63 sectors/track, 758 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-1 doesn't contain a valid partition table
[root@rac42 ~]#

3  /dev/sdb 已经被使用。

[root@rac42 backup]# pvdisplay
  --- Physical volume ---
  PV Name               /dev/sdb
  VG Name               vgvolbackup
  PV Size               500.00 MB / not usable 4.00 MB
  Allocatable           yes
  PE Size (KByte)       4096
  Total PE              124
  Free PE               74
  Allocated PE          50
  PV UUID               7OfIul-rwhS-CHDK-P8TY-Eeu6-o3L3-KMeKdC
   
  --- Physical volume ---
  PV Name               /dev/sda2
  VG Name               VolGroup00
  PV Size               39.90 GB / not usable 20.79 MB
  Allocatable           yes (but full)
  PE Size (KByte)       32768
  Total PE              1276
  Free PE               0
  Allocated PE          1276
  PV UUID               SouLqF-ECVU-5BpC-fzpc-8E0w-PyHv-gEJoOL
   
[root@rac42 backup]#


4  我查看ASM的共享存储，OK，可以在数据库下执行CREATE USER命令。

huzhichengforce

影响，ASM 起不来。
我碰过一次， 存储工程师，化共享存储的时候两边没有一一对应，找了好久原因。

huzhichengforce

ZALBB 发表于 2015-1-4 15:39
我的测试环境，就是用UDEV绑定的，刚才测试了一把，没有影响，
虽然两边的盘符不一致，但ASM能正常使用。 ...

UDEV 绑定.....   好吧。
日志有什么异样的信息么？

ZALBB

huzhichengforce 发表于 2015-1-4 15:41
影响，ASM 起不来。
我碰过一次， 存储工程师，化共享存储的时候两边没有一一对应，找了好久原因。

你那时是使用什么方式管理共享存储的？ asmlib, or udev , 还是其他？

ZALBB

huzhichengforce 发表于 2015-1-4 15:42
UDEV 绑定.....   好吧。
日志有什么异样的信息么？

水平有限，看不出系统日志有什么异常信息，

solgle

我用的asmlib ，重启每次都有可能不一致的情况，但是asm的磁盘可以扫描到，就不会影响

jyang12

用udev 绑了 就没啥影响了，ASM用的是UDEV建出来的盘