RHCS集群所有功能完美结果抓图(简化版)

zcs0237

一、配OnePath连接
1、安装iscsi-initiator


2、在node1发现、连接、验证iscsi连接


3、在node2发现、连接、验证iscsi连接


4、删除initiator到targets的连接


二、UDEV
1、node1——实现并验证udev


2、node2——建用户,复制node1的udev策略并验证


三、 GFS2 lock_dlm
#fdisk /dev/netdisk





补充：gfs2_tool df /var/www/html

zcs0237

一、添加失效域





二、添加资源
1、添加集群IP


2、添加gfs文件系统





3、添加客户共享名


4、添加共享权限

三、添加服务及绑定

1、添加服务


2、绑定资源及子资源


四、手动启动NFS服务并验证


1、在luci中验证


2、在服务node验证



3、重启主机后进一步验证


4、node1和node2都写fstab重启后df/mount/touch验证(_netdev可省略)

zcs0237

GFS通过分布锁管理器(DLM)实现共享。
一、在[node1,2]上创建nfsuser用户
#useradd –u 9999 nfsuser
#ssh node2
#useradd –u 9999 nfsuser
二、在NFS集群当前节点上设置ACL
1、查看并登陆NFS集群运行的节点
#clustat
#ssh node1
#mount|grep nfsdata
2、调整/mnt/nfsdata目录的权限为 755
#chmod -R 755 /mnt/nfsdata
3、仅nfsuser用户对 /mnt/nfsdata有写的权限
#setfacl  -R -m u:nfsuser:rwx /mnt/nfsdata
4、其他非 root用户仅有只读权限
#chmod o=rx /mnt/nfsdata
5、用getfacl进行验证
#getfacl /mnt/nfsdata
6、在其下建子目录common，要求所有用户对该目录有写的权限
#mkdir -p /mnt/nfsdata/common
#chmod -R 777 /mnt/nfsdata/common
三、漂移到另一节点，进一步确认acl
#clustat
#clusvcadm –r nfs –m node2.cluster1.example.com
#mount|grep nfsdata
#ll –R /mnt/nfsdata
#getfacl /mnt/nfsdata
四、nfsuser的quota:300M时警告，400M时禁止

zcs0237

一、准备工作
1、安装gfs相关软件

2、在集群环境中生成clvm+gfs1+img

二、在station的上操作
避免COW空间不足：拉伸/dev/vol0/node3逻辑卷快照

三、在node3上操作
1、生成2*img=2*300MB的分区并将img导入(分区小了拉伸无效果)

2、转换与拉伸
→yum -y install gfs-utils gfs2-utils kmod-gfs-xen
→gfs_fsck扫描并转换为gfs2
→gfs2_fsck扫描+mount+拉伸
→写入/etc/fstab表(_netdrv,lockproto=lock_nolock)

若目标分区为本地分区不需加_netdev:
/dev/hda4  /mnt  gfs2  lockproto=lock_nolock      0 0
3、TEST05-gfs2_jadd

zcs0237

一、准备工作
1、#yum –y install httpd;chkconfig httpd off;service httpd stop
2、通信配置(node2,node3与node1类似)
#hostname node1.cluster1.example.com
#vim /etc/sysconfig/network
HOSTNAME=node1.cluster1.example.com
#yum –y install ricci;chkconfig ricci on;#service ricci start
二、添加faildomain——node1=1比node2=2优先级高


三、添加Resources
1、浮动IP=172.16.50.X6/24

2、添加Resources——GFS2FS

3、添加Resources——script

四、添加service
用service将faildomain、ip、gfs、script组合起来成一个cluster

五、测试httpd集群

1、在luci中手动启动服务



当前web漂在node2上，手功漂到node1上以确认node1的配置
#clusvcadm -r web -m node1.cluster1.example.com
2、用clustat –i 1进行验证——运行在node2

3、到node2上验证gfs2挂载情况

zcs0237

一、最初状态信息

二、Q-Disk主要配置
1、创建Q-disk专用文件系统



2、用luci为集群调用Q-disk


3、在cluster.conf中开启Q-disk


三、Q-disk主要效果
1、Q-disk机制启动的标志：在cluster中显示Q-disk虚拟node



2、Q-disk机制成功的标志：ping不通仲裁判刑(即重启)

四、最后状态

zcs0237

一、在stationX上配置iscsi存储

二、在[node1,2]上配置iscsi发起者
#vim /etc/iscsi/iscsid.conf
node.session.timeo.replacement_timeout = 10
#service iscsid restart


三、在[node1,2]上配置多路径

#vim /etc/multipath.conf








#multipath –ll

zcs0237

一、集群级LVM锁的开启
1、创建集群前的初始配置


2、创建集群


3、创建集群时自动做改变


二、在node1上创建CLVM

1、创建分区


2、创建逻辑卷
＃pvcreate /dev/mapper/mpath0p1
＃vgcreate /dev/mapper/mpath0p1
＃lvcreate -L 50M -n glslv /dev/mapper/mpath0p1


三、测试CLVM：双节点同时mount锁机制有效？（yes）

1、格式化为ext3
＃mkfs.ext3  /dev/vggfs/lvgfs
2、在node1上
#mount /dev/vg0/aaa /mnt
#echo node1 > /mnt/gfslv.txt
#vim /mnt/gfslv.txt
3、在node2上
#partprobe
#mount /dev/vggfs/lvgfs /mnt
#(cd /mnt;ls)
#vim /mnt/gfs.txt

zcs0237

遗忘的deny

好帖！！！！