GFS檔案系統

實驗目的：

掌握GFS的理論和配置

實驗理論：

在叢集中為什麼不用ext4類似的檔案系統？

ext4檔案系統在叢集中不能實時同步資料，一個檔案系統只有一個日誌區，日誌區記錄著資料的變化

storage裡的一個iscsi分割槽被格式化成ext4，iscsi分割槽通過iscsi技術又分別被對映到A機和B機，被對映過去的iscsi分割槽又分別被掛載到A機和B機，ext4檔案系統裡只有一個日誌區，當A主機對iscsi分割槽寫資料（建立/passwd）的時候，ext4檔案系統裡的日誌區被載入到A主機了，B主機沒有這個日誌區，就看不到/passwd資訊了，B主機解除安裝iscsi分割槽，有重新掛載iscsi分割槽，日誌區載入到了B主機，B主機就看到了資料的變化，B主機對iscsi分割槽寫資料（建立/123）時，A主機是看不到/123的，因為A主機沒有日誌區

在叢集中為什麼要用gfs檔案系統？

如果有3個節點，使用gfs檔案系統，gfs檔案系統要被分3個日誌區，3個日誌區分別被3個節點載入，3個節點分別寫資料的時候3個日誌區會自動的同步彼此的日誌，另一個節點就會實時看到其它節點修改的資料了，一個標準的日誌區大概是128M，一個gfs分割槽內會有多個分割槽，犧牲了資料空間。

Gfs（Global File  system）叫全域性檔案系統，也是一個網路日誌檔案系統，也叫叢集檔案系統，通常被用作多臺計算機共享同一儲存裝置。

叢集檔案系統採用分散式鎖管理，可以實現多個作業系統載入同一個檔案系統的日誌區同時對一個檔案系統在同一時間內讀寫資料（在多臺機器能同時看到變化的資料）

gfs有兩種機制：

dlm鎖機制：gfs不是可以讓多個節點同時寫入資料，dlm機制就防止其它節點同時寫入資料

nolock不鎖機制：可以同時看，同時寫

本地LVM：本地節點裡lvm.conf裡的locking_type預設就為1，1代表不鎖，3代表鎖

叢集LVM：只要節點加入到叢集裡lvm.conf裡的locking_type的值就會從1自動變成3

叢集LVM在node1建立一個LVM分割槽，node2也會有這個LVM分割槽，這就是叢集LVM

實驗步驟：

Node1：

[[email protected] ~]# fdisk -cu  /dev/mapper/clusterstorage

Command (m for help): p

Disk /dev/mapper/clusterstorage: 2147 MB,2147483648 bytes

                     Device Boot      Start         End      Blocks  Id  System

/dev/mapper/clusterstoragep1              63      224909     112423+  83 Linux

/dev/mapper/clusterstoragep2          224910      449819      112455  83  Linux

Command (m for help): n

Command action

  e   extended

  p   primary partition (1-4)

p

Partition number (1-4): 3

First sector (449820-4194303, default 449820):

Using default value 449820

Last sector, +sectors or +size{K,M,G}(449820-4194303, default 4194303): +800M

Command (m for help): w

The partition table has been altered!

[[email protected] ~]# partprobe /dev/mapper/clusterstoragep3 建立一個分割槽，把分割槽寫進核心

Node2：

[[email protected] ~]# partprobe /dev/mapper/clusterstorage 把分割槽寫進核心

[[email protected] ~]# fdisk  -l

Disk /dev/mapper/clusterstorage: 2147 MB, 2147483648bytes

                     Device Boot      Start         End      Blocks  Id  System

/dev/mapper/clusterstoragep1               1          14      112423+ 83  Linux

/dev/mapper/clusterstoragep2              15          28      112455  83  Linux

/dev/mapper/clusterstoragep3              29         130      819200  83  Linux

Node1：

mkfs. tables一下看你的系統是否有mkfs.gfs2這條命令，如果沒有，那你需要安裝gfs軟體包了yum  -y  install  gfs*

[email protected] ~]# mkfs.

mkfs.cramfs   mkfs.ext3    mkfs.ext4dev  mkfs.msdos   

mkfs.ext2     mkfs.ext4     mkfs.gfs2     mkfs.vfat

[[email protected] ~]# mkfs.gfs2   -j 4  -p  lock_dlm -t  cluster0:gfs1   /dev/mapper/clusterstoragep3  -j表示劃分幾個日誌區  3個節點劃分4個日誌區，5個節點就劃分6個日誌區，劃分日誌區最好要比總節點多一個 –p 填寫鎖還是不鎖機制  -t 填寫叢集名：隨便取的裝置名

This will destroy any data on/dev/mapper/clusterstoragep3.

It appears to contain: data

Are you sure you want to proceed? [y/n] y

Device:                   /dev/mapper/clusterstoragep3

Blocksize:                 4096

Device Size                0.78 GB (204800 blocks)

Filesystem Size:           0.78 GB (204797 blocks)

Journals:                  4

Resource Groups:           4

Locking Protocol:          "lock_dlm"

Lock Table:                "cluster0:gfs1"

UUID:                     f73338c6-2f8b-9c5a-95a3-158c3c856b7d

[[email protected] ~]# /etc/init.d/clvmd restart  兩個節點都要重啟clvmd服務

Restarting clvmd:                                          [ OK  ]

[[email protected] ~]# chkconfig  clvmd on

[[email protected] ~]# mkdir  /clv

[[email protected] ~]# mount /dev/mapper/clusterstoragep3  /clv

[[email protected] ~]# cd /clv

[[email protected] clv]# ls

[[email protected] clv]# touch  123

[[email protected] clv]# ls

123

Node2：

[[email protected] ~]# /etc/init.d/clvmd  restart

Restarting clvmd:                                         [  OK  ]

[[email protected] ~]# chkconfig  clvmd on

[[email protected] ~]# mkdir  /clv

[[email protected] ~]# mount /dev/mapper/clusterstoragep3  /clv

[[email protected] ~]# cd  /clv

[[email protected] clv]# ls

[[email protected] clv]# ls

123

格式化成gfs檔案系統，node1和node2都能同時看到變化的資料