ceph很早就已經支援通過iscsi協議來使用rbd，這篇博文對此做下演示，並且使用OSD Server作為iscsi target端。

一、OSD Server side

1、安裝支援rbd的TGT軟體包

#echo "deb http://ceph.com/packages/ceph-extras/debian $(lsb_release -sc) main" | sudo tee /etc/apt/sources.list.d/ceph-extras.list
#apt-get install tgt

2、安裝完成後確認tgt支援rbd

# tgtadm --lld iscsi --op show --mode system | grep rbd
    rbd (bsoflags sync:direct)
 

3、建立一個image（示例中pool名稱叫做iscsipool，image叫做iamge1）

#rbd create iscsipool/image1 --size 10240 --image-format 2

4、在tgt服務中註冊剛才建立好的image，只需要將下面的內容新增到/etc/tgt/targets.conf 或者 etc/tgt/conf.d/ceph.conf中即可。

<target iqn.2014-04.rbdstore.example.com:iscsi>
    driver iscsi
    bs-type rbd
    backing-store iscsipool/image1  # Format is <iscsi-pool>/<iscsi-rbd-image>
    initiator-address 10.10.2.49    #client address allowed to map the address
</target>
 

5、重啟或者過載tgt服務

#service tgt reload
or
#service tgt restart

6、關閉rbd cache，否則可能導致資料丟失或者損壞

vim /etc/ceph/ceph.conf
[client]
rbd_cache = false

二、Client side

1、安裝open-scsi

#apt-get install open-iscsi

2、啟動open-scsi服務

# service open-iscsi restart
 * Unmounting iscsi-backed filesystems                                                                                                    [ OK ] 
 * Disconnecting iSCSI targets                                                                                                            [ OK ] 
 * Stopping iSCSI initiator service                                                                                                       [ OK ] 
 * Starting iSCSI initiator service iscsid                                                                                                [ OK ] 
 * Setting up iSCSI targets                                                                                                                      
iscsiadm: No records found
                                                                                                                                          [ OK ]
 * Mounting network filesystems 
 

3、發現目標裝置

# iscsiadm -m discovery -t st -p 10.10.2.50
10.10.2.50:3260,1 iqn.2014-04.rbdstore.example.com:iscsi

4、掛載目標裝置

#  iscsiadm -m node --login
Logging in to [iface: default, target: iqn.2014-04.rbdstore.example.com:iscsi, portal: 10.10.2.50,3260] (multiple)
Login to [iface: default, target: iqn.2014-04.rbdstore.example.com:iscsi, portal: 10.10.2.50,3260] successful.

5、確認裝置已經掛載（示例中sda就是iscsdi裝置）

[email protected]:~# lsblk 
NAME                  MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
sda                     8:0    0    10G  0 disk 
vda                   253:0    0    24G  0 disk 
?..vda1                253:1    0   190M  0 part /boot
?..vda2                253:2    0     1K  0 part 
?..vda5                253:5    0  23.8G  0 part 
  ?..linux-swap (dm-0) 252:0    0   3.8G  0 lvm  [SWAP]
  ?..linux-root (dm-1) 252:1    0    20G  0 lvm  /