1. 確定硬體是否支援iommu

這是一個硬體的功能，intel架構上叫vt-d。

從BIOS上可以看出來, 不同版本放的位置不一樣。

我的是在 Security->Virtualization->VT-d

2. 配置kernel，支援iommu

在intel機器上有這麼個選項，

INTEL_IOMMU

  │   Location:                                                                                                                            │  
  │     -> Device Drivers                                                                                                                  │  
  │ (2)   -> IOMMU Hardware Support (IOMMU_SUPPORT [=y]) 

3. 重啟，看看是否enable了。

在intel上，執行

dmesg | grep -e DMAR -e IOMMU

4. 在host上unbind裝置

載入pci_stub模組， modprobe pci_stub

選中某個裝置， lspci -s 03:00.0 -n, 03:00.0 0280: 8086:0085 (rev 34)

bind/unbind

• echo "8086 0085" > /sys/bus/pci/drivers/pci-stub/new_id
• echo 0000:03:00.0 > /sys/bus/pci/devices/0000:01:00.0/driver/unbind
• echo 0000:03:00.0 > /sys/bus/pci/drivers/pci-stub/bind

5. 把裝置給guest

./i386-softmmu/qemu-system-i386 -enable-kvm \

-drive file=../../kvm/ubuntu.qcow2 -boot dc -m 512  \

-monitor stdio \

-netdev user,id=usernet -device rtl8139,netdev=usernet \

-device pci-assign,host=0000:03:00.0

不過偶沒有成功，報錯了。。。

6. 錯誤分析，解決

按照上面的辦法沒成功，我看了一下dmesg，有這麼一句。

kvm_iommu_map_guest: No interrupt remapping support, disallowing device assignment. Re-enble with "allow_unsafe_assigned_interrupts=1" module option.

稍微調查了一下，發現和這個選項有關，config IRQ_REMAP。 可惜我enable不了，因為這個必須在x86_64上做。

沒辦法，那我只好在裝載kvm模組的時候加上這個引數的設定了。

加上這個引數後，果然就好了。贊。

接下來我用了vfio來做passthrough。步驟略有不同。

1. 安裝相關的kernel module

sudo modprobe vfio

sudo modprobe vfio-pci

這樣就產生了 /dev/vfio/vfio 裝置

2. 按照文件要求，新增裝置到一個group

按照現在的要求，需要講某一個iommu_group下的所有裝置都新增到一個vfio group.

cd /sys/bus/pci/devices/0000:0d:00.0/

readlink iommu_group  這樣可以顯示該裝置對應iommu_group的名字

ll iommu_group/devices 這樣可以顯示和該裝置處於一個iommu_group的裝置。

echo 0000:0d:00.0 > /sys/bus/pci/devices/0000:0d:00.0/driver/unbind

echo 1180 e823 > /sys/bus/pci/drivers/vfio-pci/new_id

echo 0000:03:00.0 > /sys/bus/pci/devices/0000:03:00.0/driver/unbind

echo 8086 0085 > /sys/bus/pci/drivers/vfio-pci/new_id

這樣就生成了 /dev/vfio/6  (數字由iommu_group號決定）

3. 啟動 guest

../git/qemu-latest/i386-softmmu/qemu-system-i386 -enable-kvm -drive file=ubuntu.qcow2 -boot dc -m 512  -monitor stdio -netdev user,id=usernet -device vfio-pci,host=0000:03:00.0

如果是在power機器上，則寫成

-device "spapr-pci-vfio-host-bridge,id=CXGB3,iommu=4,index=6"

4. fix

預設這麼啟動會有個錯誤，當然這是在我的機器上。

vfio_iommu_type1_open: No interrupt remapping support.  Use the module param "allow_unsafe_interrupts" to enable VFIO IOMMU support on this platform

意思是我這個機器不支援remap， 那我就把這個引數直接設成了1.  就好了。