企业官网建设流程全解析

终极设备直通实战指南：openEuler中VFIO与SR-IOV配置详解

【免费下载链接】Virt-docsDocumentation Repository Dedicated to Virtualization Features项目地址: https://gitcode.com/openeuler/Virt-docs

前往项目官网免费下载：https://ar.openeuler.org/ar/

在openEuler虚拟化平台中，设备直通技术是提升虚拟机性能的关键技术之一。通过VFIO（Virtual Function I/O）和SR-IOV（Single Root I/O Virtualization）技术，可以让虚拟机直接访问物理硬件设备，实现接近物理机的I/O性能。本文将为您详细介绍在openEuler系统中配置设备直通的完整步骤和最佳实践。

🔍 什么是设备直通技术？

设备直通技术允许虚拟机绕过虚拟化层的模拟，直接访问物理硬件设备。这种技术特别适用于对I/O性能要求极高的场景，如网络数据包处理、存储访问和GPU计算等。

在openEuler虚拟化平台中，设备直通主要通过两种技术实现：

• VFIO：用户态设备驱动框架，提供安全的设备访问机制
• SR-IOV：单根I/O虚拟化技术，可将一个物理设备虚拟为多个虚拟功能

🛠️ 准备工作与环境检查

在开始配置之前，需要确保您的系统满足以下基本要求：

1. 检查IOMMU支持

IOMMU（Input/Output Memory Management Unit）是设备直通的基础，它允许PCI/PCIe资源直接分配给虚拟机。

运行以下命令检查IOMMU是否已启用：

dmesg | grep iommu

如果看到类似以下输出，说明IOMMU已启用：

iommu: Default domain type: Translated hibmc-drm 0000:0a:00.0: Adding to iommu group 0

2. 启用IOMMU

如果IOMMU未启用，需要在启动参数中添加相关配置：

1. 编辑grub配置文件：

vim /boot/grub2/grub.cfg

2. 在Linux内核启动行添加参数：

intel_iommu=on iommu=pt

3. 重启主机系统使配置生效

3. 加载VFIO-PCI内核模块

modprobe vfio-pci lsmod | grep vfio_pci

📋 VFIO设备直通配置步骤

步骤1：识别并绑定PCI设备

首先需要识别要直通的PCI设备：

lspci -v | grep "Eth" | grep 1822

假设我们找到的设备地址为0000:03:00.0，接下来需要将其从主机驱动解绑：

echo 0000:03:00.0 > /sys/bus/pci/devices/0000:03:00.0/driver/unbind

然后将设备绑定到VFIO-PCI驱动：

lspci -ns 0000:03:00.0 | awk -F':| ' '{print $5" "$6}' > /sys/bus/pci/drivers/vfio-pci/new_id

步骤2：配置StratoVirt虚拟机XML文件

在StratoVirt中，通过修改XML文件来配置VFIO直通设备。根据您的CPU架构下载对应的模板文件：

• AArch64架构：stratovirt_aarch64.xml
• x86_64架构：stratovirt_x86.xml

在XML文件中添加VFIO设备配置：

<!-- vfio设备配置 --> <hostdev mode='subsystem' type='pci' managed='yes'> <driver name='vfio'/> <source> <address domain='0x0000' bus='0x03' slot='0x00' function='0x0'/> </source> </hostdev>

步骤3：创建并启动虚拟机

使用libvirt命令创建虚拟机：

virsh create stratovirt_$arch.xml virsh list --all virsh console 1

步骤4：在虚拟机中验证设备

登录到虚拟机后，检查网络设备：

ip a

如果看到类似以下输出，说明设备直通成功：

2: enp1s0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000 link/ether 72:b8:51:9d:d1:27 brd ff:ff:ff:ff:ff:ff inet 192.168.1.3/16 brd 192.168.255.255 scope global dynamic enp1s0

🔄 SR-IOV配置指南

什么是SR-IOV？

SR-IOV技术允许一个物理设备（PF，Physical Function）虚拟出多个虚拟功能（VF，Virtual Function），每个VF都可以独立地直通给不同的虚拟机使用。

SR-IOV配置步骤

步骤1：创建虚拟功能

假设我们要从PCI设备0000:03:00.0创建4个VF：

echo 4 > /sys/bus/pci/devices/0000\:03\:00.0/sriov_numvfs

步骤2：验证VF创建

lspci -v | grep "Eth" | grep 1822

成功创建后应该看到类似输出：

03:00.0 Ethernet controller: Huawei Technologies Co., Ltd. Hi1822 Family (4*25GE) (rev 45) 03:00.1 Ethernet controller: Huawei Technologies Co., Ltd. Hi1822 Family Virtual Function (rev 45) 03:00.2 Ethernet controller: Huawei Technologies Co., Ltd. Hi1822 Family Virtual Function (rev 45) 03:00.3 Ethernet controller: Huawei Technologies Co., Ltd. Hi1822 Family Virtual Function (rev 45) 03:00.4 Ethernet controller: Huawei Technologies Co., Ltd. Hi1822 Family Virtual Function (rev 45)

步骤3：配置VF直通

每个VF都可以像普通PCI设备一样直通给虚拟机。在XML文件中配置时，使用对应的VF地址即可：

<hostdev mode='subsystem' type='pci' managed='yes'> <driver name='vfio'/> <source> <address domain='0x0000' bus='0x03' slot='0x00' function='0x1'/> </source> </hostdev>

🎯 性能优化与最佳实践

1. NUMA亲和性配置

对于性能敏感的应用，建议将直通设备与虚拟机放在相同的NUMA节点：

<numatune> <memory mode='strict' nodeset='0'/> </numatune>

2. 中断亲和性优化

将设备中断绑定到特定CPU核心，减少中断处理的开销：

echo 2 > /proc/irq/<irq_number>/smp_affinity

3. 大页内存配置

使用大页内存可以减少TLB缺失，提升内存访问性能：

echo 1024 > /sys/kernel/mm/hugepages/hugepages-2048kB/nr_hugepages

4. PCIe控制器配置

在虚拟机XML中正确配置PCIe控制器，确保设备热插拔支持：

<controller type='pci' index='0' model='pcie-root'/> <controller type='pci' index='1' model='pcie-root-port'/> <controller type='pci' index='2' model='pcie-to-pci-bridge'/>

🚨 常见问题与解决方案

问题1：IOMMU未启用

症状：设备直通失败，dmesg中无IOMMU相关信息解决：确保BIOS中启用了VT-d/AMD-Vi，并在内核启动参数中添加intel_iommu=on iommu=pt

问题2：设备绑定失败

症状：无法将设备绑定到VFIO驱动解决：检查设备是否被其他驱动占用，使用lspci -k查看当前驱动

问题3：虚拟机启动失败

症状：虚拟机启动时提示权限错误解决：确保当前用户有访问/dev/vfio/*设备的权限，或添加到相关用户组

问题4：网络性能不佳

症状：直通设备性能未达预期解决：检查中断亲和性设置，确保使用大页内存，验证NUMA亲和性

📊 性能对比测试

为了验证设备直通的性能优势，我们进行了以下对比测试：

🔧 设备解绑与恢复

当需要将设备从虚拟机中移除并重新分配给主机时：

# 从VFIO驱动解绑 echo 0000:03:00.0 > /sys/bus/pci/drivers/vfio-pci/unbind # 重新绑定到主机驱动（以hinic为例） echo 0000:03:00.0 > /sys/bus/pci/drivers/hinic/bind

注意：在绑定VFIO驱动前，可以通过ethtool -i enp0命令查看网卡的原驱动类型。

🎉 总结

通过本文的详细指南，您应该已经掌握了在openEuler系统中配置VFIO和SR-IOV设备直通的完整流程。设备直通技术能够显著提升虚拟机的I/O性能，特别适用于网络、存储和计算密集型应用场景。

记住以下关键点：

1. ✅ 确保IOMMU已启用
2. ✅ 正确绑定设备到VFIO驱动
3. ✅ 合理配置虚拟机XML文件
4. ✅ 根据需求选择VFIO或SR-IOV方案
5. ✅ 应用性能优化配置

openEuler的虚拟化平台提供了完善的设备直通支持，结合StratoVirt和libvirt工具链，您可以轻松构建高性能的虚拟化环境。更多详细信息请参考官方文档和设备管理指南。

现在，您可以开始在自己的openEuler环境中实践设备直通配置，享受接近物理机的虚拟机性能体验！🚀

【免费下载链接】Virt-docsDocumentation Repository Dedicated to Virtualization Features项目地址: https://gitcode.com/openeuler/Virt-docs