在KVM中配置SR-IOV

SR-IOV概念

single root input/output virtualization,SR-IOV可以将一个独立的物理PCI资源划分成多个虚拟的PCI资源,并可以加载到虚拟机内使用。由于有了网络VF,令流量绕过宿主机的网络栈,SR-IOV增强了南北向(从虚拟机末端流出宿主机的流量)的网络性能。

支持的网卡型号

Intel X710(32VF)、XL710(64VF)、X540(32VF)等

接入方法

  • 作为SR-IOV VF PCI的直通设备接入
  • 使用macvtap作为SR-IOV网络适配器
  • 使用KVM的虚拟网络适配器池,作为SR-IOV网络适配器接入
  • 如果使用XL710网卡,需要在虚拟机内安装Data Plane Development Kit (DPDK) ,否则无法达到最高性能。

一、直通设备接入

  1. 查看VF PCI的总线信息,也可以使用该脚本查看https://github.com/intel/SDN-NFV-Hands-on-Samples/blob/master/SR-IOV_Network_Virtual_Functions_in_KVM/listvfs_by_pf.sh

    # lshw -c network -businfo
    
  2. 添加一个<hostdev>的tag到虚拟机。

    通过上面的脚本将查看到的domain、bus、slot及function信息写入tag内。

    # virsh edit <name of virtual machine>
    # virsh dump <name of virtual machine>
    <domain>
    …
    <devices>
    …
    <hostdev mode='subsystem' type='pci' managed='yes'>
          <source>
            <address domain='0x0000' bus='0x03' slot='0x10' function='0x0'/>
          </source>
    </hostdev>
    …
    </devices>
    …
    </domain>
    
  3. 启动虚拟机。

二、使用macvtap作为SR-IOV网络适配器

这种方式不需要知道VF 的PCI总线信息,只需要知道系统创建的VF的接口名称。

  1. 执行脚本,确定VF的接口名称。

  2. 关机,增加interface的tag到虚拟机。

    # virsh edit <name of virtual machine>
    # virsh dump <name of virtual machine>
    <domain>
    …
    <devices>
    …
       <interface type='direct'>
          <source dev='enp3s16f1' mode='passthrough'/>
       </interface>
    …
    </devices>
    …
    </domain>
    
  3. 当虚拟机开机后,KVM会在指定的VF接口创建一个macvtap的适配器,在宿主上能看到一个macvtap适配器,它的mac地址和vm内的设备是不同的。实际上,一个macvtap设备会被分配了两个mac地址,这种复杂的配置可能会导致网络性能变差。

三、使用KVM的虚拟网络适配器池

用这种方式配置既不需要知道VF的PCI信息也不需要知道VF的接口名称,只需要知道物理网卡的名称即可完成配置。KVM将会创建一个VF网络设备的资源池,资源池内的设备可以自动地分配给虚拟机使用,资源池内的设备数量取决于物理网络创建的VF数量。

  1. 创建虚拟网络适配器池。

    查看已经创建了VF的网卡设备,找到出现vf字段的设备。

    ip l
    

    创建一个XML。

    # cat > sr-iov-net-XL710.xml << EOF
    > <network>
    >  <name>sr-iov-net-40G-XL710</name>
    >  <forward mode='hostdev' managed='yes'>
    >   <pf dev='ens802f0'/>
    >  </forward>
    > </network>
    > EOF
    

    Virsh define这个网络池。

    # virsh net-define sr-iov-net-XL710.xml
    
  2. 展示全部的虚拟网络。

    # virsh net-list --all
     Name                 State      Autostart     Persistent
    ----------------------------------------------------------
     default              active     yes           yes
     sr-iov-net-40G-XL710 inactive   no            yes
    
  3. 启动及配置自启动。

    # virsh net-start sr-iov-net-40G-XL710
    # virsh net-autostart sr-iov-net-40G-XL710
    
  4. 使用virsh-edit增加一个网络适配器的tag,从网络池接入一个设备到虚拟机。

    # virsh edit <name of virtual machine>
    # virsh dump <name of virtual machine>
    <domain>
    …
    <devices>
    …
    <interface type='network'>
      <source network='sr-iov-net-40G-XL710'/>
    </interface>
    …
    </devices>
    …
    </domain>
    
  5. 启动虚拟机。

    # virsh start <name of virtual machine>
    

参考:https://software.intel.com/en-us/articles/configure-sr-iov-network-virtual-functions-in-linux-kvm

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,547评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,399评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,428评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,599评论 1 274
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,612评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,577评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,941评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,603评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,852评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,605评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,693评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,375评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,955评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,936评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,172评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,970评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,414评论 2 342

推荐阅读更多精彩内容