<div dir="ltr">Still no luck... Tried it with kernel 4.1.6-201.fc22 and 4.1.13-100.fc21, but both gave the same result as 4.2.6.<div><br></div><div>Any other ideas?</div></div><div class="gmail_extra"><br><div class="gmail_quote">2015-12-15 23:26 GMT+01:00 A de Beus <span dir="ltr"><<a href="mailto:anthony.debeus@gmail.com" target="_blank">anthony.debeus@gmail.com</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="auto"><div></div><div>I believe kernel 4.2.6 is broken. Use the linux-lts kernel which I think is still 4.1.6.</div><div><div class="h5"><div><br>On Dec 15, 2015, at 3:18 PM, Roel Van Gorp <<a href="mailto:roelvangorp@gmail.com" target="_blank">roelvangorp@gmail.com</a>> wrote:<br><br></div><blockquote type="cite"><div><div dir="ltr">Hi guys,<div><br></div><div>After successfully setting up a W10 VM while passing through my GTX 980ti on my old Arch linux install, I now have some difficulties setting it up on a new Fedora installation using the exact same hardware configuration.</div><div><br></div><div>I'm using a fresh Fedora 23 installation, kernel 4.2.6-301, the virt-preview repo for the latest virtualization packages and the firmware repo at <a href="https://www.kraxel.org/repos/firmware.repo" target="_blank">https://www.kraxel.org/repos/firmware.repo</a> for the latest OVFM firmware.</div><div><br></div><div>I mostly based myself on Alex Williamson's blog to set this up, resulting in the following changes in the following files:</div><div><br></div><div><div><b>/etc/sysconfig/grub:</b></div></div><div><br></div><div><div><div>  GRUB_CMDLINE_LINUX="<a href="http://rd.lvm.lv" target="_blank">rd.lvm.lv</a>=fedora/root <a href="http://rd.lvm.lv" target="_blank">rd.lvm.lv</a>=fedora/swap rhgb quiet intel_iommu=on rd.driver.pre=vfio-pci"</div></div></div><div><br></div><div><div><b>/etc/modprobe.d/local.conf </b></div></div><div><br></div><div><div>   options vfio-pci ids=10de:17c8,10de:0fb0</div><div>   options vfio-pci disable_vga=1</div></div><div><br></div><div><div><b>/etc/dracut.conf.d/local.conf</b></div></div><div><div><br></div><div>   add_drivers+="vfio vfio_iommu_type1 vfio_pci vfio_virqfd"</div></div><div><br></div><div><br></div><div>This seems to have successfully enabled the vfio-pci driver, as shown by the output of lspci -nnk:</div><div><br></div><div><div><div>01:00.0 VGA compatible controller [0300]: NVIDIA Corporation GM200 [GeForce GTX 980 Ti] [10de:17c8] (rev a1)</div><div><span style="white-space:pre-wrap"> </span>Subsystem: Micro-Star International Co., Ltd. [MSI] Device [1462:3232]</div><div><span style="white-space:pre-wrap">   </span>Kernel driver in use: vfio-pci</div><div><span style="white-space:pre-wrap">   </span>Kernel modules: nouveau</div><div>01:00.1 Audio device [0403]: NVIDIA Corporation Device [10de:0fb0] (rev a1)</div><div><span style="white-space:pre-wrap">        </span>Subsystem: Micro-Star International Co., Ltd. [MSI] Device [1462:3232]</div><div><span style="white-space:pre-wrap">   </span>Kernel driver in use: vfio-pci</div><div><span style="white-space:pre-wrap">   </span>Kernel modules: snd_hda_intel</div></div></div><div><br></div><div><b>The VM:</b></div><div><br></div><div>Now I first set up the VM without PCI passthrough using virt-manager and everything worked as expected using a virtual display, allowing me to fully install Windows 10 Pro. The problems started when removing the virtual display and adding the PCI devices for the GTX 980 ti. There is no video output, and looking at the CPU monitor in virt-manager there is a short CPU spike after which it seems hangs at around 1-2%. Reattaching the virtual display again shows the bios splash screen normally as expected, after which it goes to black with just the small white prompt dash. Removing the PCI devices from the configuration again allow the VM to boot normally again. Here is the xml config for the VM:</div><div><br></div><div><div><div><domain type='kvm'></div><div>  <name>win10</name></div><div>  <uuid>527f731e-0d9e-460a-a1ef-7a010e191c34</uuid></div><div>  <memory unit='KiB'>2560000</memory></div><div>  <currentMemory unit='KiB'>2560000</currentMemory></div><div>  <vcpu placement='static'>2</vcpu></div><div>  <os></div><div>    <type arch='x86_64' machine='pc-i440fx-2.4'>hvm</type></div><div>    <loader readonly='yes' type='pflash'>/usr/share/edk2.git/ovmf-x64/OVMF_CODE-pure-efi.fd</loader></div><div>    <nvram>/var/lib/libvirt/qemu/nvram/win10_VARS.fd</nvram></div><div>    <boot dev='hd'/></div><div>  </os></div><div>  <features></div><div>    <acpi/></div><div>    <apic/></div><div>    <pae/></div><div>    <hyperv></div><div>      <relaxed state='on'/></div><div>      <vapic state='on'/></div><div>      <spinlocks state='on' retries='8191'/></div><div>    </hyperv></div><div>    <vmport state='off'/></div><div>  </features></div><div>  <cpu mode='host-passthrough'></div><div>    <topology sockets='1' cores='2' threads='1'/></div><div>  </cpu></div><div>  <clock offset='localtime'></div><div>    <timer name='rtc' tickpolicy='catchup'/></div><div>    <timer name='pit' tickpolicy='delay'/></div><div>    <timer name='hpet' present='no'/></div><div>    <timer name='hypervclock' present='yes'/></div><div>  </clock></div><div>  <on_poweroff>destroy</on_poweroff></div><div>  <on_reboot>restart</on_reboot></div><div>  <on_crash>restart</on_crash></div><div>  <pm></div><div>    <suspend-to-mem enabled='no'/></div><div>    <suspend-to-disk enabled='no'/></div><div>  </pm></div></div></div><div><div>  <devices></div><div>    <emulator>/usr/bin/qemu-kvm</emulator></div><div>    <disk type='file' device='disk'></div><div>      <driver name='qemu' type='qcow2'/></div><div>      <source file='/var/lib/libvirt/images/win10.qcow2'/></div><div>      <target dev='vda' bus='virtio'/></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x07' function='0x0'/></div><div>    </disk></div><div>    <controller type='usb' index='0' model='ich9-ehci1'></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x06' function='0x7'/></div><div>    </controller></div><div>    <controller type='usb' index='0' model='ich9-uhci1'></div><div>      <master startport='0'/></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x06' function='0x0' multifunction='on'/></div><div>    </controller></div><div>    <controller type='usb' index='0' model='ich9-uhci2'></div><div>      <master startport='2'/></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x06' function='0x1'/></div><div>    </controller></div></div><div><div>    <controller type='usb' index='0' model='ich9-uhci3'></div><div>      <master startport='4'/></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x06' function='0x2'/></div><div>    </controller></div><div>    <controller type='pci' index='0' model='pci-root'/></div><div>    <interface type='network'></div><div>      <mac address='52:54:00:21:17:b8'/></div><div>      <source network='default'/></div><div>      <model type='rtl8139'/></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x03' function='0x0'/></div><div>    </interface></div><div>    <hostdev mode='subsystem' type='pci' managed='yes'></div><div>      <source></div><div>        <address domain='0x0000' bus='0x01' slot='0x00' function='0x0'/></div><div>      </source></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x02' function='0x0'/></div><div>    </hostdev></div><div>    <hostdev mode='subsystem' type='pci' managed='yes'></div><div>      <source></div><div>        <address domain='0x0000' bus='0x01' slot='0x00' function='0x1'/></div><div>      </source></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x04' function='0x0'/></div><div>    </hostdev></div></div><div><div>    <memballoon model='virtio'></div><div>      <address type='pci' domain='0x0000' bus='0x00' slot='0x08' function='0x0'/></div><div>    </memballoon></div><div>  </devices></div><div></domain></div></div><div><br></div><div><br></div><div>Any help would be greatly appreciated!</div></div>
</div></blockquote></div></div><blockquote type="cite"><div><span>_______________________________________________</span><br><span>vfio-users mailing list</span><br><span><a href="mailto:vfio-users@redhat.com" target="_blank">vfio-users@redhat.com</a></span><br><span><a href="https://www.redhat.com/mailman/listinfo/vfio-users" target="_blank">https://www.redhat.com/mailman/listinfo/vfio-users</a></span><br></div></blockquote></div></blockquote></div><br></div>