<div dir="ltr"><div class="gmail_extra"><div class="gmail_quote">On Thu, Feb 9, 2017 at 5:09 PM, David Reed <span dir="ltr"><<a href="mailto:david.byui@gmail.com" target="_blank">david.byui@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">I've successfully been able to get two VMs setup with GPU/USB pass-through and individually they both work, but I can't run both of them at the same time.  Virt-manager will complain that the other's PCI device (GPU) is already in use even though they don't share the same GPU.  <div><br></div><div>I suspect it is because both GPUs have the same IOMMU group that is being assigned to the vfio driver.  I was hoping there would be some way to make this work as they are both being controlled by vfio.</div></div></blockquote><div><br></div><div>Sorry, this is working as expected for your hardware.  The PCIe root ports do not guarantee upstream routing, allowing the possibility of non-IOMMU translated peer-to-peer between downstream devices.  See here for further info  <a href="http://vfio.blogspot.com/2014/08/iommu-groups-inside-and-out.html">http://vfio.blogspot.com/2014/08/iommu-groups-inside-and-out.html</a>  Hacks to bypass this isolation are not supported upstream.  You can find information about processors supporting isolation on root ports here: <a href="http://vfio.blogspot.com/2015/10/intel-processors-with-acs-support.html">http://vfio.blogspot.com/2015/10/intel-processors-with-acs-support.html</a> (it's a bit dated but you can extrapolate from the trend).  Thanks,</div><div><br></div><div>Alex</div></div></div></div>