Po další době strávené u řešení tohoto problému jsem zjistil, že za to může nepovolené IOMMU v setupu. Díky vše za návrhy.