Фоновая информация - сервер Supermicro с двумя карточками RTX 8000 - установлен NVIDIA Grid KVM для управления карточками - nvidia-smi сообщает, что все карточки в порядке. - карточки находятся в слотах 00000:01:00.0 и 0000:41:00.0 Когда я загружаю систему и перехожу в ВМ, под аппаратным обеспечением добавляю PCI-устройство - выбираю устройство 0000:01:00.0 - выбираю из списка mdev nvidia-xxx, в моем случае 4xx - сначала в списке будут все nvidia-xxx с доступными единицами, например 402 имеет 32, 403 имеет 24, 404 имеет 32 и т.д. - все функции серые, потому что эти карточки не имеют выводов на дисплей или аудиофункций - оставляю основной GPU незамеченным, не использую карточки для вывода видео - PCI-Express отмечен (оставлял и не отмеченным) - ROM-Bar по умолчанию отмечен. Если я запускаю qm start 108 (108 была ВМ, которую я тестировал), получаю такие ошибки ]root@mtvmserver:~# qm start 108 kvm: -device vfio-pci,sysfsdev=/sys/bus/pci/devices/0000:01:00.0/00000000-0000-0000-0000-000000000108,id=hostpci0,bus=ich9-pcie-port-1,addr=0x0: vfio 00000000-0000-0000-0000-000000000108: ошибка получения устройства из группы 153: Время соединения истекло. Убедитесь, что все устройства в группе 153 привязаны к vfio-<bus> или pci-stub и не находятся в использовании. старт не удался: QEMU вышел с кодом 1. Или я получаю такое, если переключаюсь на другую карточку root@mtvmserver:~# qm start 108 kvm: -device vfio-pci,sysfsdev=/sys/bus/pci/devices/0000:41:00.0/00000000-0000-0000-0000-000000000108,id=hostpci0,bus=pci.0,addr=0x10: vfio /sys/bus/pci/devices/0000:41:00.0/00000000-0000-0000-0000-000000000108: нет такого устройства: Нет такого файла или директории. старт не удался: QEMU вышел с кодом 1. Если я редактирую /etc/pve/qemu-server/108.conf и добавляю args: -uuid 00000000-0000-0000-0000-000000000108, а затем переключаюсь обратно на карточку 01, тогда я получаю root@mtvmserver:~# qm start 108 экземпляр mdev '00000000-0000-0000-0000-000000000108' уже существует, используем его. kvm: -device vfio-pci,sysfsdev=/sys/bus/pci/devices/0000:01:00.0/00000000-0000-0000-0000-000000000108,id=hostpci0,bus=ich9-pcie-port-1,addr=0x0: предупреждение: vfio 00000000-0000-0000-0000-000000000108: Не удалось включить восстановление ошибок для устройства. Почему мне нужно использовать аргумент: -uuid, чтобы принудить создание директорий root@mtvmserver:~# ls -la /sys/bus/pci/devices/0000\:01\:00.0/ всего 0 drwxr-xr-x 10 root root 0 19 мар 11:15 . drwxr-xr-x 9 root root 0 19 мар 11:15 .. drwxr-xr-x 4 root root 0 19 мар 11:24 00000000-0000-0000-0000-000000000102 drwxr-xr-x 4 root root 0 19 мар 11:22 00000000-0000-0000-0000-000000000108. Почему в списке mdev теперь все "0", кроме одного, который я выбрал изначально, в моем случае nvidia-405 с количеством теперь 21. Это, похоже, происходит после того, как я хотя бы раз запустил ВМ, после этого я не могу выбрать другое mdev устройство на той же карточке, и другие ВМ сталкиваются с такой же проблемой. Если затем переключаем другую ВМ на карточку 41, я снова вижу много доступных, но не на карточке 01. Я приложил несколько скриншотов, чтобы показать диалоговое окно, о котором идет речь, PCI-устройства


