virtiofsd используется для "передачи" частей файловой системы хоста в виртуальную машину с "локальной файловой системой и производительностью". Proxmox перешёл на версию virtiofsd на основе Rust в PVE 8, расположенную здесь. Он установлен как отдельный пакет под названием "virtiofsd" в PVE 8, тогда как другая, не основанная на Rust версия virtiofsd, была "включена" в PVE 7.x. Обратите внимание, что существует несколько интерфейсов и бэкендов, которые можно использовать. То, что описано ниже, работает для меня. Обязательно хорошо протестируйте, прежде чем что-либо переводить в "продакшн". Как было отмечено недавно (спасибо @fabian), будущая версия PVE 8.x будет иметь поддержку WebUI для virtiofsd (см. патч здесь). Я полностью ожидаю, что эти инструкции будут иметь "ограниченный срок службы", но до тех пор, ниже — что я сделал, чтобы реализовать новый virtiofsd в PVE 8.0.x в четырех областях: <VMID>.conf изменения virtiofsd на хосте добавление скрипта для запуска virtiofsd монтирование внутри Linux VM
1. Добавьте строку "args:" в файл VMID.conf виртуальной машины, расположенный в /etc/pve/qemu-server. Пожалуйста, обратите внимание, что документация здесь указывает, что это только для экспертов. Bash: args: -chardev socket,id=virtfs0,path=/run/changme.sock -device vhost-user-fs-pci,queue-size=1024,chardev=virtfs0,tag=changeme_tag -object memory-backend-file,id=mem,size=32768M,mem-path=/dev/shm,share=on -numa node,memdev=mem Замените " changeme.sock ", " changeme_tag " и " size " выше на соответствующие значения, где: changeme.sock = полное имя файла сокета, используемого для IPC между VM и хостом changeme_tag = имя, используемое внутри VM для команды монтирования или в /etc/fstab size = размер оперативной памяти, используемой VM (протестировано только с размером, равным оперативной памяти VM) НОТА: после добавления строки "args:" виртуальная машина не запустится, если файл сокета не существует. virtiofsd создает файл сокета (см. следующий шаг). Убедитесь, что args: является частью конфигурации с помощью команды: qm config VMID И чтобы "увидеть" способ, которым KVM/Qemu запускает VM: qm showcmd VMID --pretty Последние 3-4 строки должны содержать компоненты строки args:.
2. Запустите virtiofsd на хосте. Чтобы протестировать, virtiofsd можно запустить вручную, но его нужно запустить перед VM, чтобы он мог создать файл сокета *.sock, на который ссылается "args:". Чтобы запустить вручную, используйте: /usr/libexec/virtiofsd --syslog --socket-path /run/changeme.sock --shared-dir /dir/to/share/with/vm --announce-submounts --inode-file-handles=mandatory Замените: changeme.sock на имя, используемое в args: в шаге (1) /dir/to/share/with/vm на основную папку хоста, экспонируемую для VM. Вместо "--syslog" используйте "--log-level debug" для устранения неполадок. Для дополнительных/других вариантов см. файл README документации virtiofsd здесь. Чтобы запустить его вручную как демон, добавьте префикс nohup и фон амперсанд (&): nohup command_above & Особая НОТА, эта версия virtiofsd должна быть "двойной разветвленной" для запуска как демон. Это означает, что после запуска будет два процесса virtiofsd, "родительский" и "дочерний". Если вы изучите PID, PID "прародительского" должен быть 1. "Прародительский" должен быть PID 1. Подробнее об этом в следующем разделе. После запуска запустите VM как обычно и посмотрите, как смонтировать общую папку в Linux в шаге (4).
3. Запустите virtiofsd в скрипте запуска. Это автоматически запустит virtiofsd перед VM. Если необходимо, см. Скрипты запуска в документации PVE здесь. Из четырех фаз скрипта запуска virtiofsd должен быть запущен в фазе pre-start. Если ваши скрипты запуска написаны на perl, я не могу прокомментировать, как запустить virtiofsd, поскольку все мои скрипты запуска написаны на bash. (Пожалуйста, не стесняйтесь добавить эквивалент на perl в комментариях). Если ваши скрипты запуска написаны на Bash, запуск virtiofsd может быть проблематичным, поскольку он должен быть двойной разветвленной. Для полного охвата того, что это означает, см. здесь. Попытав много команд, включая: Bash here документы, выполнение этого здесь дока, eval(), setsig(1), nohup и другие, способ, который я нашел, который работал, это создание одноразового сервисного юнита systemd с помощью systemd-run(1). В фазе "pre-start" вашего bash-скрипта запуска запустите virtiofsd с помощью: Bash: systemd-run --unit=changeme_service /usr/libexec/virtiofsd --syslog --socket-path /run/changeme.sock --shared-dir /dir/to/share/with/vm --announce-submounts --inode-file-handles=mandatory Замените: changeme_service на имя сервиса systemd по вашему выбору changeme.sock на имя, используемое в args: в шаге (1) /dir/to/share/with/vm для основной папки хоста, экспонируемой для VM. После этого сервис systemd можно будет изучить с помощью: systemctl status changeme_service # или имя, которое вы изменили его на
4. Монтируйте внутри Linux VM. Чтобы смонтировать его вручную, создайте (или определите) каталог для использования в качестве точки монтирования: mkdir /mnt/mountpoint Затем выполните следующую команду монтирования, используя changeme_tag, определенный в шаге 1: mount -t virtiofs changeme_tag /mnt/mountpoint Протестируйте с помощью: ls -l /mnt/mountpoint Если что-то не так, команда будет казаться "зависшей". После успешной работы и рабочего скрипта запуска добавьте монтирование в /etc/fstab навсегда, как это: Code: changeme_tag /mnt/mountpoint virtiofs defaults См. fstab(5) для других опций, если это необходимо. Последнее, virtiofsd автоматически завершит работу после остановки VM, которая его использует. Нет необходимости останавливать его из скрипта запуска. Это по дизайну.
1. Добавьте строку "args:" в файл VMID.conf виртуальной машины, расположенный в /etc/pve/qemu-server. Пожалуйста, обратите внимание, что документация здесь указывает, что это только для экспертов. Bash: args: -chardev socket,id=virtfs0,path=/run/changme.sock -device vhost-user-fs-pci,queue-size=1024,chardev=virtfs0,tag=changeme_tag -object memory-backend-file,id=mem,size=32768M,mem-path=/dev/shm,share=on -numa node,memdev=mem Замените " changeme.sock ", " changeme_tag " и " size " выше на соответствующие значения, где: changeme.sock = полное имя файла сокета, используемого для IPC между VM и хостом changeme_tag = имя, используемое внутри VM для команды монтирования или в /etc/fstab size = размер оперативной памяти, используемой VM (протестировано только с размером, равным оперативной памяти VM) НОТА: после добавления строки "args:" виртуальная машина не запустится, если файл сокета не существует. virtiofsd создает файл сокета (см. следующий шаг). Убедитесь, что args: является частью конфигурации с помощью команды: qm config VMID И чтобы "увидеть" способ, которым KVM/Qemu запускает VM: qm showcmd VMID --pretty Последние 3-4 строки должны содержать компоненты строки args:.
2. Запустите virtiofsd на хосте. Чтобы протестировать, virtiofsd можно запустить вручную, но его нужно запустить перед VM, чтобы он мог создать файл сокета *.sock, на который ссылается "args:". Чтобы запустить вручную, используйте: /usr/libexec/virtiofsd --syslog --socket-path /run/changeme.sock --shared-dir /dir/to/share/with/vm --announce-submounts --inode-file-handles=mandatory Замените: changeme.sock на имя, используемое в args: в шаге (1) /dir/to/share/with/vm на основную папку хоста, экспонируемую для VM. Вместо "--syslog" используйте "--log-level debug" для устранения неполадок. Для дополнительных/других вариантов см. файл README документации virtiofsd здесь. Чтобы запустить его вручную как демон, добавьте префикс nohup и фон амперсанд (&): nohup command_above & Особая НОТА, эта версия virtiofsd должна быть "двойной разветвленной" для запуска как демон. Это означает, что после запуска будет два процесса virtiofsd, "родительский" и "дочерний". Если вы изучите PID, PID "прародительского" должен быть 1. "Прародительский" должен быть PID 1. Подробнее об этом в следующем разделе. После запуска запустите VM как обычно и посмотрите, как смонтировать общую папку в Linux в шаге (4).
3. Запустите virtiofsd в скрипте запуска. Это автоматически запустит virtiofsd перед VM. Если необходимо, см. Скрипты запуска в документации PVE здесь. Из четырех фаз скрипта запуска virtiofsd должен быть запущен в фазе pre-start. Если ваши скрипты запуска написаны на perl, я не могу прокомментировать, как запустить virtiofsd, поскольку все мои скрипты запуска написаны на bash. (Пожалуйста, не стесняйтесь добавить эквивалент на perl в комментариях). Если ваши скрипты запуска написаны на Bash, запуск virtiofsd может быть проблематичным, поскольку он должен быть двойной разветвленной. Для полного охвата того, что это означает, см. здесь. Попытав много команд, включая: Bash here документы, выполнение этого здесь дока, eval(), setsig(1), nohup и другие, способ, который я нашел, который работал, это создание одноразового сервисного юнита systemd с помощью systemd-run(1). В фазе "pre-start" вашего bash-скрипта запуска запустите virtiofsd с помощью: Bash: systemd-run --unit=changeme_service /usr/libexec/virtiofsd --syslog --socket-path /run/changeme.sock --shared-dir /dir/to/share/with/vm --announce-submounts --inode-file-handles=mandatory Замените: changeme_service на имя сервиса systemd по вашему выбору changeme.sock на имя, используемое в args: в шаге (1) /dir/to/share/with/vm для основной папки хоста, экспонируемой для VM. После этого сервис systemd можно будет изучить с помощью: systemctl status changeme_service # или имя, которое вы изменили его на
4. Монтируйте внутри Linux VM. Чтобы смонтировать его вручную, создайте (или определите) каталог для использования в качестве точки монтирования: mkdir /mnt/mountpoint Затем выполните следующую команду монтирования, используя changeme_tag, определенный в шаге 1: mount -t virtiofs changeme_tag /mnt/mountpoint Протестируйте с помощью: ls -l /mnt/mountpoint Если что-то не так, команда будет казаться "зависшей". После успешной работы и рабочего скрипта запуска добавьте монтирование в /etc/fstab навсегда, как это: Code: changeme_tag /mnt/mountpoint virtiofs defaults См. fstab(5) для других опций, если это необходимо. Последнее, virtiofsd автоматически завершит работу после остановки VM, которая его использует. Нет необходимости останавливать его из скрипта запуска. Это по дизайну.

Теперь любые ВМ, работающие на vmbr0 и имеющие IPv6-адрес в моей локальной сети, могут общаться с моими 3 мониторами в моей приватной Ceph-сети. Трафик никогда не попадет на медленные сети – он либо останется в ядре/loopback (это моя теория) и пойдет к ноде, на которой запущена ВМ, со скоростью памяти, либо, в худшем случае, будет маршрутизироваться через приватную публичную сеть Ceph к одной из других нод. (Моя публичная и приватная сети объединены, так как это трехнодовая домашняя лаборатория с использованием Thunderbolt-net mesh). Роутер был быстрым и простым способом протестировать, конечно, я мог бы настроить эти маршруты вручную внутри каждой ВМ, если бы заботился об изоляции. Адреса fc00:: - это сеть Ceph mesh, которая не имеет соединения ни с чем, кроме каждой ноды. Адреса 2600:: – это IPv6-адреса нод vmbr0 и они полностью маршрутизируемы в моей локальной сети.
Когда я пытаюсь создать точку монтирования на VM, она не создается: Bash: root@lnxsrv01:~# mount -t virtiofs mnt_pve_cephfs_docker /mnt/docker