Просто хочу описать свой опыт использования Docker в контейнере LXC под Proxmox. Может быть, у кого-нибудь есть идеи по улучшению, или мое описание окажется полезным. Цели: 1. Использовать легкость Docker для установки и поддержки приложений. 2. Централизованно отслеживать и управлять всеми запущенными приложениями. 3. Отделить данные от кода приложения, тем самым упростив резервное копирование данных. 4. Обеспечить базовое отказоустойчивое поведение в случае обслуживания некоторых узлов. Системы: Большинство сервисов работают в домашней сети, состоящей из одного HP Microserver Gen 8 и резервного узла. Кроме того, некоторые сервисы работают на небольших узлах на базе ARM (RPi, NanoPis или RockPis). Microserver и резервный узел работают под управлением Proxmox 6.3 на ZFS. В основном там работают классические LXC контейнеры (около 10), но их планируется перевести на Docker контейнеры, которые я буду держать в LXC контейнерах в качестве нескольких отдельных узлов. Небольшие узлы на базе ARM работают как Docker host на легковесных ОС без дополнительного слоя LXC. Реализация на Proxmox: Все LXC машины работают на урезанном Debian buster. Docker-ce установлен через get-docker.sh. Все Docker хосты работают от имени root, но используют userns-remap для своих контейнеров. Proxmox загружает дополнительные модули ядра: aufs, ip_vs. Непривилегированный LXC контейнер: неудачно. Непривилегированный LXC с nesting=1, keyctl=1: Неудача. Есть две основные проблемы, которые мне не удалось решить: a.) доступен только хранилище VFS (overlay невозможен на ZFS, aufs невозможен в не-init пространстве имен). После загрузки любого Docker образа контроллер хранилища жалуется на проблему с разрешением при хранении слоев образа. Почему, я не знаю. Я полностью удалил содержимое /var/lib/docker. Не помогает. b.) Мне не удалось заполнить папку /proc/sys/net/ipv4/vs/ в контейнере LXC. Она всегда пуста. Я пытался сохранить все возможности, использовать не-confined AA, смонтировать /proc как rw, добавить /.dockerenv и все, что я находил в сети. Без этой папки невозможно сетевое взаимодействие. Привилегированный LXC контейнер: работает, но требует proc:rw. Привилегированный LXC контейнер с nesting=1. Работает отлично, за исключением проблемы с настройкой iptables правил для сетевого взаимодействия. Рабочий обходной путь: добавление "lxc.mount.auto: proc:rw" в файл конфигурации lxc. Я пока не нашел другого способа. Что ж, пока я рад, что это работает. Если у кого-нибудь есть более рабочая конфигурация, я был бы заинтересован. Michael
Еще один опыт с Docker на Proxmox., Proxmox Виртуальная Среда
|
23.02.2021 19:04:00
|
|
|
|
|
|
26.01.2024 19:58:00
Ты пробовал с нуля? Я дважды настраивал так же, и проблем не было!
|
|
|
|
|
Читают тему


Живая миграция для этих LXC особо не нужна, но если понадобится, то они мигрируют нормально, правда, с небольшим временем простоя в несколько секунд.