<?xml version="1.0" encoding="UTF-8"?>
<rss version="2.0">
	<channel>
		<title>Аспро: ЛайтШоп [тема: Еще один опыт с Docker на Proxmox.]</title>
		<link>http://proxmox.su</link>
		<description>Новое в теме Еще один опыт с Docker на Proxmox. форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su]</description>
		<language>ru</language>
		<docs>http://backend.userland.com/rss2</docs>
		<pubDate>Sun, 22 Nov 2026 06:19:19 +0300</pubDate>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368987/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Окей, так вот, в итоге, после кучи работы, у меня получилось запустить следующее: docker-swarm внутри Alpine 3.18 внутри контейнеров PRIV LXC на Proxmox 8.1.x, с CEPH в качестве файловой системы. Это позволяет мне монтировать папку /CEPH на каждом docker-хосте, а затем использовать bind-mounts в файлах YAML для обеспечения постоянного хранилища. &nbsp;Конфигурация LXC: mp0: /mnt/pve/cephfs/STORAGE/docker,mp=/ceph,shared=1 docker-compose.yaml: volumes:<br /> &nbsp; &nbsp; &nbsp;- type: bind<br /> &nbsp; &nbsp; &nbsp; &nbsp;source: /ceph/data/adsb/tar1090/heatmap<br /> &nbsp; &nbsp; &nbsp; &nbsp;target: /var/globe_history<br /> &nbsp; &nbsp; &nbsp;- type: bind<br /> &nbsp; &nbsp; &nbsp; &nbsp;source: /ceph/data/adsb/tar1090/timelapse<br /> &nbsp; &nbsp; &nbsp; &nbsp;target: /var/timelapse1090 Это уменьшило количество интерфейсов, необходимых на docker-хосте, не нужны отдельные интерфейсы для хранения, без NFS/CEPH/SMB-монтирований, просто bind-монтирование с хоста. (У меня уже всё работало отлично с KVM, но возможность перенести и слой файловой системы, и сетевой слой на Proxmox, И ещё избавиться от накладных расходов на полноценную KVM-виртуальную машину была той целью, за которой я гнался. Судя по документам, на которые я ссылался, ни одно из них не было полным решением.) <br />
			<i>27.01.2024 01:23:00, dlasher.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368987/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368987/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Sat, 27 Jan 2024 01:23:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368986/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			И вот меня укусила VFS, и у меня стало 16Г в /var/lib/docker/vfs/* <noindex><a href="https://c-goes.github.io/posts/proxmox-lxc-docker-fuse-overlayfs/*" target="_blank" rel="nofollow" >https://c-goes.github.io/posts/proxmox-lxc-docker-fuse-overlayfs/*</a></noindex> <noindex><a href="https://github.com/containers/fuse-overlayfs/releases" target="_blank" rel="nofollow" >https://github.com/containers/fuse-overlayfs/releases</a></noindex> Код: НА PROXMOX ХОСТЕ<br />pmx1:~# apt -y install fuse-overlayfs и затем добавь возможность "FUSE" в контейнер Код: В LXC КОНФИГЕ НА PROXMOX ХОСТЕ<br />features: fuse=1,nesting=1 Код: В DOCKER КОНТЕЙНЕРЕ<br />wget <noindex><a href="https://github.com/containers/fuse-overlayfs/releases/download/v1.13/fuse-overlayfs-x86_64" target="_blank" rel="nofollow" >https://github.com/containers/fuse-overlayfs/releases/download/v1.13/fuse-overlayfs-x86_64</a></noindex> && chmod +x fuse-overlayfs-x86_64 && cp fuse-overlayfs-x86_64 /usr/local/bin/fuse-overlayfs && reboot Проверь, чтобы убедиться, что переключился на новый драйвер Код: В DOCKER КОНТЕЙНЕРЕ<br />docker-lxc-1:~# docker info | grep -i storage<br />Storage Driver: fuse-overlayfs Теперь надо бы прочистить папки /var/lib/docker/vfs, но все контейнеры работают, сетевое взаимодействие функционирует, и пока что до следующей проблемы... <br />
			<i>26.01.2024 22:14:00, dlasher.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368986/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368986/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Fri, 26 Jan 2024 22:14:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368985/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Я нашел более изящный способ настроить перенаправление, он абсолютно необходим для работы — использую это как "/etc/local.d/fix.ingress.start". Код: #!/bin/bash<br />for lp in {1..60};do<br /> &nbsp; &nbsp; &nbsp; &nbsp;if exists=$(test -f /run/docker/netns/ingress_sbox)<br /> &nbsp; &nbsp; &nbsp; &nbsp;then<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;nsenter --net=/run/docker/netns/ingress_sbox sysctl -w net.ipv4.ip_forward=1<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;exit<br /> &nbsp; &nbsp; &nbsp; &nbsp;else<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;echo "waiting $lp/60 - ingress_sbox does not exist"<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;sleep 1<br /> &nbsp; &nbsp; &nbsp; &nbsp;fi<br />done<br /><br />EDIT: не понял, что скрипты local.d зависают при загрузке — пришлось добавить "выход" после 60 секунд — нужен BASH, а не ASH. <br />
			<i>26.01.2024 20:39:00, dlasher.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368985/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368985/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Fri, 26 Jan 2024 20:39:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368984/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Да, много раз. Ваш гайд был самым близким к успеху, спасибо. (Оглядываясь назад, я упустил, что нужно использовать привилегированные контейнеры). Кроме того, я настроил alpine, ubuntu, debian и т.д. с нуля, пробовал те же шаги – никакого результата. ОДНАКО, я повторил упражнение, но сделал контейнер привилегированным, и...<br /><br />Код:<br />arch: amd64<br />cores: 4<br />cpulimit: 8<br />hostname: docker-test-5<br />memory: 4096<br />nameserver: 10.4.10.11 10.4.10.12 10.4.10.13 10.4.10.14 10.4.10.15 10.4.10.16 10.4.10.17 10.4.10.18<br />net0: name=eth10,bridge=vmbr11,gw=10.4.10.1,hwaddr=BC:24:11:D1:60:48,ip=10.4.10.85/24,mtu=1500,tag=10,type=veth<br />ostype: alpine<br />rootfs: RP32:vm-9105-disk-0,mountoptions=lazytime;noatime;nosuid,size=10G<br />searchdomain: docker<br />swap: 128 ((К слову, использую CEPH в качестве файловой системы)) – Бинго! Ingress может подключаться. Значит, что-то не включается/не разрешается в режиме UNPRIV, и никакие "features" это не исправляют. Теперь, когда контейнер PRIV, подключение происходит, и мы слушаем!!<br /><br />Код:<br />docker-test-5:~# /etc/local.d/fix.docker.start<br />net.ipv4.ip_forward = 1<br />net.ipv4.ip_forward = 1<br />net.ipv4.ip_forward = 1<br />net.ipv4.ip_forward = 1<br />docker-test-5:~# nmap -sT -p081,8082,8088,7946,8000,5005,8754,9000,9443 localhost<br />Starting Nmap 7.93 ( <noindex><a href="https://nmap.org" target="_blank" rel="nofollow" >https://nmap.org</a></noindex> ) at 2024-01-26 19:06 UTC<br />Nmap scan report for localhost (127.0.0.1)<br />Host is up (0.0012s latency).<br />Other addresses for localhost (not scanned): ::1<br /><br />PORT &nbsp; &nbsp; STATE &nbsp;SERVICE<br />81/tcp &nbsp; closed hosts2-ns<br />5005/tcp open &nbsp; avt-profile-2<br />7946/tcp open &nbsp; unknown<br />8000/tcp open &nbsp; http-alt<br />8082/tcp open &nbsp; blackice-alerts<br />8088/tcp open &nbsp; radan-http<br />8754/tcp open &nbsp; unknown<br />9000/tcp open &nbsp; cslistener<br />9443/tcp open &nbsp; tungsten-https<br /><br />Кстати, я забыл упомянуть:<br />Код: pve-manager/8.1.3/b46aac3b42da5d15 (запущенный kernel: 6.2.16-20-pve) <br />
			<i>26.01.2024 20:10:00, dlasher.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368984/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368984/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Fri, 26 Jan 2024 20:10:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368983/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Ты пробовал <noindex><a href="https://gist.github.com/Drallas/e03eb5a4f68bb526f920a423455bc0c9" target="_blank" rel="nofollow" >https://gist.github.com/Drallas/e03eb5a4f68bb526f920a423455bc0c9</a></noindex> с нуля? Я дважды настраивал так же, и проблем не было! <br />
			<i>26.01.2024 19:58:00, Drallas.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368983/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368983/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Fri, 26 Jan 2024 19:58:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368982/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Привет, я перепробовал всё, что мог найти в постах, но не могу добиться, чтобы сетевые оверлеи/ingress работали. Ссылки: * <noindex><a href="https://gist.github.com/Drallas/e03eb5a4f68bb526f920a423455bc0c9" target="_blank" rel="nofollow" >https://gist.github.com/Drallas/e03eb5a4f68bb526f920a423455bc0c9</a></noindex> * <noindex><a href="https://forum.proxmox.com/threads/container-linux-in-a-kvm.43136/#post-207264" target="_blank" rel="nofollow" >https://forum.proxmox.com/threads/container-linux-in-a-kvm.43136/#post-207264</a></noindex> * <noindex><a href="https://stackoverflow.com/questions/74987323/docker-swarm-get-access-from-outside-network" target="_blank" rel="nofollow" >https://stackoverflow.com/questions/74987323/docker-swarm-get-access-from-outside-network</a></noindex> * <noindex><a href="https://github.com/moby/moby/issues/38723" target="_blank" rel="nofollow" >https://github.com/moby/moby/issues/38723</a></noindex> Симптом: всё вроде бы запускается, но dockerD почему-то не связывается с сетевым интерфейсом для ingress-соединений.<br /><br />Код:<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::8084 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::8081 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::8082 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::8088 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::7946 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::8000 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::5005 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::8754 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::9000 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br />tcp &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp;0 :::9443 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; :::* &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LISTEN &nbsp; &nbsp; &nbsp;560/dockerd<br /><br />Похоже, всё выглядит правильно – большинство портов относятся к различным overlay-сетям для ingress-трафика. Проверка.<br /><br />Однако<br /><br />Код:<br />docker-lxc-5:~# nmap -sT -p81,8082,8088,7946,8000,5005,8754,9000,9443 localhost<br />Starting Nmap 7.93 ( <noindex><a href="https://nmap.org" target="_blank" rel="nofollow" >https://nmap.org</a></noindex> ) at 2024-01-26 18:37 UTC<br />Nmap scan report for localhost (127.0.0.1)<br />Host is up (0.00042s latency).<br />Other addresses for localhost (not scanned): ::1<br /><br />PORT &nbsp; &nbsp; STATE &nbsp;SERVICE<br />81/tcp &nbsp; closed hosts2-ns<br />5005/tcp closed avt-profile-2<br />7946/tcp open &nbsp; unknown<br />8000/tcp closed http-alt<br />8082/tcp closed blackice-alerts<br />8088/tcp closed radan-http<br />8754/tcp closed unknown<br />9000/tcp closed cslistener<br />9443/tcp closed tungsten-https<br /><br />Смотрю, порт для SWARM-коммуникации работает, но остальные порты активно отклоняются на всех интерфейсах, loopback, основном Ethernet и т.д. Как-то ingress не привязывается. Заметил, что есть несколько записей в netns, поэтому даже пробовал устанавливать их ВСЕ<br /><br />Код:<br />find /run/docker/netns/ -type f | xargs -i%x nsenter --net="%x" sysctl -w net.ipv4.ip_forward=1<br /><br />Но всё равно не получается. Похоже, это та проблема, на которую я натыкаюсь: <noindex><a href="https://github.com/portainer/portainer/issues/7736" target="_blank" rel="nofollow" >https://github.com/portainer/portainer/issues/7736</a></noindex><br /><br />Помогите? <br />
			<i>26.01.2024 19:45:00, dlasher.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368982/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368982/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Fri, 26 Jan 2024 19:45:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368981/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Я немного подправил настройку в посте; теперь предпочитаю systemd вместо rc.local, теперь на моих системах, кажется, всё работает стабильно. Требуется задержка для активации сервиса run-docker-netns-ingress_sbox.mount после активации docker.service. Без значения (net.ipv4.ip_forward=1) установить нельзя. Это обходной путь, который, похоже, работает с 2017 года, так что можно смело применять мои изменения! У меня 4 ноды Swarm, каждая на отдельной ноде: <img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/55270-6ea7567f773d1ac36bdaaf0ad281b310.jpg" alt="Пользователь добавил изображение" border="0" /> Живая миграция для этих LXC особо не нужна, но если понадобится, то они мигрируют нормально, правда, с небольшим временем простоя в несколько секунд. <br />
			<i>19.09.2023 09:51:00, Drallas.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368981/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368981/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Tue, 19 Sep 2023 09:51:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368980/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Ничто не должно быть настолько естественно и просто, как вкладывание контейнеров в контейнеры на произвольную глубину, потому что компьютерные науки любят деревья так же, как бухгалтеры любят бюджеты. Эрик Брюэр, не только человек, доказавший теорему CAP, но и главный двигатель продвижения контейнерного программного обеспечения Google в виде Kubernetes, чтобы похоронить все «более слабые» решения для контейнеров, сам это прямо сказал и признал. И я с ним полностью согласен: что (по крайней мере, один слой) абстракции IaaS контейнер должен лучше управлять локальными ресурсами, а затем (потенциально несколько слоев) абстракции PaaS контейнер должен заботиться о масштабировании, распределённом пространстве имён и накладной сети, чтобы это реализовать. К сожалению, подходящие и общепринятые абстракции ещё не появились, и все текущие подходы работают хорошо только в исключительных случаях и на одном уровне. Так что да, к сожалению, проще запустить Docker на VM и создать иллюзию bare metal внизу, чем сделать то, что должно быть естественным. Потому что Docker и другие среды выполнения контейнеров считают, как и ядро внизу [каждый], что они – боги и могут вмешиваться в сеть любым способом, чтобы создать иллюзию того, что их приложения хотят. И многое из этого связано с тем, что создатели Unix слишком поздно поняли, что сети гораздо важнее файлов, но к тому времени никто не услышал их призыв "Plan 9"! <br />
			<i>19.09.2023 04:08:00, abufrejoval.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368980/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368980/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Tue, 19 Sep 2023 04:08:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368979/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Спасибо за подробное описание. Добавление в rc.local и включение сервиса может быть проще и быстрее… хотя бы до следующего обновления PVE, которое потенциально может всё сломать. Это уже бывало и, скорее всего, повторится. К тому же, вы не сможете перемещать эту ВМ с "горячей" миграцией на другой узел в вашем кластере. Это тоже большое преимущество QEMU/KVM. <br />
			<i>18.09.2023 23:58:00, LnxBil.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368979/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368979/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Mon, 18 Sep 2023 23:58:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368978/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			После нескольких дней борьбы и так как мне очень нужно было, чтобы это работало, я всё-таки смог заставить Docker стабильно работать в привилегированных Debian 12 LXC контейнерах на Proxmox 8. Это стало своего рода "живой документацией", и я решил выложить это в GitHub Gist, чтобы эта страница оставалась чистой. Буду рад любому фидбеку о том, как это можно улучшить! Скриншоты <img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/55237-491c2c30bb85f303265d0b8c9a99c1b9.jpg" alt="Пользователь добавил изображение" border="0" /> <img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/55238-7acfceabdf1f957007d5820d07731c3d.jpg" alt="Пользователь добавил изображение" border="0" /> <img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/55236-fedc70af61d9646e0e019717a93b5051.jpg" alt="Пользователь добавил изображение" border="0" /> <br />
			<i>18.09.2023 11:27:00, Drallas.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368978/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368978/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Mon, 18 Sep 2023 11:27:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368977/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Я бы с удовольствием запустил VM, но реализовал Proxmox/Ceph – Full Mesh HCI Cluster с динамической маршрутизацией и сетью кластера ipv6 только с обратным циклом. Не могу найти способ подключиться к моему хранилищу CephFS, кроме как через bind mounts в LXC. <br />
			<i>14.09.2023 13:59:00, Drallas.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368977/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368977/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Thu, 14 Sep 2023 13:59:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368976/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Вот в чём проблема с Docker на контейнерах LX&#169;. Он время от времени будет ломаться. Не тратьте свою жизнь и просто используйте настоящую виртуальную машину. Это нельзя говорить слишком часто, но большинство людей всё равно этого не слушают и делают, как делают. <br />
			<i>14.09.2023 13:53:00, LnxBil.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368976/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368976/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Thu, 14 Sep 2023 13:53:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368975/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Это у меня не работает на Proxmox 8! Попробовал с непривилегированным Ubuntu 20.04 и Debian 12 LXC. Применил следующие настройки:<br /><br />Код:<br />1. nano /etc/sysctl.conf<br /># добавить строку:<br />net.ipv4.ip_forward=1<br /><br />2. nano /etc/pve/lxc/XXX.conf<br /># добавить в конце строки:<br />lxc.apparmor.raw: mount,<br /><br />3. nano /etc/modules-load.d/modules.conf<br /># добавить строку:<br />overlay<br /><br />4. перезагрузить хосты Proxmox! Развернул LXC через Proxmox VE Helper Scripts, установив Docker с помощью get-docker.sh. После этого инициализировал 2-узловую Docker Swarm и установил portainer-agent-stack.yml для тестирования соединения, но ответа нет по адресу <noindex><a href="http://192.168.1.xxx:9000" target="_blank" rel="nofollow" >http://192.168.1.xxx:9000</a></noindex>.<br /><br />Код:<br />curl <noindex><a href="http://192.168.1.168:9000" target="_blank" rel="nofollow" >http://192.168.1.168:9000</a></noindex><br />curl: (7) Не удалось подключиться к 192.168.1.168 порт 9000 после 107 мс: Не удалось подключиться к серверу<br /><br />P.S. Действовал по инструкции, как написано. <br />
			<i>14.09.2023 11:43:00, Drallas.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368975/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368975/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Thu, 14 Sep 2023 11:43:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368974/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Если кто-то случайно наткнулся на эту тему в поисках решения для LXC + docker swarm + Traefik: Поскольку записи Ingress не заполняются в iptables хостового LXC-контейнера, вот один из возможных обходных путей. Создайте одну VM - сделайте ее docker swarm manager. - Установите Traefik на этой VM - правила сетевого Ingress будут правильно добавлены в iptables, и Traefik будет доступен извне Proxmox. Остальные ноды могут быть lxc-контейнерами, и подключите их к swarm, созданному на шаге 1. Теперь любые сервисы, работающие на других нодах, включая хост LXC, будут доступны через Traefik. С этим решением все работает, включая service discovery между всеми хостами, входящими в swarm, включая хосты lxc-контейнеров. Это также потребует очень мало ресурсов, особенно RAM, поскольку мы используем одну VM, а остальные lxc-контейнеры. С помощью этого метода все ваши сервисы будут доступны только через VM, созданную на шаге 1. Как истинный swam ingress, где любой сервис может быть достигнут с любого из представленных IP-адресов хоста, невозможен, особенно для хостов LXC. <br />
			<i>11.11.2021 12:33:00, farooq23.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368974/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368974/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Thu, 11 Nov 2021 12:33:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Еще один опыт с Docker на Proxmox.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message368973/82662-eshche-odin-opyt-s-docker-na-proxmox.">Еще один опыт с Docker на Proxmox.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Просто хочу описать свой опыт использования Docker в контейнере LXC под Proxmox. Может быть, у кого-нибудь есть идеи по улучшению, или мое описание окажется полезным. Цели: 1. Использовать легкость Docker для установки и поддержки приложений. 2. Централизованно отслеживать и управлять всеми запущенными приложениями. 3. Отделить данные от кода приложения, тем самым упростив резервное копирование данных. 4. Обеспечить базовое отказоустойчивое поведение в случае обслуживания некоторых узлов. Системы: Большинство сервисов работают в домашней сети, состоящей из одного HP Microserver Gen 8 и резервного узла. Кроме того, некоторые сервисы работают на небольших узлах на базе ARM (RPi, NanoPis или RockPis). Microserver и резервный узел работают под управлением Proxmox 6.3 на ZFS. В основном там работают классические LXC контейнеры (около 10), но их планируется перевести на Docker контейнеры, которые я буду держать в LXC контейнерах в качестве нескольких отдельных узлов. Небольшие узлы на базе ARM работают как Docker host на легковесных ОС без дополнительного слоя LXC. Реализация на Proxmox: Все LXC машины работают на урезанном Debian buster. Docker-ce установлен через get-docker.sh. Все Docker хосты работают от имени root, но используют userns-remap для своих контейнеров. Proxmox загружает дополнительные модули ядра: aufs, ip_vs. Непривилегированный LXC контейнер: неудачно. Непривилегированный LXC с nesting=1, keyctl=1: Неудача. Есть две основные проблемы, которые мне не удалось решить: a.) доступен только хранилище VFS (overlay невозможен на ZFS, aufs невозможен в не-init пространстве имен). После загрузки любого Docker образа контроллер хранилища жалуется на проблему с разрешением при хранении слоев образа. Почему, я не знаю. Я полностью удалил содержимое /var/lib/docker. Не помогает. b.) Мне не удалось заполнить папку /proc/sys/net/ipv4/vs/ в контейнере LXC. Она всегда пуста. Я пытался сохранить все возможности, использовать не-confined AA, смонтировать /proc как rw, добавить /.dockerenv и все, что я находил в сети. Без этой папки невозможно сетевое взаимодействие. Привилегированный LXC контейнер: работает, но требует proc:rw. Привилегированный LXC контейнер с nesting=1. Работает отлично, за исключением проблемы с настройкой iptables правил для сетевого взаимодействия. Рабочий обходной путь: добавление "lxc.mount.auto: proc:rw" в файл конфигурации lxc. Я пока не нашел другого способа. Что ж, пока я рад, что это работает. Если у кого-нибудь есть более рабочая конфигурация, я был бы заинтересован. Michael <br />
			<i>23.02.2021 19:04:00, Neuer_User.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message368973/82662-eshche-odin-opyt-s-docker-na-proxmox.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message368973/82662-eshche-odin-opyt-s-docker-na-proxmox.</guid>
			<pubDate>Tue, 23 Feb 2021 19:04:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
	</channel>
</rss>
