<?xml version="1.0" encoding="UTF-8"?>
<rss version="2.0">
	<channel>
		<title>Аспро: ЛайтШоп [тема: Весь кластер ушёл в оффлайн.]</title>
		<link>http://proxmox.su</link>
		<description>Новое в теме Весь кластер ушёл в оффлайн. форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su]</description>
		<language>ru</language>
		<docs>http://backend.userland.com/rss2</docs>
		<pubDate>Wed, 18 Nov 2026 19:00:13 +0300</pubDate>
		<item>
			<title>Весь кластер ушёл в оффлайн.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message322813/77475-ves-klaster-ushyel-v-offlayn.">Весь кластер ушёл в оффлайн.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Проверь, какие сети используются Corosync (коммуникация кластера Proxmox VE) (/etc/pve/corosync.conf). В идеале у тебя должно быть больше одной, и одна из них должна быть выделена исключительно для Corosync (физическая сеть, 1 Гбит вполне достаточно). Если у тебя только одна Corosync-сеть и с ней проблемы, то вполне вероятно, что ты будешь видеть что-то вроде твоих проблем. Или у тебя определено хранилище, которое зависает? Например, сетевая папка, которая перестала отвечать? Это тоже может объяснить, почему все узлы отображаются серыми: служба, обновляющая статус, может застрять, ожидая что-то, что не отвечает. <br />
			<i>24.04.2025 09:16:00, aaron.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message322813/77475-ves-klaster-ushyel-v-offlayn.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message322813/77475-ves-klaster-ushyel-v-offlayn.</guid>
			<pubDate>Thu, 24 Apr 2025 09:16:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Весь кластер ушёл в оффлайн.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message322812/77475-ves-klaster-ushyel-v-offlayn.">Весь кластер ушёл в оффлайн.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Обновил весь кластер до 8.4.1. На этих выходных перезагружу один узел и посмотрю, повторится ли это. Если да, выложу как можно больше информации. <br />
			<i>24.04.2025 06:45:00, Donovan Hoare.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message322812/77475-ves-klaster-ushyel-v-offlayn.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message322812/77475-ves-klaster-ushyel-v-offlayn.</guid>
			<pubDate>Thu, 24 Apr 2025 06:45:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Весь кластер ушёл в оффлайн.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message322811/77475-ves-klaster-ushyel-v-offlayn.">Весь кластер ушёл в оффлайн.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			В целом, поиск неисправностей в стабильности кластера требует сопоставления записей журналов со всех узлов, предшествующих и происходящих во время события. Сеть зачастую является причиной или значительной частью той нестабильности, которую вы описали. Лучший путь, конечно, — открыть тикет в Proxmox GmbH. Если это невозможно, то хотя бы предоставьте: a) сетевую информацию (ip a, ip route и т.д.) b) конфигурацию кластера (pvecm status) c) записи journalctl, начиная непосредственно перед событием, со всех узлов d) версию PVE со всех узлов, или, как минимум, подтверждение того, что версии на всех узлах одинаковы. Это всего лишь топ-4, скорее всего, есть и другие, которые сейчас не приходят в голову. <br /><br />Cheers, Blockbridge: ультра-низкая задержка общего хранилища на базе NVMe для Proxmox — <noindex><a href="https://www.blockbridge.com/proxmox" target="_blank" rel="nofollow" >https://www.blockbridge.com/proxmox</a></noindex> <br />
			<i>22.04.2025 14:40:00, bbgeek17.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message322811/77475-ves-klaster-ushyel-v-offlayn.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message322811/77475-ves-klaster-ushyel-v-offlayn.</guid>
			<pubDate>Tue, 22 Apr 2025 14:40:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Весь кластер ушёл в оффлайн.</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message322810/77475-ves-klaster-ushyel-v-offlayn.">Весь кластер ушёл в оффлайн.</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Приветствую! Как видите по скриншоту ниже. Я использую версию 8.3.5. Это происходило уже дважды. Сегодня утром мне пришлось перезагрузить хост p8. После этого сервер не поднялся в кластере. Сначала в его слоте был красный крестик, а потом все узлы перешли в это состояние. Я не могу управлять машинами. Перезагрузил только один из девяти узлов. В прошлый раз это произошло, когда я перезагрузил узел p3. Единственный способ запустить всё онлайн — перезагрузить все узлы одновременно. Но если я перезагружу один позже, это снова произойдёт. Это началось после обновления одного узла до версии 8.3.5. После этого я обновил все узлы до 8.3.5.<br /><br />ДОБАВЛЕНО: При этом сами ВМ остаются онлайн. Я использую выделенные интерфейсы для VM-сети. Сети Ceph и управления работают на собственных оптоволоконных интерфейсах. Для каждой используется выделенное оптоволокно на 10 Гбит/с. Для каждой я использую Ceph и ZFS на хостах.<br /><br />Подскажите, пожалуйста:<br />а) Почему это происходит?<br />б) Как это исправить без перезагрузки всего кластера?<br /><br /><img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/84905-0b613a7be2c8f42dbb4b72f34c5e0eb6.jpg" alt="Пользователь добавил изображение" border="0" /><br /><br />ДОБАВЛЕНО: Я выполнил команду systemctl status и вот что получил:<br /><br />```<br />● pve-cluster.service - The Proxmox VE cluster filesystem<br /> &nbsp; &nbsp; Loaded: loaded (/lib/systemd/system/pve-cluster.service; enabled; preset: enabled)<br /> &nbsp; &nbsp; Active: active (running) since Tue 2025-04-22 09:28:06 SAST; 2h 15min ago<br /> &nbsp; &nbsp;Process: 1623 ExecStart=/usr/bin/pmxcfs (code=exited, status=0/SUCCESS)<br /> &nbsp; Main PID: 1626 (pmxcfs)<br /> &nbsp; &nbsp; &nbsp;Tasks: 10 (limit: 232010)<br /> &nbsp; &nbsp; Memory: 68.7M<br /> &nbsp; &nbsp; &nbsp; &nbsp;CPU: 8.556s<br /> &nbsp; &nbsp; CGroup: /system.slice/pve-cluster.service<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; └─1626 /usr/bin/pmxcfs<br /><br />Apr 22 11:43:33 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 80<br />Apr 22 11:43:34 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 90<br />Apr 22 11:43:35 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 100<br />Apr 22 11:43:35 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retried 100 times<br />Apr 22 11:43:35 atsho2p8 pmxcfs[1626]: [status] crit: cpg_send_message failed: 6<br />Apr 22 11:43:36 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 10<br />Apr 22 11:43:37 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 20<br />Apr 22 11:43:38 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 30<br />Apr 22 11:43:39 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 40<br />Apr 22 11:43:40 atsho2p8 pmxcfs[1626]: [status] notice: cpg_send_message retry 50<br /><br />● corosync.service - Corosync Cluster Engine<br /> &nbsp; &nbsp; Loaded: loaded (/lib/systemd/system/corosync.service; enabled; preset: enabled)<br /> &nbsp; &nbsp; Active: active (running) since Tue 2025-04-22 09:28:07 SAST; 2h 15min ago<br /> &nbsp; &nbsp; &nbsp; Docs: man:corosync<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; man:corosync.conf<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; man:corosync_overview<br /> &nbsp; Main PID: 1691 (corosync)<br /> &nbsp; &nbsp; &nbsp;Tasks: 9 (limit: 232010)<br /> &nbsp; &nbsp; Memory: 3.9G<br /> &nbsp; &nbsp; &nbsp; &nbsp;CPU: 1h 53min 5.992s<br /> &nbsp; &nbsp; CGroup: /system.slice/corosync.service<br /> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; └─1691 /usr/sbin/corosync -f<br /><br />Apr 22 11:41:57 atsho2p8 corosync[1691]:   [TOTEM ] Retransmit List: e f 11 20 2e 2f 30 31 32 1f 43 49 4a<br />Apr 22 11:42:01 atsho2p8 corosync[1691]:   [TOTEM ] Retransmit List: 32 58 5e 6d 72 73 74 75<br />Apr 22 11:42:06 atsho2p8 corosync[1691]:   [TOTEM ] Token has not been received in 5662 ms<br />Apr 22 11:42:39 atsho2p8 corosync[1691]:   [TOTEM ] Retransmit List: 6 7 8 9 b c d e f 10 11 1a 1b 1c 1d 1e 1f 20 2&gt;<br />Apr 22 11:42:40 atsho2p8 corosync[1691]:   [TOTEM ] Retransmit List: b d e f 11 20 2f 30 31 1f 43 49 4a<br />Apr 22 11:42:45 atsho2p8 corosync[1691]:   [TOTEM ] Token has not been received in 5663 ms<br />Apr 22 11:42:47 atsho2p8 corosync[1691]:   [TOTEM ] Retransmit List: f 11 58 5e 6d 72 73 74 75<br />Apr 22 11:42:52 atsho2p8 corosync[1691]:   [TOTEM ] Retransmit List: 82 83 89<br />Apr 22 11:42:58 atsho2p8 corosync[1691]:   [TOTEM ] Retransmit List: b5 b4<br />Apr 22 11:43:19 atsho2p8 corosync[1691]:   [TOTEM ] Token has not been received in 5662 ms<br />``` <br />
			<i>22.04.2025 11:04:00, Donovan Hoare.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message322810/77475-ves-klaster-ushyel-v-offlayn.</link>
			<guid>http://proxmox.su/forum/messages/forum63/message322810/77475-ves-klaster-ushyel-v-offlayn.</guid>
			<pubDate>Tue, 22 Apr 2025 11:04:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
	</channel>
</rss>
