Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Виртуальная Среда
    кластерный кворум

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    кластерный кворум, Proxmox Виртуальная Среда
     
    stuartbh
    Guest
    #1
    0
    18.05.2022 15:28:00
    Недавно я создал двухузловой кластер, а потом пришлось отключить второй узел. Заметил, что весь PVE перестал работать, пока второй узел снова не подключился. Есть ли способ сообщить PVE, что если функционирует только один узел в двухузловом кластере, то это все равно считается кворумом (без добавления третьего узла на данный момент)? Я думал о том, чтобы временно удалить второй узел, но потом вспомнил, что читал, что это может потребовать переустановки всего второго узла перед повторным подключением к кластеру. Это так? Я запустил обновление на втором узле, и это как-то его сломало, сейчас разбираюсь с этим (использовал стандартные команды apt для обновления узла PVE). Возможно, мне все равно придется его переустановить, если это так, то, наверное, следует сначала удалить узел из кластера и подключить его обратно после установки. Заранее спасибо всем, кто поделится опытом, и берегите себя и будьте здоровы в это непростое время. Stuart
     
     
     
    Mynx
    Guest
    #2
    0
    02.08.2024 17:46:00
    Просто хотел сказать, что лучший и самый безопасный способ решения проблемы отсутствия кворума – дать узлу, который всегда работает, 2 голоса. Можно это сделать, отредактировав nano /etc/pve/corosync.conf, а затем найти свой узел и рядом с "votes" ввести 2 (голоса), и перезапустить corosync командой systemctl restart corosync. После этого с помощью pvecm status ты увидишь, что кворум все еще присутствует, потому что есть 2 голоса от одного узла.
     
     
     
    esi_y
    Guest
    #3
    0
    02.08.2024 17:50:00
    Я тоже так раньше делал, но потом это всё портит, если, например, захочешь использовать Q-устройство. В итоге получаешь тот же результат, что и с auto_tie_breaker, который и был создан для этого. А ещё скрипты обновления PVE выдают забавные предупреждения, если у тебя не один голос с каждого узла кластера...
     
     
     
    AODix
    Guest
    #4
    0
    07.10.2024 01:10:00
    Что-то, что я собирался попробовать, но не было времени... У меня три PVE сервера, но потребление энергии слишком велико, а нет необходимости их кластеризовать, хотя я действительно люблю кластеризацию больше, чем отдельные узлы. Я думаю о создании трехузлового кластера, при котором третий (резервный) сервер будет автоматически отключаться после получения кворума в 2+ голоса, а если один из основных серверов видит 1 голос, скажем, более 30 секунд, то он отправит пакет WoL для включения резервного сервера. Затем, если основной сервер, который вышел из строя, снова подключится, резервный заметит это и (возможно, с помощью cron job?) отключится сам, чтобы поддерживать максимальный кворум в 2 голоса. Все преимущества трехузлового кластера с 2/3 потребления энергии. Если сетевое взаимодействие между ними выходит из строя, они всё равно отключают ВМ, так что разницы там нет. Я могу позволить себе пару минут простоя, так что для меня это нормально. Кроме того, какие недостатки или причины, по которым это может не работать, вы можете придумать? Мне кажется, это лучше, чем запуск трех узлов ИЛИ голосового прокси, для моего конкретного случая работы, где мне нужна круглосуточная работа, но я могу мириться с двумя 9-ками или несколькими минутами простоя время от времени. О, и если электричество отключается, все три включаются, затем резервный отключается, когда видит достаточно голосов. Ваши мысли?? Что-то, чего я не учитываю??
     
     
     
    esi_y
    Guest
    #5
    0
    07.10.2024 05:45:00
    Ну, это не ВСЕ преимущества, как с настоящими 3 узлами. Нет двух "основных", которые должны быть хотя бы в одном активны. (На самом деле, можно настроить даже единственный уцелевший узел, работающий с кворумом, при определенных настройках corosync.) Когда сеть недоступна и кворум потерян, с работающими ВМ ничего особенно не происходит, они продолжают работать. То, как PVE реализует Высокую Доступность (которое, полагаю, и является причиной, по которой у вас 2 узла активны), принесет больше вреда, чем пользы, если оставить 2 узла активными без Q устройства. В общем, если узел 1 проводит вытеснение, то до того, как узел 3 запустится, узел 2 может уже начать вытеснение, а в это время узел 1 восстановится и не увидит никого, так как узел 3 с его запаздывающим стартом тоже начал вытеснение. Повторять это можно бесконечно. Q устройство было бы неплохо. Эта маленькая часть была бы вполне приемлемой.
     
     
     
    AODix
    Guest
    #6
    0
    07.10.2024 06:20:00
    Пожалуй, мне нужно больше почитать про fencing, но насколько я понял, если я не буду его использовать и не буду добавлять эти ноды в домен fencing, а буду реплицировать ВМ, которые нужно реплицировать, но которые в основном статичны (хотя, может, можно будет синхронизировать их раз в неделю или как-то так для редких изменений), то описанная вами выше проблема не возникнет, верно? Мое понимание таково, что это большая проблема именно с общим хранилищем, которым я не буду пользоваться. У меня будут все самые нужные ВМ реплицированы на запасной сервер от обеих "основных" машин, и когда запасной сервер запустится, он будет запускать только нужные ВМ, а не что-то еще. Когда основная машина вернется в онлайн, ВМ все равно будут синхронизироваться и произойдет handover, опять же, с некоторой задержкой после выключения запасного. Потому что, в общем, моя главная цель – не высокодоступность. Я предпочитаю простоту запуска всех нод в кластере, и моя проблема всегда заключалась в том, что они не запускаются только с одним узлом без изменения конфигурации quorum, как вы и намекнули выше (изменить один из них, чтобы он имел два голоса, что, возможно, и будет моим путем, но это не предлагает избыточности, или использовать Q-устройство, которое я не люблю и тоже не обеспечивает избыточность). То, что я хочу, можно, наверное, назвать "средней доступностью". Это домашняя лаборатория, так что ничего критически важного, если придется подождать 5 минут – это нормально, но я бы предпочел, чтобы HAProxy, моя VPN или Home Assistant не пропадали на более длительное время. Кроме исторических данных Home Assistant, эти ВМ в частности были бы вполне приемлемы, если бы работали с данными, которым неделя-две. По сути, я ищу 2-узловой кластер с холодным запасным для наиболее критичных ВМ, которые в обычных обстоятельствах могут работать на любом из этих узлов. Есть ли какой-нибудь другой способ это сделать? Я не могу запустить все на одном узле, так что HA с Q-устройством не подойдет, так как выход из строя одного узла оставит меня без сервисов, и при этом, платить за еще 130 Вт непрерывной нагрузки (старые серверы Broadwell V4) просто не по карману. Если бы это был, скажем, база данных с информацией о клиентах, я бы с вами полностью согласился... но учитывая сценарий использования, вы действительно думаете, что это вызовет много проблем?
     
     
     
    esi_y
    Guest
    #7
    0
    07.10.2024 07:01:00
    Но зачем нужен третий узел, если виртуальные машины никогда не смогут на него мигрировать? Как вы будете реплицировать данные на узел, который выключен? Вы будете писать скрипты для автоматического запуска без HA? Это еще одна миграция HA? Потому что виртуальные машины не мигрируют обратно в PVE, если узел не выходит из строя. В кластеризации в PVE нет ничего простого, это хрупкая система, которая ещё и изнашивает ваши SSD (ещё больше). Если HA не является целью, то буквально проще иметь один хост со всеми виртуальными машинами, даже без PVE. Я не уверен, что вы имеете в виду под Q устройством, которое не предоставляет избыточность, оно буквально позволяет – надежно – два узла быть в кластере, что иначе было бы настройкой с ограниченными возможностями. Тогда я бы предпочёл хост с аварийным восстановлением = хорошими резервными копиями. Если бы у меня уже было два хоста, я бы запустил их отдельно и продолжал реплицировать без кластеризации. См. выше. По моему мнению, вы не ищете кластер, вы используете неподходящее решение для данного случая использования и позволяете ему заставить вас поверить, что вам нужен кластер, потому что это единственное, что оно может предоставить. Если настаивать на PVE, то ему понадобятся (без Q устройства, если вы настаиваете и на этом) те опции* из corosync, за которые команда Proxmox не дает гарантии: last_man_standing и не использовать HA или, если настаивать на HA (как реализовано в PVE), это будет своего рода азартная игра, но wait_for_all. * https://manpages.debian.org/unstable/corosync/votequorum.5.en.html Я не уверен, что понял вас в этом вопросе. Это часто обсуждаемая тема на форуме, я не могу знать из вашего ограниченного описания, что еще на этих устаревших серверах нельзя легко заменить, но в целом говоря, один новый мини-ПК, с точки зрения вычислительной мощности и хранения данных, может легко справиться с аналогичными рабочими нагрузками при ~25W по моему опыту. Для некоторых домашних лабораторий эти серверы могут быть доступны только по требованию или просто виртуализированы на нем. Ваша первоначально описанная настройка? Если вы проигнорируете все вышесказанное и продолжите использовать PVE на 2 старых хостах, я все еще считаю это чрезмерно сложной настройкой по сравнению с опциями конфигурации corosync.
     
     
     
    AODix
    Guest
    #8
    0
    07.10.2024 13:48:00
    Круто. Я ухожу. Это слишком быстро стало подхалимским, причем совершенно без причины.
     
     
     
    kotovasia
    Guest
    #9
    0
    12.05.2024 14:37:00
    Разогнал кластер и осталась одна нода, но она требует кворума при запуске. pvecm ожидает, что 1 нужно вводить каждый раз при старте. Как сделать так, чтобы это значение было постоянным?
     
     
     
    Mynx
    Guest
    #10
    0
    02.08.2024 07:37:00
    Когда я запускаю команду "pvecm expected 1", виртуальные машины запускаются, и всё работает, но это не сохраняется. Мне кажется, можно создать скрипт службы, который автоматически будет запускать эту команду при старте узла Proxmox.
     
     
     
    UdoB
    Guest
    #11
    0
    02.08.2024 07:44:00
    Всё возможно. С моей точки зрения, манипулирование "expected 1" – это только для восстановления после аварий. Если вы думаете, что вам это нужно постоянно, значит, вы что-то делаете не так. Пожалуйста, будьте осторожны, вы сами напроситесь на неприятности – не сегодня, так, наверное, в перспективе… Просто мои 2€¢
     
     
     
    Mynx
    Guest
    #12
    0
    02.08.2024 07:50:00
    Окей, у меня есть 2 ноды. Мощная нода на ПК и мини-ПК нода для работы 24/7. Я использую ноду на ПК только если нужна серверная часть для тестирования или для тяжелых игровых серверов. Она большую часть времени офлайн, и я не хочу каждый раз менять IP, да еще и хочу переносить ВМ.
     
     
     
    UdoB
    Guest
    #13
    0
    02.08.2024 08:22:00
    Просто делай как хочешь — всё возможно. Твоей системы достаточно мала для этого. Ты всё о ней знаешь. Ты справишься с проблемами, если они возникнут. (Мой подход — избегать рискованных ситуаций, чтобы постоянно оставаться "стабильным", поэтому я запускаю кластеры вместо одиночных систем — я, конечно, предвзятый.) Веселись!
     
     
     
    esi_y
    Guest
    #14
    0
    02.08.2024 09:20:00
    Думаю, что OP на самом деле нуждается в two_node: 1, но почитай об этом: https://manpages.debian.org/bookworm/corosync/votequorum.5.en.html. Идеальный вариант в этом случае — вообще не кластеризовать их вдвоём.

    EDIT: И если уж совсем никак иначе нельзя, то проверь и auto_tie_breaker: 1.
     
     
     
    mvs
    Guest
    #15
    0
    02.08.2024 12:52:00
    Твои узлы не одинаково важны. Просто дай 24/7 узлу второй голос в corosync.conf. Он сможет самостоятельно кворум (2 из 3 голосов) и ты не рискуешь сценарием "split-brain", как при использовании pvecm expected 1.
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры