Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Виртуальная Среда
    Live-Migration почти останавливает Targetnode

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    Live-Migration почти останавливает Targetnode, Proxmox Виртуальная Среда
     
    m.witt
    Guest
    #1
    0
    26.11.2020 17:14:00
    Привет, у нас проблема с живой миграцией на Proxmox: каждый раз, когда мы пытаемся осуществить живую миграцию виртуальной машины с Узла A на Узел B, на Узле B наблюдается высокий IOWait и нагрузка постоянно увеличивается. Виртуальные машины на Узле B, у которых диски находятся в том же пуле ZFS, что и "мигрирующая ВМ", также становятся неотзывчивыми из-за высокого IOWait (80% - 100%). Когда мы проводим офлайн-миграцию (все как обычно, только офлайн), все проходит без проблем и симптомов высокого IOWait. Проблема проявляется, когда начинается фактическая передача данных, и исчезает, если мы либо останавливаем миграцию и убиваем целевой процесс qemu, либо позволяем завершить передачу. У кого-нибудь была похожая проблема? Спойлер: PVEVERSION root@prx002:~# pveversion -v proxmox-ve: 6.2-2 (работающий ядро: 5.4.73-1-pve) pve-manager: 6.2-15 (работающая версия: 6.2-15/48bd51b6) pve-kernel-5.4: 6.3-1 pve-kernel-helper: 6.3-1 pve-kernel-5.3: 6.1-6 pve-kernel-5.4.73-1-pve: 5.4.73-1 pve-kernel-5.4.65-1-pve: 5.4.65-1 pve-kernel-5.4.60-1-pve: 5.4.60-2 pve-kernel-5.3.18-3-pve: 5.3.18-3 pve-kernel-5.3.18-2-pve: 5.3.18-2 ceph-fuse: 12.2.11+dfsg1-2.1+b1 corosync: 3.0.4-pve1 criu: 3.11-3 glusterfs-client: 5.5-3 ifupdown: остаточная конфигурация ifupdown2: 3.0.0-1+pve3 ksmtuned: 4.20150325+b1 libjs-extjs: 6.0.1-10 libknet1: 1.16-pve1 libproxmox-acme-perl: 1.0.5 libpve-access-control: 6.1-3 libpve-apiclient-perl: 3.0-3 libpve-common-perl: 6.2-4 libpve-guest-common-perl: 3.1-3 libpve-http-server-perl: 3.0-6 libpve-storage-perl: 6.2-10 libqb0: 1.0.5-1 libspice-server1: 0.14.2-4~pve6+1 lvm2: 2.03.02-pve4 lxc-pve: 4.0.3-1 lxcfs: 4.0.3-pve3 novnc-pve: 1.1.0-1 proxmox-backup-client: 1.0.1-1 proxmox-mini-journalreader: 1.1-1 proxmox-widget-toolkit: 2.3-10 pve-cluster: 6.2-1 pve-container: 3.2-3 pve-docs: 6.2-6 pve-edk2-firmware: 2.20200531-1 pve-firewall: 4.1-3 pve-firmware: 3.1-3 pve-ha-manager: 3.1-1 pve-i18n: 2.2-2 pve-qemu-kvm: 5.1.0-6 pve-xtermjs: 4.7.0-2 qemu-server: 6.2-20 smartmontools: 7.1-pve2 spiceterm: 3.1-1 vncterm: 1.6-2 zfsutils-linux: 0.8.5-pve1
     
     
     
    filipealvarez
    Guest
    #2
    0
    27.07.2021 20:24:00
    Может кто-то помочь мне? У меня кластер из 4 узлов 6.4-8 с 1% средней загрузкой ввода-вывода и 80% свободной памяти, но когда я начинаю онлайн миграцию (lvmthin localdisks), нагрузка подскакивает до 45%, что вызывает проблемы с отзывчивостью на ВМ в этом узле. В момент, когда это происходит, только ввод-вывод возрастает.
     
     
     
    filipealvarez
    Guest
    #3
    0
    27.07.2021 23:15:00
    Обнаружили здесь, что когда у виртуальной машины не включена опция Discard, онлайн-миграция работает как задумано. Вопрос в том, способна ли команда trim внутри виртуальной машины освободить неиспользуемое пространство на LVM-THIN хоста?
     
     
     
    JamesT
    Guest
    #4
    0
    28.07.2021 08:19:00
    @m.witt, ты когда-нибудь решил эту проблему? Я столкнулся с такой же или очень похожей проблемой с живыми миграциями с тех пор, как мы начали использовать proxmox на 6.1 год назад. Сейчас на 6.3-3, и проблема все еще та же: живая миграция тормозит все, задержка ввода/вывода сильно увеличивается, но кластер все равно работает, а виртуальные машины тоже в порядке. Однако, если я начинаю вторую живую миграцию, все начинает совсем зависать. У нас выделенная сеть 10G для миграций, небезопасные миграции включены (раньше у нас была включена безопасная, но это было очень медленно). Чтобы обойти эту проблему, мы используем запланированную репликацию каждые 15 секунд - 15 минут в зависимости от критичности данных на виртуальной машине, и это значительно ускоряет миграции. Тем не менее, это не идеальное решение, так как мне периодически нужно перезагружать оба узла в кластере из-за того, что запланированные репликации начинают сбои (одна или две могут начать терпеть различного рода неудачи), и живые миграции полностью перестают работать. Под периодически я имею в виду, возможно, каждые 1-2 месяца.
     
     
     
    abien
    Guest
    #5
    0
    28.07.2021 09:09:00
    @JamesT Мы этого не решили. Некоторое время мы использовали ограничение пропускной способности в 125 Мибит/с. Это сделало проблему почти незаметной, хотя миграция заняла больше времени. Однако с тех пор мы отказались от ZFS и начали использовать только ceph flash.
     
     
     
    JamesT
    Guest
    #6
    0
    28.07.2021 09:20:00
    @abien Хорошо, спасибо, ценю ответ. Мы тоже планируем перейти на ceph, когда позволит время.
     
     
     
    JamesT
    Guest
    #7
    0
    28.07.2021 09:30:00
    Привет, @Dominic. Я немного поискал, но не могу найти, как уменьшить приоритет I/O для ZFS send. Можешь помочь мне с правильными терминами для поиска, ссылкой на статью или даже самой командой? Большое спасибо, Джеймс.
     
     
     
    Snapp R
    Guest
    #8
    0
    12.03.2022 16:20:00
    Есть ли решение этой проблемы? Я столкнулся с тем же, когда делал живую миграцию... целевой узел завис, а график показывает отсутствие активности около 5 минут (возможно, это зависит от размера диска виртуальной машины). Эта проблема немного пугает, если это в рабочем окружении, в варианте миграции WebGUI нет ограничения по пропускной способности. Спойлер: версия PVE код: proxmox-ve: 7.1-1 (работает на ядре: 5.13.19-5-pve) pve-manager: 7.1-10 (работает версия: 7.1-10/6ddebafe) pve-kernel-helper: 7.1-12 pve-kernel-5.13: 7.1-8 pve-kernel-5.13.19-5-pve: 5.13.19-12 pve-kernel-5.13.19-2-pve: 5.13.19-4 ceph-fuse: 15.2.15-pve1 corosync: 3.1.5-pve2 criu: 3.15-1+pve-1 glusterfs-client: 9.2-1 ifupdown2: 3.1.0-1+pmx3 ksm-control-daemon: 1.4-1 libjs-extjs: 7.0.0-1 libknet1: 1.22-pve2 libproxmox-acme-perl: 1.4.1 libproxmox-backup-qemu0: 1.2.0-1 libpve-access-control: 7.1-6 libpve-apiclient-perl: 3.2-1 libpve-common-perl: 7.1-3 libpve-guest-common-perl: 4.1-1 libpve-http-server-perl: 4.1-1 libpve-storage-perl: 7.1-1 libspice-server1: 0.14.3-2.1 lvm2: 2.03.11-2.1 lxc-pve: 4.0.11-1 lxcfs: 4.0.11-pve1 novnc-pve: 1.3.0-2 proxmox-backup-client: 2.1.5-1 proxmox-backup-file-restore: 2.1.5-1 proxmox-mini-journalreader: 1.3-1 proxmox-widget-toolkit: 3.4-6 pve-cluster: 7.1-3 pve-container: 4.1-4 pve-docs: 7.1-2 pve-edk2-firmware: 3.20210831-2 pve-firewall: 4.2-5 pve-firmware: 3.3-5 pve-ha-manager: 3.3-3 pve-i18n: 2.6-2 pve-qemu-kvm: 6.1.1-2 pve-xtermjs: 4.16.0-1 qemu-server: 7.1-4 smartmontools: 7.2-1 spiceterm: 3.2-2 swtpm: 0.7.0~rc1+2 vncterm: 1.7-1 zfsutils-linux: 2.1.2-pve1
     
     
     
    filipealvarez
    Guest
    #9
    0
    15.03.2022 19:40:00
    Да, мне тоже очень интересно это исправление, действительно, это настоящая боль — высокая загрузка ввода-вывода при миграции с включенным discard.
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры