Привет всем. Я выложил это на сабреддите Proxmox, и там посоветовали мне выложить здесь. Я настроил свой Proxmox-сервер несколько месяцев назад, примерно в декабре 2022 года, и столкнулся с проблемами доступа к GUI, или с недоступностью моих VM, контейнеров и хоста. Я посмотрел логи и обнаружил ошибки ввода-вывода, которые привели меня к моему 1ТБ Samsung 860 EVO 2.5". Оказалось, что он изношен на 99%, что и объясняет характер ошибок, но всё равно не понимаю, почему он мог так сильно износиться. Я вытащил его из трех других 1ТБ SSD из моего основного ПК, и на каждом из них накопилось около 34 тысячи часов работы и 5.5ТБ, 7.8ТБ и почти 16ТБ записанных данных. Я проверил SMART-данные этого диска в Proxmox, и там указано, что записано почти 1.95ПБ данных, согласно разделу "241 Total_LBAs_Written". Не понимаю, как это могло произойти, ведь он работал всего около 3 месяцев. Какие есть мысли?
Вот что мы уже рассмотрели, согласно обсуждению на Reddit:
* Не корпоративный диск — хотя он поддерживается только на корпоративных дисках, я всё равно думаю, что здесь что-то ещё происходит, потому что 1.95ПБ записанных данных – это безумие.
* Я запускал сервисы pve-ha-lrm & pve-ha-crm, хотя и не использовал HA или кластеризацию. – Отключил их, так как другие говорили, что у них был высокий износ диска при их использовании, но вред уже нанесён.
* Не использую ZFS – команда zpool iostat выдаёт сообщение "no pools available".
* Мой основной том для VM, я думаю, был LVM.
* Не использую RAID-контроллер – просто один SSD.
* Кажется, я настроил Proxmox с файловой системой "ext4" при установке.
* Я установил Proxmox с версии 7.3-3, но обновился до 7.3-6.
* Я не настраивал никаких систем мониторинга или метрик, но сделаю это, чтобы посмотреть, сможет ли это что-нибудь показать по историческим данным.
* Использую всего 6-7 VM, а также 2-3 контейнера. VM в основном Ubuntu Linux, есть Kali Linux и 1 Windows 11 VM.
* Они все пишут на один диск, так как я использовал только 1x 1ТБ SSD (я знаю, плохая практика), но данные, которые мне нужно было сохранить (в основном Linux VM), отправлялись на мой Synology NAS.
* Запускаю Docker на одном из Linux-серверов и на нём установлены Portainer, Prowlarr, Overseerr, Radarr, Sonarr, Qbittorrent, Plex, Nginx Reverse Proxy, Bazarr, HomeBridge и несколько других контейнеров для тестирования.
* Во время работы всех VM и контейнеров я не замечал использования swap, но это не значит, что его не было.
* Могу предоставить логи, но пока ограничен в этом, так как машина выключена настолько, насколько это возможно, пока не приедут новые SSD.
* Система всё ещё функционирует, но ошибки ввода-вывода возникают всё чаще.
* Планирую использовать 2x 1ТБ Samsung 980 (не Pro из-за проблем с прошивкой) NVMe SSD для Proxmox, один для загрузки, другой для VM и контейнеров, чтобы посмотреть, поможет ли это.
Вот что мы уже рассмотрели, согласно обсуждению на Reddit:
* Не корпоративный диск — хотя он поддерживается только на корпоративных дисках, я всё равно думаю, что здесь что-то ещё происходит, потому что 1.95ПБ записанных данных – это безумие.
* Я запускал сервисы pve-ha-lrm & pve-ha-crm, хотя и не использовал HA или кластеризацию. – Отключил их, так как другие говорили, что у них был высокий износ диска при их использовании, но вред уже нанесён.
* Не использую ZFS – команда zpool iostat выдаёт сообщение "no pools available".
* Мой основной том для VM, я думаю, был LVM.
* Не использую RAID-контроллер – просто один SSD.
* Кажется, я настроил Proxmox с файловой системой "ext4" при установке.
* Я установил Proxmox с версии 7.3-3, но обновился до 7.3-6.
* Я не настраивал никаких систем мониторинга или метрик, но сделаю это, чтобы посмотреть, сможет ли это что-нибудь показать по историческим данным.
* Использую всего 6-7 VM, а также 2-3 контейнера. VM в основном Ubuntu Linux, есть Kali Linux и 1 Windows 11 VM.
* Они все пишут на один диск, так как я использовал только 1x 1ТБ SSD (я знаю, плохая практика), но данные, которые мне нужно было сохранить (в основном Linux VM), отправлялись на мой Synology NAS.
* Запускаю Docker на одном из Linux-серверов и на нём установлены Portainer, Prowlarr, Overseerr, Radarr, Sonarr, Qbittorrent, Plex, Nginx Reverse Proxy, Bazarr, HomeBridge и несколько других контейнеров для тестирования.
* Во время работы всех VM и контейнеров я не замечал использования swap, но это не значит, что его не было.
* Могу предоставить логи, но пока ограничен в этом, так как машина выключена настолько, насколько это возможно, пока не приедут новые SSD.
* Система всё ещё функционирует, но ошибки ввода-вывода возникают всё чаще.
* Планирую использовать 2x 1ТБ Samsung 980 (не Pro из-за проблем с прошивкой) NVMe SSD для Proxmox, один для загрузки, другой для VM и контейнеров, чтобы посмотреть, поможет ли это.
