Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Виртуальная Среда
    Отрицательный SSD "Износ -140%"

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    Отрицательный SSD "Износ -140%", Proxmox Виртуальная Среда
     
    udotirol
    Guest
    #1
    0
    07.05.2025 00:38:00
    Один из наших серверов использует два SSD Crucial MX500 в RAID1 ZFS в качестве загрузочных дисков. Как-то проверяя значения SMART на серверах через UI, обнаружил просто уморительный отрицательный износ -140%! Не представляю, что это может значить. В командной строке `smartctl -a` ничего необычного не показывает, кроме "Percent_Lifetime_Remaining", которое составляет 116%.

    ```
    $ smartctl -a /dev/sda
    [...]
    SMART Attributes Data Structure revision number: 16
    Vendor Specific SMART Attributes with Thresholds:
    ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
     1 Raw_Read_Error_Rate     0x002f   100   100   000    Pre-fail  Always       -       0
     5 Reallocate_NAND_Blk_Cnt 0x0032   100   100   010    Old_age   Always       -       0
     9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       19715
    12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       20
    171 Program_Fail_Count      0x0032   100   100   000    Old_age   Always       -       0
    172 Erase_Fail_Count        0x0032   100   100   000    Old_age   Always       -       0
    173 Ave_Block-Erase_Count   0x0032   240   240   000    Old_age   Always       -       1161
    174 Unexpect_Power_Loss_Ct  0x0032   100   100   000    Old_age   Always       -       2
    180 Unused_Reserve_NAND_Blk 0x0033   000   000   000    Pre-fail  Always       -       30
    183 SATA_Interfac_Downshift 0x0032   100   100   000    Old_age   Always       -       0
    184 Error_Correction_Count  0x0032   100   100   000    Old_age   Always       -       0
    187 Reported_Uncorrect      0x0032   100   100   000    Old_age   Always       -       0
    194 Temperature_Celsius     0x0022   078   050   000    Old_age   Always       -       22 (Min/Max 0/50)
    196 Reallocated_Event_Count 0x0032   100   100   000    Old_age   Always       -       0
    197 Current_Pending_ECC_Cnt 0x0032   100   100   000    Old_age   Always       -       0
    198 Offline_Uncorrectable   0x0030   100   100   000    Old_age   Offline      -       0
    199 UDMA_CRC_Error_Count    0x0032   100   100   000    Old_age   Always       -       0
    202 Percent_Lifetime_Remain 0x0030   240   240   001    Old_age   Offline      -       116
    206 Write_Error_Rate        0x000e   100   100   000    Old_age   Always       -       0
    210 Success_RAIN_Recov_Cnt  0x0032   100   100   000    Old_age   Always       -       0
    246 Total_LBAs_Written      0x0032   100   100   000    Old_age   Always       -       116458851999
    247 Host_Program_Page_Count 0x0032   100   100   000    Old_age   Always       -       1084277588
    248 FTL_Program_Page_Count  0x0032   100   100   000    Old_age   Always       -       8546353571
    ```

    Диски проработали около 20 тысяч часов и на них записано примерно 55 ТБ, так что, учитывая спецификации в 180 ТБВ, они должны быть далеки от износа... При этом ошибок самотестирования также не было зафиксировано, поэтому интересно, что происходит?
     
     
     
    guruevi
    Guest
    #2
    0
    07.05.2025 02:03:00
    Оставшийся процент срока службы показывает 240, то есть на 140% больше, чем 100%, указанные производителем. Начинается с 0 и доходит до n, Proxmox делает 100 - $value, чтобы получить значение 'оставшейся' жизни. Учитывая размер LBA в 4 кБ, похоже, вы записали 465 ТБ или примерно в 2,6 раза больше вашего номинального TBW, поэтому -140% вероятно, верно. Учитывая возраст этих устройств и тот факт, что я видел одно за другим, выходящие из строя этой модели, я удивлен, что они вообще функционируют. Там была ошибка в прошивке, когда эти были 'новыми' (что, 7 лет назад), которая могла привести к их "окирпичиванию" при определенных условиях.
     
     
     
    Kingneutron
    Guest
    #3
    0
    08.05.2025 02:43:00
    СОВЕТ: Не покупайте сразу две одинаковые модели. Подумайте про Pro и Evo — так вы хоть немного продлите их жизнь, ведь одна из них быстрее износится, и они не выйдут из строя одновременно из-за одинаковых паттернов износа.
     
     
     
    udotirol
    Guest
    #4
    0
    07.05.2025 13:10:00
    Нет, оставшийся срок службы показывает 116 (RAW_VALUE). Те 240, о которых вы говорите, взяты из столбца VALUE. Столбец VALUE представляет собой "нормализованное" текущее значение атрибута по шкале обычно от 1 до 100 (иногда от 1 до 100). WORST — это наихудшее значение, наблюдаемое за время жизни диска, а THRESH — это порог, при котором производитель диска считает, что диск выходит из строя. И, как видите на моем примере, со значением VALUE равным 240, диск даже издалека не приближается к THRESH равным 001. RAW_VALUE — это фактические необработанные данные, поступающие с диска, и "магия", необходимая для преобразования этого в что-то осмысленное, часто трудно понять, потому что она очень сильно зависит от производителя. Подробное объяснение можно найти здесь: https://www.smartmontools.org/wiki/Howto_ReadSmartctlReports_ATA. Что касается размера LBA, я не так уверен. Есть логический размер блока и физический размер блока, и я не уверен, какой из них использовать для расчета LBA. Судя по прочитанному, это непоследовательно между производителями дисков. В моем случае диски сообщают о размере сектора "512 байт логических, 4096 байт физических". Но да, если взять физический размер блока, диск превысил 180TBW, хотя я и очень сомневаюсь в этом, потому что SSD используются только в качестве (дешёвых) загрузочных дисков. Фактическое хранилище для виртуальных машин берётся из ZFS через iSCSI.
     
     
     
    guruevi
    Guest
    #5
    0
    07.05.2025 13:59:00
    Исходные значения преобразуются в значения с использованием таблицы, на которую ссылается программное обеспечение smartctl. Пользователям всегда следует смотреть на нормализованное значение, так как исходное значение преобразуется через логику в drivedb.h, который содержит запись для вашей модели. -140+256=116 По данным Crucial: Атрибут 202 новых SSD будет показывать "0", а когда будет достигнут указанный срок службы, он покажет "100", сообщая об использовании 100 процентов срока службы. В этих моделях процент может превышать 100 при выполнении дополнительных операций записи, но проблемы с сохранением данных остаются прежними.
     
     
     
    guruevi
    Guest
    #6
    0
    07.05.2025 15:38:00
    У Crucial MX500 SSD есть 4K физическое выравнивание. Если чтение/запись происходит синхронно по 512 байт, то внутри (это худший сценарий, если есть конденсатор, он лучше оптимизирует это за счет встроенного кэша записи) он читает 4K блок, модифицирует 512 байт и записывает 4K блок. То есть, на каждый записанный 4K, отражающий размер в 512 байт, приходится 8 4K записей (опять же, это только худший сценарий, вы же делаете синхронные записи с длительными паузами). Я думаю, что эти MX500 сообщали о размере 512 байт и не могли быть изменены на 4K AF. Вот почему вы видите такую разницу между объемом данных, записанных на интерфейс, и объемом данных, записанных во внутренний блок — возможно, в этих ранних SSD заложена 8-кратная степень увеличения числа операций записи для совместимости с Windows 7.
     
     
     
    udotirol
    Guest
    #7
    0
    07.05.2025 16:08:00
    Да, я в курсе этого ограничения (которое есть у многих дешевых SSD, даже сегодня). Как я и говорил, сложно поверить, что устройство, с которого загружается PVE, может генерировать столько записей.
     
     
     
    udotirol
    Guest
    #8
    0
    07.05.2025 16:24:00
    Твои вычисления имеют смысл, да... хотя, опять же, как-то сложно поверить... И вот я решила посмотреть на другие серверы и устройства, которые с ними работают, и что я могу сказать, оказывается, ты прав в конце концов. С аналогичным диском и идентичной прошивкой я вижу, например: 202 Percent_Lifetime_Remain 0x0030   047   047   001    Old_age   Offline      -       53 И более крупный вариант, CT1000MX500SSD1 (=1 TB) с более старой прошивкой: 202 Percent_Lifetime_Remain 0x0030   100   100   001    Old_age   Offline      -       0 TL;DR: диски заменят — спасибо за поддержку!
     
     
     
    guruevi
    Guest
    #9
    0
    07.05.2025 16:25:00
    (55 терабайт) / (22 000 часов) = 694.444444 кБ/с. Проблему не вижу (пакеты, логи, токены синхронизации, статус, файлы конфигурации...). У меня уже 22 ТБ за ~3 года в большой кластере из 14 узлов (износ пока низкий, поскольку они рассчитаны на 3-кратные ежедневные записи).
     
     
     
    guruevi
    Guest
    #10
    0
    08.05.2025 04:24:00
    Что за лайфхак у Pro? Evo/Pro не предназначены для круглосуточной работы 24/7. К тому же, Evo ощутимо хуже во всём, включая производительность и безопасность данных. Есть риск каждый раз, когда ты меняешь диск, и заменять что-то 4 раза за определённый период времени значительно рискованнее, чем заменять один раз. Индикатор износа не значит, что диск выйдет из строя в этот момент, он просто означает, что у тебя нет гарантии и ты не можешь полагаться на них для хранения данных, но отказ может произойти до и после, они редко выходят из строя одновременно, но даже тогда, для этого у тебя есть резервные копии. Пока ты мониторишь окружение, отказы, вероятно, будут достаточно чёткими друг от друга. Я как раз что-то спасал (аппаратный RAID6 с обычными дисками) в ‘профессиональной’ среде – у одного диска появились проблемы SMART через несколько месяцев жизни (это было 10 лет назад), один диск вышел из строя 2 года назад, и наконец, второй диск вышел из строя, выявив проблемы с первым, но никто вокруг не проверял или менял жёсткие диски. В итоге, массиву потребовалось 10 лет, чтобы выйти из строя. Это, конечно, один случай из практики. Когда самым большим диском был 3ТБ, у меня было несколько сбоев в ZFS массиве (Solaris) через несколько недель после запуска, оказалось, что была ошибка в прошивке, и я видел ошибки в контроллерах дисков, ошибки в прошивках HDD и SSD, и просто плохие контроллеры (Sandforce), которые влияют на несколько поставщиков и моделей за поколение, а ещё выходят из строя SAS бэкплейны – и вместе с ними 8-24 диска. И теперь, после десятилетий в IT, я понимаю, почему существуют сертифицированные диски, корпоративные диски, брендированные диски и кастомные прошивки, и знаю правду о бенчмарках, почему десктопные диски на бумаге могут быть быстрее, чем профессиональные.
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры