Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Виртуальная Среда
    Серийный номер диска в PVE -> Host -> Disk

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    Серийный номер диска в PVE -> Host -> Disk, Proxmox Виртуальная Среда
     
    FelixJ
    Guest
    #1
    0
    06.02.2023 11:08:00
    Привет, недавно обнаружил, что значение, отображаемое в PVE-Manager в разделе "datacenter -> host -> Disks", соответствует результату команды smartctl к "Logical unit id", а не к "Serial number", что немного сбивает с толку. Это происходит на всех серверах, где установлен HP P420 HBA. При использовании команды smartcli -d cciss,X /dev/sdX --all, значение, отображаемое в PVE-Manager, связано с "Logical unit id". Если диск подключен через внутренний SATA-Bus, серийный номер в PVE-Manager отображается корректно (например, /dev/sda). Есть ли какие-то настройки, о которых я не знаю, с помощью которых можно сказать PVE-Manager, что я использую такой HBA, чтобы исправить это? Также, как видно, отобразить SMART статус тоже не получается.

    С уважением,
    Felix
     
     
     
    apoc
    Guest
    #2
    0
    06.02.2023 13:22:00
    Значения SMART для дисков за RAID-контроллером всегда создают проблемы, потому что физический диск скрыт и заменен виртуальным (RAID). Вы используете smartcli в командной строке. Pve берет данные с помощью собственных инструментов, а они не заглядывают за представлением вашего LUN.
     
     
     
    FelixJ
    Guest
    #3
    0
    06.02.2023 14:09:00
    Вот это, наверное, и объясняет такое поведение. Так что, явно есть куда стремиться. Хотелось бы увидеть правильные серийные номера и умный статус через GUI!
     
     
     
    aaron
    Guest
    #4
    0
    09.02.2023 11:51:00
    Не думаю, что это так. Потому что диски представлены системе именно так, как их видит RAID-контроллер. Это не обязательно 1:1 соответствие между дисками, которые видит Proxmox VE (или любая другая ОС), и физическими дисками. То есть, один диск, который видит ОС, может на самом деле состоять из нескольких дисков, объединенных в RAID. К тому же, разные RAID-контроллеры с разной прошивкой могут вести себя совершенно по-разному. Старые RAID-контроллеры HP (судя по всему, у вас как раз такой) не очень хорошо передают отдельные диски как есть, максимально “сырыми”. Dell PERCs обычно гораздо лучше справляются с этим, если отдельный диск настроен как JBOD, тогда вы увидите фактический серийный номер, потому что контроллер его не маскирует. Так что, в общем, если вам не нужен аппаратный RAID, попробуйте избегать эти карты или попробуйте прошить их прошивкой в IT-режиме, тогда они будут вести себя как простой контроллер дисков, не маскируя ничего.
     
     
     
    FelixJ
    Guest
    #5
    0
    09.02.2023 15:01:00
    Я правда не хочу тебя обидеть, но команда smartctl --d cciss,X /dev/sdX --all работает нормально. Так зачем изобретать велосипед в этом случае и не пользоваться проверенными API и утилитами (например, smartmontools)? P420 работает в режиме HBA, так что диски подключены максимально прямо.
     
     
     
    aaron
    Guest
    #6
    0
    10.02.2023 10:58:00
    Кстати, Proxmox VE собирает информацию о дисках из udev, вызывая команду: `udevadm info -p /sys/block/<nvme0n1/sdX/...> --query all`. Этот p420 установлен в сервере HP G8/G9, верно? Давно с ними не работал, но если я правильно помню, прошивка RAID-контроллера, и особенно реализация HBA-режима, оставляла желать лучшего. Одно из моих главных нареканий заключалось в том, что нельзя загружаться с дисков, когда ты в HBA-режиме. Вот почему несколько лет назад, когда я работал с G8, я купил дешевый HBA-контроллер, уже прошитый в IT-режим. И на G8 мне также пришлось заменить кабели к дисковой задней панели, потому что разъемы на встроенном контроллере были под углом 90°. После этого все работало отлично, поскольку диски представлялись напрямую как необработанные диски. Даже в HBA-режиме диски представляются как устройства cciss, а не как необработанные диски напрямую. Вот почему нужно указывать это в команде smartctl, иначе он не сможет получить правильную информацию. Посмотрите эту тему на форумах HPE: https://community.hpe.com/t5/prolia...n-hba-mode/m-p/7138406/highlight/true#M174891 Новые серверы HP / RAID-контроллеры, насколько я знаю, должны быть намного лучше в этом отношении, но относитесь к этому с долей скепсиса, у меня нет личного опыта. Так что, хотя ситуация раздражает, если бы я действительно хотел, чтобы это работало, я бы изучил udev. Или можно купить настоящий HBA-контроллер, уже прошитый в IT-режим, и отключить / заменить RAID-контроллер. Последнее я сделал несколько лет назад. H220 — один из примеров, который должен хорошо работать в серверах HP и его можно найти на eBay за небольшие деньги.
     
     
     
    FelixJ
    Guest
    #7
    0
    14.02.2023 21:41:00
    Я попробовал команду udevadm, вот что получил: udevadm info -p /sys/block/sdb --query all
    P: /devices/pci0000:00/0000:00:02.2/0000:02:00.0/host2/scsi_host/host2/port-2:2/end_device-2:2/target2:0:1/2:0:1:0/block/sdb
    N: sdb
    L: 0
    S: disk/by-id/scsi-35000cca072116b7c
    S: disk/by-path/pci-0000:02:00.0-sas-0x5000cca072116b7d-lun-0
    S: disk/by-id/lvm-pv-uuid-i163GU-0KRI-IHoR-kV2Z-BmQt-JM6a-DXgFJs
    S: disk/by-id/wwn-0x5000cca072116b7c
    E: DEVPATH=/devices/pci0000:00/0000:00:02.2/0000:02:00.0/host2/scsi_host/host2/port-2:2/end_device-2:2/target2:0:1/2:0:1:0/block/sdb
    E: DEVNAME=/dev/sdb
    E: DEVTYPE=disk
    E: MAJOR=8
    E: MINOR=16
    E: SUBSYSTEM=block
    E: USEC_INITIALIZED=4209722
    E: ID_SCSI=1
    E: ID_VENDOR=HGST
    E: ID_VENDOR_ENC=HGST\x20\x20\x20\x20
    E: ID_MODEL=HUC101212CSS600
    E: ID_MODEL_ENC=HUC101212CSS600\x20
    E: ID_REVISION=A469
    E: ID_TYPE=disk
    E: ID_SERIAL=35000cca072116b7c
    E: ID_SERIAL_SHORT=5000cca072116b7c
    E: ID_WWN=0x5000cca072116b7c
    E: ID_WWN_WITH_EXTENSION=0x5000cca072116b7c
    E: ID_SCSI_SERIAL=L0G9KZPG
    E: ID_BUS=scsi
    E: ID_PATH=pci-0000:02:00.0-sas-0x5000cca072116b7d-lun-0
    E: ID_PATH_TAG=pci-0000_02_00_0-sas-0x5000cca072116b7d-lun-0
    E: ID_FS_UUID=i163GU-0KRI-IHoR-kV2Z-BmQt-JM6a-DXgFJs
    E: ID_FS_UUID_ENC=i163GU-0KRI-IHoR-kV2Z-BmQt-JM6a-DXgFJs
    E: ID_FS_VERSION=LVM2 001
    E: ID_FS_TYPE=LVM2_member
    E: ID_FS_USAGE=raid
    E: SYSTEMD_READY=1
    E: SYSTEMD_ALIAS=/dev/block/8:16
    E: SYSTEMD_WANTS=lvm2-pvscan@8:16.service
    E: DEVLINKS=/dev/disk/by-id/scsi-35000cca072116b7c /dev/disk/by-path/pci-0000:02:00.0-sas-0x5000cca072116b7d-lun-0 /dev/disk/by-id/lvm-pv-uuid-i163GU-0KRI-IHoR-kV2Z-BmQt-JM6a-DXgFJs /dev/disk/by-id/wwn-0x5000cca072116b7c
    E: TAGS=:systemd: Как видите, udevadm правильно определяет диски как sdX, однако правильный серийный номер скрыт за параметром ID_SCSI_SERIAL. В целом, я не уверен, что это неразрешимая проблема для графического интерфейса. Возможно, простого дополнительного запроса, есть ли параметр ID_SCSI_SERIAL наряду с ID_SERIAL, может быть достаточно, чтобы решить проблему? Если вы можете подсказать, где мне лучше всего попробовать внести изменения самостоятельно, это было бы замечательно, тогда хотя бы я сам решил бы эту проблему, если вы не видите дальнейших планов по смягчению этой проблемы? Конечно, в духе открытого исходного кода я был бы рад поделиться своим кодом впоследствии! Спасибо большое. Феликс
     
     
     
    aaron
    Guest
    #8
    0
    15.02.2023 10:03:00
    Спасибо за информацию. Не могли бы вы создать новый запрос на улучшение в нашей системе отслеживания ошибок с этой информацией? Проверка поля ID_SCSI_SERIAL и его использование, если оно существует, не должно вызвать особого труда. Если хотите попробовать сами, посмотрите код, на который я ссылался раньше, чуть ниже. Там есть строка с регулярным выражением для ID_SERIAL_SHORT. Наверное, достаточно будет добавить второе регулярное выражение сразу после него, чтобы перезаписать существующий серийный номер, если существует ID_SCSI_SERIAL. Если вы еще не вносили вклад в код, пожалуйста, ознакомьтесь с https://pve.proxmox.com/wiki/Developer_Documentation для ознакомления с процессом работы и также с необходимой лицензией (внизу страницы).
     
     
     
    FelixJ
    Guest
    #9
    0
    16.02.2023 13:27:00
    Привет, Арон! Вот насколько я продвинулся: Я даже почти смог получить smart-data, однако я не знаю, как правильно обработать свой `$data->{smartdparam}` для функции `get_smart_data`. Я изменил вызов функции, но безрезультатно:

    Код: `my $smartdata = get_smart_data($devpath, !is_ssdlike($type),$data->{smartdparam});`

    ```perl
    sub get_smart_data {
       my ($disk, $healthonly, $smartdparam) = @_;

       assert_blockdev($disk);
       my $smartdata = {};
       my $type;

       if ($disk =~ m!^/dev/(nvme\d+n\d+)$!) {
           my $info = get_sysdir_info("/sys/block/$1");
           $disk = "/dev/".($info->{device}
               or die "failed to get nvme controller device for $disk\n");
       }

       my $cmd = [$SMARTCTL, '-H'];
       push @$cmd, '-A', '-f', 'brief' if !$healthonly;
       push @$cmd, $disk;
       #############
       #if (defined ($smartdparam})) {
       #       push @$cmd, $smartdparam;
       #}
       ############## These are my changes to the get_udev_info function: Code: ############
       #
         my $hbaline = "";
         $data->{hbapath} = $1 if $info =~ m/^E: DEVPATH=(\S+)$/m;
         $data->{hbaid} = ( split /\//, $data->{hbapath})[4];
         $data->{devport} = ( split /:/,( split /\//, $data->{hbapath})[8])[1]-2;
         $dev = "/sys/bus/pci/devices/".$data->{hbaid};
       eval {
           run_command(['udevadm', 'info', '-p', $dev, '--query', 'all'], outfunc => sub {
               my ($hbaline) = @_;
               $hbainfo .= "$hbaline\n";
           });
       };
       $data->{smartdriver}="none";
       if ($hbainfo =~ m/^E: ID_MODEL_FROM_DATABASE=(.*Smart.*)$/m) {
               $data->{smartdparam}="cciss,".$data->{devport};
               my $smartdparam = $data->{smartdparam};
       }

       $data->{serial} = 'unknown';
       if ($info =~ m/^E: ID_SCSI_SERIAL=(.+)$/m) {
           $data->{serial} = $1 if $info =~ m/^E: ID_SCSI_SERIAL=(\S+)$/m;
       } else {
           $data->{serial} = $1 if $info =~ m/^E: ID_SERIAL_SHORT=(\S+)$/m;
       }
       So with a little help, so I can call the get_smart_data with my newly created SmartDriverParameter smartdparam - Variable, would be great!
       Regards,
       Felix
     
     
     
    aaron
    Guest
    #10
    0
    16.02.2023 16:05:00
    Хм, если хочешь показать изменения, проще всего использовать `git diff`, опционально с указанием пути к файлу. Я, честно говоря, не понимаю твой подход. Наверное, было бы понятнее с выводом `git diff`. ИИУК, серийный номер на самом деле присутствует в выводе `udevadm`, просто под другим именем? Тогда изменение, вероятно, нужно только в Diff: diff --git a/PVE/Diskmanage.pm b/PVE/Diskmanage.pm
    index a311ffd..1048732 100644
    --- a/PVE/Diskmanage.pm
    +++ b/PVE/Diskmanage.pm
    @@ -325,6 +325,7 @@ sub get_udev_info {

        $data->{serial} = 'unknown';
        $data->{serial} = $1 if $info =~ m/^E: ID_SERIAL_SHORT=(\S+)$/m;
    +    $data->{serial} = $1 if $info =~ m/^E: ID_SCSI_SERIAL==(\S+)$/m;

        $data->{gpt} = $info =~ m/^E: ID_PART_TABLE_TYPE=gpt$/m ? 1 : 0; Это должно перезаписать серийный номер, если присутствует строка ID_SCSI_SERIAL. Если ты меняешь это напрямую на своей (тестовой) системе ( /usr/share/perl5/PVE/... , не забудь перезапустить `systemctl restart pvedaemon`, чтобы изменения вступили в силу.
     
     
     
    FelixJ
    Guest
    #11
    0
    16.02.2023 21:13:00
    Прости за это, я не считаю себя кодером… так что у меня вообще нет опыта с git, но я разберусь. Что касается самого кода: я совершенно упустил, что там уже есть if-statement, поэтому мой if then else не нужен. Впрочем, мой настоящий вопрос в том, как мне передать переменную $data->{smartdparam}, которую я создаю немного раньше, в функцию get_smart_data? Спасибо за пример. Я сделаю все возможное, чтобы научиться правильно создавать diff-файлы, которые можно будет мне отправить!
     
     
     
    mr44er
    Guest
    #12
    0
    16.02.2023 23:59:00
    На моих SAS2308 и SAS3008 в IT-режиме я тоже получаю только ID логического блока. Эти ID могут и будут меняться, независимо от ОС... это тоже происходит на FreeBSD, поэтому я просто приклеил на лоток сервера наклейку с номером OSD.
     
     
     
    FelixJ
    Guest
    #13
    0
    17.02.2023 06:24:00
    Конечно, но, как вы видите выше, с небольшой отладкой udev и добавлением нескольких строк кода, вы даже можете решить эту проблему без наклеек на ваши лотки Drive. Я рекомендую вам запустить команду udevadm info, которую мы обсуждали ранее, и прислать мне результаты. Я могу включить это в свой патч. И если вы знаете, как работать с командой smartctl в отношении опции -d, я могу реализовать это и для вас, чтобы вы могли видеть SMART-статус в GUI. С уважением, F
     
     
     
    mr44er
    Guest
    #14
    0
    17.02.2023 08:51:00
    Тут одна и та же переменная ID_SCSI_SERIAL, так что достаточно изменить GUI и заменить ID_SERIAL_SHORT на ID_SCSI_SERIAL. SMART работает из коробки, потому что это SAS-диски и с этими контроллерами Avago/Broadcom – настоящий IT-режим с прямой передачей данных.
     
     
     
    FelixJ
    Guest
    #15
    0
    17.02.2023 13:34:00
    Отлично. Тогда мой патч для тебя отлично сработает.
     
     
     
    aaron
    Guest
    #16
    0
    17.02.2023 16:39:00
    Если я правильно понял тебя и код, который ты прислал (хотя я не уверен, что это так), то у тебя $data->{smartdparam} передается как третий параметр при вызове get_smart_data. На первый взгляд, выглядит все нормально. Но похоже, что у тебя скобка не там: Код: #if (defined ($smartdparam})) {
                                 ^  Реальный diff помог бы легче проверить, что и где изменилось в файле. С другой стороны, можешь проверить, правильно ли GUI показывает серийный номер с учетом изменений в моем предыдущем ответе?
     
     
     
    FelixJ
    Guest
    #17
    0
    19.02.2023 21:10:00
    Привет, Аарон, в этот раз мне удалось создать diff-вывод: Оказывается, проблемой была запущенная фигурная скобка, из-за которой pvedaeom не перезапускался. Спасибо за подсказку! Кстати, как мне получить содержимое из моего `$data->{smartdparam}` и правильно передать его в функцию `get_smart_data`? Другими словами: почему это не работает? Я бы думал, что это должно работать именно так. Как можно отладить содержимое `$data->{smartdparam}` вне функции `get_udev_info`, где я могу временно добавить его к `$data->{serial}`, чтобы отобразить?

    С уважением,
    Феликс

    Perl:
    *** /usr/share/perl5/PVE/Diskmanage.pm
    Sun Feb 19 20:57:12 2023
    --- Diskmanage.pm
    Thu Feb 16 12:55:34 2023

    ***************
    *** 87,93 ****
     }

     sub get_smart_data {
    !     my ($disk, $healthonly, $smartdparam) = @_;

         assert_blockdev($disk);
         my $smartdata = {};
    --- 87,93 ----
     }

     sub get_smart_data {
    !     my ($disk, $healthonly) = @_;

         assert_blockdev($disk);
         my $smartdata = {};
    ***************
    *** 100,113 ****
         }

         my $cmd = [$SMARTCTL, '-H'];
         #############
    !     if (defined ($smartdparam)) {
    !       push @$cmd, '-A', $smartdparam ,'-f', 'brief' if !$healthonly;
    !     } else {
    !       push @$cmd, '-A', '-f', 'brief' if !$healthonly;
         }
         ##############
    -    push @$cmd, $disk;
         my $returncode = eval {
           run_command($cmd, noerr => 1, outfunc => sub {
               my ($line) = @_;
    --- 100,112 ----
         }

         my $cmd = [$SMARTCTL, '-H'];
    +     push @$cmd, '-A', '-f', 'brief' if !$healthonly;
    +     push @$cmd, $disk;
         #############
    !     if (defined ($data->{smartdparam})) {
    !           push @$cmd, $data->{smartdparam};
         }
         ##############
         my $returncode = eval {
           run_command($cmd, noerr => 1, outfunc => sub {
               my ($line) = @_;
    ***************
    *** 348,355 ****
         };
         $data->{smartdriver}="none";
         if ($hbainfo =~ m/^E: ID_MODEL_FROM_DATABASE=(.*Smart.*)$/m) {
    !           $data->{smartdparam}="-d cciss,".$data->{devport};
    !           my $smartdparam = $data->{smartdparam};
         }


    --- 347,353 ----
         };
         $data->{smartdriver}="none";
         if ($hbainfo =~ m/^E: ID_MODEL_FROM_DATABASE=(.*Smart.*)$/m) {
    !           $data->{smartdparam}="cciss,".$data->{devport};
         }
         

    ***************
    *** 361,367 ****
         } else {
             $data->{serial} = $1 if $info =~ m/^E: ID_SERIAL_SHORT=(\S+)$/m;
         }
    !     # $data->{serial} = $data->{serial}." ".$data->{smartdparam};
         #
         ###########
         $data->{gpt} = $info =~ m/^E: ID_PART_TABLE_TYPE=gpt$/m ? 1 : 0;
    --- 359,365 ----
         } else {
             $data->{serial} = $1 if $info =~ m/^E: ID_SERIAL_SHORT=(\S+)$/m;
         }
    !
         #
         ###########
         $data->{gpt} = $info =~ m/^E: ID_PART_TABLE_TYPE=gpt$/m ? 1 : 0;
    ***************
    *** 591,597 ****
           my ($health, $wearout) = ('UNKNOWN', 'N/A');
           if (!$nosmart) {
               eval {
    !               my $smartdata = get_smart_data($devpath, !is_ssdlike($type),$data->{smartdparam});
                   $health = $smartdata->{health} if $smartdata->{health};

                   if (is_ssdlike($type)) { # if we have an ssd we try to get the wearout indicator
    --- 589,595 ----
           my ($health, $wearout) = ('UNKNOWN', 'N/A');
           if (!$nosmart) {
               eval {
    !               my $smartdata = get_smart_data($devpath, !is_ssdlike($type));
                   $health = $smartdata->{health} if $smartdata->{health};

                   if (is_ssdlike($type)) { # if we have an ssd we try to get the wearout indicator
     
     
     
    aaron
    Guest
    #18
    0
    24.02.2023 09:42:00
    Хм... В твоем диффе есть части, которые не помечены как измененные, и я не могу их найти. Можешь, пожалуйста, сравнить его с репозиторием git https://git.proxmox.com/?p=pve-storage.git;a=summary? Ты можешь склонировать его с помощью `git clone git://git.proxmox.com/git/pve-storage.git`. Альтернативно, можешь переустановить пакет, чтобы вернуться к файлу (возможно, предварительно скопируй его): `apt install --reinstall libpve-storage-perl`.

    Потом дай мне знать, какая версия у тебя, чтобы я знал, с чем сравнивать: `dpkg -l|grep libpve-storage`.
     
     
     
    renovator0306
    Guest
    #19
    0
    01.01.2024 23:12:00
    У меня была та же проблема, но в моем случае серийный номер отображался как нули. В твоем коде ошибка, ты использовал двойные знаки равенства после ID_SCSCI_SERIAL. Я исправил, и серийные номера теперь отображаются правильно. До - обратите внимание на накопители SPCC После изменения кода Git diff Perl: @@ -329,6 +329,7 @@ sub get_udev_info {

        $data->{serial} = 'unknown';
        $data->{serial} = $1 if $info =~ m/^E: ID_SERIAL=(\S+)$/m;
    +    $data->{serial} = $1 if $info =~ m/^E: ID_SCSI_SERIAL=(\S+)$/m;

        $data->{gpt} = $info =~ m/^E: ID_PART_TABLE_TYPE=gpt$/m ? 1 : 0;
     
     
     
    FelixJ
    Guest
    #20
    0
    09.02.2023 11:03:00
    Есть какие-то планы это исправить, потому что информация, которая отображается, явно неверная...?
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры