Аспро: ЛайтШоп [тема: Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности] http://proxmox.su Новое в теме Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности форума Proxmox Backup Server на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Mon, 15 Jun 2026 18:46:43 +0300 Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
Сейчас делаю удалённую синхронизацию (примерно 30 мс задержки, 1 Гбит/с -> 1 Гбит/с) и получаю 18 Мбит/с. Оба сервера на HDD, на приемном сервере 20% iowait, что понятно — там ещё веб-сервер, почтовый сервер и база данных, но при этом загрузка CPU всего около 5%. Попробовал снова с резервного сервера на новый хост с дисками Nvme, iowait на обеих машинах отсутствует, а скорость всё равно около 18 Мбит/с. На отправляющем сервере вообще нет нагрузки, так что при такой задержке это примерно максимум для такого типа передачи.

С учётом этих довольно скромных результатов и такой задержки, на мой взгляд, это гораздо лучше, чем 2,5 Мбит/с при бэкапе/восстановлении на удалённые сервера, и стоит использовать удалённую синхронизацию для копирования бэкапов на удалённый сервер. Если же ваш сервер резервного копирования находится очень близко к pve серверу с минимальной задержкой — тогда, наверное, картина будет совсем другой.
07.09.2020 21:59:00, sukerman.]]> http://proxmox.su/forum/messages/forum64/message343759/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343759/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Mon, 07 Sep 2020 21:59:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
Удалённая синхронизация работает ужасно медленно. Получаю скорость всего 500 КБ/с при линии на 5 МБ/с.
07.09.2020 21:37:00, carsten2.]]> http://proxmox.su/forum/messages/forum64/message343758/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343758/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Mon, 07 Sep 2020 21:37:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
смотрите эту ошибку: https://bugzilla.proxmox.com/show_bug.cgi?id=2983
07.09.2020 15:48:00, dcsapak.]]> http://proxmox.su/forum/messages/forum64/message343757/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343757/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Mon, 07 Sep 2020 15:48:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
Локально у меня получается: Code: ┌───────────────────────────────────┬──────────────────────┐­  
│ Name                              │ Value                │  
╞═══════════════════════════════════╪══════════════════════╡­  
│ TLS (максимальная скорость загрузки бэкапа) │ 707.85 MB/s (120%)   │  
├───────────────────────────────────┼──────────────────────┤­  
│ Скорость вычисления контрольной суммы SHA256 │ 2028.31 MB/s (96%)   │  
├───────────────────────────────────┼──────────────────────┤­  
│ Скорость сжатия ZStd уровня 1    │ 2298.23 MB/s (106%)  │  
├───────────────────────────────────┼──────────────────────┤­  
│ Скорость распаковки ZStd уровня 1│ 10448.70 MB/s (130%) │  
├───────────────────────────────────┼──────────────────────┤­  
│ Скорость шифрования AES256 GCM   │ 3685.61 MB/s (97%)   │  
└───────────────────────────────────┴──────────────────────┘­  

Через интернет, с одного сервера на другой, пинг 1.72 мс, соединение 1 Гбит/с: Code: ┌───────────────────────────────────┬────────────────────┐  
│ Name                              │ Value              │  
╞═══════════════════════════════════╪════════════════════╡  
│ TLS (максимальная скорость загрузки бэкапа) │ 34.98 MB/s (6%)    │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость вычисления контрольной суммы SHA256 │ 1428.84 MB/s (67%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость сжатия ZStd уровня 1    │ 1132.24 MB/s (52%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость распаковки ZStd уровня 1│ 4115.81 MB/s (51%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость шифрования AES256 GCM   │ 2168.28 MB/s (57%) │  
└───────────────────────────────────┴────────────────────┘  

Через интернет, с одного сервера на другой, пинг 30 мс, соединение 1 Гбит/с: Code: ┌───────────────────────────────────┬────────────────────┐  
│ Name                              │ Value              │  
╞═══════════════════════════════════╪════════════════════╡  
│ TLS (максимальная скорость загрузки бэкапа) │ 2.39 MB/s (0%)     │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость вычисления контрольной суммы SHA256 │ 1428.68 MB/s (67%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость сжатия ZStd уровня 1    │ 1137.23 MB/s (53%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость распаковки ZStd уровня 1│ 4142.02 MB/s (51%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость шифрования AES256 GCM   │ 2267.90 MB/s (60%) │  
└───────────────────────────────────┴────────────────────┘  

Это нормально? Есть советы, как увеличить скорость? Ограничивает ли задержка? Или бэкапы всегда должны быть локальными, а потом уже переноситься через remote_sync? Спасибо!
07.09.2020 13:32:00, sukerman.]]> http://proxmox.su/forum/messages/forum64/message343756/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343756/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Mon, 07 Sep 2020 13:32:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
Код: proxmox-backup-client benchmark  
Пароль для "xxxxxxxxx@pbs": ******************  
Загружено 147 кусков за 5 секунд.  
Время на запрос: 36374 микросекунд.  
Скорость TLS: 115.31 МБ/с  
Скорость SHA256: 1382.31 МБ/с  
Скорость сжатия: 1525.76 МБ/с  
Скорость распаковки: 7045.81 МБ/с  
Скорость AES256/GCM: 2523.92 МБ/с  
┌───────────────────────────────────┬────────────────────┐  
│ Название                          │ Значение           │  
╞═══════════════════════════════════╪════════════════════╡  
│ TLS (максимальная скорость загрузки бэкапа) │ 115.31 МБ/с (20%)  │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость вычисления контрольной суммы SHA256 │ 1382.31 МБ/с (65%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость сжатия ZStd уровень 1    │ 1525.76 МБ/с (71%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость распаковки ZStd уровень 1│ 7045.81 МБ/с (87%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость шифрования AES256 GCM    │ 2523.92 МБ/с (66%) │  
└───────────────────────────────────┴────────────────────┘  
proxmox-backup-client benchmark  7,42 с user 0,44 с system 30% cpu 25,781 всего
06.09.2020 20:06:00, fireon.]]> http://proxmox.su/forum/messages/forum64/message343755/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343755/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Sun, 06 Sep 2020 20:06:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
E3-1230v2 на виртуальной машине proxmox-backup-client benchmark --repository backup2  
Пароль для "root@pam": **********  
Загружено 341 фрагмент за 5 секунд.  
Время на запрос: 14735 микросекунд.  
Скорость TLS: 284.65 МБ/с  
Скорость SHA256: 315.07 МБ/с  
Скорость сжатия: 651.47 МБ/с  
Скорость распаковки: 1501.77 МБ/с  
Скорость AES256/GCM: 885.17 МБ/с  

┌───────────────────────────────────────┬───────────────────­─┐  
│ Название                              │ Значение           │  
╞═══════════════════════════════════════╪═══════════════════­═╡  
│ TLS (максимальная скорость загрузки) │ 284.65 МБ/с (48%)  │  
├───────────────────────────────────────┼───────────────────­─┤  
│ Скорость вычисления контрольной суммы SHA256 │ 315.07 МБ/с (15%)  │  
├───────────────────────────────────────┼───────────────────­─┤  
│ Скорость сжатия ZStd уровень 1        │ 651.47 МБ/с (30%)  │  
├───────────────────────────────────────┼───────────────────­─┤  
│ Скорость распаковки ZStd уровень 1    │ 1501.77 МБ/с (19%) │  
├───────────────────────────────────────┼───────────────────­─┤  
│ Скорость шифрования AES256 GCM         │ 885.17 МБ/с (23%)  │  
└───────────────────────────────────────┴───────────────────­─┘
04.09.2020 18:58:00, Egner.]]> http://proxmox.su/forum/messages/forum64/message343754/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343754/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Fri, 04 Sep 2020 18:58:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
vm 2 ядра Xeon E2236 (cpu=host)  
Код: загружено 1136 чанков за 5 секунд.  
Время на запрос: 4418 микросекунд.  
Скорость TLS: 949.27 МБ/с  
Скорость SHA256: 606.75 МБ/с  
Скорость сжатия: 1797.42 МБ/с  
Скорость распаковки: 8328.39 МБ/с  
Скорость AES256/GCM: 4592.29 МБ/с  

┌───────────────────────────────────┬─────────────────────┐  
│ Название                          │ Значение            │  
╞═══════════════════════════════════╪═════════════════════╡  
│ TLS (максимальная скорость загрузки резервных копий) │ 949.27 МБ/с (161%) │  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость вычисления контрольной суммы SHA256          │ 606.75 МБ/с (29%)  │  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость сжатия ZStd уровня 1                         │ 1797.42 МБ/с (83%) │  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость распаковки ZStd уровня 1                     │ 8328.39 МБ/с (103%)│  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость шифрования AES256 GCM                         │ 4592.29 МБ/с (121%)│  
└───────────────────────────────────┴─────────────────────┘
14.08.2020 10:31:00, mbosma.]]> http://proxmox.su/forum/messages/forum64/message343753/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343753/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Fri, 14 Aug 2020 10:31:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
vm 4 ядра Xeon Gold 6140 2.3 ГГц (cpu=skylake-server)  
Загружено 831 чанков за 5 секунд. Время на запрос: 6035 микросекунд.  
Скорость TLS: 694.90 МБ/с  
Скорость SHA256: 474.73 МБ/с  
Скорость сжатия: 1302.23 МБ/с  
Скорость распаковки: 4416.81 МБ/с  
Скорость AES256/GCM: 3395.26 МБ/с  

┌──────────────────────────────────────┬────────────────────­┐  
│ Название                             │ Значение           │  
╞══════════════════════════════════════╪════════════════════­╡  
│ TLS (максимальная скорость загрузки) │ 694.90 МБ/с (118%) │  
├──────────────────────────────────────┼────────────────────­┤  
│ Скорость вычисления SHA256            │ 474.73 МБ/с (22%)  │  
├──────────────────────────────────────┼────────────────────­┤  
│ Скорость сжатия ZStd уровень 1        │ 1302.23 МБ/с (60%) │  
├──────────────────────────────────────┼────────────────────­┤  
│ Скорость распаковки ZStd уровень 1    │ 4416.81 МБ/с (55%) │  
├──────────────────────────────────────┼────────────────────­┤  
│ Скорость шифрования AES256 GCM        │ 3395.26 МБ/с (89%) │  
└──────────────────────────────────────┴────────────────────­┘
13.08.2020 16:52:00, Andros.]]> http://proxmox.su/forum/messages/forum64/message343752/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343752/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Thu, 13 Aug 2020 16:52:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
Сервер PBS в виртуальной машине на PVE. 1 ГБ оперативки, 2 vCPU. Backend store — это диск-образ на CIFS шару на Freebox (максимальная скорость около 25 МБ/с). Загрузил 101 кусок за 5 секунд. Время на запрос: 52430 микроcекунд. Скорость TLS: 80.00 МБ/с. Скорость SHA256: 107.57 МБ/с. Скорость сжатия: 295.80 МБ/с. Скорость разжатия: 957.99 МБ/с. Скорость AES256/GCM: 45.41 МБ/с.

┌───────────────────────────────────┬───────────────────┐  
│ Name                              │ Value             │  
╞═══════════════════════════════════╪═══════════════════╡  
│ TLS (максимальная скорость загрузки бэкапа) │ 80.00 МБ/с (14%)  │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость вычисления SHA256 контрольной суммы │ 107.57 МБ/с (5%)  │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость сжатия ZStd уровня 1      │ 295.80 МБ/с (14%) │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость разжатия ZStd уровня 1    │ 957.99 МБ/с (12%) │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость шифрования AES256 GCM     │ 45.41 МБ/с (1%)   │  
└───────────────────────────────────┴───────────────────┘

С параметром cpu=host: загрузил 174 куска за 5 секунд. Время на запрос: 29190 микроcекунд. Скорость TLS: 143.69 МБ/с. Скорость SHA256: 469.64 МБ/с. Скорость сжатия: 342.56 МБ/с. Скорость разжатия: 773.49 МБ/с. Скорость AES256/GCM: 454.77 МБ/с.

┌───────────────────────────────────┬───────────────────┐  
│ Name                              │ Value             │  
╞═══════════════════════════════════╪═══════════════════╡  
│ TLS (максимальная скорость загрузки бэкапа) │ 143.69 МБ/с (24%) │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость вычисления SHA256 контрольной суммы │ 469.64 МБ/с (22%) │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость сжатия ZStd уровня 1      │ 342.56 МБ/с (16%) │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость разжатия ZStd уровня 1    │ 773.49 МБ/с (10%) │  
├───────────────────────────────────┼───────────────────┤  
│ Скорость шифрования AES256 GCM     │ 454.77 МБ/с (12%) │  
└───────────────────────────────────┴───────────────────┘

Другая моя виртуалка на Xeon 1246v3 / 2 ГБ / SSD NVMe для хранения. Загрузил 756 кусков за 5 секунд. Время на запрос: 6634 микроcекунд. Скорость TLS: 632.22 МБ/с. Скорость SHA256: 481.40 МБ/с. Скорость сжатия: 1232.06 МБ/с. Скорость разжатия: 4029.75 МБ/с. Скорость AES256/GCM: 2533.91 МБ/с.

┌───────────────────────────────────┬────────────────────┐  
│ Name                              │ Value              │  
╞═══════════════════════════════════╪════════════════════╡  
│ TLS (максимальная скорость загрузки бэкапа) │ 632.22 МБ/с (107%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость вычисления SHA256 контрольной суммы │ 481.40 МБ/с (23%)  │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость сжатия ZStd уровня 1      │ 1232.06 МБ/с (57%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость разжатия ZStd уровня 1    │ 4029.75 МБ/с (50%) │  
├───────────────────────────────────┼────────────────────┤  
│ Скорость шифрования AES256 GCM     │ 2533.91 МБ/с (67%) │  
└───────────────────────────────────┴────────────────────┘
12.08.2020 15:58:00, Dark26.]]> http://proxmox.su/forum/messages/forum64/message343751/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343751/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Wed, 12 Aug 2020 15:58:00 +0300 Proxmox Backup Server Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности Proxmox Backup Server в форуме Proxmox Backup Server.
Мы предоставляем небольшой инструмент для бенчмарка, который показывает некоторые метрики вашего хранилища на Proxmox Backup Server. Вот пример:  
Код:  
root@pbs-20:~# proxmox-backup-client benchmark --repository mybackupstore

Загружено 703 чанка за 5 секунд.  
Время на запрос: 7131 микросекунд.  
Скорость TLS: 588.11 МБ/с  
Скорость SHA256: 1629.45 МБ/с  
Скорость сжатия: 1855.22 МБ/с  
Скорость распаковки: 8156.74 МБ/с  
Скорость AES256/GCM: 2949.58 МБ/с  
┌───────────────────────────────────┬─────────────────────┐  
│ Название                          │ Значение            │  
╞═══════════════════════════════════╪═════════════════════╡  
│ TLS (максимальная скорость загрузки бэкапа) │ 588.11 МБ/с (100%) │  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость вычисления SHA256        │ 1629.45 МБ/с (77%)  │  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость сжатия ZStd уровень 1    │ 1855.22 МБ/с (86%)  │  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость распаковки ZStd уровень 1│ 8156.74 МБ/с (101%) │  
├───────────────────────────────────┼─────────────────────┤  
│ Скорость шифрования AES256 GCM    │ 2949.58 МБ/с (78%)  │  
└───────────────────────────────────┴─────────────────────┘  
root@pbs-20:~#  

Это AMD EPYC 7302P с 16 ядрами (1 сокет), хранилище — зеркальный ZFS на 2 HDD по 6 ТБ.
11.07.2020 16:06:00, tom.]]> http://proxmox.su/forum/messages/forum64/message343750/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti http://proxmox.su/forum/messages/forum64/message343750/80016-naskolko-bystro-rabotaet-vash-rezervnyy-khranilishche_-instrument-dlya-testirovaniya-proizvoditelnosti Sat, 11 Jul 2020 16:06:00 +0300 Proxmox Backup Server