+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

RSS

Насколько быстро работает ваш резервный хранилище? Инструмент для тестирования производительности, Proxmox Backup Server

tom

Guest

11.07.2020 16:06:00

Мы предоставляем небольшой инструмент для бенчмарка, который показывает некоторые метрики вашего хранилища на Proxmox Backup Server. Вот пример:
Код:
root@pbs-20:~# proxmox-backup-client benchmark --repository mybackupstore

Загружено 703 чанка за 5 секунд.
Время на запрос: 7131 микросекунд.
Скорость TLS: 588.11 МБ/с
Скорость SHA256: 1629.45 МБ/с
Скорость сжатия: 1855.22 МБ/с
Скорость распаковки: 8156.74 МБ/с
Скорость AES256/GCM: 2949.58 МБ/с
┌───────────────────────────────────┬─────────────────────┐
│ Название │ Значение │
╞═══════════════════════════════════╪═════════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 588.11 МБ/с (100%) │
├───────────────────────────────────┼─────────────────────┤
│ Скорость вычисления SHA256 │ 1629.45 МБ/с (77%) │
├───────────────────────────────────┼─────────────────────┤
│ Скорость сжатия ZStd уровень 1 │ 1855.22 МБ/с (86%) │
├───────────────────────────────────┼─────────────────────┤
│ Скорость распаковки ZStd уровень 1│ 8156.74 МБ/с (101%) │
├───────────────────────────────────┼─────────────────────┤
│ Скорость шифрования AES256 GCM │ 2949.58 МБ/с (78%) │
└───────────────────────────────────┴─────────────────────┘
root@pbs-20:~#

Это AMD EPYC 7302P с 16 ядрами (1 сокет), хранилище — зеркальный ZFS на 2 HDD по 6 ТБ.

Dark26

Guest

12.08.2020 15:58:00

Сервер PBS в виртуальной машине на PVE. 1 ГБ оперативки, 2 vCPU. Backend store — это диск-образ на CIFS шару на Freebox (максимальная скорость около 25 МБ/с). Загрузил 101 кусок за 5 секунд. Время на запрос: 52430 микроcекунд. Скорость TLS: 80.00 МБ/с. Скорость SHA256: 107.57 МБ/с. Скорость сжатия: 295.80 МБ/с. Скорость разжатия: 957.99 МБ/с. Скорость AES256/GCM: 45.41 МБ/с.

┌───────────────────────────────────┬───────────────────┐
│ Name │ Value │
╞═══════════════════════════════════╪═══════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 80.00 МБ/с (14%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость вычисления SHA256 контрольной суммы │ 107.57 МБ/с (5%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость сжатия ZStd уровня 1 │ 295.80 МБ/с (14%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость разжатия ZStd уровня 1 │ 957.99 МБ/с (12%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость шифрования AES256 GCM │ 45.41 МБ/с (1%) │
└───────────────────────────────────┴───────────────────┘

С параметром cpu=host: загрузил 174 куска за 5 секунд. Время на запрос: 29190 микроcекунд. Скорость TLS: 143.69 МБ/с. Скорость SHA256: 469.64 МБ/с. Скорость сжатия: 342.56 МБ/с. Скорость разжатия: 773.49 МБ/с. Скорость AES256/GCM: 454.77 МБ/с.

┌───────────────────────────────────┬───────────────────┐
│ Name │ Value │
╞═══════════════════════════════════╪═══════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 143.69 МБ/с (24%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость вычисления SHA256 контрольной суммы │ 469.64 МБ/с (22%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость сжатия ZStd уровня 1 │ 342.56 МБ/с (16%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость разжатия ZStd уровня 1 │ 773.49 МБ/с (10%) │
├───────────────────────────────────┼───────────────────┤
│ Скорость шифрования AES256 GCM │ 454.77 МБ/с (12%) │
└───────────────────────────────────┴───────────────────┘

Другая моя виртуалка на Xeon 1246v3 / 2 ГБ / SSD NVMe для хранения. Загрузил 756 кусков за 5 секунд. Время на запрос: 6634 микроcекунд. Скорость TLS: 632.22 МБ/с. Скорость SHA256: 481.40 МБ/с. Скорость сжатия: 1232.06 МБ/с. Скорость разжатия: 4029.75 МБ/с. Скорость AES256/GCM: 2533.91 МБ/с.

┌───────────────────────────────────┬────────────────────┐
│ Name │ Value │
╞═══════════════════════════════════╪════════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 632.22 МБ/с (107%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость вычисления SHA256 контрольной суммы │ 481.40 МБ/с (23%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость сжатия ZStd уровня 1 │ 1232.06 МБ/с (57%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость разжатия ZStd уровня 1 │ 4029.75 МБ/с (50%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость шифрования AES256 GCM │ 2533.91 МБ/с (67%) │
└───────────────────────────────────┴────────────────────┘

Andros

Guest

13.08.2020 16:52:00

vm 4 ядра Xeon Gold 6140 2.3 ГГц (cpu=skylake-server)
Загружено 831 чанков за 5 секунд. Время на запрос: 6035 микросекунд.
Скорость TLS: 694.90 МБ/с
Скорость SHA256: 474.73 МБ/с
Скорость сжатия: 1302.23 МБ/с
Скорость распаковки: 4416.81 МБ/с
Скорость AES256/GCM: 3395.26 МБ/с

┌──────────────────────────────────────┬────────────────────┐
│ Название │ Значение │
╞══════════════════════════════════════╪════════════════════╡
│ TLS (максимальная скорость загрузки) │ 694.90 МБ/с (118%) │
├──────────────────────────────────────┼────────────────────┤
│ Скорость вычисления SHA256 │ 474.73 МБ/с (22%) │
├──────────────────────────────────────┼────────────────────┤
│ Скорость сжатия ZStd уровень 1 │ 1302.23 МБ/с (60%) │
├──────────────────────────────────────┼────────────────────┤
│ Скорость распаковки ZStd уровень 1 │ 4416.81 МБ/с (55%) │
├──────────────────────────────────────┼────────────────────┤
│ Скорость шифрования AES256 GCM │ 3395.26 МБ/с (89%) │
└──────────────────────────────────────┴────────────────────┘

mbosma

Guest

14.08.2020 10:31:00

vm 2 ядра Xeon E2236 (cpu=host)
Код: загружено 1136 чанков за 5 секунд.
Время на запрос: 4418 микросекунд.
Скорость TLS: 949.27 МБ/с
Скорость SHA256: 606.75 МБ/с
Скорость сжатия: 1797.42 МБ/с
Скорость распаковки: 8328.39 МБ/с
Скорость AES256/GCM: 4592.29 МБ/с

┌───────────────────────────────────┬─────────────────────┐
│ Название │ Значение │
╞═══════════════════════════════════╪═════════════════════╡
│ TLS (максимальная скорость загрузки резервных копий) │ 949.27 МБ/с (161%) │
├───────────────────────────────────┼─────────────────────┤
│ Скорость вычисления контрольной суммы SHA256 │ 606.75 МБ/с (29%) │
├───────────────────────────────────┼─────────────────────┤
│ Скорость сжатия ZStd уровня 1 │ 1797.42 МБ/с (83%) │
├───────────────────────────────────┼─────────────────────┤
│ Скорость распаковки ZStd уровня 1 │ 8328.39 МБ/с (103%)│
├───────────────────────────────────┼─────────────────────┤
│ Скорость шифрования AES256 GCM │ 4592.29 МБ/с (121%)│
└───────────────────────────────────┴─────────────────────┘

Egner

Guest

04.09.2020 18:58:00

E3-1230v2 на виртуальной машине proxmox-backup-client benchmark --repository backup2
Пароль для "root@pam": **********
Загружено 341 фрагмент за 5 секунд.
Время на запрос: 14735 микросекунд.
Скорость TLS: 284.65 МБ/с
Скорость SHA256: 315.07 МБ/с
Скорость сжатия: 651.47 МБ/с
Скорость распаковки: 1501.77 МБ/с
Скорость AES256/GCM: 885.17 МБ/с

┌───────────────────────────────────────┬────────────────────┐
│ Название │ Значение │
╞═══════════════════════════════════════╪════════════════════╡
│ TLS (максимальная скорость загрузки) │ 284.65 МБ/с (48%) │
├───────────────────────────────────────┼────────────────────┤
│ Скорость вычисления контрольной суммы SHA256 │ 315.07 МБ/с (15%) │
├───────────────────────────────────────┼────────────────────┤
│ Скорость сжатия ZStd уровень 1 │ 651.47 МБ/с (30%) │
├───────────────────────────────────────┼────────────────────┤
│ Скорость распаковки ZStd уровень 1 │ 1501.77 МБ/с (19%) │
├───────────────────────────────────────┼────────────────────┤
│ Скорость шифрования AES256 GCM │ 885.17 МБ/с (23%) │
└───────────────────────────────────────┴────────────────────┘

fireon

Guest

06.09.2020 20:06:00

Код: proxmox-backup-client benchmark
Пароль для "xxxxxxxxx@pbs": ******************
Загружено 147 кусков за 5 секунд.
Время на запрос: 36374 микросекунд.
Скорость TLS: 115.31 МБ/с
Скорость SHA256: 1382.31 МБ/с
Скорость сжатия: 1525.76 МБ/с
Скорость распаковки: 7045.81 МБ/с
Скорость AES256/GCM: 2523.92 МБ/с
┌───────────────────────────────────┬────────────────────┐
│ Название │ Значение │
╞═══════════════════════════════════╪════════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 115.31 МБ/с (20%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость вычисления контрольной суммы SHA256 │ 1382.31 МБ/с (65%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость сжатия ZStd уровень 1 │ 1525.76 МБ/с (71%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость распаковки ZStd уровень 1│ 7045.81 МБ/с (87%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость шифрования AES256 GCM │ 2523.92 МБ/с (66%) │
└───────────────────────────────────┴────────────────────┘
proxmox-backup-client benchmark 7,42 с user 0,44 с system 30% cpu 25,781 всего

sukerman

Guest

07.09.2020 13:32:00

Локально у меня получается: Code: ┌───────────────────────────────────┬──────────────────────┐
│ Name │ Value │
╞═══════════════════════════════════╪══════════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 707.85 MB/s (120%) │
├───────────────────────────────────┼──────────────────────┤
│ Скорость вычисления контрольной суммы SHA256 │ 2028.31 MB/s (96%) │
├───────────────────────────────────┼──────────────────────┤
│ Скорость сжатия ZStd уровня 1 │ 2298.23 MB/s (106%) │
├───────────────────────────────────┼──────────────────────┤
│ Скорость распаковки ZStd уровня 1│ 10448.70 MB/s (130%) │
├───────────────────────────────────┼──────────────────────┤
│ Скорость шифрования AES256 GCM │ 3685.61 MB/s (97%) │
└───────────────────────────────────┴──────────────────────┘

Через интернет, с одного сервера на другой, пинг 1.72 мс, соединение 1 Гбит/с: Code: ┌───────────────────────────────────┬────────────────────┐
│ Name │ Value │
╞═══════════════════════════════════╪════════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 34.98 MB/s (6%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость вычисления контрольной суммы SHA256 │ 1428.84 MB/s (67%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость сжатия ZStd уровня 1 │ 1132.24 MB/s (52%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость распаковки ZStd уровня 1│ 4115.81 MB/s (51%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость шифрования AES256 GCM │ 2168.28 MB/s (57%) │
└───────────────────────────────────┴────────────────────┘

Через интернет, с одного сервера на другой, пинг 30 мс, соединение 1 Гбит/с: Code: ┌───────────────────────────────────┬────────────────────┐
│ Name │ Value │
╞═══════════════════════════════════╪════════════════════╡
│ TLS (максимальная скорость загрузки бэкапа) │ 2.39 MB/s (0%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость вычисления контрольной суммы SHA256 │ 1428.68 MB/s (67%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость сжатия ZStd уровня 1 │ 1137.23 MB/s (53%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость распаковки ZStd уровня 1│ 4142.02 MB/s (51%) │
├───────────────────────────────────┼────────────────────┤
│ Скорость шифрования AES256 GCM │ 2267.90 MB/s (60%) │
└───────────────────────────────────┴────────────────────┘

Это нормально? Есть советы, как увеличить скорость? Ограничивает ли задержка? Или бэкапы всегда должны быть локальными, а потом уже переноситься через remote_sync? Спасибо!

dcsapak Guest	#8 0 07.09.2020 15:48:00 смотрите эту ошибку: https://bugzilla.proxmox.com/show_bug.cgi?id=2983

carsten2 Guest	#9 0 07.09.2020 21:37:00 Удалённая синхронизация работает ужасно медленно. Получаю скорость всего 500 КБ/с при линии на 5 МБ/с.

sukerman Guest	#10 0 07.09.2020 21:59:00 Сейчас делаю удалённую синхронизацию (примерно 30 мс задержки, 1 Гбит/с -> 1 Гбит/с) и получаю 18 Мбит/с. Оба сервера на HDD, на приемном сервере 20% iowait, что понятно — там ещё веб-сервер, почтовый сервер и база данных, но при этом загрузка CPU всего около 5%. Попробовал снова с резервного сервера на новый хост с дисками Nvme, iowait на обеих машинах отсутствует, а скорость всё равно около 18 Мбит/с. На отправляющем сервере вообще нет нагрузки, так что при такой задержке это примерно максимум для такого типа передачи. С учётом этих довольно скромных результатов и такой задержки, на мой взгляд, это гораздо лучше, чем 2,5 Мбит/с при бэкапе/восстановлении на удалённые сервера, и стоит использовать удалённую синхронизацию для копирования бэкапов на удалённый сервер. Если же ваш сервер резервного копирования находится очень близко к pve серверу с минимальной задержкой — тогда, наверное, картина будет совсем другой.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры