Привет, есть ли какая-то причина, почему Proxmox не рекомендует выставлять primarycache=metadata (вместо all) на PBS с ZFS? Заполнять ARC (кэш) данными резервных копий, которые ты, скорее всего, больше никогда не прочитаешь, довольно бессмысленно. Это уменьшает доступный кэш для метаданных. Установив primarycache=metadata, мне удалось увеличить скорость резервного копирования с 60 до 180 МиБ/с и сократить время сбора мусора с часов до секунд. Проблема с пропусками в кэше метаданных в том, что отсутствующие данные приходится синхронно считывать с диска (что приостанавливает операции записи), и при медленных HDD это может очень сильно замедлить запись. Конечно, можно использовать специальные устройства (SSD), но на мой взгляд это пустая трата денег. Попробуйте поставить primarycache=metadata. Наш PBS — Intel с 6 ядрами и Hyper-Threading (видится как 12 CPU), 16 ГБ ОЗУ, 6 дисков по 4 ТБ в raidz2 и 10 Gb сетевые интерфейсы. Нет L2ARC, нет SLOG, нет специальных устройств.

Гораздо полезнее использовать SSD как специальные устройства, которые хранят только метаданные. Преимущество в том, что ARC с primarycache=metadata будет помогать только при чтении. Специальные устройства также помогут при записи (даже асинхронной записи, чего SLOG не умеет). Единственное преимущество ARC или L2ARC — что вы не потеряете данные, если SSD выйдет из строя. И корпоративные SSD всё ещё дешевле, чем такая же по объёму дополнительная оперативная память. А продукты Proxmox идут с настройками ZFS по умолчанию. Там нет ни одной оптимизации ZFS из коробки. Оптимизировать нужно самостоятельно, ZFS не рассчитан на работу с оптимальными настройками сразу. Всегда надо менять конфиги перед использованием.

При использовании primarycache=metadata операции, такие как /usr/bin/proxmox-backup-client snapshots --repository 'repo' --output-format text, занимают гораздо больше времени — примерно в 8 раз дольше (с 10 секунд до около 80). Думаю, что такая команда требует чтения чего-то из самих файлов репозитория, и в этом случае выгоднее использовать primarycache=all. Мы применяем эту команду, чтобы мониторить наличие и актуальность резервных копий, возможно, есть какой-то альтернативный способ, который я упустил. Пока продолжаю разбираться с производительностью моих репозиториев, когда для других операций, например verify или restore, кэшируется только metadata.