http://proxmox.su Новое в теме Задача сборки мусора не выполняется из-за ошибки "EMFILE: Слишком много открытых файлов". форума Proxmox Backup Server на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Thu, 21 May 2026 13:02:24 +0300 Задача сборки мусора не выполняется из-за ошибки "EMFILE: Слишком много открытых файлов". Proxmox Backup Server в форуме Proxmox Backup Server.
Здравствуйте! У меня периодически возникают ошибки "Too many open files" (EMFILE, ошибка ОС 24) с Proxmox Backup Server (PBS) версии 3.4.1, установленным на выделенном сервере Dell R720 (файловая система: XFS). Примеры ошибок:

Во время проверки резервных копий: не удаётся проверить chunk, ошибка загрузки — хранилище 'backup' [...] — слишком много открытых файлов (ошибка ОС 24).

Во время задач резервного копирования: POST /fixed_chunk: 400 Bad Request: вставка chunk [...] не удалась: EMFILE: слишком много открытых файлов.

Статистика репозитория:  
Количество пространств имён: find /backup/ns/ -type d | wc -l — 6024  
Количество файлов chunk: find /backup/.chunks/ -type f | wc -l — 36 966 951

Дополнительные наблюдения:  
Ошибки появляются как во время сбора мусора, так и при обычном резервном копировании. Чёткой закономерности нет, проблема возникает время от времени. Использование дискового пространства, процессора и оперативной памяти в норме.

Что делал для устранения:  
- Проверил версию PBS и обновления.  
- Проверил свободное место на диске (без проблем).  
- Мониторил использование системных ресурсов.

Вопросы к сообществу:  
Требуется ли для такого объёма данных (почти 37 миллионов файлов chunk) особая настройка?  
Какие лучшие практики по конфигурации PBS для крупных репозиториев?  
Есть ли рекомендуемые системные или ядровые лимиты (например, ulimit, fs.file-max) для подобных случаев?  

Буду очень признателен за советы по диагностике и решению этой проблемы!
22.05.2025 16:52:00, undefine.]]> http://proxmox.su/forum/messages/forum64/message360967/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. http://proxmox.su/forum/messages/forum64/message360967/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. Thu, 22 May 2025 16:52:00 +0300 Proxmox Backup Server Задача сборки мусора не выполняется из-за ошибки "EMFILE: Слишком много открытых файлов". Proxmox Backup Server в форуме Proxmox Backup Server.
Извини, не совсем. Я забросил PBS VM и создал новую, указав в ней NFS-шару на другом сервере.
14.02.2025 15:10:00, tbahn.]]> http://proxmox.su/forum/messages/forum64/message360966/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. http://proxmox.su/forum/messages/forum64/message360966/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. Fri, 14 Feb 2025 15:10:00 +0300 Proxmox Backup Server Задача сборки мусора не выполняется из-за ошибки "EMFILE: Слишком много открытых файлов". Proxmox Backup Server в форуме Proxmox Backup Server.
Сейчас у меня такая же проблема, как и у тебя. Ты как-нибудь смог её наверняка исправить?
22.12.2024 09:49:00, jobine23.]]> http://proxmox.su/forum/messages/forum64/message360965/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. http://proxmox.su/forum/messages/forum64/message360965/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. Sun, 22 Dec 2024 09:49:00 +0300 Proxmox Backup Server Задача сборки мусора не выполняется из-за ошибки "EMFILE: Слишком много открытых файлов". Proxmox Backup Server в форуме Proxmox Backup Server.
Я сократил количество старых резервных копий, которые храню. Помогло. Но только на несколько дней.
13.09.2024 10:36:00, tbahn.]]> http://proxmox.su/forum/messages/forum64/message360964/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. http://proxmox.su/forum/messages/forum64/message360964/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. Fri, 13 Sep 2024 10:36:00 +0300 Proxmox Backup Server Задача сборки мусора не выполняется из-за ошибки "EMFILE: Слишком много открытых файлов". Proxmox Backup Server в форуме Proxmox Backup Server.
Никто не сталкивался с такой же проблемой? Это всего лишь один частный сервер Proxmox VE, резервная копия которого делается через этот PBS. Как это может быть слишком много?
02.09.2024 07:47:00, tbahn.]]> http://proxmox.su/forum/messages/forum64/message360963/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. http://proxmox.su/forum/messages/forum64/message360963/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. Mon, 02 Sep 2024 07:47:00 +0300 Proxmox Backup Server Задача сборки мусора не выполняется из-за ошибки "EMFILE: Слишком много открытых файлов". Proxmox Backup Server в форуме Proxmox Backup Server.
Внезапно задача очистки мусора начала проходить с ошибкой: TASK ERROR: обновление atime не удалось для куска/файла "/mnt/proxmox-backup/.chunks/69f8/69f82c53064d2eb7795d401a63177ebda5bba778f02db397­235e6508a2fee0ed" - EMFILE: слишком много открытых файлов. Это происходит после того, как обработано 85% (212 из 249 файлов индекса) и всегда с одним и тем же куском. Обновил все пакеты, перезагрузился, повторил попытку. Увеличил количество открытых файлов в /etc/security/limits.conf с 2^16-1 (65 535) шаг за шагом, каждый раз удваивая, до 2^20-1 (1 048 575). Каждый раз перезагружался и пробовал задание снова.

*                soft    nofile          1048575
*                hard    nofile          1048575

Задания prune и verify проходят успешно. stat /mnt/proxmox-backup/.chunks/69f8/69f82c53064d2eb7795d401a63177ebda5bba778f02db397­235e6508a2fee0ed отрабатывает нормально.
12.08.2024 13:36:00, tbahn.]]> http://proxmox.su/forum/messages/forum64/message360962/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. http://proxmox.su/forum/messages/forum64/message360962/81834-zadacha-sborki-musora-ne-vypolnyaetsya-iz_za-oshibki-_emfile_-slishkom-mnogo-otkrytykh-faylov_. Mon, 12 Aug 2024 13:36:00 +0300 Proxmox Backup Server