Не помню, где именно я это нашёл, но раз уж вы всё ещё ломаете голову, проблема в вашем прокси, а не в authentik. Нужно добавить несколько заголовков в обратный прокси, который стоит перед proxmox. Пересмотрев свою конфигурацию, похоже, я добавил в настройки NPM такое:

proxy_set_header X-Real-IP $remote_addr;  
proxy_set_header X-Forwarded-Proto $scheme;  
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;  
proxy_set_header Upgrade $http_upgrade;  
proxy_set_header Connection "upgrade";  
proxy_http_version 1.1;

Но учтите, эти параметры нужно вставлять именно внутрь блока location /, просто добавить их в «extra options» не получится.