Ich habe mir einen neuen Unraid-Server mit 16GB RAM installiert, dazu
Paperless NGX mit Redis.
Nach dem Import von ca. 500 PDFs reagierte der Server nicht mehr, der RAM-Speicher war über 100% ausgelastet!
Nach diesem Fehler habe ich nochmal alles neu installiert und Importiert.
Der Fehler trat wieder auf!
Ohne Aktion war der RAM nach einigen Tagen wieder bei 100%.
Verursacht wurde der RAM-Überlauf von Gunicorn, das von Paperless NGX genutzt wird!
Hallo zusammen
ich bin neu hier im Forum, aber lese schon eine Zeit lang interessiert mit.
Bei mir ist es leider das gleiche Problem wie bei 6road.
Setup:
paperless-ngx Version 2.13.5 als Docker-Container
DB = SQLite
DS218+ mit 10Gb RAM
DSM 7.2.1-69057 Update 6
Clients = Web-Oberfläche und Paperparrot (IOS)
Der paperless-Container belegt im Leerlauf zwischen 250 und 500 Mb RAM, CPU-Last ist unter 1%.
Wenn ich mich über die Weboberfläche anmelde oder Paperparrot starte ändern sich die Werte so gut wie nicht.
Sobald ich dann aber in die Dokumente wechsele, schraubt sich die CPU auf über 80% hoch und der Speicherverbrauch auf über 7Gb:
Im Hintergrund werden zu diesem Zeitpunkt keine Dokumente konsumiert, noch läuft irgendeine andere Task.
Melde ich mich ab oder beende die App dauert es 1-2 Minuten, ehe CPU-Last und RAM-Verbrauch wieder auf „normale“ Werte runtergehen.
Auch bei mir ist es eindeutig der Prozess „gunicorn : worker [paperless.asgi:application]“ im paperless-Container.
Die anderen Container (redis, tika, gotenberg) sind komplett unauffällig.
Ich hätte paperless-ngx eigentlich schon wieder deinstalliert, aber das Teil gefällt mir einfach viel zu gut!
auch ich habe Paperless komplett deinstalliert und alles neu eingegeben
E-Mail und Gotenberg etc. entfernt, nur noch Paperless.
Heute habe ich einen Memtest durchgeführt, alles ok.
Die nächsten zwei Tage wird der Server ohne Paperless laufen, um zu schauen ob der RAM über 50% ansteigt.
Das habe ich auch schon ausprobiert - solange ich mich nicht am Paperless-Server anmelde (egal ob über den Browser oder über die App auf dem Smartphone) sind die Werte absolut in Ordnung:
Ich habe noch ein paar andere Container laufen, von daher passen die Werte.
Sobald ich mich anmelde und in die Dokumente wechsele gehen die Werte schlagartig hoch.
Wenn ich das richtig verstanden habe ist Gunicorn ja der HTTP-Server, über den paperless die GUI und die Daten bereitstellt.
Was mich wundert ist, dass dieses Problem scheinbar nicht bei allen auftritt.
Also muss es ja rein logisch mit der Konfiguration zu tun haben.
Was den RAM-Verbrauch im Leerlauf angeht scheint das jetzt deutlich stabiler zu laufen.
Auch wenn ich mich an der Oberfläche anmelde und in den Dokumenten bewege gibt es keinen sprunghaften Anstieg des Speicherverbrauchs mehr.
Beim Konsumieren gehen CPU und Speicherverbrauch natürlich hoch - wenn der Vorgang abgeschlossen ist, normalisieren sich die Werte aber sofort wieder.
Zum Testen habe ich gestern 60 Dokumente am Stück reingezogen, das hat fehlerfrei funktioniert.
In den Container-Einstellungen für den paperless-ngx-Container habe ich eine RAM-Beschränkung auf 4Gb eingestellt:
vlt. kannst Du den gleichen Effekt mit dem Parameter „mem_limit“ in der YAML-Datei erzielen:
Den Wert kannst Du ja anpassen auf z.B. „4g“.
cpu_shares habe ich bei mir in der YAML nicht gesetzt und auch sonst keine Parameter wie
PAPERLESS_TASK_WORKERS, PAPERLESS_THREADS_PER_WORKER etc.
Die App Mover Tuning und eine Einstellung war das Problem.
„Andrew Zawadzki Modified by hugenbdd“ funktioniert bei mir!
Gunicorn hat nur den Speicher beansprucht.
