Duplikate werden nicht mehr erkannt

Ich habe mein Paperless jetzt auf mein neues Uhren NAS gebracht. Ich hatte noch 150 Dateien die im alten NAS verarbeitet wurden. Die habe ich in den Scaninput kopiert und die hat er auch alle verarbeitet. Leider erkennt er anscheinend Duplikate nicht mehr. Ich konnte das auch nachvollziehen und habe 2 Dokumente jeweils 2 mal neu eingescannt und alle wurden als neues Dokument angelegt.

Muss ich die Duplikat Erkennung irgendwo anschalten??

Hi,

Siehe Paperless Hilfe:

PAPERLESS_CONSUMER_DELETE_DUPLICATES=<bool>

As of version 3.0 Paperless-ngx allows duplicate documents to be consumed by default, except when this setting is enabled. When enabled, Paperless will check if a document with the same hash already exists in the system and delete the duplicate file from the consumption directory without consuming it.

Defaults to false.

Bin noch auf Version 2.20.15. sorry hatte ich vergessen zu erwähnen. Den Sprung auf V3.x will ich morgen angehen

Wenn du die Dokumente 2x einscannst dann ergibt das jedesmal ein anderes Ergebnis. Damit wirst du keine Duplikatenerkennung hinbekommen. Nimm eine PDF-Datei und bringe Sie ins Paperless. Nimm nocheinmal die gleiche PDF-Datei und bringe Sie wieder ins Paperless. Dann sollte Paperless das Duplikat erkennen. Vorrausetzung du hast noch Version 2.20.15. Ab Version 3 ist die Duplikatenerkennung von Hause aus ausgeschaltet. Wenn du sie wieder haben willst musst du sie auf true setzen.
PAPERLESS_CONSUMER_DELETE_DUPLICATES= true

Paperless verwendet einen MD5-Hash des Rohdokuments (die originale Binärdatei) für den Vergleich. Das bedeutet: Zwei Scans desselben Dokuments werden nur als Duplikat erkannt, wenn die Dateien bitidentisch sind – was bei Scans praktisch nie der Fall ist, weil:

  • Unterschiedliche Scan-Zeitstempel im Datei-Header
  • Minimale Helligkeits-/Kontrastunterschiede
  • JPEG-Kompression erzeugt bei jedem Scan andere Artefakte
  • Unterschiedliche Metadaten im PDF-Container

OK Danke. Einige sind zwar auch als Datei doppelt reingekommen, aber vielleicht war das die Verson leicht anders.

Danke für die Infos