Doppelte CSV-Zeilen nachvollziehbar entfernen.

Der Vergleich gilt für die ganze Zeile

Bei aktivierter Dublettenentfernung vergleicht Werkfink alle Felder einer aufbereiteten Datenzeile. Der erste Treffer bleibt stehen, weitere identische Zeilen werden entfernt. Eine gemeinsame ID allein macht zwei unterschiedliche Zeilen nicht zu einer Dublette.

Erfundene Beispieldaten, Groß-/Kleinschreibung unverändert:

ID;Name
001;Anna
001;Anna
001;ANNA
002;Ben

Mit dem Vergleich ganzer Zeilen wird genau eine Zeile entfernt. Die abweichende Schreibweise ANNA bleibt erhalten:

ID;Name
001;Anna
001;ANNA
002;Ben

Aufbereitung verändert den Vergleich

Leere Randzeichen werden bei aktivem Trimmen vor dem Zeilenvergleich entfernt. Dann können Anna und Anna gleich werden. In einem passenden Automatik-Rezept kann auch die Groß-/Kleinschreibung aller Datenwerte vereinheitlicht werden. Mit Kleinschreibung würden im Beispiel beide Schreibweisen zu anna; es blieben zwei Datenzeilen übrig.

Wähle solche Regeln bewusst: Die Schreibweise kann bei Codes und anderen Textwerten eine Bedeutung haben. Prüfe daher zuerst einen kleinen Ausschnitt und den Bericht.

Dubletten lokal entfernen

1. Öffne die Werkstatt und wähle eine CSV-Datei bis 2 MiB.
2. Prüfe Kodierung, Trennzeichen und Kopfzeile.
3. Lege fest, ob Randzeichen entfernt werden sollen, und aktiviere die Dublettenentfernung.
4. Starte die Aufbereitung. Vergleiche Eingabe- und Ausgabezeilen sowie die Anzahl entfernter Dubletten im Bericht.
5. Prüfe einzelne Datensätze, bevor du das Ergebnis in ein anderes System übernimmst.

Was diese Funktion abdeckt

Der Vergleich erfolgt innerhalb der jeweils verarbeiteten Datei. Es gibt keine Auswahl einer Schlüsselspalte, keine Entscheidung über „neuester Datensatz gewinnt“ und keine Zusammenführung verschiedener Dateien nach einer ID. Unterschiedliche Zeilen mit derselben Kundennummer bleiben deshalb erhalten.

Auch im Stapel wird jede Datei getrennt aufbereitet. Das Original auf deinem Datenträger bleibt erhalten; das Ergebnis lädst du als neue Datei herunter.

Dieselben Regeln wiederverwenden

In der lokalen Automatik kannst du Regeln als JSON-Rezept speichern und später wieder laden. Du wählst die Dateien selbst aus und startest den Stapel bewusst. Die Verarbeitung läuft in der geöffneten Browserseite.

Ein Stapel umfasst höchstens 20 Dateien, jede bis 2 MiB, zusammen bis 10 MiB. Zusätzliche Exportgrenzen begrenzen große Ergebnisse. Es gibt keine automatische Ordnerüberwachung und keine Cloud-Verarbeitung durch diese Funktion.

Der nächste Schritt

Trennzeichen prüfen · CSV-Import vorbereiten