CSV-Dubletten entfernen online
CSV-Datei auswählen oder per Drag & Drop ablegen — doppelte Zeilen werden direkt im Browser erkannt und entfernt, die bereinigte Datei steht zum Download bereit.
CSV-Datei auswählen
Eine .csv-Datei hier ablegen oder auswählen.
Bereinigte CSV
Vorschau zeigt maximal die ersten 20 Zeilen. Die heruntergeladene Datei enthält alle verbleibenden Zeilen.
Was dieses Tool tut — und was nicht
Der CSV-Dubletten-Entferner liest die ausgewählte CSV-Datei direkt im Browser ein (mit der Open-Source-Bibliothek PapaParse, lokal eingebunden — kein CDN), erkennt das Trennzeichen automatisch und vergleicht jede Zeile mit den vorherigen. Stimmen alle Spaltenwerte einer Zeile exakt mit einer bereits gesehenen Zeile überein, gilt sie als Dublette und wird entfernt — die erste Zeile bleibt erhalten. Es findet kein unscharfer Abgleich (Gross-/Kleinschreibung, Leerzeichen) und keine spaltenweise Auswahl statt.
Der Zeichensatz der Eingabedatei wird aus den Bytes erkannt: UTF-8 (mit und ohne BOM), UTF-16 LE und BE (mit und ohne BOM) sowie Windows-1252/ANSI, der Standard des deutschen Excel-Exports. Welcher Zeichensatz erkannt wurde, steht unter der Auswahl; wer es besser weiß, stellt ihn dort von Hand ein. Die heruntergeladene Datei ist immer UTF-8 mit BOM — so öffnet Excel sie unter Windows ohne Buchstabensalat.
Beim Export werden Zellen entschärft, die eine Tabellenkalkulation beim Öffnen als Formel ausführen würde (Beginn mit =, +, @, Tabulator oder Wagenrücklauf): sie bekommen ein führendes Apostroph. Eine reine Zahl mit Vorzeichen wie −1.234,50 bleibt dabei unangetastet. Wer die Rohwerte braucht, schaltet den Schutz ab.
Häufige Fragen
Wird meine CSV-Datei irgendwohin hochgeladen?
Nein. Die Prüfung läuft vollständig im Browser. Es wird nichts an einen Server übertragen oder dort gespeichert.
Wie wird eine Dublette erkannt?
Zwei Zeilen gelten als Dublette, wenn alle Spaltenwerte exakt übereinstimmen. Es findet kein unscharfer Vergleich statt (Gross-/Kleinschreibung und Leerzeichen zählen als unterschiedlich).
Welche Zeile bleibt bei einer Dublette erhalten?
Die erste Zeile einer Gruppe identischer Zeilen bleibt erhalten, alle weiteren identischen Zeilen werden entfernt. Die Reihenfolge der verbleibenden Zeilen bleibt unverändert.
Welches Trennzeichen wird für die Ausgabedatei verwendet?
Die Ausgabedatei verwendet Semikolon als Trennzeichen (kompatibel mit deutschem Excel). Die Eingabedatei wird automatisch erkannt, unabhängig vom verwendeten Trennzeichen.
Meine Umlaute werden zu Fragezeichen — woran liegt das?
Eine CSV-Datei speichert ihren Zeichensatz nicht mit, jedes Programm muss ihn raten. Dieses Werkzeug erkennt ihn aus den Bytes (UTF-8 mit und ohne BOM, UTF-16 LE/BE, Windows-1252) und zeigt unter der Auswahl an, wie es gelesen hat. Steht dort etwas Falsches, stellen Sie den Zeichensatz von Hand ein und starten Sie erneut. Der Download ist immer UTF-8 mit BOM.
Warum steht in manchen Zellen plötzlich ein Apostroph?
Weil diese Zelle mit =, +, @, Tabulator oder Wagenrücklauf beginnt und eine Tabellenkalkulation sie beim Öffnen als Formel ausführen würde. Das führende Apostroph verhindert das. Negative Zahlen wie −1.234,50 sind davon ausgenommen. Der Schutz lässt sich per Häkchen abschalten.
Reines Dubletten-Werkzeug ohne Zusammenführung mehrerer Dateien. Für das Vereinen mehrerer CSV-Dateien siehe csv-zusammenfuehren.kukanilea.de.