NEODYM
Werkzeug · Datenbereinigung

Saubere Daten, nachvollziehbar.

Mehrere Dateien additiv zusammenführen, Spalten in die Reihenfolge deiner Vorlage bringen, Lücken nach statistischen Regeln füllen, Zahlen- und Datumsformate korrigieren und Schreibweisen wie „ja“ und „JA“ zusammenführen. Jede Änderung steht im Protokoll. Die Datei bleibt in deinem Browser und wird nicht hochgeladen.

1Dateien

CSV oder Excel, eine oder mehrere. Bis 50 Spalten und 20.000 Zeilen insgesamt.

    2Vorlage (optional)

    Eine Datei, deren erste Zeile die Spaltennamen in der gewünschten Reihenfolge enthält.

    3Regeln

    Das Ergebnis aktualisiert sich bei jeder Änderung.

    Bei mehr Lücken ist jeder Füllwert geraten. Die Spalte bleibt dann unverändert und wird im Protokoll markiert.
    Median, Mittelwert und Modus werden dann je Gruppe berechnet, etwa je Bundesland. Gruppen mit weniger als 3 Werten nutzen den Gesamtwert.
    Verglichen werden alle Spalten, die in jeder Datei vorkommen. Beim Entfernen bleibt die erste Zeile, und das passiert vor dem Füllen, damit Doppelte die Statistik nicht verzerren.

    4Erweitert

    Join, Umkodieren, Anonymisieren, Skript

    Dateien zusammenführen

    Für einen Join brauchst du mindestens zwei Dateien mit einer gemeinsamen Spalte.

    Umkodieren

    Ersetzt Werte durch Codes, etwa „stimme zu“ durch 4. Gilt nach der Bereinigung, also für die bereits vereinheitlichten Werte. Leere Felder lassen den Wert unverändert.

    Anonymisieren

    Skript-Export

    Aus den gewählten Regeln erzeugt das Werkzeug ein Python-Skript (pandas). Du findest es unter dem Ergebnis. So lässt sich die Bereinigung bei der nächsten Welle wiederholen und prüfen.