Kurz gesagt
Ein neues System, einen neuen Kunden einlesen, zwei Buchhaltungen zusammenführen: Immer müssen Daten von A nach B. ETL ist der Name für diesen Prozess. Extract: die Daten aus dem Quellsystem holen. Transform: sie in das umwandeln, was das Zielsystem erwartet. Load: sie laden.
Wie es oft läuft
Ein Export nach Excel, danach tagelange Arbeit mit SVERWEIS, Suchen und Ersetzen sowie Kopieren und Einfügen. Es funktioniert, aber:
- jedes Mal von vorn, von Hand;
- Fehler fallen erst auf, wenn das Zielsystem sie ablehnt, oder schlimmer, wenn sie unbemerkt darin stehen;
- niemand weiss nachher genau, was sich geändert hat.
Wie es besser geht
- Analysieren. Die Quelldateien automatisch durchleuchten lassen: welche Spalten, welche Arten von Werten, was fehlt.
- Mappen. Festhalten, welche Quellspalte in welches Zielfeld geht, mit den Umwandlungen dazwischen, etwa Status übersetzen oder Namen bereinigen.
- Transformieren. Diese Regeln automatisch anwenden, auch auf Verweise zwischen Dateien.
- Validieren. Prüfen, bevor etwas geladen wird: Pflichtfelder, doppelte Schlüssel, ungültige Werte.
- Laden und festhalten. Die Importdateien erstellen und speichern, was geschehen ist.
Für einen Anbieter industrieller Ausgabeautomaten haben wir so ein Tool gebaut, das Tausende Zeilen mit Produkten, Geräten, Fächern und Lagerbeständen in das Importformat des Zielsystems umwandelt. Aus Stunden Handarbeit wurde ein Prozess von Minuten, und beim nächsten Kunden lässt er sich einfach wiederverwenden.
Worauf Sie achten sollten
- Beginnen Sie bei der Qualität der Quelldaten. Verschmutzte Daten werden durch eine Migration nicht sauberer.
- Machen Sie die Regeln wiederholbar, damit eine Probemigration und die echte Migration dasselbe tun.
- Lassen Sie einen Benutzer, der die Daten kennt, das Ergebnis stichprobenweise prüfen.
Wünschen Sie Beratung zur Datenmigration? Fordern Sie ein kostenloses Beratungsgespräch an.
Aktualisiert am