Vom DWH über den Data Lake zum Data Lakehouse - ein evolutionärer Ansatz zur Modernisierung
Wir beschreiben Wege bei der Modernisierung der Datenlandschaft bei der Zurich Gruppe Deutschland. Gestartet in den frühen 2000ern mit einem klassischem DWH, der Erweiterung um einen Data Lake in Form einer sog. "Graswurzelbewegung" bis hin zur Konsolidierung der beiden Ansätze in einem Data Lakehouse. Wir diskutieren die Erfolgsfaktoren für diesen evolutionären Ansatz. In einem dritten Teil diskutieren wir die Herausforderungen bei der Überführung in eine Data Lakehouse Architektur und unsere Lösungsansätze hierzu.
Zielpublikum: Entwickler, Architekten und Entscheider für Datenlösungen aus IT und Fachbereichen
Voraussetzungen: grundlegendes Verständnis und Interesse an Datenarchitekturen
Level: Basic
Extended Abstract:
Der Vortrag umfasst drei Teile:
Teil 1: Unsere Reise bei einer evolutionären und kontinuierlichen Modernisierung der Datenlandschaft.
- Start in den frühen 2000ern mit einem klassischen Enterprise Data Warehouse
- Graswurzelbewegung zu einer Erweiterung um einen Data Lake
- aktuell: Konsolidierung zu einem Data Lakehouse
Teil 2: Faktoren für den Erfolg der evolutionären Strategie
- Bewusste Entscheidung gegen einen Revolutionären Ansatz
- Aufbau einer Data Community ("Graswurzelbewegung")
- Enabling der Fachbereiche durch die IT
- aktive Einbindung des Datenschutzes
- Förderung von Selfservice durch eine flexible Datenarchitektur
- Cloud-basierte Infrastruktur
- Agile Ablauforganisation
Teil 3: Aktuelle Herausforderungen bei der Implementierung des Data Lakehouse
Product Owner Data Lake und Data Architecture Enthusiast
Education
- Apprenticeship in Business Administration
- Degree in Computer Science from University of Bonn
Professional Career
- 1997 - 2004: DBA & Reporting Tool Specialist
- 2004 - 2010: Enterprise Architect
- 2010 - 2015: Head of BI Platform Management on Group Level
- 2015 - 2018: Data Architect
- 2018 - today: Product Owner for Data Lake
Head of Data Lakehouse
Thorsten Belker ist Head of Data Lakehouse bei Zurich und bringt mehr als 20 Jahre Erfahrung im Bereich Data und Business Intelligence mit. Nach einer langjährigen Tätigkeit bei der REWE Gruppe ist er heute als Competence Lead für ein Team von Data Engineers und Data Ops Engineers bei der Zurich Gruppe verantwortlich.
Als IT Owner steuert Thorsten sowohl das Data Warehouse als auch den Data Lake und treibt die Konsolidierung beider Plattformen zu einem modernen Data Lakehouse aktiv voran.
Er verfügt über langjährige Erfahrung mit agilen Organisationsformen und hat zahlreiche komplexe Datenmigrationen erfolgreich begleitet. Seinen akademischen Hintergrund hat Thorsten im Bereich Künstliche Intelligenz.
Vortrag Teilen
