Projektbeschreibung

Konzeption und Entwicklung von ETL-Strecken für das Finanz-Data-Warehouse von ElipsLife auf Basis von Microsoft SQL-Server. Ziel des Projekts war der Aufbau einer skalierbaren und regelbasierten Datenintegrationsplattform zur Verarbeitung und Analyse von Finanzdaten.

Die Architektur basiert auf einem Data-Vault-Modell, bei dem Daten zunächst in eine Stage-Schicht geladen, anschließend transformiert und in die Hub-, Link- und Satellite-Strukturen des Data Warehouses überführt werden. Zur Standardisierung und Automatisierung der Ladeprozesse wurden dynamische T-SQL-Prozeduren entwickelt, die die konsistente Befüllung der Data-Vault-Strukturen sicherstellen.

Neben der Entwicklung der Datenintegrationsprozesse erfolgte auch die Anbindung verschiedener Quellsysteme (u. a. SAP) sowie die Umsetzung von Datenmapping, Datenqualitätssicherung und Transformationen.

Verantwortlichkeiten

• Entwicklung von ETL- und Ladeprozessen für das Finanz-Data-Warehouse
• Implementierung dynamischer T-SQL-Prozeduren zur Befüllung von Hub-, Link- und Satellite-Tabellen
• Aufbau der Stage- und Transformationsschichten
• Umsetzung von Data-Vault- und Star-Schema-Modellen
• Integration von Daten aus verschiedenen Quellsystemen (u. a. SAP)
• Durchführung von Datenmapping, Transformation und Datenveredelung
• Entwicklung, Test und Dokumentation von SSIS-Paketen und ETL-Prozessen
• Abstimmung technischer Lösungen mit Business-Stakeholdern und Fachbereichen

Technologien

Microsoft SQL Server 2016 • T-SQL • SSIS • ETL • Data Vault • Data Warehouse Architecture • SAP Data Integration • Financial Data Platforms