Der Aufbau einer neuen Datenplatform für den Bereich Produktion von BASF. Dazu gehört der Entwurf von einer high-level Datenarchitektur für die Datenplatform und die Erstellung vom Datenmodell für die verschiedenen Business Bereiche.
Entwurf der High-level Datenarchitektur (basierend auf der MACH-Architektur) für die neue Datenplatform
Erstellung von technischen Konzepten für Datenmanagement in der neuen Datenplatform
Erstellung von technischen Konzepten für die Anbindung von externen Systemen
Organisation und Moderation von der Community of Practice (CoP) für Datenarchitektur Meetings
Erstellung von Datenmodellen für Anwendungsfällen von der verschiedenen Business Bereichen
Methoden/Technologien: Microsoft Azure, Datenarchitektur, Databricks, Datenintegration, Azure Databases, T-SQL, Power BI, KPI’s, Python, PySpark, SQL Server, Confluence, Jira, Scrum
Jan 2022 - Apr 2023
4 months
Senior Berater / Data Engineer und Architekt
Fischer Group
Im Rahmen der Datenstrategie von Fischer wurde entschieden bereits existierende BI Anwendung von SAP BW zu Microsoft Azure zu migrieren, um SAP BW schrittweise durch eine Lösung, die auf Microsoft Azure basiert zu ersetzen. Hierzu gehört die Migration der Daten von SAP BW nach Synapse Analytics Dedicated Pools und die Erstellung der Berichte in Power BI.
Integration von Daten aus SAP BW in Microsoft Azure
Erstellung der Datenbankobjekte und Datenmodellierung in Synapse Analytics
Implementierung der Synapse Analytics Pipelines für Datenbeladung
Erstellung von Dokumentationen und technischen Konzepte
Methoden / Technologien: Datenarchitektur, Modern Data Warehousing, Microsoft Azure, Synapse Analytics (Pipelines. Dedicated SQL Pools), T-SQL, SQL Server, Databricks, Azure Data Factory (ADF), SAP Hana, Power BI, PySpark, git, Jira, Confluence, Scrum
Mar 2022 - Dec 2022
10 months
Senior Berater / Senior Data Engineer
Porsche AG
Ziel von diesem Projekt ist die Erstellung von einem Typisierungssoftware für den US-Markt. Dafür sollte eine Datengrundlage geschaffen werden, basierend auf der Entscheidungen über den Zertifizierungsprozess von Fahrzeugen getroffen werden können. Kunde: Porsche AG im Bereich OEM & Typisierungssoftware.
Datenaufbereitung in Databricks
Erstellung von Data Flows und deren Orchestrierung mit Apache Nifi
Erstellung von Datenobjekten und Datenmodellierung in Databricks
Erstellung von Dokumentationen und technischen Konzepte
Methoden / Technologien: Microsoft Azure, Databricks, Azure Data Lake Gen2 (ADLS), Modern Data Warehousing, ETL, SparkQL, Azure Data Factory(ADF), T-SQL, Apache Airflow, Jira, Confluence, Scrum
Jun 2021 - Mar 2023
1 year 10 months
Senior Berater / Data Engineer
Porsche AG
Automatisierte Fehlererkennung im Bereich Karosseriebau von Porsche AG. Daten wurden in Echtzeit ohne manuelle Intervention in Celonis integriert mit dem Ziel Fehler in den Prozessen effizienter zu erkennen. Kunde: Porsche AG im Bereich Karosseriebau.
Anbindung von Daten aus dem Bereich Karosseriebau in Celonis
Data Engineering im Celonis-Umfeld
Erstellung von Skripten für die Migration und Transformation von Daten
Erstellung von Datenextraktionen und – transformationen und Datenmodelle
Erstellung von Datenbankobjekten
Erstellung von Dokumentationen und technischen Konzepte
Methoden / Technologien: Celonis, Process Query Language (PQL), ETL, Datenintegration, Datenmodellierung, Data Warehousing, AWS, AWS RedShift, AWS Glue, Amazon Athena, Vertica, Linux, Jira, Confluence, Scrum
May 2021 - Dec 2021
8 months
Senior Berater / Data Engineer
TRUMPF SE + Co. KG
Aufbau einer Cloud-basierten Datenplattform (DIP2.0) und Migration von Komponenten der alten Datenplattform (DIP1.0). Kunde: TRUMPF SE + Co. KG im Bereich Manufacturing.
Entwurf und Implementierung von Daten Pipelines für die Integration der Daten
Überprüfen der Datenqualität
Erstellung von Reports und Dashboards
Datenmodellierung und Erstellung der Datenbankobjekten
Erstellung von Skripten für die Migration und Transformation von Daten
Erstellung von Dokumentationen und technischen Konzepte
Methoden / Technologien: Microsoft Azure, Azure Datenbanken, Azure Data Factory (ADF), Azure Data Lake Gen2 (ADLS), Power BI, Data Warehousing, ETL, Data Vault, SAP Hana, Apache Airflow, Azure Cosmos DB, HDFS, Apache Hive, Datenmigration, PySpark, Databricks, Terraform, GitLab, Jira, Confluence, Scrum
May 2021 - Mar 2021
-1 years -1 months
Frankfurt, Germany
Senior Consultant Data Engineer
MHP Management und IT-Beratung GmbH
Nov 2020 - Apr 2021
6 months
Technology Consultant / Data Engineer
Miles & More
Migration von einer On-Premise Data Warehouse (Teradata) in die Cloud (Azure Synapse Analytics).
Übersetzung der Skripte von der Teradata- zur T-SQL-Syntax
Erstellung der Datenbankobjekte in Azure Synapse
Testen der erstellten Objekte anhand Echtdaten
Erstellung von einer Datenpipeline für die Archivierung von Daten in Azure Data Factory (ADF)
Erstellung von einem technischen Konzept für Überwachung, Warnung und Logging für Datenpipelines in Azure Data Factory
Methoden / Technologien: Microsoft Azure, MSSQL Server, SQL Server Management Studio 15 (SSMS), T-SQL, SQL Server, Power BI, Data Warehousing, ETL, Azure Synapse Analytics, Azure Data Factory (ADF), GitLab, Jira, Confulence, Scrum
Mar 2020 - Apr 2021
1 year 2 months
Frankfurt, Germany
Senior Consultant Data Engineer
Lufthansa Industry Solutions
Mar 2020 - Oct 2020
8 months
Berater / Entwickler
Lufthansa Group
Innovationsprojekt / Application Plattform as a Service (APaaS) Erweiterung und Verbesserung von einer bestehenden Lösung für Textklassifizierung in der Azure Cloud.
Erweiterung der bestehenden Datenarchitektur von einem Textklassifizierungsservice in der Cloud (Microsoft Azure)
Erstellung von einem Sicherheitskonzept für Authentifizierung und Autorisierung der Benutzer der APaaS-Diensten
Erstellung von technischen Dokumentationen
Methoden / Technologien: Microsoft Azure, Datenarchitektur, Data Platforms, Automatisierung, Python, Visual Studio Code, T-SQL, SQL Server, Kubernetes, Confluence, Jira, Scrum
Mar 2019 - Feb 2020
1 year
Berater / Entwickler
Statistisches Bundesamt (DESTATIS)
Entwicklung von einer Java EE-Anwendung, die im Rahmen der nächsten Volkszählung in 2021 in den verschiedenen Länder Deutschlands zum Hochladen der Daten genutzt werden soll.
Anwendungsentwicklung in Java EE
Erstellung von Testfällen
Erstellung von Datenbankabfragen und Performanceoptimierung
Erstellung von technischen Konzepten und Dokumentationen
IT-Verfahren zur Bekämpfung von Geldwäsche und Terrorismusfinanzierung Unterstützung vom Kunden mit künstlicher Intelligenz mit dem Ziel Geldwäsche und Terrorismus im Finanzbereich effizienter zu bekämpfen. Dafür sollten Daten von sogenannten Verdachtsmeldungen analysiert werden, um bestimmte Muster zu erkennen.
Entwurf des Datenmodells für externe Daten
Umsetzung des ETL-Prozesses und Aufbau eines Data Warehouse mit Daten aus öffentlichen Leaks
Implementierung der Entitäten-Erkennung (NLP-NER), um relevante externe Daten zu strukturieren
Analyse von produktiven Kundendaten und Implementierung einer KI-Komponente für die Bewertung und Klassifikation von Verdachtsmeldungen
Implementierung von sogenannten Konnektoren, die die Anbindung von Drittanbietersystemen und der Automatisierungslösung HIRO von arago ermöglicht. Bei der Implementierung wurden die ITIL-Prozesse Incident -, Change - und Configuration Management berücksichtigt.
Entwurf moderner Datenarchitekturen in der Cloud (Microsoft Azure)
Erstellung von technischen Konzepten und Dokumentationen
Implementierung der Mapper für den Datentransfer zwischen den Drittanbieter-Systemen und arago HIRO in Java