Felix B.
Datenberater & Technischer Leiter DataVerse
Erfahrungen
Okt. 2023 - Bis heute
2 Jahren 3 MonatenHamburg, Deutschland
Datenberater & Technischer Leiter DataVerse
Lufthansa Technik AG
- Technische Beratung für die Greenfield-Entwicklung von AVIATAR 2.0
- Entwurf von Datenpipelines und Datenarchitektur im DataVerse Data Lake
- Planung und Implementierung von Data-Lake-Zonen, Data Governance, Datenaufbewahrung und Wiederherstellungsstrategien
- Zusammenarbeit mit dem Data-Architecture- und Platform-Team für Infrastruktur-Skalierung und Design
- Enge Kooperation mit Stakeholdern bei Lufthansa Technik, inklusive Anforderungsmanagement
- Praktische Entwicklung von Datenpipelines mit Spark Structured Streaming und Databricks
- Machbarkeitsnachweise (PoCs) für Graph-Links und Echtzeit-Analysen
- Bereitstellung von Daten für KI- und ML-Projekte (z. B. Predictive Analytics)
- Technisches Design und Implementierung von Near-Real-Time-Pipelines basierend auf fachlichen Anforderungen
Apr. 2023 - Sept. 2023
6 MonatenWolfsburg, Deutschland
Senior-Entwickler
Automotive Company
- Praktische Unterstützung bei der Migration von On-Premise-Services zu AWS
- Entwicklung von Python-Mapping-Skripten für die Datenumwandlung großer Mengen von Software- und Hardware-Testdaten aus der Automobilentwicklung
- Architektur und Entwicklung von Java-basierten Backends und React-Frontends für Self-Service-Tools für Mitarbeiter
- Unterstützung beim Umstieg von Datenbankskripten von Oracle PL/SQL auf PostgreSQL
Jan. 2020 - März 2023
3 Jahren 3 MonatenKarlsruhe, Deutschland
Technischer Leiter
Sovendus GmbH
- Migration von ETL-Pipelines und Machine-Learning-Workloads von MySQL/Python zu PySpark und Airflow, um Cloud-Skalierbarkeit zu nutzen
- Implementierung von Microservices und APIs für interne Teams zur Nutzung von Cloud-Daten mit Kubernetes und Spring Boot
- Migration des SQL Data Warehouse zu cloudbasierten VDMs mit Databricks Delta
- Entwicklung von Java-Tools zur Unterstützung von Delta Tables auf AWS S3
- Umsetzung von langsam veränderlichen Dimensionen und Time Travel bei User-Journey-Daten
- Bereitstellung von Schnittstellen zu Daten für QlikSense- und KPI-Teams
- Bericht an den Vice President Data und den Lenkungsausschuss
- Durchführung von Mitarbeiterschulungen zu Airflow, Spark und AWS
Jan. 2019 - Dez. 2019
1 JahrWalldorf, Deutschland
Berater
SAP SE
- Optimierung der Verarbeitungsgeschwindigkeit einer bestehenden Datenpipeline für Streaming-Daten und Zeitreihen-Aggregate mit Apache Spark
- Durchführung von Schulungen für Teams zu Spark Structured Streaming
- Implementierung von Metering und Billing für die Ingestion-Pipeline und Deployment in die Produktion
- Beratung zu Multi-Tenancy-, Hochverfügbarkeits- und Hyperscaling-Architekturen für Streaming-Daten auf AWS und Azure
- Entwicklung eines PoC für Spark-Streaming-Ingestion zu Cassandra
- Entwicklung eines PoC für Spark-Aggregatberechnungen in SAP HANA
- Aufbau eines PoC für eine Cloud-Streaming-Event-Processing-Pipeline mit AWS ElastiCache, EMR und Kinesis
- Einsatz von Cloud Foundry, HANA und Spark Job Server in der Produktionsumgebung
Jan. 2018 - Dez. 2018
1 JahrNeu-Isenburg, Deutschland
Berater
Lufthansa AirPlus Servicekarten GmbH
- Beratung zur Big-Data-Architektur und Datenpipeline, um unstrukturierte Daten für die Analyse von Kreditkartentransaktionen zu clustern und zu transformieren
- Entwurf von Zugriffsmustern für den Enterprise Data Lake basierend auf dem Cloudera Enterprise Stack in Azure
- Implementierung von Ingestion-Pipelines mit Spark-Jobs für die Transaktionsverarbeitung, einschließlich Duplikaterkennung und Betrugserkennung
- Definition einer REST-API-Schnittstelle für das Frontend zum Abruf von Abrechnungsinformationen und PowerBI-Reporting
- Entwurf der Architektur und Schnittstellen zur Fakturierung (SAP), Kreditkartenabwicklung (TSYS) und sicheren Speicherung für den Rechnungsdownload über das Portal
Sept. 2016 - Dez. 2017
1 Jahr 4 MonatenBerater
Deutsche Börse AG
- Beriet zum Atlassian JIRA-Workflow-Design, zu Sicherheits- und Berechtigungskonzepten sowie zur Plugin-Entwicklung
- Implementierte maßgeschneiderte IT-Sicherheitsprozesse mit Plugins und Workflow-Scripting für über 2000 Anwender
- Baute eine Vorverarbeitungsplattform mit Python, Spark und Kafka zum Filtern, Bewerten und Clustern von Sicherheitsberichten und integrierte sie in JIRA
- Entwickelte einen angepassten Oracle-SSL-Connector für JIRA mit verschlüsseltem Oracle-11g-Backend
- Implementierte einen LDAP- und IdentityIQ-Connector für unternehmenskonformes IAM
- Rollte JIRA aus und schulte Abteilungen in Deutschland, Luxemburg und Prag im Umgang mit JIRA
Fähigkeiten
It-kenntnisse: Python, Airflow, Aws, Xgboost, Machine Learning, Jupyterhub, Emr, Kubernetes, Helm Charts, Java 8/11/17, Java Ee, Spring Boot, Spring Data, Jpa, Swagger, Springfox, Docker, Docker Compose, Jetty, Hibernate, Tomcat, Maven, Gradle, Jenkins, Datenbanken (Relational: Pl/sql, Mysql/postgres / Nosql: Cassandra, Redis, Spark, Hadoop, Athena, Presto), Ides (Eclipse, Intellij, Visual Studio), Tools: Git, Svn, Windows, Linux (Debian, Redhat, Oracle), Vmware, Ms Office, Atlassian Jira, Confluence, Bitbucket, Tableau, Power Bi, Qliksense
Programmierung: Java, Javascript, Groovy, Python, Clojure, Bash
Sprachen
Deutsch
MutterspracheEnglisch
VerhandlungssicherFranzösisch
GrundkenntnisseJapanisch
GrundkenntnisseAusbildung
Okt. 2009 - Nov. 2013
Mannheim University of Applied Sciences
Bachelor of Science · Informatik · Mannheim, Deutschland · 1,3
Okt. 2008 - Sept. 2009
Karlsruhe Institute of Technology (KIT)
Bachelor of Science · Informatik · Karlsruhe, Deutschland
Sept. 2005 - Juli 2008
Carl-Bosch-Schule (Technisches Gymnasium)
Allgemeine Hochschulreife mit Schwerpunkt Informationstechnik und Informatik. · Heidelberg, Deutschland · 1,7
Sie suchen Freelancer?Passende Kandidaten in Sekunden!
FRATCH GPT testenWeitere Aktionen
Ähnliche Freelancer
Entdecken Sie andere Experten mit ähnlichen Qualifikationen und Erfahrungen.