Rodrigo Herrán - Data Engineer und Gründer

München, Deutschland

Erfahrungen

Jan. 2025 - Bis heute

1 Jahr 1 Monate

München, Deutschland

Data Engineer und Gründer

SapientVase GmbH

Verantwortlich für Unternehmensstrategie, Produktentwicklung, Geschäftsentwicklung und operative Umsetzung
Entwicklung einer Datenplattform im Bereich Forschung in der Präzisionsmedizin für die Pharma- und Biotechnologiebranche im Rahmen Multi-Omics Integration
Einsatz von Databricks (Unity Catalog, ETL, ML), ADLS Gen2, Azure Data Factory, Azure DevOps, Python, PySpark, Scala, SQL, R, GX
Aufbau eines Delta Lakehouse mit Medallion Architecture
Nutzung von MLflow für maschinelles Lernen
Erstellung von Dashboards mit PowerBI, Dash, Bootstrap, Matplotlib, Seaborn, Biopython
Entwicklung einer OpenAI-Schnittstelle

Apr. 2024 - Juni 2024

3 Monaten

Zürich, Schweiz

Data Engineer (Freiberuflich)

Callista ACE AG

Entwicklung von Cloud-Anwendungen und -Infrastruktur für den Kunden DENNER AG
Design und Implementierung einer Strategie zur Datenqualitätsprüfung und -testung für ein Azure Data Lakehouse mit Batch- und Stream-Verarbeitung unter Verwendung der Medallion-Architektur
Entwicklung von Datenpipelines in einer Lakehouse-Medallion-Architektur
Einsatz von Synapse, Data Factory, Azure Functions, Event Hubs, Terraform, C# und Python

März 2023 - Dez. 2024

1 Jahr 10 Monaten

München, Deutschland

Data Engineer (Freiberuflich)

Confiniti GmbH

Wartung von Big-Data-Pipelines für ORAYLIS GmbH, Telefónica Deutschland und VWFS
Aufbau von Echtzeit-Streaming- und Batch-ETL-Workflows
Migration von Oracle Exadata On-Premise zu Cloud Data Warehouse
Anwendungsentwicklung von der Anforderungsanalyse bis zur Produktionseinführung, Support und Dokumentation
Einsatz von Azure Databricks, Spark (Scala, SQL, Python), Synapse, Kafka, PowerBI, Azure DevOps, ADLS Gen2, Spark Structured Streaming
Entwicklung von Dashboards für Workload-Automatisierung mit PowerShell Universal und Microsoft Azure Intune

Sept. 2016 - Nov. 2022

6 Jahren 3 Monaten

München, Deutschland

DevOps und Data Engineer

NTT DATA DACH

Mitgestaltung, Entwicklung und Wartung von Big-Data-Pipelines für Deutsche Börse und BMW
Entwicklung einer Plattform für C7 SCS (Securities Clearing Services: EUREX SCS Reporting Engine) mit Azure Data Factory, Azure Functions und Databricks
Aufbau der Datenplattform mit Hadoop (HDFS/YARN/Spark), App Services (Scala, Python), Kafka, Java und AMQP
Full-Stack-Entwicklung von Microservices-Anwendungen zur Bereitstellung von Ferndiensten für Elektroautos mit Java, OpenShift/Kubernetes und Docker
Implementierung von CI/CD-Pipelines für Unit-, Integrations- und Lasttestautomatisierung
Entwurf, Implementierung und Dokumentation von Anwendungs- und Datenpipeline-Architekturen
Datenbankdesign, Konnektivität und Migration (Oracle, PostgreSQL)
Bereitstellungsmanagement (Test, Staging, Produktion), Überwachung und Leistungsoptimierung von Hadoop-Umgebungen
Analyse von Geschäfts- und technischen Anforderungen sowie Coaching und Teamkoordination

Jan. 2015 - Aug. 2016

1 Jahr 8 Monaten

München, Deutschland

Webentwickler

Schönberger-Group

Entwicklung von ETL-Pipelines und Webschnittstellen zur Automatisierung des Bestell- und Lieferprozesses, Lagerprüfung, Zahlungen, Versand und Kundenfeedback
Full-Stack-Entwicklung von Webanwendungen in Java, PHP und Python
Datenbankadministration und Fehlerbehebung
Testen und Entwurf von Testprotokollen

Zusammenfassung

Erfahrener Data Engineer mit nachweislicher Erfolgsbilanz bei der Konzeption, Entwicklung und Wartung von Big-Data-Pipelines für Echtzeit-Streaming- und Batch-ETL- Workflows.

Erfahren in der Microservices- Architektur, der Entwicklung von Softwareanwendungen mit RESTful- APIs, mit Kenntnissen in den Bereichen Full-Stack- Webentwicklung, Testautomatisierung und Datenqualitätssicherung.

Versiert in der Arbeit in agilen Umgebungen (Scrum, Kanban) und erfahren in der Koordination von Onshore- und Nearshore-Teams, um eine erfolgreiche Projektdurchführung zu gewährleisten.

Fähigkeiten

Integration

Databricks
Azure Synapse
Azure Data Factory
Azure Functions
App Services
Pyspark
Spark
Azure Event Hubs
Azure Iot Hub
Adls Gen2
Microsoft Fabric
Sql
T-sql
Plsql
Ssis
Ssas
Spark Structured Streaming
Apache Kafka
Kafka Streams
Kafka Connect
Ksql
Data Warehouse Architecture
Data Lakehouse Architecture
Hadoop/hdfs
Hive

Skripte

Python (Flask, Pytest, Numpy, Gx, Seaborn, Sklearn, Pandas, Biopython)
Dash
Fastapi
Ml Flow (Python)
Scala
R
Perl
Powershell

Ci/cd Und Devops

Azure Devops
Iac - Terraform
Openshift
Jenkins
Kubernetes/aks
Microservices Architecture
Payara
Docker
Ansible
Apache Nifi
Apache Airflow
Java
.Net C#
Git
Maven
Gradle
Elasticsearch
Kibana
Gatling
Flyway

Überwachung

Azure Monitor
Prometheus
Grafana
Nagios
Elasticsearch
Kibana

Web-entwicklung

Javascript
Jquery
Angular
D3.js
Bootstrap
Swagger
Restful

Datenbanken

Oracle
Ms Sql Server
Postgresql
Mysql
Nosql
Cosmosdb
Mongodb

Sprachen

Deutsch

Verhandlungssicher

Englisch

Verhandlungssicher

Spanisch

Verhandlungssicher

Ausbildung

Okt. 2010 - Apr. 2014

Technische Universität Hamburg

Master of Science · Informationstechnologie · Hamburg, Deutschland

März 2003 - Juli 2007

Universität Guadalajara

Bachelor of Science · Informatik · Guadalajara, Mexiko

Zertifikate & Bescheinigungen

DP-203 Zertifizierter Azure Data Engineer Associate

Zertifizierter Confluent-Entwickler für Apache Kafka (CCDAK)

Wirtschaftsmanagement und Geschäftsanalyse (Online-Spezialisierung)

University of Illinois at Urbana-Champaign

Sie suchen Freelancer?Passende Kandidaten in Sekunden!

FRATCH GPT testen

Ähnliche Freelancer

Entdecken Sie andere Experten mit ähnlichen Qualifikationen und Erfahrungen.

Erfahrungen

Data Engineer und Gründer

SapientVase GmbH

Data Engineer (Freiberuflich)

Callista ACE AG

Data Engineer (Freiberuflich)

Confiniti GmbH

DevOps und Data Engineer

NTT DATA DACH

Webentwickler

Schönberger-Group

Zusammenfassung

Fähigkeiten

Sprachen

Ausbildung

Technische Universität Hamburg

Master of Science · Informationstechnologie · Hamburg, Deutschland

Universität Guadalajara

Bachelor of Science · Informatik · Guadalajara, Mexiko

Zertifikate & Bescheinigungen

DP-203 Zertifizierter Azure Data Engineer Associate

Zertifizierter Confluent-Entwickler für Apache Kafka (CCDAK)

Wirtschaftsmanagement und Geschäftsanalyse (Online-Spezialisierung)

University of Illinois at Urbana-Champaign

Ähnliche Freelancer

Senior Data/ML-Berater & Technischer Leiter

MLOps (Machine-Learning-Betrieb)

Leiter der technischen Gesamtintegration NSC / Entwicklung von Hadoop Cloud

Data Scientist/AI-Ingenieur

Datenarchitekt

Senior MLOps- und DevOps-Engineer

Leiter Workshop „Einführung von KI Entwicklungstools“

Senior Dateningenieur

Cloud (AWS) | KI | DevOps | Daten

Freiberuflicher Datenarchitekt

Principal (Datenwissenschaftler/Dateningenieur/Gen-AI-Ingenieur)

Microsoft Azure Senior Data Engineer / Senior Data Scientist

Microsoft Fabric & Power BI-Entwickler

Freiberuflicher Dateningenieur / Architekt

Dozent

SSIS Entwicklung

IT-Consultant & Weiterbildung

Product Owner für AI-Lernplattform

Senior Dateningenieur

Datenberater & Technischer Leiter DataVerse

KI-Ingenieur

Senior Cloud-Berater (AWS-Dienste und Beratung)

Freelancer, Solution-Architekt

Senior Data-Architekt & Dateningenieur

Cloud-Architekt & KI-Ingenieur

inkl. CI/CD, Automatisierung

Data Scientist und Data Engineer

Power Platform-Entwickler

Teilzeit-CTO (Leitender Ingenieur / Technischer Architekt)

Freiberuflicher Solutions Architect und Machine Learning Engineer