Aufbau und Betrieb der Azure Data Platform als zentrale Datenanreicherungs- und Austauschplattform für BI-Daten
Ausführung von ETL-Prozessen innerhalb von Projektumgebungen gemäß Cloud-Blueprint
Implementierung einer Hub & Spoke-Architektur für Netzwerk, Zugriffsmanagement und Governance via AAD-Gruppen und RBAC-Rollen
Definition und Bereitstellung der Infrastruktur mit Terraform über Azure DevOps Pipeline
Data Lake Architektur mit fünf Hauptzonen:
Ingestion Zone: Datenlieferzone, nicht-permanenter Speicher, Echtzeit- und Batch-Ladung
Raw Zone (Bronze Layer): Originaldaten im Delta-Format (strukturiert, semi-strukturiert), unstrukturierte Daten im Originalformat
Qualified Zone (Silver Layer): Bereinigte Rohdaten, Duplikatentfernung, Schema-Durchsetzung, Namenskonventionen
Curated Zone (Gold Layer): Konsumptionsschicht, optimiert für Analysen
Archive Zone: Archivierung nicht aktiv genutzter Daten
Arbeitsweise nach SCRUM mit agilen Sprints
Dokumentation in Markdown im Repository und in Confluence
Operatives Projektmanagement mit Jira
Azure: Azure Databricks, Azure Data Factory, Azure Data Lake Storage Gen2, Azure Key Vault, Azure Virtual Network (vNet), Azure DevOps, ARM, Terraform
Python
SQL
JSON
HCL (HashiCorp Configuration Language)
Ich bin ein Business Intelligence Consultant mit über 9 Jahren Erfahrung im Microsoft BI Stack und Geschäftsführer der innomotion media GmbH. Ich habe als Entwickler, Berater und Projektleiter in verschiedenen Projekten gearbeitet. Dabei war ich sowohl für mittelständische Unternehmen wie auch für Großkonzerne im Einsatz.
Discover other experts with similar qualifications and experience