Ildar Allayarov

Senior Data Engineer

Karlsfeld, Deutschland
Erfahrungen
Mai 2021 - Bis heute
4 Jahren 3 Monaten
München, Deutschland

Senior Data Engineer

foryouandyourcustomers München GmbH

  • Beratung bei Datenintegration und Datentransformation
  • Entwurf von Architektur-Lösungen und konzeptionellen Datenmodellen
  • Aufbau von ETL/ELT-Datenpipelines mit Tools wie Talend, Mulesoft, Java und Cloud-PaaS/SaaS wie Azure Data Factory, Azure Delta Lake, Databricks (PySpark/Python), Cosmos DB usw.
  • Einrichtung von CI/CD-Release-Pipelines über Azure DevOps, Versionsverwaltung über Git/Bitbucket etc.
  • Erstellung von Cloud-Infrastrukturen mit IaC-Tools wie Terraform
  • Umsetzung von Data Governance mit Azure Purview
  • Begleitung des Kundenteams in Workshops und Schulungen
  • Anwendung agiler Methoden wie Scrum, Kanban und Scrumban
  • Entwicklung mehrsprachiger und mehrwährungsfähiger Preislisten für die regionalen und landesspezifischen Vertriebsorganisationen des Kunden mit Talend, Oracle. Datenquellen SAP, Stibo Step, Schema St4 (Bosch Building Technologies)
  • Entwicklung einer Datenpipeline zur Migration regionaler Produktdaten aus verschiedenen Firmendatenquellen in das MDM-System (Bosch Power Tools)
  • Unterstützung beim Rollout der Kundeninfrastruktur auf AWS mit IaC Pulumi (Norauto)
  • Migration von Produktdaten aus Systemen wie SAP, Stibo Step etc. nach Salesforce CRM mit Talend Cloud und Talend Big Data (Bosch eBike)
  • Bereitstellung einer zentralen Datenplattform für effiziente Datennutzung durch Unternehmens-Stakeholder und Abteilungen. Ermöglichung analytischer Daten aus Google Search, Google Analytics, Product APIs etc. mit Azure Databricks, Azure Data Factory, Synapse Analytics und PySpark (Bosch Power Tools Data-Hub)
  • Entwicklung eines Data Governance Proof of Concept zur Kundenpräsentation mit Azure Data Factory, Azure Purview und IaC Terraform (Bosch Building Technologies)
  • Umsetzung von Custom Stibo STEP Web-Extensions mit Java (Bosch Power Tools)
  • Migration von Kundendaten aller global tätigen Konzern-Tochtergesellschaften in die zentrale Schnittstelle in Salesforce mit Azure PaaS – Azure Data Factory, Azure Cosmos DB, Databricks und PySpark (Komax Holding AG)
  • Entwicklung von Data Logistics für Produktdaten aus PIM und SAP in die REST-basierte Product API über Azure PaaS, Nutzung von Azure Data Factory, Cosmos DB, Azure Functions, Databricks, Python. Entwicklung von CI/CD-Release-Pipelines in Azure DevOps zum Einsatz von ARM-Templates in Azure Data Factory (Bosch Data Logistics)
Okt. 2016 - Mai 2021
4 Jahren 8 Monaten
Köln, Deutschland

Business Intelligence Developer / Inhouse-Berater

Trusted Shops GmbH

  • Bearbeitung datengetriebener Anforderungen für Datenintegration, Datenlogistik und DWH von Stakeholdern aus allen Abteilungen
  • Konzeption und Umsetzung logischer und physischer Datenmodelle, Design von Datenarchitekturen und Erstellung von Proof-Of-Concepts
  • Aufbau von ETL-Jobs mit Talend, Python, SQL. Orchestrierung und Scheduling mit Rundeck, Linux Cron, TAC, Luigi Framework.
  • Durchführung von Datenmigrationen von On-Premises in die AWS-Cloud mit AWS S3, SQS, Lambda-Funktionen und Python.
  • Erstellung von CI/CD-Pipelines für automatischen Rollout von SQL-Strukturen mit AWS Build, SQL, Flyway, GitHub und Toad Data Modeler
  • Transformation einer On-Premises Enterprise-Datenbank zur zentralen Data Vault Core Layer in der AWS-Cloud (RDS)
  • Erstellung von Reports mit MicroStrategy und Qlik Sense
  • Dokumentation in Confluence, agiler Workflow (Full Cycle)
  • Implementierung einer zentralen CORE-Datenebene im Enterprise DWH mit Data Vault, Toad Data Modeler, Talend Data Integration (Trusted Shops)
  • Aufbau mehrerer DWHs für Finance, Consumer, Sales und Risk (Trusted Shops)
  • Datenmigration von B2B/B2C-Kundendaten ins Subscription-Management-System Zuora, Synchronisation mit Salesforce für Accounting mit Talend, REST und NoSQL (Trusted Shops)
  • Einrichtung einer Datenpipeline für kontinuierliches Einspeisen von Shop-Bestellungen und Rezensionen in den Corporate Data Lake mit AWS S3, SQS, Lambda etc. (Trusted Shops)
  • Migration von Rezensionen aus On-Premises-Systemen in die Cloud-basierte Datenplattform mit Talend und AWS Native (S3, Lambda, Snowflake) für die MARS-Produkteinheit (Trusted Shops / Volkswagen)
Sept. 2015 - März 2016
7 Monaten
Köln, Deutschland

Werkstudent Business Intelligence

Infomotion GmbH

  • Erstellung von Reports mit SAP BO Web Intelligence
  • Modellierung der Universen mit SAP BO IDT
  • Datenpflege im Kundendaten-DWH mit SAP DataStage
  • Entwicklung eines Management-Informationssystems für die BI-Einheit
  • Vorbereitung BI-orientierter Präsentationen
Sprachen
Deutsch
Muttersprache
Englisch
Verhandlungssicher
Ausbildung
Okt. 2015 - Sept. 2017

Universität Siegen

M.Sc. · Wirtschaftsinformatik · Siegen, Deutschland · 1.0

Okt. 2012 - Aug. 2015

Universität zu Köln

B.Sc. · Wirtschaftsinformatik · Köln, Deutschland

Sept. 2006 - Juni 2010

Universität für Informationstechnologien in Taschkent

B.Sc. · Informatik · Tashkent, Usbekistan

Zertifikate & Bescheinigungen

MicroStrategy-Schulung

Workshop Big Data auf AWS

Workshop Data Modeling (TDWI)

Talend-Schulung

Linuxhotel-Schulung

Linuxhotel

Sie suchen Freelancer?Passende Kandidaten in Sekunden!
FRATCH GPT testen
Weitere Aktionen