Ziyang F.

Softwareentwickler · DataWorks

Hangzhou, China

Erfahrungen

Sept. 2022 - Bis heute
3 Jahren 3 Monaten
Hangzhou, China

Softwareentwickler · DataWorks

Alibaba Cloud

  • Entwickelte über 20 Inspektoren (z. B. teure SQL-Abfragen, Existenz von Tabellen und Feldern, Verbot einfacher Verarbeitung) für die Vorab-Phase, um Benutzeraktionen, Einreichungen und Freigaben abzufangen, bei täglich zehntausenden Prüfaufgaben.
  • Entwickelte einen hochverfügbaren Failover-Mechanismus mit regelmäßigen Heartbeat-Meldungen, Master-Wahl bei Verbindungsabbrüchen und sekundärer Verteilung fehlgeschlagener Aufgaben.
  • Entwarf fünf Domänen (F&E, Speicherung, Rechenbetrieb, Qualität, Sicherheit) für Governance-Items, entwickelte über 60 Governance-Items (z. B. fehlende Upstream-Abhängigkeiten, Daten-Skew, durchgängig konsistenter Import) und führte T+1-Lineage-Tracking, Datenverarbeitung, Nutzenberechnung, Gesundheitsbewertungen und Berichts-Rückfluss durch, wodurch täglich Millionen von Governance-Items entstehen.
  • Entwickelte automatisierte Werkzeuge für Governance-Items, wie Ein-Klick-Abschluss von Upstream-Abhängigkeiten und Optimierung von Daten-Skew (MapJoin, SkewJoin).
  • Entwarf und entwickelte einen Short-URL-Generator mit automatisch inkrementierter eindeutiger ID, Base-62-Konvertierung, Speicherzuordnung und LRU-Algorithmus für Cache-Aktualisierungen.
  • Tiefgreifend optimierte Abfrageszenarien für Governance-Berichte, implementierte einen Zugriffsmechanismus für mehrere Datenquellen, der OLAP (MySQL-Indexoptimierung) und OLTP (Hologres-Spaltenfamilienoptimierung) kombiniert, stellte Datenkonsistenz durch Flink-CDC-Link-Synchronisierung sicher und implementierte Monitoring- und Downgrade-Strategien.
Dez. 2020 - Apr. 2021
5 Monaten
Shenzhen, China

Softwareentwickler-Praktikant · LightSpeed & Quantum Studios

Tencent Games

  • Implementierte ein asynchrones und leistungsfähiges C/C++-Service-Framework auf Basis des Router-Dealer-Prototyps mit ZeroMQ, das asynchrone und gleichzeitige Unterstützung für das Training von Game-AI-Modellen bietet.
Juni 2019 - Sept. 2019
4 Monaten
Beijing, China

Softwareentwickler-Praktikant · Huawei Cloud

Huawei Technologies Co., Ltd.

  • Implementierte Middleware in C zur Überwachung des Gateway-Verkehrs und zur Lastverteilung in Clustern unter Verwendung von Rate-Limiting-Algorithmen (Leaky Bucket, Token Bucket).

Sprachen

Englisch
Verhandlungssicher
Chinesisch
Verhandlungssicher
Japanisch
Grundkenntnisse

Ausbildung

Sept. 2020 - Sept. 2022

Waseda University

Master of Engineering in Informationssystemen · Informationssysteme · Japan

Sept. 2016 - Juni 2020

Dalian University of Technology

Bachelor of Science in Informatik · Informatik · Dalian, China · 3.8/4.0

Sie suchen Freelancer?Passende Kandidaten in Sekunden!
FRATCH GPT testen
Weitere Aktionen