Ziyang F.
Softwareentwickler · DataWorks
Erfahrungen
Sept. 2022 - Bis heute
3 Jahren 4 MonatenHangzhou, China
Softwareentwickler · DataWorks
Alibaba Cloud
- Entwickelte über 20 Inspektoren (z. B. teure SQL-Abfragen, Existenz von Tabellen und Feldern, Verbot einfacher Verarbeitung) für die Vorab-Phase, um Benutzeraktionen, Einreichungen und Freigaben abzufangen, bei täglich zehntausenden Prüfaufgaben.
- Entwickelte einen hochverfügbaren Failover-Mechanismus mit regelmäßigen Heartbeat-Meldungen, Master-Wahl bei Verbindungsabbrüchen und sekundärer Verteilung fehlgeschlagener Aufgaben.
- Entwarf fünf Domänen (F&E, Speicherung, Rechenbetrieb, Qualität, Sicherheit) für Governance-Items, entwickelte über 60 Governance-Items (z. B. fehlende Upstream-Abhängigkeiten, Daten-Skew, durchgängig konsistenter Import) und führte T+1-Lineage-Tracking, Datenverarbeitung, Nutzenberechnung, Gesundheitsbewertungen und Berichts-Rückfluss durch, wodurch täglich Millionen von Governance-Items entstehen.
- Entwickelte automatisierte Werkzeuge für Governance-Items, wie Ein-Klick-Abschluss von Upstream-Abhängigkeiten und Optimierung von Daten-Skew (MapJoin, SkewJoin).
- Entwarf und entwickelte einen Short-URL-Generator mit automatisch inkrementierter eindeutiger ID, Base-62-Konvertierung, Speicherzuordnung und LRU-Algorithmus für Cache-Aktualisierungen.
- Tiefgreifend optimierte Abfrageszenarien für Governance-Berichte, implementierte einen Zugriffsmechanismus für mehrere Datenquellen, der OLAP (MySQL-Indexoptimierung) und OLTP (Hologres-Spaltenfamilienoptimierung) kombiniert, stellte Datenkonsistenz durch Flink-CDC-Link-Synchronisierung sicher und implementierte Monitoring- und Downgrade-Strategien.
Dez. 2020 - Apr. 2021
5 MonatenShenzhen, China
Softwareentwickler-Praktikant · LightSpeed & Quantum Studios
Tencent Games
- Implementierte ein asynchrones und leistungsfähiges C/C++-Service-Framework auf Basis des Router-Dealer-Prototyps mit ZeroMQ, das asynchrone und gleichzeitige Unterstützung für das Training von Game-AI-Modellen bietet.
Juni 2019 - Sept. 2019
4 MonatenBeijing, China
Softwareentwickler-Praktikant · Huawei Cloud
Huawei Technologies Co., Ltd.
- Implementierte Middleware in C zur Überwachung des Gateway-Verkehrs und zur Lastverteilung in Clustern unter Verwendung von Rate-Limiting-Algorithmen (Leaky Bucket, Token Bucket).
Sprachen
Englisch
VerhandlungssicherChinesisch
VerhandlungssicherJapanisch
GrundkenntnisseAusbildung
Sept. 2020 - Sept. 2022
Waseda University
Master of Engineering in Informationssystemen · Informationssysteme · Japan
Sept. 2016 - Juni 2020
Dalian University of Technology
Bachelor of Science in Informatik · Informatik · Dalian, China · 3.8/4.0
Sie suchen Freelancer?Passende Kandidaten in Sekunden!
FRATCH GPT testenWeitere Aktionen
Ähnliche Freelancer
Entdecken Sie andere Experten mit ähnlichen Qualifikationen und Erfahrungen.