Entwickelte über 20 Inspektoren (z. B. teure SQL-Abfragen, Existenz von Tabellen und Feldern, Verbot einfacher Verarbeitung) für die Vorab-Phase, um Benutzeraktionen, Einreichungen und Freigaben abzufangen, bei täglich zehntausenden Prüfaufgaben.
Entwickelte einen hochverfügbaren Failover-Mechanismus mit regelmäßigen Heartbeat-Meldungen, Master-Wahl bei Verbindungsabbrüchen und sekundärer Verteilung fehlgeschlagener Aufgaben.
Entwarf fünf Domänen (F&E, Speicherung, Rechenbetrieb, Qualität, Sicherheit) für Governance-Items, entwickelte über 60 Governance-Items (z. B. fehlende Upstream-Abhängigkeiten, Daten-Skew, durchgängig konsistenter Import) und führte T+1-Lineage-Tracking, Datenverarbeitung, Nutzenberechnung, Gesundheitsbewertungen und Berichts-Rückfluss durch, wodurch täglich Millionen von Governance-Items entstehen.
Entwickelte automatisierte Werkzeuge für Governance-Items, wie Ein-Klick-Abschluss von Upstream-Abhängigkeiten und Optimierung von Daten-Skew (MapJoin, SkewJoin).
Entwarf und entwickelte einen Short-URL-Generator mit automatisch inkrementierter eindeutiger ID, Base-62-Konvertierung, Speicherzuordnung und LRU-Algorithmus für Cache-Aktualisierungen.
Tiefgreifend optimierte Abfrageszenarien für Governance-Berichte, implementierte einen Zugriffsmechanismus für mehrere Datenquellen, der OLAP (MySQL-Indexoptimierung) und OLTP (Hologres-Spaltenfamilienoptimierung) kombiniert, stellte Datenkonsistenz durch Flink-CDC-Link-Synchronisierung sicher und implementierte Monitoring- und Downgrade-Strategien.
Implementierte ein asynchrones und leistungsfähiges C/C++-Service-Framework auf Basis des Router-Dealer-Prototyps mit ZeroMQ, das asynchrone und gleichzeitige Unterstützung für das Training von Game-AI-Modellen bietet.
Juni 2019 - Sept. 2019
4 Monaten
Beijing, China
Softwareentwickler-Praktikant · Huawei Cloud
Huawei Technologies Co., Ltd.
Implementierte Middleware in C zur Überwachung des Gateway-Verkehrs und zur Lastverteilung in Clustern unter Verwendung von Rate-Limiting-Algorithmen (Leaky Bucket, Token Bucket).
Sprachen
Englisch
Verhandlungssicher
Chinesisch
Verhandlungssicher
Japanisch
Grundkenntnisse
Ausbildung
Sept. 2020 - Sept. 2022
Waseda University
Master of Engineering in Informationssystemen · Informationssysteme · Japan
Sept. 2016 - Juni 2020
Dalian University of Technology
Bachelor of Science in Informatik · Informatik · Dalian, China · 3.8/4.0
Sie suchen Freelancer?Passende Kandidaten in Sekunden!