Airwallex資料平台工程高級經理
負責支援金融基礎設施的Airwallex資料平台工程團隊。 打造Databricks湖倉、資料擷取、串流處理與規範化財務資料系統。
說明
- 透過技術指導、導師輔導、職涯發展和明確的責任歸屬,建立並領導高績效資料平台工程團隊。
- 制定高容量金融資料擷取的技術策略,涵蓋支付處理商、銀行、計費系統和ERP/總帳平台。
- 使用Spark、Delta Lake、Unity Catalog、dbt、Python和SQL推進Databricks湖倉建設。
- 建立資料契約、結構描述演進、漂移偵測、資料品質和規範化財務模型的實務體系。
- 使用Kafka、CDC、微批次處理、增量處理和Dagster,推動平台從批次處理轉向近即時工作流程。
- 負責支援會計引擎的規範化財務模型架構。
- 與基礎設施和平台團隊合作,加強可觀測性、告警、事件回應、復原和營運準備度。
- 制定GCP、Terraform、Kubernetes/GKE、Helm、GitOps和CI/CD方面的基礎設施方向。
- 監督從舊有管道遷移至湖倉的工作,包括一致性檢查、分階段發布和回復規劃。
- 提升PostgreSQL、Databricks及大規模資料工作負載的效能並控制成本。
- 與產品、會計、機器學習和平台負責人合作,將業務需求轉化為可擴展的資料平台能力。
- 透過架構審查、設計文件、技術標準和長期平台路線圖確立工程方向。
- 推動AI輔助工程,同時維持對程式碼品質、測試、安全性和可靠性的要求。
職位要求
- 至少八年資料平台、後端或基礎設施工程經驗,其中包括豐富的工程團隊領導經驗。
- 具備管理和培養資深工程師及技術負責人的成功經驗,並能建立強大且自主的團隊。
- 深入掌握資料平台、分散式系統、資料建模和生產資料管道。
- 具備扎實的Python和SQL技能,並有Spark、Databricks、Delta Lake、dbt及現代湖倉架構的實務經驗。
- 具備建立可靠資料擷取系統的經驗,涵蓋大規模回填、增量處理、檢查點、速率限制管理、冪等性和故障復原。
- 深入理解串流和事件驅動系統,包括Kafka、CDC和微批次處理。
- 具備Dagster等編排平台經驗,並能針對新鮮度、分割和增量計算進行設計。
- 具備調校PostgreSQL和分析型工作負載、提升效能並最佳化成本的經驗。
- 具備在GCP上執行生產基礎設施的經驗,並熟悉Terraform、Kubernetes/GKE、Helm、GitOps和CI/CD。
- 熟練掌握可觀測性、可靠性工程和生產營運。
- 具備出色的技術溝通能力,能夠跨團隊影響架構和工程決策。
- 具備領導複雜技術遷移的經驗,能平衡長期平台策略與即時業務優先事項。
- 有意願為可靠、可擴展且關鍵任務型的金融系統建立團隊和基礎設施。
福利待遇
- 股權參與。
- 符合年度獎金資格。
- 醫療、牙科和視力保險。
- 401(k)退休計畫。
- 短期和長期失能保險。
- 基本人壽保險。
- 身心健康福利。
- 20天帶薪年假。
- 12天帶薪公司假日。
- 法定最低年假和公眾假期。
