Talan 大數據開發工程師——阿根廷遠端職缺
在 Talan 為市場風險應用程式開發 Spark、Scala 和 SQL 資料湖管線。 建構可擴充的資料處理工作流程,並與國際 Agile 團隊及正式環境團隊協作。
說明
- 使用 Apache Spark、Scala 和 SQL 建立、強化並支援資料湖管線
- 為大量資料集開發可擴充的資料處理解決方案
- 使用 Control-M、Airflow 及類似工具協調批次工作流程與相依性
- 為市場風險使用情境交付資料擷取、轉換、驗證和發布流程
- 提升 Spark 工作負載的效能、可靠性與可擴充性
- 審查技術與功能需求,找出差距並提出實務可行的解決方案
- 協助規劃交付並協調跨團隊工作,以支援順利實作
- 回應正式環境事件、調查根本原因並改善營運流程
- 與 Agile 小組、業務職能相關人員及正式環境支援團隊合作,交付可靠的解決方案與商業價值
- 運用軟體工程與資料開發實務,打造易於維護且可投入正式環境的系統
職位要求
- 至少兩年大數據、資料湖或雲端資料平台專業經驗
- 具備使用 Apache Spark、Scala 和 SQL 進行大規模資料處理的實務經驗
- 了解資料湖架構、資料品質控管、資料血緣和正式環境管線
- 具備出色的分析與問題解決能力
- 能清楚溝通,並與技術及業務職能相關人員有效協作
- 具備適應力,並能主動解決技術挑戰
- 英語達到 C1 等級或同等專業流利程度
- 具備西班牙語能力者佳
- 具備工作流程編排與排程工具經驗者佳,尤其是 Control-M 和 Airflow
- 具備 Databricks 及 Azure、AWS 等雲端平台經驗者佳
- 具備 YARN 和雲端運算環境經驗者佳
- 具備 CI/CD 以及 GitHub、Jenkins 和 SonarQube 等工程工具經驗者佳
- 具備銀行正式環境、營運監控及 ServiceNow 等事件工具經驗者佳
- 了解市場風險流程者佳,包括 P&L、估值、風險指標和法規報告資料流
福利待遇
- 全遠端工作安排
- 提供培訓與職涯發展機會
- 有機會加入多元文化團隊並參與國際專案
