
資深 Databricks 資料工程師,副總裁 — State Street(昆西,混合辦公)
為 State Street 金融服務平台建置 Azure 與 Databricks 資料管線。 在敏捷團隊中開發 ETL、資料品質與高處理量架構。
說明
- 使用 Azure 和 Cosmos DB 建置並測試端對端雲端資料管線,支援串流、事件驅動及批次資料擷取。
- 建立 ETL 流程,將資料擷取、轉換並載入資料湖。
- 在工程工作中運用 Databricks 與資料倉儲相關概念。
- 建立以高處理量為目標的可設定架構與程式庫。
- 透過協作、影響利害關係人並展示概念驗證來推動變革。
- 參與軟體開發生命週期各階段,從設計和編碼到整合測試、部署與文件撰寫。
- 與敏捷專案團隊的同事合作。
- 遵循既定的工程實務與編碼標準。
- 監控資料管線並排查問題以解決故障。
- 加入資料品質檢查與驗證機制,以維持準確性。
- 分析資料並探索資料集。
- 持續精進專業技能。
職位要求
- 具備電腦科學、資訊科技或相關領域的學士學位。
- 至少 10 年大數據管線相關經驗。
- 至少 5 年 Databricks 實務操作經驗。
- 至少 5 年雲端平台開發經驗,涵蓋 Azure 服務、Azure DevOps、Kubernetes 和 Docker。
- 具備微服務架構與雲端運算經驗;熟悉 Azure 者優先。
- 熟練使用 Databricks、Delta Lake 和 Apache Spark。
- 具備 Databricks SQL 與 Scala 開發實務經驗。
- 深入了解 Databricks 資源,包括叢集與作業。
- 具備豐富的 DevOps 管線疑難排解實務經驗,包括 ADO 和 Harness。
- 具備使用 Git 等版本控制工具的經驗。
- 具備處理 Avro、JSON 和 XML 等半結構化格式的經驗。
- 基本熟悉 Shell 指令稿、UNIX、TOAD 和 SQL Developer。
- 具備良好的職場溝通能力,包括書面與口頭溝通。
- 具備金融服務業經驗。
- 具備敏捷開發方法經驗。
- 具備 Snowflake 經驗者加分。
福利待遇
- 提供含公司提撥配對的 401(k) 退休儲蓄計畫。
- 提供多種保險選項,包括基本人壽、醫療、牙科、視力、長期失能及其他自選保障。
- 提供帶薪假,涵蓋休假、病假、短期失能及家庭照護責任相關假期。
- 員工協助方案。
- 符合資格者可獲得年度績效獎勵。
- 符合資格者可參加特定稅務優惠儲蓄計畫。
- 提供包容性的專業發展機會。
- 支持工作與生活的彈性安排。
- 提供帶薪志工服務假。
- 員工社群。



