
資深資料庫分析工程師
運用 dbt、PySpark 與 Iceberg 建置可擴充的資料管線。 透過分析工程、測試及舊版 SAS 系統遷移,支援歐洲機構。
說明
- 建置可擴充且可靠的資料轉換管線與工作流程
- 提升 dbt 專案效能並縮短執行時間
- 使用 dbt 建立並記錄資料品質檢查與控制測試
- 設定自動化回歸測試與驗證程序
- 分享維護及演進 dbt 專案的團隊實務
- 將業務需求與分析文件轉化為可運作的資料轉換管線
- 與開發團隊及主要客戶的駐點 IT 團隊合作
- 於公司或客戶場所工作
職位要求
- 具備電腦科學、資訊科技、系統工程或相關領域的大學學位
- 至少 12 年相關 IT 經驗
- 具備在正式環境分析轉換專案中使用 dbt 的實務經驗,尤以 dbt Core 為佳
- 具備分析工程與現代資料建模經驗,包括分層架構、可重複使用的巨集、資料品質控管及 CI/CD
- 具備撰寫 PySpark 轉換程式以處理大規模資料的經驗
- 具備 Apache Iceberg 實務知識,包括分割區與結構演進、快照管理及時間旅行
- 具備 Dagster 等協調與排程工具的經驗
- 熟悉 SAS ETL 與舊版程式碼庫
- 具備進階 SQL 技能,包括複雜轉換、效能調校及增量處理
- 了解 Apache Spark 執行方式、分割區、檔案配置最佳化及效能調校
- 具備扎實的資料驗證、核對與測試能力
- 了解版本控制與協作開發,包括 Git、程式碼審查、發布管理及自動化部署管線
- 英語能力優良
福利待遇
- 薪酬依資格與經驗而定
- 可選擇合約安排,或選擇含完整福利方案的薪酬
- 對應徵申請保密處理
- 提供平等就業機會
- 國際化、多語言、多元文化的工作環境
- 在充滿活力的公司享有職涯發展機會
相關職缺
