資料工程主管 – Microsoft Fabric 與 Azure(混合辦公)
負責 Azure 與 Microsoft Fabric 資料平台的架構與交付。建立可擴充的資料管道、Power BI 分析與治理實務,推動代理式工程工作流程,並帶領資料工程團隊。
說明
- 負責跨產品的資料擷取、轉換與分析架構
- 為管道、儲存、工作區、資料模型與分析建立可擴充、可重複使用的模式
- 使用獎章架構建立生產等級的 Bronze、Silver 與 Gold 管道
- 制定結構描述、轉換、命名、監控與報表就緒度標準
- 定義編碼代理使用的規格、驗證流程與防護措施
- 開發具備冪等性、安全重播、增量處理與清楚分層的原型及生產程式碼
- 透過原始碼控制與 CI/CD 發佈管道,實施版本管理、監控、漂移偵測、警示與經過測試的復原程序
- 隨著資料量增加,管理平台效能、可靠性、可復原性與成本
- 在每個層級邊界執行資料品質檢查與驗證
- 維持一致的指標定義,並與相關夥伴協作落實存取控制、資料列層級安全性與隱私
- 為 Power BI 設計語意模型、資料集市與共用資料集
- 就資料建模、效能與重複使用向分析師和報表開發人員提供建議
- 透過解決方案設計、程式碼審查、複雜問題處理,以及在線路、品質與可觀測性方面的指導,帶領小型資料工程團隊
- 建立可靠、可重複使用且可擴充的資料平台營運實務
職位要求
- 具備 8 年以上親自參與資料工程的經驗,基礎扎實,並有端到端交付資料解決方案的紀錄
- 至少有 2 年資料工程主管、技術主管或人員領導職務經驗,能夠指導技術工作並持續親自參與實作
- 具備扎實的資料架構與建模知識,包括維度建模以及獎章架構等分層設計,並擁有專案實作經驗
- 具備 Microsoft Fabric 實務經驗;若能在 Fabric 中工作,Databricks、Snowflake 或 Synapse 的豐富經驗也具相關性
- 能夠從零建立生產規模的資料管道與轉換,包括營運來源擷取、進階 SQL、增量載入,以及 Python 或 PySpark
- 涵蓋從來源資料擷取、管道開發到資料建模與 Power BI 報表層的完整工程生命週期
- 了解 Power BI 資料流、資料集設計、語意建模與 DAX
- 曾負責生產環境中的資料平台,包括監控、重新整理可靠性、復原、效能與成本管理
- 了解資料治理、品質、可觀測性、資料血緣、驗證、存取控制、資料列層級安全性、隱私,以及透過 Azure DevOps、GitHub Actions 或 Fabric Git 整合實現的資料 CI/CD
- 具備良好的技術判斷力與問題解決能力,能獨立選擇並說明技術方法,並負責將問題處理至解決
- 了解代理式工程;具備實務經驗者加分
