資深資料工程師，Databricks
建置 Databricks 湖倉管線與資料集，支援報表、機器學習和分析。 為財務、銷售、供應鏈及行銷等團隊提供支援。
說明
- 建立並維護資料管線與資料集，協助各業務部門進行報表、視覺化、機器學習及明智決策。
- 在 Databricks 湖倉中開發可擴充的管線與可重複使用的資料集。
- 使用 Python、PySpark 和 SQL 擷取、驗證、清理及轉換結構化與非結構化資料。
- 為 Tableau 及 Spotfire 等工具建立資料模型與報表資料集。
- 將現有資料倉儲和報表系統連接至現代雲端分析平台。
- 提升管線可靠性、資料品質及處理速度。
- 建立自動化測試、監控、文件記錄和 CI/CD 作業流程。
- 與分析師、架構師、開發人員及業務利害關係人合作，交付實用的資料解決方案。
- 指導技術工作、審查程式碼並輔導其他資料工程師。
職位要求
- 至少七年資料工程經驗，包括建置及支援正式環境資料管線。
- 具備扎實的 SQL 技能，並充分掌握資料建模、資料庫設計和資料倉儲。
- 具備 Databricks、Apache Spark 和雲端資料平台的實務經驗。
- 精通 Python 和 PySpark。
- 具備建置 ETL/ELT 管線及整合多個來源系統資料的經驗。
- 具備為 Tableau 或類似商業智慧工具準備可靠資料集的經驗。
- 熟悉版本控制、自動化測試和 CI/CD。
- 能夠診斷複雜的資料問題並改善管線效能。
- 溝通清楚，且具備與技術團隊及業務利害關係人合作的經驗。
- 具備 Spotfire、Oracle、Informatica、R 或資料虛擬化經驗者優先。
- 具備 Databricks 認證者優先。
