資深資料工程師,資料治理與資料血緣——CI&T,巴西混合辦公
為 CI&T 的全球客戶開發 Azure Databricks 管道與 Lakehouse 解決方案。 推進支援分析、商業智慧與人工智慧的資料能力。
說明
- 使用 Azure Databricks 與 Azure Data Factory 設計並最佳化可擴充的資料管道
- 建立從資料擷取、轉換到交付的 ETL/ELT 工作流程
- 在 Bronze、Silver 與 Gold 層實作 Medallion 架構與 Data Lakehouse 解決方案
- 使用 PySpark、Spark SQL、SQL 與 Python 建立資料工程解決方案
- 使用 Delta Lake 維持資料品質、一致性、效能與可靠性
- 為 BI 與分析使用案例設計並改進資料模型
- 連接來自不同系統的資料,包括關聯式資料庫與 API
- 與 BI、資料科學、工程及業務團隊合作
- 遵循品質、治理、版本控制與 CI/CD 實務
- 應用生成式 AI 工具與程式碼助理,提升開發效率與品質
- 支援涉及雲端、資料與人工智慧的全球現代化與轉型計畫
職位要求
- 具備在生產環境中擔任資料工程師的實務經驗
- 具備豐富的 Azure Databricks 實務操作經驗
- 具備進階 PySpark 與 Apache Spark 技能,包括大規模資料處理與最佳化
- 具備進階 SQL 能力
- 具備資料工程領域的實務 Python 經驗
- 具備使用 Azure Data Factory 建置與編排管道的經驗
- 了解 ETL/ELT 以及 Bronze、Silver 與 Gold Medallion 架構
- 具備 Delta Lake 與 Data Lakehouse 環境經驗
- 了解維度資料建模與關聯式資料建模
- 具備 Git 與版本控制工作流程經驗,熟悉 Bitbucket 者優先
- 了解 CI/CD、Azure Pipelines、Azure DevOps 或同類工具
- 具備 SQL Server 或 Oracle 等關聯式資料庫經驗
- 具備務實、分析導向且以解決方案為核心的工作方式
- 能夠獨立調查問題並提出改進建議
- 能夠跨團隊與業務職能有效合作
- 具備 Kimball 方法論與多維度建模經驗者優先
- 具備 Azure Purview 或同類資料治理與資料目錄經驗者優先
- 具備將 Azure DevOps 應用於資料管道的經驗者優先
- 了解 Streaming、Spark Structured Streaming 或 Azure Event Hubs 者優先
- 具備 Erwin 或類似資料建模工具經驗者優先
- 具備 GitHub Copilot、Databricks Assistant 或其他 AI 開發工具應用經驗者優先
- 具備 Azure DP-203 或 Databricks 認證者優先
福利待遇
- 醫療與牙科保險
- 餐費與食品津貼
- 托育補助
- 延長育嬰假
- Wellhub(Gympass)、TotalPass 及其他健身與健康合作方案
- 利潤分享與業績計畫(PLR)
- 人壽保險
- 可使用 CI&T University 持續學習平台
- 折扣俱樂部會員資格
- 免費線上身心健康與福祉資源
- 孕期與負責任育兒課程
- 線上學習平台合作方案
- 語言學習平台
- 為身心障礙人士提供支援與職場便利措施
- 健康與福祉團隊、共融專家及員工興趣小組
- 全球專案、持續學習、創新與職涯發展
