資料工程師 – 聖保羅(混合辦公)
加入 Avanade,擔任聖保羅的資料工程師,設計支援分析、AI 與數位產品的資料平台和資料管線。打造安全且可擴充的解決方案,創造可衡量的商業價值。
說明
- 使用 Python、PySpark 和 SQL 設計並維護批次與串流資料管線
- 建置並協調可靠且具可觀測性的 ETL/ELT 工作流程,加入日誌、指標和警示
- 建立支援 BI、分析和 AI 使用情境的 OLTP 與 OLAP 資料模型
- 透過 GitHub 工作流程、提取要求和程式碼審查管理程式碼與成品的品質、版本控制及可重現性
- 開發單元測試、整合測試和資料測試,同時定義端對端測試方法
- 應用提升模組化、安全性、效能和成本效益的架構實務
- 與分析師、資料科學家和產品團隊合作,將商業需求轉化為可擴充的資料解決方案
- 記錄資料資產、流程和架構決策,以支援知識分享
- 透過自動化、標準化和效能最佳化推進資料環境
職位要求
- 熟練使用 Python 和 PySpark 進行資料處理、轉換和分散式處理
- 具備扎實的 SQL 專業能力,包括資料建模、查詢調校、CTE、視窗函數和分割
- 具備交易型 OLTP 和多維度 OLAP 資料建模經驗
- 具備使用 Airflow、Databricks Jobs 或類似工具建置及協調 ETL/ELT 工作流程的經驗
- 了解以資料為核心的軟體架構,包括設計模式、安全性、可擴充性和成本效益
- 具備 GitHub 實務經驗,熟悉 GitFlow、提取要求、語意化版本控制和基礎 GitHub Actions
- 具備設計及執行測試的經驗,包括資料品質和結構描述驗證檢查
- 具備資料 CI/CD 管線經驗者佳
- 了解資料湖、NoSQL、文件型、欄式和圖形資料庫等非關聯式平台者佳
- 具備雲端經驗者佳,最好熟悉 Azure 服務,包括 Data Lake Storage、Databricks、Synapse、Fabric 和 Key Vault
- 接觸過資料治理和安全實務者佳,例如資料血緣、目錄及 RBAC/ABAC
- 具備 Microsoft Azure 認證者佳,例如 DP-203、AZ-900、DP-900 或相關認證
- 具備 Databricks Lakehouse Fundamentals 或 Data Engineer Associate/Professional 認證者佳
- 具備中級至進階英語能力
福利待遇
- 餐費或食品津貼
- 最高適用於資深顧問職級的多元福利卡
- 醫療和牙科保險
- 認證和培訓支援
- 人壽保險
- 私人退休金計畫
- Avababy 懷孕支援及新手父母迎新禮包
- 公司利潤分享計畫
- Wellhub 會員資格
- 托兒津貼
- 職涯導師制度
- 員工及其 12 歲以下子女均可享有生日休假政策
- 健康活動課程
- 管理職位可享有公司車輛、停車位和燃油津貼
