
資深資料工程師,Databricks
為 Retail Insight 的美國零售客戶打造可靠的 Databricks 資料管線與資料產品。 協助建置可擴充、涵蓋多種雲端資料平台的分析基礎架構。
說明
- 建置並維護可擴充的資料管線。
- 提升批次與串流工作流程的可靠性及效能。
- 協助設計與實作資料架構。
- 為各資料管線加入資料品質檢查、監控及可觀測性功能。
- 落實安全、存取控制及治理標準。
- 與資料科學家及分析師合作交付資料產品。
- 與首席資料工程師合作,將業務需求轉化為技術方案。
- 審查程式碼並協助維持工程標準。
- 尋找降低雲端成本及提升平台效能的方法。
- 改善平台文件、工具選擇及工程實務。
- 與同事及客戶利害關係人了解需求並支援交付。
職位要求
- 具備資料工程經驗,包括建置及維護正式環境中的 Databricks 資料管線。
- 具備 Databricks Unity Catalog 和 Databricks Asset Bundles 使用經驗。
- 熟悉 Apache Spark、Delta Lake 和 Databricks Workflows 的實務應用。
- 精通 Python 和 SQL。
- 了解資料建模、ETL/ELT 模式及分散式資料處理。
- 具備 Azure 資料服務經驗,例如 Azure Data Factory、ADLS Gen2 和 Azure DevOps,或具備同等 AWS 或 GCP 服務經驗。
- 具備實作資料品質檢查及管線監控的經驗。
- 溝通能力良好,能與技術及非技術背景的同事順利合作。
- 樂於協作,對品質成果負責,並有學習與改進的動力。
- 具備電腦科學、資料工程或相關領域學位,或同等實務經驗。
- 願意依需求出差。
- 熟悉 Terraform 或 Bicep 者加分。
- 熟悉 dbt 或類似資料轉換架構者加分。
- 曾接觸 Kafka 或 Event Hubs 者加分。
- 曾接觸零售或消費品(CPG)資料者加分。
- 具備直接服務客戶的經驗者加分。
福利待遇
- 可在任何地點工作的福利。
- 夏季工時安排。
- 生日、婚禮等人生重要時刻可額外休假。
- 每年 26 天帶薪休假,並隨年資累積。
- 帶薪志工假。
- 心理健康資源。
- 可使用領先的學習平台。
- 職涯發展計畫。
- 協助打造符合個人需求的居家工作空間。
- 醫療、牙科及視力保險。
- 退休計畫,雇主提撥配對比例為 6%。
- 年度電話費補助。
- 可使用現場健身房。
- 透過線上平台彈性自選福利。



