
資深資料工程師(AI 與 Databricks)
為 RevStar 客戶打造不受雲端平台限制的 Databricks Lakehouse 資料管線與正式環境 AI 解決方案。 提升 Spark 效能、MLOps、治理能力及部署自動化。
說明
- 使用 Apache Spark 和 Delta Lake,在 AWS、Azure 和 GCP 上建置並最佳化 ETL/ELT 資料管線。
- 為企業規模的結構化與非結構化資料建立 Lakehouse 架構。
- 為分析和即時 AI 工作負載自動化資料擷取、儲存和特徵工程。
- 調校 Spark 工作以降低延遲與成本,同時提升處理量。
- 與機器學習工程師和資料科學家合作,使用 MLflow 在 Databricks 中部署 AI 模型。
- 使用 Terraform 和 Databricks CLI 建置 CI/CD 管線,並以程式碼管理基礎架構。
- 落實企業安全性、存取控制和合規標準,包括 GDPR、HIPAA 和 SOC 2。
- 與客戶技術主管、產品經理和工程團隊合作,將 AI 資料需求轉化為業務成果。
- 撰寫技術文件。
- 引導解決方案移交給客戶工程團隊。
職位要求
- 至少 3 年雲端原生資料工程經驗。
- 至少 2 年實際使用 Databricks、Apache Spark、Delta Lake 和 MLflow 的經驗。
- 精通 Python、SQL、Spark 框架、CI/CD,以及使用 Terraform 或 Databricks CLI 進行基礎架構即程式碼管理。
- 曾在步調快速的敏捷與 DevOps 顧問環境中成功交付成果。
- 具備交付不受雲端平台限制之架構的經驗。
- 具備出色的客戶溝通能力。
- 強烈優先考慮持有有效 Databricks Certified Data Engineer(Associate 或 Professional)或 Databricks ML Professional 認證者。
福利待遇
- 遠端優先的工作環境,並與全球團隊保持連結。
- 重視好奇心與主動性的協作創新文化。
- 提供平等就業機會。
- 為身心障礙人士提供合理便利。




