Itix 中階資料工程師（遠端，巴西）
加入 Itix，打造 Lakehouse 資料管道與 RAG 解決方案。 使用 Databricks、Delta Lake、嵌入、資料品質與治理技術。
說明
- 在 Databricks 或開源框架中，於 Delta Lake 獎牌式架構內建置 ETL/ELT 管道
- 處理並標準化 PDF 與影像資料及其相關中繼資料
- 依據巴西 LGPD 整理並匿名化資料，用於 RAG、少樣本學習與測試資料集
- 開發並維護向量索引，包括分塊、嵌入、增量更新與版本控制
- 建立具版本控制的黃金資料集，用於準確度衡量與基準測試
- 設計回饋迴圈持久化機制，並為品質與 SLA 儀表板提供資料
- 連接資料庫、推論服務與外部 API，同時管理效能、成本、監控與警示
- 透過 Jobs、CI/CD 管道與資料品質測試自動化工作流程
職位要求
- 精通 Python 與 SQL
- 具備資料建模以及獎牌式架構或 Lakehouse 架構經驗
- 具備建置 PDF、影像與文字等非結構化資料管道的經驗，包括為 RAG 準備資料
- 熟悉向量資料庫與嵌入技術，例如 Databricks Vector Search 或 pgvector
- 具備資料品質、測試與版本控制經驗
- 具備實務 Databricks 使用經驗，包括 Delta Lake、Workflows 或 Jobs、筆記本、PySpark 與 Spark SQL
- 具備 Git 與 CI/CD 經驗
- 具備 Azure、AWS 或 GCP 工作經驗
- 了解 LGPD 與敏感資料處理
- 具備受治理環境中的 Unity Catalog 使用經驗
- 具備 MLflow、Databricks Model Serving 或 Mosaic AI 經驗
- 具備 Delta Live Tables 或 Lakeflow 以及 Auto Loader 經驗
- 具備保險或金融服務業經驗
- 具備 Terraform 或 Databricks Asset Bundles 經驗
- 持有 Databricks Data Engineer Associate 或 Professional 認證
福利待遇
- 可彈性選擇最適合專案的工作地點
- 折扣合作福利
- 員工推薦獎勵計畫
- 生日休假
- 可使用 TotalPass 或 Gympass
- 健康與身心健康計畫
- 可使用配備懶骨頭、撞球桌、電子遊戲、休憩區、設備齊全的廚房與咖啡的辦公室休閒空間