資料工程師,LLM 與生成式 AI 應用——新加坡(混合辦公)
為 Assurity Trusted Solutions(GovTech 旗下子公司)建置 AWS 與 Databricks 資料管道。 支援資料與 AI 工作流程中的 BI 分析及正式環境生成式 AI 整合。
說明
- 使用 Databricks、PySpark 與 SQL,在 AWS 資料平台上建置並運作可靠的 ETL 與 ELT 管道。
- 為 Tableau 儀表板與內部報告建立並調校資料模型與資料表。
- 與資料科學家及 AI 工程師合作,將生成式 AI 模型部署至正式環境,協調資料相依性、提示詞儲存與推論管道。
- 為 ETL 工作流程與資料結構導入監控、版本控制及資料品質標準。
- 透過與利害關係人密切合作,將業務資料需求轉化為可擴充的工程解決方案。
- 依照組織及區域要求維護資料安全與合規性。
職位要求
- 至少 3 年資料工程或類似技術職位的工作經驗。
- 具備 Databricks、使用 PySpark 或 SQL 的 Spark,以及 AWS 服務(包括 S3、Glue、Lambda、Redshift 與 Athena)的實務經驗。
- 深入了解資料倉儲架構、資料建模與效能最佳化。
- 具備 Tableau 或類似商業智慧與報告平台的實際使用經驗。
- 了解 ML、生成式 AI 或 LLM 應用,包括以 API 為基礎的模型部署、嵌入儲存整合,或文字與聊天管道。
- 熟練 Python,並深入理解以 Git 為基礎的版本控制。
- 了解 API 設計、使用 Airflow 或 dbt 進行資料編排,以及 CI/CD 實務。
- 具備出色的分析、溝通與技術文件撰寫能力。
福利待遇
- 每年提供專用的專業培訓經費。
- 年度績效獎金。
- 契約人員享有與正式員工相同的福利。
