資深資料工程師 - 波蘭遠端
加入 Valtech,擔任資深資料工程師,打造支援分析、機器學習、生成式人工智慧與生產資料產品的雲端資料平台。 你將開發可擴充的資料管線、湖倉架構與可靠的資料服務,以支援現代人工智慧與分析工作負載。
說明
- 為分析、人工智慧與資料產品設計、開發並最佳化雲端資料平台。
- 為結構化與非結構化資料建立可靠的批次、串流與近即時資料管線。
- 開發穩健的資料擷取、轉換與整理流程。
- 使用 Databricks 或 Microsoft Fabric 建立湖倉解決方案與獎牌層架構。
- 為分析、機器學習、因果分析、最佳化、生成式人工智慧、大型語言模型、檢索增強生成與代理式應用程式產生可信資料集。
- 使用 Airflow、dbt、Databricks Workflows、Azure Data Factory 或同類工具建立資料模型並自動化工作流程編排。
- 採用事件驅動與串流模式,同時建立治理、資料血緣、品質控制、存取管理與可觀測性機制。
- 追蹤資料新鮮度、管線韌性、SLA 效能、可擴充性、效率與營運成本。
- 為下游機器學習與人工智慧解決方案提供服務層、API、特徵輸入與分析介面。
- 透過利害關係人訪談與有依據的建議,釐清並改善業務需求。
- 與資料科學家、機器學習工程師、分析師、平台團隊及業務利害關係人合作。
- 協助團隊採用資料產品,並推動資料與人工智慧工程實務。
職位要求
- 具備 Apache Spark 與 Delta Lake 的實務操作經驗。
- 具備扎實的 Python 與 SQL 程式設計能力。
- 具備交付批次與串流管線,以及可投入生產的資料平台之專業經驗。
- 熟悉資料建模、資料品質與資料治理。
- 在 AWS 資料服務與 Databricks Lakehouse,或 Microsoft Azure/Fabric 及相關工具方面具備豐富實務經驗。
- 在一種雲端與平台技術路徑上具備深厚專長;具備 Snowflake 或 GCP 知識者佳,但非必要。
- 具備設計湖倉架構與使用分散式資料系統的經驗。
- 深入理解資料管線對可擴充性、可靠性與效能的要求。
- 具備有效的問題解決能力與協作工作方式。
- 具備敏捷或顧問環境經驗者佳。
- 具備生成式人工智慧與人工智慧資料平台、資料管線 CI/CD、Terraform 或 CloudFormation、Kafka、Spark 最佳化、高階分析或機器學習工作負載,或大規模資料產品經驗者佳。
- 請提交一份詳細說明相關經驗與專長的履歷。
福利待遇
- 每年 24 個有薪工作日的年假。
- 法定假日涵蓋在內。
- 每年最多 20 天病假。
- 每年最多 20 天無薪假。
- 醫療保險。
- 可選擇 Multisport 卡或 Multikafeteria。
- 提供產假與陪產假支援。
- 內部工作坊與學習活動。
- 補助專業認證費用。
- 有機會參與本地與全球專業社群。
- 透過成長架構設定期望,並規劃通往所選職涯路徑的發展進程。
- 導師計畫提供成為導師或受指導者的發展機會,並協助晉升至更高職位。
- 福利方案會隨服務年資增加而逐步擴展。
- 提供彈性的遠端與混合工作選項,視所在國家的可用性而定。
- 透過國際流動與專業發展計畫實現職涯成長。
- 可使用現代化工具、培訓資源與產業專家。
- 在整個面試過程中提供合理便利。
