中高階資料工程師 - 諾伊達混合辦公
加入EXL,擔任中高階資料工程師,在諾伊達以混合辦公模式開發可擴充的Databricks與Snowflake平台。 使用Python、SQL與Spark建置ETL/ELT管道、資料模型及雲端分析解決方案。
說明
- 與資深資料工程師和架構師合作,開發、最佳化並支援可擴充的資料管道與工作流程。
- 使用Databricks、Spark、Python和SQL建立ETL/ELT流程。
- 設計並實作結構化與非結構化資料的擷取架構。
- 開發及維護Snowflake資料模型、資料市集與分析資料集。
- 監控管道作業,提升效能、可靠性與可擴充性。
- 與利害關係人、分析師和資料科學家合作,釐清需求並交付資料解決方案。
- 參與架構討論、概念驗證和流程改善工作。
- 記錄資料流、技術設計與實作細節,以支援營運和知識共享。
- 在各資料平台套用資料品質、安全性與治理標準。
職位要求
- 具備電腦科學、資訊科技、工程、資料科學或相關技術領域的學士或碩士學位。
- 熟悉SQL與核心資料庫概念。
- 熟練使用Python或同類型程式語言。
- 了解資料倉儲、ETL/ELT工作流程與資料建模。
- 曾透過專案、實習、認證、黑客松或個人實作接觸Databricks、Apache Spark、Snowflake或雲端資料平台。
- 具備Azure、AWS或Google Cloud Platform基礎知識者佳。
- 具備良好的分析與問題解決能力,並熱衷學習現代資料工程技術。
- 具備良好的溝通與協作能力。
