資料分析工程師助理——FINNOMENA，泰國混合辦公
負責 SQL、Python 與 PySpark 流程，重點支援 Google Cloud 資料擷取、資料品質、監控與分析工作。 適合參與批次與串流資料管線的開發、維護及下游資料準備。
說明
- 使用 SQL、Python 與 PySpark 建置並維護所分配的批次 ETL 與 ELT 工作流程
- 支援從資料庫、API、檔案與 Google Workspace 來源擷取資料
- 執行基礎資料清理、轉換以及來源到目標驗證
- 參與使用 Google Cloud Pub/Sub 與 Datastream 建置及維護串流資料管線
- 建立並維護缺失、重複、無效與延遲資料檢查
- 追蹤批次與串流工作流程、資料新鮮度及整體管線健康狀況
- 檢查日誌、解決例行問題，並將較複雜的事件升級處理
- 支援經授權的管線重新執行與資料重新處理活動
- 整理供下游分析與報表使用的資料集
- 協助維護追蹤管線狀態與資料品質的儀表板
- 記錄資料對應、轉換邏輯、驗證標準與疑難排解程序
- 使用 Git，並參與程式碼審查與發布前測試
職位要求
- 歡迎應屆畢業生及擁有最多兩年相關經驗的候選人
- 具備 SQL、Python 與 PySpark 工作知識
- 能夠建置並維護批次 ETL 與 ELT 工作流程
- 能夠支援從資料庫、API、檔案與 Google Workspace 來源擷取資料
- 了解資料清理、轉換以及來源到目標驗證實務
- 能夠參與使用 Google Cloud Pub/Sub 與 Datastream 建置的串流資料管線
- 能夠建立並維護資料品質檢查
- 能夠監控管線、檢查日誌並解決例行問題
- 能夠記錄資料對應、轉換邏輯、驗證標準與疑難排解程序
- 具備 Git、程式碼審查與軟體測試經驗或相關認識
- 熟悉 BigQuery、Dataform、Google Cloud Storage、Managed Service for Apache Airflow、Managed Service for Apache Spark、Pub/Sub 與 Datastream 等 Google Cloud 服務
福利待遇
- 獲得參與團隊 Google Cloud 資料平台實務工作的經驗
- 獲得資深同事提供的指導與程式碼審查支援