資深資料工程師
為 CGI 顧問客戶測試 ETL 管線與企業資料平台。運用 SQL、Databricks、Spark、Python、Hadoop 和 Azure Data Factory 驗證資料品質。
說明
- 為企業資料平台、ETL/ELT 管線和資料整合制定並執行測試計畫、情境和案例。
- 端對端測試 ETL 工作流程,檢查來源與目標系統之間的準確性、完整性、轉換邏輯、核對情況和資料品質。
- 編寫並執行複雜的 SQL 查詢,用於後端和資料驗證。
- 使用 Databricks、Apache Spark、PySpark、Python、Hive、Hadoop/HDFS 和 Azure Data Factory (ADF) 測試大規模資料處理。
- 對管線和應用程式進行功能、整合、回歸、系統及資料品質測試。
- 在 Control-M 和 Unix/Linux 環境中檢查批次處理、排程、相依性和工作流程。
- 記錄、追蹤並重新測試缺陷,與開發人員、資料工程師、業務分析師及其他利害關係人合作,直到問題解決。
- 在適用情況下建置並維護可重複使用的測試指令碼和自動化流程。
- 參與敏捷/Scrum 工作,包括衝刺規劃、需求梳理、每日站會、評審和回顧。
職位要求
- 至少 8 年軟體品質工程或測試經驗。
- 具備紮實的 ETL 測試、資料驗證、整合測試和回歸測試背景。
- 具備紮實的 SQL 實務能力,包括用於來源至目標驗證、核對和資料品質檢查的複雜查詢。
- 具備測試大規模資料平台和 ETL/ELT 管線的經驗。
- 具備 Databricks、Apache Spark、PySpark、Python 和 Azure Data Factory (ADF) 的實作經驗。
- 具備 Hadoop 生態系工具經驗,包括 Hadoop/HDFS 和 Hive。
- 具備 Unix/Linux 環境及 Control-M 等企業排程工具的經驗。
- 深入了解資料品質、轉換、對應和來源至目標驗證。
- 具備在敏捷/Scrum 交付環境中進行缺陷和測試管理的經驗。
- 具備優異的分析、疑難排解、溝通和協作能力。
- 能在美國境內任何地點遠端工作。
- 成功通過背景調查。
福利待遇
- 具競爭力的薪酬和利潤分享計畫。
- 醫療、牙科和視力保險。
- 基本人壽保險及意外身故與失能保險。
- 提供雇主提撥配比的 401(k) 計畫。
- CGI 員工購股計畫。
- 彈性的工作安排,並提供每年 10 至 20 天的帶薪累積休假。
- 每年 10 天帶薪假日。
- 至少連續 80 小時的帶薪病假和安全假。
- 20 至 70 個連續工作日的帶薪育嬰假。
- 每年 1 至 7 天喪假。
- 依傳喚期間提供帶薪陪審服務假。
- 學習機會和學費補助。
- 健康與身心福祉計畫。
- 彈性的混合辦公模式。
- 員工資源團體和社區活動。
- 領導力導師輔導和專業發展計畫。
