Groundswell 資料工程師:舊系統與 AI 工作流程(美國遠端)
為聯邦技術整合商 Groundswell 建置安全的 ETL/ELT 管線與 AI 工作流程。此職位著重於資料品質、治理、安全性,以及可靠的任務導向型應用程式。
說明
- 建置並運作批次與串流 ETL/ELT 管線,將結構化與半結構化資料移入安全的雲端平台。
- 透過評估結構描述、對映、介面、驗證規則、權責歸屬與營運支援程序,整合舊系統資料來源。
- 實作自動化檢查,確保資料完整性、準確性、一致性、及時性與參照完整性,並搭配監控與警示。
- 透過 SOAP API、工作流程編排與環境特定設定,將部署與管線作業自動化。
- 使用日誌、指標、資料血緣與營運訊號診斷分散式系統故障,並溝通故障原因與復原計畫。
- 與工程、雲端、資料科學、安全、架構及客戶團隊合作,將任務需求轉化為可衡量的資料產品。
職位要求
- 具備電腦科學、電腦工程、數學、統計學或相關技術領域的學士學位。
- 至少五年的專業資料工程經驗,包括正式環境的管線開發與營運。
- 熟悉 Python、Java、R 或資料工程使用的其他程式語言。
- 具備使用 SOAP API 進行資料交換的舊系統工作經驗。
- 具備為正式環境管線實作資料品質框架、驗證流程、監控與警示的經驗。
- 了解受監管、受限制或重視合規的環境中的資料安全、存取控制、加密、可稽核性與治理。
- 具備 SOAP 或 REST API,以及 JSON、XML、CSV 和 Parquet 等結構化格式的經驗。
- 能夠記錄技術決策,並與跨學科團隊及客戶利害關係人合作。
- 依合約條款,須具備美國公民身分。
- 能依合約要求取得並維持公共信任安全許可。
- 具備為 LLM 與其他 AI/ML 工作流程建立前處理、分塊、篩選、中繼資料豐富或評估管線的經驗者優先。
- 具備操作網路分段、連線受限、變更控制嚴格或有正式授權要求之資料平台經驗者優先。
- 具備進階 SQL 技能者優先,包括查詢最佳化、資料建模、連接、視窗函數與大型資料集分析。
- 具備使用 Jupyter Notebook 或同類資料分析工具的經驗者優先。
- 具備使用 NumPy 和 pandas 等 Python 函式庫的經驗者優先。
- 具備主要雲端服務供應商實務經驗者優先;強烈優先考慮 AWS 經驗。
- 具備 C3.ai 經驗者優先。
- 持有有效公共信任安全許可者優先。
- 優先考慮位於華盛頓特區都會區的候選人。
- 具備 AWS Data Engineer、Databricks、雲端資料工程或其他相關專業認證者優先。
福利待遇
- 醫療、牙科與視力保險。
- 彈性支出帳戶。
- 401(k) 計畫,提供 4% 雇主配對提撥並立即歸屬。
- 帶薪休假。
- 學費補助、認證計畫與專業發展支援。
- 彈性工作時間。
- 現場健身房與托兒服務選項。
