遠端 Python 資料工程師 — ICF
使用 Python、SQL、PostgreSQL 和 Databricks,為 ICF 建置安全的資料管道與報表整合。 支援 API、資料品質、AWS QuickSight 報表和 DevOps 工作流程。
說明
- 使用 SQL、Python 和 Databricks 建立並維護雲端資料管道與轉換工作流程。
- 設計並調校 PostgreSQL 物件、查詢、資料模型和存取模式。
- 使用 AWS QuickSight 和 Databricks 開發 DataConnect 報表整合。
- 建置 API 服務和可重複使用的元件,以實現安全的資料存取和系統整合。
- 透過擷取、轉換和載入流程,從多個來源載入資料。
- 維護資料品質檢查、驗證工作、監控和營運警示。
- 解決資料問題,提升管道的可靠性、效能、可用性和更新速度。
- 撰寫單元測試與整合測試,並審查同事的程式碼。
- 將技術規格和業務需求轉化為程式碼、資料設計和實作文件。
- 與 DevOps 工程師合作進行 CI/CD、基礎架構即程式碼、部署和環境支援。
- 透過安全與隱私控管保護靜態儲存和傳輸中的資料。
- 參與敏捷規劃、需求細化、估算和持續改善。
- 處理其他指派的職務。
職位要求
- 學士學位。
- 至少三年軟體開發或資料工程實務經驗。
- 至少兩年使用 SQL 和 Python 或同類程式語言開發資料管道或資料處理解決方案的經驗。
- 具備 PostgreSQL 實務經驗,並深入了解關聯式資料庫概念和 SQL。
- 具備雲端資料平台和版本控制開發工作流程的經驗。
- 能夠解讀技術規格,並將其轉化為可運作的程式碼和文件。
- 能夠取得並維持 Public Trust(公共信任)安全審查資格。
- 必須居住在美國、獲准在美國工作,並且在過去五年內曾連續三年居住於美國。
- 優先考量具備以下經驗者:Databricks、AWS QuickSight、Spark、Airflow、AWS 資料服務、REST API、TypeScript、CI/CD、GitHub Actions、Terraform、資料治理、中繼資料、資料血緣、安全資料共享、敏捷團隊和測試驅動開發。
福利待遇
- 平等就業機會。
- 為身心障礙者、身心障礙退伍軍人,以及真誠持守宗教信仰者提供合理便利。
- 提供《保險保障透明度法案》中提及的福利項目。
