
初階 ETL 與 GIS 資料工程師
為 Peraton 聯邦瀕危物種資料整合計畫建置 Databricks ETL 與 GIS 驗證流程。 支援雲端湖倉資料擷取、資料品質管理及互通性測試。
說明
- 在雲端湖倉暫存環境中建置並部署 Databricks Delta Live Tables 流程。
- 彙整並正規化來自多個權威來源的分布範圍資料。
- 統一空間資料格式及座標參考系統。
- 建立來源至目標的資料轉換,包括欄位對應、型別轉換及空值處理。
- 使用具代表性的分類群執行原型資料擷取工作流程。
- 評估擷取結果的完整性、準確性、一致性及空間完整性。
- 記錄原型擷取結果、缺陷及補救步驟。
- 編製「原型擷取結果報告」。
- 依嚴重程度及補救狀態追蹤資料品質缺陷。
- 透過版本控制維護 ETL 程式碼,並記錄所需的同儕審查。
- 協助 GIS 工程師驗證空間資料。
- 使用測試資料集、流程執行及資料驗證協助測試互通性。
職位要求
- 符合下列任一教育及經驗條件:具學士學位且無專業工作經驗;具副學士學位及兩年專業工作經驗;或具高中畢業證書或同等學歷及四年專業工作經驗。
- 具美國公民身分。
- 能取得並維持 Public Trust 安全審查資格。
- 所有工作均須在美國境內執行。
- 具備 Databricks 與 Delta Live Tables 或同等雲端 ETL 架構的實務經驗。
- 具備資料品質驗證、來源至目標對應及資料轉換經驗。
- 具備資料建模或記錄結構描述設計的經驗。
- 具備記錄測試或擷取結果,並依嚴重程度記錄缺陷的經驗。
- 熟練使用 Python 或 Scala 開發 ETL 流程。
- 熟練使用 SQL 在雲端湖倉中查詢、驗證及轉換資料。
- 熟悉地理空間資料格式及座標參考系統。
- 優先條件:具備 AWS GovCloud 或同等 FedRAMP 授權雲端環境的經驗。
- 優先條件:熟悉 ArcGIS 或 QGIS 等 GIS 工具。
- 優先條件:具備聯邦資料治理及中繼資料標準經驗。
- 優先條件:具備 Databricks Associate 認證或同等資格。
福利待遇
- 可能適用加班資格。
- 可能適用輪班津貼。
- 可能提供酌情獎金。
相關職缺
