遠端資料庫分析工程師
為 VXForward 技術解決方案客戶建置 Databricks 資料管線與 ETL 系統。 提供經過驗證、可供政府資訊團隊及 Power BI 報表使用的資料集。
說明
- 在 Databricks 及其他分析與營運系統中建置並支援資料管線。
- 從企業級 CDW 雲端環境擷取資料，並交付可靠、可供分析使用的資料集。
- 維護企業級 CDW、雲端工作群組與營運系統之間的雙向資料傳輸。
- 支援 NTSP 工作流程、程序、倡議、計畫與專案。
- 建立權威資料規則、解決衝突並維護同步完整性。
- 使用 SQL、Spark SQL、PySpark 和 Python 開發及維護 ETL/ELT 流程。
- 建立可重現、具版本控制且可稽核的程式碼。
- 建置病患比對與紀錄連結邏輯，包括稽核先前的比對結果。
- 統一不同機構與來源的資料集標準。
- 在資料擷取與交付期間自動執行驗證檢查。
- 建立資料流向圖。
- 為政府資訊團隊整理乾淨、結構完善的資料，供其在 Power BI 和其他報表平台中使用。
- 撰寫管理員與技術文件，並支援在任務訂單結束時將文件移交給政府。
- 準備管理員訓練教材與簡報。
- 制定轉移計畫，說明維持 NTSP 工作所需的執行頻率與技能。
- 持續為已開發的應用程式與文件提供技術支援、維護、改良、更新及轉移支援。
職位要求
- 具備建置、測試、導入、改良、維護及支援雲端資料管線的經驗，包括 Databricks。
- 具備企業級雲端 CDW 環境以及分析或營運系統的經驗。
- 熟悉 SQL 或 Spark SQL、PySpark 和 Python。
- 具備開發 ETL/ELT 擷取與轉換流程的經驗。
- 具備使用多種識別資料實作病患比對與紀錄連結的經驗。
- 具備統一不同機構與來源資料集標準的經驗。
- 具備建立自動驗證檢查、缺漏資料報告、範圍檢查及不可能值檢查的經驗。
- 具備建立資料流向圖，並記錄輸入、輸出、來源、更新排程及內部控制的經驗。
- 具備為 Power BI 或其他分析報表平台準備模型完善資料的經驗。
- 具備製作管理員與技術文件、訓練教材、簡報及轉移計畫的經驗。
- 能夠提供持續的技術支援、維護、改良及更新。
- 能獨立作業並與團隊合作。
福利待遇
- 參與具意義且影響深遠的專案。
- 持續獲得學習與成長的機會。
- 運用現代化技術。
- 在重視合作的團隊環境中工作。
- 投入能帶來改變的工作。
- 兼顧工作與生活。
- 平等機會雇主。
- 職涯發展機會。
- 諮詢與合約合作機會。
