
Azure 資料工程師
建置 Azure 資料管線、儲存空間與資料集,支援 SAIC 的國防與任務科技解決方案。 交付安全且受治理的資料產品,支援分析與營運。
說明
- 建置並維護可擴充的資料管線與資料集,提供分析和營運洞察
- 管理 Azure 服務中的資料擷取、轉換及產品交付
- 在 Azure Data Factory 中開發、排程並監控批次與近即時資料管線
- 管理 Azure Blob Storage 的存取層級、生命週期原則、分割區及資料夾結構
- 設計並調校 Azure SQL 資料集,包括結構描述、索引和查詢效能
- 運用星狀與雪花狀結構描述、第三正規化形式(3NF)、正規化及 Data Vault 模式開發維度模型
- 透過驗證、剖析、資料沿革、文件、結構描述演進及資料契約落實資料品質與治理
- 改善管線執行時間、SQL 查詢與儲存 I/O;新增警示、重試邏輯和成本控管
- 與分析、產品及營運團隊合作,交付可信、安全、高效能且有文件記錄的資料產品
- 套用安全與合規控制措施,包括角色型存取控制(RBAC)、資料遮罩、加密和金鑰管理
- 分享平台最佳實務,建立可重複使用的範本與元件
職位要求
- 具備學士學位及五年工作經驗,或以四年工作經驗取代學位要求
- 能夠取得並維持公共信任資格;此資格要求具備美國公民身分
- 具備 Azure Data Factory 管線、資料流程、連結服務、觸發程序及參數化的實務經驗
- 熟悉 Azure Blob Storage 容器、存取層級、生命週期管理,以及 SAS 或受控識別
- 熟悉 Azure SQL Database 或 Managed Instance,包括結構描述設計、效能調校、索引及查詢最佳化
- 具備星狀與雪花狀結構描述、3NF 及 Data Vault 概念的實務知識
- 了解 Kimball 與 Inmon 資料倉儲方法
- 熟練使用 JSON、Parquet、CSV 和 Avro
- 具備管理上述格式之結構描述演進與版本控制的經驗
- 具備撰寫複雜查詢與轉換的扎實 SQL 技能
- 優先考量具備 Python 指令碼經驗者;Scala 經驗也適用於轉換、工具及自動化工作
- 具備 Git 工作流程經驗
- 具備將資料管線與 Azure DevOps Repos 和 Pipelines 或同等 CI/CD 工具整合的經驗
- 具備監控、記錄、警示及排查正式環境資料管線問題的實務經驗
- 優先條件:具備 Azure Synapse Analytics 經驗
- 優先條件:熟悉 Microsoft Fabric
- 優先條件:具備建置 Power BI 語意模型、增量重新整理、關聯、計算群組及 DAX 的經驗
- 優先條件:具備 Event Hubs、Azure Functions 或 Databricks/Spark Structured Streaming 經驗
- 優先條件:具備 Bicep 或 Terraform 經驗,並熟悉 ARM 範本
- 優先條件:具備 Microsoft Purview 或類似工具的使用經驗
福利待遇
- 提供平等就業機會的雇主
- 從事以使命為核心的工作,服務國防、太空、情報及民用市場





