首席資料架構師——Azure 與 Databricks，遠端
負責退伍軍人事務部 AI 平台的 Azure 與 Databricks 架構。 建構受治理的資料系統，支援醫療報告、分析與機器學習。
說明
- 主導客戶架構討論，向退伍軍人事務部利害關係人簡報，並將需求轉化為可執行的設計與決策
- 透過設計審查、程式碼審查和實務問題解決，指導資深資料工程師
- 使用 Azure Data Factory、Synapse Analytics、Databricks 和 Delta Lake 定義資料擷取、儲存、建模與服務標準
- 引導平台遷移至 Azure Commercial，以 Databricks 作為工程平台，並使用 Unity Catalog 進行治理
- 針對批次、增量、CDC 和串流模式，為數千個資料表設計中繼資料驅動框架
- 透過 Synapse Dedicated Pool、Databricks SQL、Power BI 和模型訓練管線支援報告與機器學習
- 透過存取政策、遮罩和符合 HIPAA 及聯邦安全要求的 ATO 支援，保護 PHI 和 PII
- 為提案撰寫架構與技術方案內容
職位要求
- 具備 12 年以上資料工程與架構經驗，包括實務工程經驗，以及至少 5 年首席或主要架構師經驗
- 具備領導工程團隊、指導資深工程師並制定技術方向的成功經驗
- 具備面向客戶的經驗，能主導架構討論、向高階主管簡報，並與技術及非技術受眾溝通
- 精通 Azure 雲端資料工程與資料倉儲，並具備 Azure Data Factory、Synapse Analytics、Synapse Dedicated Pool、Databricks、Delta Lake 和 ADLS Gen2 的實務經驗
- 具備設計 Unity Catalog 的實務經驗，包括目錄與授權、屬性式存取控制、資料列篩選、資料欄遮罩和資料沿襲
- 具備設計湖倉一體獎牌式架構、資料倉儲模型，以及涵蓋數千個資料表的中繼資料驅動框架的經驗
- 具備扎實的 SQL 和 Python 技能，包括 PySpark
- 具備 CDC、串流和增量載入模式經驗，例如 Oracle GoldenGate、Azure Event Hubs 和 Apache Kafka
- 具備將大型內部部署資料倉儲遷移至雲端的經驗，包括平行執行和資料核對
- 具備使用 Git、CI/CD 和基礎架構即程式碼建構資料平台的經驗，例如 Terraform 和 Databricks Asset Bundles
- 了解適用於 PHI 和 PII 的 HIPAA、NIST 800-53 和 FISMA 要求
- 擁有電腦科學、資訊系統或相關領域的學士學位
- 要求為美國公民
- 能夠取得公共信託安全許可
- 必須具備在美國工作的資格
福利待遇
- 具競爭力的薪資
- 優渥的年假與帶薪假日
- 完整的團體醫療與牙科計畫
- 提供公司配對提撥的 401(k) 計畫
- 人壽保險及意外死亡與失能保險
- 持續培訓與職涯發展機會