資深企業資料架構師
設計 Aztec Group 的 Databricks Lakehouse 與 Azure 資料平台,制定企業架構、主資料管理及治理標準。 為外包服務打造安全且適用於 AI 的資料基礎。
說明
- 向企業架構主管報告。
- 透過 Databricks 支援 Aztec 的技術策略。
- 為 Azure 資料平台設計、實作及維護資料模型與架構。
- 制定並維護企業資料架構,包括目標狀態設計、藍圖、標準及模式。
- 負責 Databricks Lakehouse 架構,包括工作區設計、Unity Catalog 結構、獎章式架構及環境策略。
- 設計並治理與外部客戶及第三方之間安全且可擴充的資料共享整合。
- 主導主資料管理的設計與採用,涵蓋實體定義、黃金記錄、比對與合併規則,以及資料管理流程。
- 制定 Databricks 效能與成本最佳化的標準及實務。
- 為分析及營運領域制定資料建模標準。
- 將資料品質、資料沿襲、目錄管理、分類及存取控制政策納入平台設計。
- 確保架構符合安全、隱私及法規要求,包括 GDPR 與資料駐留要求。
- 審查解決方案設計、提供架構把關,並透過設計審查委員會及同儕審查支援工程團隊。
- 設計支援機器學習、生成式 AI 及代理式應用情境的資料架構。
- 與 AI 和 ML 團隊合作進行特徵工程、模型資料管線、向量搜尋,以及讓 AI 系統安全存取企業資料。
- 評估新興技術,並建議自行建置、購買或採用。
職位要求
- 熟練掌握 Databricks,包括 Unity Catalog、Delta Lake、工作流程及平台管理相關概念。
- 具備 Databricks Delta Sharing 的實務經驗,以及外部資料共享的安全整合設計經驗,包括相關合約考量。
- 擁有設計及實作主資料管理解決方案的優良成果,包括工具選擇、資料管理模式及參考資料管理。
- 具備大規模最佳化 Databricks 效能與成本的專業能力。
- 具備扎實的資料建模技能,熟悉維度建模、第三正規形式(3NF)、Data Vault 或類似方法,並有定義企業資料模型的經驗。
- 充分了解與資料平台相關的 Azure 儲存、網路及身分概念。
- 具備資料治理架構及工具方面的經驗,例如 Microsoft Purview、資料品質管理、詮釋資料及資料沿襲工具。
- 精通 SQL,並具備 Python 和/或 Spark 的實務知識。
- 了解資料安全與隱私,包括加密、角色或屬性型存取控制(RBAC 或 ABAC)、資料遮罩,以及 GDPR 等法規遵循要求。
- 具備出色的溝通能力,能向主管及非技術對象清楚說明架構決策。
- 能快速學習新系統及業務流程。
- 具備良好的人際技巧,能與同事及客戶建立緊密的工作關係。
福利待遇
- 酌情發放的獎金計畫
- 彈性混合辦公
- 每年可選擇最多三週在海外工作
- 優渥的休假額度
- 退休金計畫
- 私人醫療保險,包括眼科照護
- 人壽保障,涵蓋在職身故及重大疾病
- 全球旅遊保險
- 健康與福祉計畫
- 現場停車
- 提供相關技術知識的內部訓練
- 支援職涯發展的專業資格
