資深首席資料平台工程師,混合辦公,加拿大
擔任資深首席資料平台工程師,領導 Benevity 的 AWS 湖倉、資料管道與受治理資料產品。 打造可擴展的技術,支援企業與員工參與社會公益行動。
說明
- 在端到端資料路徑中提供親自參與的技術領導
- 設計平台能力,協助領域工程團隊將資料從來源移動到報表
- 將新來源與結構變更整合至串流消費管道
- 推動資料通過獎章架構各層,並定義報表資料產品
- 負責串流與批次管道、轉換模型、湖倉與目錄層,以及語意層
- 領導 AWS 湖倉上獎章架構的設計與實作
- 營運並現代化資料倉儲環境,同時規劃倉儲與湖倉系統之間的轉移
- 開發由設定與中繼資料驅動的管道
- 在 DataHub 中註冊、記錄並維護管道、資料集與資料產品的可探索性
- 為資料產品與語意層建立受治理、具版本控制且經過測試的契約
- 開發用於管道設定、模型、契約、測試與文件的 AI 輔助工具
- 與首席架構師合作制定技術策略與可重複使用的架構模式
- 與產品經理、資深開發人員及利害關係人合作,將業務需求轉化為技術規格與資料產品設計
- 應用雲原生解決方案設計,在整個技術堆疊中維持安全最佳實務
- 產出技術文件、架構決策與實作流程
- 交付用於制定技術與產品方向的概念驗證
- 指導開發人員並支持協作且包容的團隊環境
- 參與架構審查,以維持品質、一致性及與北極星架構的一致
職位要求
- 具備資訊工程、電腦工程學位,或同等專業經驗
- 至少 8 年可擴展軟體開發經驗,包括領導職責、軟體設計負責經驗,以及在資料平台與資料管道方面的大量實務經驗
- 至少 2 年領導可擴展平台、技術轉型或現代化計畫技術工作的經驗
- 出色的溝通能力
- 具備扎實的軟體設計基礎
- 具備領域驅動設計、鬆耦合系統與解耦事件驅動服務經驗
- 具備建立可重複使用抽象概念與框架的經驗
- 擁有涵蓋串流與批次系統的豐富資料工程實務經驗
- 具備 Debezium、Kafka 與 Flink 經驗,包括結構演進與交付保證取捨
- 具備使用 S3、Apache Iceberg、AWS Glue、Lake Formation 與 dbt 實作湖倉及獎章架構的經驗
- 具備大規模營運資料倉儲引擎,以及使用 Airflow 等宣告式、資產導向編排工具的經驗
- 具備 DataHub 或同類中繼資料、目錄與資料血緣平台經驗
- 具備在 CI 與執行階段自動強制執行資料契約及結構治理的經驗
- 具備為管道與資料產品建立資料品質、可觀測性與服務等級的經驗
- 具備開發資料產品與語意層的經驗
- 具備 Looker 或 LookML 經驗;熟悉 dbt Semantic Layer 或 Cube 者加分
- 具備定義面向消費者的資料產品經驗,包括契約、版本控制與棄用路徑
- 接觸過分析與報表交付
- 擁有豐富的 AWS 雲原生基礎設施經驗
- 熟悉 GCP,包括 BigQuery 與 Looker;具備 Azure 經驗者加分
- 精通敏捷、基礎設施即程式碼、DevSecOps、自動化測試,以及 GitHub Actions 或 Jenkins 等 CI/CD 工具
- 具備使用 Cursor 等 AI 驅動、規格驅動與代理式開發工作流程的經驗
- 有交付高效能、可擴展且具成本效益產品的成功紀錄
- 具備相關雲端平台或技術認證者佳
福利待遇
- 彈性的混合辦公安排
- 創新性的工作
- 專業成長機會
- 支持且關懷同事
- 以使命為導向的工作
- 員工資源團體
- 投入多元、公平、共融與歸屬感,以及包容性職場
- 在招募與評估過程中提供便利支援
