Swoop 資深資料工程師——多倫多混合辦公
負責 NimbleRx 合規醫療資料平台,開發可擴充的資料管道、資料倉儲模型與 AI 工具,支援藥局及患者互動營運。
說明
- 負責完整的資料平台生命週期,涵蓋資料擷取、轉換、儲存、查詢與存取
- 隨著公司的資料需求擴展,規劃資料平台藍圖
- 使用 PySpark/EMR、Kinesis、Lambda 與 Step Functions 建置並改善批次與串流管道
- 將 Postgres、Salesforce、外部供應商及產品事件串流的資料匯入以 Iceberg 為基礎的資料湖
- 為工程與分析團隊定義 SCD 表、事件表及資料標準
- 與產品、工程、分析及營運夥伴合作,將資料需求轉化為可靠的資料管道
- 建立文件與工具,讓其他團隊能獨立使用資料
- 管理安全與合規能力,包括稽核日誌、存取控制及臨時存取流程
- 透過副本路由、索引、快取及 I/O 監測,改善 Java/Spring 服務的後端查詢效能
- 調查並解決 IOPS 峰值、管道故障、結構描述漂移及資料延遲問題
- 將 AI 應用於管道腳手架、結構描述開發及臨時調查
- 交付供其他團隊使用的內部 AI 工具
- 指導工程師與分析師有效使用資料平台
職位要求
- 至少五年建置正式環境資料管道與資料平台的經驗
- 具備進階 Python、PySpark 與 SQL 技能,包括大規模調校 Spark 工作負載
- 能夠且願意為資料層周邊的 Java 與 Spring Boot 服務做出貢獻
- 具備分散式運算實務經驗,例如 Spark/EMR;具備使用 Kinesis 進行串流處理及使用 S3 物件儲存的經驗
- 精通 Postgres,包括查詢調校、索引、複寫、副本路由及診斷資料庫瓶頸
- 具備 Iceberg 與 Trino 或同類技術的經驗
- 熟悉 CI/CD 與 Terraform
- 具備使用 AI、前沿模型或代理式編碼工具進行開發的經驗
- 具備與產品、營運及其他團隊協作的能力,並有實績證明
- 目前獲准在加拿大工作者優先
- 願意將安全以及 PII/PHI 處理視為核心工程職責
福利待遇
- 專業發展機會
- 混合辦公安排
- 對於具備專業技能的高素質候選人,可酌情考慮簽證贊助
