Quandri 資深資料工程師(溫哥華混合辦公)
負責 Quandri 的 Databricks 資料湖、生產資料管線與 AI 資料基礎設施。打造支援其服務保險代理機構與經紀公司的 AI 平台系統。
說明
- 負責完整管理 Databricks 資料湖生命週期,包括 dbt 模型、獎牌層架構、增量處理、回填、分割、資料新鮮度與品質監控。
- 實作來自 HubSpot、Langfuse、Postgres 與 DynamoDB 的 CDC 及串流資料擷取,確保冪等性與去重機制可靠。
- 負責資料服務、結構描述與遷移規劃、版本化 API、資料溯源、稽核軌跡、測試與可觀測性。
- 開發嵌入向量管線、向量儲存、檢索知識庫、特徵庫與 LLM 可觀測性等 AI 資料基礎。
- 與基礎設施團隊合作,建置並維護雲端資料庫。
- 強化資料擷取,改善分析儀表板的效能與易用性。
- 維護資料管理與安全相關政策。
- 與軟體、AI/ML 及資料工程師、資料科學家、產品團隊和業務單位合作,以對齊技術需求。
- 向沒有技術背景的利害關係人有效說明技術概念。
- 指導工程師實踐穩健的資料工程方法。
職位要求
- 具備 4 至 6 年資料工程專業經驗。
- 具備建置與維護資料庫、資料管線及後端系統的經驗,重視高效資料管理與整合系統元件。
- 熟練使用 Python(優先)與 SQL。
- 曾設計具嚴格隔離要求的多租戶資料系統,並具備處理個人識別資訊或其他受規範資訊的經驗。
- 了解資料建模,包括獎牌層架構、星型結構或雪花結構。
- 具備 AWS、Azure 或 GCP 等雲端平台的實務經驗。
- 使用過 dbt、Databricks Workflows、Apache Airflow、Prefect、Dagster 或同類工具、變更資料擷取系統或 AWS Step Functions。
- 使用過 Databricks SQL 儀表板、Tableau 或具備同等 Power BI 能力的資料視覺化平台。
- 具備開發或支援 AI 產品的經驗。
- 了解並能應用資料治理實務。
- 持有電腦科學、資料工程、電腦工程或相關技術領域的學士或碩士學位,或具備同等經驗;具備相關學歷或經驗者加分。
福利待遇
- 依入職時的經驗等級獲得員工股票選擇權,並依標準歸屬時程執行。
- 依經驗等級獲得員工股票選擇權。
- 享有完整的健康保障,包括 500 美元的生活方式支出帳戶。
- 每年享有四週帶薪休假。
- 每年最多可在世界任何地方工作 60 個日曆日。
- 分娩家長可獲得六個月育兒假薪資補貼,非分娩家長可獲得八週補貼,適用於年薪不超過 100,000 美元的員工。
