
資深資料工程師,BigQuery
為 Vultr 全球雲端基礎架構平台打造可靠的 BigQuery 資料管線與治理資料集。 與工程、商業智慧及資料科學團隊合作,支援企業分析。
說明
- 建置並維護匯入 BigQuery 的營運資料管線,並視需要採用增量載入與變更資料擷取。
- 建立銅層、銀層與金層資料集,涵蓋共用業務實體與報表指標。
- 自動化來源系統與目標資料集之間的資料驗證與核對。
- 將更新、刪除及歷史來源資料更正傳遞至下游資料集。
- 監控管線健康狀況、處理例外與結構描述變更,並記錄復原程序及資料沿襲。
- 與商業智慧及資料科學團隊合作,提供文件完整且高效能的資料集。
- 與工程團隊及業務系統負責人協調,解決來源資料缺漏並定義可靠的資料交接方式。
- 在議定的企業架構範圍內,制定並落實測試、部署、安全性及成本管理的工程標準。
- 檢視既有管線並建立可重複執行的工程實務。
- 為優先報表需求交付正式環境資料集。
- 導入初步的資料品質控管與監控。
- 確認歷史來源資料更正能準確反映於下游報表。
職位要求
- 至少五年資料工程經驗,包含負責正式環境資料管線的經驗。
- 精通 SQL,並具備紮實的 Python 能力。
- 具備 BigQuery 正式環境經驗,包含分割、叢集、查詢效能及成本控管。
- 具備使用 dbt、Airflow、Cloud Composer、Dagster 或同等工具進行資料轉換與流程編排的經驗。
- 具備從營運資料庫擷取資料,並管理增量載入、更新、刪除、回填及歷史更正的經驗。
- 深入了解維度建模與歷史資料追蹤。
- 具備自動化資料品質檢查、核對、監控、警示及復原經驗。
- 具備 Git、程式碼審查、自動化測試及 CI/CD 經驗。
- 能與工程、分析及業務團隊協作。
- 具備 MySQL、ClickHouse、Kafka 或 Google Pub/Sub 經驗。
- 熟悉 Parquet、儲存效率,以及 Spark 或 PySpark。
- 能透過應用程式程式碼或 ORM 追查資料定義與業務邏輯;熟悉 PHP 為加分條件。
- 具備 Salesforce、NetSuite、Power BI 或同類系統經驗。
- 熟悉 IAM、服務帳戶、最小權限存取及安全的工作負載驗證。
- 具備中繼資料、資料沿襲或資料可觀測性工具經驗。
- 具備將 AI 或自動化應用於管線作業、事件調查,或為 LLM 應用提供受治理資料存取的經驗。
- 具備雲端基礎架構、電信、資料中心或其他資產密集型環境經驗。
福利待遇
- 公司全額負擔員工醫療、牙科及視力保險保費。
- 401(k) 提供相當於員工提撥額 100% 的配比,最高為薪資的 4%,並立即歸屬。
- 每年最高 2,500 美元的專業發展費用補助。
- 11 天假日、累積制帶薪休假及結轉方案。
- 到職三週年與十週年時可享額外帶薪休假。
- 每五年提供一個月帶薪休假。
- 年度週年獎金。
- 遠端辦公設備補助:第一年 500 美元,之後每年 400 美元。
- 每月最高補助 75 美元網路費。
- 每月最高補助 50 美元健身房會員費。
- 公司付費的 Wellable 訂閱。


