Drimo 資深資料工程師——智利遠端工作
為知名航空公司建置端到端 GCP 資料管線的資深資料工程師,職責涵蓋整合、資料品質、治理與大規模監控。
說明
- 設計、整合及維護端到端資料管線
- 協助商業團隊預測市場,並支援報價與銷售流程
- 使用 GCP 套件中的各項元件
- 參與解決方案設計與元件架構設計
- 使用 API、Pub/Sub、Storage、BigQuery 及其他服務完成端到端資料整合
- 確保資料流可靠並符合品質規則
- 持續遵循資料治理與編目標準
- 與業務利害關係人一起監控並驗證資料管線
- 在技術主管帶領的團隊中提升效率並提出想法
- 在 Confluence 中記錄技術流程
職位要求
- 具備 GCP 套件使用經驗,包括 BigQuery、Cloud Storage、Cloud Run 或 Cloud Run Jobs、Cloud SQL、Cloud Scheduler、Dataflow、Vertex AI 及 IAM
- 具備解決方案設計與架構設計經驗
- 了解 Medallion Architecture
- 具備使用 Terraform 進行基礎設施即程式碼開發的經驗
- 具備使用 GitLab 與 Git 的 DevOps 及 CI/CD 經驗
- 具備使用 API、Pub/Sub、Storage、BigQuery 及其他服務進行端到端資料整合的經驗
- 具備 Python、Pandas 與 FastAPI 使用經驗
- 具備進階 SQL 技能
- 具備 API、服務、Pub/Sub 與 Dataform 使用經驗
- 能透過分割與叢集最佳化 BigQuery
- 了解資料治理與合規要求,包括 Policy Tags 與 IAM
- 具備 Dataform assertions、Cloud Monitoring 與 Grafana 使用經驗
- 能在 Confluence 中記錄技術流程
福利待遇
- 生日當天休假一天
- 提供持續學習所需的課程與認證
- 每年額外增加五天年假
- 補充醫療與牙科保險
