資深資料工程師——拉斯孔德斯混合辦公
為航空公司建置 GCP 資料管道的資深資料工程師,專注於商業規模下的整合、品質、治理與監控。
說明
- 設計、整合及維護端到端資料流程。
- 支援商業團隊進行市場預測、報價及銷售流程。
- 使用 Google Cloud Platform 套件中的各項元件。
- 參與解決方案設計及元件架構設計。
- 使用 API、Pub/Sub、Storage 及 BigQuery 執行端到端資料整合流程。
- 維護可靠的資料流程並執行品質規則。
- 確保符合資料治理及資料目錄標準。
- 在 Confluence 中記錄流程。
- 與業務利害關係人共同監控及驗證資料流程。
- 在技術主管帶領的團隊中提升效率並提出想法。
- 參與知名航空公司的高影響力大型專案。
職位要求
- 具備 GCP 套件使用經驗,包括 BigQuery、Cloud Storage、Cloud Run 或 Cloud Run Jobs、Cloud SQL、Cloud Scheduler、Dataflow、Vertex AI 及 IAM。
- 具備解決方案及架構設計經驗。
- 熟悉 Medallion Architecture。
- 具備使用 Terraform 進行基礎設施即程式碼開發的經驗。
- 具備使用 GitLab 及 Git 進行 DevOps 與 CI/CD 的經驗。
- 具備端到端資料整合經驗。
- 具備 Python 使用經驗,包括 Pandas 及 FastAPI。
- 具備進階 SQL 技能。
- 具備 API、服務、Pub/Sub 及 Dataform 使用經驗。
- 具備使用分割及叢集最佳化 BigQuery 的經驗。
- 了解資料治理及合規要求,包括 Policy Tags 及 IAM。
- 具備使用 Dataform assertions、Cloud Monitoring 及 Grafana 的經驗。
- 具備在 Confluence 中撰寫技術流程文件的經驗。
- 可接受在拉斯孔德斯混合辦公,每週兩天到現場工作。
福利待遇
- 生日當天休假。
- 提供支援持續學習的課程及認證。
- 每年額外享有五天休假。
- 補充醫療及牙科保險。
