GCP 資料工程師(遠端,巴西)
為 EVT 這家企業 IT 解決方案公司在 Google Cloud 上建置批次與串流資料管道。負責資料開發、編排、治理,並在國際化環境中進行協作。
說明
- 在 Google Cloud 上建置和營運批次與串流資料管道。
- 將業務需求轉化為實用的技術資料解決方案。
- 使用 Dataflow、Dataform、Pub/Sub、Cloud Storage 和 BigQuery 建立資料管道。
- 透過 Cloud Composer 和 Airflow 管理工作流程編排。
- 負責資料建模、測試、治理、安全性和可觀測性。
- 從初始開發到部署及解決方案文件撰寫,負責交付全流程。
- 與技術、業務及國際利害關係人團隊合作。
職位要求
- 具備進階英語能力,能與巴西以外地區的團隊溝通。
- 能夠依照美國東部標準時間(EST)工作。
- 具備使用 GCP 進行資料工程的正式環境經驗。
- 具備 Dataflow、Dataform、Pub/Sub、Cloud Storage 和 BigQuery 的實務經驗。
- 精通 BigQuery,包括分割、叢集、效能調校和成本最佳化。
- 具備使用 Cloud Composer 或 Airflow 編排資料管道的經驗。
- 了解資料建模、資料倉儲、星型結構、雪花結構、SCD 和獎章式架構。
- 具備 Python、Git、程式碼審查、Docker 和 CI/CD 經驗,具備 Cloud Build 經驗者尤佳。
- 了解 GCP 資料治理、安全性和可觀測性,包括 Dataplex、IAM 和 PII 保護。
- 具備自動化測試經驗,最好使用 pytest,並了解資料品質實務。
- 持有 Google Professional Data Engineer 認證者尤佳。
- 了解 BigLake、Apache Iceberg 和資料湖倉架構者尤佳。
- 具備 Data Mesh 和資料產品經驗者尤佳。
- 了解 SAP ECC、BW 或 S/4HANA 者尤佳。
- 了解資料合約、結構描述演進和可觀測性者尤佳。
- 具備生成式 AI 和 Vertex AI 經驗者尤佳。
- 具備知識移轉和技術培訓經驗者尤佳。
- 具備面向技術和非技術受眾的出色溝通能力。
- 能夠將業務需求轉化為技術解決方案。
- 能以協作方式跨部門、跨團隊工作。
- 具備良好的組織能力,能做好文件撰寫、交付追蹤和部署。
- 能在國際化環境中工作並日常使用英語。
福利待遇
- 可參加包括 Udemy 在內的學習獎勵計畫。
- 價格實惠的企業英語課程。
