
Google Cloud 資料工程師—哥倫比亞遠端
為 Keyrus 企業智慧解決方案打造可擴充的 Google Cloud 資料管道。 使用 BigQuery、Pub/Sub、Dataform、Cloud Storage 與 Cloud Composer。
說明
- 在 Google Cloud Platform 上建立並維護可擴充的資料擷取管道與工作流程。
- 使用 BigQuery、Dataform、Pub/Sub、Cloud Storage 與 Cloud Composer 建置並最佳化資料處理及轉換解決方案。
- 撰寫 SQL 查詢,從企業系統擷取、轉換及驗證資料,並排除相關問題。
- 透過可靠的資料擷取流程,將多個來源的資料整合至 BigQuery。
- 排除管道故障、資料不一致及正式環境問題,維持營運穩定。
- 開發並執行單元測試、系統測試、整合測試及使用者驗收測試;記錄結果並確認解決方案品質。
- 與工程師、架構師及業務利害關係人合作,將需求轉化為有效的技術解決方案。
- 參與技術設計、程式碼審查、專案規劃及持續改善。
- 建立並更新技術文件、開發規格及實作計畫。
- 處理敏感資訊時遵循安全、資料治理及工程標準。
- 參與正式環境支援輪值,通常每四至六週值班一整週。
職位要求
- 至少三年資料工程、資料整合或相關技術職務的專業經驗。
- 具備電腦科學、資訊科技、工程或相關領域的學士學位。
- 具備設計、建置及維護雲端資料擷取管道的經驗。
- 具備在 Google Cloud Platform 上實作及支援資料處理工作流程的經驗。
- 具備診斷正式環境資料管道,並解決資料品質或整合問題的經驗。
- 熟悉軟體開發實務、測試方法及技術文件撰寫。
- 能獨立作業,並與技術團隊及業務利害關係人有效合作。
- 具備使用 Google Pub/Sub 進行事件驅動訊息傳遞及資料擷取的實務經驗。
- 熟練使用 BigQuery 進行資料倉儲、查詢及處理。
- 具備使用 Google Dataform 進行 SQL 轉換及工作流程管理的經驗。
- 具備建置流程,將多個來源的資料擷取至 BigQuery 的經驗。
- 具備使用 Google Cloud Storage 進行雲端儲存及資料整合的經驗。
- 了解使用 Cloud Composer(Apache Airflow)進行工作流程編排與排程。
- 具備使用 GitHub 進行版本控制及團隊開發的經驗。
- 具備扎實的 SQL 技能,可查詢、轉換、驗證資料並排除問題。
- 具備使用 Google Cloud Data Fusion 的經驗。
- 具備連接 SQL Server、DB2 或 Oracle 等關聯式資料庫的經驗。
- 具備整合 REST API 及 SOAP Web 服務的經驗。
- 熟悉其他 Google Cloud 服務、資料庫及企業整合。
- 具備使用 Jira 和 Confluence 進行專案追蹤及文件管理的經驗。
- 具備零售業相關經驗。
- 必須居住在哥倫比亞,並能配合美東時間工作。
福利待遇
- 依適用勞動法享有哥倫比亞強制性員工福利及法定權益。
- 完全遠端工作,配合美東時間安排工時。
- 提供專業發展、協作及持續學習的機會。
- 充滿活力的工作環境,並有機會迎接挑戰、探索新領域。
- 以創新及創業精神為核心的職場文化。
- 參與使用現代雲端技術的企業級資料工程專案。


