Leega中級GCP資料工程師（遠端）
加入Leega，擔任GCP資料工程師，建構可擴充的資料管線與現代化資料平台。使用Databricks、Spark、ETL/ELT與Lakehouse架構工作。
說明
- 建構與維護可擴充的ETL/ELT資料管線
- 管理GCP環境中的資料擷取、轉換與交付
- 使用Spark與PySpark開發Databricks解決方案
- 設計並改善Data Lake、Data Warehouse與Lakehouse架構
- 連接API、資料庫、串流平台與其他資料來源
- 維護資料品質、治理與平台可靠性
- 追蹤效能並降低雲端基礎架構成本
- 與BI、分析及資料科學團隊合作
職位要求
- 至少四年專業資料工程經驗
- 具備實際使用Google Cloud服務的經驗，例如BigQuery、Cloud Storage或Dataflow
- 具備使用Databricks與Spark進行分散式資料處理的經驗
- 具備扎實的Python與SQL技能
- 具備關聯式與維度式資料建模經驗
- 具備使用Airflow或同類工具協調資料管線的經驗
- 了解Git與版本控制實務
- 具備使用Delta Lake的經驗
- 了解用於基礎架構即程式碼的Terraform
- 具備使用Docker的經驗
- 了解Kafka或Pub/Sub等串流技術
- 持有GCP或Databricks認證
- 具備設計Lakehouse架構的經驗
- 熟悉Power BI、Looker或Tableau等BI平台
- 了解資料治理與巴西《一般資料保護法》（LGPD）
- 具備中級或高級英語能力
福利待遇
- 持續的職涯發展機會
- 完全遠端職位
- 歡迎身心障礙者申請