資深 AWS 資料工程師|GFT Technologies|巴西遠端
GFT Technologies 資深 AWS 資料工程師,負責開發資料管道、指標和 Lakehouse 架構。 推動資料平台現代化,支援分析、治理和人工智慧應用。
說明
- 使用 ETL 工具管理和處理大量資料。
- 將客戶業務目標轉化為資訊管理和商業智慧策略。
- 維護可靠的資料管道並確保資訊存取安全。
- 建立和發布指標及儀表板,同時維護資料品質和完整性。
- 透過 Lakehouse 架構、治理、品質管理以及面向分析和人工智慧的準備工作,支援資料平台現代化。
- 為業務團隊、儀表板和報告開發維度模型。
- 支援從資料擷取和處理到儲存、轉換、使用及治理的完整資料生命週期。
職位要求
- 具備資深資料工程和 AWS 經驗。
- 具備使用 ETL 工具、Python 和 PySpark 收集、轉換及載入資料的實務經驗。
- 熟悉 AWS Glue、EMR、Athena、SNS、Lambda、Step Functions、S3、Lake Formation、IAM 和 CloudWatch。
- 了解 NoSQL 資料建模,以及 MongoDB、DynamoDB 和 Hadoop 等資料庫。
- 了解基於 Apache Iceberg 的 Lakehouse 架構,包括資料表管理、版本控制、結構描述演進、分割和效能調校。
- 具備使用 Athena、Trino、Presto 或 Spark SQL 等大規模查詢引擎的經驗,包括查詢最佳化以及 Parquet 和 ORC 等欄式格式。
- 了解維度建模概念,包括事實、維度、粒度、鍵、階層、指標和衡量項目。
- 具備處理結構化、半結構化和非結構化資料的經驗。
- 具備執行單元測試和效能測試的經驗。
- 了解雲端安全實務、存取控制和監控。
- 擁有 AWS Practitioner 或 AWS Data Engineer 認證者優先。
- 具備資料品質和可觀測性經驗者優先。
- 具備使用 Terraform 和 CloudWatch 等基礎設施即程式碼工具的經驗者優先。
- 了解 Data Mesh 者優先。
- 了解將人工智慧應用於資料者優先。
- 具備出色的分析和問題解決能力。
- 能夠獨立工作並有效管理時間。
福利待遇
- 彈性福利卡,可自行選擇資金的使用方式和地點。
- 支援大學、研究所、MBA 和語言學習。
- 提供獎勵專業認證的計畫。
- 彈性工作時間。
- 具競爭力的薪酬。
- 透過結構化職涯發展計畫支援年度績效評估。
- 提供國際職涯發展機會。
- 可使用 Wellhub 和 TotalPass。
- 私人退休金計畫。
- 托育支援。
- 健康保險。
- 牙科和人壽保險。
- 欄位
