GFT Technologies
GFT Technologies
GFT Technologies 是一家專注於科技與數位轉型的公司,業務涵蓋顧問服務、保險與網路安全。其 Cookiebot 平台協助組織蒐集及管理使用者同意資訊,同時支援遵循包括《一般資料保護規範》(GDPR)與《加州消費者隱私法》(CCPA)在內的隱私法規。公司的解決方案旨在與現有數位環境整合,全球已有超過 60 萬家客戶使用這些方案,以更高的透明度與更完善的控管能力處理個人資料。

資深 AWS 資料工程師|GFT Technologies|巴西遠端

GFT Technologies 資深 AWS 資料工程師,負責開發資料管道、指標和 Lakehouse 架構。 推動資料平台現代化,支援分析、治理和人工智慧應用。

說明

  • 使用 ETL 工具管理和處理大量資料。
  • 將客戶業務目標轉化為資訊管理和商業智慧策略。
  • 維護可靠的資料管道並確保資訊存取安全。
  • 建立和發布指標及儀表板,同時維護資料品質和完整性。
  • 透過 Lakehouse 架構、治理、品質管理以及面向分析和人工智慧的準備工作,支援資料平台現代化。
  • 為業務團隊、儀表板和報告開發維度模型。
  • 支援從資料擷取和處理到儲存、轉換、使用及治理的完整資料生命週期。

職位要求

  • 具備資深資料工程和 AWS 經驗。
  • 具備使用 ETL 工具、Python 和 PySpark 收集、轉換及載入資料的實務經驗。
  • 熟悉 AWS Glue、EMR、Athena、SNS、Lambda、Step Functions、S3、Lake Formation、IAM 和 CloudWatch。
  • 了解 NoSQL 資料建模,以及 MongoDB、DynamoDB 和 Hadoop 等資料庫。
  • 了解基於 Apache Iceberg 的 Lakehouse 架構,包括資料表管理、版本控制、結構描述演進、分割和效能調校。
  • 具備使用 Athena、Trino、Presto 或 Spark SQL 等大規模查詢引擎的經驗,包括查詢最佳化以及 Parquet 和 ORC 等欄式格式。
  • 了解維度建模概念,包括事實、維度、粒度、鍵、階層、指標和衡量項目。
  • 具備處理結構化、半結構化和非結構化資料的經驗。
  • 具備執行單元測試和效能測試的經驗。
  • 了解雲端安全實務、存取控制和監控。
  • 擁有 AWS Practitioner 或 AWS Data Engineer 認證者優先。
  • 具備資料品質和可觀測性經驗者優先。
  • 具備使用 Terraform 和 CloudWatch 等基礎設施即程式碼工具的經驗者優先。
  • 了解 Data Mesh 者優先。
  • 了解將人工智慧應用於資料者優先。
  • 具備出色的分析和問題解決能力。
  • 能夠獨立工作並有效管理時間。

福利待遇

  • 彈性福利卡,可自行選擇資金的使用方式和地點。
  • 支援大學、研究所、MBA 和語言學習。
  • 提供獎勵專業認證的計畫。
  • 彈性工作時間。
  • 具競爭力的薪酬。
  • 透過結構化職涯發展計畫支援年度績效評估。
  • 提供國際職涯發展機會。
  • 可使用 Wellhub 和 TotalPass。
  • 私人退休金計畫。
  • 托育支援。
  • 健康保險。
  • 牙科和人壽保險。
  • 欄位