資深資料工程師——巴西遠端工作
資深資料工程師,負責打造可擴充的資料管道與資料平台,支援 GFT Technologies 的分析計畫。此職位著重於分散式環境中的效能、資料品質與治理。
說明
- 建置並擴充可擴充的資料平台,支援分析與策略計畫。
- 建立並維護用於大規模資料處理的高韌性、高效能管道。
- 處理大量結構化與非結構化資料。
- 在完整資料生命週期中維護資料品質、一致性與治理。
- 開發資料擷取、轉換與傳遞工作流程。
- 與軟體工程師、分析師、資料科學家及業務利害關係人合作。
- 參與資料架構決策,並評估新興工具與技術。
- 追蹤並改善分散式系統中的資料處理工作流程。
- 參與資料平台的現代化與持續開發。
職位要求
- 具備在分散式運算環境中從事資料工程的大量經驗。
- 精通 Apache Spark 與 Scala。
- 具備 AWS 服務的實務經驗,包括 Glue、S3、EMR、Athena 與 Redshift。
- 了解資料建模、ETL/ELT 流程與管道工程。
- 熟悉關聯式與 NoSQL 資料庫技術。
- 具備透過批次與串流模型處理資料的經驗。
- 了解資料品質、安全性與治理方面的成熟實務。
- 熟悉以 Git 為基礎的版本控制。
- 具備 Apache Kafka 或 Amazon MSK 經驗者佳。
- 具備傳統系統現代化經驗者佳。
- 具備 Delta Lake、Apache Hudi 或 Apache Iceberg 經驗者佳。
- 熟悉以資料為核心的 DataOps 與 CI/CD 工具,如 dbt、Airflow 與 Terraform 者佳。
- 具備設計或使用 Lakehouse 架構經驗者佳。
- 具備處理高容量資料環境經驗者佳。
- 了解資料可觀測性與管道監控者佳。
- 具備協作思維,樂於團隊合作。
- 具備優秀的分析與問題解決能力。
- 能夠自主工作、安排優先順序並有效管理時間。
- 對解決複雜且創新的技術挑戰感興趣。
福利待遇
- 彈性多元福利卡,可自行選擇資金的使用方式與地點。
- 提供大學、研究所、MBA 與語言教育獎學金。
- 設有專業認證獎勵計畫。
- 彈性工作時間。
- 具競爭力的薪酬。
- 年度績效評估,並配有結構化的職涯發展計畫。
- 國際職涯發展機會。
- 可使用 Wellhub 與 TotalPass。
- 私人退休金計畫。
- 育兒支援。
- 私人醫療保險。
- 牙科保險。
- 人壽保險。
