資料工程分析師(AWS、Spark)— 墨西哥遠端
在 Blend360(AI 服務供應商)建置並維運 AWS 資料管線與資料湖架構。 運用 Spark、Glue、S3 和 Iceberg,交付可擴充的資料解決方案。
說明
- 建置並維護可擴充的管線與資料擷取架構,以支援批次、串流及變更資料擷取工作負載。
- 使用 Apache Spark 和 PySpark 開發並調校大規模資料處理工作流程。
- 使用 S3 和 Apache Iceberg 建置及管理 AWS 資料湖。
- 使用 AWS Glue 編排 ETL、使用 Athena 執行無伺服器查詢,並使用 Lambda 進行事件驅動處理。
- 使用 AWS IAM 設定資料存取控制與安全性。
- 與分析師、資料科學家及平台工程師合作,將資料需求轉化為可投入正式環境的解決方案。
- 監控管線健康狀況並排除資料品質問題。
- 提升資料可靠性與新鮮度。
- 記錄資料流、架構決策及工程標準。
職位要求
- 具備 AWS Glue、S3、Athena 和 IAM 等服務的進階實務經驗。
- 具備使用 Apache Spark 或 PySpark 處理資料的經驗。
- 了解資料湖架構;具備 Apache Iceberg 經驗者優先。
- 具備批次、串流及變更資料擷取模式的經驗。
- 具備使用 SQL 進行查詢、驗證及探索性分析的經驗。
- 深入了解資料建模及大規模資料處理。
- 能跨團隊合作,並向非技術利害關係人清楚說明技術概念。
- 具備基礎架構即程式碼或 Airflow、Step Functions、dbt 等工具的編排經驗者佳。
- 熟悉 AI 輔助開發工作流程及工程生產力工具。
- 具備進階英語能力,可與全球團隊溝通。
- 具備至少兩年資料工程或相關職務經驗。
- 具備建置及維護雲端資料管線與 AWS 資料湖架構的實務經驗。
福利待遇
- 聖誕獎金。
- 儲蓄基金。
- 餐飲及雜貨禮券。
- 居家辦公津貼。
- MetLife 人壽保險,含喪葬保障。
- MetLife 醫療保險,含牙科折扣及視力照護方案。
- 可自費為受扶養人加保。
- 年假天數隨年資增加。
- 休假津貼。
- 法定國定假日。
- 聖週假期。
- 亡靈節假期。
- 平安夜假期。
- 彈性工作選項。
- 學習計畫、課程及專業發展機會。
- 提供英語課程,協助職場溝通。
相關職缺
找不到職缺
嘗試調整或清除篩選條件,以查看更多機會。
