資料工程分析師 — AWS,阿根廷遠端
為 Blend360 的 AI 服務業務打造可擴充的 AWS 資料管線與資料湖架構。 開發以 Spark 為基礎的資料處理、擷取、安全與可靠性解決方案。
說明
- 設計並維護可擴充的資料管線與資料擷取架構,支援批次、串流及變更資料擷取。
- 使用 Apache Spark 和 PySpark 建置並最佳化資料處理工作流程。
- 使用 Amazon S3 和 Apache Iceberg 建置並管理 AWS 資料湖。
- 使用 AWS Glue 編排 ETL、使用 Athena 執行無伺服器查詢,並使用 Lambda 進行事件驅動處理。
- 使用 AWS IAM 管理資料存取控制與安全設定。
- 與資料分析師、資料科學家及平台工程師合作,將資料需求轉化為可投入正式環境的解決方案。
- 監控管線健康狀況並排除資料品質問題。
- 提升資料可靠性與新鮮度。
- 記錄資料流程、架構決策與工程標準。
職位要求
- 熟悉 AWS Glue、S3、Athena 和 IAM 等 AWS 服務,並具備實務經驗。
- 具備使用 Apache Spark 或 PySpark 處理資料的經驗。
- 了解資料湖架構;具備 Apache Iceberg 經驗者優先。
- 具備批次、串流及變更資料擷取等資料擷取模式的經驗。
- 具備使用 SQL 進行查詢、驗證及探索性分析的經驗。
- 深入了解資料建模與大規模資料處理。
- 能跨職能合作,並向非技術利害關係人清楚說明技術概念。
- 具備使用 Airflow、Step Functions 或 dbt 等工具進行基礎架構即程式碼或流程編排的經驗者加分。
- 熟悉 AI 輔助開發工作流程與工程生產力工具。
- 具備進階英語能力,可與全球團隊溝通。
- 至少具備兩年資料工程或相關職務經驗,包含親自建置及維護 AWS 雲端資料管線與資料湖架構。
福利待遇
- AWS、Databricks 和 Snowflake 認證。
- 可使用 AI 學習路徑。
- 職務專屬讀書計畫、課程及額外認證。
- 可使用 Udemy Business。
- 英語課程。
- 有機會參加產業研討會並與客戶會面。
- 職涯發展計畫與導師制度。
- 生日、到職週年及其他個人重要時刻獎勵。
- 公司提供設備。
- 彈性工作方式。
- 其他福利可能依 LATAM 地區而異。
相關職缺
找不到職缺
嘗試調整或清除篩選條件,以查看更多機會。
