Blend360
Blend360
Blend360 是一家专业服务公司,借助人工智能、数据分析和数据驱动的解决方案,帮助《财富》1000强企业及其他大型企业应对复杂的业务挑战。其业务涵盖商业智能、数据工程、数据科学、机器学习运营(MLOps)和数据治理,汇聚专业团队与人工智能能力,为医疗保健、金融服务、能源、零售、科技、媒体与电信以及旅游与酒店业等领域的组织提供支持。Blend360 曾获得“年度人工智能赋能解决方案”称号,并入选“2024年生成式人工智能服务提供商百强”。

数据工程分析师 — AWS,阿根廷远程

为 Blend360 的 AI 服务业务构建可扩展的 AWS 数据管道与数据湖架构。 开发基于 Spark 的数据处理、摄取、安全与可靠性解决方案。

描述

  • 设计并维护可扩展的数据管道和数据摄取框架,支持批处理、流处理和变更数据捕获。
  • 使用 Apache Spark 和 PySpark 构建并优化数据处理工作流。
  • 使用 Amazon S3 和 Apache Iceberg 实施并管理 AWS 数据湖。
  • 使用 AWS Glue 编排 ETL,使用 Athena 执行无服务器查询,并使用 Lambda 进行事件驱动处理。
  • 使用 AWS IAM 管理数据访问控制和安全设置。
  • 与数据分析师、数据科学家和平台工程师合作,将数据需求转化为可投入生产的解决方案。
  • 监控管道运行状况并解决数据质量问题。
  • 提升数据可靠性和时效性。
  • 记录数据流、架构决策和工程标准。

任职要求

  • 熟练使用 AWS Glue、S3、Athena 和 IAM 等 AWS 服务。
  • 具备使用 Apache Spark 或 PySpark 处理数据的经验。
  • 了解数据湖架构;熟悉 Apache Iceberg 者优先。
  • 具备批处理、流处理和变更数据捕获等数据摄取模式的经验。
  • 具备使用 SQL 进行查询、验证和探索性分析的经验。
  • 深入理解数据建模和大规模数据处理。
  • 能够跨职能协作,并向非技术相关方清晰解释技术概念。
  • 具备使用 Airflow、Step Functions 或 dbt 等工具进行基础设施即代码或编排的经验者优先。
  • 熟悉 AI 辅助开发工作流和工程效率工具。
  • 英语水平高级,能够与全球团队沟通。
  • 至少有两年数据工程或相关岗位经验,包括亲自构建和维护 AWS 云数据管道与数据湖架构。

福利待遇

  • AWS、Databricks 和 Snowflake 认证。
  • 可使用 AI 学习路径。
  • 针对岗位的学习计划、课程和额外认证。
  • 可使用 Udemy Business。
  • 英语课程。
  • 有机会参加行业会议并与客户会面。
  • 职业发展计划和导师项目。
  • 生日、工作周年纪念日及其他个人重要时刻奖励。
  • 公司提供设备。
  • 灵活的工作方式。
  • 其他福利可能因 LATAM 地区不同而异。

相关职位

未找到职位

尝试调整或清除筛选条件,以查看更多机会。