Grupo S2
Grupo S2
1,001 – 5,000 员工
安全
Grupo S2 是一家安全领域的公司。现有公开信息确认了其所属行业,但未提供足够可靠的细节来说明其具体产品、服务、团队或当前招聘情况。求职者如需了解更多信息,可查看该公司最新的公开资料和职位信息。

高级数据工程师 - Grupo S2,巴西(混合办公)

为 Grupo S2 开发 AWS 数据管道和集成。 使用 Terraform、GitHub 和奖章架构,为分析工程构建数据结构。

描述

  • 构建和维护适用于 API、CSV、JSON、Parquet 及事务型数据库的数据摄取管道
  • 使用 Glue、Lambda、S3、Kinesis、DMS、Athena 和 EventBridge 等 AWS 原生服务创建集成
  • 开发具备幂等性和重新处理保护机制的增量提取及全量加载流程
  • 监控数据摄取工作流,并通过重试、死信队列和告警解决故障
  • 使用 Terraform 配置和管理数据基础设施
  • 在 GitHub 中使用 Actions、拉取请求和分支实践,负责源代码管理、CI/CD 及代码审查
  • 在青铜层、白银层和黄金层之间实施奖章架构
  • 准备供分析工程使用的白银层数据集
  • 与分析团队协调数据契约、架构和新鲜度 SLA
  • 根据需要协助排查数据源的技术问题

任职要求

  • 具备数据工程实践经验,熟悉数据摄取管道和 ETL/ELT 工作流
  • 精通 SQL
  • 具备使用 Python 构建自动化和集成脚本的经验
  • 了解 AWS 数据服务,包括 S3、Glue、Lambda 和 Athena
  • 具备 Git 和 GitHub 使用经验,包括版本控制、拉取请求和代码审查
  • 了解使用 Terraform 进行基础设施即代码开发
  • 具备集成 API 的经验,熟悉身份验证、分页和速率限制处理
  • 持有 AWS 认证(如 AWS Certified Data Engineer 或 AWS Certified Solutions Architect - Associate)者优先
  • 具备使用 Airflow 或 Step Functions 等编排平台的经验者优先
  • 了解 dbt 者优先
  • 具备数据湖或湖仓架构经验者优先
  • 具备向 BI 或分析工程团队交付数据产品的经验者优先

福利待遇

  • 带薪生日假
  • 远程办公补贴,用于帮助承担居家办公成本
  • 通过与 INMD 合作提供心理支持
  • 可选交通补贴
  • 每日 BRL 53.00 餐食或食品补贴
  • 通过 Pluxee 应用享受药品折扣
  • 可选 Bradesco Saúde 和 Amil Dental 计划,并可提供家庭保障
  • 使用 On Happy 平台,以特别价格享受体验和旅行服务
  • 享受 Descomplica、Ânima Educação、FGV 和 Open English 的课程及项目折扣
  • Cantão、Redley 和 Kenner 品牌半价优惠
  • 人寿保险