
1,001 – 5,000 员工
安全Grupo S2 是一家安全领域的公司。现有公开信息确认了其所属行业,但未提供足够可靠的细节来说明其具体产品、服务、团队或当前招聘情况。求职者如需了解更多信息,可查看该公司最新的公开资料和职位信息。
高级数据工程师 - Grupo S2,巴西(混合办公)
为 Grupo S2 开发 AWS 数据管道和集成。 使用 Terraform、GitHub 和奖章架构,为分析工程构建数据结构。
描述
- 构建和维护适用于 API、CSV、JSON、Parquet 及事务型数据库的数据摄取管道
- 使用 Glue、Lambda、S3、Kinesis、DMS、Athena 和 EventBridge 等 AWS 原生服务创建集成
- 开发具备幂等性和重新处理保护机制的增量提取及全量加载流程
- 监控数据摄取工作流,并通过重试、死信队列和告警解决故障
- 使用 Terraform 配置和管理数据基础设施
- 在 GitHub 中使用 Actions、拉取请求和分支实践,负责源代码管理、CI/CD 及代码审查
- 在青铜层、白银层和黄金层之间实施奖章架构
- 准备供分析工程使用的白银层数据集
- 与分析团队协调数据契约、架构和新鲜度 SLA
- 根据需要协助排查数据源的技术问题
任职要求
- 具备数据工程实践经验,熟悉数据摄取管道和 ETL/ELT 工作流
- 精通 SQL
- 具备使用 Python 构建自动化和集成脚本的经验
- 了解 AWS 数据服务,包括 S3、Glue、Lambda 和 Athena
- 具备 Git 和 GitHub 使用经验,包括版本控制、拉取请求和代码审查
- 了解使用 Terraform 进行基础设施即代码开发
- 具备集成 API 的经验,熟悉身份验证、分页和速率限制处理
- 持有 AWS 认证(如 AWS Certified Data Engineer 或 AWS Certified Solutions Architect - Associate)者优先
- 具备使用 Airflow 或 Step Functions 等编排平台的经验者优先
- 了解 dbt 者优先
- 具备数据湖或湖仓架构经验者优先
- 具备向 BI 或分析工程团队交付数据产品的经验者优先
福利待遇
- 带薪生日假
- 远程办公补贴,用于帮助承担居家办公成本
- 通过与 INMD 合作提供心理支持
- 可选交通补贴
- 每日 BRL 53.00 餐食或食品补贴
- 通过 Pluxee 应用享受药品折扣
- 可选 Bradesco Saúde 和 Amil Dental 计划,并可提供家庭保障
- 使用 On Happy 平台,以特别价格享受体验和旅行服务
- 享受 Descomplica、Ânima Educação、FGV 和 Open English 的课程及项目折扣
- Cantão、Redley 和 Kenner 品牌半价优惠
- 人寿保险