高级数据工程师(远程,巴西)—Stefanini Brasil
在 Stefanini Brasil,运用云技术、分布式处理和数据治理,开发现代化平台、可扩展管道及人工智能解决方案的高级数据工程师。
描述
- 构建并改进现代化数据平台、可扩展数据管道和人工智能解决方案
- 设计、开发和维护批处理及流式数据管道
- 设计并推进云环境中的数据架构
- 处理大型数据集,同时保持可扩展性、性能和质量
- 创建数据摄取、转换、集成和交付工作流
- 支持数据科学、机器学习和人工智能相关计划
- 协助建立架构、治理、安全性和可观测性标准
- 参与数据平台现代化和迁移工作
- 与工程、产品、数据科学及业务团队合作
- 指导初级同事并支持团队技术发展
- 诊断性能、可靠性和数据质量问题
任职要求
- 具备经过验证的数据工程专业经验
- 熟练掌握 Python 和 SQL
- 拥有开发可扩展数据管道和架构的实践经验
- 了解分布式数据处理,尤其是 Apache Spark
- 具有 AWS、Google Cloud 或 Azure 等云平台的工作经验
- 了解关系型和非关系型数据库系统
- 具有使用数据湖、数据仓库或湖仓的经验
- 具有使用 Airflow、Dagster 或类似技术进行编排的经验
- 了解 CI/CD、版本控制和基础设施即代码实践
- 熟悉数据监控、可观测性、质量和治理
- 优先考虑:具备 Databricks、dbt、Kafka 或类似技术经验
- 优先考虑:参与过机器学习、生成式人工智能或基于人工智能代理的系统项目
- 优先考虑:具备设计数据驱动解决方案和人工智能产品的经验
- 优先考虑:了解 MLOps、LLMOps 或人工智能应用可观测性
- 优先考虑:持有云技术、Databricks 或数据工程相关认证
- 优先考虑:参与过开源项目,拥有技术作品集或个人技术项目
- 优先考虑:英语高级水平
福利待遇
- 餐食或食品补贴
- 课程、大学和语言学校折扣
- 可使用 Stefanini Academy,免费参加当前在线课程并获得证书
- 导师支持
- 福利俱乐部,可享受医疗咨询和检查折扣
- 医疗保险
- 牙科保险
- 知名商户折扣和福利
- 旅行俱乐部会员资格
- 宠物护理福利
