Avanade
Avanade
Avanade 为企业提供基于云的链接管理和数字连接工具。其平台支持网址缩短、品牌链接、二维码(包括动态二维码和 GS1 Digital Link 格式)、移动落地页、数字名片、UTM 活动跟踪、链接分析、API 和集成功能。这些能力帮助营销、开发和客户服务团队在数字渠道中创建、管理和衡量客户互动,同时提供面向企业的安全与合规功能。

数据工程师 – 圣保罗(混合办公)

加入 Avanade,担任圣保罗的数据工程师,设计面向分析、AI 和数字产品的数据平台与数据管道。构建安全、可扩展的解决方案,持续创造可衡量的业务价值。

描述

  • 使用 Python、PySpark 和 SQL 设计并维护批处理与流式数据管道
  • 构建并编排可靠、可观测的 ETL/ELT 工作流,配备日志、指标和告警
  • 创建支持 BI、分析和 AI 用例的 OLTP 与 OLAP 数据模型
  • 通过 GitHub 工作流、拉取请求和代码审查管理代码与制品的质量、版本控制和可复现性
  • 开发单元测试、集成测试和数据测试,同时定义端到端测试方法
  • 应用提升模块化、安全性、性能和成本效率的架构实践
  • 与分析师、数据科学家和产品团队合作,将业务需求转化为可扩展的数据解决方案
  • 记录数据资产、流程和架构决策,促进知识共享
  • 通过自动化、标准化和性能优化推进数据环境建设

任职要求

  • 熟练使用 Python 和 PySpark 进行数据处理、转换和分布式计算
  • 具备扎实的 SQL 能力,包括数据建模、查询调优、CTE、窗口函数和分区
  • 具有事务型 OLTP 和多维 OLAP 数据建模经验
  • 具有使用 Airflow、Databricks Jobs 或类似工具构建和编排 ETL/ELT 工作流的经验
  • 了解以数据为核心的软件架构,包括设计模式、安全性、可扩展性和成本效率
  • 具有 GitHub 实战经验,熟悉 GitFlow、拉取请求、语义化版本控制和基础 GitHub Actions
  • 具有设计和执行测试的经验,包括数据质量和模式验证检查
  • 具有数据 CI/CD 流水线经验者优先
  • 了解数据湖、NoSQL、文档型、列式和图数据库等非关系型平台者优先
  • 具有云经验者优先,最好熟悉 Azure 服务,包括 Data Lake Storage、Databricks、Synapse、Fabric 和 Key Vault
  • 了解数据治理和安全实践者优先,例如数据血缘、数据目录以及 RBAC/ABAC
  • 拥有 Microsoft Azure 认证者优先,例如 DP-203、AZ-900、DP-900 或相关认证
  • 拥有 Databricks Lakehouse Fundamentals 或 Data Engineer Associate/Professional 认证者优先
  • 英语中级至高级水平

福利待遇

  • 餐费或食品补贴
  • 最高适用于高级顾问级别的多福利卡
  • 医疗和牙科保险
  • 认证和培训支持
  • 人寿保险
  • 私人养老金计划
  • Avababy 孕期支持及新手父母欢迎礼包
  • 公司利润分享计划
  • Wellhub 会员
  • 育儿补贴
  • 职业导师指导
  • 员工及其 12 岁以下子女均可享受生日休假政策
  • 健康活动课程
  • 管理岗位可享有公司车辆、停车位和燃油补贴