高级数据运营与工程专家–诺伊达现场办公
EY 高级数据工程岗位,专注于云数据平台、可扩展数据管道、迁移和商业智能。 负责 AWS 与 Azure 环境中的可靠数据运营。
描述
- 构建和维护可扩展的数据管道与集成框架
- 管理和优化云数据平台、数据库、数据仓库及分析数据集
- 推动数据迁移、现代化改造和转换项目
- 与业务、分析和报告团队合作,交付可信的数据资产
- 维护数据质量、安全性、性能、可用性和运营韧性
- 支持商业智能、报告和自助式分析项目
- 监控、排查并改进数据平台运营和流程
任职要求
- 具备 SQL、Python 和/或 PySpark 实践经验
- 具备 ETL/ELT 管道、数据流和集成解决方案的设计与开发经验
- 具有 AWS 服务(如 S3、Glue、Redshift、Lambda 和 Athena)和/或 Azure 服务(包括 ADF、Databricks、ADLS 和 Synapse)的实操经验
- 深入理解数据仓库、数据湖、湖仓和维度建模架构,包括星型和雪花型模式
- 具备面向报告、分析和商业智能交付及支持企业数据平台的经验
- 具备数据迁移和现代化改造背景,包括从本地环境迁移至云端以及传统平台转型
- 具备使用 Spark 或 Databricks 进行大规模数据处理的经验
- 了解批处理和实时数据处理框架
- 具备使用 Airflow、ADF、Step Functions 或同类管道编排工具的经验
- 深入理解数据质量、验证、性能调优和运营支持
- 具备支持 Power BI、Tableau 或 QuickSight 等 BI 平台的经验
- 熟悉源代码管理、CI/CD 和敏捷交付实践
- 具备 Snowflake、Microsoft Fabric 或同类现代数据平台经验
- 接触过 Kafka、Event Hub 或 Kinesis 等流处理工具
- 了解变更数据捕获、复制和数据同步框架
- 具备使用 Terraform、CloudFormation 或 Bicep 实施基础设施即代码的经验
- 理解数据治理、元数据管理、数据血缘和安全实践
- 持有 AWS Data Engineer、DP-203、DP-600 或同等资质的云认证
