数据工程分析师(混合办公)- 肯塔基州路易斯维尔
构建支持 Marsh 全球风险与咨询业务的 Databricks 数据平台和 ETL 管道。该路易斯维尔混合办公岗位注重数据质量、测试以及可靠的工作流运营。
描述
- 与利益相关者合作,明确数据需求并将其转化为可执行的技术规范
- 构建并部署数据管道和 ETL 工作流
- 开展全面的单元测试,以验证功能和性能
- 建立数据质量控制和验证流程
- 与跨职能团队合作,协调项目目标、进度和交付成果
- 跟踪数据管道和工作流,以保持性能、可靠性和效率
- 在需要时实施改进
- 记录数据流程、平台架构和运营工作流
- 规划并交付跨多个地区的 Databricks 数据平台设置与管理
任职要求
- 计算机科学、数据科学、信息技术或相关专业学士学位
- 熟练使用 Python 和 SQL
- 具备数据建模和数据库设计经验
- 至少五年专业数据工程经验
- 深入了解 ETL 和 ELT 原则
- 具备 API 集成以及从多种来源摄取数据的经验
- 具备功能测试和自动化数据测试经验
- 了解有效的文档编写实践和自动化原则
- 熟悉 Apache Spark
- 具备 AWS 或 Azure 使用经验
- 具备在测试环境中集成人工智能的经验
- 能够监督质量保证工程师并主持 SCRUM 会议
- 熟悉 Databricks 和 Snowflake
福利待遇
- 职业发展机会
- 参与有吸引力的项目
- 支持性的领导团队
- 包容且充满活力的职场文化
- 灵活的工作环境
- 旨在支持身心健康的福利与奖励
- 可选择远程办公
- 办公室协作、建立人脉和专业发展机会
- 在需要时获得工作场所便利安排支持
