高级数据工程师,数字营销 — 巴西远程
使用 PySpark 和 Databricks 为媒体组合建模公司构建可扩展的数据管道。 改进数据转换与管道性能,同时优化云成本。
描述
- 为大型数据工作负载构建并维护可扩展的 ETL 管道。
- 使用 PySpark 和 Databricks 执行复杂的数据转换与工作流。
- 优化管道速度、可扩展性和云成本效率。
- 与工程和业务团队合作,将需求转化为可靠的数据解决方案。
- 排查并预防复杂的数据处理问题和管道瓶颈。
- 践行数据质量、治理和系统性能方面的最佳实践。
任职要求
- 具备 5–7 年数据工程实践经验,能够交付生产级解决方案。
- 熟练掌握 PySpark。
- 拥有丰富的 Databricks 实践经验。
- 深入掌握 Databricks AutoLoader。
- 具备高级 Python 知识。
- 了解数据工程最佳实践、性能调优和计算成本优化。
- 全面理解端到端 ETL 流程。
- 具备复杂数据转换和管道优化经验。
- 具备出色的问题解决能力。
- 能够向技术和业务受众清晰地传达技术概念。
- 目前居住在拉丁美洲。
福利待遇
- 可在该职位允许的任何地点远程工作。
- 以美元领取有竞争力的薪酬。
- 享有带薪休假。
- 自主开展工作。
- 参与面向美国领先企业的创新型高影响力项目。
- 参加支持身心健康与工作生活平衡的活动。
- 与遍布 25 个以上国家和地区的多元化全球网络合作。
- 与经验丰富的资深专业人士共事。
