初级数据工程师(仅限残障人士)— IPIRANGA
加入 IPIRANGA 数据团队,构建 Databricks 数据管道和 Lakehouse 解决方案。 协助加强数据治理、质量和平台性能。
描述
- 构建并维护用于数据摄取、转换和交付的管道。
- 开发并改进 Databricks 中的 Python 和 SQL 笔记本。
- 协助构建覆盖 Bronze、Silver 和 Gold 层的 Lakehouse 解决方案。
- 监控数据加载并调查流程故障。
- 维护数据质量、可靠性和可追溯性。
- 使用 Unity Catalog 支持数据治理和编目。
- 记录流程、表和管道。
- 与数据架构师、工程师、科学家及业务团队协作。
- 协助提升数据平台性能和成本效益。
任职要求
- 已完成或正在攻读计算机科学、信息系统、计算机工程、软件工程、工业工程、数据科学、统计学、数学或相关技术或分析领域的学位。
- 具备中级 SQL 技能。
- 了解 Python。
- 理解 ETL 和 ELT 概念。
- 具备基础数据建模知识。
- 了解关系型数据库。
- 了解 Databricks,或有相关学术或职业经验。
- 熟悉 Azure、AWS 或 Google Cloud Platform。
- 优先条件:了解 Apache Spark。
- 优先条件:了解 Delta Lake。
- 优先条件:有 Azure Data Factory 使用经验。
- 优先条件:了解 Unity Catalog。
- 优先条件:了解 Azure DevOps 和 CI/CD 概念。
- 优先条件:有使用 Power BI 或其他数据可视化工具的经验。
- 优先条件:持有 Databricks 或 Microsoft Azure 认证。
- 优先条件:参与过数据相关的学术项目、本科研究或实习。
- 本职位仅面向残障人士。
福利待遇
- 弹性工作时间。
- 为有残障子女的员工提供支持。
- 浮动薪酬计划。
- 私人养老金计划。
- 服务年限奖金。
- 在线心理治疗和营养咨询。
- 新生儿支持礼包。
- 企业大学。
- 眼镜和隐形眼镜费用报销。
- 药品补助。
- 疫苗接种补助。
- Gympass。
- 餐券和食品券。
- 交通补贴券。
- 医疗和牙科保险。
- 人寿保险。
