初级数据工程师——Hiscox,里斯本
协助构建云端数据管道和数据产品,为 Hiscox 再保险分析提供支持。 使用 Snowflake、Azure、GCP、Python、SQL 和 dbt,并学习数据治理与 DevOps 实践。
描述
- 协助构建和维护数据管道与数据产品,覆盖其整个生命周期。
- 在资深数据工程师和首席数据工程师的指导下完成明确的工程任务。
- 支持提供准确、易于访问的数据,用于分析和报告。
- 通过敏捷实践逐步创造业务价值。
- 参与概念验证和实验工作。
- 应用云工程和 DevOps 实践,包括 CI/CD 和测试。
- 在 Snowflake、Azure 和 GCP 等平台上构建解决方案。
- 使用 Python、SQL、dbt 和编排工具编写易读且易维护的代码。
- 参与代码审查并吸收反馈。
- 监控数据管道并协助调查问题。
- 与数据工程师、数据科学家及利益相关方协作。
- 协助产品负责人交付数据解决方案。
- 加入数据工程团队并分享知识。
- 帮助业务用户理解数据。
- 遵循数据治理、质量和安全实践。
- 支持数据管道验证、数据血缘管理和监控。
- 记录数据产品和数据管道相关信息。
- 逐步了解如何设计具有成本效益的解决方案。
- 协助提升数据管道的性能和可扩展性。
- 协助监控平台使用情况。
任职要求
- 具备约 1–2 年数据工程、软件开发或分析相关经验,或接触过相关工作。
- 具备 SQL 实际应用知识。
- 具备基础编程经验,优先考虑 Python。
- 了解 Azure 或 GCP 等云平台。
- 了解 Snowflake 等数据仓库技术。
- 熟悉源代码管理,并对 CI/CD 和自动化测试有兴趣。
- 对数据建模概念有基本了解,包括 OLTP 和 OLAP。
- 熟悉结构化和半结构化数据。
- 接触过 SQL 数据库。
- 愿意负责分配的任务并将其完成。
- 具备务实的问题解决能力。
- 对敏捷工作环境有兴趣。
- 具备良好的沟通能力。
- 能够在跨职能团队中协作。
- 乐于接受反馈和指导。
- 拥有计算机科学、工程、数学、数据科学或相关领域的学位者优先。
- 接触过 Prefect、Airflow 或 ADF 等编排工具者更佳。
- 接触过 dbt 或类似的数据转换工具者更佳。
福利待遇
- 混合办公安排。
- 通过指导、反馈、辅导和知识分享获得学习与发展机会。
- 参与数据工程团队。
- 有机会使用现代云技术并实践工程方法。
- 采用敏捷工作方式。
