数据分析工程师 — Sensorfact(混合办公,荷兰)
使用 Prefect、dbt 和 ClickHouse,为 Sensorfact 的工业监测平台构建可扩展的数据管道。 帮助团队获取可靠洞察、改进数据可视化,并推动更广泛地采用 AI。
描述
- 构建并优化数据管道,为数据驱动的决策提供支持。
- 创建工作流,以提取、加载、转换和监控内部及外部数据。
- 使用 Prefect 开发可扩展的数据管道,使用 dbt 对 ClickHouse 数据建模,并支持制作实用的 Metabase 可视化内容。
- 统一数据仓库的数据接入流程。
- 加强管道测试,以维护数据质量并主动发现变化。
- 通过完善文档、明确语义并补充丰富背景信息,支持 AI 的应用。
- 与相关方合作,了解业务问题、发现数据缺口并设计实用解决方案。
- 与数据工程师、分析师和科学家协作。
- 独立负责项目,并务实地确定优先级。
- 分享知识、参与技术讨论并审查代码。
任职要求
- 至少三年构建和维护生产环境数据管道的经验。
- 具备扎实的 SQL 技能,能够编写清晰、易维护的查询,并有效利用底层数据架构。
- 积极主动、务实的问题解决方式。
- 熟悉 ClickHouse、Snowflake 或 BigQuery 等云数据仓库。
- 有使用 Prefect、Airflow 或 Dagster 等编排工具的经验。
- 熟悉专业软件工程实践,包括版本控制、合并请求、测试、编码规范和 CI/CD。
- 有使用 AWS 或 GCP 等云平台的经验。
福利待遇
- 约 60% 的时间可在家办公。
- 定期在乌得勒支或阿姆斯特丹办公室线下见面。
- 有机会分享知识、参与技术讨论和代码审查。
- 采用为期两周的冲刺周期,包括规划、回顾和每日站会。
- 使用 Linear、Miro、Google Drive、Outline 和 Slack 等协作工具。
相关职位
未找到职位
尝试调整或清除筛选条件,以查看更多机会。
