
数据工程师 II - Netomi(远程,印度)
加入 Netomi,担任数据工程师 II,为智能代理 AI 客户体验平台构建可扩展的数据管道、数据产品和分析能力。 该职位将为全球企业品牌提供模型、评分卡和可执行洞察支持。
描述
- 使用 Spark、Databricks、Airflow 和 Snowflake 等平台,构建安全、可靠且可扩展的数据管道。
- 创建用于摄取结构化和非结构化数据的 ETL 与 ELT 工作流。
- 通过探索性分析识别趋势、验证数据质量,并为数据产品和业务决策提供依据。
- 与数据科学家、分析师和软件工程师合作,开发用于分析和实时洞察的模型。
- 编写易于维护的 Python 代码,并通过全面的单元测试和集成测试提供保障。
- 在敏捷团队中管理功能从开发到完成的交付过程。
- 与数据科学、产品、工程和客户成功相关方合作,主导复杂的数据与趋势调查。
- 评估产品运营计划,并创建评分卡和报告以传达结果。
- 利用客户和业务数据发现并推动改进机会。
- 协助制定解决产品质量问题的政策、流程和工具。
任职要求
- 计算机科学、工程或相关专业本科或硕士学位。
- 至少四年数据工程或后端软件开发实践经验。
- 熟悉关系型数据库,包括 RDS、MySQL 和 PostgreSQL。
- 具备使用 Apache Kafka 或 RabbitMQ 构建异步、解耦架构的实践经验。
- 精通 Python 和 SQL,并使用过 Apache Airflow、Luigi 或 Prefect 等数据管道编排工具。
- 具备 AWS Redshift、Google Cloud BigQuery、Snowflake 或 Databricks 等云数据平台的丰富经验。
- 深入理解数据建模、数据仓库和分布式系统。
- 熟悉 DevOps 实践,包括 CI/CD、基础设施即代码,以及 Docker 或 Kubernetes 容器化。
- 接触过 AI 和机器学习解决方案,或有兴趣与数据科学团队合作。
- 了解数据安全和隐私要求,包括 GDPR 和 HIPAA。
- 熟悉提示工程以及基于 LLM 的系统处理数据的方式。









