高级 Python 数据抓取工程师——自由职业，印度远程
Mindrift 正在为 Tendem AI 项目招募一名高级 Python 工程师，负责提取、验证并扩展结构化网络数据工作流。 该职位涉及 Python、云基础设施、Docker 以及基于大语言模型的自动化框架。
描述
- 管理跨复杂网站的完整数据提取工作流
- 交付覆盖全面、准确度高且周转可靠的结构化数据集
- 使用专业工具和定制化工作流，加快数据收集、验证和任务执行
- 从动态和交互式来源中获取信息，包括通过 JavaScript 渲染的页面
- 根据网站行为和页面结构的变化调整抓取方法
- 通过验证、跨来源核对、格式标准和系统化审核维护数据质量
- 通过高效批处理和并行处理扩展大规模数据抓取
- 跟踪失败情况，支持可靠、稳定的抓取运营
- 将 Python、网络抓取、数据提取和数据处理方面的专业能力应用于 Tendem 项目
任职要求
- 具备 5 年以上数据工程、网络抓取、自动化或软件开发相关经验
- 拥有工程、应用数学、计算机科学或相关技术领域的学士或硕士学位者优先
- 具备扎实的脚本编写、自动化和数据提取工作流实践基础
- 具备使用 BeautifulSoup、Selenium 或同类工具进行高级 Python 抓取的经验，熟悉动态内容和基于代理的 API
- 能够从复杂结构中提取信息，包括层级结构、存档页面和不一致的 HTML
- 在数据清洗、规范化和验证方面拥有丰富经验
- 具备大规模管理反机器人保护机制和动态网站结构的实践经验
- 具备 AWS 或同类云基础设施以及 Docker 容器化经验
- 实际使用过 LangChain、OpenRouter 或类似大语言模型框架进行自动化
- 对数据准确性和质量保持严谨态度
- 能够独立工作、排查问题并主动管理任务
- 英语达到中高级（B2）或更高水平
- 提供 GitHub 链接者优先
福利待遇
- 自由职业合作
- 在印度开展兼职远程工作
- 项目活跃阶段每周约 10–20 小时
- 有机会通过 Mindrift 平台参与技术项目
- 时薪最高相当于 30 美元，具体取决于经验水平和贡献速度