
シニアPythonデータスクレイピングエンジニア——フリーランス、インドからのリモート勤務
Mindriftは、Tendem AIプロジェクトで構造化されたウェブデータのワークフローを抽出、検証、拡張するシニアPythonエンジニアを募集しています。 Python、クラウドインフラ、Docker、LLMベースの自動化フレームワークを扱うポジションです。
仕事内容
- 複雑なウェブサイト全体にわたるデータ抽出ワークフローを管理する
- 網羅性が高く、精度に優れ、安定して納品できる構造化データセットを提供する
- 専門ツールと最適化したワークフローを使い、収集、検証、タスク実行を迅速化する
- JavaScriptでレンダリングされるページを含む、動的でインタラクティブな情報源から情報を取得する
- ウェブサイトの挙動やページ構造の変化に応じてスクレイピング手法を調整する
- 検証、複数ソース間の照合、フォーマット基準、体系的なレビューによってデータ品質を維持する
- 効率的なバッチ処理と並列処理によって大規模なスクレイピングを拡張する
- 失敗を追跡し、信頼性と安定性の高いスクレイピング運用を支援する
- Python、ウェブスクレイピング、データ抽出、データ処理の専門知識をTendemプロジェクトに活用する
応募要件
- データエンジニアリング、ウェブスクレイピング、自動化、ソフトウェア開発のいずれかに関連する5年以上の経験
- 工学、応用数学、コンピューターサイエンス、または関連する技術分野の学士号または修士号があれば尚可
- スクリプト作成、自動化、データ抽出ワークフローに関する確かな実務基盤
- BeautifulSoup、Selenium、または同等のツールを使用した高度なPythonスクレイピング経験。動的コンテンツとプロキシベースのAPIに精通していること
- 階層構造、アーカイブページ、不統一なHTMLなど、複雑な構造から情報を抽出できること
- データのクリーニング、正規化、検証に関する豊富な経験
- 大規模環境でボット対策や動的なウェブサイト構造を管理した実務経験
- AWSまたは同等のクラウドインフラとDockerコンテナ化の経験
- 自動化のためにLangChain、OpenRouter、または類似のLLMフレームワークを実際に使用した経験
- データの正確性と品質に対する細やかな姿勢
- 自律的に働き、問題を切り分け、主体的にタスクを管理できること
- 中上級(B2)以上の英語力
- GitHubリンクがあれば尚可
福利厚生
- フリーランス契約
- インドからのパートタイム・リモート勤務
- プロジェクトの稼働期間中、週約10〜20時間
- Mindriftプラットフォームを通じて技術プロジェクトに携わる機会
- 経験レベルと貢献ペースに応じて、時給相当で最大30米ドル









