プリンシパルAIアーキテクト、エージェントシステム
FourKitesのAIエージェントについて、モデルやコンテキスト管理から評価まで、全体のアーキテクチャを主導します。 AIを活用したサプライチェーンのデジタルワーカーを支えるプラットフォームを構築します。
仕事内容
- FourKitesのAIエージェントについて、実行、コンテキスト、モデル、評価を含むアーキテクチャを担当します。
- ループ、ツール利用、状態、チェックポイント、リトライ、復旧、安全対策、権限、人への引き継ぎを含むエージェントのリファレンスアーキテクチャを定めます。
- コンテキストウィンドウをまたいで動作し、ツール、運送会社API、モデルの障害から復旧できる、堅牢なマルチステップワークフローを設計します。
- 最先端モデルやオープンウェイトモデルから、ファインチューニングしたエンコーダーや従来型のコードまで、課題ごとに適切な手法を選びます。
- エージェント群全体のモデルルーティング、タスクごとのコスト、レイテンシ目標を管理します。
- エージェントをKafka、マイクロサービス、Postgres、顧客API、MCPサーバーに接続します。
- トークン上限を踏まえ、プロンプト、ツール、検索結果、メモリ、過去の会話に関するコンテキストウィンドウの基準を定めます。
- 検索、コンテキスト圧縮、要約、サブエージェントの分離、プロンプトキャッシュ、永続メモリのための共通ツールを開発します。
- コンテキストの障害を調査し、解決策を再利用可能な実行パターンにまとめます。
- 本番環境のトレース、コードベースの検査、調整済みのLLM-as-a-judge採点、CI回帰テストを用いて、オフライン評価システムを開発します。
- 本番環境でのスコアリング、品質指標、ドリフト監視、シャドーリリースとA/Bリリース、フィードバックシグナル、品質アラートを用いて、オンライン評価を開発します。
- 評価指標を、追跡精度、自動化された例外対応、予約枠の充足率などの成果に結び付けます。
- 設計とプルリクエストをレビューし、アーキテクチャ資料と運用手順書を整備し、スタッフエンジニアやシニアエンジニアを指導します。
- モデルやツールの動向を把握して実験を行い、自社開発、購入、導入見送りのいずれが適切か提案します。
- プロダクト、ソリューション、カスタマーサクセスの各チームと連携し、現場の課題をプラットフォームの改善につなげます。
応募要件
- 実ユーザーと本番トラフィックに対応するLLMエージェントシステムを設計・運用した経験があり、ツール呼び出し、複数ステップのワークフロー、障害対応、人へのエスカレーションを扱っていること。
- LLMエージェントシステムのリリース後も運用責任を担い、インシデント、コスト、レイテンシを管理した経験があること。
- アテンション、位置エンコーディング、エンコーダーとデコーダーのアーキテクチャ、トークナイゼーション、KVキャッシュなど、機械学習に関する深い知識があること。
- BERT系モデル、文埋め込み、バイエンコーダー、クロスエンコーダー型再ランキングモデルなどのエンコーダーモデルを訓練またはファインチューニングした経験があること。
- 対照学習、蒸留、量子化を理解していること。
- トークン予算を管理し、エージェント向けの検索とメモリを構築した経験があること。
- コンテキスト圧縮とサブエージェントを活用し、コンテキストウィンドウが埋まるにつれて品質を測定した経験があること。
- ループ、ツールのディスパッチ、状態とチェックポイント、中断と復旧、サンドボックスと権限、安全対策、モデルルーティングを備えたエージェント実行レイヤーを構築した経験があること。
- MCP、構造化出力、ストリーミングに精通していること。
- データセット、採点器、LLM-as-a-judgeの調整、CI回帰ゲート、本番スコアリング、トレースのサンプリング、ドリフト監視、シャドーデプロイ、フィードバックループを含む、オフラインとオンラインの評価スイートを構築した経験があること。
- ソフトウェアまたは機械学習システムの経験が10年以上あり、そのうちLLMを使った開発経験が3年以上あること。
- Pythonを実務で十分に使いこなせること。
- JavaまたはTypeScriptのサービスを読み、レビューできること。
- AWSまたはGCP、コンテナ、Kubernetes、イベント駆動型システムの本番運用経験があること。
- 文書と会話の両方で効果的にコミュニケーションできること。
- 歓迎条件：サプライチェーン、物流、運輸業界での経験。
- 歓迎条件：Document AI、OCR、レイアウトモデルの経験、および船荷証券、請求書、配達証明書類からデータを抽出した経験。
- 歓迎条件：企業の業務を代行する音声またはメールエージェントを構築した経験。
- 歓迎条件：プロンプトインジェクション対策、ツール権限、テナントデータの分離など、エージェントセキュリティの経験。
- 歓迎条件：Claude、GPT、Gemini、オープンウェイトモデル、モデルサービングスタックの利用経験。
- 歓迎条件：エージェント、検索、評価に関する論文発表、講演、またはオープンソースへの貢献。
福利厚生
- 競争力のある報酬とストックオプション。
- 全世界共通のリチャージ休暇5日。
- 充実した有給休暇と通常の祝日休暇。
- すべての親が取得できる育児休暇。
- 年間ウェルネス手当。
- ボランティア休暇。
- 入社初日から医療保険を利用できます。
- 病気休暇、特別休暇、年次休暇を合わせて36日の休暇。
- リチャージ休暇5日。
- ボランティア休暇2日。
- 在宅勤務環境の整備費用とテクノロジー費用の補助。
- ライフスタイルと家族向けの福利厚生。
- メンタルウェルネスに関するサポートと相談。
- 専門能力開発プログラムやToastmastersクラブを含む、継続的な学習・能力開発の機会。