シニアアナリスト、モデルリスクおよび生成AI検証
The Hartfordの保険業務を支える生成AIおよびエージェント型AIモデルを検証します。テストフレームワークを構築し、モデルリスクを評価して、検証結果を伝達します。
仕事内容
- 各業務機能および事業分野における生成AIとエージェント型AIのユースケースを検証する
- モデルの計算、アルゴリズム、手法が正確で、意図した目的に適合していることを確認する
- 要約、質問応答、検索、データ合成、LLM-as-a-judge、その他の関連アプリケーション向けに、チャレンジャーソリューションとテスト手法を開発する
- モデルの正確性、堅牢性、信頼性を測定するための定量的・定性的な手法を評価する
- データ入力、前提条件、プロンプトエンジニアリング、コンテキストエンジニアリングの実務をレビューする
- 変動性分析、信頼区間、統計的評価手法を用いて、非決定論的AIシステムのテストを作成・実行する
- モデルの入力、計算、出力、概念的妥当性、モニタリング、統制、文書化に対して検証を行う
- 発見事項と推奨事項を文書化し、その影響を分析して、モデル検証報告書を作成する
- 発見事項の追跡、是正テスト、検証活動に関するガバナンス業務を担う
- 標準化された指標と検証ツールを通じて、生成AI検証フレームワークを高度化する
- データサイエンスチームと協力し、進化するモデリング能力にモデルリスク管理の実務を適合させ、プロアクティブなリスク管理を支援する
- AI/ML、生成AI、エージェント型システム、規制上の期待、部門の取り組みに関する動向を把握する
- Vertex AI/Google ADK、LangChain/LangGraph、RAGフレームワーク、Hugging Face、OpenAI APIなどのツールの評価・テストを支援する
- AIガバナンス基準、モデルリスク管理ポリシー、新たな規制上の期待に照らしてソリューションを評価する
応募要件
- 人工知能、機械学習、計算科学、工学、統計学、応用数学、保険数理、コンピュータサイエンス、計量経済学、または関連分野の修士号や博士号などの上級学位
- 機械学習またはデータサイエンス分野で少なくとも3年の業界経験があり、そのうち少なくとも1年は生成AIまたはエージェント型AIに重点を置いていること
- 損害保険、団体保険、生命保険、または関連する保険商品に関する経験があれば尚可
- Python、SQL、Gitに関する確かなプログラミングおよび技術スキル
- プロンプトエンジニアリングとコンテキストエンジニアリング、検索拡張生成、LLMの内部構造、LLM評価、マルチエージェントシステムなど、生成AIの概念に関する十分な知識
- GCP/Vertex AI、Google uAgent Development Kit(ADK)、AWS/SageMaker、LangChain/LangGraph、Hugging Face、OpenAI APIなど、最新のクラウドおよびAIプラットフォームの利用経験
- 自律的に業務を進め、主体的に責任を担い、期限を守り、変化する優先事項に適応できること
- 優れた分析力、批判的思考力、調査能力
- モデリング手法とAI技術の進化に合わせて継続的に学習・成長する意欲
- 創造的でソリューション志向の姿勢を持ち、革新的に考え、既存の慣行に挑戦する意欲
- 複雑な技術概念を非技術系の関係者に説明できる能力を含む、優れたコミュニケーション力と協働力
福利厚生
- 短期または年次の賞与機会
- 長期インセンティブ
- その場での表彰
- 福利厚生・待遇;詳細は記載されていません
