The Hartford to firma ubezpieczeniowa i świadcząca usługi finansowe, obsługująca osoby prywatne, rodziny oraz małe i średnie przedsiębiorstwa. Założona w 1810 roku, oferuje ubezpieczenia samochodów, domów i firm, a także ubezpieczenia pracownicze oraz inne rozwiązania ubezpieczeniowe. Firma jest również znana z programów ubezpieczeń samochodów i domów rekomendowanych przez AARP, które zapewniają uczestniczącym członkom dostęp do wyjątkowych korzyści i zniżek.
Starszy analityk ds. ryzyka modeli i walidacji generatywnej AI
Waliduj generatywne i agentowe modele AI wspierające operacje ubezpieczeniowe The Hartford. Twórz struktury testowe, oceniaj ryzyko modeli i przedstawiaj wyniki walidacji.
Stany Zjednoczone
Connecticut108 000 $ – 162 000 $ / rok
ZdalniePełny etatSeniorWymagany Język: angielskiSztuczna inteligencjaOpis
- Walidować przypadki użycia generatywnej i agentowej AI w różnych funkcjach oraz liniach biznesowych
- Potwierdzać, że obliczenia, algorytmy i metodyki modeli są dokładne i odpowiednie do zamierzonych celów
- Opracowywać rozwiązania challenger oraz metody testowania dla podsumowywania, odpowiadania na pytania, wyszukiwania, syntezy danych, LLM-as-a-judge i powiązanych zastosowań
- Oceniać ilościowe i jakościowe techniki pomiaru dokładności, odporności i niezawodności modeli
- Weryfikować dane wejściowe, założenia oraz praktyki związane z projektowaniem promptów i kontekstu
- Tworzyć i przeprowadzać testy niedeterministycznych systemów AI z użyciem analizy zmienności, przedziałów ufności i statystycznych metod oceny
- Weryfikować dane wejściowe modeli, obliczenia, wyniki, poprawność koncepcyjną, monitorowanie, mechanizmy kontrolne i dokumentację
- Dokumentować ustalenia i rekomendacje, analizować ich wpływ oraz przygotowywać raporty z walidacji modeli
- Realizować obowiązki związane z zarządzaniem, w tym śledzenie ustaleń, testowanie działań naprawczych i prowadzenie walidacji
- Rozwijać struktury walidacji generatywnej AI za pomocą ustandaryzowanych metryk i narzędzi walidacyjnych
- Współpracować z zespołami Data Science, aby dostosowywać praktyki zarządzania ryzykiem modeli do rozwijających się możliwości modelowania i wspierać proaktywne zarządzanie ryzykiem
- Monitorować rozwój AI/ML, generatywnej AI, systemów agentowych, oczekiwań regulacyjnych i inicjatyw działu
- Pomagać w ocenie i testowaniu narzędzi, w tym Vertex AI/Google ADK, LangChain/LangGraph, struktur RAG, Hugging Face i OpenAI APIs
- Oceniać rozwiązania pod kątem zgodności ze standardami zarządzania AI, zasadami zarządzania ryzykiem modeli i pojawiającymi się oczekiwaniami regulacyjnymi
Wymagania
- Zaawansowany stopień naukowy, np. M.S. lub Ph.D., w dziedzinie sztucznej inteligencji, uczenia maszynowego, nauk obliczeniowych, inżynierii, statystyki, matematyki stosowanej, nauk aktuarialnych, informatyki, ekonomii ilościowej lub dziedzinie pokrewnej
- Co najmniej 3 lata doświadczenia branżowego w uczeniu maszynowym lub analizie danych, w tym co najmniej 1 rok doświadczenia skoncentrowanego na generatywnej lub agentowej AI
- Doświadczenie z produktami ubezpieczeniowymi P&C, Group, Life lub powiązanymi będzie dodatkowym atutem
- Bardzo dobre umiejętności programistyczne i technologiczne, w tym znajomość Python, SQL i Git
- Dobra znajomość koncepcji generatywnej AI, w tym projektowania promptów i kontekstu, generowania wspomaganego wyszukiwaniem, wewnętrznego działania LLM, oceny LLM i systemów wieloagentowych
- Doświadczenie z nowoczesnymi platformami chmurowymi i AI, takimi jak GCP/Vertex AI, Google uAgent Development Kit (ADK), AWS/SageMaker, LangChain/LangGraph, Hugging Face i OpenAI APIs
- Umiejętność samodzielnej pracy, proaktywnego przejmowania odpowiedzialności, dotrzymywania terminów i dostosowywania się do zmieniających się priorytetów
- Silne zdolności analityczne, krytycznego myślenia i prowadzenia analiz
- Zaangażowanie w ciągłe uczenie się i rozwój wraz z ewolucją metod modelowania i technologii AI
- Kreatywne, skoncentrowane na rozwiązaniach podejście, innowacyjne myślenie i gotowość do kwestionowania utrwalonych praktyk
- Doskonałe umiejętności komunikacji i współpracy, w tym zdolność wyjaśniania złożonych koncepcji technicznych osobom nietechnicznym
Benefity
- Możliwości otrzymania krótkoterminowej lub rocznej premii
- Długoterminowe programy motywacyjne
- Uznanie osiągnięć na bieżąco
- Świadczenia i benefity; szczegóły nie zostały określone