Johnson & Johnson je globalno zdravstveno podjetje, ki deluje na področju inovativne medicine in medicinske tehnologije. Njegove ekipe razvijajo rešitve na področjih onkologije, imunologije, nevroznanosti, specializirane oftalmologije, interventne oskrbe in ortopedije ter združujejo znanost in tehnologijo za reševanje kompleksnih zdravstvenih potreb. Podjetje poudarja tudi enakost na področju zdravja, okoljsko trajnost, raznolikost in vključevanje pri oskrbi zdravstvenih delavcev, pacientov in skupnosti po vsem svetu.
Vodilni inženir operacij AI – hibridno delo v Milanu
Vodilni inženir operacij AI je odgovoren za varno, opazljivo in stroškovno učinkovito upravljanje umetne inteligence v družbi Johnson & Johnson. Delovno mesto podpira produkcijske aplikacije AI v Milanu, Madridu in Lizboni.
Opis
- Načrtovanje in zagotavljanje celovite opazljivosti za aplikacije AI in agente
- Standardizacija telemetrije in porazdeljenega sledenja v delovnih tokovih agentov, API-jih, podatkovnih storitvah, vektorskih shrambah, končnih točkah modelov in zunanjih orodjih
- Razvoj nadzornih plošč in opozoril za razpoložljivost, zakasnitev, napake, zanesljivost, kakovost, kršitve pravil, porabo in stanje storitev
- Vzpostavitev kazalnikov in ciljev ravni storitev, proračunov napak, pragov opozoril in standardov operativne pripravljenosti
- Podpora odpravljanju napak na podlagi sledi, rekonstrukciji incidentov in nadzorovanemu predvajanju sej ob zaščiti občutljivih podatkov
- Spremljanje kakovosti pridobivanja, svežine podatkov, regresij modelov in pozivov, nenormalnih zank agentov, slabšanja orodij in drugega nepričakovanega vedenja med izvajanjem
- Vodenje preiskav temeljnih vzrokov incidentov platforme AI in izvajalnega okolja ter uvajanje preventivnih izboljšav in kontrol
- Izdelava ponovno uporabljivih cevovodov, predlog in kontrol za različice konfiguracij, pozivov, modelov in komponent agentov
- Uvedba avtomatiziranih kontrolnih točk za uvajanje, integracijsko testiranje, regresijsko validacijo, varnostne preveritve in preveritve pokritosti z opazljivostjo
- Podpora kanarčnim uvedbam, zastavicam funkcij, usmerjanju modelov in ponudnikov, nadomestnim možnostim ter postopkom povrnitve
- Razvoj operativnih orodij za več modelov, ogrodij, oblačnih okolij in arhitektur agentov
- Vzdrževanje operativnih priročnikov, referenčnih izvedb, inženirskih standardov in praks podpore produkciji
- Uvedba merjenja, razporejanja, povratnega prikaza stroškov, proračunov, pragov, opozoril o anomalijah in izvajalnih kontrol za porabo AI
- Sodelovanje s produktnimi ekipami pri optimizaciji izbire modelov, usmerjanja, velikosti konteksta, predpomnjenja, paketne obdelave, ponovnih poskusov in uporabe orodij
- Vključevanje varnosti, zasebnosti, odgovorne AI, skladnosti, identitete, upravljanja dostopa, ravnanja s skrivnostmi in revizijske sledljivosti v izvajalno okolje AI
- Razvoj zaščite pred vbrizgavanjem pozivov, jailbreaki, nepooblaščeno uporabo orodij, prekomernimi dovoljenji, uhajanjem podatkov, nevarnimi potmi izvajanja in nenormalnim dostopom
- Opredelitev operativnih postopkov za spremljanje, podporo, incidente, težave, spremembe, eskalacije in obnovo storitev
- Izdelava kontrolnih seznamov pripravljenosti na produkcijo, meril sprejemljivosti, priročnikov za dežurstva, poti eskalacije, postopkov obnove in zahtev neprekinjenega poslovanja
- Avtomatizacija operativnih procesov za zmanjšanje rekonstrukcijskega dela ter pospešitev zaznavanja, diagnosticiranja, omejevanja in obnove
- Priprava tehnične dokumentacije in usposabljanje inženirskih ekip za odobrene operativne prakse
- Povezovanje ekip za AI, platforme, oblak, podatke, arhitekturo, kibernetsko varnost, zasebnost, skladnost in upravljanje storitev kot tehnični povezovalec
- Opredelitev in spremljanje KPI-jev za zanesljivost, opazljivost, uspešnost pri incidentih, stroškovno učinkovitost, pokritost kontrol, revizijske dokaze in sprejetje platforme
- Uporaba operativnih podatkov za določanje prednostnih nalog avtomatizacije, izboljšanja zanesljivosti, optimizacije stroškov in zmanjšanja tveganj
Zahteve
- Diploma dodiplomskega ali magistrskega študija računalništva, inženirstva, umetne inteligence ali sorodnega področja oziroma enakovredne ustrezne izkušnje
- Najmanj pet let praktičnih izkušenj s platformnim inženirstvom, inženirstvom zanesljivosti spletnih mest, DevOpsom, DevSecOpsom, MLOpsom ali produkcijskim programskim inženirstvom z lastništvom delujočih storitev
- Praktične izkušnje z upravljanjem sistemov strojnega učenja, generativne AI ali agentskih sistemov v produkciji
- Praktično znanje Pythona, API-jev, infrastrukture kot kode in orodij CI/CD, kot so Terraform, GitHub Actions ali Azure DevOps
- Izkušnje z oblačno izvornimi platformami, vsebniki, orkestracijo in poslovnimi oblačnimi storitvami; izkušnje z Azure so zelo cenjene
- Izkušnje z uvajanjem opazljivosti prek dnevnikov, metrik, porazdeljenih sledi, nadzornih plošč in opozoril; prednost imajo OpenTelemetry ali primerljivi standardi
- Dobro razumevanje vzorcev aplikacij LLM, vključno z RAG, vektorskimi shrambami, prehodi modelov, klicanjem orodij, pomnilnikom agentov in orkestracijo več agentov
- Delovno znanje upravljanja identitet in dostopa, upravljanja skrivnosti, varnega beleženja, modeliranja groženj, zasebnosti po načelu vgrajenosti in revizijskih kontrol
- Sposobnost pretvoriti nejasne operativne potrebe in potrebe po kontrolah v ponovno uporabljive tehnične zmogljivosti, standarde, avtomatizacijo in operativne priročnike
- Odlične sposobnosti upravljanja deležnikov, tehničnega komuniciranja in dokumentiranja
- Izkušnje v reguliranih panogah z formalnimi zahtevami glede varnosti, zasebnosti, kakovosti, validacije, tveganj ali revizije so prednost
- Praktične izkušnje z Azure OpenAI, Azure AI Foundry, Azure Monitor, Application Insights, Microsoft Fabric ali primerljivimi oblačnimi storitvami so prednost
- Izkušnje s platformami za opazljivost ali vrednotenje AI, kot so Langfuse, LangSmith, Arize, MLflow ali enakovredna orodja, so prednost
- Izkušnje z upravljanjem več ponudnikov modelov, večoblačnih storitev ali ogrodij agentov so prednost
- Poznavanje FinOpsa, razporejanja stroškov oblaka, proračunov in merjenja ekonomike enot AI-obremenitev je prednost
- Izkušnje z opredeljevanjem ciljev ravni storitev, modelov dežurstva, upravljanja incidentov in kontrolnih točk operativne pripravljenosti za poslovne platforme so prednost
Ugodnosti
- Letni bonus s ciljnim zneskom, določenim glede na plačni razred in lokacijo, na podlagi individualne in uspešnosti družbe
- Pravica do dopusta
- Najmanj 12 tednov starševskega dopusta
- Dopust ob izgubi bližnje osebe
- Dopust za nego
- Prostovoljski dopust
- Povračilo stroškov za dobro počutje
- Programi finančnega, telesnega in duševnega zdravja
- Nagrade za obletnice službe in priznanja
- Zavarovalniški načrti za zaposlene in na nekaterih lokacijah za upravičene vzdrževane družinske člane