Gramian Consulting je svetovalno podjetje, ki daje prednost delu na daljavo ter se osredotoča na inženirske, podatkovne in AI talente. Organizacijam pomaga širiti tehnične zmogljivosti z dopolnjevanjem ekip s talenti, zaposlovanjem, namenskimi ekipami in upravljanjem pogodbenikov. Ponuja tudi storitve, kot so usposabljanje in fino prilagajanje velikih jezikovnih modelov, AI-agentov in pomočnikov, MLOps ter infrastruktura AI. Posameznikom pomaga pri razvoju kariere z mentorskimi in izobraževalnimi programi, ki zajemajo pripravljenost na kariero, pripravo na razgovore in orientacijo na mednarodnem trgu. Njeno delo združuje praktične izkušnje iz inženirstva in zaposlovanja, da lahko strankam pomaga graditi tehnične ekipe in uporabljati AI za poslovne potrebe.
Pogodbeni izvajalec za vrednotenje umetne inteligence v znanstveni kemiji in Pythonu
Pogodbeno delo za pripravo kemijskih nalog v Pythonu, validacijskih testov in strogih podatkovnih zbirk, ki se uporabljajo za učenje in vrednotenje naprednih modelov umetne inteligence pri podjetju Gramian Consulting.
Opis
- Ustvarjati naloge s področja znanstvenega programiranja z osrednjim kemijskim problemom in vsaj tremi logično povezanimi podproblemi, ki se postopoma povečujejo po strukturiranosti in zahtevnosti.
- Izdelati preverjene referenčne rešitve v Pythonu z obsežnim pokritjem z enotskimi testi.
- Načrtovati ciljne testne primere, ki ločijo pravilne odgovore, ustvarjene z umetno inteligenco, od nepravilnih.
- Izvajati preverjanje kakovosti v osrednji platformi za naloge, vključno s strukturnim preverjanjem na ravni 1 in merili kakovosti na ravni 2.
- Izboljševati zahteve nalog, implementacije in testne primere na podlagi povratnih informacij o kakovosti.
- Prilagajati naloge tako, da izpolnjujejo standarde vrednotenja Pass@K za GPT, Gemini, Nemotron in druge ocenjevalce LLM.
- Ohranjati znanstveno natančnost, deterministično vedenje, jasno opredelitev problemov in projektne zahteve glede kakovosti.
- Oddajati kakovostne prve različice, zmanjševati potrebo po ponovnem delu in dosledno stremeti k odobritvi na ravni L1.
- Udeleževati se pregledov, srečanj za povratne informacije in projektnih sestankov v zahtevanih urah prekrivanja.
Zahteve
- Magisterij ali doktorat iz kemije.
- Dobro znanje programiranja v Pythonu in praktične izkušnje z znanstvenim računalništvom.
- Izkušnje z znanstvenimi orodji za Python, kot so NumPy, SciPy, SymPy ali primerljive domensko specifične knjižnice.
- Sposobnost opredelitve strogih znanstvenih problemov z izrecno določenimi omejitvami in pričakovanimi izhodi.
- Izkušnje z implementacijo znanstvenih rešitev z enotskimi testi in determinističnimi rezultati.
- Izkušnje z označevanjem podatkov za umetno inteligenco, znanstvenim raziskovanjem ali tehničnim znanstvenim pisanjem.
- Poznavanje sistemov za vrednotenje LLM, programerskih primerjalnih testov ali ocenjevanja kode, ki jo ustvari umetna inteligenca.
- Objavljene raziskave ali izkušnje z akademskimi projekti na področju kemije ali drugega področja STEM.