Anyone AI
Anyone AI
Anyone AI is een op Latijns-Amerika gericht onderwijs- en talentplatform dat softwareontwikkelaars helpt carrières op te bouwen in kunstmatige intelligentie en machine learning. De programma’s op afstand, begeleid door mentoren, combineren technische opleiding, waaronder het traject Machine Learning Developer, met loopbaanvoorbereiding zoals begeleiding bij cv en LinkedIn, sollicitatiecoaching en Engelse oefening. Het bedrijf exploiteert ook een talentmarktplaats die zijn opgeleide community verbindt met werkgevers die AI-professionals zoeken, naast een op plaatsing gericht model met inkomensafhankelijke betalingen en werkgeverspartnerschappen.

Senior software engineer, SWE-Bench-evaluatie

Beoordeel open-sourcesoftwaretaken uit GitHub-issues en pull requests voor Anyone AI. Evalueer de duidelijkheid, testkwaliteit, reproduceerbaarheid, complexiteit en geschiktheid als benchmark.

Beschrijving

  • Beoordeel software-engineeringtaken op basis van echte GitHub-issues en pull requests.
  • Controleer of taakbeschrijvingen en succescriteria duidelijk en volledig zijn.
  • Beoordeel unit tests op juistheid, dekking en robuustheid.
  • Spoor onbetrouwbare tests, ontbrekende afhankelijkheden, versieverschillen en omgevingsproblemen op.
  • Controleer of taken in verschillende omgevingen consistent kunnen worden gereproduceerd.
  • Beoordeel de praktische moeilijkheidsgraad en technische complexiteit van taken.
  • Adviseer of taken moeten worden geaccepteerd, aangepast of verwijderd.
  • Beoordeel bugfixes en functionaliteitswerk, waaronder het instellen van repositories, afhankelijkheidsbeheer, wijzigingen in meerdere bestanden en modules en de algehele technische kwaliteit.

Vereisten

  • Minimaal drie jaar professionele ervaring in software-engineering.
  • Ruime ervaring met grote codebases die uit meerdere bestanden bestaan.
  • Ervaring met pull requests beoordelen, problemen debuggen en productiesoftware onderhouden.
  • Goede kennis van unit testing en testdekking.
  • Vermogen om te beoordelen of tests een oplossing correct valideren zonder de implementatiemogelijkheden onnodig te beperken.
  • Ervaring met afhankelijkheidsbeheer, omgevingen configureren en reproduceerbaarheid waarborgen.
  • Uitstekende beheersing van Git en op GitHub gebaseerde ontwikkelprocessen.
  • Vermogen om complexe technische problemen te analyseren en heldere schriftelijke feedback te geven.
  • Bijdragen aan of onderhoud van open-sourceprojecten is een pré.
  • Ervaring met SWE-Bench, SWE-Bench Verified of vergelijkbare programmeerbenchmarks is een pré.
  • Ervaring met grote Python-open-sourceprojecten, zoals Django, Flask, scikit-learn, SymPy, matplotlib, requests of pytest, is een pré.
  • Ervaring met Docker, CI/CD, pip, conda of het vastzetten van afhankelijkheden is een pré.
  • Kennis van testfixtures, testisolatie of property-based testing is een pré.
  • Ervaring met het ontwerpen van technische assessments of het beoordelen van programmeeropdrachten is een pré.
  • Ervaring met AI/ML-evaluatie, datacuratie, RLHF of benchmarkontwikkeling is een pré.

Voordelen

  • Op afstand werken.
  • Deeltijdse, projectmatige adviesopdracht.

Gerelateerde vacatures

TÜV TRUST IT Unternehmensgruppe TÜV AUSTRIA

Junior securityauditor elektronische identiteiten en vertrouwensdiensten

TÜV TRUST IT Unternehmensgruppe TÜV AUSTRIA

Adviseer over en audit elektronische identiteiten en vertrouwensdiensten voor het certificeringswerk rond informatiebeveiliging van TÜV. Beoordeel beveiligingsmaatregelen, rapporteer bevindingen en coördineer complexe complianceprojecten.

Openen