Over deze functie
U ontwerpt en voert de geautomatiseerde en semi-geautomatiseerde testbatterijen uit die de A.E.G.I.S.™ evaluaties voor alle zeven veiligheidspijlers mogelijk maken. Uw werk bepaalt rechtstreeks de beoordelingen waarop de markt vertrouwt.
Dit zult u doen
- Evaluatietoestellen bouwen die AI-systemen testen op hallucinaties, guardrail-fouten en privacylekkage
- Reproduceerbare testsuites en scoringspijplijnen ontwikkelen
- Rommelige real-world foutmodi omzetten in rigoureuze, herhaalbare tests
- Samenwerken met het red team om gedetecteerde exploits in blijvende controles om te zetten
Waar we naar zoeken
- Sterke technische achtergrond met ervaring in het testen van ML- of LLM-systemen
- Gemak bij het ontwerpen van tests voor systemen die niet-deterministisch gedrag vertonen
- Een rigoureuze, kritische mentaliteit en helder technisch schrijven
Waarom het belangrijk is
De systemen die u evalueert, belanden in kinderslaapkamers, ziekenhuiswerkstromen en financiële beslissingen. Uw tests zijn het enige wat tussen een veiligheidsclaim en de waarheid staat.
Placeholder vacaturebeschrijving , vervangen door de definitieve vacature.
