À propos du rôle
Vous concevrez et piloterez les batteries de tests automatisés et semi-automatisés qui alimentent les évaluations A.E.G.I.S.™ dans l'ensemble des sept piliers de sécurité. Votre travail détermine directement les notes sur lesquelles le marché s'appuie.
Ce que vous ferez
- Concevoir des harnesses d'évaluation qui testent les systèmes d'IA pour détecter les hallucinations, les défaillances de guardrails et les fuites de données
- Développer des suites de tests reproductibles et des pipelines de notation
- Transformer les modes de défaillance réels et complexes en tests rigoureux et reproductibles
- Collaborer avec l'équipe de red team pour convertir les exploits découverts en contrôles permanents
Ce que nous recherchons
- Une solide formation en ingénierie avec expérience des tests de systèmes ML ou LLM
- Aise à concevoir des tests pour des systèmes qui se comportent de manière non-déterministe
- Un état d'esprit rigoureux, critique et une rédaction technique claire
Pourquoi cela compte
Les systèmes que vous évaluez sont destinés aux chambres d'enfants, aux workflows hospitaliers et aux décisions financières. Vos tests sont ce qui sépare une affirmation de sécurité de la réalité.
Description de poste provisoire - à remplacer par l'offre finale.
