AI QA Engineer Intern at Reduck

Chez Reduck, on construit la couche d'automatisation qui permet à des agents IA d'utiliser le web comme un humain : cliquer, remplir des formulaires, naviguer des sites complexes, de façon fiable et à grande échelle. Notre catalogue compte aujourd'hui des centaines de scripts utilisés en production par nos clients, pilotés par des agents IA.La QA chez nous ne se limite pas à « tester si un script tourne ». Le vrai sujet, c'est la fiabilité de l'IA elle-même : est-ce que l'agent a bien compris la tâche, est-ce qu'il a cliqué au bon endroit pour la bonne raison, est-ce que sa sortie est correcte, est-ce qu'une régression vient du site qui a changé ou du modèle qui déraille. On a besoin de quelqu'un qui construit les outils et les process pour répondre à ces questions en continu, pas juste qui clique sur « rejouer le test ».Tu ne seras pas un testeur manuel. Tu vas :

• Auditer et classifier les erreurs de prod à grande échelle (des milliers de runs) : script cassé vs erreur du site externe vs mauvaise décision de l'IA vs mauvais input utilisateur
• Construire des classifieurs (souvent eux-mêmes des LLM juges) qui distinguent ces catégories automatiquement, et challenger leur fiabilité (précision, biais, dérive)
• Écrire des scénarios de test end-to-end qui tournent en boucle (monitoring continu) pour détecter les régressions avant qu'un client ne les subisse
• Creuser les cas ambigus à la main quand l'automatisation ne suffit pas, et en tirer des règles réutilisables
• Documenter les patterns de bugs récurrents pour muscler nos guidelines d'authoring de scripts

Les scripts Reduck (Playwright/TypeScript) sont un outil parmi d'autres dans ce rôle, pas le rôle en entier : la partie « soft » (analyse, classification, jugement sur des cas flous, écriture de règles) compte au moins autant que la partie code.