QA AI Engineer

Le/la consultant(e) aura pour responsabilités :

• Agir en quality gatekeeper pour les nouvelles fonctionnalités, changements de plateforme et intégrations, en garantissant la production readiness à l'échelle.
• Identifier et mitiger les risques de scalabilité, opérationnels et de valeur via l'automatisation, en prévenant la fragmentation, la re-customisation et la dette technique.
• Définir et appliquer les standards qualité et les guardrails automatisés.
• Concevoir et documenter des scénarios de test et cas de test basés sur les règles métier et les données de référence approuvées.
• Évaluer manuellement les outputs générés par l'IA (accuracy, consistance, complétude, hallucinations, statements non supportés).
• Produire les résultats de tests de régression pour les nouvelles fonctionnalités, changements de plateforme et mises à jour de configuration IA.
• Documenter clairement les défauts avec preuves, sévérité, étapes de reproduction et impact métier.
• Produire des rapports de test traçables supportant les décisions de release-readiness.
• Maintenir un ensemble représentatif de test assets et de résultats attendus pour les évaluations répétées.
• Collaborer avec les parties prenantes métier, MLR et techniques tout au long du cycle de test.

Diplômé(e) d’un Bac+5 en école d'ingénieur ou équivalent universitaire avec une spécialisation en informatique, ou justifiant d'une expérience significative équivalente.

Expérience : Minimum 8 ans d'expérience en QA / Test Engineering. Expérience avérée en test de systèmes complexes, idéalement intégrant des composants IA ou LLM.

Compétences requises :

• Must have : tests manuels et exploratoires, conception de cas de test sur règles métier complexes, évaluation d'outputs IA vs données de référence, tests de régression, documentation et tracking systématique des outcomes, identification d'hallucinations / résultats non supportés, connaissance des plateformes web et intégrations (APIs, PIM, DAM, CDP), collaboration multi-parties prenantes (métier, MLR, technique)
• Nice to have : test de systèmes IA / LLM, compréhension des hallucinations et non-déterminisme LLM, test de workflows compliance / légaux / réglementés, Playwright ou framework d'automatisation équivalent, Azure AI Foundry ou plateforme IA similaire, test de assets marketing et documents
• Anglais courant indispensable.

Looking forward to hearing from you !