ISTQB® Certified Tester – Generative AI (CT-GenAI) – Examen

Catégories : Examen, IA, Testing & Qualité
Partager

À propos du cours

Certification ISTQB

Testing with Generative AI (CT-GenAI)

Code officiel : CT-GenAI

40questions
60 mindurée
65 %score requis
+200 candidats formés

Choisissez un abonnement (9,90 €/mois, 23 certifications) et accédez immédiatement à l'examen blanc complet, ainsi qu'à ces 4 outils d'entraînement supplémentaires :

Glossaire — 25 termes clés

Accuracy (précision globale)Métrique de performance d'un classifieur calculée comme le rapport entre les prédictions correctes (VP + VN) et le nombre total d'observations. Elle mesure la proportion de cas correctement classifiés.
AdaptabilitéCaractéristique de qualité spécifique aux systèmes IA désignant la capacité du système à ajuster son comportement à de nouveaux environnements ou conditions sans nécessiter un réentraînement complet.
Apprentissage fédéréTechnique de machine learning où l'entraînement est distribué sur des appareils locaux sans centraliser les données brutes, visant à préserver la confidentialité des données individuelles.
Apprentissage par renforcementParadigme d'apprentissage automatique où un agent apprend en interagissant avec son environnement et en recevant des signaux de récompense ou de pénalité pour ses actions.
Voir les 21 autres termes →

Étude de cas — 5 scénarios inclus

Détection de fraude bancaire : biais, métriques et tests adversariaux

1,2 millionVolume de transactions journalières traitées0,3 %Taux de fraude observé en production (historique)6 semainesDélai avant mise en production480 €Coût moyen d'une fraude non détectée (remboursement)

FinSecure est une banque retail européenne qui déploie un nouveau système ML de détection de fraudes sur les transactions par carte bancaire. Le modèle, basé sur un réseau de neurones profond, a été entraîné sur 3 ans de données historiques de transactions. L'équipe qualité est chargée de valider le système avant sa mise en production prévue dans 6 semaines. Le responsable de la conformité a exprimé des inquiétudes concernant des biais potentiels liés à la géographie des clients et à leur catégorie socio-professionnelle, car les données historiques reflètent une période de forte fraude concentrée dans certaines régions. Le système doit prendre des décisions automatiques pour bloquer ou autoriser les transactions en temps réel. En cas de faux positif (transaction légitime bloquée), le client est immédiatement contacté pour vérification. En cas de faux négatif (fraude non détectée), la banque supporte le remboursement intégral. La direction a clairement indiqué que la priorité absolue est de minimiser les faux négatifs, tout en maintenant un taux de faux positifs acceptable pour ne pas surcharger le service client. L'équipe de test dispose d'un accès complet aux données d'entraînement, aux logs du modèle et à sa documentation technique. Elle doit également préparer le système à résister à des tentatives de contournement, notamment des attaques où des fraudeurs modifieraient légèrement les caractéristiques de leurs transactions pour éviter la détection.

Voir les questions d'analyse et réponses modèles →

Texte à trous — 25 phrases incluses

Sur 200 observations, un classifieur de spam qui identifie correctement 150 messages légitimes et 30 spams atteint une _____ de 90%, mais cette valeur masque ses difficultés à détecter les spams rares.

Le cahier des charges du nouveau système de navigation autonome impose d'évaluer son _____ en le déployant dans des environnements urbains inédits sans procéder à un réentraînement préalable.

Pour entraîner un modèle de détection de maladies rares à partir de dossiers médicaux répartis dans plusieurs hôpitaux sans transférer de données sensibles vers un serveur central, l'équipe a recours à l'_____.

Voir les réponses et le reste des phrases →

Flashcards — 86 cartes incluses

Question

Lequel des éléments suivants indique le plus probablement un problème de sous-apprentissage (underfitting) dans un modèle ML ?

Appuyer pour voir la réponse ›
Réponse

Le modèle est imprécis sur des données similaires aux données d'entraînement

Question

Lequel des éléments suivants n'est PAS une entrée d'une fonction d'activation dans un réseau de neurones ?

Appuyer pour voir la réponse ›
Réponse

Les valeurs d'activation de la couche courante

Voir les 84 autres cartes →
Commencer maintenant

Vous préférez un accès ponctuel sans abonnement ? Découvrir le Kit Révision PDF de cette certification →

Préparez l’examen blanc ISTQB CT-GenAI — Testing with Generative AI

L’examen blanc ISTQB Certified Tester Generative AI CT-GenAI est la certification ISTQB dédiée au test des systèmes basés sur l’intelligence artificielle générative. Elle valide la compréhension des spécificités du test IA : comportements non-déterministes, hallucinations, biais, prompt engineering et risques associés aux LLM. L’examen blanc ISTQB CT-GenAI est la certification de référence pour les testeurs qui travaillent avec des systèmes d’IA générative.

Le programme CT-GenAI couvre les fondamentaux de l’IA générative (LLM, prompts, RAG, fine-tuning), les risques spécifiques aux systèmes IA (biais, hallucinations, sécurité, confidentialité), les stratégies de test adaptées (test de robustesse, d’équité, de performance des prompts), et la gouvernance responsable de l’IA.

Pour réussir l’examen blanc ISTQB Certified Tester Generative AI CT-GenAI, il faut obtenir 65 % sur 40 questions en 60 minutes. Nos questions sont traduites en français et accompagnées de corrigés détaillés expliquant les concepts IA appliqués au test. Préparez également votre examen blanc ISTQB Foundation V4.0, prérequis recommandé pour CT-GenAI.

Contenu du cours

ISTQB® Certified Tester – Generative AI (CT-GenAI) – Examen

  • Présentation de l’examen
  • Fiche mémo
  • Modalités d’examens
  • Documents
  • ISTQB CT-GenAI — Examen 1 (66 questions)
  • ISTQB CT-GenAI — Examen 2 (65 questions)
  • Flashcards — Révision express
  • Glossaire — Termes clés
  • Études de cas — Mise en situation
  • Texte à trous — Exercice de complétion
Retour en haut