Évaluation

Mettre en œuvre la gouvernance de l'IA techniquement

20 questions · 15 points · Réussi à 80% (12/15)

1. Quelle mesure la différence de parité démographique (DPD) ?

2. Quelle bibliothèque Python fournit MetricFrame pour les métriques d'équité par groupe ? 2 pts

3. Pourquoi la Parité Démographique et les Chances Égalisées ne peuvent-elles pas être satisfaites simultanément ?

4. Que calcule SHAP pour une prédiction individuelle ?

5. Quand LIME est-il préférable à SHAP ?

6. Une fiche modèle contient pour un modèle de crédit à haut risque : Les métriques d'équité montrent DPD=0.07. Que signifie cela ? 2 pts

7. Que doit-on enregistrer conformément à l'Art. 12 du EU AI Act — et que ne doit-on PAS enregistrer ?

8. Quel outil est utilisé pour la détection de dérive des données en production ?

9. Qu'est-ce que MLflow suit dans le contexte de la gouvernance de l'IA ?

10. Que prescrit l'Annex IV (Documentation technique) du EU AI Act pour les systèmes à haut risque ? 2 pts

11. À quelle fréquence la documentation technique doit-elle être mise à jour selon l'Art. 11 ?

12. Un modèle de crédit montre pour les demandeurs de < 25 ans un TPR de 0,68 contre 0,91 au total. Quelle est la réaction correcte ?

13. Quelle est la différence entre SHAP pour les modèles ML classiques et les LLMs ?

14. Quelle métrique RAGAS mesure si une réponse RAG est couverte par les documents récupérés ?

15. Qu'offre la Microsoft Responsible AI Toolbox au-delà de Fairlearn ?

16. Quel outil est le meilleur choix pour la détection de dérive en production ?

17. Un agent a : accès CRM (PII), recherche Web (non fiable), envoi d'e-mails. Quel est le risque ? 2 pts

18. Que signifie le principe du moindre privilège pour les agents IA ?

19. Un agent attend 5 minutes pour l'approbation HITL. Aucune réponse humaine. Que se passe-t-il ?

20. Vous développez un système de scoring de crédit. Quelle pile technologique est entièrement conforme au EU AI Act pour les systèmes à haut risque ? 2 pts