Intelligence artificielle : évaluer la performance des systèmes
Objectifs
Identifier les spécificités et points durs de l'évaluation des systèmes d'intelligence artificielle, notamment les nouvelles problématiques amenées par l’IA Générative
Expliquer et appliquer la méthodologie d’évaluation des système d’IA
Situer l’environnement normatif et règlementaire des systèmes d’IA
Décrire le référentiel de certification des processus en IA
Programme
Accueil et présentations
Quiz initial
Séquence 1 : Comprendre la méthodologie d’évaluation de l’intelligence artificielle
- Définition et évaluation de l’intelligence artificielle
- Principes de l'évaluation
- Métriques de l'évaluation
- Corpus de l'évaluation
- Concepts avancés
Pause déjeuner
Séquence 2 : Appliquer les principes sur des cas pratiques
- Travaux pratiques sur plusieurs cas d’utilisation : analyse des performances d’un système, rédaction du plan d’évaluation, annotations d’un corpus de test
Séquence 3 : Expliquer le panorama normatif et règlementaire
- Panorama réglementaire et normatif en intelligence artificielle en France et en Europe, notamment par rapport à l’AI Act
- Présentation du processus de certification en intelligence artificielle, en s’appuyant sur l’exemple de la certification LNE IA
?Quiz final
Évaluation du stage et conclusions
Public
- Organismes publics et privés travaillant dans le traitement de l’information ou souhaitant se former sur le sujet : statisticiens, évaluateurs, analystes
- Tout public intéressé
Niveau requis
- Aucun prérequis obligatoire
Les plus de la formation
Support de formation détaillé présentant les méthodes d’évaluation, le cadre normatif et réglementaire et le référentiel de certification de l’intelligence artificielle.
Plusieurs travaux pratiques en parallèle de l'exposé
Intervenants spécialistes dans l'évaluation des systèmes de l’intelligence artificielle
Responsable pédagogique
Chaque formation fait intervenir un spécialiste ou un expert des différents domaines abordés pendant la formation
