Optimiser et évaluer les performances de vos modèles

Développement & Modélisation IA
Durée: 3 jours
Paris
AI FORGE
Sylvain Lapeyrade
Expert en Intelligence Artificielle et en Data Science, avec une solide expérience en enseignement, en recherche et en développement. Il a mené des travaux de recherche comparant les approches d’IA classiques aux méthodes plus récentes basées sur le Machine Learning. Il s’est spécialisé dans l’IA générative ainsi que dans le déploiement de modèles en cloud avec le MLOps. voir plus
1500€ HT

Référence: IA FORGE005

Prochaines sessions
Prochaine date à venir

Objectifs

  • Identifier les métriques adaptées à chaque type de modèle
    (accuracy, recall, F1-score, etc.).
  • Ajuster les hyperparamètres à l’aide de méthodes d’optimisation.
  • Utiliser la validation croisée pour évaluer la robustesse des modèles.
  • Comparer plusieurs modèles et interpréter les résultats.
  • Mettre en place un tableau de suivi des performances.

Programme

 

1. Évaluation des performances d’un modèle IA

  • Revoir les principales métriques (accuracy, recall, F1-score, etc.).
  • Lire et interpréter les matrices de confusion et courbes ROC.
  • Mise en pratique : évaluation d’un modèle de classification sur un dataset réel.

2. Hyperparamètres et robustesse

  • Découvrir les méthodes de recherche d’hyperparamètres (grid search, random search).
  • Mettre en œuvre la validation croisée pour tester la robustesse.
  • Mise en pratique : optimisation d’un modèle existant et mesure des gains de performance.

3. Comparaison et sélection des modèles

  • Comparer plusieurs modèles selon leurs métriques et leur stabilité.
  • Identifier le sur-apprentissage et ajuster les paramètres.
  • Mise en pratique : benchmark complet de plusieurs algorithmes.

4. Documentation et suivi des performances

  • Mettre en place un tableau de bord de suivi des métriques.
  • Tracer les expériences pour assurer la reproductibilité.
  • Mise en pratique : génération automatique d’un rapport d’évaluation de modèle.

Évaluation

Le formateur évalue la progression des participants tout au long de la formation
à travers des échanges, QCM et études de cas. Un test de positionnement ou
une activité de synthèse permet d’évaluer les acquis en début et fin de session

icon
Des experts

Parmi les meilleurs experts RH pour partager, transmettre et échanger sur les sujets clés de votre métier

icon
Des méthodes actives

Une pédagogie centrée sur la pratique, les échanges et les retours d’expériences

icon
Un réseau RH

Des échanges collaboratifs et actifs au service d’un apprentissage efficace
8 participants max. par session

A votre rythme

Des formats de 2h à un an pour permettre à chacun de trouver le rythme et le format le plus adapté

Nos formations à la une