Expliquer un modèle à un comité de direction
Moins de courbes ROC, plus d'impact métier. Le modèle le plus précis du monde ne sert à rien s'il n'est pas adopté.
Sommaire
Le piège des métriques techniques
Première présentation en comité de direction, il y a quelques années : quinze slides de courbes ROC, matrices de confusion et importances de variables. Résultat : politesse, aucune décision, et un « très intéressant, revenez avec une synthèse ». Le modèle était bon. La présentation, elle, répondait à des questions que personne dans la salle ne se posait.
Un comité ne veut pas savoir comment le modèle fonctionne. Il veut savoir : qu'est-ce que ça change, combien ça rapporte, et qu'est-ce qui peut mal tourner.
Traduire en impact métier
Chaque métrique technique a une traduction. Voici la mienne :
| On ne dit pas… | On dit… |
|---|---|
| « <span class="term" data-def="Aire sous la courbe ROC : probabilité que le modèle classe un positif au-dessus d'un négatif tiré au hasard.">AUC</span> de 0,91 » | « Sur 100 clients à risque, nous en repérons 78 — contre 41 aujourd'hui. » |
| « Précision de 85 % » | « Quand le modèle alerte, il a raison 8 fois sur 10 : vos équipes ne courent pas après des fantômes. » |
| « MAPE de 6 % » | « Les prévisions de stock se trompent en moyenne de 6 % : deux ruptures évitées par mois. » |
La règle : une métrique n'entre dans la présentation que si elle est exprimée en euros, en heures ou en clients. Les courbes ROC vivent désormais en annexe — disponibles pour qui les demande, imposées à personne.
La structure d'une présentation qui convainc
- Le problème en une phrase, avec son coût actuel. « Nous perdons 400 k€ par an de churn évitable. »
- La décision que le modèle améliore — jamais « le modèle prédit », toujours « vous pourrez désormais… ».
- La preuve sur données réelles : un backtest chiffré sur les six derniers mois, en euros.
- Les limites assumées : où le modèle se trompe, sur quelles populations, et comment on s'en protège.
- La demande explicite : budget, périmètre pilote, date de revue. Une présentation sans demande est une conférence.
Le slide qui a tout changé
Le slide le plus commenté de ma dernière présentation n'était pas une courbe : c'était un tableau « avant / après » montrant le quotidien d'un gestionnaire avec et sans le modèle. Les dirigeants n'achètent pas des prédictions — ils achètent des journées de travail transformées.
Anticiper les vraies questions
Trois questions reviennent à chaque fois, et méritent des réponses préparées :
- « Et s'il se trompe ? » — Décrire le filet de sécurité : validation humaine sur les cas à fort enjeu, seuils de confiance, possibilité de retour arrière.
- « Combien de temps avant les résultats ? » — Un pilote de 8 semaines avec des critères de succès écrits à l'avance vaut mieux qu'une promesse de transformation.
- « Ça remplace qui ? » — La réponse honnête : ça remplace des tâches, pas des personnes. Le dire clairement désamorce la moitié des résistances.
La data science ne s'arrête pas au dernier model.fit(). Elle s'arrête quand quelqu'un, quelque part, prend une meilleure décision grâce à votre travail. Cette dernière ligne droite se joue dans une salle de réunion — autant y arriver préparé.