L’art d’avoir tort

L’art d’avoir tortCHRISTOPHE HERAL @CHRISHERAL – 26/11/2015AGILE TOUR TOULOUSE

Qui suis-je ? Consultant .NET à Bordeaux

Agiliste

Et surtout :

Artisan logiciel

Cabinet de conseil spécialisé dans la transformation digitale des entreprises.

Initialement à Bordeaux

Développement en cours sur Toulouse et Paris

Sur une idée originale de Laurent Bossavit@MORENDIL

Qui fait des estimations ?

Qui réussit ses estimations ?

Je déteste avoir tort…

…donc je déteste les estimations

Des chiffres erronés sont le support de décisions importantes…

Suis-je incompétent?Mon équipe est-elle incompétente ?

Mes managers sont-ils incompétents ?

Etude de Philip TetlockThe Good Judgment Project Années 80 : 284 experts de divers domaines font des pronostics sur des évènements à venir En 2005 : résultat des prévisions Les prévisions des experts ne sont pas meilleures qu’un modèle statistique…

Les experts donnent de meilleures prédictions dans un domaine qui n’est pas le leur…

Essayons d’estimer

Exercice de calibrationQUESTIONS DE CULTURE GÉNÉRALE

Enoncé 10 questions portant sur des valeurs numériques Répondre à chaque question en indiquant une fourchette (limite basse – limite haute). Il faut être certain à 90% environ que la bonne réponse se situe dans l’intervalle.

ExempleCombien de naissances y a-t-il eu en France en 2014 ?

Ma réponse : Entre 500 000 et 1 million

La vraie réponse : 781 000 -> J’ai bon !

Maintenant c’est à vous !

Exercice de calibrationEN GROUPE

Les réponses !

Sommes-nous bien calibrés ?QUI A OBTENU 9/10 ? 10/10 OU 8/10 ?

Les estimations en groupe sont-elles meilleures ?ET LA MOYENNE ? ET LA MÉDIANE ?

Exercice de certitude

Enoncé 10 phrases Pour chaque phrase, indiquer son niveau de confiance. 100%: je suis certain que c'est vrai 0% : je suis certain que c'est faux (réponse par tranche de 10%) -> Pénalité en fonction du % et de la réponse

ExemplePhrase : Sydney est la capitale de l’Australie.

Mon indice de confiance : 10%

La réponse : Faux (Canberra) -> 2 points

Maintenant c’est à vous !

Les réponses !

Calcul du score de BrierPLUS LE SCORE EST ÉLEVÉ, PLUS IL EST MAUVAIS…

Table de calculSI LA PROPOSITION ÉTAIT VRAIE

Certitude Score0% 200

10% 16220% 12830% 9840% 7250% 5060% 3270% 1880% 890% 2

100% 0

SI LA PROPOSITION ÉTAIT FAUSSECertitude Score

100% 20090% 16280% 12870% 9860% 7250% 5040% 3230% 1820% 810% 20% 0

Quel est votre score ?

Solutions ?

Arrêter d’estimer ?UN MODÈLE STATISTIQUE N’EST-IL PAS SUFFISANT ET MOINS COUTEUX ?

Arrêter d’estimer ? - Se base sur des données réelles et non des estimations - Nécessite d’avoir collecté des données pour définir le modèle - Constater le temps de traversée des éléments (de taille équivalentes)

- Olivier Azeau : « ça prendra combien de temps ? » - Dimitar Bakardzhiev : « #noestimates Project Planning Using Monte Carlo Simulation »

- Vasco Duarte : « No estimates - 10 new principles for testing »

S’entraîner…DOMPTER LES ESTIMATIONS POUR AVOIR MOINS SOUVENT TORT

S’entraîner… Marchés prédictifs : https://hypermind.com/hypermind/app.html

En anglais : http://www.predictionbook.com https://www.gjopen.com

Merci à vous !ET À ARTHUR SCHOPENHAUER ET SES STRATAGÈMES…