Principal Innovation Nate Silver et le problème de la prédiction

Nate Silver et le problème de la prédiction

Quel Film Voir?
 
La cohérence est une tentatrice.Slaven Vlasic/Getty Images



Wall Street regorge toujours de Saint Graal - ces prédictions, stratégies, formules secrètes et interprétations géniales qui promettent des connaissances et des richesses d'un autre monde si vous confiance . Ils sont le plus souvent délivrés dans le monde de l'investissement par le biais d'un boîte noire - un système fermé où les entrées et les sorties sont connues, mais les travaux analytiques internes sont laissés top secret, uniquement pour la consommation des grands prêtres. Le positionnement de la boîte noire va cependant bien au-delà des marchés. Il n'est pas surprenant à une époque moderne et interconnectée que lorsque vous prenez un gars très intelligent, des rangées d'ordinateurs, des formules propriétaires et du code que seul le gars intelligent peut voir, puis ajoutez une chaîne de succès prévisions , boum, vous vous retrouvez avec une superstar ringard, faite pour les médias sociaux qui fait soudainement prédiction cool pour le prolétariat.

Nate Silver est cette mec. Considérer:

  • Il a appelé avec succès les résultats dans 49 des 50 États lors de l'élection présidentielle américaine de 2008.
  • Il a appelé avec succès les résultats dans 50 des 50 États lors de l'élection présidentielle américaine de 2012.

Silver est devenu du jour au lendemain le spécialiste des chiffres intelligents. Il est passé d'expert en statistiques de baseball à expert en statistiques politiques. Son modèle mathématique pour les élections a battu les journalistes politiques et les commentateurs à leur propre jeu, ainsi va son récit Moneyball-for-politics. En peu de temps, ses abonnés sur Twitter ont dépassé le million, son livre est devenu un best-seller et FiveThirtyEight.com est devenu omniprésent, offrant même des idées d'investissement telles que Inquiet du marché boursier? Quoi que vous fassiez, ne vendez pas.

Pourtant, pour tous ceux qui ont suivi la course présidentielle de 2016, les prédictions politiques de Silver ont frappé le mur. Au cours de l'année 2016, Silver a publié des cotes électorales quotidiennes qui ont bondi comme un chat en feu, ce qui n'est pas surprenant si votre nouveau statut de gourou vous oblige à proposer des prévisions chaque jour d'un cycle électoral pendant plus d'un an.

Je reconnais que pour nous, simples mortels, la cohérence est une tentatrice, même pour les personnes très instruites et riches. Un de mes associés, un homme d'affaires accompli, et moi avons déjeuné il y a quelques années. Au cours de notre conversation, il a mentionné qu'il avait été pris dans une escroquerie de fonds spéculatifs très connue (pas Madoff). Je lui ai demandé, avant qu'il ne puisse m'expliquer grand-chose, si ses retours étaient positifs chaque mois. Il a répondu, tous les mois. Plus tard, je l'ai googlé et j'ai découvert qu'il avait effectivement perdu plusieurs millions de dollars.

Ce désir de certitude, de prédiction, est partout dans la société moderne pour l'observateur. Le sport aussi ? Tu paries. Lors d'un match de football du lundi soir, l'un des annonceurs, Ron Jaworski, a mis les chiffres et les probabilités en perspective pour jouer au football : l'appel de jeu est une question de probabilité, pas de certitude.

Cela sonne tellement facile digérer. Mais ce n'est pas. Ce manque de certitude est si souvent un déclencheur de nos peurs les plus profondes. David Rock avait un excellent article dans Psychology Today qui résolvait l'énigme :

Certaines parties de la comptabilité et du conseil gagnent de l'argent en aidant les dirigeants à ressentir une perception de certitude croissante, grâce à la planification stratégique et aux « prévisions ». Alors que les marchés financiers de 2008 ont montré une fois de plus que l'avenir est intrinsèquement incertain, la seule chose qui est certaine, c'est que les gens paieront beaucoup d'argent pour au moins se sentir moins incertains. C'est parce que l'incertitude se sent, pour le cerveau, comme une menace pour votre vie.

C'est pourquoi Silver est devenu si populaire - il a éliminé la peur - ou du moins c'était le récit. Mais même le gars avec tous les chiffres s'est éloigné des chiffres. Il a admis dans son laborieux mea culpa, Comment j'ai agi comme un expert et foiré sur Donald Trump de ne pas utiliser ses modèles statistiques sur la candidature de Donald Trump. Au lieu de cela, il a utilisé des suppositions éclairées, qui ont fait exploser son scénario de modèle statistique qui m'a rendu si célèbre, vous pouvez maintenant faire confiance à je ne suis pas un expert typique avec des préjugés intégrés. hors de l'eau. Pire encore, la façon dont Silver avait fait son prédictions , il pouvait essentiellement dire qu'il avait raison, peu importe ce qui se passait. Pour les adeptes de Silver, ses prévisions couvertes pour 2016, son argumentable mathturbation , peu importe :

Regardez le dossier de Nate. Trump était un valeur aberrante.

Il n'y avait pas assez historique Les données.

Il obtient les plus d'entre eux à droite.

Le pourcentage de gains de Nate est tellement haute.

Ces répliques faibles illustrent un fondement défectueux dans l'approche de Silver. Michael Mauboussin, l'un des grands penseurs dans le domaine de la prise de décision face à l'incertitude, éduque : . Nous l'appelons l'effet Babe Ruth : même si Ruth a beaucoup frappé, il était l'un des plus grands frappeurs du baseball.

En d'autres termes : vous voulez penser en termes de valeur attendue. Pourtant, ce n'est pas une façon valable ou utile de penser pour une élection unique où les deux côtés imaginent littéralement la vie et la mort. Mais il n'y a aucune certitude, aucune garantie, jamais. Le monde est sur surprendre .

Et Silver laisse de côté les surprises, l'insolite et l'inattendu. Il n'a aucun moyen de les prévoir ou de les expliquer. À propos de la victoire de Trump, Silver l'a dit, c'est le développement politique le plus choquant de ma vie. Mais personne ne peut prédire les valeurs aberrantes, donc si quelqu'un comme Silver prétend qu'il le peut, faites attention. Spyros Makridakis, dans son célèbre article de 1979 Accuracy of Forecasting: An Empirical Investigation, a montré que les battements simples se compliquent et que les moyennes mobiles battent les routines économétriques tortueuses. Les moyennes mobiles auraient-elles également prédit les deux élections qui ont fait de Silver un nom connu ?

Néanmoins, les défenseurs Silver reviennent aux 49 sur 50 et 50 sur 50 en 2008 et 2012 — preuve, disent-ils alors qu'ils ignorent 2016. Mais en 2008 et 2012, quel pourcentage d'entre eux étaient difficile appels? Par exemple, la Californie est bleue quoi qu'il arrive. Il y a donc toujours un risque énorme à s'appuyer sur une stratégie qui réussit les appels faciles et s'attaque aux plus difficiles.

Ce ne sont pas de nouvelles incohérences à méditer. La théorie du marché efficace - la stratégie qui gère l'argent du monde - n'a pas non plus de solution pour la surprise (c'est-à-dire les cygnes noirs). L'argent illustre simplement l'énigme dans une discipline différente, mais avec le même problème urgent. À l'été 2016, Nassim Taleb, le père du concept du cygne noir, a lancé une critique détaillée de Silver dans la sphère publique : @FiveThirtyEight nous montre un cas d'école sur la façon d'être totalement Aucune idée sur la probabilité encore faire une entreprise en elle.

Le match en cage intellectuelle : Nassim Taleb contre Nate Silver.

Choisissez votre camp avec soin. C'est la vie ou la mort.

Michel Covel est l'auteur de cinq livres : dont le best-seller international, Suivi de tendance , et son récit d'enquête, Le TurtleTrader complet . Michael est également la voix derrière Trend Follow Radio, le hit alternatif underground qui a atteint la deuxième place sur iTunes avec 5 millions d'écoutes.

Articles Que Vous Aimerez Peut-Être :