The Good Judgement Project

The Good Judgment Project ( GJP ) är en organisation dedikerad till att "använda publikens visdom för att förutsäga världshändelser". Det skapades tillsammans av Philip E. Tetlock (författare till Superforecasting and Expert Political Judgment ), beslutsforskaren Barbara Mellers och Don Moore , alla professorer vid University of Pennsylvania .

Projektet började som en deltagare i programmet Aggregative Contingent Estimation (ACE) i Intelligence Advanced Research Projects Activity (IARPA). Den utökade sedan sin publikvisdom till kommersiella aktiviteter, rekryterade prognosmakare och samlade förutsägelserna från de mest historiskt korrekta bland dem för att förutsäga framtida händelser . Förutsägelser görs med hjälp av Brier-poäng . De bästa prognosmakarna i GJP är "uppges vara 30 % bättre än underrättelseofficerare med tillgång till faktisk hemligstämplad information."

Historia

Good Judgment Project startade i juli 2011 i samarbete med Aggregative Contingent Estimation (ACE) Program vid IARPA (IARPA-ACE). Den första tävlingen började i september 2011. GJP var en av många deltagare i IARPA-ACE-turneringen, som ställde omkring 100 till 150 frågor varje år om geopolitiska evenemang. GJP:s forskargrupp samlade ett stort antal begåvade amatörer (snarare än experter på geopolitiska ämnen), gav dem grundläggande handledning om att prognostisera bästa praxis och övervinna kognitiva fördomar och skapade en aggregeringsalgoritm för att kombinera de individuella förutsägelserna från prognosmakarna. GJP vann båda säsongerna av tävlingen och var 35 % till 72 % mer exakta än något annat forskarlag. Från och med sommaren 2013 var GJP det enda forskarteamet IARPA-ACE fortfarande finansierade och GJP-deltagare hade tillgång till det integrerade systemet för tidig varning för konflikter .

människor

Medledarna för GJP inkluderar Philip Tetlock , Barbara Mellers och Don Moore . Webbplatsen listar totalt cirka 30 teammedlemmar, inklusive medledarna samt David Budescu , Lyle Ungar , Jonathan Baron och prediction-markets-entreprenören Emile Servan-Schreiber. I den rådgivande nämnden ingick Daniel Kahneman , Robert Jervis , J. Scott Armstrong , Michael Mauboussin , Carl Spetzler och Justin Wolfers . Studien sysselsatte flera tusen personer som frivilliga prognosmakare. Med hjälp av personlighetsdragstest, träningsmetoder och strategier kunde forskarna vid GJP välja prognostiserade deltagare med mindre kognitiv fördom än genomsnittspersonen; allt eftersom prognostävlingen fortsatte kunde forskarna längre ner välja ut dessa individer i grupper av så kallade superprognosare . Den sista säsongen av GJP värvade totalt 260 superprognosare. ^{[ citat behövs ]}

Forskning

En betydande mängd forskning har utförts baserat på Good Judgment Project av personer som är involverade i det. Resultaten visar att en blandning av statistik, psykologi, träning och olika nivåer av interaktion mellan enskilda prognosmakare, genomgående gav den bästa prognosen flera år i rad.

Good Judgement Inc.

En kommersiell spin-off av Good Judgment Project började fungera på webben i juli 2015 under namnet Good Judgment Inc. Deras tjänster inkluderar prognoser i frågor av allmänt intresse, anpassade prognoser och utbildning i Good Judgments prognostekniker. Från och med september 2015 har Good Judgment Inc drivit en offentlig prognosturnering på Good Judgment Open-webbplatsen. Precis som Good Judgment Project har Good Judgment Open frågor om geopolitiska och finansiella evenemang, även om det också har frågor om amerikansk politik, underhållning och sport.

Mediebevakning

GJP har flera gånger diskuterats i The Economist . GJP har också behandlats i The New York Times , The Washington Post och Co.Exist. NPR sände ett avsnitt om The Good Judgment Project med titeln "So You Think You're Smarter Than a CIA Agent", den 2 april 2014. Financial Times publicerade en artikel om GJP den 5 september 2014. Washingtonian publicerade en artikel som nämnde GJP den 8 januari 2015. BBC och The Washington Post publicerade artiklar om GJP respektive den 20, 21 och 29 januari 2015.

The Almanac of Menlo Park publicerade en berättelse om GJP den 29 januari 2015. En artikel om GJP dök upp på Philadelphia Inquirer- portalen , Philly.com, den 4 februari 2015. Boken Wiser: Getting Beyond Groupthink to Make Groups Smarter har ett avsnitt som beskriver GJP:s inblandning i turneringen som drivs av IARPA. Psychology Today publicerade en kort artikel online som sammanfattar artikeln av Mellers, et al ., som sammanfattar GJP:s huvudsakliga resultat.

Projektet skapade en bok från 2015 av Tetlock och medförfattare av Dan Gardner, Superforecasting - The Art and Science of Prediction , som avslöjar de viktigaste resultaten av forskningen som utfördes med data från GJP. Medförfattaren Gardner hade redan publicerat en bok 2010, som citerade tidigare forskning av Tetlock som sådde GJP-ansträngningen. En bokrecension i den tryckta upplagan av Economist den 26 september 2015 diskuterar huvudkoncepten. En Wall Street Journal skildrar det som: "Den viktigaste boken om beslutsfattande sedan Daniel Kahnemans Thinking, Fast and Slow ." Harvard Business Review parade ihop den med boken How Not to Be Wrong: The Power of Mathematical Thinking av Jordan Ellenberg . Den 30 september 2015 sände NPR ett avsnitt av Colin McEnroe Show med fokus på GJP och boken Superforecasting ; gäster på programmet var Tetlock, IARPA-direktören Jason Matheny och superforecastern Elaine Rich.

Se även

externa länkar