The Good Judgment Project
A Good Judgment Project (GJP) é uma organização dedicada a "aproveitar a sabedoria da multidão para prever eventos mundiais". Foi co-criada por Philip E. Tetlock (autor de Superforecasting: The Art and Science of Prediction e Expert Political Judgment), a cientista de decisões Barbara Mellers e Don Moore, todos professores da Universidade da Pensilvânia .[1][2][3]
O projeto começou como participante do programa Aggregative Contingent Estimation (ACE) da Intelligence Advanced Research Projects Activity (IARPA).[4][5] Em seguida, estendeu a sua sabedoria coletiva às atividades comerciais, recrutando previsores e agregando as previsões dos mais historicamente precisos entre eles para prever eventos futuros .[6][7] As previsões são pontuadas usando pontuações de Brier.[8] Os principais previsores da GJP são "supostamente 30% melhores do que os oficiais de inteligência com acesso a informações classificadas reais".[9]
História
[editar | editar código]A Good Judgment Project começou em julho de 2011 em colaboração com o Aggregative Contingent Estimation (ACE) Program no IARPA (IARPA-ACE).[10] O primeiro concurso começou em setembro de 2011.[11] A GJP foi um dos muitos participantes no torneio IARPA-ACE, que apresentou cerca de 100 a 150 perguntas a cada ano sobre eventos geopolíticos. A equipe de investigação da GJP reuniu um grande número de amadores talentosos (em vez de especialistas em assuntos geopolíticos), deu-lhes tutoriais básicos sobre as melhores práticas de previsão e superação de vieses cognitivos e criou um algoritmo de agregação para combinar as previsões individuais dos previsores.[5][12] A GJP venceu as duas temporadas do concurso e foi 35% a 72% mais precisa do que qualquer outra equipa de investigação.[13] A partir do verão de 2013, a GJP foi a única equipa de investigação que o IARPA-ACE ainda financiava, e os participantes da GJP tiveram acesso ao Integrated Crisis Early Warning System.[8]
Pessoas
[editar | editar código]Os co-líderes do GJP incluem Philip Tetlock, Barbara Mellers e Don Moore.[1] O website lista um total de cerca de 30 membros da equipa, incluindo os co-líderes, bem como David Budescu, Lyle Ungar, Jonathan Baron e o empreendedor de mercados de previsão Emile Servan-Schreiber.[14] O conselho consultivo incluiu Daniel Kahneman, Robert Jervis, J. Scott Armstrong, Michael Mauboussin, Carl Spetzler e Justin Wolfers.[15] O estudo empregou vários milhares de pessoas como previsores voluntários.[12] Usando testes de traços de personalidade, métodos de treinamento e estratégias, os investigadores da GJP foram capazes de selecionar participantes de previsão com menos viés cognitivo do que a pessoa média; conforme o concurso de previsão continuava, os investigadores foram capazes de selecionar ainda mais estes indivíduos em grupos dos chamados superprevisores. A última temporada da GJP alistou um total de 260 superprevisores.[ <span title="This claim needs references to reliable sources. (February 2022)">citação necessária</span> ]
Investigação
[editar | editar código]Uma quantidade significativa de investigação foi conduzida com base no Good Judgment Project pelas pessoas nela envolvidas. Os resultados mostram que a utilização de uma mistura de estatísticas, psicologia, treinamento e vários níveis de interação entre os previsores individuais produziu consistentemente a melhor previsão por vários anos consecutivos.[12]
Good Judgment Inc.
[editar | editar código]Um spin-off comercial do Good Judgment Project começou a operar na web em julho de 2015 sob o nome Good Judgment Inc. Os seus serviços incluem previsões sobre questões de interesse geral, previsões personalizadas e treinamento nas técnicas de previsão da Good Judgment.[16] A partir de setembro de 2015, a Good Judgment Inc tem vindo a realizar um torneio público de previsão no website Good Judgment Open. Assim como o Good Judgment Project, o Good Judgment Open tem perguntas sobre eventos geopolíticos e financeiros, embora também tenha perguntas sobre política, entretenimento e desportos dos EUA.[17][18]
Cobertura dos média
[editar | editar código]A GJP tem sido discutia repetidamente no The Economist.[11][19][20][21] A GJP também foi abordada no The New York Times,[3] The Washington Post,[5][22][23] e Co.Exist.[24] A NPR exibiu um segmento sobre a The Good Judgment Project com o título "So You Think You're Smarter Than a CIA Agent" (em português: "Então você acha que é mais inteligente do que um agente da CIA"), em 2 de abril de 2014.[9] O Financial Times publicou um artigo sobre a GJP em 5 de setembro de 2014.[25] A Washingtonian publicou um artigo que mencionou a GJP em 8 de janeiro de 2015.[26] A BBC e o The Washington Post publicaram artigos sobre a GJP, respetivamente, em 20, 21 e 29 de janeiro de 2015.[27][28][29]
The Almanac of Menlo Park publicou uma história sobre a GJP em 29 de janeiro de 2015.[30] Um artigo sobre a GJP apareceu no portal do Philadelphia Inquirer, Philly.com, em 4 de fevereiro de 2015.[31] O livro Wiser: Getting Beyond Groupthink to Make Groups Smarter tem uma seção detalhando o envolvimento da GJP no torneio organizado pela IARPA.[32] A Psychology Today publicou online um pequeno artigo resumindo o artigo de Mellers, et al ., que resume as principais descobertas da GJP.[33][34]
O projeto gerou um livro de 2015 de Tetlock e com coautoria de Dan Gardner, Superforecasting - The Art and Science of Prediction, que divulga as principais descobertas da investigação conduzida com os dados da GJP.[35] O coautor Gardner já havia publicado um livro em 2010, que citava investigações anteriores de Tetlock que semearam o esforço da GJP.[36] Uma resenha do livro na edição impressa de 26 de setembro de 2015 do Economist discute os principais conceitos.[37] Um artigo do Wall Street Journal descreve-o como: "O livro mais importante sobre tomada de decisão desde Thinking, Fast and Slow, de Daniel Kahneman".[38] A Harvard Business Review combinou-o com o livro How Not to Be Wrong: The Power of Mathematical Thinking, de Jordan Ellenberg .[39] Em 30 de setembro de 2015, a NPR exibiu um episódio do Colin McEnroe Show centrado na GJP e no livro Superforecasting; os convidados do programa foram Tetlock, o diretor da IARPA Jason Matheny e a superprevisora Elaine Rich.[40]
Ver também
[editar | editar código]- Aggregative Contingent Estimation Program
- Intelligence Advanced Research Projects Activity
- Sabedoria da multidão
- SciCast
Referências
- ↑ a b «Welcome to the Good Judgment Project». The Good Judgment Project. Consultado em 5 de maio de 2014
- ↑ «Who's who in the Good Judgment Project». The Good Judgment Project. 27 de julho de 2011. Consultado em 5 de maio de 2014
- ↑ a b Brooks, David (21 de março de 2013). «Forecasting Fox». New York Times. Consultado em 5 de maio de 2014
- ↑ «The Project». The Good Judgment Project. Consultado em 5 de maio de 2014. Arquivado do original em 6 de maio de 2014
- ↑ a b c Horowitz, Michael (26 de novembro de 2013). «Good judgment in forecasting international affairs (and an invitation for season 3)». Washington Post. Consultado em 5 de maio de 2014
- ↑ «About Superforecasting | Unprecedented Accurate & Precise Forecasting». Good Judgment (em inglês). Consultado em 17 de fevereiro de 2022
- ↑ Matthews, Dylan (16 de fevereiro de 2022). «How can we prevent major conflicts like a Russia-Ukraine war?». Vox (em inglês). Consultado em 17 de fevereiro de 2022
- ↑ a b Dickenson, Matt (12 de novembro de 2013). «Prediction and Good Judgment: Can ICEWS Inform Forecasts?». Predictive Heuristics. Consultado em 24 de maio de 2014
- ↑ a b Spiegel, Alix. «So You Think You're Smarter Than A CIA Agent». NPR.org. Consultado em 18 de agosto de 2014
- ↑ «The idea behind the Good Judgment Project». The Good Judgment Project. 27 de julho de 2011. Consultado em 5 de maio de 2014. Arquivado do original em 6 de maio de 2014
- ↑ a b «The perils of prediction: Adventures in punditry». The Economist. 2 de setembro de 2011. Consultado em 6 de maio de 2014
- ↑ a b c Mellers, Barbara; Ungar, Lyle; Baron, Jonathan; Ramos, Jaime; Gurcay, Burcu; Fincher, Katrina; Scott, Sydney E.; Moore, Don; Atanasov, Pavel (1 de maio de 2014). «Psychological strategies for winning a geopolitical forecasting tournament». Psychological Science. 25 (5): 1106–1115. ISSN 1467-9280. PMID 24659192. doi:10.1177/0956797614524255
- ↑ «The first championship season». Good Judgment (em inglês). Consultado em 17 de fevereiro de 2022
- ↑ «Team». The Good Judgment Project. Consultado em 5 de maio de 2014
- ↑ «Freakonomics». Sign Up for a Prediction Tournament. 4 de agosto de 2011
- ↑ Brody, Liz (1 de janeiro de 2022). «Meet the Elite Team of Superforecasters Who Have Turned Future-Gazing Into a Science». Entrepreneur
- ↑ Gossett, Stephen (6 de agosto de 2020). «How the Good Judgment Project's Superforecasters Use Data to Make Predictions». builtin.com (em inglês). Consultado em 7 de junho de 2022
- ↑ «Good Judgment® Open». www.gjopen.com. Consultado em 17 de fevereiro de 2022
- ↑ «Monetary policy: How likely is deflation?». The Economist. 13 de setembro de 2011. Consultado em 6 de maio de 2014
- ↑ «International: Who's good at forecasts? How to sort the best from the rest». The Economist. 18 de novembro de 2013. Consultado em 6 de maio de 2014
- ↑ «The experts' best bets». The Economist. 10 de novembro de 2021. Consultado em 7 de junho de 2022
- ↑ Ignatius, David (1 de novembro de 2013). «More chatter than needed». Washington Post. Consultado em 6 de maio de 2014
- ↑ Bender, Jeremy (3 de abril de 2014). «Huge Experiment Finds Regular Folks Predict World Events Better Than CIA Agents». Business Insider. Consultado em 6 de maio de 2014
- ↑ «The Surprising Accuracy Of Crowdsourced Predictions About The Future. Do you know whether Turkey will get a new constitution? It turns out you do: A group of well-informed citizens can predict future events more often than any foreign policy expert or CIA analyst.». Co.exist. 21 de abril de 2014. Consultado em 6 de maio de 2014
- ↑ Harford, Tim (5 de setembro de 2014). «How to see into the future». Financial Times. ISSN 0307-1766. Consultado em 5 de setembro de 2014
- ↑ Hamilton, Keegan (8 de janeiro de 2015). «How US Agencies Are Using the Web to Pick Our Brains». Washingtonian. Consultado em 24 de janeiro de 2015
- ↑ Burton, Tara (20 de janeiro de 2015). «Could you be a 'super-forecaster'?». BBC Future. Consultado em 21 de janeiro de 2015
- ↑ Jensen, Nathan (21 de janeiro de 2015). «Experts see a Republican Senate and fast-track authority for Obama as keys to new trade agreements». The Washington Post. ISSN 0190-8286. Consultado em 21 de janeiro de 2015
- ↑ Mellers, Barbara; Michael C. Horowitz (29 de janeiro de 2015). «Does anyone make accurate geopolitical predictions?». The Washington Post. ISSN 0190-8286. Consultado em 30 de janeiro de 2015
- ↑ «Feature story: Bob Sawyer of Woodside discovers his latent talent in forecasting». Consultado em 17 de março de 2015
- ↑ Dribben, Melissa; Inquirer Staff Writer (4 de fevereiro de 2015). «Fortune telling: Crowds surpass pundits». Philly.com. Consultado em 6 de fevereiro de 2015
- ↑ Sunstein, Cass R.; Hastie, Reid (23 de dezembro de 2014). Wiser: Getting Beyond Groupthink to Make Groups Smarter. [S.l.]: Harvard Business Review Press. ISBN 978-1-4221-2299-0
- ↑ «Who's Best at Predicting the Future? (and How to Get Better)». Psychology Today. Consultado em 11 de julho de 2015
- ↑ Mellers, Barbara; Stone, Eric; Murray, Terry; Minster, Angela; Rohrbaugh, Nick; Bishop, Michael; Chen, Eva; Baker, Joshua; Hou, Yuan (1 de maio de 2015). «Identifying and Cultivating Superforecasters as a Method of Improving Probabilistic Predictions». Perspectives on Psychological Science. 10 (3): 267–281. ISSN 1745-6916. PMID 25987508. doi:10.1177/1745691615577794
- ↑ Tetlock, Philip E.; Gardner, Dan (29 de setembro de 2015). Superforecasting - The Art and Science of Prediction. New York: Crown. ISBN 978-0-8041-3669-3
- ↑ Gardner, Dan (12 de outubro de 2010). Future Babble: Why Expert Predictions Fail - and Why We Believe Them Anyway. [S.l.]: McClelland & Stewart
- ↑ «Unclouded vision». The Economist. 26 de setembro de 2015. ISSN 0013-0613. Consultado em 24 de setembro de 2015
- ↑ Zweig, Jason. «Can You See the Future? Probably Better Than Professional Forecasters». The Wall Street Journal. Consultado em 25 de setembro de 2015
- ↑ Frick, Walter. «Question Certainty». Harvard Business Review. Consultado em 26 de setembro de 2015
- ↑ McEnroe, Colin; Wolf, Chion. «The Colin McEnroe Show». WNPR. National Public Radio. Consultado em 1 de outubro de 2015