Pesquisador da Microsoft previu corretamente 21 das 24 categorias no Oscar

David Rothschild, economista da Microsoft Research New York City, previu os vencedores do Oscar em 2013 usando vários dados disponíveis na web. Ele foi preciso em sua previsão em 19 das 24 categorias do Oscar. Para o Oscar 2014, ele postou suas previsões para 24 categorias semanas atrás. O evento do Oscar 2014 acabou de terminar e qual é sua precisão de previsão este ano? Ele previu corretamente 21 das 24 categorias, o que é uma grande melhoria em relação ao ano passado. As três categorias que ele errou foram Melhor Curta de Animação, Melhor Documentário e Melhor Curta-Metragem Live Action. Eu acho que a falta de dados suficientes é uma das razões por trás dos três erros acima.

David comentou o seguinte sobre os resultados,

Existem duas maneiras de avaliar a precisão. Primeiro, e mais óbvio, você quer um pequeno erro. Prever corretamente 21 das 24 categorias e ter probabilidade não desprezível para os outros três vencedores é indicativo de um pequeno erro. Segundo, você quer que as previsões sejam bem calibradas. O principal indicado em cada categoria teve uma média de 86.5% de probabilidade de vitória. Assim, multiplicadas por 24 categorias esperávamos escolher o vencedor 20.76 categorias. Ganhar 21 de 24 significa que nossas previsões foram perfeitamente calibradas. Se escolhêssemos mais categorias, deveríamos ter maiores probabilidades de vitória (ou seja, se você obtiver 24 de 24, deveria ter 100% de probabilidade de ser o vencedor em cada uma das categorias) e se escolhêssemos menos, deveríamos ter probabilidades mais baixas.

Meu pensamento final para a noite é que este é outro caso de especialistas e insiders anunciando um evento próximo quando a agregação adequada de dados disse que não era. Como observei em Twitter mais cedo, meu discurso de aceitação é curto. Gostaria de agradecer aos mercados de previsão pela agregação eficiente de dados dispersos e idiossincráticos.

Fonte: Previsão