Brier Score Explicado: Como se Avaliam as Previsões de Futebol

Perguntas frequentes

O que é uma Brier score numa frase?
A Brier score mede o quão longe da realidade estão as estimativas de probabilidade de um previsor, em média ao longo de todas as suas previsões. Mais baixo é melhor. Um previsor perfeito obtém uma Brier score de 0; um tonto a tirar à sorte obtém à volta de 0,25 em resultados de futebol de três vias.
Como se calcula na prática?
Para cada jogo, pega-se na probabilidade do previsor para cada resultado (casa, empate, fora) e no resultado real (1 para o resultado que aconteceu, 0 para os outros). Calcula-se (previsão - real)^2 para cada resultado, soma-se e divide-se pelo número de resultados. Faz-se a média ao longo de todos os jogos. Quanto mais baixo o número resultante, mais bem mapeadas estão as probabilidades do previsor para o que aconteceu de facto.
Porque é a calibração mais importante do que a precisão?
Um previsor 'preciso' pode acertar na primeira escolha 60% das vezes. Mas o que se quer realmente é um previsor cujas escolhas de 70% estejam certas 70% das vezes e cujas escolhas de 45% estejam certas 45% das vezes. Um previsor que diz '90%' em tudo e acerta 60% das vezes é barulhento. Um previsor calibrado faz coincidir a sua confiança com a realidade.
O Tactiq publica a sua Brier score?
O Tactiq executa internamente acompanhamento de calibração ao longo da saída da sua análise para confirmar que os indicadores de confiança correspondem aos resultados reais à taxa esperada. A metodologia específica e os valores atuais de Brier score permanecem dentro do produto. Para um utilizador, o efeito aparece como um indicador de confiança em cada análise que reflete genuinamente quão incerta é a leitura.
O que é uma boa Brier score para futebol?
Para resultados de jogo de três vias, uma referência ingénua à sorte pontua cerca de 0,25 Brier. Um mercado de casa de apostas pontua à volta de 0,195. Um modelo de futebol bem construído pontua na faixa 0,19-0,21. Algo abaixo de 0,19 numa amostra grande é de elite. Algo acima de 0,22 está aquém. Estes são números aproximados; os limiares exatos dependem da mistura de ligas e do tamanho da amostra.
Posso calcular a minha própria Brier score em previsões?
Sim. Precisa de uma lista de probabilidades previstas (casa/empate/fora para cada jogo) e o resultado real. Aplique a fórmula, faça a média ao longo dos jogos, compare com as referências acima. Se fizer isto regularmente em qualquer ferramenta ou tipster, obtém uma nota honesta que não depende de afirmações de marketing.