Brier Skoru Açıklaması: Futbol Öngörüleri Nasıl Notlandırılır

Tactiq AI · 2026-05-06 · 8 dk okuma · Yapay Zeka ve Futbol

Çoğu futbol analiz uygulaması isabet pazarlar. "%70 isabetli" etkileyici gelir. "En iyi seçimlerimizin %80'i tuttu" daha etkileyici gelir. İsabet iddiaları alanı domine eder. Ayrıca neredeyse anlamsızdır.

Bir öngörücüyü notlandırmanın doğru yolu isabet değildir. Kalibrasyondur. %70 olasılık seçimleri zamanın %70'inde (%90 değil, %50 değil) doğru çıkan bir öngörücü işini yapıyordur. %70 seçimleri zamanın %85'inde doğru çıkan öngörücü güvensizdir (muhtemelen değerli) ama kalibre değildir. %70 seçimleri zamanın %55'inde doğru çıkan öngörücü seslidir (muhtemelen işe yaramaz).

Brier skoru, kalibrasyonu notlandıran metriktir. 75 yıldır akademik öngörü araştırmasında standarttır ve kulak verilmeye değer her futbol öngörücüsünün dürüstçe notlandırıldığı yoldur.

Bu yazı; Brier'in aslında ne ölçtüğünü, kendiniz nasıl hesaplayacağınızı, ölçütlerin neler olduğunu ve herhangi bir analiz aracından talep etmeniz gereken sinyalin neden kalibrasyon olduğunu anlatır.

Brier aslında ne ölçer

Brier, öngörü ile gerçeklik arasındaki kareli hata skorudur. Düşük olan daha iyi kalibredir.

Üç yönlü futbol sonuçları için (ev galibiyeti, beraberlik, deplasman galibiyeti), her maç toplamı 1,0 olan üç öngörü sayısı üretir. Gerçek sonuç üç tane 0 ya da 1 sayısı üretir (gerçekleşen sonuç için 1, diğerleri için 0).

Maç başına formül: Brier = Σ (öngörü - gerçek)^2 / 3

Yani ev galibiyetiyle biten bir maç için ev/beraberlik/deplasman [0,60, 0,25, 0,15] öngörüsü:

Ev: (0,60 - 1,00)^2 = 0,16
Beraberlik: (0,25 - 0,00)^2 = 0,0625
Deplasman: (0,15 - 0,00)^2 = 0,0225
Toplam: 0,245
3'e böl: 0,0817

Aynı maç için (ev kazandı) [0,95, 0,03, 0,02] diyen bir öngörü:

Toplam: 0,0025 + 0,0009 + 0,0004 = 0,0038
3'e böl: ≈ 0,0013

Güvenli ve doğru öngörü çok daha iyi puan alır. Ama güvenli yanlış öngörü ağır cezalandırılır:

Beraberlikle biten bir maçta [0,95, 0,03, 0,02]:
Ev: (0,95 - 0)^2 = 0,9025
Beraberlik: (0,03 - 1)^2 = 0,9409
Deplasman: (0,02 - 0)^2 = 0,0004
Toplam: 1,8438
3'e böl: ≈ 0,6146, felaket

Güven hak edildiğinde ödüllendirilir; edilmediğinde cezalandırılır. Yüzlerce maç üzerinde ortalandığında Brier, kalibre öngörücüleri sesli olanlardan otomatik olarak ayırır.

Kalibrasyon isabetten neden daha önemli

İki öngörücü düşünün.

Öngörücü A, ilk altı bir takımının her ev maçında her zaman %95 ev, %3 beraberlik, %2 deplasman der. Yaklaşık %60'ını doğru bulur.

Öngörücü B, aynı fikstürlerde %62 ev, %24 beraberlik, %14 deplasman der. %62'sini doğru bulur.

Hangisi daha iyi? İsabet açısından A önde (%60 ile %62 yakın). Kalibrasyon açısından B çok daha önde. A'nın %95 seçimleri zamanın %40'ında yanlış çıkıyor; bu berbat. B'nin %62 seçimleri zamanın %62'sinde doğru çıkıyor; bu dürüst.

Brier skorları size hangisinin alttaki sinyali doğru okuduğunu söyler. A'nın Brier'i berbat olur; çünkü %95 olasılıkları yanlış olduğunda kareleri büyür. B'nin Brier'i mükemmel olur; çünkü olasılıklar gerçeğe uyar.

Bu üç pratik biçimde önemlidir:

Risk kalibrasyonu. Bir öngörüyü aşağıda herhangi bir karar vermek için kullanıyorsanız (sıradan bir "hangi maç izlemeye en ilginç" bile), olasılığın aslında ne kadar güvenilir olduğunu bilmek önemlidir. Kötü bir öngörücüden gelen %95, iyi olandan gelen %62'den daha az değerlidir.

Öngörücüler arası karşılaştırma. İki öngörücüyü ham isabet üzerinden karşılaştıramazsınız. Sadece favorileri seçen biri, öngörülerine alttakileri dahil edenden daha "isabetli" görünür. Brier olasılık dağılımından bağımsız çalışır.

Dürüstlük. Kalibre öngörücüler aşırı iddiada bulunmaya daha az meyillidir. Brier ile notlandırılacağını bilen bir öngörücü övünmez. Yalnızca isabet üzerinden notlandırılacağını bilen biri, sadece favorileri arayıp isabet çizgisini şişirme dürtüsüne sahiptir.

Futbol için Brier ölçütleri

Üç yönlü futbol sonuçları (ev / beraberlik / deplasman) için Brier üzerine kabaca ölçütler:

Sürekli beraberlik tabanı (her maça 33/33/33 diyen): yaklaşık 0,25
Rastgele olasılık tabanı: yaklaşık 0,25
Temel form tabanlı model (galibiyet-yenilgi yalnız): yaklaşık 0,225
xG + form kullanan iyi kamuya açık model: 0,195 ila 0,215
Pazar referans çizgisi: yaklaşık 0,195
Olay verisi + dikkatli kalibrasyonla elit model: 0,185 ila 0,195

0,185'in altındaki skorlar nadirdir; 0,22 üzerindekiler düşük performanslıdır. Ciddi analitik çalışmaların çoğu 0,19 ila 0,21 aralığında yaşar; pazar referanslarına yakın ama genelde aşmaz (pazarın kalibrasyon mekanizması olarak fiyat baskısı ve keskin para vardır).

Tactiq, Brier ve kalibrasyon hakkında nasıl düşünür

Tactiq, maç kartlarındaki güven göstergelerinin gerçek dünya sonuç sıklıklarına beklenen oranda karşılık geldiğini doğrulamak için analiz çıktısı boyunca dahili kalibrasyon takibi çalıştırır. "Yüksek güven" diyen bir gösterge, en üst olasılığın yüksek oranda gerçekleştiği maçlara eşlenmeli. "Yakın" diyen bir gösterge, sonuçların gerçekten değişken olduğu maçlara eşlenmeli.

Özgül Brier değerleri, kalibrasyon gösterge tabloları ve yeniden ayarlama temposu ürün içinde kalır. Kullanıcıya ulaşan, güven göstergesinin pazarlama sinyali olarak uydurulmak yerine gerçek sonuçlara karşı kalibre edildiği bir güven nitelendirmeli analizdir. Yayınlanan metodoloji birkaç hafta içinde kopyalanır ve yanlış kalibre edilir.

Kullanıcının maç kartında gördüğü:

Görünür bir güven göstergesiyle birlikte gerçek bir kalibrasyon bandına eşlenen sonuç olasılık üçlüleri.
Her takım için beklenen goller.
Okumayı sade bir dille açıklayan yazılı analiz.
Hiçbir yerde dış pazar verisi yok. Üçüncü taraf platformlara yönlendirme yok. Sanal para yok. Yalnızca istatistiksel analiz.

Güven göstergesi, kalibrasyonun kullanıcıya bakan kulpudur. "Yüksek güven" sinyalin güçlü olduğunu, "yakın" sonuçların gerçekten değişken olduğunu ifade eder.

Sonuç

Brier skoru, öngörücülerin aslında nasıl notlandırıldığıdır. Kalibrasyonu göstermeden isabet reklamı yapan bir araç, sizden sesli öngörücü örüntüsüne güvenmenizi istiyordur. Kalibrasyon üzerinden notlandırılmaya istekli olan, sonuç değişkenliğini gerçekten yansıtan güven göstergeleri yüzeye çıkaran araç, zaman içinde dayanan olur.

Olasılıklarını sonuçların yanında yayınlayan herhangi bir öngörücünün Brier'ini kendiniz hesaplayabilirsiniz. Formül basittir, ölçütler iyi bilinir ve dürüst not birkaç dakikalık tablo işiyle çıkar.

Tactiq, kalibrasyonu kullanıcıya bakan güven göstergesine inşa eder ve dahili olarak doğrular. Analiz, örneklem incelemesini geçemeyen yüksek sesli iddialar yerine alttaki belirsizliği eşleyen güvenle her maçı okur. 1.200'den fazla yarışma, 32 dil yerelleştirmesi, günde sekiz analizlik ücretsiz katman, kart bilgisi gerekmez.

Seriyi takip ettiyseniz, metrik sözlüğü artık şunları kapsıyor: yapay zeka futbol maçlarını nasıl analiz eder, xG, xA, npxG, PPDA, Field Tilt, progresif aksiyonlar, SCA/GCA, xPts ve Elo puanları. Brier, her diğer metriğin dürüstlüğünü notlandıran üst metrik olarak onlara katılır.

Sıkça Sorulan Sorular

Brier skoru tek cümlede nedir?

Brier skoru, bir öngörücünün olasılık tahminlerinin gerçeklikten ne kadar uzakta olduğunu tüm öngörüleri ortalanmış olarak ölçer. Düşük olan iyidir. Mükemmel bir öngörücü 0 Brier skoru alır; üç sonuçlu futbol sonuçlarında bozuk para atan biri yaklaşık 0,25 alır.

Aslında nasıl hesaplanır?

Her maç için öngörücünün her sonuca verdiği olasılığı (ev, beraberlik, deplasman) ve gerçek sonucu (gerçekleşen sonuç için 1, diğerleri için 0) alın. Her sonuç için (öngörü - gerçek)^2 hesaplayın, toplayın ve sonuç sayısına bölün. Bunu tüm maçlar üzerinde ortalayın. Çıkan sayı ne kadar düşükse, öngörücünün olasılıkları gerçekleşene o kadar sıkı eşleşir.

Kalibrasyon neden isabetten daha önemlidir?

'İsabetli' bir öngörücü en üst seçimini zamanın %60'ında doğru bulabilir. Ama gerçekten istediğiniz, %70 seçimleri zamanın %70'inde, %45 seçimleri zamanın %45'inde doğru çıkan bir öngörücüdür. Her şeye '%90' diyen ve zamanın %60'ında doğru çıkan öngörücü seslidir. Kalibre öngörücü güvenini gerçekliğe uydurur.

Tactiq Brier skorunu yayınlıyor mu?

Tactiq, güven göstergelerinin gerçek dünyada beklenen oranda gerçekleştiğini doğrulamak için analiz çıktısı boyunca dahili kalibrasyon takibi çalıştırır. Özgül metodoloji ve güncel Brier skoru değerleri ürün içinde kalır. Bir kullanıcı için etki, her analizde okumanın ne kadar belirsiz olduğunu gerçekten yansıtan bir güven göstergesi olarak görünür.

Futbol için iyi bir Brier skoru nedir?

Üç yönlü maç sonuçları için, naif bir bozuk para atma ölçütü yaklaşık 0,25 Brier alır. Pazar referans fiyatları yaklaşık 0,195 alır. İyi kurulmuş bir futbol modeli 0,19-0,21 aralığında alır. Büyük örneklemde 0,19'un altındaki her şey elittir. 0,22 üstündeki her şey düşük performanslıdır. Bunlar yaklaşık rakamlardır; kesin eşikler lig karışımına ve örneklem büyüklüğüne bağlıdır.

Öngörüler üzerinde kendi Brier skorumu hesaplayabilir miyim?

Evet. Öngörülen olasılıkların listesine (her maç için ev/beraberlik/deplasman) ve gerçek sonuca ihtiyacınız var. Formülü uygulayın, maçlar üzerinde ortalayın, yukarıdaki ölçütlerle karşılaştırın. Bunu herhangi bir araca veya ipucu vericiye karşı düzenli yaparsanız, pazarlama iddialarına dayanmayan dürüst bir not alırsınız.