Futbol Tahmin Doğruluğu Nasıl Ölçülür? %90 İddiaları Neden Sahte
İsabet oranı, futbol tahmininde en yanıltıcı sayıdır. Gerçek ölçütler — kalibrasyon, Brier skoru, log loss, kapanış oranı değeri — ve herhangi bir sitenin iddiasını beş dakikada nasıl denetleyeceğiniz.
%90 doğruluk reklamı yapan bir tahmin sitesi, neredeyse her zaman anlamsız bir şey ölçüyordur. Tek başına isabet oranını manipüle etmek çok kolaydır: her maça "5.5 alt" deyin, neredeyse her seferinde haklı çıkarsınız ve istikrarlı biçimde para kaybedersiniz. Bu yazıda manipüle edilemeyen ölçütleri ve bir iddiayı kendiniz nasıl denetleyeceğinizi anlatıyoruz.
İsabet oranı üç yolla şişirilir
1. Kolay pazar seçmek
Her tahmin aynı zorlukta değildir. "0.5 üst" maçların ezici çoğunluğunda tutar. Güçlü bir ev sahibine çifte şans da öyle. Bu tür pazarlar üzerinden harmanlanmış bir isabet oranı, modelin ne kadar iyi olduğunu değil, pazarların ne kadar kolay olduğunu raporlar.
2. Kayıtta hayatta kalma yanlılığı
Tahminler yayınlanıyor ama arşiv sonradan derleniyorsa, kaybedenler sessizce kaybolur. Kriter şudur: her tahmin maç başlamadan önce zaman damgalı ve görünür müydü ve arşiv ilk günden bu yana her şeyi içeriyor mu?
3. Kayıp olmayanı kazanç saymak
Ertelenen maçlar, Asya handikabında iade sonuçlar ve erken bozdurulan kuponlar hep "kayıp değil" olarak kaydedilir. Bir sezon boyunca tek başına bu, manşetteki sayıyı birkaç puan oynatabilir.
Tahmin kalitesi gerçekte nasıl ölçülür?
Kalibrasyon
Modelin %70 dediği bütün maçları alın. Yaklaşık %70'i gerçekleşti mi? Aynısını %30 ve %50 grupları için tekrarlayın. Kalibre bir modelin güven değeri, söylediği şeyi ifade eder. Bu, mevcut en kullanışlı testtir ve neredeyse hiçbir tahmin sitesi yayınlamaz.
Kalibrasyon ters yöndeki hatayı da yakalar: sık haklı çıkan ama her seferinde %95 diyen bir model kötü kalibredir ve tehlikelidir, çünkü yalan söyleyen bir sayıya göre risk büyüklüğü belirleyemezsiniz.
Brier skoru
Olasılık tahmininin ortalama kare hatası. 0.7 dediniz ve olay gerçekleşti: (1 − 0.7)² = 0.09 ceza. Düşük olanı iyidir, sıfır mükemmeldir. Hem kendinden emin hem doğru olmayı ödüllendirir; emin olup yanılmayı, temkinli olup yanılmaktan çok daha ağır cezalandırır.
Log loss
Aynı fikir, emin hatalar için çok daha sert bir ceza ile — %99 deyip yanılmak neredeyse yıkıcıdır. Modellerin çoğu tam da dürüst olasılıklara zorladığı için log loss ile eğitilir.
| Ölçüt | Ne cevaplar | Manipüle edilebilir mi? |
|---|---|---|
| İsabet oranı | En yüksek olasılıklı seçim ne sıklıkla tuttu | Evet — kolay pazar seçin |
| Kalibrasyon | Güven sayıları bir şey ifade ediyor mu | Hayır |
| Brier skoru | Olasılıklar ne kadar saptı | Hayır |
| Log loss | Aynısı, emin hataları cezalandırarak | Hayır |
| Kapanış oranı değeri | Gerçek bir avantaj bulundu mu | Hayır |
Tartışmayı bitiren ölçüt: kapanış oranı
Kapanış oranı — maç başlarkenki, tüm paranın girdiği andaki fiyat — bir futbol maçı hakkında var olan en doğru kamuya açık tahmindir. Kadro haberini, hava durumunu, profesyonel parayı ve geri kalan her şeyi zaten içerir.
Dolayısıyla herhangi bir modelin dürüst sınavı şudur: kapanış oranını yeniyor mu? Seçimlerini, o oranların kapandığı yerden daha iyi fiyatlardan tutarlı biçimde işaretliyorsa gerçek bilgi buluyordur. Bulmuyorsa, hoş bir isabet oranı gösterirken marja sessizce kaybediyor olabilir.
Bu zorlu bir ölçüttür ve ciddi her avantaj iddiasının neden mütevazı olması gerektiğini açıklar. Kapanışı birkaç puan yenen bir model gerçekten iyi iş çıkarıyordur.
Bir tahmin sitesini beş dakikada denetleme listesi
- Tam arşivi bulun. Her tahminin kamuya açık kaydı yoksa konuşacak bir şey yoktur. Bizimki: tahmin geçmişi.
- Örneklem büyüklüğüne bakın. Birkaç yüz sonuçlanmış tahminin altında kayıt gürültüdür. 40 tahminde %60 isabet, yazı turanın düzenli olarak yaptığı bir şeydir.
- Pazarlara bakın. Kayıt maç sonucu tahminleri üzerine mi kurulu, yoksa "0.5 üst" üzerine mi?
- Oran var mı? Alınan fiyatı yazmayan bir kayıt kâr–zarara çevrilemez, ki önemli olan tek sayı odur.
- Güven gruplarını kontrol edin. Yüksek güvenli tahminler düşük güvenlilerden daha iyi performans göstermiyorsa güven skoru sadece süstür.
İnandırıcı bir sayı neye benzer?
Rekabetçi liglerde maç sonucu pazarında güçlü bir model %55–60 bandına oturur, en emin olduğu alt kümede daha yükseğe çıkar. Zor pazarlarda, uzun bir örneklemde bunun çok üstünde reklam edilen her şey, bir gerçek değil doğrulanması gereken bir iddiadır.
Rahatsız edici gerçek şu: iyi model çoğu zaman haklı çıkan model değildir. %55'i gerçekten %55 anlamına gelen modeldir. Bunu kurmak daha zordur ve reklamı çok daha az heyecanlıdır.
Équipe Analytique Prodict
Ingénieurs IA Data & Prédiction
Cette analyse est produite par le modèle d'intelligence artificielle principal de Prodict. En traitant des millions de données football historiques et en temps réel, le modèle détecte les paris valeur et les avantages algorithmiques indépendamment du biais humain.