Σύγκριση μοντέλων
Πολλά μοντέλα, εκπαιδευμένα σε πανομοιότυπα δεδομένα κομμένα την ίδια στιγμή, με ερώτηση για τους ίδιους αγώνες και βαθμολόγηση από τον ίδιο κώδικα. Το ερώτημα: αν το καθένα υπήρχε πριν παιχτούν αυτοί οι αγώνες, πόσους θα είχε βρει σωστά;
Backtest Όλα εδώ είναι αναδρομικές προγνώσεις. Κάθε αγώνας αποτιμήθηκε από υπολογισμό πάνω σε αγώνες αυστηρά προγενέστερους της σέντρας του — έντιμο τεστ, αλλά ο κώδικας γράφτηκε γνωρίζοντας πώς τελείωσαν αυτές οι σεζόν, οπότε τίποτα δεν είναι πρόγνωση δημοσιευμένη εκ των προτέρων.
| Μοντέλο | Αγώνες | Σωστές | Ακρίβεια | RPS | Log loss | Υπερβεβαιότητα |
|---|---|---|---|---|---|---|
| Ensemble | 15,404 | 8,050 | 52.26% ±0.79 | 0.1999 | 0.9855 | +0.2% |
| Dixon-Coles | 15,404 | 8,050 | 52.26% ±0.79 | 0.2000 | 0.9854 | -0.7% |
| Elo | 15,404 | 8,022 | 52.08% ±0.79 | 0.2017 | 1.0008 | +1.4% |
| Poisson | 15,404 | 7,963 | 51.69% ±0.79 | 0.2022 | 1.0056 | +1.6% |
| League base rates βάση | 15,404 | 6,641 | 43.11% ±0.78 | 0.2304 | 1.0751 | +0.6% |
| Random βάση | 15,404 | 5,111 | 33.18% ±0.74 | 0.2353 | 1.0986 | +0.2% |
| Always home βάση | 15,404 | 6,641 | 43.11% ±0.78 | 0.4271 | 2.6285 | +54.9% |
Είναι πραγματικές αυτές οι διαφορές;
Τεστ McNemar στους αγώνες όπου ακριβώς ένα από τα δύο είχε δίκιο. Οι αγώνες όπου είχαν και τα δύο δίκιο ή και τα δύο άδικο δεν λένε τίποτα για το ποιο είναι καλύτερο.
- Ensemble έναντι Dixon-Coles αδιάκριτα χ² 0.00
- Dixon-Coles έναντι Elo αδιάκριτα χ² 0.76
- Elo έναντι Poisson αδιάκριτα χ² 2.39
- Poisson έναντι League base rates στατιστικά σημαντικό χ² 428.13
- League base rates έναντι Random στατιστικά σημαντικό χ² 316.52
- Random έναντι Always home στατιστικά σημαντικό χ² 316.52
Dixon-Coles — αναλυτικά
Πίνακας σύγχυσης
Γραμμές: τι έγινε. Στήλες: τι είπε.
| Γηπεδούχος | Ισοπαλία | Φιλοξενούμενη | |
|---|---|---|---|
| Γηπεδούχος | 5,336 | 22 | 1,283 |
| Ισοπαλία | 2,538 | 21 | 1,368 |
| Φιλοξενούμενη | 2,123 | 20 | 2,693 |
Ανά αποτέλεσμα
Ακρίβεια: όταν το είπε, πόσο συχνά είχε δίκιο. Ανάκληση: από τις φορές που συνέβη, πόσο συχνά το είχε πει.
| Αποτέλεσμα | Είπε | Συνέβη | Ακρίβεια | Ανάκληση |
|---|---|---|---|---|
| Γηπεδούχος | 9,997 | 6,641 | 53.4% | 80.3% |
| Ισοπαλία | 63 | 3,927 | 33.3% | 0.5% |
| Φιλοξενούμενη | 5,344 | 4,836 | 50.4% | 55.7% |
Αυτό το μοντέλο σχεδόν ποτέ δεν προβλέπει ισοπαλία. Είναι φυσιολογικό όταν επιλέγεις το πιο πιθανό από τρία ενδεχόμενα — η ισοπαλία σπάνια είναι το πιο πιθανό — αλλά σημαίνει ότι η ακρίβειά του στηρίζεται εξ ολοκλήρου στα 1 και 2.
Σημαίνει κάτι η βεβαιότητα;
Ομαδοποιημένο ανά βεβαιότητα. Ένα βαθμονομημένο μοντέλο πετυχαίνει αυτό που ισχυρίζεται.
| Ζώνη | Αγώνες | Είπε | Συνέβη | Απόκλιση |
|---|---|---|---|---|
| < 40% | 2,750 | 37.7% | 38.5% | -0.8% |
| 40-45% | 2,872 | 42.5% | 41.7% | +0.8% |
| 45-50% | 2,540 | 47.4% | 47.6% | -0.1% |
| 50-55% | 2,064 | 52.4% | 52.0% | +0.4% |
| 55-60% | 1,589 | 57.4% | 57.6% | -0.2% |
| 60-65% | 1,289 | 62.3% | 66.6% | -4.3% |
| 65-70% | 881 | 67.3% | 71.5% | -4.2% |
| 70-75% | 658 | 72.3% | 72.6% | -0.3% |
| 75-80% | 419 | 77.2% | 80.4% | -3.2% |
| 80-90% | 320 | 83.4% | 85.3% | -1.9% |
| 90-100% | 22 | 91.6% | 86.4% | +5.3% |
Αν το ακολουθούσες μόνο όταν ήταν σίγουρο
Η κάλυψη μετράει όσο και η ακρίβεια: ένα όριο που πετυχαίνει 80% αλλά ενεργοποιείται τέσσερις φορές τη σεζόν είναι περιέργεια, όχι στρατηγική.
| Τουλάχιστον | Αγώνες | Ακρίβεια | Κάλυψη |
|---|---|---|---|
| όλοι | 15,404 | 52.3% | 100% |
| 40% | 12,654 | 55.2% | 82% |
| 45% | 9,782 | 59.2% | 64% |
| 50% | 7,242 | 63.3% | 47% |
| 55% | 5,178 | 67.8% | 34% |
| 60% | 3,589 | 72.3% | 23% |
| 65% | 2,300 | 75.5% | 15% |
| 70% | 1,419 | 78.0% | 9% |
| 75% | 761 | 82.7% | 5% |
| 80% | 342 | 85.4% | 2% |
Όταν συμφωνούν τα μοντέλα
Μετρώνται μόνο τα καθαρά μοντέλα — η συμφωνία με τη στοιχηματική θα μετρούσε κάτι άλλο.
| Συμφωνούν | Αγώνες | Σωστές | Ακρίβεια |
|---|---|---|---|
| 2 / 4 | 378 | 139 | 36.8% |
| 3 / 4 | 1,754 | 697 | 39.7% |
| 4 / 4 | 13,272 | 7,229 | 54.5% |
Ανά διοργάνωση
| Ομάδα | Αγώνες | Ακρίβεια | RPS |
|---|---|---|---|
| Super League 1 | 1,728 | 52.9% | 0.1875 |
| Serie A | 2,921 | 52.8% | 0.1966 |
| La Liga | 2,947 | 52.0% | 0.1982 |
| Premier League | 2,902 | 52.9% | 0.2027 |
| Bundesliga | 2,301 | 51.9% | 0.2040 |
| Ligue 1 | 2,605 | 51.2% | 0.2078 |
Ανά σεζόν
| Ομάδα | Αγώνες | Ακρίβεια | RPS |
|---|---|---|---|
| Super League 1 2025/26 | 236 | 52.5% | 0.1825 |
| Super League 1 2024/25 | 235 | 51.5% | 0.2055 |
| Super League 1 2023/24 | 236 | 55.5% | 0.1790 |
| Super League 1 2022/23 | 240 | 50.8% | 0.1788 |
| Super League 1 2021/22 | 239 | 54.0% | 0.2006 |
| Super League 1 2020/21 | 242 | 48.3% | 0.1954 |
| Super League 1 2019/20 | 240 | 53.8% | 0.1760 |
| Super League 1 2018/19 | 60 | 68.3% | 0.1658 |
| Serie A 2025/26 | 378 | 52.1% | 0.2009 |
| Serie A 2024/25 | 379 | 53.0% | 0.1905 |
| Serie A 2023/24 | 380 | 53.2% | 0.1924 |
| Serie A 2022/23 | 379 | 50.7% | 0.2008 |
| Serie A 2021/22 | 378 | 54.0% | 0.1998 |
| Serie A 2020/21 | 378 | 55.0% | 0.1890 |
| Serie A 2019/20 | 377 | 52.8% | 0.2063 |
| Serie A 2018/19 | 272 | 51.1% | 0.1912 |
| Premier League 2025/26 | 379 | 46.7% | 0.2086 |
| Premier League 2024/25 | 379 | 51.7% | 0.2043 |
| Premier League 2023/24 | 379 | 57.8% | 0.1902 |
| Premier League 2022/23 | 379 | 52.0% | 0.2109 |
| Premier League 2021/22 | 379 | 53.8% | 0.1940 |
| Premier League 2020/21 | 379 | 51.5% | 0.2170 |
| Premier League 2019/20 | 377 | 52.5% | 0.2012 |
| Premier League 2018/19 | 251 | 59.4% | 0.1921 |