Σύγκριση μοντέλων
Πολλά μοντέλα, εκπαιδευμένα σε πανομοιότυπα δεδομένα κομμένα την ίδια στιγμή, με ερώτηση για τους ίδιους αγώνες και βαθμολόγηση από τον ίδιο κώδικα. Το ερώτημα: αν το καθένα υπήρχε πριν παιχτούν αυτοί οι αγώνες, πόσους θα είχε βρει σωστά;
Backtest Όλα εδώ είναι αναδρομικές προγνώσεις. Κάθε αγώνας αποτιμήθηκε από υπολογισμό πάνω σε αγώνες αυστηρά προγενέστερους της σέντρας του — έντιμο τεστ, αλλά ο κώδικας γράφτηκε γνωρίζοντας πώς τελείωσαν αυτές οι σεζόν, οπότε τίποτα δεν είναι πρόγνωση δημοσιευμένη εκ των προτέρων.
| Μοντέλο | Αγώνες | Σωστές | Ακρίβεια | RPS | Log loss | Υπερβεβαιότητα |
|---|---|---|---|---|---|---|
| Ensemble | 15,404 | 8,050 | 52.26% ±0.79 | 0.1999 | 0.9855 | +0.2% |
| Dixon-Coles | 15,404 | 8,050 | 52.26% ±0.79 | 0.2000 | 0.9854 | -0.7% |
| Elo | 15,404 | 8,022 | 52.08% ±0.79 | 0.2017 | 1.0008 | +1.4% |
| Poisson | 15,404 | 7,963 | 51.69% ±0.79 | 0.2022 | 1.0056 | +1.6% |
| League base rates βάση | 15,404 | 6,641 | 43.11% ±0.78 | 0.2304 | 1.0751 | +0.6% |
| Random βάση | 15,404 | 5,111 | 33.18% ±0.74 | 0.2353 | 1.0986 | +0.2% |
| Always home βάση | 15,404 | 6,641 | 43.11% ±0.78 | 0.4271 | 2.6285 | +54.9% |
Είναι πραγματικές αυτές οι διαφορές;
Τεστ McNemar στους αγώνες όπου ακριβώς ένα από τα δύο είχε δίκιο. Οι αγώνες όπου είχαν και τα δύο δίκιο ή και τα δύο άδικο δεν λένε τίποτα για το ποιο είναι καλύτερο.
- Ensemble έναντι Dixon-Coles αδιάκριτα χ² 0.00
- Dixon-Coles έναντι Elo αδιάκριτα χ² 0.76
- Elo έναντι Poisson αδιάκριτα χ² 2.39
- Poisson έναντι League base rates στατιστικά σημαντικό χ² 428.13
- League base rates έναντι Random στατιστικά σημαντικό χ² 316.52
- Random έναντι Always home στατιστικά σημαντικό χ² 316.52
League base rates — αναλυτικά
Πίνακας σύγχυσης
Γραμμές: τι έγινε. Στήλες: τι είπε.
| Γηπεδούχος | Ισοπαλία | Φιλοξενούμενη | |
|---|---|---|---|
| Γηπεδούχος | 6,672 | 0 | 0 |
| Ισοπαλία | 3,947 | 0 | 0 |
| Φιλοξενούμενη | 4,854 | 0 | 0 |
Ανά αποτέλεσμα
Ακρίβεια: όταν το είπε, πόσο συχνά είχε δίκιο. Ανάκληση: από τις φορές που συνέβη, πόσο συχνά το είχε πει.
| Αποτέλεσμα | Είπε | Συνέβη | Ακρίβεια | Ανάκληση |
|---|---|---|---|---|
| Γηπεδούχος | 15,473 | 6,672 | 43.1% | 100.0% |
| Ισοπαλία | 0 | 3,947 | — | 0.0% |
| Φιλοξενούμενη | 0 | 4,854 | — | 0.0% |
Αυτό το μοντέλο σχεδόν ποτέ δεν προβλέπει ισοπαλία. Είναι φυσιολογικό όταν επιλέγεις το πιο πιθανό από τρία ενδεχόμενα — η ισοπαλία σπάνια είναι το πιο πιθανό — αλλά σημαίνει ότι η ακρίβειά του στηρίζεται εξ ολοκλήρου στα 1 και 2.
Σημαίνει κάτι η βεβαιότητα;
Ομαδοποιημένο ανά βεβαιότητα. Ένα βαθμονομημένο μοντέλο πετυχαίνει αυτό που ισχυρίζεται.
| Ζώνη | Αγώνες | Είπε | Συνέβη | Απόκλιση |
|---|---|---|---|---|
| 40-45% | 12,655 | 43.2% | 43.1% | +0.1% |
| 45-50% | 2,818 | 46.2% | 43.2% | +3.0% |
Αν το ακολουθούσες μόνο όταν ήταν σίγουρο
Η κάλυψη μετράει όσο και η ακρίβεια: ένα όριο που πετυχαίνει 80% αλλά ενεργοποιείται τέσσερις φορές τη σεζόν είναι περιέργεια, όχι στρατηγική.
| Τουλάχιστον | Αγώνες | Ακρίβεια | Κάλυψη |
|---|---|---|---|
| όλοι | 15,473 | 43.1% | 100% |
| 40% | 15,473 | 43.1% | 100% |
| 45% | 2,818 | 43.2% | 18% |
Όταν συμφωνούν τα μοντέλα
Μετρώνται μόνο τα καθαρά μοντέλα — η συμφωνία με τη στοιχηματική θα μετρούσε κάτι άλλο.
| Συμφωνούν | Αγώνες | Σωστές | Ακρίβεια |
|---|---|---|---|
| 2 / 4 | 378 | 139 | 36.8% |
| 3 / 4 | 1,754 | 697 | 39.7% |
| 4 / 4 | 13,272 | 7,229 | 54.5% |
Ανά διοργάνωση
| Ομάδα | Αγώνες | Ακρίβεια | RPS |
|---|---|---|---|
| La Liga | 2,958 | 45.4% | 0.2243 |
| Super League 1 | 1,738 | 41.9% | 0.2301 |
| Serie A | 2,933 | 40.8% | 0.2309 |
| Ligue 1 | 2,616 | 43.0% | 0.2311 |
| Bundesliga | 2,317 | 43.1% | 0.2321 |
| Premier League | 2,911 | 44.0% | 0.2340 |
Ανά σεζόν
| Ομάδα | Αγώνες | Ακρίβεια | RPS |
|---|---|---|---|
| Super League 1 2025/26 | 236 | 41.1% | 0.2271 |
| Super League 1 2024/25 | 236 | 41.1% | 0.2403 |
| Super League 1 2023/24 | 240 | 45.0% | 0.2273 |
| Super League 1 2022/23 | 240 | 40.4% | 0.2252 |
| Super League 1 2021/22 | 242 | 42.1% | 0.2329 |
| Super League 1 2020/21 | 242 | 38.4% | 0.2323 |
| Super League 1 2019/20 | 242 | 44.6% | 0.2217 |
| Super League 1 2018/19 | 60 | 43.3% | 0.2470 |
| Serie A 2025/26 | 380 | 38.9% | 0.2334 |
| Serie A 2024/25 | 380 | 39.7% | 0.2285 |
| Serie A 2023/24 | 380 | 41.8% | 0.2252 |
| Serie A 2022/23 | 381 | 42.3% | 0.2303 |
| Serie A 2021/22 | 380 | 38.9% | 0.2339 |
| Serie A 2020/21 | 380 | 41.1% | 0.2331 |
| Serie A 2019/20 | 380 | 41.6% | 0.2385 |
| Serie A 2018/19 | 272 | 42.6% | 0.2218 |
| Premier League 2025/26 | 380 | 42.6% | 0.2279 |
| Premier League 2024/25 | 380 | 40.8% | 0.2350 |
| Premier League 2023/24 | 380 | 46.1% | 0.2340 |
| Premier League 2022/23 | 380 | 48.4% | 0.2299 |
| Premier League 2021/22 | 380 | 42.9% | 0.2349 |
| Premier League 2020/21 | 380 | 37.9% | 0.2437 |
| Premier League 2019/20 | 380 | 45.3% | 0.2304 |
| Premier League 2018/19 | 251 | 50.2% | 0.2370 |