EURO 2024 - KI-Tipps im Vergleich mit menschlichen Tipps

Dienstag, 16. Juli 2024

Zwei Themen haben in den letzten Wochen unser Interesse besonders bewegt: Künstliche Intelligenz (KI) und die Fußball Europameisterschaft 2024 in Deutschland. Wie in früheren Jahren gab es auch zur EURO 2024 bei CONTENS ein internes Tipp-Spiel. Erstmals haben wir dabei die Vorhersagen einer auf Fußball spezialisierten KI und die Tipps unseres erfolgreichsten Tippers miteinander verglichen.

Künstliche Intelligenz (KI)

Bei unserer Recherche nach einer auf Fußball spezialisierten KI sind wir auf PREDICD gestoßen. Nach eigenen Angaben werden die Vorhersagen "von einem fortschrittlichen KI-Modell erstellt, das umfassende Daten nutzt, um präzise Prognosen für Fußballspiele zu erstellen." Berücksichtigt werden dabei "verschiedene Schlüsselfaktoren, darunter die aktuelle Form, die Heim- und Auswärtsform sowie die Offensiv- und Defensivstärken der Teams. Zahlreiche weitere Daten und Statistiken fließen ebenfalls ein". Die Aktualität und Zuverlässigkeit der Vorhersagen werden "durch kontinuierliches Lernen und die Integration neuer Daten" gewährleistet.

Menschliche Intelligenz (HI)

Die am besten tippende Person unseres EURO 2024 Tippspiels hat nach eigenem Bekunden wenig Interesse an Fußball. Sie konnte jedoch auf fundiertes Fachwissen aus ihrer Familie zurückgreifen, das sie nach eigener Aussage mit "glücklicher Ahnungslosigkeit" kombinierte. Im folgenden Vergleich bezeichnen wir unsere Human Intelligence mit der Abkürzung "HI".

Was beinhaltet der Vergleich?

Nachdem die ausgewählte KI PREDICD lediglich Spielergebnisse vorhersagt, umfasst dieser Vergleich nur die Spielergebnisse der EURO 2024. Weitere Tipps, z.B. welche Teams welches Finale erreichen, welches Team Europameister wird oder aus welchem Land der Torschützenkönig kommt, wurden nicht berücksichtigt. Für jeden Spiel-Tipp gab es nach dem offiziellen Endergebnis Punkte mit folgender Bewertung:

0 Punkte für ein falsches Ergebnis
2 Punkte für den richtigen Sieger (ohne richtiges Ergebnis und ohne richtiges Torverhältnis)
3 Punkte für das richtige Torverhältnis (ohne richtiges Ergebnis)
4 Punkte für das richtige Ergebnis

Gruppenphase - 1. Spieltag

Am ersten Spieltag konnten insgesamt 12 Spiele getippt werden. Mit ihren Tipps lagen KI und HI vergleichsweise nah beieinander. Von insgesamt 48 möglichen Punkten (= 12 * 4 für das richtige Ergebnis) konnte die KI 40% erreichen, während die HI dank eines Volltreffers 44% erzielte. Bemerkenswert ist, dass KI und HI bei sechs Spielen das gleiche Ergebnis tippten (auch wenn das Ergebnis am Ende vielleicht falsch war) - der höchste Wert im weiteren Verlauf.

Gruppenphase - 2. Spieltag

Auch am zweiten Spieltag konnten insgesamt 12 Spiele getippt werden. Unsere HI glänzte dabei mit sage und schreibe fünf richtigen Ergebnissen, während die KI lediglich zwei Spiele korrekt vorhersagen konnte. Insgesamt erzielte die HI an diesem Spieltag mit 65% aller erreichbaren Punkte das insgesamt beste Ergebnis, die KI kam auf 42%. Das ist die größte Differenz während des gesamten Turniers. Dies ist umso bemerkenswerter, da KI und HI an diesem Spieltag immerhin fünf Spiele identisch vorhergesagt haben.

Gruppenphase - 3. Spieltag

Am letzten Spieltag der Gruppenphase lief es für die KI und die HI überraschend schlecht: Von zwölf Spielen tippte die KI zehnmal falsch (jeweils 0 Punkte) und holte nur bei zwei Spielen insgesamt sechs Punkte. Die HI konnte lediglich bei fünf Spielen punkten, darunter zwei Volltreffer mit jeweils vier Punkten. Nur ein Spiel tippten HI und KI identisch. Für beide waren es bislang die schlechtesten Ergebnisse, wobei die KI 13% und die HI 33% aller erreichbaren Punkte erzielte.

Achtelfinale

Der Start in die K.O.-Runde der letzten 16 Mannschaften lieferte im Vergleich von KI und HI ein punktgenaues Unentschieden. Beide erreichten in den acht Spielen (max. 32 Punkte) jeweils 15 Punkte, was einer Quote von 47% entspricht. Zwei Spiele sagten KI und HI identisch voraus.

Viertelfinale

Im Wettbewerb der besten acht Teams erzielte die KI mit 63% den ersten Punktsieg über die HI mit 50%. Während die KI bei allen vier Spielen punkten konnte (dreimal richtiger Sieger, einmal richtiges Ergebnis), holte die HI nur in zwei Spielen Punkte - dann aber gleich mit dem richtigen Ergebnis. Eines von vier Spielen tippten beide gleich.

Halbfinale

Auch das Halbfinale der letzten vier Teams konnte die KI mit 50% der erreichbaren Punkte gegenüber der HI mit 25% für sich entscheiden. Die KI sagte in einem Spiel das Ergebnis korrekt voraus, während die HI nur den richtigen Sieger tippte. Im zweiten Spiel tippten weder die KI noch die HI auf den Sieger England.

Finale

Im Finale der EURO 2024 siegte Spanien mit 2:1 über England. Dieses Ergebnis wurde von der KI und der HI korrekt vorhergesagt. Damit haben beide am letzten Spieltag 100% der erreichbaren Punkte erzielt.

Gesamtwertung

Nach insgesamt 51 Spielen der EURO 2024 ergibt sich im Vergleich zwischen der eingesetzten KI und unserer HI folgendes Bild. Die KI hat mehr Ergebnisse falsch getippt und bei mehr Spielen lediglich die siegreiche Mannschaft vorhergesagt. Die HI wiederum prognostizierte bei mehr Spielen das richtige Torverhältnis und bei mehr Begegnungen das richtige Endergebnis. Insgesamt erzielte die KI bei 30 Spielen Punkte, während die HI bei 33 Spielen punktete.

In 51 Partien der EURO 2024 konnten 204 Punkte erzielt werden. Die KI erreichte nach allen Spielen 78 Punkte (38%), während die HI auf 97 Punkte (48%) kam.

Verlauf über das Turnier

Betrachtet man die einzelnen Spieltage über den Verlauf des Turniers von der Gruppenphase bis zum Finale wird deutlich, dass die HI an drei von sieben Spieltagen bessere Ergebnisse erzielt hat, als die KI. Die Punkteunterschiede am 2. Spieltag (HI 11 Punkte mehr als KI) und am 3. Spieltag (HI 10 Punkte mehr als KI) waren entscheidend für das gesamte Turnier. Die KI erzielte zwar im Viertel- und Halbfinale mehr Punkte als die HI, die Differenz war jedoch vergleichsweise gering (jeweils KI 2 Punkte mehr als HI). An zwei Spieltagen - im Achtelfinale und im Finale - erreichten die KI und die HI die gleiche Punktzahl.

Erkenntnisse

Bei der Auswertung der Tipp-Ergebnisse gab es eine Reihe von interessanten Erkenntnissen:

In den 19 Spielen der Halbfinalisten Spanien, Frankreich, Niederlande und England bis zum Halbfinale tippte die KI 18mal auf den Sieg des jeweiligen Halbfinalisten, im Vorrundenspiel Niederlande gegen Frankreich auf ein Unentschieden. Die KI erzielte damit insgesamt 35 Punkte (von 76 möglichen, 46%). Die HI tippte 14 mal auf den jeweiligen Halbfinalisten, 3 mal auf den Gegner und 2 mal auf Unentschieden. Damit erreichte sie insgesamt 38 Punkte (50%).
Bei 16 Begegnungen (31%) tippten die KI und die HI identische Ergebnisse. In allen dieser Spiele wurden Punkte erzielt: In 10 Spielen wurde der richtige Sieger prognostiziert, in 2 Spielen das richtige Torverhältnis und in 4 Spielen das richtige Ergebnis.
Mit ein wenig Sachverstand und etwas Glück vermag ein engagierter Tipper durchaus eine KI zu schlagen - noch.
Die Vorhersagegenauigkeit der Krake Paul zur EM 2008 war im Vergleich zu den Vorhersagen der ausgewählten KI zur EM 2024 höher.
Der Wunsch englischer Fans ("Football is coming home") lässt weiter auf sich warten. Anscheinend fühlt sich Football auf dem Festland wohler.
Die Plätze 1 und 2 des CONTENS Tippspiels zur EURO 2024 gehen an zwei Mitarbeiterinnen. Mit gebührendem Abstand von 12 Punkten folgt der erste Kollege.

Nach der EM ist vor der WM. Wir freuen uns schon sehr auf das nächste Turnier 2026 und werden den Fortschritt der KI auch dann wieder genau unter die Lupe nehmen.

zurück

Ihre Nachricht an CONTENS