Informatik & KI · das Experiment
Schlag den Algorithmus
Eine Frage auf der Startseite einer Filmseite, 551 Schätzungen, vier Algorithmen. Vier Fragen, vom Einsteiger bis zum Experten, dazu, wann deine eigene Vorhersage ein Empfehlungssystem schlägt und wann nicht.
1 · Finde, wer am besten vorhersagt
Einsteiger
Wer sagte am besten voraus, welche Bewertung Mitglieder später einem Film gaben, den sie noch nicht gesehen hatten?
2 · Miss den Gewinn durch das Fragen
Mit allen Maschineninformationen beträgt der mittlere quadratische Fehler der Vorhersage 0,921. Kommt die Schätzung des Mitglieds hinzu, sinkt er auf 0,685.
Fortgeschritten
Um wie viel Prozent senkt die Schätzung den Fehler?
3 · Wähle, wo sich Fragen am wenigsten lohnt
Ein langjähriges Mitglied mit einer sehr langen Bewertungshistorie wird zu einem jahrzehntealten Klassiker befragt, den sehr viele Mitglieder bewertet haben.
Experte
Was legt die Studie über den Vorsprung des Mitglieds in diesem Fall nahe?
4 · Wäge die Sicherheit des Mitglieds ab
Neben der erwarteten Bewertung gaben die Mitglieder an, wie sicher sie sich waren, von 1 bis 5.
Experte
Was bringt es, diese Sicherheit zur Vorhersage hinzuzufügen?
Algorithmus geschlagen
—