Erkundung 4: Mit einem KI-Sprachmodell Fakten checken
Normalerweise würdest du von einem KI-Sprachmodell 'korrekte' Antworten erwarten. Da es aber immer stochastische Antworten sind, kann man sich nie darauf verlasssen. Vor diesem Hintergrund sind Techniken zum Faktencheck erforderlich. Hier ein paar Möglichkeiten:
- Gib den identischen Prompt bei unterschiedlichen KI-Sprachmodellen ein und vergleiche die Antworten. Frei und ohne Registrierung zugängliche KI-Sprachmodelle findest du z.B. über diesen Link bei der Suchmaschine DuckDuckGo
- Nutze ein KI-Sprachmodell mit Websearch-Funktion wie Perplexity. Darüber erhältst du auch nicht zwingend eine korrekte Antwort - aber du kannst die verwendeten Quellen zurück verfolgen und dir so eine Meinung bilden.
- Nicht nach Bestätigung, sondern nach Widerspruch fragen. Zum Beispiel: "Hier ist ein Text. Was davon kannst du nicht eindeutig bestätigen?"
Probiert diese und eventuell weitere Ideen gemeinsam aus. Als Challenge könnt ihr auch versuchen, ein KI-Sprachmodell zu einer falschen Aussage zu bewegen bzw. eine falsche Aussage zu bestätigen. Wenn man so etwas hinbekommen hat, ist man zukünftig sensibler bei der Bewertung von Output.