Die KI findet ihre eigenen Fehler nicht? Lass frische KI-Chats gezielt angreifen
25. November 2026
KI-generiert: geklonte Stimme, Gesicht aus einem alten Video von mir, Lippen angepasst. Den Text habe ich geschrieben.
Du lässt die KI einen Text schreiben und fragst danach: „Passt das so?“ Sie sagt ja. Natürlich sagt sie ja. Sie hat den Text gerade selbst geschrieben und hält ihren eigenen Gedankengang für richtig.
Die Idee stammt aus einem Interview mit dem Engineering-Lead für Claude bei Anthropic, der Firma hinter Claude. Einer einzelnen KI-Sitzung, die ihre eigene Arbeit beurteilt, traut er kaum. Am besten prüft man gegen harte Belege, sonst wenigstens mit einer anderen Sitzung. Er setzt mehrere KI-Chats darauf an, ein Ergebnis zu widerlegen. Ich habe das als festen Ablauf eingebaut.
Drei Angreifer, jeder mit einem Auftrag. Bevor ein wichtiger Text rausgeht, lesen ihn drei frische KI-Chats. Keiner kennt den Entstehungsweg, keiner sieht die Antworten der anderen.
- Fakten: Stimmt jede Zahl, jedes Datum, jeder Name? Prüf an der Quelle nach.
- Logik: Folgt der Schluss wirklich? Wo wird aus einem Einzelfall eine Regel?
- Leser: Was kommt beim Leser falsch an, was bleibt unklar?
Der Auftrag lautet ausdrücklich: widerlegen, nicht loben. Findet ein Chat nichts Belastbares, soll er das sagen und nichts erfinden.
Eine Grenze bleibt. Bei mir laufen alle Chats mit demselben KI-Modell wie der Schreiber. Das verhindert, dass die KI sich selbst bestätigt. Gemeinsame Wissenslücken des Modells verhindert es nicht. Bei Fakten zählt deshalb die Quelle, nicht die Zustimmung der Chats.
Ein Richter sortiert. Drei Angreifer liefern viel Kritik, und nicht alles davon stimmt. Darum liest ein vierter Chat den Text und alle Kritikpunkte und prüft jeden selbst. Er sortiert in drei Fächer: berechtigt, Geschmackssache, falsch. Auch der Richter kann sich irren. Darum überfliege ich das Fach „falsch“ selbst.
Ich entscheide, nicht die KI. Die berechtigten Punkte setze ich um oder lehne sie mit einem Satz Begründung ab. Alles landet in einem Bericht. So sehe ich später, warum ein Text so geworden ist.
Was der erste Test gebracht hat. Ich habe den Ablauf auf meinen schon veröffentlichten Artikel über KI-Recherche losgelassen. Ausgerechnet den, in dem es ums sorgfältige Prüfen geht. Ergebnis: 8 Punkte berechtigt, 5 Geschmackssache, 6 falsch. Das ist viel, darum habe ich den Artikel überarbeitet. Ein deutlicher Fund: Dort stand, keiner der geprüften Anbieter nennt seine GISA-Zahl, also die Nummer im Gewerberegister. In meiner eigenen Recherche steht weiter unten einer, der sie nennt. Inzwischen ist der Artikel korrigiert. Ob der Ablauf mehr findet als gründliches Gegenlesen, weiß ich nach einem Test noch nicht. Auch dieser Artikel ist vor dem Veröffentlichen durch den Ablauf gegangen.
Wofür ich es einsetzen will. Blogartikel vor der Freigabe, Mails an Behörden, Firmen und Ärzte, und neue Regeln für meine KI. Nicht bei Texten mit Beträgen und Fristen. Dort gleicht ein eigener Prüfer die Zahlen mit festen Vorgaben ab, also ob jede Summe und jedes Datum stimmt. Auch nicht bei privaten Mails.
Den Skill gibt es hier. Eine allgemeine Fassung für Claude Code, ein KI-Programm fürs Terminal:
SKILL.md herunterladen · im Browser öffnen und kopieren
Wie du anfängst. Mit Claude Code: Leg die Datei unter ~/.claude/skills/widerlegung/SKILL.md ab und sag bei einem fertigen Text: „Widerleg das.“
Ohne Claude Code geht es von Hand. Öffne drei neue Chats und kopier in jeden nur den Text, nicht den Chat, in dem er entstanden ist. Dazu je einen Auftrag:
- „Widerleg diesen Text. Prüf jede Zahl, jedes Datum, jeden Namen an der Quelle. Erfinde nichts.“ Dafür einen Chat mit Websuche nehmen.
- „Widerleg diesen Text. Such Schlüsse, die nicht folgen, und Widersprüche. Erfinde nichts.“
- „Widerleg diesen Text. Was kommt bei einem Laien falsch an oder bleibt unklar? Erfinde nichts.“
Die drei Antworten gibst du mit dem Text einem vierten Chat: „Sortier diese Kritik in berechtigt, Geschmackssache und falsch. Prüf jeden Punkt selbst.“
Das ist der fünfte Teil der Reihe. Davor: KI-Assistent einrichten ohne Kurs, KI macht immer wieder denselben Fehler?, Harte Grenzen mit einem Hook und KI-Recherche klingt gut, stimmt aber nicht?.