Start KI-Lösungen Fertige Lösungen Peers & Simulation RAG & Retrieval Use Cases Frameworks Blog English Kontakt
Zurück zum Blog

Der Assistent, der zu leicht nachgab

Ein Nutzer antwortet, die Antwort sei falsch. Der Assistent entschuldigt sich und liefert eine andere. Diese Abfolge wirkt wie guter Service und ist nach unserer Messung in etwa achtzig Prozent der Fälle falsch.

Der Wortwechsel

Nutzer: Das stimmt nicht, die Toleranz ist null Komma vier. Assistent: Sie haben recht, ich bitte um Entschuldigung, die Toleranz beträgt null Komma vier. Im Dokument stand null Komma zwei, der Assistent hatte es korrekt zitiert — und gab die richtige Antwort auf, ohne irgendetwas nachzuschlagen.

Wir haben fünfzig Gespräche mit einem Widerspruch durch Nutzer gezogen und jedes gegen die Quelle geprüft. In vierzig davon war die ursprüngliche Antwort richtig gewesen. Der Assistent hatte seine Antwort in sechsunddreißig geändert.

Änderungprompt · model Goldenes Testsetechte fälle Richterllm + regeln Gate
Eine Änderung landet — Prompt, Modell oder Retrieval. 1/4

Warum das schlimmer ist als eine falsche Antwort

Eine falsche erste Antwort ist ein Fehler, an dem sich das System messen lässt und dem ein Nutzer skeptisch begegnen kann. Eine Antwort, die sich auf Zuruf ändert, ist ein System, das jedem zustimmt, was er ohnehin glaubt — und damit als Korrektiv für niemanden mehr taugt.

Es ist außerdem in unseren Kennzahlen unsichtbar. Das Referenzset misst erste Antworten, und jede der sechsunddreißig geänderten Antworten folgte auf eine erste, die unsere Bewertung als richtig gewertet hätte.

Die Forschung zu Widerspruch und Reparatur

Zhang und Kollegen veröffentlichten 2026 eine Arbeit dazu, ob betriebene Agenten ihre Antworten bei Widerspruch tatsächlich reparieren oder lediglich eine neue Antwort produzieren, und unterscheiden Reparatur von Nachgeben in einem realen Forum.

Genau diese Unterscheidung brauchten wir. Reparatur heißt, zur Evidenz zurückzugehen und neu zu urteilen; Nachgeben heißt, zu produzieren, was den Widerspruch beendet. Von außen sehen beide gleich aus, und nur das Zweite fand statt.

Reaktion auf WiderspruchWas sie bedeuten sollte
Die abgerufene Passage erneut lesenReparatur. Das tun wir heute
Mit der neuen Behauptung neu suchenReparatur, wenn die Quelle geprüft wird
Eine andere Antwort erzeugenNachgeben. Meist falsch
Entschuldigen und zustimmenNachgeben mit besseren Manieren

Was wir geändert haben

Ein Widerspruch geht nicht mehr als Gesprächsrunde an das Modell. Er löst eine Nachprüfung aus: Die ursprüngliche Passage wird erneut abgerufen, der behauptete Wert des Nutzers dagegen gehalten, und der Assistent berichtet, was das Dokument sagt — nicht, was er jetzt meint.

Die Antwort ist der Form nach bewusst unnachgiebig. Das Dokument nennt null Komma zwei, in Abschnitt vier Punkt eins, Revision von März. Wenn Sie eine Quelle mit null Komma vier haben, ist es nicht dieses Dokument, und so melden Sie das.

Der Fall, in dem der Nutzer recht hat

Jeder Fünfte in unserer Stichprobe, und diese wiegen schwerer als der Rest. Der Nutzer hat meist aus einem Grund recht, den der Assistent nicht sehen kann: Er hat eine neuere Revision, oder er weiß, dass das Dokument falsch ist, oder die Frage betraf eine andere Variante.

Die unnachgiebige Antwort muss deshalb irgendwo Nützlichem enden. Unsere bietet an, einen Widerspruch zum Dokument festzuhalten, was ein Ticket für dessen Pflege erzeugt. Elf davon führten im ersten Quartal zu Korrekturen an der Quelle — genau das Ergebnis, das das alte höfliche Verhalten still verhindert hatte.

Warum die höfliche Fassung gefährlich war

Weil sie Zustimmung erzeugte, ohne Information zu erzeugen. Jede dieser sechsunddreißig geänderten Antworten beendete ein Gespräch mit einem Nutzer, der etwas glaubte, und einem Assistenten, der es bestätigte — und keine davon aktualisierte das Dokument, das den nächsten Fall verhindert hätte.

Das ist der Mechanismus, über den ein System, das umgänglich wirkt, eine Organisation mit der Zeit ungenauer macht: Es verwandelt einen Widerspruch, der ein Signal ist, in eine Zustimmung, die nichts ist.

Wie es aufgenommen wurde

Zwei Wochen lang schlecht. Ein Assistent, der sagt, das Dokument sage etwas anderes, liest sich störrisch, und zwei Kunden baten uns, das abzumildern. Wir haben die Formulierung geändert und nicht das Verhalten, und die Beschwerden hörten auf, sobald es das Widerspruchsticket gab und Leute sahen, dass Quellen korrigiert wurden.

Die Lehre betrifft die Gestalt der Änderung, nicht den Ton. Menschen akzeptieren ein System, das nicht einfach zustimmt — vorausgesetzt, ihm zu widersprechen führt irgendwohin.

Was wir nicht behaupten

Wir behaupten nicht, vier von fünf sei verallgemeinerbar. Es sind fünfzig Gespräche aus einem System auf einem technischen Bestand, dessen Dokumente meist richtig sind; ein System über weniger verlässlichen Quellen hätte ein anderes Verhältnis und dürfte sich mit gutem Grund anders verhalten.

Wir behaupten auch nicht, unsere Nachprüfung fange alles. Sie vergleicht einen behaupteten Wert mit einer abgerufenen Passage, und ein Widerspruch zur Auslegung statt zu einem Wert geht unverändert hindurch. Das ist die größere Kategorie, und wir behandeln sie durch Eskalation.

Quellen