Macha
KI und Agenten im Support

KI-Halluzination

Definition

Eine KI-Halluzination liegt vor, wenn ein Sprachmodell eine Antwort erzeugt, die flüssig und selbstbewusst klingt, sachlich aber falsch oder frei erfunden ist — mit Details, Richtlinien oder Quellen, die es nicht gibt.

Auch bekannt als: HalluzinationKonfabulationKI-Erfindung

So entsteht sie

Sprachmodelle erzeugen Text, indem sie plausible Fortsetzungen vorhersagen, nicht indem sie Fakten nachschlagen. Fehlt dem Modell die richtige Information, kann es trotzdem eine überzeugend klingende Antwort produzieren, die schlicht erfunden ist — denn plausibel zu klingen und richtig zu sein sind für das Modell zwei verschiedene Dinge.

Im Support kann eine Halluzination eine ausgedachte Rückgabefrist sein, eine nicht existierende Funktion oder ein erfundener Lösungsschritt, vorgetragen, als wäre er offizielle Richtlinie.

Warum sie für den Support wichtig ist

Halluzinationen sind das zentrale Risiko beim Einsatz generativer KI gegenüber Kunden, denn eine falsche Antwort untergräbt Vertrauen oder schafft Haftungsrisiken. Die wichtigsten Abwehrmittel sind, das Modell an Ihre echten Inhalte zu binden und einzugrenzen, was es sagen darf.

  • Retrieval-Augmented Generation — Antworten in Ihrer tatsächlichen Wissensdatenbank verankern
  • Guardrails — begrenzen, was der Agent behaupten oder tun darf
  • Saubere Übergabe an einen Menschen, wenn der Agent unsicher ist

Häufig gefragt

Warum halluzinieren KI-Modelle?

Weil sie statistisch plausiblen Text erzeugen, statt geprüfte Fakten abzurufen. Fehlt ihnen die richtige Information, füllen sie die Lücke mitunter mit einer selbstbewussten, aber erfundenen Antwort.

Wie verhindert man KI-Halluzinationen im Kundenservice?

Verankern Sie Antworten mit RAG in Ihren echten Wissensquellen, ergänzen Sie Guardrails, die begrenzen, was die KI sagen darf, halten Sie die Dokumentation sauber und aktuell und übergeben Sie an einen Menschen, wenn die Sicherheit gering ist.

Setzen Sie diese Ideen ein

Macha ist eine KI-Agent-Schicht, die auf dem Help Desk sitzt, den Sie schon nutzen, Zendesk, Freshdesk, Front, Intercom oder Gorgias.

Trial starten