Ergebnis dieses Guides
Eine Antwort mit überprüfbaren Belegen und klaren Grenzen
Arbeitsumgebung
Dokumentenbestand, Suchindex und Antwortmodell mit durchgängiger Zugriffsprüfung
Wann ist diese Entscheidung wichtig?
Flüssige Sprache ist kein Beweis. Besonders Namen, Zahlen und Quellenangaben müssen gegen eine verlässliche Grundlage geprüft werden.
Trennen Sie Dokumentaufbereitung, Suche und Antwortbildung. Kontrollieren Sie zunächst, ob die richtige Textstelle unter den erlaubten Daten gefunden wurde, bevor Sie die Formulierung des Modells optimieren.
Halluzinationen: Schritt für Schritt.
- 01
Vorbereiten
Bestimmen Sie, welche Aussagen belegt werden müssen und welche Informationsquellen zulässig sind.
- 02
In Retrieval-Augmented Generation umsetzen
Lassen Sie Belege mitliefern und prüfen Sie deren tatsächliche Aussage. Bei fehlenden Belegen muss das System Unsicherheit oder fehlendes Wissen mitteilen.
- 03
Im tatsächlichen Projekt prüfen
Prüfen Sie Belegtreue, fehlende Fundstellen, veraltete Dokumente und Rechte zwischen getrennten Datenbeständen. Ein guter Suchtreffer ist noch keine automatisch korrekte Antwort.
Beispiel zur Überprüfung
So lässt sich das Ergebnis prüfen.
Als Projektkontext dient einen internen Wissensassistenten mit aktuellen Handbüchern. Der folgende Prüffall ist eine Vorlage für diese Aufgabe und kein Bericht über eine Kundenmessung.
- Eingabe / Auslöser
- Eine Frage zu einer belegten Information und eine bewusst unbeantwortbare Frage
- Erwartetes Ergebnis
- Die belegte Antwort verweist auf eine passende Quelle; die unbeantwortbare erzeugt keine erfundene Tatsache.
- Fehler- oder Grenzfall
- Eine Quellenadresse, die existiert, wird nicht automatisch als Beleg für eine beliebige Aussage akzeptiert.
Abnahme und typische Fehler.
- Das System fragt nach oder nennt fehlende Informationen.
- Eine Quellenadresse, die existiert, wird nicht automatisch als Beleg für eine beliebige Aussage akzeptiert.
- Retrieval verbessert die Grundlage einer Antwort, garantiert aber weder Vollständigkeit noch Korrektheit.
Typischer Fehler
Selbstsicherer Ton ist kein Korrektheitsbeleg.
Quellen und Versionshinweis
Die Anleitung beschreibt das Vorgehen; konkrete APIs, Produktfunktionen und Laufzeitgrenzen müssen zur eingesetzten Version passen. Halten Sie Version, Konfiguration und Prüfergebnis im Projekt fest und vergleichen Sie die verlinkte Dokumentation bei Änderungen.
