Faithfulness
Abkürzungen / Synonyme: Faktenbindung
Kurzdefinition
Die Metrik, die misst, ob die Antwort eines Modells ausschliesslich auf den bereitgestellten Quellen basiert.
Ausführliche Erklärung
Faithfulness (Quellentreue) ist eine zentrale Metrik der RAG-Evaluation. Sie misst, ob jede Aussage einer Antwort tatsächlich durch die bereitgestellten Quellen gedeckt ist – also ob das Modell «treu» beim Kontext bleibt oder halluziniert. Eine hohe Faithfulness bedeutet, dass die Antwort nichts behauptet, was nicht belegbar ist. Sinkt der Wert, deutet das auf zu schwaches Retrieval, zu grosse Chunks oder einen zu nachgiebigen Prompt hin.
Beispiel
Antwortet das System «Die Frist beträgt 30 Tage», obwohl die Quelle 14 Tage nennt, ist die Faithfulness verletzt – ein klarer Hinweis auf eine Halluzination.
Im ausführlichen Fachartikel erklären wir Faithfulness mit Architektur, Praxisbeispielen und Best Practices im Detail: