„Faithfulness“ kurz erklärt + Minimal-Eval (2 Beispiele)

Faithfulness bedeutet: Eine Antwort bleibt strikt bei den vorliegenden Quellen/Informationen und erfindet nichts dazu. Aussagen sind überprüfbar, korrekt zitiert und enthalten keine spekulativen Ergänzungen.

Warum wichtig:

• Verhindert Halluzinationen und Fehlschlüsse.

• Erhöht Nachvollziehbarkeit und Compliance (Audit).

• Spart Zeit in Review und Abnahme.

Minimal-Eval – Vorgehen in 60 Sekunden:
1) Quellenabgleich: Deckt jede Kernaussage mindestens eine Quelle?
2) Worttreue/Paraphrase: Gibt die Antwort den Sinn korrekt wieder (ohne Bedeutungsverschiebung)?
3) Lücken-Markierung: Fehlt etwas, steht explizit „Nicht in den Quellen“?
4) Zahlen/Normen: Stimmen Werte/Zitate exakt (Einheiten, Datum, Abschnitt)?
5) Urteil: „Faithful“ (ja/nein) + 1 Satz Begründung.

Beispiel 1 – „Faithful: JA“

Quellen:

• Doku A, Abschn. 3.1, 2024-05: „Radialtoleranz Lager X: ±0,02 mm“

• Doku B, Abschn. 2.4, 2023-11: „Material: 100Cr6“

Antwort:

• „Lager X hat eine Radialtoleranz von ±0,02 mm und besteht aus 100Cr6. Quellen: [Doku A] (3.1, 2024‑05), [Doku B] (2.4, 2023‑11).“

Eval:

• Quellenabdeckung: ja

• Worttreue: ja

• Lücken-Markierung: nicht nötig

• Zahlen/Normen: korrekt

• Urteil: Faithful = JA (beide Aussagen 1:1 gedeckt)

Beispiel 2 – „Faithful: NEIN“

Quellen:

• Doku C, Abschn. 5.2, 2022-09: „Temperaturbereich getestet: −10 bis +60 °C“

• Keine Quelle zu „Wartungsintervall 12 Monate“

Antwort:

• „Das Lager ist für −10 bis +60 °C geeignet und sollte alle 12 Monate gewartet werden. Quelle: [Doku C] (5.2, 2022‑09).“

Eval:

• Quellenabdeckung: Temperatur ja, Wartungsintervall nein

• Worttreue: Temperatur ok; Wartung unbelegt

• Lücken-Markierung: fehlt („Nicht in den Quellen“ nicht verwendet)

• Zahlen/Normen: Datum/Abschnitt korrekt für Temperatur

• Urteil: Faithful = NEIN (unbelegte Wartungsempfehlung)

Copy & Paste – Mini-Eval-Checkliste:

Faithfulness-Check:
- [ ] Jede Kernaussage durch Quelle(n) gedeckt (Titel, Abschnitt/ID, Datum)
- [ ] Sinngetreu paraphrasiert, keine Bedeutungsverschiebung
- [ ] Lücken als "Nicht in den Quellen" markiert
- [ ] Zahlen/Einheiten/Normen exakt übernommen
Ergebnis: Faithful = {JA/NEIN}. Begründung: {1 Satz}.

Typische Fehler und Fixes:

• Behauptungen ohne Beleg → Fix: Aussage streichen oder als Lücke kennzeichnen.

• „Weichzeichnen“ von Aussagen → Fix: Originalaussage eng paraphrasieren, keine neuen Claims.

• Unklare Quellenangaben → Fix: Titel + Abschnitt/ID + Datum verpflichtend nennen.