Direkte Antwort
Ein Truth Pack ist ein versioniertes Belegpaket mit den als Prüfreferenz verwendeten Aussagen und der Begründung ihrer Annahme. Führen Sie jede Aussage getrennt und erfassen Sie Entität, Umfang, Gültigkeitszeit, Quelle, Quellenbefugnis, Unabhängigkeit, Konflikte und menschliches Urteil. Wählen Sie bei Widersprüchen nicht automatisch den am häufigsten wiederholten Satz. Vergleichen Sie für die jeweilige Aussageart geeigneten maßgeblichen Datensatz, unmittelbaren Beleg, Zeit und Umfang. Ist keine sichere Schlussfolgerung möglich, erfinden Sie keine; lassen Sie den Status UNRESOLVED.
Einfach erklärt
Stellen Sie sich die Prüfung eines Spielergebnisses vor. Erinnerung einer Person, alter Screenshot und offizieller Spielbericht widersprechen sich. Bestimmen Sie zuerst Spiel und Datum und suchen Sie dann den befugten und zeitnahen Datensatz. Besteht der Widerspruch fort, raten Sie nicht.
Warum ist das wichtig?
Ohne stabile Referenz kann ein Prüfer dieselbe Antwort richtig und ein anderer falsch bewerten. Veraltete oder zur falschen Entität gehörende Belege können die gesamte Messung verfälschen. Verborgene Unsicherheit erzeugt falsche Gewissheit, Wahrheit sei festgestellt.
Nicht verwechseln
- Eine kanonische Aussage ist das, was eine Entität auf ihrer offiziellen Oberfläche sagt; sie ist nicht zwangsläufig unabhängige Verifizierung.
- Ein maßgeblicher Datensatz ist eine Quelle, die eine bestimmte Aussageart befugt entscheidet oder erfasst.
- Unabhängiger Beleg entsteht getrennt von der behauptenden Partei, kann aber falsch sein.
- Menschliches Urteil ist die begründete Entscheidung zwischen Quellen; es ersetzt die Quellen nicht.
- UNRESOLVED sagt ausdrücklich, dass Belege für ein sicheres Urteil unzureichend oder widersprüchlich sind.
Was ist zu tun?
- Fixieren Sie Entität, Aussagearten, Zeit, geografischen Raum und Nutzungskontext vor der Prüfung.
- Zerlegen Sie lange Beschreibungen in einzeln prüfbare atomare Aussagen.
- Sammeln Sie für jede Aussage Primärdatensätze, kanonische Aussage und erforderliche unabhängige Belege.
- Bewahren Sie Quellenkopie, Zugriffsdatum, Version, Dateihash und Provenienzbeziehung.
- Bewerten Sie Konflikte nach Quellenbefugnis, Unmittelbarkeit, Aktualität, Umfang und Unabhängigkeit.
- Erfassen Sie Urteil, Gründe und Entscheidungsverantwortlichen; verwenden Sie UNRESOLVED, wenn kein sicheres Urteil möglich ist.
- Versionieren Sie das Truth Pack und zeigen Sie bei veränderter Wirklichkeit, welche Aussage wann wechselte.
Wie wird geprüft?
- Wurde das Truth Pack für die richtige Entität, den richtigen Umfang und Zeitpunkt erstellt?
- Besitzt jede wesentliche Aussage einen eigenen Datensatz und Beleglink?
- Wurde eine Eigenaussage als unabhängige Verifizierung dargestellt?
- Wurden Provenienz, Version, Gültigkeitsdatum und Quellenintegrität bewahrt?
- Folgt die Konfliktentscheidung vordefinierten Kriterien und einer erfassten Begründung?
- Ersetzten Prüferpräferenz oder Mehrheitswiederholung den Beleg?
- Wurden ungeklärte Fälle als UNRESOLVED statt mit Scheingewissheit markiert?
Grenze
Manche Tatsachen ändern sich, manche Begriffe sind auslegungsbedürftig, und manche Streitfragen kann nur eine zuständige Stelle entscheiden. Ein Truth Pack beansprucht keine absolute, ewige Wahrheit; es ist ein prüfbares Referenzpaket für bestimmten Umfang und Zeitpunkt.
Merksatz
Die richtige Antwort ist nicht die am häufigsten wiederholte, sondern die am passendsten belegbare.
Quellen dieses Eintrags
- S35W3C, *PROV-O: The PROV Ontology*Standard
- S38NIST AI 600-1, *Artificial Intelligence Risk Management Framework: Generative Artificial Intelligence Profile*Freiwilliger, standardorientierter institutioneller Leitfaden
- S44NIST, *AI Risk Management Framework Playbook* und AI RMF CoreFreiwilliger Umsetzungsleitfaden
- S50NIST AI 100-1, *Artificial Intelligence Risk Management Framework (AI RMF 1.0)*Freiwilliges, standardorientiertes institutionelles Rahmenwerk

