Respuesta directa
Un Truth Pack es un paquete de pruebas versionado que contiene las afirmaciones utilizadas como referencia de auditoría y el motivo por el que se aceptó cada una. Mantenga cada afirmación separada y registre entidad, alcance, tiempo de vigencia, fuente, autoridad de la fuente, independencia, conflictos y juicio humano. Cuando las pruebas entren en conflicto, no elija automáticamente la frase más repetida. Compare el registro autorizado adecuado para el tipo de afirmación, las pruebas directas, el momento y el alcance. Si no puede alcanzarse una conclusión segura, no la invente; deje el estado UNRESOLVED.
En lenguaje claro
Imagine que comprueba el resultado de un partido. El recuerdo de una persona, una captura antigua y el acta oficial pueden discrepar. Establezca primero qué partido y fecha se quieren comprobar y busque después el registro con autoridad y actualidad suficientes. Si los registros siguen en conflicto, no adivine.
Por qué importa
Sin una referencia estable, un auditor puede marcar la misma respuesta como correcta y otro como incorrecta. Las pruebas obsoletas o de la entidad equivocada pueden corromper toda la medición. Ocultar la incertidumbre crea una falsa confianza en que se estableció la verdad.
No confundir
- Una declaración canónica es lo que una entidad afirma en su superficie oficial; no es necesariamente verificación independiente.
- Un registro autorizado es una fuente facultada para decidir o registrar un tipo concreto de afirmación.
- Una prueba independiente se origina separadamente de quien afirma, pero aun así puede ser errónea.
- El juicio humano es la decisión razonada entre fuentes; no sustituye a esas fuentes.
- UNRESOLVED declara explícitamente que las pruebas son insuficientes o contradictorias para juzgar con seguridad.
Qué hacer
- Fije entidad, tipos de afirmación, momento, geografía y contexto de uso antes de la auditoría.
- Divida las descripciones largas en afirmaciones atómicas verificables por separado.
- Para cada afirmación, recopile registros primarios, declaración canónica y las pruebas independientes necesarias.
- Conserve copia de la fuente, fecha de acceso, versión, hash del archivo y relación de procedencia.
- Evalúe los conflictos según autoridad, carácter directo, actualidad, alcance e independencia de la fuente.
- Registre juicio, motivos y responsable de la decisión; utilice UNRESOLVED si no es posible juzgar con seguridad.
- Versione el Truth Pack y muestre qué afirmación cambió y cuándo a medida que cambia la realidad.
Cómo auditarlo
- ¿Se creó el Truth Pack para la entidad, el alcance y el momento correctos?
- ¿Tiene cada afirmación relevante un registro separado y un vínculo probatorio?
- ¿Se presentó una declaración de primera parte como verificación independiente?
- ¿Se conservaron procedencia, versión, fecha de vigencia e integridad de las fuentes?
- ¿Sigue la decisión sobre conflictos criterios predefinidos y una justificación registrada?
- ¿Sustituyeron la preferencia del auditor o la repetición mayoritaria a las pruebas?
- ¿Se marcaron los casos no resueltos como UNRESOLVED en lugar de fingir certeza?
Límite
Algunos hechos cambian con el tiempo, algunos conceptos son interpretativos y algunas disputas solo puede resolverlas una autoridad competente. Un Truth Pack no afirma una verdad absoluta y eterna; es un paquete de referencia auditable para un alcance y momento definidos.
Recuérdalo en una frase
La respuesta correcta no es la que más se repite, sino la que puede contrastarse con las pruebas más adecuadas.
Fuentes de este registro
- S35W3C, *PROV-O: The PROV Ontology*Estándar
- S38NIST AI 600-1, *Artificial Intelligence Risk Management Framework: Generative Artificial Intelligence Profile*Guía institucional voluntaria orientada a estándares
- S44NIST, *AI Risk Management Framework Playbook* y AI RMF CoreGuía voluntaria de aplicación
- S50NIST AI 100-1, *Artificial Intelligence Risk Management Framework (AI RMF 1.0)*Marco institucional voluntario orientado a estándares