Méthodologie ouverte

Comment consulter la méthodologie de Veridi

La méthodologie complète de Veridi est publiée sous forme de documents Markdown. Ce sont les mêmes fichiers que l’IA suit lorsqu’elle effectue une vérification des faits ; il n’y a aucune couche cachée ni processus propriétaire. Ce que vous voyez est ce qui est exécuté.

Les fichiers de la méthodologie

Système principal

FichierFonction
Triage_Agent_Main_Prompt.mdLa consigne système principale. Définit la classification des affirmations, l’évaluation de la complexité et la logique de routage.
System_Flow_v2.mdDiagramme d’architecture montrant le parcours d’une affirmation dans le système — de l’entrée au triage, à l’invocation des spécialistes et à la sortie intégrée.
Output_Format_Standard.mdDéfinit les neuf catégories de verdicts, la structure de sortie et les exigences d’annotation.
Verdict_Decision_Trees.mdLogique de décision explicite pour résoudre les cas frontières entre verdicts, notamment TROMPEUR vs MANQUE DE CONTEXTE et MIXTE vs MAJORITAIREMENT FAUX.

Évaluation des preuves

FichierFonction
Source_Hierarchy_Triage_Addendum_v2.mdLe système de classification des sources en quatre niveaux avec plafonds de confiance et procédures de vérification de l’indépendance.
Confidence_Calibration_Framework.mdPlafonds de confiance par niveau, coefficients de fiabilité disciplinaire avec étiquettes d’honnêteté du sourçage, et règles d’interaction entre eux.
Institutional_Reliability_Index.mdÉvaluations de fiabilité par agence et par fonction pour les institutions dont la production pourrait avoir été compromise. Inclut les niveaux de dégradation, les indicateurs observables et les ancrages de comparaison.

Contre-mesures anti-manipulation

FichierFonction
Gaming_Countermeasures.mdProcédures de détection pour les 11 vecteurs d’attaque de désinformation. Inclut la liste de contrôle de 14 points appliquée avant tout verdict dépassant 70 % de confiance.

Spécialistes de domaine

FichierFonction
Scientific_Claims_Specialist.mdCadre d’évaluation des affirmations scientifiques : qualité des études, évaluation méthodologique, évaluation du consensus.
Medical_Health_Specialist.mdÉvaluation des affirmations médicales et de santé publique, y compris l’évaluation des essais cliniques et des affirmations pharmacologiques.
Legal_Regulatory_Specialist.mdÉvaluation des affirmations juridiques et réglementaires : interprétation des lois, analyse des décisions judiciaires, procédure réglementaire.
Financial_Economic_Specialist.mdÉvaluation des affirmations financières et économiques : données de marché, analyse institutionnelle, affirmations statistiques.
Electoral_Voting_Specialist.mdÉvaluation des affirmations électorales et de vote : procédures électorales, données sur les électeurs, analyse des politiques.
Historical_Context_Specialist.mdÉvaluation des affirmations historiques : contextualisation, évaluation historiographique, vérification des sources de documents historiques.
Technology_Digital_Specialist.mdÉvaluation des affirmations technologiques et numériques : analyse des plateformes, criminalistique numérique, détection de contenu généré par l’IA.
Propaganda_Deconstruction_Specialist_v2.mdAnalyse de la propagande et des narratifs : identification des techniques rhétoriques, déconstruction des narratifs, reconnaissance des schémas de désinformation.
Breaking_Event_Analyst.mdCadre d’évaluation des affirmations portant sur des événements de moins de 72 heures : construction de chronologie, cartographie de l’écosystème des sources, inventaire des incertitudes.

Cadres complémentaires

FichierFonction
Statistical_Claims_Checklist.mdÉvaluation structurée des affirmations statistiques : validation méthodologique, évaluation de l’échantillon, détection du picorage de données.
Infrastructure_Authenticity_Addendum.mdVérification de l’infrastructure numérique : enregistrement de domaine, analyse de l’hébergement, évaluation de l’authenticité du site.

Documents opérationnels

FichierFonction
Regression_Testing_Framework.mdComment la méthodologie est testée pour assurer la cohérence entre les versions.
Crisis_Communication_Plan.mdProcédures à suivre lorsque Veridi produit une évaluation incorrecte.
Legal_Escalation_Path.mdProcédures pour les affirmations ayant des implications juridiques.
Volunteer_Safety_Framework.mdProcédures de sécurité pour les volontaires travaillant avec du contenu sensible ou éprouvant.
CHANGELOG.mdHistorique des modifications de la méthodologie.

Validation

FichierFonction
golden_test_set_A.md25 affirmations de test interdomaines avec vérité documentée (GTS-001 à GTS-025).
golden_test_set_B.md25 affirmations de test ciblant les faiblesses (GTS-026 à GTS-050).
golden_test_set_C.md20 affirmations de test comblant les lacunes (GTS-051 à GTS-070).
adversarial_test_suite.md12 affirmations adversariales à vecteur unique (ADV-001 à ADV-012).
adversarial_test_suite_v2.md12 affirmations adversariales multivecteurs (ADV-013 à ADV-024).
validation-results/Fiches de résultats par affirmation avec preuves et raisonnement complets.

Ce qu’il faut examiner

Si vous révisez la méthodologie, voici les points les plus importants à évaluer :

  1. Cohérence de l’arbre de décision. Les arbres de décision des verdicts produisent-ils le même résultat quel que soit le chemin emprunté ? Y a-t-il des contradictions entre les arbres et les définitions du format de sortie ?

  2. Complétude de la hiérarchie des sources. Existe-t-il des types de sources qui ne s’intègrent pas proprement dans les quatre niveaux ? Y a-t-il des cas limites où le plafond de confiance produit des résultats déraisonnables ?

  3. Couverture des contre-mesures anti-manipulation. Existe-t-il des techniques de désinformation non couvertes par les onze vecteurs ? Pouvez-vous construire une affirmation qui devrait être détectée mais ne le serait pas ?

  4. Méthodologie d’évaluation de l’IFI. Les niveaux de dégradation sont-ils bien définis ? Les ancrages de comparaison sont-ils véritablement indépendants ? L’IFI lui-même pourrait-il être manipulé ?

  5. Calibrage de la confiance. Les coefficients de fiabilité disciplinaire sont-ils bien documentés ? L’interaction entre les plafonds par niveau et les coefficients disciplinaires produit-elle des résultats sensés dans les cas limites ?

Signaler des problèmes

Si vous trouvez une incohérence, une lacune ou une vulnérabilité dans la méthodologie, nous souhaitons en être informés. La méthodologie s’améliore précisément grâce à ce type d’examen externe.

Contact : veridi [at] nettercap.net