Séminaire de lecture critique des DIRD
Transformez une étude de référence provocante en une carte traçable de sources, d'hypothèses, de prévisions et d'affirmations testables.
Auditez les Defense Intelligence Reference Documents et la littérature qu'ils citent par la provenance, les réseaux de citations, la reconstruction des équations, la notation des prévisions, la comparaison des niveaux de preuve, la revue par équipe adverse et un dossier critique prêt à publier.
Avant de commencer
- • Le parcours de niveau 5 en études supérieures
- • Méthodes de recherche et statistiques
- • Aisance dans la recherche de littérature technique
À la fin, vous saurez
- • Reconstruire la portée, la provenance et la commande d'un DIRD.
- • Ramener chaque affirmation centrale à une preuve primaire ou à une inférence explicite.
- • Noter les prévisions face à des résultats datés, sans dérive rétrospective.
- • Publier un dossier de preuves reproductible et relu de façon contradictoire.
Modèle interactif
Explorez avant de calculer
Leçon 1 sur 3
Provenance, finalité et anatomie du document
Que ce document a-t-il été commandé pour faire, et que n'était-il pas conçu pour établir ?
Une étude de référence peut passer en revue des possibilités, évaluer une pertinence stratégique ou repérer des lacunes de recherche. Son existence, son commanditaire, son historique de classification ou la notoriété de ses auteurs ne transforment pas chaque proposition discutée en résultat confirmé.
La lecture critique commence par la date, la version, les auteurs, la question posée à la commande, le public visé, les méthodes, l'horizon temporel cité, et la distinction entre preuves rapportées et analyse de scénarios.
Exemple résolu
Une étude affirme qu'une technologie pourrait tout changer si trois percées surviennent. Comment encoder cette phrase ?
- 1. Marquez-la comme conditionnelle.
- 2. Extrayez les trois dépendances.
- 3. Séparez la prévision d'impact de la probabilité.
- 4. Notez la date de l'étude et l'horizon de la prévision.
C'est un scénario conditionnel, non la preuve que la technologie ou ses prérequis existaient.
Essayez
Grand livre de l'anatomie d'un document
Matériel : Un DIRD et sa fiche de métadonnées
- 1. Consignez la provenance et la finalité.
- 2. Cartographiez les types de sections.
- 3. Étiquetez chaque affirmation comme rapport, synthèse, inférence ou prévision.
- 4. Listez les exclusions explicites et les inconnues.
Observez : Les documents changent souvent de mode épistémique d'une section à l'autre ; une étiquette globale unique perd cette structure.
Vérifiez votre compréhension : Une commande gouvernementale établit-elle qu'un mécanisme discuté est vrai ?
Réponse : Non.
Elle établit un intérêt institutionnel pour une évaluation, non la confirmation expérimentale de chaque affirmation.
Leçon 2 sur 3
Graphes d'affirmations, chaînes de citations et reconstruction des équations
D'où vient chaque énoncé quantitatif, et la source citée soutient-elle bien la même proposition ?
Le blanchiment de citations survient quand des revues se citent l'une l'autre jusqu'à ce qu'un énoncé conditionnel ou contesté paraisse acquis. Un graphe d'affirmations consigne la proposition exacte, l'emplacement de la source, le type de preuve et les transformations d'un document à l'autre.
Les équations exigent des vérifications d'unités, d'hypothèses, de conditions aux limites et de cas limites. Reproduire un résultat central révèle souvent si une affirmation est une dérivation, un choix de paramètre, une analogie ou une extrapolation non étayée.
Exemple résolu
Trois revues se citent mutuellement pour la même valeur de rendement, mais aucune ne rapporte de données. Quel est le statut de preuve ?
- 1. Remontez la citation la plus ancienne.
- 2. Cherchez un appareillage ou un calcul primaire.
- 3. Notez que la valeur est répétée mais non étayée.
- 4. Ne comptez pas des revues répétées comme des preuves indépendantes.
Le réseau de citations présente une récurrence, non une confirmation empirique indépendante.
Essayez
Graphe à cinq affirmations
Matériel : Un DIRD, ses références et un modèle de graphe
- 1. Extrayez cinq affirmations centrales, mot pour mot.
- 2. Remontez chacune jusqu'à la source la plus ancienne accessible.
- 3. Étiquetez le type d'arête et le niveau de confiance.
- 4. Reproduisez un résultat numérique.
Observez : L'affirmation qui semble la plus solide peut reposer sur la chaîne de citations la plus faible ou la plus transformée.
Vérifiez votre compréhension : Quand deux articles comptent-ils comme un soutien indépendant ?
Réponse : Quand leurs preuves ou leurs dérivations sont réellement indépendantes, et non une réutilisation de la même source, du même appareillage ou du même jeu de données.
La pluralité bibliographique ne suffit pas.
Leçon 3 sur 3
Notation des prévisions, équipes adverses et publication du dossier
Quelles attentes ont résisté au temps, et que diraient aujourd'hui un critique et un avocat équitables ?
Les prévisions doivent être figées dans leur formulation d'origine et notées face à des résultats datés, selon des catégories déclarées à l'avance. Des affirmations vagues de pertinence ne doivent pas être promues en prédictions quantitatives réussies.
Une équipe adverse repère les hypothèses cachées, les explications conventionnelles et les contrôles manquants. Un « steelman » reconstruit la version la plus forte du programme. Le dossier final conserve les deux et nomme la preuve qui ferait bouger la confiance.
Exemple résolu
Comment noter en 2026 une prévision de 2010 annonçant un démonstrateur de laboratoire sous dix ans, si seules des simulations existent ?
- 1. Figez la définition d'origine du jalon.
- 2. Cherchez un démonstrateur physique à l'échéance.
- 3. Ne substituez pas des simulations, sauf si c'était permis à l'origine.
- 4. Notez la prévision comme non atteinte et documentez à part les progrès partiels.
La prévision de démonstrateur n'est pas atteinte ; les progrès en simulation sont un résultat distinct.
Essayez
Revue contradictoire du dossier
Matériel : Un brouillon de dossier et deux rôles de relecteur
- 1. Attribuez les rôles d'avocat et de critique.
- 2. Exigez des objections localisées dans les sources.
- 3. Réglez les désaccords factuels.
- 4. Publiez explicitement les divergences de jugement restantes.
Observez : La revue contradictoire améliore un dossier quand les désaccords sont rendus inspectables plutôt que moyennés.
Vérifiez votre compréhension : Qu'est-ce qui rend une notation de prévision reproductible ?
Réponse : Une formulation figée, des preuves datées, des catégories explicites et une règle de notation documentée.
Sinon, le regard rétrospectif peut redéfinir le succès.
De la formule au sens
Lisez l'équation en langage courant.
P(claim|evidence)∝P(evidence|claim)P(claim)
Une preuve met à jour une affirmation à proportion de l'écart entre les prédictions des explications concurrentes.
Brier=(1/N)Σ(p_i−o_i)²
Le score de Brier mesure la calibration d'une prévision probabiliste face à des résultats binaires.
w_source=w_primary·w_independence·w_method
Un poids heuristique transparent peut consigner provenance, indépendance et solidité méthodologique sans prétendre être un score universel de vérité.
Pratique autonome
Série d'exercices
Travaillez chaque exercice avant d'ouvrir l'indice et la solution.
1. Deux articles réutilisent une même expérience. Combien de jeux de données empiriques indépendants soutiennent l'affirmation ?
Voir l'indice
Comptez les sources de preuve, pas les publications.
Voir la solution
Un seul.
2. Une prévision affectée de p=0,8 échoue. Quel est son score de Brier sur cet item ?
Voir l'indice
Utilisez (p−o)² avec o=0.
Voir la solution
0,64.
3. Pourquoi la reproduction d'une équation doit-elle conserver les conditions aux limites de la source ?
Voir l'indice
Demandez-vous si la solution est unique ou applicable sans elles.
Voir la solution
Les conditions aux limites sélectionnent la solution physique et peuvent contrôler l'ordre de grandeur du résultat, voire son signe.
Atelier de dérivation
Construisez le résultat, ligne par ligne.
Gardez les hypothèses visibles pour que les mathématiques restent vérifiables.
Point de départ
La mise à jour de preuve par facteur de Bayes
Posterior odds = prior odds × likelihood ratio
- 1. Écrivez la cote de l'affirmation contre son alternative.
- 2. Calculez la vraisemblance de l'observation sous chacune.
- 3. Formez leur rapport.
- 4. Multipliez sans changer l'a priori figé après avoir vu les données.
O_post=O_prior·P(E|H₁)/P(E|H₀)
Une preuve compte par son pouvoir de discrimination, non par son côté spectaculaire ou le prestige institutionnel.
Point de départ
La décomposition de la calibration des prévisions
Mean squared probability error over binned forecasts
- 1. Regroupez les prévisions par probabilité annoncée.
- 2. Calculez la fréquence observée dans chaque classe.
- 3. Séparez la calibration de la résolution et de l'incertitude sur le taux de base.
- 4. Examinez les limites liées à la taille d'échantillon.
Brier performance reflects calibration, resolution, and outcome uncertainty
Un programme de prévision se juge sur de nombreuses prédictions figées, pas sur un succès célébré.
Carnet de calcul
Transformez le modèle en expérience.
Carnet d'audit du graphe d'affirmations et des prévisions
Quelles affirmations d'un DIRD choisi bénéficient d'un soutien indépendant, de calculs reproductibles et de résultats calibrés ?
Entrées
- • Texte du document et liste des références
- • Métadonnées des sources primaires
- • Prévisions figées et preuves datées des résultats
Algorithme
- 1. Extrayez les affirmations atomiques et les arêtes de citation.
- 2. Dédupliquez les preuves sous-jacentes.
- 3. Reproduisez les calculs retenus.
- 4. Notez les prévisions et les mises à jour de confiance.
Preuves à produire
- • Graphe d'affirmations lisible par machine
- • Carnet de reproduction
- • Tableau de notation des prévisions et dossier de preuves
Atelier de lecture d'articles
Interrogez la source, pas sa réputation.
Reconstruisez les hypothèses, reproduisez un calcul et arrêtez-vous à la limite des preuves rapportées.
Dossier critique d'une étude de référence
Que resterait-il de crédible si l'on retirait le commanditaire, la réputation des auteurs et les récits ultérieurs ?
- 1. Reconstruisez la finalité et la provenance.
- 2. Ramenez les affirmations aux preuves primaires.
- 3. Reproduisez l'étape quantitative centrale.
- 4. Notez les prévisions et les hypothèses non tranchées.
Calcul à reproduire : Reproduisez l'estimation la plus déterminante pour la décision, avec une analyse de sensibilité.
Limite des preuves : Un DIRD peut être une contribution stratégique précieuse tout en contenant des affirmations établies, contestées, spéculatives et périmées, qu'il faut noter une par une.
Soutenance orale
Défendez une affirmation bornée sous pression.
Plaidez le soutien le plus fort, exposez loyalement l'objection la plus forte et identifiez la preuve qui trancherait vraiment.
Proposition
Les DIRD doivent s'enseigner comme des cartes de recherche vérifiables, ni rejetés comme fantaisie, ni reçus comme vérité révélée.
- 1. Ils rassemblent une littérature technique peu commune et des questions stratégiques.
- 2. Leurs prévisions conditionnelles et leurs réseaux de sources peuvent engendrer des programmes testables.
- 3. Une notation affirmation par affirmation préserve la valeur sans blanchir l'incertitude.
Objection la plus forte : Le contexte de commande et un cadrage thématique sélectif peuvent amplifier une spéculation de faible qualité ou stratégiquement motivée.
Preuve décisive : La reproduction indépendante des calculs centraux et le succès prospectif de prédictions discriminantes préenregistrées, tirées des documents.
Stage de recherche
Rendez le travail inspectable avant de le rendre impressionnant.
Préenregistrez le test décisif, empaquetez chaque dépendance et franchissez des jalons explicites avant d'élargir l'interprétation.
Publier un audit ouvert d'un DIRD
Quelles trois affirmations méritent le plus, aujourd'hui, une reproduction ou un test décisif ?
Préenregistrement
- • Figez les définitions des affirmations et les règles d'inclusion.
- • Définissez l'indépendance des sources et la notation des prévisions.
- • Nommez les seuils de changement de confiance.
Paquet de reproductibilité
- • Manifeste des documents et versions, avec leurs empreintes
- • Graphe d'affirmations avec l'emplacement des sources
- • Carnets de calcul et jeu de données des résultats
- • Désaccords entre relecteurs et journal des modifications
Jalons
- 1. Audit de provenance et des sources primaires
- 2. Reproduction indépendante des calculs
- 3. Résolution de la revue contradictoire
- 4. Dossier public avec annexe lisible par machine
Poursuivez vers les preuves
Lecture suivante, avec ses sources
Sources et preuves
Le corpus complet et la taxonomie des sources utilisés pour la reconstruction.
Graphe de connaissances
Naviguez entre affirmations, personnes, chapitres et relations entre sources.
Méthode et niveaux de confiance
Le contrat public qui sépare les énoncés mesurés, contestés et spéculatifs.