Seminario de lectura crítica de los DIRD
Convierte un estudio de referencia provocador en un mapa rastreable de fuentes, supuestos, previsiones y afirmaciones comprobables.
Audita los Documentos de Referencia de Inteligencia de Defensa y la literatura que citan mediante la procedencia, las redes de citas, la reconstrucción de ecuaciones, la puntuación de previsiones, la comparación de niveles de evidencia, la revisión por un equipo rojo y un dosier crítico listo para publicar.
Antes de empezar
- • Itinerario de posgrado del nivel 5
- • Métodos de investigación y estadística
- • Soltura en la búsqueda de literatura técnica
Al terminar, podrás
- • Reconstruir el alcance, la procedencia y el encargo de un DIRD.
- • Rastrear cada afirmación central hasta una evidencia primaria o hasta una inferencia explícita.
- • Puntuar las previsiones frente a resultados fechados sin deriva por retrospectiva.
- • Publicar un dosier de evidencia reproducible y revisado de forma adversarial.
Modelo interactivo
Explora antes de calcular
Lección 1 de 3
Procedencia, propósito y anatomía del documento
¿Qué se le encargó hacer al documento y qué no estaba diseñado para establecer?
Un estudio de referencia puede repasar posibilidades, evaluar la relevancia estratégica o señalar lagunas de investigación. Su existencia, su patrocinador, su historial de clasificación o la autoría de expertos no convierten cada proposición que se discute en un resultado confirmado.
La lectura crítica empieza por la fecha, la versión, la autoría, la pregunta del encargo, el público al que va dirigido, los métodos, el horizonte temporal citado y la distinción entre evidencia reportada y análisis de escenarios.
Ejemplo resuelto
Un estudio dice que una tecnología podría ser transformadora si ocurren tres avances. ¿Cómo debería codificarse esa frase?
- 1. Márcala como condicional.
- 2. Extrae las tres dependencias.
- 3. Separa la previsión de impacto de la probabilidad.
- 4. Registra la fecha del estudio y el horizonte de la previsión.
Es un escenario condicional, no evidencia de que existieran la tecnología ni sus requisitos previos.
Pruébalo
Libro de cuentas de la anatomía del documento
Materiales: Un DIRD y una hoja de metadatos
- 1. Registra la procedencia y el propósito.
- 2. Traza el mapa de los tipos de sección.
- 3. Etiqueta las afirmaciones como informe, síntesis, inferencia o previsión.
- 4. Enumera las exclusiones explícitas y las incógnitas.
Fíjate: Los documentos suelen cambiar de modo epistémico de una sección a otra; una sola etiqueta global pierde esa estructura.
Comprueba lo que entendiste: ¿Establece un encargo gubernamental que un mecanismo discutido sea cierto?
Respuesta: No.
Establece que hay interés institucional en evaluarlo, no una confirmación experimental de cada afirmación.
Lección 2 de 3
Grafos de afirmaciones, cadenas de citas y reconstrucción de ecuaciones
¿De dónde procede cada enunciado cuantitativo y respalda la fuente citada esa misma proposición?
El blanqueo de citas ocurre cuando unas revisiones se citan entre sí hasta que un enunciado condicional o discutido parece zanjado. Un grafo de afirmaciones registra la proposición exacta, la localización en la fuente, el tipo de evidencia y las transformaciones entre documentos.
Las ecuaciones exigen comprobar unidades, supuestos, contornos y casos límite. Reproducir un resultado central suele revelar si una afirmación es una deducción, una elección de parámetros, una analogía o una extrapolación sin respaldo.
Ejemplo resuelto
Tres revisiones se citan entre sí para un mismo valor de eficiencia, pero ninguna aporta datos. ¿Cuál es el estado de la evidencia?
- 1. Rastrea la cita más antigua.
- 2. Busca el aparato o el cálculo primarios.
- 3. Registra que el valor se repite pero no está respaldado.
- 4. No cuentes revisiones repetidas como evidencia independiente.
La red de citas tiene recurrencia, no una confirmación empírica independiente.
Pruébalo
Grafo de cinco afirmaciones
Materiales: Un DIRD, sus referencias y una plantilla de grafo
- 1. Extrae cinco afirmaciones centrales al pie de la letra.
- 2. Rastrea cada una hasta la fuente accesible más antigua.
- 3. Etiqueta el tipo de arista y la confianza.
- 4. Reproduce un resultado numérico.
Fíjate: La afirmación que parece más fuerte puede apoyarse en la cadena de citas más débil o más transformada.
Comprueba lo que entendiste: ¿Cuándo cuentan dos artículos como respaldo independiente?
Respuesta: Cuando su evidencia o sus deducciones son de verdad independientes, en lugar de reutilizar la misma fuente, el mismo aparato o el mismo conjunto de datos.
La pluralidad bibliográfica por sí sola no basta.
Lección 3 de 3
Puntuación de previsiones, equipos rojos y publicación del dosier
¿Qué expectativas sobrevivieron al tiempo, y qué diría hoy un crítico justo y qué diría un defensor?
Las previsiones deben congelarse con su redacción original y puntuarse frente a resultados fechados usando categorías declaradas de antemano. Las afirmaciones vagas de relevancia no deberían ascender a predicciones cuantitativas acertadas.
Un equipo rojo identifica supuestos ocultos, explicaciones convencionales y controles que faltan. Un equipo defensor reconstruye la versión más fuerte del programa. El dosier final conserva ambos y nombra la evidencia que movería la confianza.
Ejemplo resuelto
¿Cómo debería puntuarse en 2026 una previsión de 2010 sobre un demostrador de laboratorio en diez años si solo existen simulaciones?
- 1. Congela la definición original del hito.
- 2. Busca un demostrador físico dentro del plazo.
- 3. No sustituyas por simulaciones salvo que se permitieran desde el principio.
- 4. Puntúala como incumplida y documenta aparte el progreso parcial.
La previsión del demostrador está incumplida; el progreso en simulación es un resultado aparte.
Pruébalo
Revisión adversarial del dosier
Materiales: Un borrador de dosier y dos papeles de revisor
- 1. Asigna el papel de defensor y el de crítico.
- 2. Exige objeciones localizadas en la fuente.
- 3. Resuelve los desacuerdos sobre hechos.
- 4. Publica de forma explícita las diferencias de juicio que queden.
Fíjate: La revisión adversarial mejora un dosier cuando los desacuerdos se hacen inspeccionables en lugar de promediarse hasta desaparecer.
Comprueba lo que entendiste: ¿Qué hace reproducible la puntuación de una previsión?
Respuesta: Una redacción congelada, evidencia fechada, categorías explícitas y una regla de puntuación documentada.
Si no, la retrospectiva puede redefinir el éxito.
De la fórmula al significado
Lee la ecuación en lenguaje corriente.
P(claim|evidence)∝P(evidence|claim)P(claim)
La evidencia actualiza una afirmación en proporción a lo distinto que la predigan las explicaciones rivales.
Brier=(1/N)Σ(p_i−o_i)²
La puntuación de Brier mide la calibración de una previsión probabilística frente a resultados binarios.
w_source=w_primary·w_independence·w_method
Un peso heurístico transparente puede registrar la procedencia, la independencia y la solidez metodológica sin pretender ser una puntuación universal de verdad.
Práctica independiente
Serie de problemas
Resuelve cada problema antes de abrir la pista y la solución.
1. Dos artículos reutilizan un mismo experimento. ¿Cuántos conjuntos de datos empíricos independientes respaldan la afirmación?
Ver la pista
Cuenta fuentes de evidencia, no publicaciones.
Ver la solución
Uno.
2. Falla una previsión a la que se asignó p=0.8. ¿Cuál es su puntuación de Brier para ese único ítem?
Ver la pista
Usa (p−o)² con o=0.
Ver la solución
0.64.
3. ¿Por qué debe conservar las condiciones de contorno de la fuente la reproducción de una ecuación?
Ver la pista
Piensa si la solución es única o aplicable sin ellas.
Ver la solución
Las condiciones de contorno seleccionan la solución física y pueden controlar la magnitud del resultado, o incluso su signo.
Taller de derivación
Construye el resultado, línea a línea.
Mantén las suposiciones a la vista para que la matemática siga siendo auditable.
Punto de partida
La actualización de la evidencia por el factor de Bayes
Posterior odds = prior odds × likelihood ratio
- 1. Escribe la razón de probabilidades entre la afirmación y la alternativa.
- 2. Calcula la verosimilitud de la observación bajo cada una.
- 3. Forma su cociente.
- 4. Multiplica sin cambiar la probabilidad previa congelada después de ver los datos.
O_post=O_prior·P(E|H₁)/P(E|H₀)
La evidencia importa por su capacidad de discriminar, no por el dramatismo ni por el prestigio institucional.
Punto de partida
La descomposición de la calibración de previsiones
Mean squared probability error over binned forecasts
- 1. Agrupa las previsiones por la probabilidad declarada.
- 2. Calcula la frecuencia observada en cada grupo.
- 3. Separa la calibración de la resolución y de la incertidumbre de la tasa base.
- 4. Examina los límites por el tamaño de la muestra.
Brier performance reflects calibration, resolution, and outcome uncertainty
Un programa de previsiones debe juzgarse a lo largo de muchas predicciones congeladas, no por un solo acierto celebrado.
Cuaderno computacional
Convierte el modelo en un experimento.
Cuaderno de auditoría de grafos de afirmaciones y de previsiones
¿Qué afirmaciones de un DIRD elegido tienen respaldo independiente, cálculos reproducibles y resultados calibrados?
Entradas
- • Texto del documento y lista de referencias
- • Metadatos de las fuentes primarias
- • Previsiones congeladas y evidencia de resultados fechada
Algoritmo
- 1. Extrae las afirmaciones atómicas y las aristas de citas.
- 2. Elimina duplicados en la evidencia subyacente.
- 3. Reproduce los cálculos seleccionados.
- 4. Puntúa las previsiones y las actualizaciones de confianza.
Evidencia que producir
- • Grafo de afirmaciones legible por máquina
- • Cuaderno de reproducción
- • Tabla de puntuación de previsiones y dosier de evidencia
Taller de lectura de artículos
Interroga la fuente, no su reputación.
Reconstruye las suposiciones, reproduce un cálculo y detente en el límite de la evidencia publicada.
Dosier crítico de un estudio de referencia
¿Qué seguiría siendo creíble si se quitaran el patrocinador, la reputación de los autores y los relatos posteriores?
- 1. Reconstruye el propósito y la procedencia.
- 2. Rastrea las afirmaciones hasta la evidencia primaria.
- 3. Reproduce el paso cuantitativo central.
- 4. Puntúa las previsiones y los supuestos sin resolver.
Cálculo que reproducir: Reproduce la estimación del estudio más relevante para tomar decisiones, con un análisis de sensibilidad.
Límite de la evidencia: Un DIRD puede ser un trabajo estratégico valioso y contener a la vez afirmaciones establecidas, discutidas, especulativas y desfasadas que hay que calificar una a una.
Defensa oral de posgrado
Defiende una afirmación acotada bajo presión.
Argumenta el apoyo más fuerte, plantea con justicia la objeción más fuerte e identifica la evidencia que de verdad decidiría la cuestión.
Proposición
Los DIRD deberían enseñarse como mapas de investigación auditables, ni descartarse como fantasía ni tratarse como verdad revelada.
- 1. Reúnen literatura técnica poco común y preguntas estratégicas.
- 2. Sus previsiones condicionales y sus redes de fuentes pueden generar programas comprobables.
- 3. Calificar afirmación por afirmación conserva el valor sin blanquear la incertidumbre.
Objeción más fuerte: El contexto del encargo y una selección sesgada de temas pueden amplificar especulación de baja calidad o motivada estratégicamente.
Evidencia decisiva: La reproducción independiente de los cálculos centrales y el acierto prospectivo de predicciones discriminantes prerregistradas y derivadas de los documentos.
Práctica de investigación
Haz el trabajo inspeccionable antes de hacerlo impresionante.
Prerregistra la prueba decisiva, empaqueta cada dependencia y supera puertas de hito explícitas antes de ampliar la interpretación.
Publica una auditoría abierta de un DIRD
¿Qué tres afirmaciones merecen más ahora una reproducción o una prueba decisiva?
Prerregistro
- • Congela las definiciones de las afirmaciones y las reglas de inclusión.
- • Define la independencia de las fuentes y la puntuación de las previsiones.
- • Nombra los umbrales de cambio de confianza.
Paquete de reproducibilidad
- • Manifiesto de documentos y versiones, con sus hashes
- • Grafo de afirmaciones con la localización de las fuentes
- • Cuadernos de cálculo y conjunto de datos de resultados
- • Desacuerdos entre revisores y registro de cambios
Puertas de hito
- 1. Auditoría de procedencia y de fuentes primarias
- 2. Reproducción independiente de los cálculos
- 3. Resolución de la revisión adversarial
- 4. Dosier público con apéndice legible por máquina
Sigue hacia la evidencia
Próxima lectura, con sus fuentes
Fuentes y evidencia
El corpus completo y la taxonomía de fuentes usados para la reconstrucción.
Grafo de conocimiento
Navega por las afirmaciones, las personas, los capítulos y las relaciones entre fuentes.
Método y niveles de confianza
El contrato público para separar los enunciados medidos, los discutidos y los especulativos.