Nivel 6 · Preparación para investigar · Evaluación avanzada
Tribunal independiente de reproducción y discrepancia
Haz que los artefactos sean portátiles, las reejecuciones independientes y los desacuerdos diagnosticables antes de declarar replicación o fallo.
Completa los tres desafíos. Muestra supuestos, unidades, incertidumbre y el límite entre cálculo, inferencia dependiente del modelo, observación y afirmación sin resolver.
Desafío 1 · derivación
Reconstruir la cadena de dependencias
Partiendo de un resultado reclamado, derivar el gráfico completo de dependencia a partir de la observación bruta mediante calibración, preprocesamiento, modelo, estadística y figura. Identifica cada parámetro que pueda cambiar la conclusión.
Entregables requeridos
- • Grafo de dependencias de estilo ejecutable
- • Parámetro y manifesto de versión
- • Resultado recalculado con seguimiento de suma de comprobación
Criterios de evaluación · 20 puntos
- • El gráfico está completo y ordenado: 8 puntos
- • Las versiones y parámetros son recuperables: 7 puntos
- • Recálculo coincide o explica el desajuste: 5 puntos
Desafío 2 · análisis
Cuantificar la discrepancia
Comparar resultados originales e independientes utilizando estimaciones de efectos conscientes de la incertidumbre y un modelo estructurado de discrepancia. Evalúe el protocolo, aparato, entorno, datos y explicaciones de análisis en lugar de tratar la replicación como un voto binario.
Entregables requeridos
- • Tabla de tamaño de efecto comparable
- • Matrix de verosimilitud o decisión de discrepancia
- • Sensibilidad a variantes de análisis razonable
Criterios de evaluación · 20 puntos
- • Comparabilidad e incertidumbres: 7 puntos
- • Explicaciones de discrepancias en competencia: 7 puntos
- • Robustez y conclusión calibrada: 6 puntos
Desafío 3 · diseño
Realizar un intercambio y adjudicación entre laboratorios
Diseñar una réplica en dos laboratorios en la que los equipos intercambien datos, código y, cuando sea práctico, aparatos o artefactos de calibración. Preservar el análisis independiente y luego utilizar un proceso de adjudicación congelada para los desacuerdos.
Entregables requeridos
- • Matriz de intercambio y salvaguardas de contaminación
- • Análisis independiente y secuencia de revelación
- • Remediación de discrepancias y plan de liberación pública
Criterios de evaluación · 20 puntos
- • La independencia sobrevive al intercambio: 7 puntos
- • La secuencia de revelación localiza discrepancias: 7 puntos
- • El plan de liberación incluye resultados negativos e indeterminados: 6 puntos
Esquemas de solución para docentes
Busca razonamientos que resistan la revisión
1. Reconstruir la cadena de dependencias
- • Traza el resultado del titular hacia atrás hasta las entradas en bruto sin saltarte transformaciones manuales.
- • Grabar software, calibración, semillas aleatorias y reglas de inclusión.
- • Clasifica cualquier desajuste antes de atribuirlo a un desacuerdo científico.
2. Cuantificar la discrepancia
- • Armoniza estimandos antes de comparar resultados numéricos.
- • Prueba categorías de discrepancia predefinidas con la evidencia disponible.
- • Utiliza replicado, no replicado, contradicho e indeterminado solo bajo criterios explícitos.
3. Realizar un intercambio y adjudicación entre laboratorios
- • Ejecuta celdas de datos propios/código propio, datos intercambiados, código intercambiado y calibración compartida cuando sea posible.
- • Congela las salidas primarias antes de la discusión entre equipos.
- • Publica la matriz de resultados para que los lectores puedan ver dónde cambia el acuerdo.