Seminarium krytycznej lektury DIRD
Zamień prowokacyjne opracowanie referencyjne w możliwą do prześledzenia mapę źródeł, założeń, prognoz i sprawdzalnych tez.
Skontroluj dokumenty Defense Intelligence Reference Documents i cytowaną w nich literaturę poprzez proweniencję, sieci cytowań, odtworzenie równań, ocenę prognoz, porównanie poziomów dowodowych, przegląd czerwonego zespołu i gotowe do publikacji krytyczne dossier.
Zanim zaczniesz
- • Ścieżka magisterska poziomu 5
- • Metody badawcze i statystyka
- • Swoboda w wyszukiwaniu literatury technicznej
Na koniec będziesz umieć
- • Rekonstruować zakres, proweniencję i cel zamówienia danego DIRD.
- • Doprowadzać każdą kluczową tezę do dowodu pierwotnego albo jawnego wnioskowania.
- • Oceniać prognozy wobec datowanych wyników, bez przekłamań z perspektywy czasu.
- • Publikować odtwarzalne, poddane wrogiej recenzji dossier dowodowe.
Model interaktywny
Zbadaj, zanim policzysz
Interaktywne laboratorium, zestaw dydaktyczny i narzędzia oceny do tego kursu są po angielsku →
Lekcja 1 z 3
Proweniencja, cel i anatomia dokumentu
Do czego dokument został zamówiony, a czego z założenia nie miał ustalać?
Opracowanie referencyjne może przeglądać możliwości, oceniać znaczenie strategiczne albo wskazywać luki badawcze. Samo jego istnienie, zamawiający, historia klauzul tajności ani autorytet autorów nie zamieniają każdego omawianego twierdzenia w potwierdzony wynik.
Krytyczna lektura zaczyna się od daty, wersji, autorstwa, pytania zamawiającego, docelowego odbiorcy, metod, horyzontu cytowanej literatury oraz rozróżnienia między relacjonowanym dowodem a analizą scenariuszy.
Przykład rozwiązany
Opracowanie mówi, że technologia mogłaby być przełomowa, jeśli dokonają się trzy przełomy. Jak zakodować to zdanie?
- 1. Oznacz je jako warunkowe.
- 2. Wyodrębnij trzy zależności.
- 3. Oddziel prognozę wpływu od prawdopodobieństwa.
- 4. Zapisz datę opracowania i horyzont prognozy.
To scenariusz warunkowy, a nie dowód, że technologia albo jej warunki wstępne istniały.
Spróbuj
Rejestr anatomii dokumentu
Materiały: Jeden DIRD i arkusz metadanych
- 1. Zapisz proweniencję i cel.
- 2. Zmapuj typy sekcji.
- 3. Oznacz tezy jako relację, syntezę, wnioskowanie albo prognozę.
- 4. Wypisz jawne wyłączenia i niewiadome.
Zwróć uwagę: Dokumenty często zmieniają tryb epistemiczny między sekcjami; jedna globalna etykieta gubi tę strukturę.
Sprawdź, czy rozumiesz: Czy zamówienie przez instytucję rządową ustala, że omawiany mechanizm jest prawdziwy?
Odpowiedź: Nie.
Ustala instytucjonalne zainteresowanie oceną, a nie eksperymentalne potwierdzenie każdej tezy.
Lekcja 2 z 3
Grafy tez, łańcuchy cytowań i odtwarzanie równań
Skąd pochodzi każde twierdzenie ilościowe i czy cytowane źródło popiera dokładnie to samo twierdzenie?
Pranie cytowań zachodzi, gdy prace przeglądowe cytują siebie nawzajem, aż twierdzenie warunkowe albo sporne zaczyna wyglądać na ustalone. Graf tez zapisuje dokładne twierdzenie, miejsce w źródle, rodzaj dowodu i przekształcenia między dokumentami.
Równania wymagają sprawdzenia jednostek, założeń, warunków brzegowych i przypadków granicznych. Odtworzenie jednego kluczowego wyniku często pokazuje, czy teza jest wyprowadzeniem, doborem parametrów, analogią, czy niepopartą ekstrapolacją.
Przykład rozwiązany
Trzy prace przeglądowe cytują się nawzajem dla tej samej wartości sprawności, ale żadna nie podaje danych. Jaki jest status dowodowy?
- 1. Prześledź najstarsze cytowanie.
- 2. Poszukaj pierwotnej aparatury albo rachunku.
- 3. Zapisz, że wartość jest powtarzana, lecz niepoparta.
- 4. Nie licz powtarzanych prac przeglądowych jako niezależnych dowodów.
Sieć cytowań wykazuje powtarzalność, a nie niezależne potwierdzenie empiryczne.
Spróbuj
Graf pięciu tez
Materiały: DIRD, bibliografia i szablon grafu
- 1. Wypisz dosłownie pięć kluczowych tez.
- 2. Doprowadź każdą do najwcześniejszego dostępnego źródła.
- 3. Opisz typ krawędzi i poziom pewności.
- 4. Odtwórz jeden wynik liczbowy.
Zwróć uwagę: Teza wyglądająca najmocniej może opierać się na najsłabszym albo najbardziej przekształconym łańcuchu cytowań.
Sprawdź, czy rozumiesz: Kiedy dwie prace liczą się jako niezależne poparcie?
Odpowiedź: Gdy ich dowody albo wyprowadzenia są naprawdę niezależne, a nie korzystają z tego samego źródła, tej samej aparatury albo tego samego zbioru danych.
Sama mnogość pozycji bibliograficznych nie wystarcza.
Lekcja 3 z 3
Ocena prognoz, czerwone zespoły i publikacja dossier
Które oczekiwania przetrwały próbę czasu i co powiedziałby dziś rzetelny krytyk, a co obrońca?
Prognozy trzeba zamrozić w pierwotnym brzmieniu i oceniać wobec datowanych wyników według zadeklarowanych wcześniej kategorii. Mgliste twierdzenia o „istotności” nie powinny awansować do rangi trafionych przewidywań ilościowych.
Czerwony zespół wskazuje ukryte założenia, wyjaśnienia konwencjonalne i brakujące próby kontrolne. Adwokat rekonstruuje najmocniejszą wersję programu. Ostateczne dossier zachowuje oba głosy i nazywa dowód, który zmieniłby poziom pewności.
Przykład rozwiązany
Jak w 2026 roku ocenić prognozę z 2010 roku zapowiadającą demonstrator laboratoryjny w ciągu dziesięciu lat, jeśli istnieją tylko symulacje?
- 1. Zamroź pierwotną definicję kamienia milowego.
- 2. Poszukaj fizycznego demonstratora do terminu.
- 3. Nie podstawiaj symulacji, jeśli pierwotnie na to nie pozwolono.
- 4. Oceń prognozę jako niespełnioną, a częściowy postęp udokumentuj osobno.
Prognoza demonstratora jest niespełniona; postęp w symulacjach to osobny wynik.
Spróbuj
Wroga recenzja dossier
Materiały: Projekt dossier i dwie role recenzenckie
- 1. Przydziel role obrońcy i krytyka.
- 2. Wymagaj zarzutów umiejscowionych w źródłach.
- 3. Rozstrzygnij rozbieżności co do faktów.
- 4. Opublikuj jawnie pozostałe różnice ocen.
Zwróć uwagę: Wroga recenzja poprawia dossier wtedy, gdy spory stają się widoczne, zamiast zostać uśrednione.
Sprawdź, czy rozumiesz: Co czyni ocenę prognozy odtwarzalną?
Odpowiedź: Zamrożone brzmienie, datowane dowody, jawne kategorie i udokumentowana reguła oceny.
Inaczej perspektywa czasu może przedefiniować sukces.
Od wzoru do znaczenia
Przeczytaj równanie zwykłym językiem.
P(claim|evidence)∝P(evidence|claim)P(claim)
Dowód aktualizuje tezę w takim stopniu, w jakim konkurencyjne wyjaśnienia różnie go przewidują.
Brier=(1/N)Σ(p_i−o_i)²
Wskaźnik Briera mierzy kalibrację prognoz probabilistycznych wobec wyników zero-jedynkowych.
w_source=w_primary·w_independence·w_method
Przejrzysta waga heurystyczna może zapisywać proweniencję, niezależność i siłę metodologiczną, nie udając uniwersalnej miary prawdy.
Praktyka samodzielna
Zestaw zadań
Rozwiąż każde zadanie, zanim otworzysz podpowiedź i rozwiązanie.
1. Dwie prace korzystają z tego samego eksperymentu. Ile niezależnych zbiorów danych empirycznych popiera tę tezę?
Pokaż podpowiedź
Licz źródła dowodów, a nie publikacje.
Pokaż rozwiązanie
Jeden.
2. Prognoza z przypisanym p=0,8 się nie sprawdziła. Ile wynosi jej jednostkowy wskaźnik Briera?
Pokaż podpowiedź
Skorzystaj z (p−o)² przy o=0.
Pokaż rozwiązanie
0,64.
3. Dlaczego odtwarzając równanie, trzeba zachować warunki brzegowe ze źródła?
Pokaż podpowiedź
Zastanów się, czy bez nich rozwiązanie jest jednoznaczne albo w ogóle stosowalne.
Pokaż rozwiązanie
Warunki brzegowe wybierają rozwiązanie fizyczne i mogą decydować o wielkości wyniku, a nawet o jego znaku.
Pracownia wyprowadzeń
Zbuduj wynik, linijka po linijce.
Trzymaj założenia na widoku, żeby matematyka pozostała sprawdzalna.
Punkt wyjścia
Aktualizacja dowodowa czynnikiem Bayesa
Posterior odds = prior odds × likelihood ratio
- 1. Zapisz szanse dla tezy wobec alternatywy.
- 2. Policz wiarygodność obserwacji przy każdej z nich.
- 3. Utwórz ich stosunek.
- 4. Pomnóż, nie zmieniając zamrożonego rozkładu a priori po zobaczeniu danych.
O_post=O_prior·P(E|H₁)/P(E|H₀)
Dowód liczy się przez zdolność rozróżniania, a nie przez efektowność czy prestiż instytucji.
Punkt wyjścia
Rozkład kalibracji prognoz
Mean squared probability error over binned forecasts
- 1. Pogrupuj prognozy według podanego prawdopodobieństwa.
- 2. Policz obserwowaną częstość w każdym przedziale.
- 3. Oddziel kalibrację od rozdzielczości i niepewności częstości bazowej.
- 4. Przyjrzyj się ograniczeniom wynikającym z liczebności próby.
Brier performance reflects calibration, resolution, and outcome uncertainty
Program prognostyczny należy oceniać po wielu zamrożonych przewidywaniach, a nie po jednym rozsławionym trafieniu.
Notatnik obliczeniowy
Zamień model w eksperyment.
Notatnik audytu grafu tez i prognoz
Które tezy w wybranym DIRD mają niezależne poparcie, odtwarzalne rachunki i skalibrowane wyniki?
Dane wejściowe
- • Tekst dokumentu i wykaz źródeł
- • Metadane źródeł pierwotnych
- • Zamrożone prognozy i datowane dowody wyników
Algorytm
- 1. Wyodrębnij tezy atomowe i krawędzie cytowań.
- 2. Usuń duplikaty leżących u podstaw dowodów.
- 3. Odtwórz wybrane rachunki.
- 4. Oceń prognozy i aktualizacje poziomu pewności.
Dowody do uzyskania
- • Graf tez czytelny maszynowo
- • Notatnik z odtworzeniami
- • Karta oceny prognoz i dossier dowodowe
Pracownia czytania artykułów
Przepytaj źródło, nie jego reputację.
Odtwórz założenia, powtórz jedno obliczenie i zatrzymaj się na granicy opisanych dowodów.
Krytyczne dossier opracowania referencyjnego
Co pozostałoby wiarygodne, gdyby usunąć zamawiającego, renomę autorów i późniejsze opowieści?
- 1. Zrekonstruuj cel i proweniencję.
- 2. Doprowadź tezy do dowodów pierwotnych.
- 3. Odtwórz kluczowy krok ilościowy.
- 4. Oceń prognozy i nierozstrzygnięte założenia.
Obliczenie do powtórzenia: Odtwórz najbardziej istotne dla decyzji oszacowanie z opracowania wraz z analizą czułości.
Granica dowodów: DIRD może być wartościowym opracowaniem strategicznym, a jednocześnie zawierać tezy ugruntowane, sporne, spekulatywne i przedawnione, które trzeba oceniać pojedynczo.
Obrona ustna na poziomie doktoranckim
Obroń ograniczone twierdzenie pod presją.
Przedstaw najmocniejsze poparcie, uczciwie postaw najmocniejszy zarzut i wskaż dowód, który naprawdę mógłby rozstrzygnąć sprawę.
Teza
DIRD-y należy uczyć jako możliwe do skontrolowania mapy badawcze, a nie odrzucać jako fantazję ani traktować jak objawioną prawdę.
- 1. Zbierają rzadko spotykaną literaturę techniczną i pytania strategiczne.
- 2. Ich warunkowe prognozy i sieci źródeł mogą rodzić sprawdzalne programy badawcze.
- 3. Ocena na poziomie pojedynczych tez zachowuje ich wartość bez prania niepewności.
Najmocniejszy zarzut: Kontekst zamówienia i wybiórcze ujęcie tematu mogą wzmacniać spekulacje niskiej jakości albo motywowane strategicznie.
Dowód rozstrzygający: Niezależne odtworzenie kluczowych rachunków i prospektywne trafienie prerejestrowanych, rozstrzygających przewidywań wyprowadzonych z tych dokumentów.
Praktyka badawcza
Najpierw zrób pracę sprawdzalną, dopiero potem efektowną.
Prerejestruj rozstrzygający test, spakuj każdą zależność i przejdź wyraźne bramki kamieni milowych, zanim rozszerzysz interpretację.
Opublikuj otwarty audyt DIRD
Które trzy tezy najbardziej zasługują dziś na odtworzenie albo rozstrzygający test?
Prerejestracja
- • Zamroź definicje tez i reguły włączania.
- • Zdefiniuj niezależność źródeł i sposób oceny prognoz.
- • Podaj progi zmiany poziomu pewności.
Pakiet odtwarzalności
- • Wykaz dokumentów i wersji wraz z sumami kontrolnymi
- • Graf tez z miejscami w źródłach
- • Notatniki obliczeniowe i zbiór danych o wynikach
- • Rozbieżności recenzentów i dziennik zmian
Bramki kamieni milowych
- 1. Audyt proweniencji i źródeł pierwotnych
- 2. Niezależne odtworzenie rachunków
- 3. Rozstrzygnięcie wrogiej recenzji
- 4. Publiczne dossier z załącznikiem czytelnym maszynowo
Idź dalej, do dowodów