Poziom 6 · Przygotowanie do badań · Zaawansowana ocena
Protodawstwo dossier i audyt prognoz
Rekonstruuj twierdzenia z przestarzałych źródeł i prognozuj punkty, nie pozwalając późniejszym informacjom wyciekać wstecz.
Wykonaj wszystkie trzy zadania. Pokaż założenia, jednostki, niepewność oraz granicę między obliczeniem, wnioskiem zależnym od modelu, obserwacją i nierozstrzygniętym twierdzeniem.
Zadanie 1 · wyprowadzenie
Odbudowa grafu źródło-to-zgłoszenia
Wybierz jedno ograniczone twierdzenie związane z DIRD i odbuduj ścieżkę wnioskowania od źródeł pierwotnych do obecnego sformułowania. Sformalizuj bezpośrednie, wnioskowane, kontekstowe i sprzeczne krawędzie oraz zidentyfikuj najsłabszą zależność.
Wymagane elementy
- • Datowany graf roszczeń ze stabilnymi etykietami źródłowymi
- • Tabela warrantów edge-by-edge
- • Przepisane twierdzenie ograniczone do zachowanych dowodów
Kryteria oceny · 20 punktów
- • Chronologia i pochodzenie źródła: 8 punktów
- • Krawędzie wnioskowania dokładnie sklasyfikowane: 7 punktów
- • Ostateczne roszczenie zgadza się z wykresem: 5 punktów
Zadanie 2 · analiza
Kalibruj prognozy
Stwórz co najmniej dziesięć prognoz z datą na podstawie roszczeń z dossier, przypisz prawdopodobieństwa przed analizą wyników, a następnie oceniaj kalibrację i dyskryminację. Porównaj wyniki z prostym prognozerem bazowego wskaźnika.
Wymagane elementy
- • Tabela prognoz z datami progowymi i zasadami rozwiązania
- • Wyniki Brier i zestawy kalibracyjne
- • Porównanie z bazowym wskaźnikiem referencyjnym
Kryteria oceny · 20 punktów
- • Brak wycieku czasowego: 7 punktów
- • Punktacja i obliczenia benchmarków: 7 punktów
- • Interpretacja kalibracji: 6 punktów
Zadanie 3 · projekt
Przeprowadź przegląd dossier w stylu adwersarnym
Zaprojektuj przegląd z udziałem czerwonej/niebieskiej drużyny, w którym obie strony otrzymują ten sam zamrożony korpus i muszą publikować wykresy roszczeń, zmiany zaufania oraz decydujące brakujące dowody.
Wymagane elementy
- • Protokół zamrożonego korpusu i przypisywania ról
- • Symetryczna rubryka punktacji i plan oceniania
- • Pakiet dowodów publicznych z logiem niepewności
Kryteria oceny · 20 punktów
- • Zespoły działają na identycznych dowodach: 7 punktów
- • Kryteria oceniające poprawienie i skalibrowaną niepewność: 7 punktów
- • Orzeczenie i zwolnienie są podlegające audytowi: 6 punktów
Zarysy rozwiązań dla prowadzącego
Szukaj rozumowania odpornego na kontrolę
1. Odbudowa grafu źródło-to-zgłoszenia
- • Oddziel, co dokument mówi, od tego, co wywodzi się później.
- • Stosuj deklarowany próg dowodowy przed przeczytaniem informacji o wynikach.
- • Obniż konkluzję, gdy kluczowa krawędź jest kontekstowa lub niepoparta.
2. Kalibruj prognozy
- • Spraw, by każde kryterium rozdzielczości było obserwowalne i ograniczone czasowo.
- • Oceniaj oryginalne prawdopodobieństwa bez retrospektywnej edycji.
- • Traktuj słabą kalibrację jako dowód na wyniki prognozowania, a nie automatycznie na każdy mechanizm ukryty.
3. Przeprowadź przegląd dossier w stylu adwersarnym
- • Ukryj tożsamość autora tam, gdzie to możliwe, i losowo dostosuj się do tego, która drużyna opowiada się po którejś stronie.
- • Wierność źródła partytury oddzielnie od perswazji retorycznej.
- • Publikuj spory i nierozwiązane zależności zamiast wymuszać konsensus.