Krátká průběžná zpráva z posouzení základů zobrazovací neurovědy, psaná z metodické strany: co z toho je přenositelné na testování a hodnocení výzkumu obecně. Bez závěrů o oboru; ty počkají na dokončení.
Co vzniklo jako nástroj
- Rekonstrukce úsudku jako model. Z vybraného článku vypíšeme každé tvrzení a každý krok mezi nimi a každému kroku přiřadíme typ: plyne z, vyžaduje, vylučuje, omezuje, tvrdí jako jediné možné. Z toho se generuje diagram a seznam kroků, které nemají oporu, předpokladů, které nejsou vysloveny, a vyloučení, která se neprovedla. Odzkoušeno na čtyřech rekonstrukcích.
- Rozcestí. Každé místo, kde autoři mohli zvolit jinak — jiný referenční signál, jiný práh, jiná kontrola — je v modelu zapsáno jako rozcestí s tím, co by z druhé větve plynulo. Právě tam se nejčastěji skrývá nevyslovený předpoklad.
- Statistický audit. Sedm pravidel, která se ptají: je předpoklad testu ověřen? je nulová hypotéza vyslovena? odpovídá kontrola chyb tomu, co se skutečně testovalo? má efekt uvedenu nejistotu? byl práh odvozen, nebo zvolen? dá se číslo reprodukovat? — a k tomu jedna otázka nad všemi: mohl test selhat, kdyby tvrzení neplatilo?
- Dva pásy pramenů. Pečlivé metodické práce a běžná aplikační praxe se hodnotí odděleně, aby se z výběru pečlivých prací nestal závěr o celém oboru.
Co jsme obrátili na sebe
Stejná pravidla jsme pustili na vlastní numerické projekty. U jedné z našich akceptačních bran — prahu pro empirickou kontrolu složitosti algoritmu — se ukázalo, že práh nebyl odvozen, a že brána, jak je napsaná, by zamítla i správnou implementaci v části rozsahu. Opravu navrhujeme jako změnu rozsahu měření, ne jako rozšíření prahu. Záznam je v návrhu kritéria pro naši doktrínu referenčních implementací.
Co přijde
Krátký text o jedné vstupní podmínce, kterou většina studií nemůže ověřit, čeká na autorské čtení. Technický článek o blízkém infračerveném zobrazování (fyzikální kořeny a technologie) je rozpracován. Plná dokumentace posouzení a veřejný repozitář s celou stopou následují.