review needed Kurzer Zwischenstand aus der Bewertung der Grundlagen der bildgebenden Neurowissenschaft, von der Methodenseite geschrieben: Was davon auf Testen und Forschungsbewertung im Allgemeinen übertragbar ist. Keine Schlussfolgerungen über das Fach. Maschinell unterstützte Übersetzung ohne Prüfung durch Muttersprachler; die tschechische und die englische Fassung sind maßgeblich.

Was als Werkzeug entstanden ist

  • Schlussrekonstruktion als Modell. Aus einer gewählten Arbeit listen wir jede Aussage und jeden Schritt dazwischen auf und geben jedem Schritt einen Typ: folgt aus, erfordert, schließt aus, begrenzt, behauptet als einzige Möglichkeit. Daraus werden ein Diagramm und die Liste der unbelegten Schritte, der unausgesprochenen Prämissen und der nie durchgeführten Ausschlüsse erzeugt. An vier Rekonstruktionen erprobt.
  • Verzweigungen. Jede Stelle, an der die Autoren anders hätten wählen können — ein anderes Referenzsignal, eine andere Schwelle, eine andere Kontrolle — wird als Verzweigung festgehalten, samt dem, was aus dem anderen Zweig folgen würde. Dort sitzt meist die unausgesprochene Annahme.
  • Statistik-Audit. Sieben Regeln fragen: Ist die Testvoraussetzung geprüft? Ist die Nullhypothese ausgesprochen? Passt die Fehlerkontrolle zu dem, was tatsächlich getestet wurde? Trägt der Effekt eine Unsicherheit? Wurde die Schwelle hergeleitet oder gewählt? Lässt sich die Zahl reproduzieren? — und eine Frage über allen: Hätte der Test scheitern können, wäre die Aussage falsch gewesen?
  • Zwei Quellenschichten. Sorgfältige Methodenarbeiten und gewöhnliche Anwendungspraxis werden getrennt bewertet, damit eine Auswahl sorgfältiger Arbeiten nicht zum Urteil über das ganze Fach wird.

Auf uns selbst angewandt

Dieselben Regeln haben wir auf unsere eigenen numerischen Projekte angewandt. Bei einer unserer Abnahmeschranken — der Schwelle für die empirische Komplexitätsprüfung eines Algorithmus — zeigte sich, dass die Schwelle nicht hergeleitet war und die Schranke, wie sie geschrieben ist, in einem Teil ihres Bereichs auch eine korrekte Implementierung abweisen würde. Die vorgeschlagene Korrektur ist eine Änderung des Messbereichs, nicht eine weitere Schwelle.

Was folgt

Ein kurzer Text über eine Eingangsbedingung, die die meisten Studien nicht prüfen können, wartet auf die Lektüre des Autors. Ein technischer Artikel über Nahinfrarot-Bildgebung ist in Arbeit. Die vollständige Dokumentation und ein öffentliches Repositorium folgen.