Ein Gutachter verfehlte den Punkt einer Impfstoffstudie. KI könnte das verschärfen.

Wichtige Punkte

• Der Gesundheitsökonom Jason Semprini stellte fest, dass schulische Mandate zur HPV-Impfung wenig messbare Auswirkungen auf die Gebärmutterhalskrebs-Quoten in der Gesamtbevölkerung haben.
• Ein Gutachter verlas Semprinis Politikstudie als Angriff auf die Impfstoffsicherheit – ein erheblicher Faktenfehler, der gültige Forschung hätte verhindern können.
• Peer Review, der Prozess, bei dem unabhängige Forscher Arbeiten vor der Veröffentlichung überprüfen, ist bereits durch steigende Einreichungsmengen belastet.
• KI-generierte Peer Reviews erscheinen in akademischen Zeitschriften und werfen Fragen auf, ob Fehler wie dieser schwerer zu erkennen sind.

Jason Semprini ist Gesundheitsökonom an der Des Moines University und erforscht die Lücke zwischen Gesundheitspolitik und Gesundheitsergebnissen. Sein neuestes Projekt untersuchte schulische Mandate, die Kindern die HPV-Impfung vorschreiben. HPV, humanes Papillomavirus, ist eine weit verbreitete Infektion, die die überwiegende Mehrheit der Gebärmutterhalskrebs-Fälle verursacht.

Seine Erkenntnis war kontraintuiv. Das Mandat zur Schulimpfung scheint die Gesamtrate von Gebärmutterhalskrebs in einer bestimmten Population nicht wesentlich zu senken. Das klingt beunruhigend, ist aber nicht überraschend. Forscher wissen schon lange, dass strikte staatliche Mandate einige Familien zu aktivem Widerstand drängen können – ein Rückschlag-Effekt, der die Gewinne aus größerer Abdeckung aufheben kann.

Semprini schrieb die Studie auf und reichte sie zur Begutachtung ein. Peer Review ist der Prozess, bei dem unabhängige Forscher desselben Fachgebiets ein Manuskript lesen, überprüfen, ob die Methoden haltbar sind, und empfehlen, ob die Zeitschrift es veröffentlichen sollte. Gutachter sind typischerweise Freiwillige, und der Prozess ist normalerweise anonym.

Was lief schief?

Der Gutachter missverstand die zentrale Frage der Studie. Anstatt sie als Bewertung einer Impfpolitik zu lesen, behandelte der Gutachter sie als Behauptung, dass der HPV-Impfstoff selbst Gebärmutterhalskrebs nicht verhindert. Das sind sehr unterschiedliche Aussagen. Eine stellt eine schulische Verwaltungsregel in Frage. Die andere würde Jahrzehnte klinischer Evidenz widersprechen.

„Da gibt es einen sehr großen Unterschied", sagte Semprini gegenüber Ars Technica.

Der Impfstoff wirkt. Das ist gesicherte Wissenschaft. Das, was Semprini fragte, ist enger gefasst: Führt die Verpflichtung in Schulen tatsächlich zu weniger Krebsfällen in einer ganzen Population? Die Antwort, so stellte er fest, ist überwiegend nein – zumindest nicht allein durch Mandate.

Ein Gutachter, der diesen Unterschied übersieht, könnte sinnvolle, nützliche Forschung daran hindern, Ärzte, Entscheidungsträger und die Öffentlichkeit zu erreichen.

Warum ist das über eine Studie hinaus wichtig?

Peer Review war bereits angeschlagen, bevor KI ins Spiel kam. Die Zahl der bei akademischen Zeitschriften eingereichten Papiere ist schneller gewachsen als der Pool qualifizierter Gutachter, die bereit sind, sie kostenlos zu lesen.

Jetzt nutzen einige Forscher große Sprachmodelle – die Technologie hinter Chatbots wie ChatGPT – um ihre Peer-Review-Berichte zu verfassen oder sogar zu generieren. Ein Modell, das ein Papier oberflächlich überfliegt, statt es sorgfältig zu lesen, wird wahrscheinlich genau die Art oberflächlicher Missinterpretation produzieren, die Semprinis Gutachter zu Fall brachte.

Für gewöhnliche Leser sind die Einsätze praktisch. Veröffentlichte Forschung beeinflusst, was Ärzte empfehlen, welche Maßnahmen Regierungen ergreifen und welche Gesundheitsberatung Patienten erhält. Mangelhafte Überprüfung bedeutet, dass fehlerhafte Forschung durchkommen kann. Korrekte Forschung kann blockiert werden.

Häufig gestellte Fragen

Bedeutet das, dass der HPV-Impfstoff nicht sicher oder wirksam ist?

Nein. Die Sicherheit und Wirksamkeit des Impfstoffs werden durch umfangreiche klinische Studien unterstützt. Semprinis Studie untersuchte, ob schulische Impfmandats-Richtlinien speziell die Impfquoten genug erhöhen, um Gebärmutterhalskrebs in ganzen Populationen zu senken – nicht, ob der Impfstoff bei Personen wirkt, die ihn erhalten.

Was können Patienten oder Eltern mit diesen Informationen tun?

Sprechen Sie mit dem Arzt Ihres Kindes über den HPV-Impfstoff, unabhängig davon, ob Ihre Schule oder Ihr Bundesstaat ihn verlangt. Das Fehlen oder Scheitern eines Mandats ist kein Grund, die Impfung zu überspringen; persönlicher und familiärer Schutz gilt immer noch.

Wie versuchen Zeitschriften, Gutachter-Fehler zu erkennen?

Die meisten Zeitschriften nutzen Redakteure, die sowohl das Manuskript als auch die Gutachtkommentare lesen, bevor sie eine endgültige Entscheidung treffen. Ein guter Redakteur würde eine Missinterpretation wie diese erkennen. Die Sorge ist, dass steigende Einreichungsmengen die redaktionelle Kapazität überfordern.