Eine umfassende, gemeinschaftliche Untersuchung der Replikabilität und Robustheit von EEG Analysen

• Antragsteller: Professor Dr. Niko Busch; Yuri Pavlov, Ph.D.
• Fachliche Zuordnung: Biologische Psychologie und Kognitive Neurowissenschaften ; Kognitive und systemische Humanneurowissenschaften
• Förderung: Förderung seit 2021
• Projektkennung: Deutsche Forschungsgemeinschaft (DFG) - Projektnummer 464104000

Die Elektroenzephalografie (EEG) ist eine verbreitete Methode zur Untersuchung der menschlichen Kognition und anderer psychologischer Phänomene. Trotz ihrer Popularität ist jedoch die Glaubwürdigkeit dieser Methode in jüngster Zeit nicht unumstritten. Skeptische Einwände basieren darauf, dass neuartige Befunde häufig auf kleinen Stichproben beruhen und dass Replikationsstudien zu publizierten Befunden zu selten unternommen werden. Weiterhin besteht bei EEG Analysen häufig die Wahl zwischen vielen alternativen, plausiblen Methoden und Abläufen. Es ist derzeit völlig unbekannt, in welchem Ausmaß unterschiedliche Analyseabläufe zu unterschiedlichen Ergebnissen führen. Ohne eine systematische Untersuchung der Replizierbarkeit und Robustheit von EEG Befunden mit neuen Datensätzen und alternativen Analysen könnte die Glaubwürdigkeit der EEG Forschung insgesamt auf wackligen Beinen stehen. Daher scheint es uns an der Zeit, die methodische Glaubwürdigkeit der EEG Forschung zu untermauern. Zu diesem Zweck haben wir zwei groß angelegte internationale, kollaborative Projekte ins Leben gerufen.#EEGManyLabs wird die Replizierbarkeit einiger der einflussreichsten EEG Studien mit beispielloser statistischer Power untersuchen, was durch die Zusammenlegung der Ressourcen vieler teilnehmender Labore ermöglicht werden soll, wodurch #EEGManyLabs eines der größten Replikationsprojekte in den kognitiven Neurowissenschaften darstellen wird. Die Replikationsstudien werden es weiterhin ermöglichen, eine umfangreiche Bibliothek von Effektstärken aufzustellen, die zur Planung zukünftiger Studien dienen wird. Die in diesem Projekt generierten Daten werden der wissenschaftlichen Gemeinschaft zur Verfügung gestellt werden, wodurch eine der größten öffentlich zugänglichen EEG-Daten Sammlungen entstehen wird, die auch für zukünftige Studien einflussreich sein wird. Schließlich gehen wir davon aus, dass dieses umfassende, multi-zentrische Projekt helfen wird, zu einem Kulturwandel beizutragen – hin zu gemeinschaftlichen Kollaborationsstudien mit hoher statistischer Power.#EEGManyPipelines ist eine internationale Many-Analysts Studie, in der wir allen teilnehmenden EEG-ForscherInnen einen EEG-Datensatz zur Verfügung stellen, den diese mit einem Analyseverfahren ihrer Wahl auswerten sollen. Durch diese Erhebung der verwendeten Verfahren und der damit erzielten Effekte werden wir systematisch die tatsächliche Diversität von EEG Analysen und ihren Einfluss auf die Variabilität der Ergebnisse untersuchen können. Das wird uns ermöglichen, die Robustheit von EEG Befunden über alternative, plausible Analyseverfahren hinweg zu bestimmen, (sub)optimale Verfahren zu identifizieren und einen Beitrag zu leisten für Richtlinien über die Durchführung und Publikation von EEG Befunden.Insgesamt erwarten wir, dass dieses Projekt deutlich die Glaubwürdigkeit von EEG Forschung unterstützen und zu neuen Standards der Durchführung und Publikation von EEG Studien beitragen wird.

• DFG-Verfahren: Schwerpunktprogramme
• Teilprojekt zu: SPP 2317: META-REP: Ein meta-wissenschaftliches Programm zur Analyse und Optimierung von Replizierbarkeit in den Verhaltens-, Sozial- und Kognitionswissenschaften