Die meisten psychologischen und neurowissenschaftlichen Forschungsmethoden stützen sich auf WEIRD (White, Educated, Industrialized, Rich, and Democratic - weiß, gebildet, industrialisiert, reich und demokratisch) Stichprobenpopulationen. Dies führt zu kontextuellen und kulturellen Einschränkungen. Wenn diese Einschränkungen nicht anerkannt werden, ist die Generalisierbarkeit von Forschungsergebnissen auf die menschliche Bevölkerung begrenzt. Der pauschale WEIRD-Forschungsansatz hat zu problematischen Anwendungen von Behandlungen, Therapien und sogar Gesetzen geführt.

Forschungsprogramme, die enge Stichprobensätze verwenden, die ausschließlich aus WEIRD-Teilnehmern bestehen, können schädliche Richtlinien und Praktiken hervorbringen. Dies liegt daran, dass sie auf Ergebnissen basieren können, die Menschen mit unterrepräsentierten Merkmalen ausschließen. Eine in den Proceedings of the National Academy of Sciences veröffentlichte Studie ergab, dass 96 % der Studien in sechs führenden Zeitschriften der American Psychological Association auf WEIRD-Stichproben beruhten, die nur 12 % der globalen Bevölkerungsmerkmale repräsentierten.

Erschwerend kommt hinzu, dass unterrepräsentierte Bevölkerungsgruppen in vielen Fällen keine Minderheit darstellen. Die Forschung legt nahe, dass WEIRD-Individuen in vielen psychologischen Dimensionen tatsächlich Ausreißer sind – einschließlich räumlichem Denken, visueller Wahrnehmung, inferentieller Induktion und moralischem Denken.

Um dem WEIRD-Bias entgegenzuwirken, können Forscher auf Online-Datenerfassungstools zurückgreifen, die Zugang zu Personen außerhalb eines begrenzten geografischen Gebiets bieten. Durch die Erweiterung des potenziellen Stichprobenpools über lokal zugängliche Personen hinaus können Plattformen zur Ferndatenerfassung – wie EmotivLABS – die demografische Vielfalt und Repräsentativität in der neurowissenschaftlichen Forschung erhöhen. Diese Erhöhung der Diversität erfordert keine signifikante Erhöhung der Kosten für die Probandenrekrutierung und kann auf lange Sicht sogar kostengünstiger sein.

Eine weltweite Erweiterung des Probandenpools kann Ihrer Forschung mehr statistische Aussagekraft verleihen. Sie kann auch dazu beitragen, dass die Ergebnisse mit größerer Wahrscheinlichkeit reproduziert werden können – ein wichtiges Thema, das in früheren Beiträgen wie „3 Approaches to Fix the Neuroscience Reproducibility Crisis“ und „The Replication Crisis in Cognitive Neuroscience“ diskutiert wurde.

Plattformen zur Ferndatenerfassung sprechen das WEIRD-Problem in der modernen psychologischen, neurowissenschaftlichen und sozialwissenschaftlichen Forschung direkt an. Angesichts der Verfügbarkeit und Zugänglichkeit von Online- und Remote-Forschungstechnologien gibt es für psychologische Labore keine Entschuldigung mehr, sich ausschließlich auf WEIRD-Stichprobenpools zu verlassen.

Die problematische Normalisierung von WEIRD-Stichproben in der Bevölkerung

Der erste Schritt zur Lösung eines Problems besteht darin, anzuerkennen, dass es existiert. Mostafa Salari Rad et al. untersuchten psychologische Forschungsberichte in der Fachzeitschrift Psychological Science. Die Autoren überprüften 428 Studien und kodierten sie basierend auf der geografischen Herkunft der Stichprobengruppe, dem Bildungsniveau, dem sozioökonomischen Status/Einkommen, der ethnischen Zugehörigkeit, dem Geschlecht, den Rekrutierungsmethoden und der Vergütung. Die überwiegende Mehrheit der untersuchten Studien (94,15 %) nutzte ausschließlich westliche, englischsprachige Teilnehmer.

Insgesamt scheint es, dass Forscher ihre Forschungsmethoden nicht angepasst haben, um dem Mangel an Diversität und Repräsentativität in den Stichproben entgegenzuwirken. Zugegebenermaßen kann die Änderung des experimentellen Designs und des methodischen Ansatzes eines Labors aus zeitlicher und finanzieller Sicht unerschwinglich sein.

Allein die Angabe von Details zur Demografie der Stichproben und deren Berücksichtigung in den Schlussfolgerungen kann sicherlich eine große Wirkung erzielen und ist gleichzeitig weitaus kostengünstiger. Leider hat sich diese einfache Praxis noch nicht als Standard etabliert. So legte beispielsweise eine Arbeit aus dem Jahr 2018 nahe, dass:

• Über 72 % der geprüften Abstracts keine Angaben zur untersuchten Population enthielten.

• 83 % führten keine statistische Analyse der möglichen Auswirkungen im Zusammenhang mit der Diversität der Stichprobe durch.

• 85 % diskutierten nicht einmal die potenziellen Auswirkungen von Kontext und Kultur.

• Nur 16 % empfahlen, künftige Forschungen zu diesem Thema in anderen Kulturen oder Gesellschaften durchzuführen.

Neuere Forschungen haben ähnliche Ergebnisse berichtet – ein Mangel an Diversität ohne Anerkennung der potenziellen Einschränkungen. E. Kate Webb und das National Center for Advancing Translational Sciences fanden heraus, dass neurowissenschaftliche Instrumente (z. B. EEG) durch den Ausschluss von Probanden aufgrund phänotypischer Unterschiede im Haartyp und der Hautpigmentierung rassistische Vorurteile in Studien einbringen. Das Ziel, so das Fazit von Webb, ist es, „Rassismus in der wissenschaftlichen Arbeit infrage zu stellen und Verfahren sowie Änderungen vorzuschlagen, die zu einer gerechteren Wissenschaft führen können“.

Übermäßige Abhängigkeit von US-amerikanischen Studierenden

Ein wesentlicher Grund für das Fortbestehen des WEIRD-Problems ist die übermäßige Abhängigkeit von US-amerikanischen College-Studenten als Forschungsobjekte. Im Jahr 2007 nutzten 67 % der im Journal of Personality und 20 % der in Psychological Science veröffentlichten amerikanischen Studien US-amerikanische Studenten als Testpersonen. Dies ist üblich, da es tatsächlich schwierig ist, unterschiedliche Probanden zu gewinnen. Oft erfordert der Prozess der Auswahl, Rekrutierung und Vergütung der Teilnehmer mehr Zeit und Energie als das eigentliche Design, die Durchführung und die Analyse der Testergebnisse. Das bedeutet, dass Forscher mehr Zeit mit der Organisation der Teilnehmer verbringen als mit der Gewinnung von Erkenntnissen über sie.

Erhöhung der Diversität von Stichprobenpools mit Online-Plattformen für Remote-Forschung

Globale Gemeinschaften

Die Online-Ansprache, -Rekrutierung und -Evaluierung von Forschungsprobanden entwickelt sich rasant zum Standard. Die Nutzung cloudbasierter Forschungsplattformen befreit Forscher von logistischen (Werbung, Terminplanung, Registrierung) und physischen (Standort der Teilnehmer) Hindernissen, sodass sie sich voll und ganz auf ihre eigentliche Forschung konzentrieren können.

Diese Plattformen fördern Kostensenkungen und steigern die Effizienz, während sie Forschern gleichzeitig den Zugang zu globalen Probandennetzwerken ermöglichen, die den kulturellen Kontext der Forschung besser abbilden.

Abkehr von WEIRD-fokussierter psychologischer Forschung

Das WEIRD-Problem wirft schwierige Fragen zur Zuverlässigkeit, Generalisierbarkeit, Validität und Robustheit von Forschungsergebnissen auf. Diese Studien versuchen oft, Forschungsfragen über den Menschen zu beantworten, greifen dabei jedoch auf Personen zurück, die weniger als 12 % der Weltbevölkerung repräsentieren.

Es wurden mehrere Empfehlungen ausgesprochen, um das WEIRD-Problem anzugehen. In der Regel beinhalten diese Empfehlungen spezifischere Berichtspflichten seitens der Redaktionen wissenschaftlicher Fachzeitschriften. Da Forscher ihre Arbeiten veröffentlichen müssen, sollte es Änderungen bei den Einreichungsanforderungen geben: Berichte müssen detailliertere demografische Informationen enthalten und ihre Ergebnisse im Kontext der demografischen Merkmale der Stichprobe diskutieren.

Logistische und physische Herausforderungen mit EmotivLABS meistern

Zu den am häufigsten genannten Vorteilen von Online-Experimenten in der Neurowissenschaft oder Psychologie gehören eine größere Stichprobengröße, eine schnelle Erfassung unterschiedlicher demografischer Profile und kostengünstige Technologie.

EmotivLABS integriert viele dieser Best Practices, darunter einen Zertifizierungsprozess für Teilnehmer, die Emotiv EEG-Headsets verwenden, sowie eine Datenqualitätskontrolle, die maschinelles Lernen zur Überprüfung der Signalqualität einsetzt. Dies ermöglicht es der Forschung, Online-Experimente durchzuführen, die qualitativ hochwertige Daten liefern. Darüber hinaus überwacht Emotiv kontinuierlich die Plattformnutzung und arbeitet eng mit Forschern zusammen, um regelmäßige Updates für Software und Hardware bereitzustellen.

Optimierte Probandenauswahl

Einzelpersonen und Forscher müssen sich für die Datenerfassung nicht mehr persönlich treffen. EmotivLABS optimiert die Auswahl, Rekrutierung und Vergütung von Probanden, indem es jedes Experiment mit den am besten geeigneten Personen im globalen Probandenpool abgleicht.

Forscher können demografische Attribute in ihrem Versuchsaufbau festlegen, ähnlich wie bei den präzisen Targeting-Optionen für Werbung in sozialen Netzwerken. Das Experiment des Forschers wird automatisch zertifizierten Personen zur Verfügung gestellt, die den gewünschten Spezifikationen am besten entsprechen. Durch den Zertifizierungsprozess wird sichergestellt, dass die in dieser Community gesammelten Daten von hoher Qualität und vollständig sind.

Der Zugang zu Probanden unterschiedlichen Alters und unterschiedlicher ethnischer Herkunft wird die Aussagekraft der Studien erhöhen und eine differenziertere Interpretation menschlicher Daten ermöglichen. Bis 2021 umfasste EmotivLABS Personen aus mehr als 80 Ländern mit unterschiedlichen Bildungs-, Berufs- und sozioökonomischen Profilen.

EmotivLABS ermöglicht Forschern den Zugang zu Teilnehmern außerhalb der USA und anderer westlicher Länder – ein entscheidender Faktor zur Linderung des WEIRD-Problems.

Einfache Budgetierung

Die EEG-Headsets von Emotiv sind wesentlich kostengünstiger als Laborgeräte und einfacher einzurichten. Private Nutzer oder Citizen Scientists besitzen ihre eigenen Emotiv-Headsets, sodass Forscher diese nicht selbst bereitstellen müssen.

Anfänglich äußerten etablierte Forscher Skepsis gegenüber kommerzieller EEG-Hardware und der Ferndatenerfassung. Diese Wissenschaftler sind sich der Herausforderungen bei der Erfassung qualitativ hochwertiger, valider Signaldaten im Labor, wenn die Probanden unter ihrer direkten Aufsicht stehen, besonders bewusst. Zahlreiche Forschungsteams haben jedoch die Validität der Emotiv EEG-Headsets bestätigt. Die meisten dieser Validierungsstudien berichten von gleichwertigen Forschungsdaten zwischen Emotiv-Systemen und Laborsystemen. Dies bestätigt die Emotiv-Headsets als praktikable Alternative für die Datenerfassung in Forschungsqualität.

Unberührte Forschungsfelder erschließen

Die Verwendung tragbarer EEG-Hardware ermöglicht es Forschern, neue Fragen über Menschen zu stellen, die als gehende, sprechende Wesen ihr Leben außerhalb des Labors verbringen. Die Untersuchung der sozialen Kognition in realen Interaktionen ist beispielsweise ein wünschenswerteres Versuchsdesign als die Untersuchung isolierter Personen, die in Innenräumen festsitzen und unbeweglich sind. Zudem werden durch diese Flexibilität Längsschnittstudien besser machbar.
Letztlich geht es nicht nur darum, dass Experimente an begrenzten, nicht repräsentativen Probandenpools durchgeführt werden.

Die meisten veröffentlichten Forschungsberichte gehen über Alter und Geschlecht hinaus nicht einmal auf die demografischen Attribute ihrer Probanden ein.

Es wurde auch nachgewiesen, dass WEIRD-Probanden oft Ausreißer im Spektrum des menschlichen Verhaltens sind. Mit anderen Worten: Sie sind die am wenigsten ideale Stichprobengruppe, um Erkenntnisse über universelle menschliche Eigenschaften zu gewinnen.

Wenn Best Practices und Inklusivität in Ihr experimentelles Design einfließen, kann Online-Forschung tatsächlich wirkungsvoller und relevanter sein als Offline-Forschung im Labor. In jedem Fall muss der kontextuelle Rahmen, in dem die Forschungsfrage(n) gestellt werden, sorgfältig bedacht werden.
Sowohl Online- als auch Offline-Studien haben Vor- und Nachteile, und die spezifischen Umstände der Forschungsfrage(n) sollten die Wahl des Forschers bestimmen.

Möchten Sie mehr darüber erfahren, was EmotivLABS für Ihre Forschung tun kann?

Erstellen Sie Ihr Experiment mit dem Experiment Builder von Emotiv und stellen Sie es dann auf EmotivLABS bereit. Rekrutieren Sie Teilnehmer aus einem globalen Panel zertifizierter Personen, um hochwertige EEG-Daten zu erfassen – alles über eine einzige Plattform. Klicken Sie hier, um mehr zu erfahren oder eine Demo anzufordern.