Webbasierte Experimente - Web-based experiments

Ein webbasiertes Experiment oder internetbasiertes Experiment ist ein Experiment , das über das Internet durchgeführt wird . In solchen Experimenten ist das Internet entweder "ein Medium, über das größere und vielfältigere Stichproben mit reduzierten administrativen und finanziellen Kosten angesprochen werden können" oder "ein eigenständiges Feld der sozialwissenschaftlichen Forschung". Psychologie und Internetstudien sind wahrscheinlich die Disziplinen, die diese Experimente am häufigsten verwendet haben, obwohl eine Reihe anderer Disziplinen, einschließlich der Politikwissenschaft und der Wirtschaftswissenschaften, ebenfalls webbasierte Experimente verwenden. Innerhalb der Psychologie werden die meisten webbasierten Experimente in den Bereichen Kognitionspsychologie und Sozialpsychologie durchgeführt . Diese Form des Versuchsaufbaus wird immer beliebter, weil Forscher kostengünstig große Datenmengen von einem breiteren Spektrum von Orten und Personen sammeln können. Ein webbasiertes Experiment ist eine Art Online-Forschungsmethode . Webbasierte Experimente haben seit der COVID-19-Pandemie deutlich an Verbreitung gewonnen, da Forscher keine laborbasierten Experimente durchführen konnten.

Einführung

Experimente sind ein wesentlicher Bestandteil der Forschung, ihre Integration mit dem Internet erfolgte jedoch schrittweise. Es gibt drei Hauptkategorien von Experimenten :

  • Kontrollierte Experimente, die in einer Laborumgebung durchgeführt werden, versuchen, alle Variablen zu kontrollieren und dann auf einen einzelnen Effekt zu testen.
  • Natürliche Experimente, die nach einem unkontrollierbaren Großereignis durchgeführt wurden, sammeln so viele Variablen wie möglich und ziehen dann Korrelationen.
  • Feldexperimente, die in einer natürlichen Umgebung beobachtet werden, in der weniger Kontrollen angewendet werden können, haben den Vorteil einer besseren externen Validität.

Die Adaption jeder Art von Experimenten online steht vor einigen Hürden.

Leistungen

Webbasierte Experimente sind deutlich kostengünstiger und ermöglichen dem Forscher möglicherweise:

  • Erreichen Sie vielfältigere Stichproben sowie seltene oder spezifische Unterpopulationen
  • Experimente schneller durchführen
  • Rekrutieren Sie größere Probandenpools, die eine höhere statistische Aussagekraft bieten
  • Führen Sie interkulturelle soziale Experimente in Echtzeit durch

Diese Vorteile haben das Potenzial, zu einer größeren externen Validität und Generalisierbarkeit der Studie zu führen. Bei webbasierten Experimenten zum Beispiel verlässt man sich weniger auf Daten, die von Populationen westlicher Studenten gesammelt wurden, die oft als Standardforschungsthemen in sozialwissenschaftlichen Disziplinen verwendet werden. Da die Teilnehmer während der Teilnahme an dem Experiment in ihren Häusern oder Büros bleiben, argumentieren Wissenschaftler auch, dass solche Experimente eine größere ökologische Validität haben .

Kritikpunkte und Einschränkungen

Web-basierten Experimente haben schwächer experimentelle Kontrollen im Vergleich zu Labor -basierte Experimente und können größere Schwierigkeiten mit den Verfahren kommen , die sicherstellen , Zuverlässigkeit und interne Validität . Online-Natur- und Feldexperimente können auch mit Herausforderungen konfrontiert sein, die Ergebnisse über den Online-Kontext hinaus verallgemeinern, in dem sie durchgeführt wurden. Einige potenzielle Schwierigkeiten bei webbasierten Experimenten sind:

  • Schwierigkeiten, die Identität der am Experiment teilnehmenden Probanden zu überprüfen
  • Versuchsanleitungen ignoriert oder zu unvorsichtig gelesen, was zu einer geringeren Datenqualität führt
  • Kürzere Entscheidungszeiten von Online-Teilnehmern, die eher instinktive und emotionale Denkprozesse als kognitive und rationale auslösen, was dazu führen könnte, dass die Probanden im Durchschnitt pro-sozialere Entscheidungen treffen
  • Erhebliche Ablenkungen im Verlauf des Experiments ohne Wissen der Forscher
  • Probanden, die das Experiment selektiv abbrechen, insbesondere wenn der Abbruch mit der/den unabhängigen Variable(n) korreliert
  • Abweichungen in den Daten aufgrund von Geschwindigkeit und Zuverlässigkeit der Netzwerkverbindung, Browser- und Computertypen, Bildschirmgröße und -auflösung usw.
  • Probanden nehmen das Experiment weniger ernst und verhalten sich weniger risikoscheu
  • Probanden, die nicht glauben, dass sie mit echten menschlichen Partnern interagieren
  • Bedenken der Person bezüglich der Entschädigung am Ende des Experiments oder der Anonymität der Zahlungsabwicklung
  • Der nicht-repräsentative Charakter der meist englischsprachigen Computernutzer, die teilnehmen

Angesichts dieser Kritik haben einige Forscher argumentiert, dass stationäre Experimente von diesen Problemen genauso betroffen sind, wenn nicht sogar noch mehr.

Es wurden Studien durchgeführt, um die interne Validität von webbasierten Experimenten zu testen, die experimentellen Bedingungen (online und offline) zu vergleichen und die Ergebnisse erfolgreich zu replizieren. Schöffler et al. (2013) verglichen labor- und webbasierte Ergebnisse (62 und 1.168 Probanden) eines Hörexperiments und fanden keine signifikanten Unterschiede. Ein gepaartes Experiment in der Verhaltensökonomie, das in Online- und traditionelle Laborumgebungen unterteilt war, lieferte im Wesentlichen ähnliche Ergebnisse. Unkompensierte und unbeaufsichtigte Probanden mit LabintheWild replizieren nachweislich frühere Laborstudienergebnisse mit vergleichbarer Datenqualität.

Methoden

Experimentelle Protokolle wurden vorgeschlagen, um Schwierigkeiten im Zusammenhang mit webbasierten Experimenten zu verhindern oder zu kontrollieren. Methoden wie sequentielles Subjekt-Matching, Hintergrund-Timing und Tracking der Mausnutzung sowie sofortige Kompensation durch PayPal haben das Potenzial, viele der Bedenken hinsichtlich der internen Validität webbasierter Experimente auszuräumen. Diese Methoden kontrollieren Unterschiede in den Reaktionszeiten, adressieren Probleme der selektiven Abnutzung, Konzentration und Ablenkung, minimieren die Besorgnis der Versuchspersonen bezüglich der Kompensation, stärken das Vertrauen der Versuchspersonen, dass sie einen echten menschlichen Partner im Experiment haben, und stellen sicher, dass die Versuchspersonen ein angemessenes Verständnis der Anweisungen und die Entscheidungsprobleme im Experiment.

Wissenschaftler haben auch Techniken entwickelt, um Studienabbrüche zu verringern oder zu berücksichtigen, einschließlich der High-Hurdle-Technik (motivierend negative Informationen werden zu Beginn der Studie geclustert), der Ernsthaftigkeitsprüfung (Anfrage der Wahrscheinlichkeitsschätzung der Teilnehmer, dass sie die Studie abschließen) , und die Aufwärmphase (Einverständniserklärungen oder andere Materialien vor der Studie werden zuerst platziert, um die Proben vor Beginn der Studie zu untersuchen).

Beispiele

Verwendung in der Psychologie

Eine Vielzahl von psychologischen Experimenten wird im Internet durchgeführt. Die Web-Experiment-Liste bietet eine Möglichkeit, Teilnehmer zu rekrutieren und vergangene Experimente (über 700 und mehr) zu archivieren. Eine gute Ressource zum Entwerfen eines Webexperiments ist das kostenlose Wextor- Tool, das "dynamisch die für das experimentelle Verfahren benötigten benutzerdefinierten Webseiten erstellt" und bemerkenswert einfach zu bedienen ist. Web-Experimente wurden verwendet, um Ergebnisse aus Labor- und Feldforschung zu validieren und neue Experimente durchzuführen, die nur online durchführbar sind. Darüber hinaus können die für Webexperimente erstellten Materialien auf Wunsch später in einer traditionellen Laborumgebung verwendet werden.

Interdisziplinäre Forschung mit Web-Experimenten nimmt zu. Zum Beispiel haben eine Reihe von Psychologie- und Rechtswissenschaftlern das Internet genutzt, um Daten zu sammeln. Lora Levett und Margaret Bull Kovera untersuchten, ob gegnerische Sachverständige effektiv sind, um Geschworene über unzuverlässige Sachverständigenbeweise aufzuklären. Anstatt die Geschworenen für Fehler in der Aussage des anderen Sachverständigen zu sensibilisieren, stellten die Forscher fest, dass die Geschworenen gegenüber allen Sachverständigenaussagen skeptischer wurden. In ihrem Experiment führte dies zu weiteren Schuldsprüchen. Die Forschung von Levett und Kovera verwendete eine schriftliche Abschrift eines Prozesses, die die Teilnehmer dann lesen, bevor sie ihre Entscheidung trafen. Diese Art von Stimulus wurde von einigen Forschern als mangelnde ökologische Validität kritisiert – das heißt, sie kommt einem realen Versuch nicht sehr nahe. Viele empfehlen die Verwendung von Videos, wo es möglich ist. Forscher der New York University führen derzeit eine Psychologie- und Rechtsstudie durch , bei der Videos eines Strafverfahrens verwendet werden.

Forscher der University of Salford führen derzeit eine Reihe von Online-Studien durch, um die Klangwahrnehmung zu untersuchen. Klangexperimente über das Internet sind aufgrund der fehlenden Kontrolle über die Tonwiedergabegeräte besonders schwierig.

Salganik, Dodds und Watts führten ein Experiment durch, um den sozialen Einfluss zu messen, insbesondere in der Beliebtheitsskala von Songs. Ihre Nutzung des Internets ermöglichte es ihnen, über 14.000 Teilnehmer zu sammeln und den Zusammenhang zwischen individuellem und kollektivem Verhalten zu untersuchen.

Verwendung in der Wirtschaft

Da immer mehr Experimente in den Wirtschaftswissenschaften durchgeführt wurden, wurden Fragen zur geeigneten Methodik und Studienorganisation aufgeworfen. Jerome Hergueux und Nicolas Jacquemet haben ein „Online-Labor“ entwickelt, um soziale Präferenzen und Risikoaversion online und persönlich zu vergleichen. Sie führten Gruppen sowohl online als auch in einem Labor eine Risikoaversionsbewertung, ein Public-Good-Spiel, ein Trust-Spiel, ein Diktator-Spiel und ein Ultimatum-Spiel durch, um die interne Validität von webbasierten Experimenten in der Wirtschaft zu bewerten.

Verwendung in der Politikwissenschaft

In einem Online-Feldexperiment mit 61 Millionen Facebook-Nutzern wurde getestet, ob der Erhalt von Informationen über Wahlen, Wahllokale und das Wahlverhalten von Freunden dazu führte, dass Einzelpersonen nach politischen Informationen suchten, die politische Selbstdarstellung beeinflusste und das Wahlverhalten in der realen Welt veränderte.

Verwendung im Internetstudium

Webbasierte Experimente haben eine besondere Bedeutung bei Studien zur Funktionsweise von Online-Communitys. Internetstudien , einschließlich Studien zu Online-Communities und sozialen Netzwerken, haben Natur- und Feldexperimente verwendet, um die Auswirkungen informeller Belohnungen in der Peer-Produktion auf Wikipedia sowie die Auswirkungen von Früherkennung und Unterstützung auf zukünftige Erfolge auf Kickstarter , Change.org , zu verstehen , Epinions und Wikipedia. Ein weiteres Experiment untersuchte die Auswirkungen der Einführung eines Programms zur intelligenten Aufgabenzuweisung auf Wikipedia auf die Bearbeitungsraten.

Verweise

Externe Links