Webbaserede eksperimenter - Web-based experiments

Et webbaseret eksperiment eller internetbaseret eksperiment er et eksperiment , der udføres over internettet . I sådanne eksperimenter er internettet enten "et medium, hvorigennem man kan målrette mod større og mere forskelligartede prøver med reducerede administrative og økonomiske omkostninger" eller "et felt inden for samfundsvidenskabelig forskning i sig selv." Psykologi og internetstudier er sandsynligvis de discipliner, der har brugt disse eksperimenter mest, selvom en række andre discipliner, herunder statskundskab og økonomi, også bruger webbaserede eksperimenter. Inden for psykologien udføres de fleste webbaserede eksperimenter inden for områderne kognitiv psykologi og socialpsykologi . Denne form for eksperimentel opsætning er blevet stadig mere populær, fordi forskere billigt kan indsamle store mængder data fra en bredere vifte af steder og mennesker. Et webbaseret eksperiment er en form for online forskningsmetode . Webbaserede eksperimenter er blevet betydeligt mere udbredt siden COVID-19-pandemien, da forskere ikke har været i stand til at udføre laboratoriebaserede eksperimenter.

Introduktion

Eksperimenter er en integreret del af forskningen, men deres integration med Internettet har været gradvis. Der er tre hovedkategorier af eksperimenter :

  • Kontrollerede eksperimenter, udført i et laboratorium, forsøger at kontrollere for alle variabler og derefter teste for en enkelt effekt.
  • Naturlige eksperimenter, udført efter en storstilet begivenhed, som var uoverkommelig vanskelig eller umulig at kontrollere, indsamler så mange variabler som muligt og tegner derefter korrelationer.
  • Feltforsøg, observeret i en naturlig indstilling, hvor færre kontroller kan anvendes, har fordelen af ​​bedre ekstern validitet.

Tilpasningen af ​​hver type eksperiment online står over for nogle forhindringer.

Fordele

Webbaserede eksperimenter er betydeligt billigere, hvilket muligvis tillader forskeren at:

  • Nå ud til flere forskellige prøver såvel som sjældne eller specifikke underpopulationer
  • Kør eksperimenter hurtigere
  • Rekruttere større emnepuljer, der giver højere statistisk magt
  • Udfør tværkulturelle sociale eksperimenter i realtid

Disse fordele har potentiale til at omsætte til større ekstern validitet og generaliserbarhed for undersøgelsen. For eksempel er der i webbaserede eksperimenter mindre afhængighed af data indsamlet fra populationer af vestlige bachelorstuderende, der ofte bruges som standardforskningsemner inden for samfundsvidenskabelige discipliner. Fordi deltagerne forbliver i deres hjem eller kontorer, mens de deltager i eksperimentet, har forskere også argumenteret for, at sådanne eksperimenter har større økologisk validitet .

Kritik og begrænsninger

Webbaserede eksperimenter kan have svagere eksperimentelle kontroller sammenlignet med laboratoriebaserede eksperimenter og kan stå over for større vanskeligheder med at finde frem til procedurer, der sikrer pålidelighed og intern validitet . Online natur- og feltforsøg kan også stå over for udfordringer med at generalisere fund udover den online kontekst, de blev udført i. Nogle potentielle vanskeligheder ved web-baserede eksperimenter omfatter:

  • Vanskeligheder med at kontrollere identiteten af ​​forsøgspersoner
  • Eksperimentelle instruktioner ignoreres eller læses for skødesløst, hvilket fører til data af lavere kvalitet
  • Kortere beslutningstider for onlinedeltagere, der udløser instinktive og følelsesmæssige ræsonnementsprocesser frem for kognitive og rationelle, hvilket kan få emner til i gennemsnit at træffe mere socialt beslutninger
  • Betydelige distraktioner, der opstår i løbet af eksperimentet, uden at forskerne ved det
  • Emner dropper selektivt ud af eksperimentet, især hvis frafald er korreleret med den eller de uafhængige variabler
  • Variation i data på grund af netværksforbindelseshastighed og pålidelighed, browser- og computertyper, skærmstørrelse og opløsning osv.
  • Emner tager forsøget mindre alvorligt og opfører sig med mindre risikoaversion
  • Emner tror ikke på, at de interagerer med rigtige menneskelige partnere
  • Der tages forbehold for kompensation ved afslutningen af ​​eksperimentet eller anonymitet i betalingsbehandling
  • Den ikke-repræsentative karakter af de for det meste engelsktalende computerbrugere, der deltager

I lyset af denne kritik har nogle forskere argumenteret for, at eksperimenter med mursten og mørtel er lige så påvirket af disse problemer, hvis ikke mere.

Undersøgelser er blevet udført for at teste den interne validitet af webbaserede eksperimenter, sammenligne på tværs af eksperimentelle forhold (online og offline) og med succes replikere fund. For eksempel har Schoeffler et al. (2013) sammenlignede laboratorie- og webbaserede resultater (62 og 1.168 forsøgspersoner) af et auditivt eksperiment og fandt ingen signifikante forskelle. Et parret eksperiment inden for adfærdsøkonomi opdelt i online og traditionelle laboratoriemiljøer gav væsentligt lignende resultater. Ukompenserede og uden tilsyn forsøgspersoner på LabintheWild har vist sig at replikere tidligere in-lab undersøgelsesresultater med sammenlignelig datakvalitet.

Metoder

Eksperimentelle protokoller er blevet foreslået for at forhindre eller kontrollere vanskeligheder forbundet med webbaseret eksperimentering. Metoder som sekventiel emnetilpasning, baggrunds timing og musebrugssporing og øjeblikkelig kompensation via PayPal har potentiale til at løse mange af bekymringerne om den interne gyldighed af webbaserede eksperimenter. Disse metoder styrer forskelle i svartider, behandler spørgsmål om selektiv nedslidning, koncentration og distraktion, minimerer emnets bekymring for kompensation, forbedrer motivets tillid til, at de har en ægte menneskelig partner i eksperimentet, og sikrer, at forsøgspersonerne har en passende forståelse af instruktioner og beslutningsproblemerne i forsøget.

Lærde har også formuleret teknikker til at reducere eller redegøre for frafald, herunder high-hurdle-teknikken (motiverende negative oplysninger er samlet i begyndelsen af ​​undersøgelsen), seriøsitetskontrollen (anmoder deltagerens sandsynlighedsestimat om, at de vil fuldføre undersøgelsen) og opvarmningsfasen (først at placere samtykkeerklæringer eller andre præstudiematerialer for at vinde prøverne inden undersøgelsen starter).

Eksempler

Brug i psykologi

En bred vifte af psykologieksperimenter udføres på nettet. Webeksperimentlisten giver en måde at rekruttere deltagere og arkiver tidligere eksperimenter (over 700 og voksende). En god ressource til at designe et webeksperiment er det gratis Wextor -værktøj, der "dynamisk opretter de tilpassede websider, der er nødvendige for den eksperimentelle procedure" og er bemærkelsesværdigt let at bruge. Webeksperimenter er blevet brugt til at validere resultater fra laboratorieforskning og feltforskning og til at udføre nye eksperimenter, der kun er mulige, hvis de udføres online. Ydermere kan de materialer, der er skabt til webforsøg, bruges i en traditionel laboratorieindstilling, hvis det senere ønskes.

Tværfaglig forskning ved hjælp af webeksperimenter stiger. For eksempel har en række psykolog- og jura -forskere brugt internettet til at indsamle data. Lora Levett og Margaret Bull Kovera undersøgte, om modsatte ekspertvidner er effektive til at uddanne jurymedlemmer om upålidelige ekspertbeviser. I stedet for at gøre jurymedlemmer opmærksom på fejl i den anden eksperts vidnesbyrd, fandt forskerne, at nævninge blev mere skeptiske over for alle ekspertvidner. I hendes eksperiment førte dette til flere skyldige domme. Levett og Koveras forskning brugte en skriftlig udskrift af et forsøg, som deltagerne derefter læste, før de tog deres beslutning. Denne form for stimulans er blevet kritiseret af nogle forskere som manglende økologisk validitet-det vil sige, at den ikke nærmer sig et forsøg i virkeligheden. Mange anbefaler brug af video, hvor det er muligt. Forskere ved New York University gennemfører i øjeblikket en psykologi- og juraundersøgelse, der bruger video af en straffesag.

Forskere ved University of Salford gennemfører i øjeblikket en række undersøgelser online for at undersøge lydopfattelse. Lydforsøg på nettet er særligt vanskelige på grund af manglende kontrol over lydgengivelsesudstyr.

Salganik, Dodds og Watts gennemførte et eksperiment for at måle social indflydelse, især i populariteten af ​​sange. Deres brug af Internettet tillod dem at indsamle over 14.000 deltagere og undersøge forholdet mellem individuel og kollektiv adfærd.

Brug i økonomi

Efterhånden som flere eksperimenter er blevet udført inden for økonomi, er der rejst spørgsmål om passende metode og studieorganisation. Jerome Hergueux og Nicolas Jacquemet udviklede et "online laboratorium" til at sammenligne sociale præferencer og risikoaversion online og personligt. De administrerede en risikoaversionsvurdering, Public good game, et Trust-spil, et Dictator-spil og et Ultimatum-spil til grupper både online og i et laboratorium som en måde at vurdere den interne validitet af webbaserede eksperimenter i økonomi.

Anvendelse i statsvidenskab

Et online felteksperiment udført på 61 millioner Facebook-brugere testede, om modtagelse af oplysninger om afstemning, valgsteder og stemningsadfærd for ens venner fik enkeltpersoner til at opsøge politisk information, påvirket politisk selvudfoldelse og ændret stemmeadfærd i den virkelige verden.

Brug i internetstudier

Webbaserede eksperimenter har særlig betydning i undersøgelser af, hvordan onlinesamfund fungerer. Internetundersøgelser , herunder undersøgelser af onlinefællesskaber og sociale netværk, har brugt naturlige og felteksperimenter til at forstå virkningerne af uformelle belønninger i peer -produktion på Wikipedia, samt virkningen af ​​tidlig anerkendelse og støtte på fremtidige succeser på Kickstarter , Change.org , Epinions og Wikipedia. Et andet eksperiment så på effekten på redigeringshastigheder ved indførelse af et program med intelligent opgavetildeling på Wikipedia.

Referencer

eksterne links