Webbaserade experiment
Ett webbaserat experiment eller internetbaserat experiment är ett experiment som utförs över Internet . I sådana experiment är Internet antingen "ett medium genom vilket man kan rikta in sig på större och mer varierande urval med minskade administrativa och finansiella kostnader" eller "ett område för samhällsvetenskaplig forskning i sig." Psykologi och internetstudier är förmodligen de discipliner som har använt dessa experiment mest, även om en rad andra discipliner inklusive statsvetenskap och ekonomi också använder webbaserade experiment. Inom psykologi utförs de flesta webbaserade experiment inom områdena kognitiv psykologi och socialpsykologi . Den här formen av experimentupplägg har blivit allt mer populär eftersom forskare billigt kan samla in stora mängder data från ett större antal platser och människor. Ett webbaserat experiment är en typ av onlineforskningsmetod . Webbaserade experiment har blivit betydligt mer utbredda sedan covid-19-pandemin, eftersom forskare inte har kunnat genomföra labbbaserade experiment.
Introduktion
Experiment är en integrerad del av forskningen, men deras integration med Internet har skett gradvis. Det finns tre huvudkategorier av experiment :
- Kontrollerade experiment, utförda i laboratoriemiljö, försöker kontrollera för alla variabler och testa sedan för en enda effekt.
- Naturliga experiment, utförda efter en storskalig händelse som var oöverkomligt svår eller omöjlig att kontrollera, samlar in så många variabler som möjligt och drar sedan korrelationer.
- Fältexperiment, observerade i en naturlig miljö där färre kontroller kan tillämpas, har fördelen av bättre extern validitet.
Anpassningen av varje typ av experiment online möter vissa hinder.
Fördelar
Webbaserade experiment är betydligt billigare, vilket potentiellt gör det möjligt för forskaren att:
- Nå fler olika prover, såväl som sällsynta eller specifika delpopulationer
- Kör experiment snabbare
- Rekrytera större ämnespooler som ger högre statistisk kraft
- Genomför tvärkulturella sociala experiment i realtid
Dessa fördelar har potential att översättas till större extern validitet och generaliserbarhet för studien. Till exempel, i webbaserade experiment är det mindre beroende av data som samlats in från populationer av västerländska studenter som ofta används som standardforskningsämnen inom samhällsvetenskapliga discipliner. Eftersom deltagarna stannar kvar i sina hem eller på kontor medan de deltar i experimentet, har forskare också hävdat att sådana experiment har större ekologisk giltighet .
Kritik och begränsningar
Webbaserade experiment kan ha svagare experimentella kontroller jämfört med laboratoriebaserade experiment och kan ha större svårigheter att komma på procedurer som säkerställer tillförlitlighet och intern validitet . Natur- och fältexperiment online kan också möta utmaningar med att generalisera fynd utanför onlinekontexten där de utfördes. Några potentiella svårigheter som webbaserade experiment möter inkluderar:
- Svårigheter att verifiera identiteten på försökspersoner som deltar i experimentet
- Experimentella instruktioner ignoreras eller läses för slarvigt, vilket leder till lägre kvalitet på data
- Kortare beslutstider för onlinedeltagare som utlöser instinktiva och känslomässiga resonemangsprocesser snarare än kognitiva och rationella, vilket kan få försökspersoner att fatta mer prosociala beslut i genomsnitt
- Betydande distraktioner inträffade under experimentets gång utan forskarnas medvetenhet
- Försökspersoner som selektivt hoppar av experimentet, särskilt om bortfallet är korrelerat med den eller de oberoende variablerna.
- Variation i data på grund av nätverksanslutningens hastighet och tillförlitlighet, webbläsare och datortyper, skärmstorlek och upplösning, etc.
- Försökspersoner tar experimentet mindre seriöst och beter sig med mindre riskaversion
- Försökspersoner som inte tror att de interagerar med riktiga mänskliga partners
- Ämnesbekymmer om kompensation i slutet av experimentet eller anonymitet vid betalningshantering
- Den icke-representativa karaktären hos de mestadels engelsktalande datoranvändare som deltar
Inför denna kritik har vissa forskare hävdat att tegel-och-bruk- experiment är lika påverkade av dessa problem, om inte mer så.
Studier har genomförts för att testa den interna validiteten hos webbaserade experiment, jämföra mellan experimentella förhållanden (online och offline) och framgångsrikt replikera resultat. Till exempel, Schoeffler et al. (2013) jämförde laboratorie- och webbaserade resultat (62 och 1 168 försökspersoner) från ett auditivt experiment och fann inga signifikanta skillnader. Ett parat experiment i beteendeekonomi uppdelat i online- och traditionella labbmiljöer gav väsentligen liknande resultat. Okompenserade och oövervakade försökspersoner på LabintheWild har visat sig replikera tidigare resultat från laboratoriestudier med jämförbar datakvalitet.
Metoder
Experimentella protokoll har föreslagits för att förhindra eller kontrollera svårigheter i samband med webbaserade experiment. Metoder som sekventiell ämnesmatchning, bakgrundstiming och spårning av musanvändning och omedelbar kompensation via PayPal har potential att ta itu med många av farhågorna om den interna giltigheten hos webbaserade experiment. Dessa metoder kontrollerar för skillnader i svarstider, tar itu med frågor om selektiv utmattning, koncentration och distraktion, minimerar försökspersoners oro för kompensation, förbättrar försökspersonens förtroende för att de har en riktig mänsklig partner i experimentet och säkerställer att försökspersonerna har en lämplig förståelse för instruktioner och beslutsproblemen i experimentet.
Forskare har också formulerat tekniker för att minska eller ta hänsyn till avhopp, inklusive tekniken med höga hinder (motivationsmässigt skadlig information samlas i kluster i början av studien), seriöshetskontrollen (begär deltagarens sannolikhetsuppskattning att de kommer att slutföra studien) , och uppvärmningsfasen (placering av samtyckesformulär eller annat förstudiematerial först för att vinna proverna innan studien börjar).
Exempel
Används inom psykologi
Ett brett utbud av psykologiska experiment genomförs på webben. Listan över webbexperiment ger ett sätt att rekrytera deltagare och arkiverar tidigare experiment (över 700 och växer). En bra resurs för att designa ett webbexperiment är det kostnadsfria Wextor , som "dynamiskt skapar de anpassade webbsidor som behövs för experimentproceduren" och är anmärkningsvärt lätt att använda. Webbexperiment har använts för att validera resultat från laboratorieforskning och fältforskning och för att genomföra nya experiment som bara är genomförbara om de görs online. Vidare kan materialen som skapats för webbexperiment användas i en traditionell laboratoriemiljö om så önskas.
Tvärvetenskaplig forskning med webbexperiment ökar. Till exempel har ett antal psykologi- och juridikforskare använt webben för att samla in data. Lora Levett och Margaret Bull Kovera undersökte om motstående expertvittnen är effektiva för att utbilda jurymedlemmar om opålitliga expertbevis. Istället för att göra jurymedlemmar känsliga för brister i den andra expertens vittnesmål, fann forskarna att jurymedlemmar blev mer skeptiska till alla expertutlåtanden. I hennes experiment ledde detta till fler fällande domar. Levett och Koveras forskning använde en skriftlig utskrift av en rättegång, som deltagarna sedan läste innan de fattade sitt beslut. Denna typ av stimulans har kritiserats av vissa forskare för att den saknar ekologisk giltighet - det vill säga att den inte är nära en prövning i verkligheten. Många rekommenderar användning av video där det är möjligt. Forskare vid New York University genomför för närvarande en psykologi- och juridikstudie som använder video av en brottsrättegång.
Forskare vid University of Salford genomför för närvarande ett antal studier online för att utforska ljuduppfattning. Ljudexperiment över webben är särskilt svåra på grund av bristande kontroll över ljudåtergivningsutrustning.
Salganik, Dodds och Watts genomförde ett experiment för att mäta socialt inflytande, särskilt i popularitetsvärderingen av låtar. Deras användning av Internet gjorde det möjligt för dem att samla över 14 000 deltagare och undersöka sambandet mellan individuellt och kollektivt beteende.
Användning inom ekonomi
I takt med att fler experiment har genomförts inom ekonomi har frågor om lämplig metodik och studieorganisation väckts. Jerome Hergueux och Nicolas Jacquemet utvecklade ett "onlinelaboratorium" för att jämföra sociala preferenser och riskaversion online och personligen. De administrerade en riskaversionbedömning, Allmännytta-spel, ett Trust-spel, ett Dictator-spel och ett Ultimatum-spel till grupper både online och i ett labb som ett sätt att bedöma den interna giltigheten av webbaserade experiment inom ekonomi.
Används inom statsvetenskap
Ett fältexperiment online som genomfördes på 61 miljoner Facebook-användare testade om det att få information om röstning, vallokaler och röstbeteende hos ens vänner ledde till att individer sökte politisk information, påverkade politiskt självuttryck och ändrade röstbeteende i verkligheten.
Använd i internetstudier
Webbaserade experiment är särskilt framträdande i studier av hur onlinegemenskaper fungerar. Internetstudier , inklusive studier av online-gemenskaper och sociala nätverk, har använt naturliga experiment och fältexperiment för att förstå effekterna av informella belöningar i peer-produktion på Wikipedia, såväl som effekten av tidig erkännande och stöd på framtida framgångar på Kickstarter , Change.org , Epinions och Wikipedia. Ett annat experiment tittade på effekten på redigeringshastigheten av att introducera ett program för intelligent uppgiftstilldelning på Wikipedia.
externa länkar
- The Web Experiment List , Ulf-Dietrich Reips och Ralph Lengler diskuterar erfarenheter.
- Handledning om offentligt engagemang genom ljudwebbexperiment.