Vi undersöker kompromisser i samband med att använda Amazon.com Mechanical Turk (MTurk) gränssnitt för ämnesrekrytering. Vi beskriver först MTurk och dess löfte som ett fordon för att utföra billiga och enkla experiment. Därefter bedömer vi den interna och externa giltigheten av experiment som utförs med hjälp av MTurk, med hjälp av ett ramverk som kan användas för att utvärdera andra ämnespooler. Vi undersöker först egenskaperna hos prover från MTurk-populationen. Vi visar att respondenter som rekryteras på detta sätt ofta är mer representativa för den amerikanska befolkningen än personlig bekvämlighet prover-modalprov i publicerade experimentella statsvetenskap-men mindre representativa än ämnen i Internet-baserade paneler eller nationella sannolikhetsprov. Slutligen kopierar vi viktiga publicerade experimentella arbeten med hjälp av MTurk prover.
REF utvärderade crowdworker provers lämplighet för experimentell statsvetenskap och fann att respondenterna rekryterade på MTurk var mer representativa för den amerikanska befolkningen än personliga bekvämlighetsprover, men mindre representativa än respondenterna rekryterade för Internet-baserade paneler eller nationella sannolikhetsprover.
Evaluating Online Labor Markets for Experimental Research: Amazon.com's Mechanical Turk
{'venue': None, 'journal': 'Political Analysis', 'mag_field_of_study': ['Mathematics']}