Eksperymenty internetowe
Eksperyment internetowy lub eksperyment internetowy to eksperyment przeprowadzany przez Internet . W takich eksperymentach Internet jest albo „ medium , za pomocą którego można kierować reklamy na większe i bardziej zróżnicowane próby przy zmniejszonych kosztach administracyjnych i finansowych”, albo „ samodzielną dziedziną badań nauk społecznych”. Psychologia i studia internetowe to prawdopodobnie dyscypliny, które wykorzystywały te eksperymenty najszerzej, chociaż szereg innych dyscyplin, w tym politologia i ekonomia , również wykorzystuje eksperymenty internetowe. W psychologii większość eksperymentów internetowych przeprowadza się w obszarach psychologii poznawczej i psychologii społecznej . Ta forma konfiguracji eksperymentalnej staje się coraz bardziej popularna, ponieważ badacze mogą tanio zbierać duże ilości danych z szerszego zakresu lokalizacji i osób. Eksperyment internetowy to rodzaj metody badawczej online . Eksperymenty internetowe stały się znacznie bardziej rozpowszechnione od czasu pandemii COVID-19, ponieważ naukowcy nie byli w stanie przeprowadzać eksperymentów laboratoryjnych.
Wstęp
Eksperymenty są integralną częścią badań, jednak ich integracja z Internetem jest stopniowa. Istnieją trzy główne kategorie eksperymentów :
- Kontrolowane eksperymenty, przeprowadzane w warunkach laboratoryjnych, próbują kontrolować wszystkie zmienne, a następnie testować pojedynczy efekt.
- Eksperymenty naturalne, przeprowadzane po zdarzeniu na dużą skalę, które było zbyt trudne lub niemożliwe do kontrolowania, gromadzą jak najwięcej zmiennych, a następnie rysują korelacje.
- Eksperymenty polowe, obserwowane w warunkach naturalnych, w których można zastosować mniej kontroli, mają tę zaletę, że mają lepszą trafność zewnętrzną.
Adaptacja każdego rodzaju eksperymentu online napotyka pewne przeszkody.
Korzyści
Eksperymenty internetowe są znacznie tańsze, potencjalnie umożliwiając badaczowi:
- Docieraj do bardziej zróżnicowanych próbek, a także rzadkich lub specyficznych subpopulacji
- Szybciej przeprowadzaj eksperymenty
- Rekrutuj większe pule podmiotów, które zapewniają wyższą moc statystyczną
- Przeprowadzaj międzykulturowe eksperymenty społeczne w czasie rzeczywistym
Korzyści te mogą potencjalnie przełożyć się na większą trafność zewnętrzną i możliwość uogólnienia badania. Na przykład w eksperymentach internetowych w mniejszym stopniu polega się na danych zebranych od populacji zachodnich studentów studiów licencjackich, którzy są często wykorzystywani jako domyślny przedmiot badań w dyscyplinach nauk społecznych. Ponieważ uczestnicy pozostają w swoich domach lub biurach podczas udziału w eksperymencie, uczeni argumentowali również, że takie eksperymenty mają większą wartość ekologiczną .
Krytyka i ograniczenia
Eksperymenty internetowe mogą mieć słabsze kontrole eksperymentalne w porównaniu z eksperymentami laboratoryjnymi i mogą napotkać większe trudności z wymyśleniem procedur zapewniających niezawodność i trafność wewnętrzną . Eksperymenty naturalne i polowe online mogą również napotkać wyzwania związane z generalizacją wyników poza kontekstem online, w którym zostały przeprowadzone. Niektóre potencjalne trudności napotykane podczas eksperymentów internetowych obejmują:
- Trudność weryfikacji tożsamości osób biorących udział w eksperymencie
- Instrukcje eksperymentalne były ignorowane lub czytane zbyt niedbale, co prowadziło do niższej jakości danych
- Krótszy czas podejmowania decyzji przez uczestników online, wyzwalający procesy rozumowania instynktownego i emocjonalnego zamiast procesów poznawczych i racjonalnych, co może spowodować, że osoby badane będą średnio podejmować bardziej prospołeczne decyzje
- Znaczące zakłócenia występujące w trakcie eksperymentu bez wiedzy badaczy
- Osoby wybiórczo rezygnujące z eksperymentu, zwłaszcza jeśli wypadnięcie jest skorelowane ze zmienną niezależną (zmiennymi)
- Różnice w danych spowodowane szybkością i niezawodnością połączenia sieciowego, typem przeglądarki i komputera, rozmiarem i rozdzielczością ekranu itp.
- Badani traktowali eksperyment mniej poważnie i zachowywali się z mniejszą awersją do ryzyka
- Badani nie wierzą, że wchodzą w interakcje z prawdziwymi ludzkimi partnerami
- Temat dotyczy rekompensaty po zakończeniu eksperymentu lub anonimowości przetwarzania płatności
- Niereprezentatywny charakter większości anglojęzycznych użytkowników komputerów, którzy uczestniczą
W obliczu tej krytyki niektórzy badacze argumentowali, że eksperymenty z cegły i zaprawy są tak samo dotknięte tymi problemami, jeśli nie bardziej.
Przeprowadzono badania w celu sprawdzenia wewnętrznej trafności eksperymentów internetowych, porównując różne warunki eksperymentalne (online i offline) i pomyślnie powielając wyniki. Na przykład Schoeffler i in. (2013) porównali wyniki laboratoryjne i internetowe (62 i 1168 osób) eksperymentu słuchowego i nie stwierdzili znaczących różnic. Podwójny eksperyment z ekonomii behawioralnej podzielony na środowiska internetowe i tradycyjne laboratoryjne dał zasadniczo podobne wyniki. , że osoby niekompensowane i nienadzorowane na LabintheWild powtarzają wyniki poprzednich badań laboratoryjnych z porównywalną jakością danych.
Metodologie
Zaproponowano protokoły eksperymentalne, aby zapobiegać trudnościom związanym z eksperymentami internetowymi lub je kontrolować. Metody, takie jak sekwencyjne dopasowywanie obiektów, synchronizacja w tle i śledzenie użycia myszy oraz natychmiastowa rekompensata za pośrednictwem systemu PayPal, mogą rozwiązać wiele problemów dotyczących wewnętrznej ważności eksperymentów internetowych. Metody te kontrolują różnice w czasach reakcji, rozwiązują problemy selektywnego wyniszczania, koncentracji i rozproszenia uwagi, minimalizują obawy badanych o rekompensatę, zwiększają pewność badanych, że mają prawdziwego ludzkiego partnera w eksperymencie oraz zapewniają, że badani odpowiednio rozumieją instrukcje i problemy decyzyjne w eksperymencie.
Uczeni opracowali również techniki zmniejszania lub wyjaśniania przypadków rezygnacji, w tym technikę wysokich przeszkód (informacje niekorzystne motywacyjnie są gromadzone na początku badania), sprawdzanie powagi (prośba o oszacowanie prawdopodobieństwa uczestnika, że ukończy badanie) oraz faza rozgrzewki (umieszczenie formularzy zgody lub innych materiałów poprzedzających badanie w celu przesiania próbek przed rozpoczęciem badania).
Przykłady
Zastosowanie w psychologii
W sieci przeprowadza się wiele eksperymentów psychologicznych. Lista eksperymentów internetowych umożliwia rekrutację uczestników i archiwizację wcześniejszych eksperymentów (ponad 700 i wciąż rośnie). Dobrym zasobem do projektowania eksperymentów internetowych jest bezpłatne Wextor , które „dynamicznie tworzy dostosowane strony internetowe potrzebne do procedury eksperymentalnej” i jest niezwykle łatwe w użyciu. Do weryfikacji wyników badań laboratoryjnych i terenowych wykorzystano eksperymenty internetowe oraz do przeprowadzania nowych eksperymentów, które są wykonalne tylko w trybie online. Co więcej, materiały stworzone do eksperymentów w sieci mogą być później wykorzystane w tradycyjnych warunkach laboratoryjnych.
Rośnie liczba badań interdyscyplinarnych z wykorzystaniem eksperymentów internetowych. Na przykład wielu psychologów i badaczy prawa korzystało z sieci do zbierania danych. Lora Levett i Margaret Bull Kovera zbadały, czy przeciwni biegli są skuteczni w edukowaniu przysięgłych na temat nierzetelnych zeznań biegłych. Zamiast uwrażliwiać przysięgłych na błędy w zeznaniach innych biegłych, naukowcy odkryli, że przysięgli stali się bardziej sceptyczni wobec wszystkich zeznań biegłych. W jej eksperymencie doprowadziło to do większej liczby wyroków skazujących. Badania Levett i Kovera wykorzystały pisemną transkrypcję procesu, z którym następnie zapoznają się uczestnicy przed podjęciem decyzji. Ten rodzaj bodźca został skrytykowany przez niektórych badaczy jako pozbawiony ważności ekologicznej - to znaczy, że nie jest zbliżony do rzeczywistej próby. Wiele osób zaleca korzystanie z wideo, jeśli to możliwe. Naukowcy z New York University prowadzą obecnie badanie z zakresu psychologii i prawa , w którym wykorzystuje się nagranie z procesu karnego.
Naukowcy z University of Salford prowadzą obecnie szereg badań online w celu zbadania percepcji dźwięku. Eksperymenty dźwiękowe w sieci są szczególnie trudne ze względu na brak kontroli nad sprzętem odtwarzającym dźwięk.
Salganik, Dodds i Watts przeprowadzili eksperyment mający na celu zmierzenie wpływu społecznego, w szczególności oceny popularności piosenek. Wykorzystanie Internetu pozwoliło im zebrać ponad 14 000 uczestników i zbadać związek między indywidualnym a zbiorowym zachowaniem.
Zastosowanie w ekonomii
Ponieważ przeprowadzono więcej eksperymentów w ekonomii, pojawiły się pytania o odpowiednią metodologię i organizację badań. Jerome Hergueux i Nicolas Jacquemet opracowali „laboratorium online” do porównywania preferencji społecznych i awersji do ryzyka online i osobiście. Przeprowadzili ocenę niechęci do ryzyka, grę dobra publicznego, grę Trust, grę Dictator i grę Ultimatum grupom zarówno online, jak iw laboratorium, jako sposób oceny wewnętrznej ważności internetowych eksperymentów w ekonomii.
Zastosowanie w naukach politycznych
Internetowy eksperyment terenowy przeprowadzony na 61 milionach użytkowników Facebooka sprawdził, czy otrzymywanie informacji o głosowaniu, lokalach wyborczych i zachowaniach wyborczych znajomych skłoniło jednostki do poszukiwania informacji politycznych, wpłynęło na polityczne wyrażanie siebie i zmieniło zachowania wyborcze w świecie rzeczywistym.
Wykorzystanie w badaniach internetowych
Eksperymenty internetowe mają szczególne znaczenie w badaniach funkcjonowania społeczności internetowych. Badania internetowe , w tym badania społeczności internetowych i sieci społecznościowych, wykorzystywały eksperymenty naturalne i terenowe, aby zrozumieć skutki nieformalnych nagród w produkcji rówieśniczej na Wikipedii, a także wpływ wczesnego uznania i wsparcia na przyszłe sukcesy na Kickstarterze , Change.org , Epinions i Wikipedia. W innym eksperymencie przyjrzano się wpływowi wprowadzenia programu inteligentnego przydzielania zadań na Wikipedii na tempo edycji.
Linki zewnętrzne
- The Web Experiment List , Ulf-Dietrich Reips i Ralph Lengler omawiają doświadczenia.
- Samouczek na temat zaangażowania publicznego poprzez eksperymenty audio w sieci.