Ang mga sikolohikal na pag-aaral ay natagpuang mali sa higit sa 50% ng mga kaso

2024 May -akda: Seth Attwood | [email protected]. Huling binago: 2023-12-16 16:18

May mga "malakas na postura" na nagtatayo ng kumpiyansa at nagpapababa ng mga stress hormone. Kapag hawak ng mga tao ang isang tasa ng mainit na inumin sa kanilang mga kamay, nagiging mas palakaibigan sila sa mga nakapaligid sa kanila. Ang lakas ng loob ay isang mapagkukunang ginagastos natin kapag lumalaban tayo sa tukso. Ang kakayahang ipagpaliban ang gantimpala ay tumutukoy sa tagumpay ng bata sa hinaharap.

Ang mga pahayag na ito ay halos magkapareho sa isa't isa: sa likod ng mga ito ay kilalang sikolohikal na pananaliksik, sikat na bestseller sa agham, mga column sa mga sikat na magazine at TED talks.

Mayroon din silang isa pang pagkakatulad: lahat sila ay naging mali.

Ang krisis sa reproducibility ay nagdulot ng pagdududa sa buong larangan ng agham. Marami sa mga resulta, na malawakang sinipi sa media, ay itinuturing na ngayon na pinalaking o mali. Nang sinubukan ng mga siyentipiko na kopyahin ang parehong klasiko at kamakailang sikolohikal na mga eksperimento, ang mga resulta ay nakakagulat na pare-pareho, na halos kalahati ng mga kaso ay matagumpay at ang iba pang kalahati ay nabigo.

Sa wakas ay naging maliwanag ang krisis noong 2015, nang suriin ng mga siyentipiko na pinamumunuan ni Brian Nosek ang 100 sikolohikal na pag-aaral. Nakamit nila ang mga unang resulta sa 36 na kaso lamang. Ang editor-in-chief ng Lancet na si Richard Horton ay nagsabi:

Ang mga akusasyon laban sa agham ay medyo prangka: hindi bababa sa kalahati ng siyentipikong panitikan ay mali lang. Dahil sa pagdurusa sa mga pag-aaral na may maliit na sukat ng sample, kakaunti ang epekto at hindi tamang pagsusuri, pati na rin ang pagkahumaling sa mga uso sa fashion na kahina-hinalang kahalagahan, ang agham ay lumipat sa kamangmangan.

Ang muling paggawa ay isa sa mga pangunahing kinakailangan para sa kaalamang siyentipiko. Ang mas mahusay na resulta ay muling ginawa, mas maaasahan ito - ito ang tanging paraan upang paghiwalayin ang mga tunay na pattern mula sa mga simpleng pagkakataon

Ngunit ito ay lumabas na ang pangangailangang ito ay hindi palaging natutugunan.

Nagsimula ang krisis sa medisina, ngunit karamihan sa mga apektadong sikolohiya. Noong tag-araw ng 2018, sinubukan ng mga siyentipiko na kopyahin ang isang seleksyon ng mga sikolohikal na pag-aaral na inilathala sa Science and Nature, ang pinakaprestihiyosong siyentipikong mga journal sa mundo. Sa 21 eksperimento, 13 lamang ang nakumpirma - at kahit na sa mga kasong ito, ang mga orihinal na resulta ay pinalaki ng humigit-kumulang 50%.

Kadalasan, nabigo ang pagsusulit sa reproducibility ng mga pag-aaral na malawakang ginagaya sa media at nagawang makaimpluwensya sa kamalayan ng publiko. Halimbawa, ang mga gawa na pinapahina ng mga search engine ang memorya, at ang pagbabasa ng fiction ay nagkakaroon ng kakayahang makiramay. Kung mabibigo ang paulit-ulit na mga eksperimento, hindi ito nangangahulugan na ang mga orihinal na hypotheses ay walang halaga. Ngunit mas mahusay na pananaliksik ang kailangan ngayon upang patunayan ang mga ito.

Paano mahulaan ang hinaharap gamit ang mga istatistika

Noong 2011, ang sikat na American psychologist na si Daryl Boehm ay naglathala ng isang artikulo na nagpapatunay sa posibilidad ng clairvoyance. Ang konklusyon na ito ay hindi produkto ng kanyang marahas na imahinasyon, ngunit batay sa mga dekada ng pananaliksik, na kinasasangkutan ng daan-daang tao. Marami ang naghinala na nagpasya si Boehm na ayusin ang isang bagay tulad ng scam ni Sokal at ilantad ang sikolohiya gamit ang isang pekeng artikulo na may sadyang walang katotohanan na mga konklusyon. Ngunit sa lahat ng mga pamantayang pamamaraan, ang artikulo ay lubos na nakakumbinsi.

Sa isa sa mga eksperimento ni Behm, dalawang screen ang inilagay sa harap ng mga kalahok - kailangan nilang hulaan kung aling imahe ang nakatago sa likod. Ang larawan ay nabuo nang random kaagad pagkatapos na gawin ang pagpili. Kung ang mga kalahok ay gumawa ng isang mahusay na trabaho, ito ay nagpapahiwatig na maaari nilang asahan ang hinaharap. Gumamit ang eksperimento ng dalawang uri ng mga larawan: neutral at pornograpiko.

Iminungkahi ni Boehm na kung umiiral ang ikaanim na sentido, malamang na mayroon itong sinaunang ebolusyonaryong pinagmulan. Kung gayon, mas malamang na ito ay naaayon sa ating pinaka sinaunang mga pangangailangan at paghihimok

Nahulaan ng mga kalahok ang mga pornograpikong larawan 53% ng oras - bahagyang mas madalas kaysa sa nararapat kung sila ay puro pagkakataon. Dahil sa malaking bilang ng mga eksperimento, maaaring i-claim ni Boehm na umiiral ang foresight.

Nang maglaon, natuklasan ng mga eksperto na kapag pinag-aaralan ang mga resulta, gumamit siya ng hindi ganap na tamang mga pamamaraan. Bilang isang tuntunin, ang isang resulta ng pananaliksik ay itinuturing na maaasahan kung ang posibilidad na ito ay nakuha nang hindi sinasadya ay hindi lalampas sa 5%. Ngunit mayroong maraming mga paraan upang bawasan ang halagang ito sa kinakailangang antas: baguhin ang mga paunang parameter ng pagsusuri, idagdag o alisin ang kinakailangang bilang ng mga halimbawa mula sa sample, gumamit ng mas matagumpay na mga hypotheses pagkatapos mangolekta ng data.

Ang problema ay hindi lamang ang Boehm, kundi pati na rin ang maraming iba pang mga siyentipiko na gumamit ng parehong mga diskarte. Ayon sa isang survey noong 2011, halos kalahati ng mga psychologist ang umamin nito

Nang lumabas ang clairvoyant na artikulo, napagtanto ng mga social scientist na sina Joseph Simmons, Leaf Nelson, at Uri Simonson na ang agham ay patungo sa sarili nitong kapahamakan. Gumawa sila ng ilang mga modelo ng computer at nalaman na gamit ang medyo karaniwang mga diskarte sa istatistika, maaari mong taasan ang antas ng mga false-positive na resulta nang maraming beses. Nangangahulugan ito na ang mga pamamaraan na pormal na siyentipiko ay madaling humantong sa ganap na walang katotohanan na mga konklusyon.

Upang ilarawan ito, nagsagawa ang mga siyentipiko ng isang eksperimento na nagpapatunay na ang pakikinig sa kantang "When I'm Sixty-four" ay nagpapababa ng isang taon at kalahating taon.

"Alam ng lahat na mali ang gumamit ng mga ganitong pamamaraan, ngunit naisip nila na ito ay isang paglabag sa kahalagahan nito - tulad ng pagtawid sa kalsada sa maling lugar. Ito ay naging mas katulad ng isang pagnanakaw sa bangko, "pagtatapos ni Simmons.

Paano malalaman ang masamang pananaliksik sa mabuti

Sa lalong madaling panahon naging malinaw na ang mga isyu sa reproducibility ay hindi limitado sa sikolohiya. Sa pananaliksik sa kanser, ang siyentipikong ebidensya ay sinusuportahan sa 10-25% ng mga kaso. Sa ekonomiya, 7 sa 18 mga eksperimento sa laboratoryo ay hindi nagawang kopyahin. Ang pananaliksik sa artificial intelligence ay nagpapakita rin ng mga palatandaan ng krisis.

Ngunit ang pagkawala ng pananampalataya sa agham, tila, ay hindi pa rin katumbas ng halaga. Nakagawa na ang mga siyentipiko ng ilang paraan na lubos na nagpabuti sa pagiging maaasahan at kalidad ng bagong pananaliksik

Ilang taon na ang nakalilipas, halos walang nag-publish ng mga resulta ng paulit-ulit na mga eksperimento, kahit na sila ay natupad. Hindi ito tinanggap, hindi nagdala ng mga gawad at hindi nag-ambag sa isang matagumpay na karerang pang-agham. Ayon sa isang survey sa Kalikasan, higit sa 70% ng mga psychologist ang sumubok at nabigong magparami ng pananaliksik ng ibang tao, humigit-kumulang kalahati ang hindi naulit ang kanilang sarili, at halos walang sinuman ang naghangad na ipahayag ang mga resultang ito.

Nang lumitaw ang krisis ng reproducibility, marami ang nagbago. Ang paulit-ulit na pananaliksik ay unti-unting naging karaniwan; ang pang-eksperimentong data ay nagsimulang mailathala nang higit at mas madalas sa pampublikong domain; nagsimulang maglathala ang mga journal ng mga negatibong resulta at itala ang pangkalahatang plano ng pananaliksik bago pa man sila magsimula.

Ang pananaliksik ay naging mas malawak - isang sample ng 30–40 tao, na medyo pamantayan sa sikolohiya, ngayon ay nababagay sa napakakaunting tao. Sinusubukan ng malalaking internasyonal na organisasyon - tulad ng Psychological Science Accelerator - ang parehong mga hypotheses sa ilang laboratoryo sa buong mundo.

Bago suriin ang mga artikulo mula sa Kalikasan at Agham, na isinulat namin sa simula, hiniling ang mga siyentipiko na maglagay ng taya sa mga sweepstakes. Kinailangan nilang hulaan kung aling pananaliksik ang papasa sa pagsusulit at kung alin ang mabibigo. Sa pangkalahatan, ang mga rate ay napaka-tumpak. "Ito ay nangangahulugan, una, na ang siyentipikong komunidad ay maaaring mahulaan kung aling mga gawa ang maaaring ulitin, at, pangalawa, na ang imposibilidad ng pagkopya ng pag-aaral ay hindi isang pagkakataon lamang," sabi ng mga tagapag-ayos ng eksperimento.

Ang mga siyentipiko sa pangkalahatan ay mahusay sa pagkilala sa mapagkakatiwalaan mula sa hindi mapagkakatiwalaang pananaliksik - magandang balita iyon. Ngayon, sinusubukan ng mga eksperto mula sa Center for Open Science, kasama ang ahensya ng DARPA, na lumikha ng isang algorithm na gagawa ng parehong gawain nang walang interbensyon ng tao.

Napakaraming artikulong nai-publish bawat taon upang manu-manong suriing muli kahit isang maliit na bahagi ng mga ito. Kung ang artificial intelligence ay bumaba sa negosyo, ang lahat ay magiging mas madali.

Nasa mga unang pagsubok na, matagumpay na nakayanan ng AI ang mga hula sa 80% ng mga kaso.

Ano ang madalas na ginagawang hindi maaasahan ang pananaliksik? Maliit na sample, hindi pagkakapare-pareho sa mga numero, napakagandang kumpirmasyon ng mga hypotheses. At din - ang pagnanais para sa mga sensasyon at masyadong simpleng mga sagot sa mahihirap na tanong.

Masyadong maganda para maging totoo

Ang pinakamadaling paraan upang lumikha ng kahindik-hindik na pananaliksik ay sa pamamagitan ng panlilinlang. Ang sikat na social psychologist na si Diederik Stapel ay gumamit ng gawa-gawang data sa ilang dosenang artikulong pang-agham. Ang pananaliksik ni Stapel ay kumakalat sa pamamagitan ng mga pahayagan at magasin na may napakabilis, nakatanggap siya ng maraming prestihiyosong mga parangal sa agham, na-publish sa Science at itinuturing na isa sa mga pinakamalaking espesyalista sa kanyang larangan.

Sa sandaling ito ay lumabas na sa mahabang panahon ay hindi nagsagawa ng pananaliksik si Stapel, ngunit nag-imbento lamang ng data at ibinigay ito sa mga mag-aaral para sa pagsusuri.

Ito ay napakabihirang sa agham. Mas madalas na malakas, ngunit ang mga maling pahayag ay lumitaw para sa iba pang mga kadahilanan. Ang mga tao ay desperadong naghahanap ng simple, naiintindihan at epektibong mga sagot sa mga kapana-panabik na tanong. Napakadaling matuksong isipin na nasa iyo ang mga sagot na ito, kahit na wala ka talaga. Ang paghahangad ng pagiging simple at katiyakan ay isa sa mga pangunahing dahilan kung bakit nabigo ang maraming pag-aaral sa pagsubok para sa muling paggawa. Narito ang ilang mga kapansin-pansing halimbawa.

Eksperimento ng marshmallow

Sa isang eksperimento, hiniling ang mga bata na pumili sa pagitan ng isang maliit na reward - tulad ng mga marshmallow - na maaaring matanggap kaagad, at isang dobleng reward kung makapaghintay sila ng kaunti. Nang maglaon ay naging mas matagumpay ang mga bata na nakatanggap ng pangalawang parangal sa pagtanda. Ang pag-aaral ay naging napakapopular at naimpluwensyahan ang ilang kurikulum ng paaralan.

Noong 2018, inulit ang eksperimento sa mas malawak na sample. Ito ay lumabas na ang kayamanan sa pamilya ay isang mas mahalagang kadahilanan, kung saan nakasalalay din ang antas ng pagpipigil sa sarili.

"Poses ng Lakas" at "Poses ng Kahinaan"

Ang mga kalahok sa eksperimento ay kumuha ng isa sa dalawang pose sa loob ng dalawang minuto: sumandal sila sa isang upuan at inihagis ang kanilang mga binti sa mesa ("strength pose") o nakakrus ang kanilang mga braso sa kanilang dibdib ("weakness pose"). Bilang resulta, ang mga kalahok mula sa unang grupo ay nakadama ng higit na tiwala at mas madalas na sumang-ayon na makipagsapalaran sa pagsusugal. Ang mga nakaupo sa isang malakas na posisyon ay nagtaas ng kanilang mga antas ng testosterone, at ang mga nakaupo sa isang mahinang posisyon ay nagdaragdag ng cortisol. Sa paulit-ulit na mga eksperimento, isang epekto lamang ang muling ginawa: ang "lakas na mga postura" ay nakatulong sa mga kalahok na maging mas kumpiyansa, ngunit hindi binago ang kanilang pag-uugali o mga parameter ng hormonal.

Ang mga asosasyon na may katandaan ay nagpapabagal sa iyong paggalaw

Ang mga kalahok sa eksperimento ay hiniling na lutasin ang ilang mga palaisipan. Kung ang mga salita ay ipinasok sa kanila na nauugnay sa katandaan - "makakalimutin", "matanda", "malungkot" - pagkatapos ay umalis ang mga kalahok sa silid sa mas mabagal na bilis.

Sa mga kamakailang pagsubok, matagumpay na na-reproduce ang eksperimento sa isang kaso lamang: kung alam mismo ng mga nag-eksperimento na sa mga pagsubok ay nagpapahiwatig ang mga kalahok sa katandaan. Ang epekto mismo ay nanatili, ngunit ang mga dahilan ay iba na.

Ang mga maiinit na bagay ay ginagawang mas palakaibigan ang mga tao

Ang mga kalahok sa eksperimento ay pinahintulutan na humawak ng isang tasa ng mainit o malamig na kape sa maikling panahon, at pagkatapos ay hiniling na i-rate ang personalidad ng tao gamit ang isang maikling paglalarawan. Ang mga kalahok na humawak ng mainit na tasa ng kape ay ni-rate ang tao bilang mas kaibig-ibig. Sa isa pang eksperimento, ang mga kalahok ay binigyan ng isang item sa isang mainit o malamig na pakete at pagkatapos ay hiniling na itago ito o ibigay ito sa isang kaibigan. Kung ang item ay nakabalot sa isang mainit na pakete, mas malamang na piliin ng mga kalahok ang pangalawang opsyon. Ang mga paulit-ulit na eksperimento na may mas malawak na sample ay hindi nagbunga ng ganoong mga resulta. Mukhang hindi ka magiging altruist ang maiinit na damit.

Nauubos ang lakas ng loob kapag nilalabanan natin ang mga tukso

Sa harap ng mga kalahok sa eksperimento ay inilagay ang dalawang plato - na may mga cookies at labanos. Sa unang grupo, ang mga kalahok ay pinapayagang kumain ng cookies, at sa pangalawa, mga labanos lamang. Pagkatapos ay hiniling sa bawat kalahok na lutasin ang isang imposibleng palaisipan. Ang mga kalahok na kumain lamang ng mga labanos sa unang bahagi ng eksperimento ay sumuko nang mas maaga kaysa sa iba. Sa paulit-ulit na mga eksperimento, ang mga resulta ay hindi nakumpirma.

Sa ilang mga kaso, ang kapasidad para sa pagpipigil sa sarili ay hindi naubos, ngunit lalo pang tumindi sa paglipas ng panahon. Itinuturing ngayon ng maraming psychologist na masyadong simplistic ang konsepto ng "willpower".

Marami na ang nagawa sa sikolohiya ng mundo upang gawing mas maaasahan at maaaring kopyahin ang pananaliksik. Sa Russia, ang problemang ito ay hindi pa nahahawakan.

"Sa sikolohiya ng Russia, ang mga problema ng krisis ay pangunahing nababahala sa mga kabataang siyentipiko, na higit na nakatuon sa agham sa Kanluran," sinabi ni Ivan Ivanchey, associate professor sa RANEPA, sa Knife. - Ang kontrol sa kalidad ng mga publikasyon sa Russian ay karaniwang hindi masyadong mataas. Ang mga journal ay bihirang tanggihan ang mga artikulo, kaya maraming mababang kalidad na pananaliksik ang nai-publish. Ang mga maliliit na sample ay madalas na ginagamit, na binabawasan din ang posibilidad ng matagumpay na pagpaparami. May hinala na, kung seryosong tatalakayin ng isang tao ang isyu ng reproducibility ng mga gawa sa wikang Ruso, maraming problema ang matutuklasan. Ngunit walang direktang kasangkot dito."

Noong Enero 2019, napag-alaman na ang gobyerno ng Russia ay makabuluhang palawakin ang mga kinakailangan para sa mga siyentipiko sa mga tuntunin ng bilang ng mga publikasyon: ang minimum na bilang ng mga artikulo na nai-publish bawat taon ay dapat na lumago ng 30-50%.

Ang mga siyentipiko mula sa maimpluwensyang akademikong "July 1 Club" ay pinuna ang inisyatiba: "Ang gawain ng agham ay hindi upang makagawa ng pinakamataas na bilang ng mga publikasyon, ngunit upang galugarin ang uniberso at makinabang mula sa kaalaman na nakuha para sa sangkatauhan." Malamang, ang mga bagong kinakailangan ay tataas lamang ang laki ng problema.

Ang kwento tungkol sa krisis ng reproducibility ay hindi isang kwento tungkol sa paparating na apocalypse at pagsalakay ng mga barbaro. Kung hindi nangyari ang krisis, mas malala ang lahat: sasangguni pa rin tayo sa maling pananaliksik nang buong kumpiyansa na alam natin ang katotohanan. Marahil ang oras ng matapang na mga headline tulad ng "British scientists have proved" ay magtatapos na. Ngunit ang mga alingawngaw na ang agham ay patay na ay dapat ituring na medyo pinalaki.