A madárdal kellemes része lehet egy reggeli futóútnak. Ettől még érdemes érdeklődéssel fogadni azt a kísérletet is, amelyben nem találtak bizonyított előnyt a stresszhelyreállásban. A két mondat nem zárja ki egymást. Az egyik személyes élményt nevez meg, a másik egy meghatározott összehasonlítás eredményét. A természetes hangok kutatása jó alkalom arra, hogy megtanuljuk, mit kezdjünk a tudományban a nem szignifikáns eredménnyel.
A nulleredmény szó könnyen úgy hangzik, mintha semmi sem történt volna. Valójában többféle helyzetet foghat össze: lehet, hogy az adatok valóban kevés különbséggel férnek össze, de az is, hogy a mérés nem döntötte el elég pontosan a kérdést. A lényeg az eredeti feladat, a végpont és az összehasonlítás megőrzése. A következő példák nem otthoni kísérletet vagy hangterápiát ajánlanak; egy érdekes környezetpszichológiai kérdés pontos olvasásához adnak fogódzót.
Előbb a kérdést, utána a címet olvasd
Hedblom és munkatársai 2019-es humán vizsgálatában száztizenhét résztvevő virtuális park látványával találkozott. Madárhangos, forgalmi zajos vagy kevert hangkörnyezetet hasonlítottak össze. Kísérleti stresszhelyzet után tízperces helyreállási szakaszt követtek, bőrvezetési mutatóval. A csoportok között nem találtak szignifikáns különbséget a stresszhelyreállásban. Az eredeti tanulmány tehát egy konkrét fiziológiai végpontra és meghatározott hangfeltételekre kérdezett rá, nem arra, szerethetik-e az emberek a madárdalt.
A résztvevők mutatója a helyreállási idő alatt minden hangfeltételben csökkent. Ez nem ugyanaz a megállapítás, mint az, hogy a madárhang a forgalmi zajhoz képest többletelőnyt adott. A közös parkélmény és a kísérlet többi eleme is része volt a helyzetnek; ezek lehetséges szerepét nem választotta szét minden irányban az elrendezés. A tényleges eredmény pontos megnevezése így egyszerre őrzi meg a változást és a várt csoportkülönbség hiányát.
A címből általában nem derül ki minden ilyen részlet. Ezért egy futóknak szóló hírnél is hasznos három rövid kérdés: kiket vizsgáltak, mit kaptak a résztvevők, és mi volt a mért végpont? Ha ezekre megvan a válasz, kevésbé valószínű, hogy egy laboratóriumi hangfelvételt és egy teljes szabadtéri futóútvonalat azonosnak tekintesz. Az érdekes kutatás nem attól lesz értékes, hogy minden hétköznapi helyzetre rögtön választ ígér.
A saját csökkenés és a csoportkülönbség más állítás
Képzelj el egy teljesen kitalált példát két csoporttal, amelyek valamilyen feladat után csendben pihennek. Mindkettőben alacsonyabb lehet egy későbbi mérés, miközben a két csoport változása nem tér el meggyőzően. Ha csak az egyik saját javulását mutatjuk be, úgy tűnhet, annak különleges összetevője okozta az eredményt. A másik csoport azért fontos, mert segít megkérdezni: mi az a többlet, amely valóban a két feltétel különbségéhez kapcsolódik?
A példában nincs valódi adat és nem szerepel kutatásból átvett szám. Arra szolgál, hogy láthatóvá tegye a két kérdés közötti logikai különbséget. Mi történt az egyik csoportban az idővel? Másképp történt-e, mint a másikban? Az elsőre adott igen nem helyettesíti automatikusan a második elemzését. A jó tudományos összefoglaló mindkettőt a saját helyén kezeli, különösen akkor, ha a cím valamilyen kiemelt inger saját hatásáról beszél.
A saját futóélményedben is hasznos ez a gondolat, ha magyarázatot keresel. Egy kellemes parkban ülés után jobban érezheted magad, de ettől még nem tudod biztosan, a madárhang, a társaság, a pihenés vagy az egész helyzet melyik része játszott szerepet. Az élmény valódiságához nem kell a kiváltó okot egyetlen elemre szűkíteni. A személyes történet elmesélhető úgy is, hogy a pontos mechanizmus nyitott kérdés marad.
Kép nagyításaMit jelent a statisztikai szignifikancia?
Az Amerikai Statisztikai Társaság 2016-os hivatalos állásfoglalása hangsúlyozza, hogy a p-érték egy meghatározott statisztikai modell és az adatok összeilléséről adhat információt. Nem a vizsgált feltevés igazságának valószínűsége, és nem a hatás nagysága vagy fontossága. A tudományos következtetést nem célszerű egyetlen küszöb átlépésére alapozni. Az ASA hivatalos közleménye a kutatási terv, a teljes beszámolás és az összefüggésben történő értelmezés szerepét is kiemeli.
Olvasóként ebből az a hasznos kiindulópont, hogy a szignifikáns nem egyenlő a nagy vagy mindenkinek fontos hatással. A nem szignifikáns pedig nem önmagában a bizonyított teljes azonosság címkéje. A számot azzal együtt kell látni, mit akartak vizsgálni, milyen bizonytalansággal becsülték a különbséget, és hogyan illeszkedik az eredmény a többi információhoz. Nem szükséges statisztikai programot futtatnod ahhoz, hogy ezt a különbséget megőrizd egy cikk olvasásakor.
A köznyelvi biztosan működik és biztosan semmit nem ér ugyanolyan gyors ugrás lehet egyetlen eredményből. Az egyik egy kedvező eltérést tesz korlátlanná, a másik a kimutatott eltérés hiányát. A kettő között sok értelmes, informatív mondat létezik. Például az, hogy ebben a vizsgálatban ezen a végponton nem találtak bizonyított többletelőnyt. Ez a megfogalmazás nem ködösítés: pontosan megnevezi, mit sikerült és mit nem sikerült megmutatni.
Hiányzó bizonyíték vagy bizonyíték a kicsi különbség mellett?
Dienes 2014-es eredeti módszertani munkája azt tárgyalja, hogyan különböztethető meg a kevéssé informatív adat attól, amely inkább egy különbség hiánya mellett szól. A becslési intervallumok és a különböző feltevések viszonylagos támogatását vizsgáló megközelítések többet mondhatnak, mint a szignifikanciacímke önmagában. A tanulmány nem a madárdalas kísérlet utólagos újraelemzése, hanem az értelmezés általános problémájának kidolgozása. Itt sem számolunk új statisztikai eredményt az eredeti kutatáshoz.
Egy saját hasonlatban egy távoli útjelző szövegét próbálod elolvasni. Ha a kép nagyon homályos, abból, hogy nem látsz különbséget két betű között, nem következik, hogy azonosak. Ha jól olvasható, sokkal szűkebb marad a bizonytalanság. A hasonlat nem statisztikai modell, hanem azt mutatja meg, miért fontos a megkülönböztetéshez rendelkezésre álló információ. Egy eredmény értékét nem lehet pusztán abból megmondani, hogy ugyanazt a nem szignifikáns szót kapta-e.
A következő érdekes kérdés ezért az lehet, mekkora eltéréssel férnek össze az adatok, és milyen további vizsgálat választaná szét a lehetséges magyarázatokat. Nem kell minden eltérő eredményt automatikusan kis mintának vagy rossz módszernek tulajdonítani. Ugyanakkor a különbség hiányát sem szükséges teljes egyenlőségként kihirdetni. A pontos olvasás helyet hagy annak, hogy a kutatás a saját bizonyosságával járuljon hozzá az összképhez.
| Rövid megfogalmazás | Mit érdemes kérdezni? | Pontosabb elbeszélés |
|---|---|---|
| Javult a csoport | Mi történt a kontrollfeltételben? | A saját változás és a csoportkülönbség külön kérdés |
| Nem lett szignifikáns | Mekkora a becslés bizonytalansága? | A címke önmagában nem bizonyít teljes azonosságot |
| Van kedvező irány | Mennyire támasztja alá ezt a teljes elemzés? | Az irány nem automatikusan bizonyított előny |
| Más kutatás pozitív | Ugyanazt a végpontot és feltételt vizsgálta? | Az eredmények részleteit kell összevetni |
Hogyan fér mellé egy kedvezőbb hangkísérlet?
Alvarsson és munkatársai 2010-ben más elrendezésben, fejszámolási feladat után hasonlítottak össze természetes hangkeveréket és különböző zajfeltételeket negyven résztvevőnél. A bőrvezetésben a természeti hang és a hangos forgalmi zaj között találtak kedvezőbb különbséget, miközben a magas frekvenciájú HRV-ben nem volt következetes feltételhatás. Az eredeti humán tanulmány így saját részletes eredménymintázatot ad, amelyet nem lehet egyetlen általános madárdalhatásra egyszerűsíteni.
A két kutatásban eltért a megterhelő helyzet, a hangok összeállítása és a vizuális környezet. Az egyik felvétel madárhangot és vizet is tartalmazott, a másikban a hangfeltételek virtuális parklátvány mellett szerepeltek. Az összehasonlítás ezért több annál, hogy egyik pozitív, másik negatív lett. A pontosabb kérdés az, ugyanarra a feltevésre milyen részben különböző próbákat készítettek. Az eltérések megértése a kutatás következő lépéseit is segítheti.
A tudományos összképhez az is hozzátartozik, hogy egy jelenségnek lehetnek feltételei. Ez nem jogosít fel arra, hogy minden sikertelen összehasonlításra utólag tetszőleges magyarázatot találjunk. A lehetséges okból új, ellenőrizhető kérdést kell formálni. Például más eredményt adna-e ugyanaz a hang más háttérrel? A kérdés izgalmas, de amíg nincs megfelelő vizsgálat, kérdés marad, nem a meglévő adat helyett elmesélhető bizonyosság.
A személyes örömöt más módon ismered meg
Ha szívesen hallgatod a reggeli madarakat, ehhez nincs szükség statisztikai felmentésre. A preferenciád személyes tapasztalat. A kutatási állítás akkor kezdődik, ha azt mondjuk, ez az inger meghatározott körülmények között másoknál is egy adott mérhető változást okoz. A kettő találkozhat, de nem ugyanaz a bizonyítási feladat. A kedvelt hangot nem kell hatástalannak nevezned azért, mert egy másféle helyzetben nem találtak fiziológiai többletelőnyt.
Fordítva is igaz: a jó élményedből nem következik, hogy a felvétel mindenkinek, minden körülmény között megfelelő. Egy baráttal nyugodtan beszélhetsz arról, mit szeretsz az útvonal hangjaiban, anélkül hogy univerzális tanácsot adnál. A tetszik nekem pontos és értelmes állítás. A garantáltan lecsökkenti mindenki stresszét egészen más lépték, amelyhez a bemutatott kutatások nem adnak alapot.
A futás során a természetes hang a hely része lehet, nem kell belőle kötelező teljesítményfeladatot csinálni. Nem szükséges addig hallgatnod egy felvételt, amíg meg nem jelenik az elvárt érzés, és nem kell hozzá házi stresszmérőt keresned. A tanulmányok megértése nem kívánja a kísérleti megterhelés megismétlését sem. Az eredmény olvasóként is tanulságos marad, miközben a saját környezetedet a valós helyzetében, szükséges közlekedési figyelemmel tapasztalod meg.
Kép nagyításaMitől lesz jobb egy természetélményről szóló hír?
Egy jó hír megőrzi az eredeti kérdést és a végpontot. Elmondja, milyen feltételeket hasonlítottak össze, és a résztvevői beszámoló vagy valamelyik élettani adat szolgált-e eredményül. Ha nem találtak különbséget, nem hallgatja el; ha egy mutatóban kedvező eltérés volt, nem terjeszti ki az összesre. A mérés időpontját és helyzetét is láthatóvá teszi. Ettől az olvasó képes lesz eldönteni, miben hasonlít a kutatás a számára érdekes kérdéshez.
A madárdalas nulleredmény így nem kellemetlen lábjegyzet a természetes hangok történetében. Lehetőség arra, hogy a személyes élményt és a tudományos bizonyítékot egyaránt pontosabban kezeljük. Nem kell lemondani egy szeretett futóút hangjairól, és nem kell biztos biológiai kapcsolót ígérni belőlük. Az érdeklődés megmaradhat: mit tapasztalunk, mit mértek, és melyik következő kérdésre lenne még szükség ahhoz, hogy többet értsünk meg?
Források
- Hedblom és munkatársai, 2019: Sounds of Nature in the City, eredeti humán kísérlet
- Alvarsson és munkatársai, 2010: természeti hang és stresszhelyreállás
- Amerikai Statisztikai Társaság, 2016: hivatalos állásfoglalás a p-értékekről
- Dienes, 2014: nem szignifikáns eredmények értelmezése, eredeti módszertani tanulmány


