Tudományos intézkedések: Megbízhatóság és érvényesség
A megbízhatóság a mérőeszköz belső konzisztenciájának és stabilitásának mértéke.
Az érvényesség jelzi, hogy a mérőeszköz méri-e azt, amire állítja.
A belső konzisztencia az a mérték, amelyben az intézkedés elemei vagy kérdései következetesen értékelik ugyanazt a konstrukciót. Minden kérdésnek ugyanazt kell mérnie. A belső konzisztenciát gyakran a Cronbach-féle Alpha segítségével mérik - ez a skála összes elemének szuperkorrelációja. Ha a pontszám 0,70 vagy magasabb, akkor a mérés elfogadható. Előnyös azonban a .80 vagy annál magasabb. Fontos a kontextus figyelembevétele a belső következetességet tükröző pontszám mérlegelésekor is.
A stabilitást gyakran teszt / újrateszt megbízhatósággal mérik. Ugyanaz a személy kétszer teszi le ugyanazt a tesztet, és összehasonlítják az egyes tesztek pontszámait. A két teszt pontszám közötti magas korreláció azt jelenti, hogy a teszt megbízható. A legtöbb esetben a legalább 70-es korrelációt elfogadhatónak tekintik. Ez azonban általános iránymutatás és nem statisztikai teszt.
Az interrater megbízhatósága egy másik megbízhatósági együttható, amelyet néha alkalmaznak a megbízhatóság értékelésében. Interrater megbízhatóságával a különböző bírák vagy értékelők (kettő vagy több) megfigyeléseket végeznek, rögzítik eredményeiket, majd összehasonlítják megfigyeléseiket. Ha az értékelők megbízhatóak, akkor az egyetértés százalékának magasnak kell lennie.
Amikor megkérdezzük, hogy egy intézkedés érvényes-e, azt kérdezzük, hogy méri-e azt, amire kéne. Az érvényesség összegyűjtött adatokon alapuló megítélés, nem statisztikai teszt. Az érvényesség meghatározásának két elsődleges módja van: létező mértékek és ismert csoportkülönbségek.
A meglévő mérési teszt meghatározza, hogy az új intézkedés korrelál-e a meglévő releváns érvényes mértékekkel. Az új intézkedésnek hasonlítania kell azokra az intézkedésekre, amelyeket már kialakított érvényes mérőeszközökkel rögzítettek.
Az ismert csoportkülönbségek meghatározzák, hogy az új mérés különbséget tesz-e az ismert csoportkülönbségek között. Az ismert csoportkülönbségek szemléltetése akkor látható, amikor a különböző csoportok ugyanazt a mértéket kapják, és várhatóan eltérő pontszámot fognak elérni. Például, ha tesztet adna a demokratáknak és a republikánusoknak bizonyos politikai nézetek erősségét felmérve, akkor azt várná tőlük, hogy más eredményt érjenek el. Nézeteik sok kérdésben lényegesen eltérnek. Ha ez a két csoport a várakozásoknak megfelelően eltérő eredményt ért el, akkor azt mondhatnánk, hogy a mérés érvényességet jelez - annak mérését, amelyet állít.
Új mérőeszközök tervezésekor feltétlenül figyelembe kell venni azok megbízhatóságát és érvényességét. Egy intézkedés lehet megbízható és nem érvényes. De az érvényes mérték mindig megbízható mérték.
