Testo patikimumas yra vienas iš testo kokybės kriterijų, susijusių su psichologinių matavimų tikslumu. Kuo didesnis testo patikimumas, tuo santykinai laisvesnis nuo matavimo klaidų. Testo patikimumas vertinamas vienu požiūriu: kaip rezultatų stabilumas (stabilumas) kartotinio bandymo metu; kita vertus, kaip dviejų (lygiagrečių) testų, kurie yra identiški pagal formą ir paskirtį, lygiavertiškumo laipsnio pasireiškimas.
Testo patikimumas
Testo patikimumas yra pagrindinė testo savybė, parodanti, kokiu mastu testo rezultatai išlieka stabilūs atliekant pakartotinius tyrimus. Testo patikimumą galima nustatyti atliekant pakartotinį testavimą (po griežtai apibrėžto laiko) ir apskaičiuojant koreliacijos koeficientą tarp pirmojo ir pakartotinio testavimo rezultatų. Testo patikimumą galima nustatyti ir išbandant kelias to paties testo versijas, testą padalijant į dvi dalis ir pan. Tyrimo rezultatų patikimumas priklauso ne tik nuo paties testo kokybės, bet ir nuo testavimo procedūros (pirmuoju ir antruoju atveju ji turi būti absoliučiai identiška), imties socialinio-psichologinio homogeniškumo (ji skirsis vaikai, vyrai, moterys, pirmo kurso kariai – tarnybos, senbuviai ir kt.). Ir gali pasirodyti, kad, būdamas patikimas vienai žmonių grupei, testas pasirodys nepatikimas kitai, o pastaruoju atveju testo rezultatai bus neteisingi. Taigi NT, išreiškiantis netikslumo laipsnį, klaidos galimybę, kuri neišvengiamai iškyla bet kokio testavimo metu, verčia ieškoti būdų, kaip šią paklaidą sumažinti, konkretesniam, tikslingesniam testo pritaikymui. Geriausių testų patikimumas yra 0,8 - 0,9.
Eksperimento patikimumas
eksperimento rezultatų stabilumas, kai jis atliekamas antrą, trečią, ketvirtą ir kt. kartą.
Psichologinio testo objektyvumas gali būti pasiektas, jei tenkinamos šios sąlygos:
1) bandymo procedūros vienodumas, kad būtų gauti rezultatai, palyginami su norma (žr. toliau);
2) testo atlikimo vertinimo vienodumas;
3) bandymo atlikimo standarto nustatymas, kad su jais būtų lyginami rodikliai, gauti apdorojant testavimo duomenis (žr. čia „trečiasis standartizacijos etapas“).
Šios trys sąlygos vadinamos standartizacijos etapai psichologinis testas.
Standartizacijos etapai
Bandymo, kaip ir bet kurio kito metodo, kūrimo etape atliekama standartizavimo procedūra, kurią sudaro trys etapai.
Pirmas žingsnis standartizuojant psichologinį testą – sukurti vienodą testavimo tvarką. Tai apima šių diagnostinės situacijos aspektų nustatymą:
1) bandymo sąlygos (patalpa, apšvietimas ir kiti išoriniai veiksniai). Akivaizdu, kad trumpalaikės atminties apimtį geriau matuoti (pavyzdžiui, naudojant skaitmenų pasikartojimo subtestą Wechslerio teste), kai nėra išorinių dirgiklių, tokių kaip pašaliniai garsai, balsai ir pan.
3) Standartinės stimuliuojančios medžiagos prieinamumas. Pavyzdžiui, gautų rezultatų patikimumas labai priklauso nuo to, ar respondentui siūlomos naminės G. Rorschach kortelės, ar standartinės – su tam tikra spalvų gama ir spalvų atspalviais.
4) Šio testo atlikimo laiko apribojimai. Pavyzdžiui, suaugusiam respondentui skiriama 20 minučių Varnos testui atlikti.
5) Standartinė šio testo atlikimo forma. Standartinės formos naudojimas supaprastina apdorojimo procedūrą.
6) Atsižvelgimas į situacinių kintamųjų įtaką testavimo procesui ir rezultatui. Kintamieji reiškia tiriamojo būklę (nuovargis, pervargimas ir kt.), nestandartines testavimo sąlygas (prastas apšvietimas, ventiliacijos trūkumas ir kt.), testavimo nutraukimą.
7) Atsižvelgiant į diagnostikos gydytojo elgesio įtaką tyrimo procesui ir rezultatui. Pavyzdžiui, eksperimentuojančiojo pritariamąjį ir skatinantį elgesį testavimo metu respondentas gali suvokti kaip „teisingo atsakymo“ užuominą ir pan.
8) Atsižvelgiant į respondento patirties įtaką testuojant. Natūralu, kad ne pirmą kartą testavimo procedūrą atliekantis respondentas įveikė netikrumo jausmą ir susiformavo tam tikras požiūris į testo situaciją. Pavyzdžiui, jei respondentas jau atliko Raven testą, tada greičiausiai antrą kartą jam to siūlyti neverta.
Antrasis psichologinio testo standartizavimo etapas susideda iš vienodo testo atlikimo vertinimo sukūrimo: standartinės gautų rezultatų interpretacijos ir išankstinio standartinio apdorojimo. Šis etapas taip pat apima gautų rodiklių palyginimą su šio testo atlikimo norma tam tikram amžiui (pavyzdžiui, intelekto testuose), lyčiai ir kt. (žr. žemiau).
Trečiasis psichologinio testo standartizavimo etapas – testo atlikimo normų nustatymas.
Normos kuriamos įvairiems amžiams, profesijoms, lytims ir kt. Štai keletas esamų normų tipų:
Mokyklos normos - rengiami remiantis mokyklos pasiekimų ar mokyklinių gabumų testais. Jie nustatomi kiekvienam mokyklos lygiui ir galioja visoje šalyje.
Profesiniai standartai yra nustatomi testų, skirtų skirtingoms profesinėms grupėms (pavyzdžiui, įvairaus profilio mechanikai, mašinistai ir kt.), pagrindu.
Vietiniai standartai yra nustatomi ir taikomi siauroms žmonių kategorijoms, išsiskiriančioms bendromis savybėmis – amžiumi, lytimi, geografine vietove, socialine ir ekonomine padėtimi ir kt. Pavyzdžiui, Wechslerio intelekto testui normas riboja amžius.
Nacionaliniai standartai yra sukurti tam tikros tautybės, tautos, visos šalies atstovams. Tokių normų poreikį lemia specifinė kiekvienos tautos kultūra, moraliniai reikalavimai ir tradicijos.
Norminių duomenų (normų) buvimas standartizuotuose psichodiagnostikos metoduose yra esminė jų charakteristika.
Pirmiausia apibrėžkime šios problemos raidos diapazoną ir trumpai išvardinkime mokslininkus.
Mokslininkai, nagrinėję psichodiagnostikos metodų patikimumo ir pagrįstumo problemą: A. Anastasi ir kt.
Apibrėžimas
Metodo patikimumas yra rezultatų stabilumas atliekant daugybę tyrimų.
Technikos pagrįstumas yra tam tikros psichinės savybės, kuri yra matuojama, matavimo patikimumas.
Testo patikimumas
Panagrinėkime keletą psichodiagnostinių testų patikimumo tipų.
- Vidinis nuoseklumo patikimumas. Modifikuota testo dalis matuoja kintamąjį, kurio nepakitusios testo dalys nematuoja.
- Testo-pakartotinio patikrinimo patikimumas. Pakartotinis tiriamųjų testavimas su vėlesniu pradinio ir baigiamojo egzamino rezultatų koreliavimu.
- Lygiagrečių testų formų patikimumas. Lygiaverčio klausimyno sukūrimas ir pristatymas tiems patiems subjektams vėlesniam rezultatų koreliavimui.
- Bandomųjų dalių patikimumą galima nustatyti pagal anketos padalijimas į dalis; tada susiekite gautus rezultatus.
1 pav. „Tikrinimo patikimumo rodikliai“
Nustatant bandymo patikimumą, technika turėtų būti atliekama tam tikrais laiko intervalais. Taip pat rekomenduojama atlikti ne mažiau kaip 200 tiriamųjų mėginių testą.
Testo galiojimas
Panagrinėkime kai kuriuos psichodiagnostikos testų pagrįstumo tipus.
- Aiškus galiojimas. Dalyko idėjos apie testą.
- Lygiagretus galiojimas. Koreliacija su panašiais testais.
- Nuspėjamasis galiojimas. Pradinių ir vėlesnių testų rezultatų koreliacija.
- Prieauginis galiojimas.
- Diferencinis galiojimas.
- Turinio galiojimas. Bandomųjų dalykų refleksija konkrečios studijų srities aspektais.
- Empirinis pagrįstumas.Šios technikos rezultatų koreliacija su panašių metodų tų pačių dalykų rezultatais.
- Kriterijaus galiojimas. Ryšys tarp gautų rezultatų ir išorinių kriterijų.
- Konstrukcijos galiojimas.
Vienas svarbus skirtumas tarp psichometrinių testų yra tas, kad jie standartizuoti, ir tai leidžia palyginti vieno tiriamojo gautus rodiklius su bendros populiacijos ar atitinkamų grupių rodikliais. Testų standartizavimas svarbiausias tais atvejais, kai lyginami tiriamųjų rezultatai.
Tai pristato koncepciją normų, arba standartiniai rodikliai. Norint gauti standartines normas, pagal aiškiai apibrėžtus kriterijus turi būti kruopščiai atrinktas didesnis dalykų skaičius. Formuojant standartizavimo imtį reikia atsižvelgti į jos dydį ir reprezentatyvumą.
Kai kuriais atvejais reikia sudaryti kelias standartizacijos grupes arba stratifikuoti standartizacijos grupę pagal tokius parametrus kaip amžius, lytis, socialinė padėtis. Ne visada būtina nustatyti standartus. Taikant psichologinius testus moksliniuose tyrimuose normos nėra tokios svarbios ir pakanka neapdorotų testų balų. Kiekvienos grupės normos turi būti pateiktos vidutinėmis vertėmis ir standartiniu nuokrypiu.
2 pav. „Galiojimo sistema“
Testo patikimumas yra vienas iš testo kokybės kriterijų, susijusių su psichologinių matavimų tikslumu. Kuo didesnis testo patikimumas, tuo santykinai laisvesnis nuo matavimo klaidų. Testo patikimumas vertinamas vienu požiūriu: kaip rezultatų stabilumas pakartotinio bandymo metu; kita vertus, kaip dviejų (lygiagrečių) testų, kurie yra identiški pagal formą ir paskirtį, lygiavertiškumo laipsnio pasireiškimas.
Patikimumas apibūdina savybių testus, bet ne būsenas. Savybės:
- 1. Tyrimo rezultatų atkuriamumas.
- 2. Matavimo tikslumas.
- 3. Rezultatų tvarumas.
Metodų patikimumo laipsnis priklauso nuo daugelio priežasčių. Tarp neigiamų veiksnių dažniausiai minimi šie:
- 1. diagnozuojamo turto nestabilumas;
- 2. diagnostikos metodų netobulumas (neatsargiai parengtos instrukcijos, nevienalyčio pobūdžio užduotys, neaiškiai suformuluotos metodo pateikimo tiriamiesiems instrukcijos ir pan.);
- 3. besikeičianti tyrimo situacija (skirtingas paros laikas, kai atliekami eksperimentai, skirtingos apšvietimo sąlygos patalpoje, pašalinio triukšmo buvimas ar nebuvimas ir kt.);
- 4. eksperimentuojančiojo elgesio skirtumai (nuo eksperimento iki eksperimento jis skirtingai pateikia nurodymus, nevienodai skatina užduočių atlikimą ir pan.);
- 5. tiriamojo funkcinės būklės svyravimai (viename eksperimente yra gera sveikata, kitame – nuovargis ir pan.);
- 6. subjektyvumo elementai rezultatų vertinimo ir interpretavimo metoduose (užrašant tiriamųjų atsakymus, atsakymai vertinami pagal išsamumo laipsnį, originalumą ir pan.).
K.M. Gurevičius patikimumą aiškina taip:
- 1. Pačios matavimo priemonės patikimumas (patikimumo koeficientas);
- 2. Tiriamos charakteristikos stabilumas (stabilumo koeficientas);
- 3. Pastovumas, t.y. santykinis rezultatų nepriklausomumas nuo eksperimentuotojo asmenybės (pastovumo koeficientas).
Matavimo priemonę apibūdinantį rodiklį siūloma vadinti patikimumo koeficientu; matuojamos savybės stabilumą apibūdinantis rodiklis – stabilumo koeficientas; o eksperimentuotojo Asmenybės įtakos vertinimo rodiklis yra pastovumo koeficientas. Būtent tokia tvarka rekomenduojama pasitikrinti metodiką: pirmiausia patartina patikrinti matavimo priemonę. Jei gauti duomenys yra patenkinami, galime pradėti nustatyti matuojamos savybės stabilumo matą, o po to, jei reikia, atsižvelgti į pastovumo kriterijų. (Patikimumas: bandymas-pakartotinis bandymas, lygiagrečios formos, kūno dalys, vidinė konsistencija, faktorinė dispersija).
Sakoma, kad metodas yra labai patikimas, kai jis tiksliai išmatuoja savybę, kurią ketinama išmatuoti. Galima atkreipti dėmesį į šiuos tikslumo kriterijus:
Kai metodas kartojamas tiems patiems tiriamiesiems tomis pačiomis sąlygomis po tam tikro laiko intervalo, abiejų testų rezultatai vienas nuo kito labai nesiskiria.
Atsitiktinių pašalinių veiksnių veiksmai neturi didelės įtakos testo rezultatams. Pašaliniais veiksniais gali būti laikomi: emocinė būsena ir nuovargis, jei jie neįtraukti į tiriamų charakteristikų diapazoną, temperatūra, patalpos apšvietimas ir kt. Tokie pašaliniai atsitiktiniai veiksniai dar vadinami matavimo procedūros nestabilumo veiksniais.
Metodą pakartojus tiems patiems tiriamiesiems po tam tikro laiko intervalo pakitusiomis sąlygomis, abiejų testų rezultatai vienas nuo kito reikšmingai nesiskiria. Pasikeitimu turime omenyje šias sąlygas: kitas eksperimentuotojas, respondento būsena ir kt.
Yra keli patikimumo vertinimo metodai:
Pakartotinio tyrimo metodas – pakartotinis tiriamųjų imties tyrimas su tuo pačiu testu po tam tikro laiko intervalo tomis pačiomis sąlygomis. Laiko intervalas priklauso nuo amžiaus (pavyzdžiui, mažiems vaikams pokyčiai gali įvykti per vieną mėnesį), taip pat nuo įvykių, vykstančių tiriamojo gyvenime.
TESTINTERVALRE TESTAS
Patikimumo indeksas laikomas koreliacijos koeficientu tarp dviejų bandymų rezultatų. Gauta didelė koreliacija gali būti tiriamojo mokymo atlikti tokio tipo užduotis rezultatas; maža koreliacija gali būti testą atliekančio asmens pokyčių rezultatas ir taip pat gali rodyti testo nepatikimumą.
Keičiamų formų patikimumas – pakartotinis tiriamųjų imties testavimas su lygiagrečia testo forma po minimalaus laiko intervalo tomis pačiomis sąlygomis.
TESTAS "AINTERVALTEST A"
Patikimumo indeksas laikomas koreliacijos koeficientu tarp dviejų lygiagrečių testo formų bandymo rezultatų. Didelis koreliacijos koeficientas ir didelis intervalas tarp dviejų testų rodo didelį testo patikimumą.
Galima tiriamojo apgaulė, jo rafinuotumas, įvykiai, įvykę per intervalą tarp testų, neturi ypatingos įtakos (kaip ir pakartotinio testo metodu) testo patikimumo laipsniui. Jei testuojant lygiagrečiomis formomis treniruočių faktorius sumažėja, tai dažnai pasireiškia užduočių principo perkėlimo efektas. Kuriant lygiagrečias formas reikia atsižvelgti į perdavimo efektą.
Reikalavimai lygiagrečių formų konstravimui:
- 1. Lygiagrečios formos turi būti savarankiškai sukonstruoti bandymai, tačiau atitikti tuos pačius reikalavimus;
- 2. turi būti tiek pat panašaus sudėtingumo užduočių;
- 3. Lygiagrečių formų lygiavertiškumas turi būti patikrintas taikant pakartotinio bandymo metodą.
Pastovumo apibrėžimas, t.y. santykinis rezultatų nepriklausomumas nuo eksperimentuojančiojo asmenybės. Kadangi technika yra kuriama, kad ją toliau naudotų kiti psichodiagnostikai, būtina nustatyti, kiek jos rezultatams įtakos turi eksperimentuojančiojo asmenybė. Pastovumo koeficientas nustatomas koreliuojant dviejų eksperimentų, atliktų su tuo pačiu mėginiu, bet skirtingų eksperimentuotojų, rezultatus. Koreliacijos koeficientas turi būti ne mažesnis kaip 0,80.
Psichodiagnostikos procedūrų ir technikų pavertimas patikimu mokslo ir praktikos įrankiu priklauso nuo daugelio psichometrinio derinimo specialistų pastangų, kuriant testus, atitinkančius pagrindinius psichometrinius reikalavimus: patikimumą, pagrįstumą, standartizavimą. Pagrindiniai psichodiagnostikos metodų testavimo ir patikimumo nustatymo principai, konstravimas ir įteisinimas aprašyti daugybėje specialių psichodiagnostikos darbų (A. Anastasi, A. Bodalsi, V. Stolin, A. Shmelev, K. Gurevich, V. Melnikovas). ir kt.). Šioje pamokoje aprašysime pagrindines psichodiagnostinės ekspertizės atlikimo sąvokas ir principus, kurių žinojimas yra būtina praktinio psichologo profesinės kvalifikacijos sąlyga.
Psichodiagnostika kaip mokslinė disciplina apima tris psichologinių žinių sritis:
psichologijos dalyko sritis, tirianti šiuos psichinius reiškinius;
psichometrija – individualių skirtumų ir diagnozuojamų kintamųjų matavimo mokslas;
praktinis psichologinių žinių panaudojimas siekiant adekvačios psichologinės įtakos ir padėti žmonėms spręsti jų problemas.
Psichodiagnostikos metodologinis pagrindas yra psichometrija. Būtent šis mokslas kuria specifinių psichodiagnostikos metodų kūrimo technologiją ir nustato jiems taikomų mokslinių reikalavimų užtikrinimo metodiką:
patikimumas – vidinis testo dalių nuoseklumas ir rezultatų atkuriamumas kartotinio bandymo metu;
validumas – atspindys tyrimo rezultatuose būtent tos savybės, kuriai ketinama diagnozuoti;
patikimumas - testo apsauga nuo įtakos testo davėjo noro pakeisti juos norima linkme rezultatams;
reprezentatyvumas - populiacijos, kuriai skirtas testas, masinio tyrimo rezultatų normų buvimas, leidžiantis įvertinti nukrypimo nuo bet kurio individualaus rodiklio vidutinių verčių laipsnį.
Šie psichometriniai reikalavimai taikomi skirtingoms testų grupėms, daugiausia – objektyviems testams ir asmenybės klausimynams, o mažiausiai – projekcinėms technikoms.
Objektyvus psichologinių metodų ir testų įvertinimas reiškia jų patikimumo nustatymą. Psichometrijoje terminas „patikimumas“ visada reiškia balų, gautų iš tų pačių dalykų, nuoseklumą.
Kuo šis testas naudingas? Ar jis tikrai atlieka savo funkcijas? Šie klausimai gali sukelti ir kartais sukelia ilgas, bevaises diskusijas. Išankstinės nuostatos, subjektyvios išvados ir asmeniniai nusistatymai, kaip mano A. Anastasi, viena vertus, lemia konkretaus testo galimybių pervertinimą, o iš kitos – nuolatinį jo atmetimą. Vienintelis būdas atsakyti į tokius klausimus yra empirinis bandymas. Objektyvus įvertinimas psichologiniai testai visų pirma reiškia jų patikimumo ir pagrįstumo konkrečiose situacijose nustatymą.
Testo patikimumas balai, gauti iš tų pačių dalykų, yra nuoseklūs, kai jie buvo pakartotinai tikrinami naudojant tą patį testą arba lygiavertę formą.
Jei vaiko IQ pirmadienį yra 110, o penktadienį – 80, tai akivaizdu, kad šį rodiklį vargu ar galima vertinti užtikrintai. Panašiai, jei asmuo teisingai nustatė 40 žodžių 50 žodžių serijoje ir 20 kitoje lygiavertėje eilutėje, nė vienas iš šių rodiklių negali būti laikomas jo žodinio supratimo matu. Žinoma, abiejuose pavyzdžiuose gali būti, kad tik vienas iš dviejų rodiklių yra klaidingas, tačiau tai patvirtinti gali tik vėlesni bandymai; Iš pateiktų duomenų matyti tik tai, kad rodikliai kartu negali būti teisingi.
Prieš paskelbiant psichologinį testą visuomenei, turi būti atliktas išsamus, objektyvus jo patikimumo testas. Patikimumas gali būti patikrintas atsižvelgiant į pokyčius laikui bėgant, konkrečių užduočių ar bandymų pavyzdžių pasirinkimą, eksperimentuotojo ar testavimo procesoriaus asmenybę ir kitus testavimo aspektus. Labai svarbu tiksliai nurodyti patikimumo tipą ir kaip jis nustatomas, nes tas pats testas gali skirtis įvairiais aspektais. Taip pat patartina turėti informacijos apie asmenų, kuriems buvo patikrintas testo patikimumas, skaičių ir savybes.
Tokia informacija testo vartotojui leis nuspręsti, kiek testas yra patikimas grupei, kuriai jis ketina jį taikyti.
Išsamiausią tyrimo metodų patikimumo paaiškinimą pateikia A. Anastasi. Patikimumas reiškia testo rezultatų nuoseklumą, gautą, kai jis kartojamas su tais pačiais tiriamaisiais skirtingais laiko momentais, naudojant skirtingus lygiaverčių užduočių rinkinius arba keičiant kitas egzamino sąlygas. Skaičiavimas pagrįstas patikimumu matavimo paklaidos, kuri padeda nurodyti galimas išmatuoto dydžio svyravimų ribas, atsirandančias veikiant pašaliniams atsitiktiniams veiksniams. Plačiąja prasme patikimumas reiškia, kokiu mastu individualūs testo balų skirtumai yra „tiesi“ ir kiek juos galima priskirti atsitiktinėms klaidoms. Jei tai išversime į specialiųjų terminų kalbą, tada testo patikimumo matavimas leidžia įvertinti visos testo rodiklių sklaidos vertę, kuri yra klaidų dispersija. Tačiau kyla klausimas, ką skaičiuoti kaip klaidų dispersiją. Tie patys veiksniai, kurie kai kurių problemų atžvilgiu yra pašaliniai, jau laikomi „tikrųjų“ skirtumų šaltiniais sprendžiant kitas problemas. Pavyzdžiui, jei mus domina nuotaikų svyravimai, tai kasdieniai emocinės būsenos testo balų pokyčiai gali būti susiję su testo tikslu, taigi ir su tikra balų dispersija. Bet jei testas skirtas stabilesnėms asmenybės savybėms matuoti, tai tie patys dienos svyravimai gali būti priskirti klaidų dispersijai.
Svarbu tai, kad bet kokie bandymo sąlygų pakeitimai, jei jie nėra susiję su jo tikslu, padidins klaidų dispersiją. Todėl, laikydamasis vienodų testavimo sąlygų (kontroliuodamas bendrą aplinką, laiko apribojimus, nurodymus tiriamajam, kontaktą su juo ir kitus panašius veiksnius), eksperimentatorius sumažina klaidų dispersiją ir padidina testo patikimumą. Tačiau net ir esant optimalioms sąlygoms, joks testas nėra absoliučiai patikimas įrankis. Todėl į standartinį bandymo duomenų rinkinį turėtų būti įtrauktas patikimumo matas. Ši priemonė apibūdina testą, kai jis atliekamas standartinėmis sąlygomis ir skiriamas tiriamiesiems, panašiems į tuos, kurie dalyvavo norminėje imtyje. Todėl būtina pateikti informaciją ir apie šį pavyzdį.
K. M. Gurevich patikimumą apibrėžia kaip „itin sudėtingą ir daugialypę sąvoką, kurios viena pagrindinių funkcijų yra įvertinti testo atlikimo rodiklių nuoseklumą“ [Gurevich, 1981].
Iš esmės galime teigti, kad patikimumas turėtų pateisinti matavimo paklaidą – jis turėtų parodyti, kiek priemonių kintamumo lemia klaida. Yra keli pagrindiniai veiksniai, lemiantys patikimumo lygį. Taigi patikimumas visada didės, jei testavimo procedūros sąlygos bus pastovios, nes tai sumažina išmatuojamo parametro kintamumo paklaidą. Tuo pačiu metu dėl tikslų įvairovės, problemos sudėtingumo ir situacijų kintamumo didėja matavimo paklaida, todėl sumažėja patikimumas.
Yra tiek pat bandymo patikimumo atmainų, kiek yra sąlygų, turinčių įtakos bandymo rezultatams, todėl bet kurios tokios sąlygos gali būti ne pagal paskirtį.
jų sukelta dispersija turėtų būti įtraukta į klaidos dispersiją. Tačiau tik keli patikimumo tipai randa praktinį pritaikymą. Kadangi visų tipų patikimumas atspindi dviejų nepriklausomai gautų rodiklių serijų nuoseklumo arba nuoseklumo laipsnį, jų matas gali būti koreliacijos koeficientas. Specializuotas koreliacijos aptarimas su išsamiu skaičiavimo procedūrų aprašymu pateiktas statistikos vadovėliuose mokytojams ir psichologams (V. Avanesovas, A. Gusevas, Ch. Izmailovas, M. Michalevskaja ir kt.).
Praktiškai testų patikimumui įvertinti naudojami trys pagrindiniai metodai:
1) pakartotinis testavimas;
2) lygiagretusis testavimas;
3) padalijimo būdas.
Panagrinėkime kiekvieną iš jų atskirai.
Pakartotinis testavimas Tai vienas iš pagrindinių patikimumo matavimo metodų. Pasikartojo
tiriamųjų imties testavimas atliekamas tuo pačiu testu po tam tikro laiko tarpo tomis pačiomis sąlygomis. Pakartotinis testavimas paprastai vadinamas pakartotinai išbandyti, o tokiu būdu išmatuotas patikimumas yra bandymo-pakartotinio patikrinimo patikimumas. Pakartotinio bandymo patikimumo vertinimo schema atrodo taip:
Šiuo atveju patikimumo indeksu imamas dviejų testų rezultatų koreliacijos koeficientas.
Pakartotinis bandymo metodas turi ir privalumų, ir trūkumų. Privalumai yra patikimumo koeficiento nustatymo natūralumas ir paprastumas. Trūkumai apima neapibrėžtumą pasirenkant intervalą tarp dviejų matavimų. Laikinas neapibrėžtumas atsiranda dėl to, kad pakartotinis testavimas skiriasi nuo pradinio. Tiriamieji jau yra susipažinę su testo turiniu, prisimena savo pirminius atsakymus ir jais vadovaujasi kartodami testą. Todėl kartotinio testavimo metu dažnai stebimas arba „prisiderinimas“ prie pradinių rezultatų, arba dėl negatyvizmo – „naujų“ rezultatų demonstravimas. Norėdami to išvengti, bandymo vadove nurodydami testo-pakartotinio testo patikimumą, turėtumėte nurodyti, kokį laiko intervalą jis atitinka. Atsižvelgiant į tai, kad bandymo pakartotinio testo patikimumas mažėja didėjant laiko intervalui, patikimiausi yra aukšti patikimumo koeficientai, gauti esant aiškiai dideliems intervalams tarp testų. Nepakankamai aukšti patikimumo koeficientai gali būti neoptimalaus laiko intervalų nustatymo pasekmė.
Lygiagretus testavimasŠiuo atveju keli matavimai organizuojami naudojant lygiagrečius arba lygiaverčius testus. Lygiagretieji testai yra testai, kurie matuoja tą pačią psichinę savybę su ta pačia klaida. Tokiu atveju tie patys asmenys atlieka kelias to paties testo versijas arba lygiaverčius testus. Paprastai šio tipo patikimumo praktinis panaudojimas yra susijęs su dideliais sunkumais, nes labai sunku sukurti kelias vieno testo versijas taip, kad tiriamasis negalėtų nustatyti jų psichologinio homogeniškumo. Ir iškreipianti treniruočių įtaka šiuo atveju nėra visiškai pašalinta. Be to, kyla klausimas: ar alternatyvūs patikimumo tipai yra testo patikimumo charakteristikos, o ne testo lygiavertiškumo parametrai? Galų gale, jei to paties tipo pastoviomis sąlygomis atliekamos dvi testavimo formos, greičiausiai tiriami dviejų testavimo formų lygiavertiškumo rodikliai, o ne pačių testų patikimumo rodikliai. Matavimo paklaidą šiuo atveju lemia testo vykdymo svyravimai, o ne bandymo struktūros svyravimai.
Lygiagrečių testų naudojimo patikimumui matuoti schema yra tokia:
Tarp dviejų testų apskaičiuotas koreliacijos koeficientas vadinamas lygiavertis patikimumas.
Skilimo metodas Tai paralelinio testavimo metodo plėtra, pagrįsta ne tik atskirų testų formų, bet ir atskirų užduočių viename teste lygiagretumo prielaida. Tai vienas iš paprasčiausių testo testų, kai skaičiuojamas koreliacijos koeficientas tarp jo pusių. Kaip padalyti testą į dvi dalis, kad būtų galima sulyginti abi puses vienu ar kitu konkrečiu pagrindu? Dažniausiai testinės užduotys skirstomos į lygines ir nelygines, o tai leidžia tam tikru mastu pašalinti galimus trūkumus. Pagrindinis šio tipo patikimumo privalumas yra testo rezultatų nepriklausomumas nuo tokių veiklos elementų kaip vystymasis, treniruotės, praktika, nuovargis ir kt. Padalijus testą į dvi dalis, patikimumo indeksas apskaičiuojamas pagal Spearman-Brown formulę, kuri pasiūlė jį nepriklausomai viena nuo kitos. Jų straipsniai buvo publikuoti tame pačiame psichologinio žurnalo numeryje su išvadomis ir formulėmis [Avanesovas , 1982]. Jų formulėje
R(x, 0=2 RJ\ + R, y
čia R yra dviejų testo pusių koreliacijos koeficientas. Patikimumo indekso koeficientu laikomas visų tiriamųjų elementų koreliacijos koeficiento vidutinis modulis arba vidutinis determinacijos koeficientas.
Iki šiol mes išnagrinėjome tris empirinius testo patikimumo vertinimo metodus: pakartotinį testavimą su tuo pačiu testu, pakartotinį testavimą su lygiagrečia testo forma ir testo padalijimą.
Kuris iš šių metodų tiksliai įvertina testo patikimumą? Kurį metodą turėtumėte naudoti? Atsakymas į šį klausimą priklauso nuo asmeninių pageidavimų ir tyrimo tikslų.
Taikant pakartotinio testavimo metodą, gauname rezultatų stabilumo laipsnio įvertinimą laikui bėgant ir priklausomai nuo bandymo sąlygų. Todėl taip pat vadinamas testo-retest patikimumo koeficientas stabilumo koeficientas arba stabilumas bandymas. Taikant lygiagrečių formų metodą ir skaidymo metodą, įvertinamas bandomųjų dalių tarpusavio nuoseklumo laipsnis. Todėl šiais dviem metodais gauti patikimumo koeficientai interpretuojami kaip svyruoti ir homogeniškumas, vienalytiškumas bandymai.
Be stabilumo ir homogeniškumo rodiklių, R. B. Cattell mano, kad būtina atsižvelgti į rodiklį perkeliamumas. Tai testo gebėjimo išlaikyti matavimo tikslumą skirtinguose mėginiuose, subkultūrose ir populiacijose įvertinimas. Kartu stabilumas, homogeniškumas ir perkeliamumas sudaro sudėtingą patikimumo savybę, kurią R. B. Cattell vadina nuoseklumas ir apibrėžia jį kaip „laipsnį, kuriuo testas ir toliau prognozuoja tai, ką anksčiau numatė, nepaisant pokyčių (tam tikrose ribose): a) testo taikymo mastą; b) sąlygos, kuriomis jis buvo naudojamas; c) mėginio, kuriame jis naudojamas, sudėtį.
Galiausiai, yra tam tikras patikimumo tipas, tiesiogiai susijęs su testą atliekančio asmens patikimumu. Testą atliekančio asmens patikimumo įvertinimas gaunamas nepriklausomai imituojant testą dviem skirtingiems eksperimentuotojams.
Testo rezultatų patikimumas priklauso ne tik nuo paties testo patikimumo ir jo atlikimo tvarkos. Svarbus veiksnys, turintis įtakos duomenų interpretavimo rezultatams, yra konkrečios imties specifika. Reikšmingiausiomis imties charakteristikomis šiuo požiūriu reikėtų pripažinti socialinį-psichologinį homogeniškumą įvairiais parametrais; taip pat atsižvelgiama į amžių ir lytį.
A.G. Shmelev siūlo atlikti veiksmų seką tikrinant patikimumą taip [Bendroji psichodiagnostika, 1987]:
1. Išsiaiškinkite, ar yra duomenų apie siūlomo naudoti testo patikimumą, kokioje populiacijoje ir kokioje diagnostinėje situacijoje jis buvo tiriamas. Jei patikrinimo nebuvo arba jei naujos populiacijos ypatybės ir situacijos yra aiškiai specifinės, dar kartą patikrinkite patikimumą, atsižvelgdami į toliau nurodytas parinktis.
2. Jei leidžia galimybės, iš naujo patikrinkite visą standartizacijos imtį ir apskaičiuokite visus koeficientus, pateiktus tiek visam testui, tiek atskiriems elementams. Gautų koeficientų analizė padės suprasti, kiek nereikšminga yra matavimo paklaida.
3. Jei galimybės ribotos, pakartokite tik dalies imties testavimą (mažiausiai 30 tiriamųjų), rankiniu būdu apskaičiuokite rango koreliaciją, kad įvertintumėte vidinę
viso bandymo nuoseklumas (padalinimo metodu) ir stabilumas.
Žinoma, svarstomos psichodiagnostikos sąvokos yra svarbiausi jos atributai. Tačiau aukšti patikimumo rodikliai patys savaime nenulemia testo praktinės vertės. Pagrindinis veiksnys, leidžiantis išmatuoti tikslinius psichologinio testavimo rezultatus, yra pagrįstumas.
Bet kokiame empiriniame psichologijos tyrime naudojami psichologiniai testai. Iš studentų dažnai reikalaujama pateikti duomenis apie jų patikimumą ir pagrįstumą.
Psichologinių testų patikimumas
Įprastame gyvenime žmogaus ar objekto patikimumas reiškia pasitikėjimą, kad galite juo pasikliauti. Kaip jie patikrina, ar galima pasikliauti psichologiniu testu?
Pirmas būdas patikrinti psichologinio testo patikimumą – analizuoti testo rezultatų stabilumą. Iš tiesų, jei to paties mėginio bandymo rezultatai reikšmingai nepasikeičia per kelis bandymus, tai gali būti jo patikimumo kriterijus.
Pakartotinis testavimas vadinamas pakartotiniu. Jis atliekamas intervalais nuo savaitės iki metų. Tada analizuojamos kelių matavimų koreliacijos. Jei koreliacija tarp pakartotinių testų rezultatų yra ne mažesnė kaip 0,76, toks testas laikomas patikimu.
Psichologinių testų testo-pakartotinio testo patikimumo trūkumai.
1. Kai kurie psichologiniai rodikliai yra nestabilūs ir kintantys. Pavyzdžiui, matuojant nuotaiką ir savijautą skirtingu paros metu ar skirtingomis dienomis, galima gauti skirtingus rezultatus, ir tai nebus testo nepatikimumo pasekmė.
2. Pakartotinai pildydami tą patį testą, tiriamieji prie jo „pripranta“. Jie gali prisiminti savo atsakymus ir atsakyti tuo pačiu būdu. Priešingai, jie gali pakeisti savo atsakymus socialinio geidžiamumo linkme. Taigi pakartotinio bandymo patikimumas visiškai neatspindės testo patikimumo.
Antrasis būdas patikrinti psichologinio testo patikimumą – analizuoti įvairių testo dalių nuoseklumą. Pavyzdžiui, teste yra vienas rodiklis, kurį diagnozuoja 10 klausimų. Šio testo nuoseklumą lemia didelė atsakymų į kiekvieną klausimą koreliacija su bendru balu skalėje.
Dažnai, norint nustatyti psichologinio testo nuoseklumą, jis dalijamas į dvi dalis. Tai galite padaryti pasirinkdami klausimus po vieną. Galite atskirti pirmąją ir antrąją tešlos pusę. Toliau analizuojamos dviejų išskaidytų testo dalių atsakymų koreliacijos. Kuo didesnė koreliacija, tuo didesnis testo nuoseklumas ir patikimumas.
Taigi psichologinio testo patikimumas yra jo formalaus tinkamumo psichologiniams rodikliams diagnozuoti charakteristika. Pavyzdžiui, jei nerimo diagnozavimo testas yra patikimas, tai reiškia, kad jei naudosite jį skirtingiems mėginiams skirtingu metu, gausite panašius rezultatus. Bet ar šie rezultatai apibūdins tiriamųjų nerimą? Psichologinio testo patikimumas to negarantuoja. Už tai atsakingas kitas rodiklis – psichologinio testo pagrįstumas.
Psichologinių testų pagrįstumas
Psichologinių testų pagrįstumas atspindi jų rezultatų atitikimą išmatuotų psichologinių reiškinių esmei. Pavyzdžiui, kiek agresyvumo testo rezultatas atspindi realų respondento agresyvumo lygį.
Yra du pagrindiniai psichologinių testų pagrįstumo nustatymo būdai.
Pirmasis būdas nustatyti psichologinio testo pagrįstumą yra testo rezultatų koreliacija su panašiais kitų testų rodikliais. Pavyzdžiui, norėdami patikrinti savigarbos testo pagrįstumą, galite atlikti šiuos veiksmus:
- atlikti tiriamųjų testavimą naudojant naują testą;
- nustatyti tiriamųjų savęs vertinimą atliekant kitą testą (darant prielaidą, kad jis galioja);
- apskaičiuoti savigarbos rodiklių koreliaciją dviem psichodiagnostikos metodais;
- statistiškai reikšminga koreliacija duos pagrindo kalbėti apie naujo testo pagrįstumą.
Šis metodas leidžia nustatyti vadinamąjį konstrukcijos pagrįstumą. Jis atspindi identifikuoto psichologinio rodiklio atitikimą psichologiniam konstruktui.
Antrasis psichologinio testo pagrįstumo nustatymo būdas – testo rezultatų koreliacija su išoriniais kriterijais. Šis pagrįstumas vadinamas psichologinio testo galiojimo kriterijumi.
Pavyzdžiui, polinkio į deviantinį elgesį testo kriterijaus pagrįstumo rodiklis gali būti tikrasis paauglio nusikaltimų skaičius. Kalbant apie pasiekimų motyvacijos testą, kriterijaus pagrįstumo rodiklis gali būti konkrečios veiklos sėkmė.
Psichologinių testų patikimumo ir pagrįstumo ryšys
Testo patikimumas atspindi jo, kaip diagnostinio metodo, kokybę formalių rodiklių požiūriu. Neatsižvelgiant į prasmingą rezultatų analizę.
Pagrįstumas įvertina testo rezultatų turinį. Kiek jie atitinka tikrus psichologinius reiškinius?
Patikimas testas gali būti netinkamas. Pavyzdžiui, iniciatyvos testas gali parodyti aukštą pakartotinio bandymo patikimumą ir dalių nuoseklumą. Tačiau turinio požiūriu testo rezultatai atspindi ne tiek iniciatyvą, kiek valios jėgą. Tai reiškia, kad šio testo patikimumas yra didelis, tačiau pagrįstumas yra mažas.
Psichologinio testavimo praktikoje testų patikimumas naudojant pakartotinį testą. Psichologinių testų pagrįstumas paprastai tikrinamas analizuojant ryšius su kitų testų, kurie matuoja panašius ar panašius psichologinius rodiklius, balais.
Išvadų apie psichologinių testų patikimumą ir pagrįstumą pavyzdžiai
Gyvenimo prasmės testas (LSO)
Gyvybės palaikymo sistemos patikimumas
SLS testo patikimumas buvo patikrintas pakartotiniu testavimu su 2 savaičių intervalu (tiriamosios: 76 MSU studentai). Tyrimo rezultatai buvo stabilūs esant 5% reikšmingumo lygiui (p<0,05).
LSS galiojimas
LSS testo autorius D.A. Leotiev, buvo patikrintas LSS konstrukcijos pagrįstumas. Šiuo tikslu buvo sudaryta imtis studentų iš Maskvos universitetų, iš viso 24 žmonės (vyrai ir moterys).
Tiriamieji buvo tikrinami naudojant šiuos testus: SZO, USK (subjektyvios kontrolės lygis) ir SAT (saviaktualizacijos lygio testas). Toliau buvo atlikta LSS rodiklių koreliacinė analizė su USC ir SAT testų rodikliais.
Visi šeši SLS testo rodikliai reikšmingai teigiamai koreliuoja su bendru vidiniu ir vidiniu pasiekimų srityje, taip pat (išskyrus trečią poskalį) su vidiniu šeimyninių santykių srityje. Taip pat buvo pastebėtos reikšmingos penktosios gyvybės gelbėjimo sistemos subskalės sąsajos su gamybos sferoje ir sveikatos bei ligų atžvilgiu.
SJO testo rodikliai teigiamai ir reikšmingai koreliuoja su šiomis SAT testo skalėmis: paramos ir pažinimo poreikių skalė – visi šeši rodikliai; kompetencijos laike, savigarbos ir idėjų apie žmogaus prigimtį skalės – viskas, išskyrus pirmąją subskalę; vertybinių orientacijų skalė – viskas, išskyrus bendrąjį rodiklį, o spontaniškumo skalė – trečia, ketvirta ir penkta subskalės. Nebuvo rasta reikšmingų koreliacijų su kitomis CAT skalėmis.
Gana aukštas koreliacijos lygis tarp gyvenimo prasmės orientacijų testo (LSO) ir vidinės reikšmės rodiklių (USK testas) bei savirealizacijos rodiklių (SAT testas) leidžia kalbėti apie SLO testo konstrukcijos pagrįstumą. .
Leontjevas D.A. Gyvenimo prasmės orientacijų (LSO) testas. 2-asis leidimas M.: Smysl, 2000, 18 p.
S. Schwartzo asmeninių vertybių tyrimo metodą Rusijoje pritaikė V.N. Karandaševas.
Tai, kad ši psichodiagnostinė technika remiasi aiškia ir teoriškai pagrįsta jos autoriaus koncepcija, apimančia operatyvizuotas vertybių charakteristikas;
Faktas yra tas, kad kuriant pirminę anketos versiją buvo naudojami tyrimų duomenys iš 54 šalių.
Karandaševas V.N. Schwartzo metodas asmeninėms vertybėms tirti: samprata ir metodiniai nurodymai. - Sankt Peterburgas: kalba, 2004-70 p.
Metodika „Vertės ir prieinamumo koreliacijos lygis įvairiose gyvenimo srityse“ (USDC) (E.B. Fantalova)
Metodikoje E.B. Fantalova „Vertės ir prieinamumo koreliacijos lygis įvairiose gyvenimo srityse“ naudoja 12 reikšmių sąrašą, paimtą iš M. Rokeacho metodologijos galutinių verčių sąrašo.
Taigi, E. B. metodikos patikimumas ir pagrįstumas. Fantalovą lemia M. Rokeacho vertybių sąrašo patikimumas ir pagrįstumas.
M. Rokeacho vertybinių orientacijų testo patikimumą autorius tikrino per vertybių struktūros stabilumą iki pakartotinio testavimo laiko intervalais nuo 3 savaičių iki 14-16 mėnesių kolegijos studentų imtyse. Atskirų verčių, pakartotinai tikrinant kas 3–7 savaites, stabilumo indeksas svyruoja nuo 0,51 iki 0,88 (galinės vertės) ir nuo 0,45 iki 0,70 (instrumentinės vertės). Rusų kalbos technikos versijos atveju pakartotinio testavimo metu su 2 savaičių intervalu buvo gauti vidutiniai patikimumo rodikliai 0,82 (galinėms vertėms) ir 0,79 (instrumentinėms vertėms).
M. Rokeacho vertybinių orientacijų metodo (taigi ir E. B. Fantalovos metodo) pagrįstumą netiesiogiai liudija įvairių socialinių grupių apklausos rezultatai. Vyrų ir moterų tų pačių verčių vertinimo skirtumai pasiekia statistiškai reikšmingas ribas 12 iš 18 galutinių verčių ir 8 instrumentinių verčių.
Leontjevas, D.A. Vertybinių orientacijų tyrimo metodika. - M.: Smysl, 1992. - 17 p.
Fantalova E.B. Apie vieną metodinį požiūrį į motyvacijos ir vidinių konfliktų tyrimą // Psichologijos žurnalas, t. 13, 1992, N 1. 107-117 p.
Metodika „Laisvas vertybių pasirinkimas“ Fantalova E.B.
„Laisvo vertybių pasirinkimo“ technika yra neatsiejama autoriaus vertybinės sistemos „Vidinio konflikto diagnostika“ (DVK) dalis.
Šia technika E.B. Fantalova išplėtė verčių sąrašą nuo 12 iki 72. Tačiau autorė nepatikrino šios vertybių struktūros patikimumo ir pagrįstumo.
Fantalova E.B. Vidinių konfliktų diagnostika ir psichoterapija. Samara, 2001 m.
Tikiuosi, kad šis straipsnis padės jums parašyti psichologijos darbą. Jei reikia pagalbos, susisiekite su mumis (visi psichologijos darbai; statistiniai skaičiavimai).
