Luotettavuuden mittaaminen kyselytutkimustilanteissa on vaikeampaa ja vaikeammin toteutettavissa kuin havainnointitutkimuksissa.
Vaikka tiettyä toimintaa on mahdollista havainnoida uudestaan ja uudestaan, kyselytutkimus on yleensä mahdollista toistaa vain kerran. Tämä johtaa test-retest-menetelmään, jossa verrataan kahta testiä, jotta saadaan selville, kuinka luotettavia ne ovat. Menetelmässä testi annetaan samalle henkilöryhmälle kahteen eri otteeseen.
Tällöin määritetään testi-uusintatestikerroin, jota joskus kutsutaan stabiilisuuskertoimeksi. Reliabiliteettikerroin on tässä tapauksessa yksinkertaisesti Pearsonin tuotosmomenttikorrelaatiokerroin samojen henkilöiden kahdella testikerralla saamien pisteiden välillä.
Menetelmää havainnollistetaan alla olevalla esimerkillä.
Esimerkki testin ja uusintatestin välisestä menetelmästä
Tarkastellaan ryhmää nuoria, joita pyydettiin nimeämään muutamia ehkäisyvälineitä tiettynä ajankohtana. Ilmoitetut vastaukset kirjattiin numeroin 0, 1,2 jne.
Myöhemmin samalta ryhmältä kysyttiin samat kysymykset, ja heidän vastauksensa kirjattiin täsmälleen samalla tavalla.
Korrelaatiokerroin, joka on laskettu näistä kahdesta pistemäärästä, antaa meille mittarin vakaudesta. Havainnollistamme tätä oheisessa taulukossa, ja Tuote-momenttikorrelaatiokerroin lasketaan seuraavasti:
Kahdeksalla df:llä Pearsonin r on merkitsevä 0,05:n tasolla (r:n merkitsevyyteen vaaditaan taulukon arvo 0,632). Näin ollen reliabiliteetiksi saadaan .745, mikä on hyväksyttävä arvo tämäntyyppiselle testille.
Menetelmän tärkein haittapuoli on se, että jos uusintatesti tehdään liian nopeasti, ensimmäinen testi herkistää vastaajat aiheelle, minkä seurauksena vastaaja muistaa jo annetut vastaukset ja toistaa ne.
Tällöin reliabiliteetti-indikaattorit vääristyvät ylöspäin.
Toiseksi mielipiteet voivat muuttua tilannekohtaisista vaikutuksista ennen uusintatestiä. Näissä tapauksissa stabiilisuusindikaattorit vääristyvät alaspäin.
Tämä merkitsee, että mitä pidempi aikaväli on kahden peräkkäisen mittauskerran välillä, sitä alhaisempi korrelaatiokerroin osoittaa heikkoa luotettavuutta.