WORKSHEET psy

ee eBook Collection

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

C H A P T E R 2

RESEARCH METHODS IN PSYCHOLOGY

kowa_c02_031-062hr.indd 31 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

licia was 19 years old when she received a call that would change

her life forever. Her parents and only brother had been killed in a

car accident. Initially, Alicia reacted with shock and tremendous

grief, but over the course of the next year, she gradually regained

her emotional equilibrium. About a year after the accident,

though, Alicia noticed that she was constantly ill with one cold,

sore throat, or bout with the flu after another. After a few trips to

the health service, an astute doctor asked her if anything out of the ordinary had hap-

pened in the last year. When she mentioned the death of her family, the doctor recom-

mended she see a psychologist. She did—and was free from physical illness from the day

she entered the psychologist’s office until more than a year later.

Was it coincidence that Alicia’s health improved just as she began expressing her

feelings about the loss of her family? Research by James Pennebaker and his colleagues

(1997; 2001) suggests not.

In one study, the researchers examined a stressful

experience much less calamitous than Alicia’s: the tran-

sition to college. For most people, entering college is an

exciting event, but it can also be stressful, since it often

means leaving home, breaking predictable routines, find-

ing a new group of friends, and having to make many

more decisions independently. To assess the impact

of emotional expression on health, Pennebaker and his

colleagues assigned college freshmen to one of two

groups. Students in the first group were instructed to

write for 20 minutes on three consecutive days about

“your very deepest thoughts and feelings about com-

ing to college, including your emotions and thoughts

about leaving your friends or your parents—or even

about your feelings of who you are or what you want

to become.” Students in the other group were asked to

describe in detail “what you have done since you woke

up this morning” and were explicitly instructed not to mention their emotions, feelings,

or opinions.

The results were dramatic (Figure 2.1). Students in the emotional expression group

made significantly fewer visits to the health service in the following two to three months

than those who simply described what they had done that day. The effect largely wore

off by the fourth month, but it was remarkable given how seemingly minor the interven-

tion had been.

Philosophers have speculated for centuries about the relation between mind and

body. Yet here, psychologists were able to demonstrate empirically—that is, through sys-

tematic observation—how a psychological event (in this case, simply expressing feelings

about a stressful experience) can affect the body’s ability to protect itself from infection.

In this chapter we address the ways psychologists use the scientific method to develop

theories and answer practical questions using sound scientific procedures.

32

A

kowa_c02_031-062hr.indd 32 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CHARACTERISTICS OF GOOD PSYCHOLOGICAL RESEARCH 33

We begin by discussing the features of good psychological research. How do re-

searchers take a situation like the sudden improvement in Alicia’s health after seeing a

psychologist and turn it into a researchable question? How do they know when the find-

ings apply to the real world? Then we consider three major types of research: descriptive,

experimental, and correlational. Finally, we examine how to distinguish a good research

study from a bad one.

C H A R A C T E R I S T I C S O F G O O D P S Y C H O L O G I C A L R E S E A R C H

The tasks of a psychological researcher trying to understand human nature are in some respects similar to the tasks we all face in our daily lives as we try to predict other people’s behavior. For example, a student named Elizabeth is running behind on a term paper. She wants to ask her professor for an extension but does not want to risk his forming a negative impression of her. Her task, then, is one of prediction: How will he respond?

To make her decision, she can rely on her observations of the way her professor normally behaves, or she can “experiment” by saying something and seeing how he responds. Elizabeth has observed her professor on many occasions, and her impres- sion—or theory—about him is that he tends to be rigid. She has noticed that when students arrive late to class he looks angry and that when they ask to meet with him outside the class he often seems inflexible in scheduling appointments. She thus ex- pects—hypothesizes—that he will not give her an extension.

Not sure, however, that her observations are accurate, she tests her hypothesis by speaking with him casually after class one day. She mentions a “friend” who is having trouble finishing the term paper on time, and she carefully observes his reaction—his facial expressions, his words, and the length of time he takes to respond. The pro- fessor surprises her by smiling and advising her that her “friend” can have an extra week. In this scenario, Elizabeth is doing exactly what psychologists do: observing a psychological phenomenon (her professor’s behavior), constructing a theory, using the theory to develop a hypothesis, measuring psychological responses, and testing the hypothesis.

F I G U R E 2 .1 Emotional expression and health. The figure compares the number of visits to the health service of students writing about either emotionally significant or trivial events. Students who wrote about emotionally significant events had better health for the next four months, after which the effect wore off. (Source: Adapted from Pennebaker et al., 1990, p. 533.)

0.4 Il

ln es

s vi

si ts

p er

m on

th 0.3

0.2

0.1

0 –3

Months prior to writing Months after writing

–2 –1 0 1 2 3 4 Emotional expression group

Control group

kowa_c02_031-062hr.indd 33 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

34 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

Psychologists are much more systematic in applying scientific methods, and they have more sophisticated tools, but the logic of investigation is basically the same. Like carpenters, researchers attempting to lay a solid empirical foundation for a theory or hypothesis have a number of tools at their disposal. Just as a carpenter would not use a hammer to turn a screw or loosen a bolt, a researcher would not rely exclusively on any single method to lay a solid empirical foundation for a theory. Nevertheless, most of the methods psychologists use—the tools of their trade—share certain features: a theoretical framework, standardized procedures, generalizability, and objective mea- surement (Figure 2.2). We examine each of these in turn.

Theoretical Framework Psychologists study some phenomena because of their practical importance. They may, for example, research the impact of divorce on children (Kalter, 1990; Wallerstein & Corbin, 1999) or the effect of cyberbullying on adolescents’ psychological and physi- cal health (Kowalski et al., 2007). In most cases, however, they firmly ground their research in theory.

A theory systematically organizes and explains observations by including a set of propositions, or statements about the relations among various phenomena. For ex- ample, a psychologist might theorize that a pessimistic attitude promotes poor physical health for two reasons: Pessimists do not take good care of themselves, and pessimism taxes the body’s defenses against disease by keeping the body in a constant state of alarm.

People frequently assume that a theory is simply a fact that has not yet been proven. As suggested in Chapter 1, however, a theory is always a mental construc- tion, an imperfect rendering of reality by a scientist or community of scientists, which can have more or less evidence to support it. The scientist’s thinking is the mortar that holds the bricks of reality in place. Without that mortar, the entire edi- fice would crumble.

In most research, theory provides the framework for the researcher’s specific hypothesis, or tentative belief about the relationship between two or more vari- ables. A variable is any phenomenon that can differ, or vary, from one situation to another or from one person to another; in other words, a variable is a char- acteristic that can take on different values (such as IQ scores of 115 or 125). For example, a research team interested in the links between optimism and health decided to test the hypothesis that optimism (variable 1) is related to speed of recovery from heart surgery (variable 2). Their theory suggested that optimism should be related to health in general; their specific hypothesis focused on heart disease in particular. In fact, the researchers found that patients undergoing coronary artery bypass operations who are optimistic recover more quickly than patients who are pessimistic (Scheier & Carver, 1993).

In this case, optimism and health are variables, because different people are more or less optimistic (they vary as to degree of optimism) and recover more or less quickly

theory a systematic way of organizing and explaining observations

hypothesis a tentative belief or educated guess that purports to predict or explain the relationship between two or more variables

variable a phenomenon that changes across circumstances or varies among individuals

A THEORETICAL FRAMEWORK

Systematic way of organizing and explaining observations

Hypothesis that flows from the theory or from an important question

Sample that is representative of the population

Procedure that is sensible and relevant to circumstances outside the laboratory

Measures that are reliable (that produce consistent results)

Measures that are valid (that assess the dimensions they purport to assess)

Procedure that is the same for all participants except where variation is introduced to test a hypothesis

A STANDARDIZED PROCEDURE

GENERALIZABILITY OBJECTIVE MEASUREMENT

F I G U R E 2 . 2 Characteristics of good psy- chological research. Studies vary tremendously in design, but most good research shares certain attributes.

kowa_c02_031-062hr.indd 34 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CHARACTERISTICS OF GOOD PSYCHOLOGICAL RESEARCH 35

(they vary as to recovery rate). Variables are classified as either a continuous variable, such as the degree of optimism, intelligence, shyness, or rate of recovery, or as a cat- egorical variable, such as gender, species, or whether or not a person has had a heart attack. A categorical variable cannot easily be placed on a continuum; people are either male or female and cannot usually be located on a continuum between the two.

continuous variable a variable that can be placed on a continuum from none or little to much

categorical variable a variable comprised of groupings, classifications, or categories

As you read the chapters of this text, you may wonder where scientists derived the ideas for their research studies. The number of sources for research are as varied as the number of ideas themselves, but a few are prevalent. You can use these sources yourself as tips for getting ideas if you need to design your own research project. [For a list of “hot” topics in psychology, see an interesting article by Zacks and Maley (2007).]

■ Read the research literature in an area you find interesting. One of the first lessons of research is that you conduct research in an area that you find inter- esting. If you find a particular topic interesting, read the literature in that area and you will likely find many unanswered questions that will generate fruitful hypotheses for research.

■ Derive hypotheses from an existing theory. Using this traditional way of gen- erating research ideas, researchers read about a particular theory and then derive a series of hypotheses from that theory. Because theories themselves are some- what abstract, researchers usually cannot test a particular theory. Rather, they test hypotheses that they derive from these theories.

■ Imagine what would happen if a particular variable were reduced to zero. What would happen, for example, if people didn’t care about what anyone thought of them? Would they work as hard to maintain their weight or to refrain from engaging in breaches of propriety, such as belching in public?

■ Investigate an area that you find personally interesting. Many research stud- ies stem from the personal interest of researchers and may even reflect personal experiences they have had. For example, someone who was raised in foster care may decide to examine the implications of foster care for physical and mental health. Another individual who was sexually abused as a child may decide as an adult to conduct research in the area of sexual abuse. My (RMK) own research on complaining stemmed from my personal curiosity about why people complain as much as they do (and perhaps from the fact that maybe I, too, am a complainer!).

■ Apply an old theory to a new phenomenon. A given theory can be used as a source for hypotheses about any number of different topics. Thus, a theory that has traditionally been thought of as being associated with a particular area of study can be applied to a completely new area.

■ Observe everyday interactions, and ask yourself questions about why that behavior occurs. Some of the best research ideas happen somewhat acciden- tally when a person simply observes the behavior of other individuals. A con- temporary example is a study whose hypothesis was generated from a song by Mickey Gilley “The Girls Get Pretty at Closing Time” (Pennebaker et al., 1979). Do they? And, if so, why?

■ Reverse the direction of causality for a hypothesis. Here, a researcher takes an existing hypothesis and reverses the direction of causality. For example, al- though most people would say that they blush when they are embarrassed, is it also possible that people are embarrassed because they blush?

(ADAPTED FROM LEARY, 2001)

FOCUS ON METHODOLOGY GETTING RESEARCH IDEAS

kowa_c02_031-062hr.indd 35 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

36 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

Standardized Procedures In addition to being grounded in theory, good psychological research uses standard- ized procedures that expose participants in a study to procedures that are as simi- lar as possible. For example, in the study of emotional expression and health that opened this chapter, the experimenters instructed students in both groups to write for 20 minutes a day for three days. If instead they had let the students write for as long as they wanted, students in one group might have written more, and the experiment- ers would not have been able to tell whether differences in visits to the health service reflected the content of their writing or simply the quantity.

Generalizability from a Sample Psychological research typically studies the behavior of a subset of people to learn about a larger group to whom the research findings should be applicable, known as the population. The population might be as broad as all humans or as narrow as preschool children with working mothers. A subset of the population that is likely to be representative of the population as a whole is called the sample. The individuals who participate in a study are called participants or subjects.

A representative sample contributes to the generalizability of a study’s conclu- sions. Often researchers intend their findings to be generalizable to people as a whole. At other times, however, they are interested in generalizing to specific subgroups, such as people over 65, married couples, or women.

For a study to be generalizable, its procedures must be sound, or valid. To be val- id, a study must meet two criteria. First, the design of the study itself must be valid— have internal validity. A study with low internal validity does not allow a researcher to convincingly make any inferences regarding cause and effect. If a study has fatal flaws—such as an unrepresentative sample or nonstandardized aspects of the design that affect the way participants respond—its internal validity is jeopardized. Similarly, if researchers have failed to control for extraneous variables that could account for their findings, the internal validity of the study is called into question.

Second, the study must establish external validity, or generalizability. Does ex- pressing feelings on paper for three days in a laboratory simulate what happens when people express feelings in their diary or to a close friend? The problem is that often researchers must strike a balance between internal and external validity, because the more tightly a researcher controls what participants experience, the less the situation may resemble life outside the laboratory. This choice point for researchers is referred to as the experimenter’s dilemma. Whether a researcher opts for more internal than external validity or vice versa depends on his or her research hypothesis. A researcher conducting applied research would place more emphasis on external validity. A re- searcher focused more on advancing knowledge or increasing our understanding of a particular phenomenon might place more emphasis on internal validity.

I N T E R I M S U M M A R Y

Psychological research is generally guided by a theory—a systematic way of organizing and explaining observations. The theory helps generate a hypothesis, or tentative belief about the relationship between two or more variables. Variables are phenomena that differ or change across circumstances or individuals; they can be either continuous or categorical, depending on whether they form a continuum or are comprised of categories. Standard- ized procedures expose participants in a study to procedures that are as similar as possible. Although psychologists are typically interested in knowing something about a population, to do so they usually study a sample, or subgroup, that is likely to be representative of the population. To be generalizable, a study must have both internal validity (a valid design) and external validity (applicability to situations outside the laboratory). Unfortunately, the researcher typically has to choose whether to place more emphasis on internal or on exter- nal validity, a trade-off referred to as the experimenter’s dilemma.

standardized procedures procedures applied uniformly to participants that minimize unintended variation

population a group of people or animals of interest to a researcher from which a sample is drawn

participants the individuals who participate in a study; also called subjects

representative a sample that reflects characteristics of the population as a whole

sample a subgroup of a population likely to be representative of the population as a whole

generalizability the applicability of a study’s findings to the entire population of interest

internal validity the extent to which a study is methodologically adequate

external validity the extent to which the findings of a study can be generalized to situations outside the laboratory

experimenter’s dilemma the trade-off between internal and external validity

kowa_c02_031-062hr.indd 36 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CHARACTERISTICS OF GOOD PSYCHOLOGICAL RESEARCH 37

Objective Measurement As in all scientific endeavors, objectivity is an important ideal in psychological re- search. Otherwise, the results of a study might simply reflect the experimenter’s sub- jective impression. Researchers must therefore devise ways to quantify or categorize variables so they can be measured.

Consider a study in which the researchers hoped to challenge popular beliefs and theories about children’s popularity (Rodkin et al., 2000). Rather than viewing all popular children as “model citizens,” the researchers theorized that some popular children (in this study, boys) are actually aggressive kids who impress others with their “toughness” more than with their good nature.

So how might researchers turn a seemingly subjective variable such as “popu- larity” in elementary school boys into something that they can measure? One way is through quantifying teachers’ observations. Contrary to many students’ beliefs, teachers often have a keen eye for what is going on in their classrooms, and they tend to know which kids are high or low on the schoolyard totem pole. Thus, in this study, teachers filled out an 18-item questionnaire that asked them to rate each boy in their class on items such as “popular with girls,” “popular with boys,” and “lots of friends.” (Teachers also rated items about the boys’ scholastic achievement, athletic ability, and other variables.)

Using statistical techniques that can sort people who are similar to each other and different from others into groups—in this case, sorting boys into groups based on their teachers’ descriptions of them—the researchers discovered two kinds of boys who are popular. One kind was indeed the model citizen type—high in academic achievement, friendly, good-looking, and good at sports. The other kind, however, differed from the first type in one respect: These boys, too, were good-looking and good at sports, but their other most striking quality was that they were aggressive.

To study a variable such as popularity, then, a researcher must first devise a tech- nique to measure it. A measure is a way of bringing an often abstract concept down to earth. In this study, the investigators used a rating scale, that is, a measure that assesses a variable on a numerical scale—such as 1–7, where 1 = not true and 7 = very true—to assess popularity. As a general measure of popularity, they actually took the average of each child’s rating on three items (popularity with boys, popularity with girls, and having many friends). In the study of emotional expression and health, the investiga- tors obtained records of visits from the campus health service as a rough measure of illness. This was a better measure than simply asking students how often they got sick, because people may not be able to remember or report illness objectively. For example, one person’s threshold for being “sick” might be much lower than another’s.

For some variables, measurement is not a problem. For example, researchers typically have little difficulty distinguishing males from females. However, for some characteristics, such as popularity, health, or optimism, measurement is much more complex. In these cases, researchers need to know two characteristics of a measure: whether it is reliable and whether it is valid.

RELIABILITY Reliability refers to a measure’s consistency. Using a measure is like stepping on a scale: The same person should not register 145 pounds one moment and 152 a few minutes later. Similarly, a reliable psychological measure does not fluc- tuate substantially despite the presence of random factors that may influence results, such as whether the participant had a good night’s sleep or who coded the data.

Reliability in this technical sense is not altogether different from reliability in its everyday meaning: A test is unreliable if we cannot count on it to behave consistently, just as a plumber is unreliable if we cannot count on him to show up consistently when he says he will. An unreliable measure may sometimes work, just as an unreli- able plumber may sometimes work, but we can never predict when either will per- form adequately.

measure a concrete way of assessing a variable

reliability a measure’s ability to produce consistent results

kowa_c02_031-062hr.indd 37 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

38 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

Three kinds of reliability are especially important (Figure 2.3). Test–retest reliability refers to a measure’s tendency to yield simi- lar scores for the same individual over time. The researchers inter- ested in boys’ popularity examined the test–retest reliability of their measure by readministering it three weeks later; they found that boys rated as popular or aggressive initially were rated very simi- larly three weeks later—a confirmation of the measure’s reliability.

Another kind of reliability is internal consistency, or inter- item reliability. This refers to the consistency of participants’ responses across items on a scale. A measure is internally consistent if several ways of asking the same ques- tion yield similar results. Thus, if being high on popularity with boys did not predict being high on popularity with girls, averaging these two items would not yield an internally consistent measure.

A third kind of reliability is interrater reliability, or consistency across people. Two people rating the same behavior should assign similar scores. In the study of popularity, for example, one way to assess interrater reliability would have been to ask two different teachers who knew the same children to rate them and to see if their ratings were similar. Although some variables can be rated quite easily with relatively high reliability, others, such as optimism as assessed from people’s diaries, require the development of detailed coding manuals to guarantee that different raters are similarly “calibrated,” like two thermometers recording temperature in the same room.

VALIDITY A study can be valid only if the measures it relies on are themselves valid. When the term validity is applied to a psychological measure, it refers to the mea- sure’s ability to assess the variable it is supposed to assess. For example, IQ tests are supposed to measure intelligence. One way psychologists have tried to demonstrate the validity of IQ test scores is to show that they consistently predict other phenomena that require intellectual ability, such as school performance. As we will see in Chapter 8, IQ tests and similar tests such as the Scholastic Aptitude Test (SAT) are, in general, highly predictive of school success (Anastasi & Urbina, 1997). Some of the measures people intuitively use in their daily lives have much less certain validity, as when Eliz- abeth initially presumed that her professor’s inflexibility in arranging meetings with students was a good index of his general flexibility (rather than, say, a tight schedule).

Just as there are different types of reliability, so, too, are there different types of validity (see Figure 2.3). As you will see, some types of validity are more important than others. One type, the least important one, is face validity. Many researchers go out of their way to ensure that their scale does not have face validity. Concerned that participants may alter their responses if they discern the researcher’s purpose, experi- menters may try to disguise the true purpose of their measure.

More important is construct validity, or the degree to which a measure actu- ally assesses what it claims to measure. Construct validity is determined in one of two ways. Measures that are high in construct validity should correlate with related measures, a type of construct validity referred to as convergent validity. Thus, a mea- sure of social anxiety should correlate with other existing measures of social anxiety or related constructs, such as fear of negative evaluation or public self-consciousness. At the same time, a measure that has construct validity should also have discriminant validity; that is, it should not correlate with unrelated measures. A measure should be distinct from unrelated measures.

A third type of validity, criterion validity, refers to the degree to which a mea- sure allows a researcher to distinguish among groups on the basis of certain behaviors or responses. The SAT test mentioned earlier is assessed for its criterion validity or the extent to which, in fact, it distinguishes among students who do versus do not perform well in college approximately a year after they take the test.

Similarly, the teacher report measure used to assess children’s popularity, aggres- siveness, academic achievement, and other variables predicted children’s functioning as many as eight years later (e.g., rates of dropping out of school and teenage preg-

test–retest reliability tendency of a test to yield relatively similar scores for the same individual over time

internal consistency a type of reliability that assesses whether the items in a test measure the same construct; also known as interitem reliability

interrater reliability a measure of the similarity with which different raters apply a measure

validity the extent to which a test measures the construct it attempts to assess or a study adequately addresses the hypothesis it attempts to assess

face validity the degree to which a measure appears to measure what it purports to measure

construct validity the degree to which a measure actually assesses what it claims to measure

criterion validity the degree to which a measure allows a researcher to distinguish among groups on the basis of certain behaviors or responses

VALIDITY

Face validity Construct validity Convergent validity Discriminant validity Criterion validity

RELIABILITY

Test–retest—consistency across time

Interitem reliability—consistency across items

Interrater reliability—consistency across people

F I G U R E 2 . 3 Psychometric characteristics of good measures. To be valid, studies must contain measures that are both reliable and valid. The figure depicts the different types of reliability and validity that researchers must consider.

kowa_c02_031-062hr.indd 38 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CHARACTERISTICS OF GOOD PSYCHOLOGICAL RESEARCH 39

nancy). Showing that a measure of children’s achievement, popularity, and adjust- ment can predict how well they will do socially and academically several years later provides strong evidence for the criterion validity of a measure.

MULTIPLE MEASURES One of the best ways to obtain an accurate assessment of a variable is to employ multiple measures of it. Multiple measures or converging opera- tions are important because no psychological measure is perfect. A measure that as- sesses a variable accurately 80 percent of the time is excellent—but it is also inaccurate 20 percent of the time. In fact, built into every measure is a certain amount of error. For example, IQ is a good predictor of school success most of the time, but for some people it overpredicts or underpredicts their performance. Multiple measures there- fore provide a safety net for catching errors.

Virtually all good psychological studies share the ingredients of psychological re- search outlined here: a theoretical framework, standardized procedures, generaliz- ability, and objective measurement. Nevertheless, studies vary considerably in design and goals. The following sections examine three broad types of research (as detailed later in Table 2.2): descriptive, experimental, and correlational. In actuality, the lines separating these types are not hard-and-fast. Many studies categorized as descriptive include experimental components, and correlational questions are often built into ex- periments. The aim in designing research is scientific rigor and practicality, not purity; the best strategy is to use whatever systematic empirical methods are available to ex- plore the hypothesis and to see if different methods and designs converge on similar findings—that is, to see if the finding is “reliable” with different methods.

I N T E R I M S U M M A R Y

Just as researchers take a sample of a population, they similarly take a “sample” of a vari- able—that is, they use a measure of the variable, which provides a concrete way of assessing it. A measure is reliable if it produces consistent results—that is, if it does not show too much random fluctuation. A measure is valid if it accurately assesses or “samples” the construct it is intended to measure. Because every measure includes some degree of error, researchers often use multiple measures (in order to assess more than one sample of the relevant behavior).

error the part of a participant’s score on a test that is unrelated to the true score

P S Y C H O L O G Y A T W O R K THE MEANING BEHIND THE MESSAGE

How important is language? What do words tell us? Do the specific words that people use convey more than their surface meaning? Do different words convey different types of information about a person’s emotions, thoughts, and intentions? Is our use of words affected by the situations that we confront in our lives? Recent research by James Penne- baker and his colleagues suggests that the answers to these questions appears to be “yes.”

As described in the story that opened this chapter, for a number of years Penne- baker and his colleagues have examined the physical and psychological benefits of writing about one’s thoughts and feelings. Throughout a series of studies, Pennebaker found that people who disclosed traumatic events, particularly those they had never revealed before, showed improved physical and psychological health for months and, in some cases, years following the disclosure. For example, in a study with 63 unemployed workers, those who wrote about their thoughts and feelings associated with being unemployed found jobs more quickly than those who wrote about unrelated topics (Spera et al., 1994).

More recently, he has conducted linguistic analyses of written text with the goal of identifying what people’s word choices actually say about them and how those word choices affect others’ perceptions of them. Viewed this way, our language op- erates very much like a projective test (Chapter 12), revealing our personality, feel- ings, and emotional states. Different types of words reveal different aspects of the

kowa_c02_031-062hr.indd 39 9/17/10 4:17 PMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

40 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

self. For example, function words (e.g., pronouns, prepositions, articles, conjunctions, and auxiliary verbs) convey information about an individual’s emotional state (e.g., depression), biological state (e.g., heart disease proneness), personality (e.g., neu- roticism), cognitive styles (e.g., thought complexity), and social relationships (e.g., honesty) (Pennebaker et al., 2003). Exclusive words (e.g., but, without) are indicative of cognitive complexity. Importantly, Pennebaker was not the first to suggest that words are indicative of psychological states. For example, Freud suggested that the mistakes people make in their speech (i.e., Freudian slips) reveal information about their thoughts, motives, and unconscious conflicts (Pennebaker et al., 2003).

In one study, Pennebaker and his colleagues (Slatcher et al., 2007) compared the linguistic features of the presidential and vice presidential candidates in the 2004 U.S. presidential election. Using a linguistic program, they analyzed 271 transcripts of tele- vised interviews, press conferences, and campaign debates that had been aired during the 11 months of 2004 leading up to the election. Specifically, they were interested in linguistic markers of cognitive complexity, femininity, age, depression, presidential- ity, and honesty. They found differences in linguistic style not only across the four individuals but also across political party. For example, not only was Dick Cheney’s language more presidential than that of any of the other three candidates, but Repub- lications’ language was more presidential than that of Democrats. Cheney’s language was also rated as more honest (e.g., higher number of self-references and fewer words conveying negative emotion) and as more cognitively complex. John Edwards and George W. Bush used language that reflected the least amount of cognitive complex- ity, while John Kerry’s linguistic choice was the most depressive. The linguistic analy- sis showed Bush’s to be most reflective of an older individual through its use of fewer first-person references and a great focus on the future (Slatcher et al., 2007).

In another intriguing study, Pennebaker and his colleagues (Pennebaker & Chung, 2009) conducted a linguistic analysis of 58 texts provided by the FBI, 36 of which were au- thored by Osama bin Laden and 17 of which were authored by Ayman al-Zawahiri. The remaining texts were authored by both or it was unknown which of the two created the text. A comparison group of texts from other terrorist leaders was also analyzed. The research- ers used a text analysis program known as the Linguistic Inquiry and Word Count (LIWC), which searches written text for over 2300 words or word stems that are then grouped into over 70 linguistic categories. Included among these categories are language categories (e.g., prepositions and pronouns), psychological processes (e.g., positive and negative af- fect; cognitive processes), and content groupings (e.g., home and occupation) (Pennebak- er et al., 2003). The researchers found that, compared to the other terrorist group leaders, bin Laden and Zawahiri used words reflecting more emotion, most notably anger. They also showed more cognitive complexity, but bin Laden surpassed Zawahiri on this dimen- sion. Importantly, bin Laden’s use of exclusive words demonstrating cognitive complexity had increased significantly since 1988. In contrast to bin Laden, Zawahiri’s use of first- person pronouns had increased markedly over the years. Pennebaker and his colleagues interpreted this as indicative of increasing feelings of insecurity and threat. (See Table 2.1 for a summary of all of the results.)

The same linguistic program that was used in the previous two studies was also used in a study that examined the online journal entries of individuals over a four- month period that spanned the two months prior to and the two months after September 11, 2001. Individuals who were the most preoccupied with the events of September 11 showed the greatest psychological change as reflected in their linguistic style. Not surprisingly, the diaries of these high-frequency journal writers evidenced more negative emotion words immediately after 9/11. After about two weeks, how- ever, the proportion of negative emotion words decreased, but the number of social responses (i.e., words referring to other people), which had shown an increase im- mediately following 9/11, decreased over the remainder of the four-month observa- tion period, particularly for those preoccupied with 9/11 (Cohn et al., 2004). Words reflecting greater psychological distancing showed a marked increase following 9/11 compared to before, and this increase remained high for the duration of the study.

kowa_c02_031-062hr.indd 40 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CHARACTERISTICS OF GOOD PSYCHOLOGICAL RESEARCH 41

TA B L E 2 .1

COMPARISON OF PUBLIC STATEMENTS OF BIN LADIN, ZAWAHIRI, AND OTHER TERRORIST GROUPS

Bin Ladin (1988 to 2006) N = 28+

Zawahiri (2003 to 2006) N = 15+

Controls N = 17

P (two-tailed)

Word Count 2511.5++ 1996.4 4767.5

Big Words (greater than 6 letters) 21.2a +++ 23.6b 21.1a .05

Pronouns 9.15ab 9.83b 8.16a .09

I (e.g., I, me, my) 0.61 0.90 0.83

We (e.g., we, our, us) 1.94 1.79 1.95

You (e.g., you, your, yours) 1.73 1.69 0.87

He/she (e.g., he, hers, they) 1.42 1.42 1.37

They (e.g., they, them) 2.17a 2.29a 1.43b .03

Prepositions 14.8 14.7 15.0

Articles (e.g., a, an, the) 9.07 8.53 9.19

Exclusive Words (but, exclude) 2.72 2.62 3.17

Affect 5.13a 5.12a 3.91b .01

Positive emotion (happy, joy, love) 2.57a 2.83a 2.03b .01

Negative emotion (awful, cry, hate) 2.52a 2.28ab 1.87b .03

Anger words (hate, kill) 1.49a 1.32a .89b .01

Cognitive Mechanisms 4.43 4.56 4.86

Time (clock, hour) 2.40b 1.89a 2.69b .01

Past tense verbs 2.21a 1.63a 2.94b .01

Social Processes 11.4a 10.7ab 9.29b .04

Humans (e.g., child, people, selves) .95ab .52a 1.12b .05

Family (mother, father) .46ab .52a .25b .08

Content

Death (e.g., dead, killing, murder) .55 .47 .64

Achievement .94 .89 .81

Money (e.g., buy, economy, wealth) .34 .38 .58

Religion (e.g., faith, Jew, sacred) 2.41 1.84 1.89

+ Documents whose source indicates “Both” (n = 3) or “Unknown” (n = 2) were excluded due to their small sample sizes. ++ Numbers are mean percentages of total words per text file and the results of statistical tests (mean square differnces) between bin Laden, al-Zawahiri, and controls. +++ In any row, mean percentages that differed from each other—on a level of significance indicated in the last coloumn—bear unequal subscripts, a or b. A mean that is not different from either a or b is subscripted by ab. Means that are not statistically different from each other bear the same subscripts.

Reprinted with permission from Pennebaker, J.W., & Chung, C.K. (2009). Computerized text analysis of Al-Qaeda transcripts. In K. Krippendorff & M.A. Bock (Eds.), A content analysis reader (pp. 453–465). Thousand Oaks, CA: Sage.

All of these studies used the LIWC, (Pennebaker et al., 2001). The program was originally designed to determine which linguistic characteristics best forecast improve- ments in physical and psychological health following traumatic events (Pennebaker et al., 2003). Clearly, however, based on the studies described above, the usefulness of the methodology has spread far beyond its original design.

kowa_c02_031-062hr.indd 41 9/29/10 10:33 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

42 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

D E S C R I P T I V E R E S E A R C H The first major type of research, descriptive research, attempts to describe phenom- ena as they exist rather than to manipulate variables. Do people in different cultures use similar terms to describe people’s personalities, such as outgoing or responsible (McCrae et al., 1998; Paunonen et al., 1992)? Do members of other primate species compete for status and form coalitions against powerful members of the group whose behavior is becoming oppressive? To answer such questions, psychologists use a vari- ety of descriptive methods, including case studies, naturalistic observation, and survey research. Table 2.2 summarizes the major uses and limitations of these descriptive methods as well as the other methods psychologists use.

Case Study Methods A case study is an in-depth observation of one person or a small group of individuals. Case study methods are useful when trying to learn about complex psychological phe- nomena that are not yet well understood and require exploration or that are difficult to produce experimentally. For example, one study used the case of a four-year-old girl who had witnessed her mother’s violent death three years earlier as a way of trying to explore the issue of whether, and if so in what ways, children can show effects of traumatic incidents they cannot explicitly recall (Gaensbauer et al., 1995). Single-case designs can also be used in combination with quantitative or experimental procedures (Blampied, 1999; Kazdin & Tuma, 1982). For example, researchers studying patients with severe seizure disorders who have had the connecting tissue between two sides of their brains surgically cut have presented information to one side of the brain to see whether the other side of the brain can figure out what is going on (Chapters 3 and 9).

descriptive research research methods that cannot unambiguously demonstrate cause and effect, including case studies, naturalistic observation, survey research, and correlational methods

case study in-depth observation of one subject or a small group of subjects

TA B L E 2 . 2

COMPARISON OF RESEARCH METHODS

Method Description Uses and Advantages Potential Limitations

Experimental Manipulation of variables to assess cause and effect

■ Demonstrates causal relationships ■ Replicability: study can be repeated to see if

the same findings emerge ■ Maximizes control over relevant variables

■ Generalizability outside the laboratory ■ Some complex phenomena cannot be readily

tested using pure experimental methods

Descriptive Case study

In-depth observation of a small number of cases

■ Describes psychological processes as they occur in individual cases

■ Allows study of complex phenomena to be easily reproduced experimentally

■ Provides data that can be useful in framing hypotheses

■ Generalizability to the population ■ Replicability: study may not be repeatable ■ Researcher bias ■ Cannot establish causation

Naturalistic observation

In-depth observation of a phenomenon as it occurs in nature

■ Reveals phenomena as they exist outside the laboratory

■ Allows study of complex phenomena not easily reproduced experimentally

■ Provides data that can be useful in framing hypotheses

■ Generalizability to the population ■ Replicability ■ Observer effects: the presence of an observer

may alter the behavior of the participants ■ Researcher bias ■ Cannot establish causation

Survey research

Asking people questions about their attitudes, behavior, etc.

■ Reveals attitudes or self-reported behaviors of a large sample of individuals

■ Allows quantification of attitudes or behaviors

■ Self-report bias: people may not be able to report honestly or accurately

■ Cannot establish causation

Correlational Examines the extent to which two or more variables are related and can be used to predict one another

■ Reveals relations among variables as they exist outside the laboratory

■ Allows quantification of relations among variables

■ Cannot establish causation

kowa_c02_031-062hr.indd 42 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

DESCRIPTIVE RESEARCH 43

Psychologists who take an interpretive (or hermeneutic) approach to methodology often use case studies; their aim is to examine the complex meanings that may underlie human behavior (Martin & Sugarman, 1999; McKee, 2006; Messer et al., 1988). One person may commit suicide because he feels he is a failure; another may kill herself to get back at a relative or spouse; another may seek escape from intense or chronic psychic pain; and still another may take his life because cultural norms demand it in the face of a wrongdoing or humiliation. From an interpretive point of view, explain- ing a behavior such as suicide means understanding the subjective meanings behind it. Interpreting meanings of this sort typically requires in-depth interviewing.

One major limitation of case study methods is sample size. Because case studies examine only a small group of participants, generalization to a larger population is always uncertain. An investigator who conducts intensive research on one or several young women with anorexia and finds that their self-starvation behavior appears tied to their wishes for control might be tempted to conclude that control issues are central to this disorder (e.g., Bruch, 1973). They may well be, but they may also be idiosyn- cratic to this particular study.

One way to minimize this limitation is to use a multiple-case-study method (Ros- enwald, 1988), extensively examining a small sample of people individually and draw- ing generalizations across them. Another way is to follow up case studies with more systematic studies using other designs. Several studies have now shown, for example, that patients with anorexia do tend to be preoccupied with control, a finding initially discovered through the careful analysis of individual cases (Serpell et al., 1999).

A second limitation of case studies is their susceptibility to researcher bias. Inves- tigators tend to see what they expect to see. A psychotherapist who believes that an- orexic patients have conflicts about sexuality will undoubtedly see such conflicts in his anorexic patients because they are operative in virtually everyone. In writing up the case, he may select examples that demonstrate these conflicts and miss other issues that might be just as salient to another observer. Because no one else is privy to the data of a case, no other investigator can examine the data directly and draw different conclusions unless the therapy sessions are videotaped; the data are always filtered through the psychologist’s theoretical lens.

Case studies are probably most useful at either the beginning or end of a series of studies that employ quantitative methods with larger samples. Exploring individual cases can be crucial in deciding what questions to ask or what hypotheses to test be- cause they allow the researchers to immerse themselves in the phenomenon as it ap- pears in real life. A case study can also flesh out the meaning of quantitative findings by providing a detailed analysis of representative examples.

Naturalistic Observation A second descriptive method, naturalistic observation, is the in-depth observation of a phenomenon in its natural setting, such as Jane Goodall’s well-known studies of apes in the wilds of Africa. For example, Frans de Waal, like Goodall, has spent years both in the wild and at zoos observing the way groups of apes or monkeys behave. De Waal (1989) describes an incident in which a dominant male chimpanzee in captiv- ity made an aggressive charge at a female. The troop, clearly distressed by the male’s behavior, came to the aid of the female and then settled into an unusual silence. Sud- denly, the room echoed with hoots and howls, during which two of the chimps kissed and embraced. To de Waal’s surprise, the two chimps were the same ones who had been involved in the fight that had set off the episode! After several hours of ponder- ing the incident, de Waal suddenly realized that he had observed something he had naively assumed was unique to humans: reconciliation. This observation led him to study the way primates maintain social relationships despite conflicts and acts of ag- gression. His research led him to conclude that for humans, as for some animal spe- cies, “making peace is as natural as making war” (p. 7).

naturalistic observation the in-depth observation of a phenomenon in its natural setting

M A K I N G CO N N E C T I O N S

Case studies are often useful when large num- bers of participants are not available, either because they do not exist or because obtain- ing them would be extremely difficult. For ex- ample, extensive case studies of patients who have undergone surgery to sever the tissue connecting the right and left hemispheres of the brain (in order to control severe epileptic seizures) have yielded important information about the specific functions of the two hemi- spheres (Chapters 3 and 9).

PAN

WATER

kowa_c02_031-062hr.indd 43 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

44 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

Psychologists also observe humans “in the wild” using naturalistic methods, as in some classic studies of Genevan schoolchildren by the Swiss psychologist Jean Piaget (1926). Piaget and his colleagues relied heavily on experimental methods, but they also conducted naturalistic research in playgrounds and classrooms, taking detailed notes on who spoke to whom, for how long, and on what topics (Chapter 13). Piaget found that young children often speak in “collective monologues,” talking all at once; they may neither notice whether they are being listened to nor address their comments to a par- ticular listener. An advantage of naturalistic observation over experimental methods— to be discussed shortly—is that its findings are clearly applicable outside the laboratory.

In fact, however, the awareness of being watched may alter people’s “natural” behavior in real-world settings. Researchers try to minimize this problem in one of two ways. One is simply to be as inconspicuous as possible—“to blend into the wood- work.” The other is to become a participant–observer, interacting naturally with par- ticipants in their environment, much as Goodall did once she came to “know” a troop of apes over months or years. Similarly, researchers interested in doomsday groups whose members believe that they know when the world will end often join the groups so that their presence appears natural and unobtrusive.

No matter how inconspicuous researchers make themselves to participants, re- searcher bias can pose limitations because observers’ theoretical biases can influence what they look for and therefore what they see. As with case studies, this limitation can be minimized by observing several groups of participants or by videotaping in- teractions, so that more than one judge can independently rate the data. Finally, like other descriptive studies, naturalistic observation primarily describes behaviors; it can- not explain why they take place. Based on extensive observation, a psychologist can make a convincing argument about the way one variable influences another, but this method does not afford the luxury of doing something to participants and seeing what they do in response, as in experimental designs.

Survey Research A third type of descriptive research, survey research, involves asking a large sample of people questions, usually about their attitudes or behaviors. For example, a large corporation might call in an organizational psychologist to try to help understand why morale is declining among workers in the factory. The psychologist begins by interviewing a small sample of employees, from executives to workers on the line, and then designs a survey, which is completed by a random sample of workers in randomly selected plants around the country. The survey asks workers to rate a series of statements, such as “My job does not pay well,” “I do not receive enough vacation time,” and “I feel I am not learning anything on the job,” on a 7-point scale (where 1 = strongly disagree and 7 = strongly agree). The two most frequently used tools of survey researchers are interviews and questionnaires.

Selecting the sample is extremely important in survey research. For example, poll- sters conducting voter exit interviews must be sure that their sample reflects a large and heterogeneous population if they are to predict election results accurately. Re- searchers typically want a random sample. The organizational psychologist seeking a random sample of factory workers in a company, for instance, might choose names randomly selected from payroll or personnel records.

Random selection, however, does not always guarantee that a sample will accu- rately reflect the demographic characteristics (qualities such as gender, race, and socio- economic status) of the population in which the researcher is interested. A survey sent to a random sample of workers in a company may, for example, lead to biased results if unhappy workers are afraid to answer or if workers who are unhappy have higher absentee rates (and hence are not at work when the form arrives). Similarly, a political poll that randomly samples names from the phone book may overrepresent people who happen to be home answering the phone during the day, such as older people, and may underrepresent poor people who do not have a phone.

survey research research asking a large sample of participants questions, often about attitudes or behaviors, using questionnaires or interviews

interviews a research tool in which the investigator asks the participant questions

questionnaires research tools in which the investigator asks participants to respond to a written list of questions or items

random sample a sample of participants selected from the population in a relatively arbitrary manner

Naturalistic observation can lead to novel insights, such as the importance of peacemaking in pri- mates.

kowa_c02_031-062hr.indd 44 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

DESCRIPTIVE RESEARCH 45

Where proportional representation of different subpopulations is important, re- searchers use a stratified random sample. A stratified random sample specifies the percentage of people to be drawn from each population category (age, race, etc.) and then randomly selects participants from within each category. Researchers often use census data to provide demographic information on the population of interest and then match this information as closely as possible in their sample.

The major problem with survey methods is that they rely on participants to report on themselves truthfully and accurately, and even minor wording changes can some- times dramatically alter their responses (Schwarz, 1999). For example, most people tend to describe their behaviors and attitudes in more flattering terms than others would use to describe them (Campbell & Sedikides, 1999; John & Robins, 1994). How many people are likely to admit their addiction to Friends or Seinfeld reruns? In part, people’s answers may be biased by conscious efforts to present themselves in the best possible light. However, they may also shade the truth without being aware of doing so because they want to feel intelligent or psychologically healthy (Shedler et al., 1993). In addition, participants may honestly misjudge themselves, or their conscious atti- tudes may differ from attitudes they express in their behavior (Chapter 16). Measur- ing people’s attitudes toward the disabled by questionnaire typically indicates much more positive attitudes than measuring how far they sit from a disabled person when entering a room (see Greenwald & Banaji, 1995; Wilson et al., 2000b). People who sit farther away convey more negative attitudes than do those who sit closer.

Finally, some participants may simply not know their own minds (Nisbett & Wilson, 1977). In other words, they may not know what they think about particular issues or why they behave in particular ways, yet they will provide a response on a survey when asked to do so. Thus, the answers that they provide will not necessarily reflect actual attitudes or behaviors because the participants are unaware of those atti- tudes and behaviors or have simply not devoted any attention to thinking about them.

stratified random sample a sample selected to represent subpopulations proportionately, randomizing only within groups (such as age or race)

Regardless of the particular type of descriptive research someone decides to use, the researcher is faced with the dilemma of how to summarize the responses that are provided by individuals or groups through observations or in response to sur- veys or interviews. Perhaps the most important descriptive statistics are measures of central tendency, which provide an index of the way a typical participant re- sponded on a measure. The three most common measures of central tendency are the mean, the median, and the mode.

The mean, or average, is the most commonly reported measure of central ten- dency and is the most intuitively descriptive of the average participant. Sometimes, however, the mean may be misleading. For example, consider the table of midterm exam scores presented in Table 2.3. The mean grade is 77. Yet the mean falls below six of the seven scores on the table. In fact, most students’ scores fall somewhere between 81 and 91.

Why is the mean so low? It is pulled down by the score of a single student—an outlier—who probably did not study. In this case, the median would be a more useful measure of central tendency, because a mean can be strongly influenced by extreme and unusual scores in a sample. The median is the score that falls in the middle of the distribution of scores, with half scoring below and half above it. Reporting the median allows one to ignore extreme scores on each end of the distribution that would bias a portrait of the typical participant. In fact, the median in this case—85 (which has three scores above and three below it)—makes more intuitive sense, in that it seems to capture the middle of the distribution, which is precisely what a measure of central tendency is supposed to do.

In other instances, a useful measure of central tendency is the mode (or modal score), which is the most frequently occurring score observed in the sample. In this

mean the statistical average of the scores of all participants on a measure

median the score that falls in the middle of the distribution of scores, with half of the participants scoring below it and half above it

mode the most common or most frequent score or value of a variable observed in a sample; also known as modal score

FOCUS ON METHODOLOGY WHAT TO DO WITH DESCRIPTIVE RESEARCH

kowa_c02_031-062hr.indd 45 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

46 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

TA B L E 2 . 4

THE STANDARD DEVIATION

Score Deviation from the Mean (D) D2

91 91 − 87.6 = 3.4 11.56

91 91 − 87.6 = 3.4 11.56 Mean N

= = = Σ

438 5 87 6/ .

87 87 − 87.6 = −0.6 0.36

85 85 − 87.6 = −2.6 6.76 SD ED

N = = =

2 43 2 5

2 94 .

.

84 84 − 87.6 = −3.6 12.96

Σ = Sum = 438 0 43.20

Note: Computing a standard deviation (SD) is more intuitive than it might seem. The first step is to calculate the mean score, which in this case is 87.6. The next step is to calculate the difference, or deviation, between each participant’s score and the mean score, as shown in column 2. The standard deviation is meant to capture the average deviation of participants from the mean. The only complication is that taking the average of the deviations would always produce a mean deviation of zero because the sum of deviations is by definition zero (see the total in column 2). Thus, the next step is to square the deviations (column 3). The standard deviation is then computed by taking the square root of the sum (2) of all the squared differences divided by the number of participants (N).

case, the mode is 91, because two students received a score of 91, whereas all other scores had a frequency of only one. The problem with the mode in this case is that it is also the highest score, which is not a good estimate of central tendency.

Another important descriptive statistic is a measure of the variability of scores. Variability influences the choice of measure of central tendency. The sim- plest measure of variability is the range, which shows the difference between the highest and lowest value observed on the variable.

The range can be a biased estimate of variability, however, in much the same way as the mean can be a biased estimate of central tendency. Scores do range con- siderably in this sample, but for the vast majority of students, variability is minimal (ranging from 81 to 91). Hence, a more useful measure is the standard deviation (SD), or the amount the average participant deviates from the mean of the sample. Table 2.4 shows how to compute a standard deviation, using five students’scores on a midterm exam as an illustration.

variability of scores the extent to which participants tend to vary from each other in their scores on a measure

range a measure of variability that represents the difference between the highest and the lowest value on a variable obtained in a sample

standard deviation (SD) the amount that the average participant deviates from the mean of the sample on a measure

TA B L E 2 . 3

DISTRIBUTION OF TEST SCORES ON A MIDTERM EXAMINATION

Total

91

91

87

85 Median

84

81

20

539

Mode Mean = 539 (total)

7 (number of students) = 77

kowa_c02_031-062hr.indd 46 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

EXPERIMENTAL RESEARCH 47

I N T E R I M S U M M A R Y

Descriptive research describes phenomena as they already exist rather than manipulat- ing variables. A case study is an in-depth observation of one person or a group of people. Case studies are useful in generating hypotheses, exploring complex phenomena that are not yet well understood or are difficult to examine experimentally, fleshing out the mean- ing of quantitative findings, and interpreting behaviors with complex meanings. Natural- istic observation is the in-depth observation of a phenomenon in its natural setting. It is useful for describing complex phenomena as they exist outside the laboratory. Survey research involves asking a large sample of people questions, usually about their attitudes or behavior, through interviews or questionnaires. Random and stratified random samples allow psychologists to gather substantial information about the population by examining representative samples. However, descriptive methods cannot unambiguously establish causation. To summarize participants’ responses obtained in descriptive research, researchers often use a measure of central tendency: the mean, median, or mode.

E X P E R I M E N T A L R E S E A R C H In experimental research, investigators manipulate some aspect of a situation and examine the impact on the way participants respond. Experimental methods are im- portant because they can establish cause and effect—causation—directly by proving that manipulating one variable leads to predicted changes in another. The researchers studying the impact of emotional expression on health can be confident that writing emotionally about a stressful experience caused better health because participants who did so were subsequently healthier than those who did not.

The Logic of Experimentation The logic of experimentation is much more straightforward and intuitive than many people think. (Elizabeth used it implicitly when she tested her professor’s flexibility, as we all do multiple times a day in one situation after another.) An experimenter manipulates variables, called independent variables. The aim is to assess the impact of these manipulations on the way participants subsequently respond. Because participants’ responses depend on their exposure to the inde- pendent variable, these responses are known as dependent variables. The inde- pendent variable, then, is the variable the experimenter manipulates; the depen- dent variable is the response the experimenter measures to see if the experimental manipulation had an effect.

To assess cause and effect, experimenters present participants with different possible variations, or conditions, of the independent variable and study the way participants react. In the study of emotional expression and health that opened this chapter, the experimenters used an independent variable (emotional expression) with two conditions (express or do not express). They then tested the impact on health (dependent variable).

I N T E R I M S U M M A R Y

In experimental research, psychologists manipulate some aspect of a situation (the inde- pendent variables) and examine the impact on the way participants respond (the depen- dent variables). By comparing results in different experimental conditions, researchers can assess cause and effect.

experimental research a research design in which investigators manipulate some aspect of a situation and examine the impact of this manipulation on the way participants respond

independent variables the variables an experimenter manipulates or whose effects the experimenter assesses

dependent variables participants’ responses in a study, hypothesized to depend on the influence of the independent variables

conditions values or versions of the independent variable that vary across experimental groups

kowa_c02_031-062hr.indd 47 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

48 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

Steps in Conducting an Experiment Experiments vary widely in both their designs and their goals, but the steps in con- ceiving and executing them are roughly the same, from the starting point of framing a hypothesis to the ultimate evaluation of findings (Figure 2.4). Although these steps relate specifically to the experimental method, many also apply to descriptive and correlational methods.

STEP 1: FRAMING A HYPOTHESIS Suppose a researcher wants to investigate how mood influences memory. Most of us recognize that when we are sad, we tend to re- call sad memories, and when we are happy, we remember good times. Gordon Bower (1981, 1989) and his associates developed a cognitive theory to account for this, based on the idea that having an emotion similar to an emotion one has previously experi- enced tends to “dredge up” (i.e., activate in memory) ideas previously associated with that feeling (Chapter 6).

To conduct an experiment, a researcher must first frame a hypothesis that predicts the relationship between two or more variables. Frequently that hypothesis is derived from a theory. Thus, Bower and his colleagues hypothesized that people who are in a positive mood while learning new information will be more likely to remember positive information. Conversely, people in a negative mood while learning will be more likely to remember negative information. This hypothesis states a relationship between two variables: mood state when learning material (the independent variable) and later ability to recall that material (the dependent variable).

STEP 2: OPERATIONALIZING VARIABLES The second step in experimental research is to operationalize the variables. Operationalizing refers to defining a construct in terms of how it will be measured. Bower (1981) operationalized the independent variable, mood state, by hypnotizing participants to feel either happy or sad (the two conditions of the independent variable). He then had participants read a psychiatric patient’s de- scriptions of various happy and sad memories. Bower operationalized the dependent variable—the ability to recall either positive or negative information—as the number of positive and negative memories the participant could recall 20 minutes later.

operationalizing turning an abstract concept or variable into a concrete form that can be defined by some set of operations or actions

STEP 2: OPERATIONALIZING VARIABLES

Converting abstract concepts into testable form

STEP 1: FRAMING A HYPOTHESIS

Predicting the relations among two or more variables

STEP 4: SELECTING AND ASSIGNING

PARTICIPANTS

Randomly assigning participants to different conditions

STEP 5: APPLYING STATISTICAL

TECHNIQUES

Describing the data and determining the likelihood that differences between the conditions reflect causality or chance

STEP 6: DRAWING CONCLUSIONS

Evaluating whether or not the data support the hypothesis; suggesting future studies to address limitations and new questions raised by the study

STEP 3: DEVELOPING A STANDARDIZED

PROCEDURE

Setting up experimental and control conditions; attending to demand characteristics; attending to researcher bias

F I G U R E 2 . 4 Conducting an experiment requires systematically going through a series of steps, from the initial framing of a hypoth- esis to drawing conclusions about the data. The process is circular, as the conclusion of one study is generally the origin of another.

kowa_c02_031-062hr.indd 48 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

EXPERIMENTAL RESEARCH 49

STEP 3: DEVELOPING A STANDARDIZED PROCEDURE The next step in constructing an experiment is to develop a standardized procedure so that the only things that vary from participant to participant are the independent variables and participants’ performance on the dependent variables. Standardized procedures maximize the like- lihood that any differences observed in participants’ behavior can be attributed to the experimental manipulation, allowing the investigator to draw inferences about cause and effect.

In Bower’s study, the experiment would have been contaminated (i.e., ruined) if different participants had heard different stories or varying numbers of positive and negative memories. These differences might have influenced the number of positive and negative memories participants would later recall. Bower’s method of inducing happy or sad mood states also had to be standardized. If the experimenter induced a negative mood in one participant by hypnotizing him and in another by asking him to try to imagine that his mother was dying, differences in recall could stem from the different ways mood was induced.

Control Groups Experimental research typically involves dividing participants into groups who experience different conditions or levels of the independent variable and then comparing the responses of the different groups. In Bower’s experiment, one group consisted of participants who were hypnotized to be in a happy mood and another of participants hypnotized to be in a sad mood. Experiments often include another kind of group or condition, called a control group. Participants in the control group are typically exposed to a zero level of the independent variable.

Although Bower’s experiment did not have a control group, a control condition for this experiment could have been a group of participants who were hypnotized but not given any mood induction. By comparing participants who were induced to feel sad while reading the story with those who were not induced to feel anything, Bower could have seen whether sad participants recall more sad memories (or fewer happy ones) than neutral participants. Examining the performance of participants who have not been exposed to the experimental condition gives researchers a clearer view of the impact of the experimental manipulation.

Protecting against Bias Researchers try to anticipate and offset the many sources of bias that can affect the results of a study. At the most basic level, investigators must ensure that participants do not know too much about the study, because this knowl- edge could influence their performance. Some participants try to respond in the way they think the experimenter wants them to respond. They try to pick up on demand characteristics, or cues in the experimental situation that reveal the experimenter’s purpose. To prevent these demand characteristics from biasing results, psychologists conduct blind studies, in which participants (and often the researchers themselves) are kept unaware of, or blind to, important aspects of the research. (For example, if participants in the study of emotional expression and health had known why their subsequent health records were important, they might have avoided the doctor as long as possible if they were in the experimental group. If they believed the hypoth- esis, they might even have been less likely to notice when they were sick.)

Blind studies are especially valuable in researching the effects of medication on psychological symptoms. Participants who think they are taking a medication often find that their symptoms disappear after they have taken what is really an inert, or inactive, substance such as a sugar pill (a placebo). Simply believing that a treatment is effective can sometimes prove as effective as the drug itself, a phenomenon called the placebo effect. In a single-blind study, participants are kept blind to crucial information, such as the condition to which they are being exposed (here, placebo versus medication). In this case, the participant is blind, but the experimenter is not.

The design of an experiment should also guard against researcher bias. Ex- perimenters are usually committed to the hypotheses they set out to test, and, be- ing human, they might be predisposed to interpret their results in a positive light.

control group participants in an experiment who receive a relatively neutral condition to serve as a comparison group

demand characteristics cues in the experimental situation that reveal the experimenter’s purpose

blind studies studies in which participants are kept unaware of, or “blind” to, important aspects of the research

placebo effect a phenomenon in which an experimental manipulation produces an effect because participants believe it will produce an effect

single-blind study a study in which participants are kept blind to crucial information, notably about the experimental condition in which they have been placed

kowa_c02_031-062hr.indd 49 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

50 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

An experimenter who expects an antianxiety medication to be more effective than a placebo may inadvertently overrate improvement in participants who receive the medication. Experimenters may also inadvertently communicate their expectations to participants—by probing for improvement more in the medication group than in the control group, for example. The best way to avoid the biases of both participants and investigators is to perform a double-blind study. In this case, both participants and the researchers who interact with them are blind to who has been exposed to which experimental condition until the research is completed. Thus, in a study assessing the efficacy of a medication for depression, an interviewer who assesses participants for depression before and after treatment should have no idea which treatment they received.

STEP 4: SELECTING AND ASSIGNING PARTICIPANTS Having developed standard- ized procedures, the researcher is now ready to find participants who are representa- tive of the population of interest. Experimenters typically place participants randomly in each of the experimental conditions (such as sad mood, happy mood, or neutral mood). Random assignment is essential for internal validity, because it minimizes the chance that participants in different groups will differ in some systematic way (e.g., gender or age) that might influence their responses and lead to mistaken conclu- sions about cause and effect. If all participants in the sad condition were male and all those in the happy condition were female, Bower could not have known whether his participants’ responses were determined by mood or by sex. In this case, the sex of the participants would be a confounding variable. The presence of confounding variables compromises the internal validity of a study by making inferences about causality impossible.

STEP 5: APPLYING STATISTICAL TECHNIQUES TO THE DATA Having selected par- ticipants and conducted the experiment, an investigator is ready to analyze the data. Analyzing data involves two tasks: The first consists of describing the findings in a way that summarizes their essential features (descriptive statistics). The second involves drawing inferences from the sample to the population as a whole (inferen- tial statistics). Descriptive statistics, such as those discussed earlier in this chapter, are a way of taking what may be a staggeringly large set of observations and put- ting them into a summary form that others can comprehend. Almost any time two groups are compared, differences will appear between them simply because no two groups of people are exactly alike. Determining whether the differences are mean- ingful or simply random is the job of inferential statistics, which yield tests of statis- tical significance (see Focus on Methodology: Testing the Hypothesis—Inferential Statistics).

In experimental research, the goal of inferential statistics is to test for differences between groups or conditions—to see if the independent variable really had an im- pact on the way participants responded. Figure 2.5 shows the results of Bower’s study on mood and memory. The average number of positive and negative memories par- ticipants recalled did vary according to mood: Happy participants recalled almost 8 happy incidents but fewer than 6.5 sad ones, whereas sad participants recalled more than 8 sad but fewer than 6 happy incidents. (Knowing whether those differences re- ally mean anything requires knowing something about statistics, because a difference of 1.5 memories could be random. In this case, however, the difference was statisti- cally significant, suggesting that it did not just occur by chance.)

STEP 6: DRAWING CONCLUSIONS The final step in experimental research, drawing conclusions, involves evaluating whether or not the hypothesis was supported—that is, whether the independent and dependent variables were related as predicted. Re- searchers also try to interpret their findings in light of the broader theoretical frame- work and assess their generalizability outside the laboratory.

double-blind study a study in which both participants and researchers are blind to the status of participants

confounding variable a variable that could produce effects that are confused, or confounded, with the effects of the independent variable

descriptive statistics numbers that describe the data from a study in a way that summarizes their essential features

inferential statistics procedures for assessing whether the results obtained with a sample are likely to reflect characteristics of the population as a whole

8.0

7.5

7.0

6.5

6.0

5.5

N u m

b er

o f

in ci

d en

ts r

ec al

le d

Sad mood Happy mood

Type of incident

Happy Sad

F I G U R E 2 . 5 The influence of mood on mem- ory. Happy participants stored and later retrieved more happy incidents, whereas sad participants were more likely to recall sad incidents. (Source: Bower, 1981.)

kowa_c02_031-062hr.indd 50 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

EXPERIMENTAL RESEARCH 51

Researchers and their theories tend to be like dogs and bones: They do not part with them easily. Although scientists try to maintain their commitment to objectiv- ity, they typically do not spend months or years conducting an experiment testing a hypothesis they do not strongly believe. Thus, if the findings do not turn out the way they expect, they might conclude that their theory was wrong, but they are just as likely to conclude that they made some kind of error in operationalizing the variables, testing the hypothesis, or deriving the hypothesis from the broader theory. Part of drawing conclusions means figuring out what worked, what did not, and where to go from here. Thus, most published research reports conclude by acknowledging their limitations and pointing toward future research that might address unanswered ques- tions. In fact, Bower and other colleagues discovered over time that some of their find- ings held up when they tried to replicate them and others did not. For example, nega- tive mood states not only facilitate retrieval of negative memories but also motivate people to search for positive memories as a way of raising their mood (Chapter 10).

I N T E R I M S U M M A R Y

The first step in conducting an experiment is to frame a hypothesis that predicts the rela- tions among two or more variables. The second is to operationalize variables—to turn abstract ideas or constructs into concrete form defined by a set of actions or operations. The third step is to develop a standardized procedure so that only the variables of interest vary. In experimental research, researchers often divide participants into different groups that experience different conditions of the independent variable. Some participants may be assigned to a control group—a neutral condition against which participants in various experimental conditions can be compared. The fourth step is to select samples that are as representative as possible of the population of interest. The fifth step is to analyze the data using statistical techniques. The final step is to conclude from the data whether the hypothesis was supported and whether the results are generalizable. Although these steps are best exemplified in experimental studies, most of them apply to other research designs as well.

Limitations of Experimental Research Because experimenters can manipulate variables one at a time and observe the effects of each manipulation, experiments provide the “cleanest” findings of any research method in psychology. No other method can determine cause and effect so unambigu- ously. Furthermore, experiments can be replicated, or repeated, to see if the same find- ings emerge with a different sample; the results can thus be corroborated or refined.

Experimental methods do, however, have their limitations. First, for both practical and ethical reasons, many complex phenomena cannot be tested in the laboratory. A psychologist who wants to know whether divorce has a negative impact on children’s intellectual development cannot manipulate people into divorcing to test the hypoth- esis. Researchers frequently have to examine phenomena as they exist in nature.

When experiments are impractical, psychologists sometimes employ quasi- experimental designs, which share many features of the experimental method but do not allow as much control over variables and cannot provide the degree of certainty about cause-and-effect relationships that experiments offer (Campbell & Stanley, 1963). An experimenter interested in the impact of divorce on memory, for example, might compare the ability of children from divorced and nondivorced families to retrieve positive and negative memories. In this case, the independent variable (divorced or nondivorced) is not really something the experimenter ma- nipulates; it is a subject characteristic that she uses to predict the dependent vari- able (memory). Because researchers have to “take subjects as they find them” in quasi-experimental designs, they have to be particularly careful to test to be sure the groups do not differ on other variables that might influence the results, such as age, gender, or socioeconomic status (social class).

quasi-experimental designs research designs that employ the logic of experimental methods but lack absolute control over variables

kowa_c02_031-062hr.indd 51 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

52 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

A second limitation of the experimental method regards external validity. Re- searchers can never be certain how closely a phenomenon observed in a laboratory parallels its real-life counterparts. In some instances, such as the study that opened this chapter, the implications seem clear: If briefly writing about stressful events can improve health, imagine what talking about them with a professional over time might do. And, in fact, research shows that people who get help for psychological problems through psychotherapy tend to make fewer trips to the doctor for medical problems (Gabbard & Atkinson, 1996). In other cases, external validity is more problematic. For example, do the principles that operate in a laboratory study of decision making ap- ply when a person decides whether to stay in a relationship (Ceci & Bronfenbrenner, 1991; Neisser, 1976; Rogoff & Lave, 1984)?

I N T E R I M S U M M A R Y

Experimentation is the only research method in psychology that allows researchers to draw unambiguous conclusions about cause and effect. Limitations include the difficulty of bringing some complex phenomena into the laboratory and the question of whether results apply to phenomena outside the laboratory.

When researchers find a difference between the responses of participants in one condition and another, they must infer whether these differences likely occurred by chance or reflect a true causal relationship. Similarly, if they discover a correlation between two variables, they need to know the likelihood that the two variables simply correlated by chance.

As the philosopher David Hume (1711–1776) explained more than two cen- turies ago, we can never be entirely sure about the answer to questions like these. If someone believes that all swans are white and observes 99 swans that are white and none that are not, can the person conclude with certainty that the hundredth swan will also be white? The issue is one of probability: If the person has observed a representative sample of swans, what is the likelihood that, given 99 white swans, a black one will appear next?

Psychologists typically deal with this issue in their research by using tests of statistical significance, which help determine whether the results of a study are likely to have occurred simply by chance (and thus cannot be meaningfully gener- alized to a population) or whether they reflect true properties of the population. We should not confuse statistical significance with practical or theoretical significance. A researcher may demonstrate with a high degree of certainty that, on the average, females spend less time watching football than males—but who cares? Statistical significance means only that a finding is unlikely to be an accident of chance.

Beyond describing the data, then, the researcher’s second task is to draw in- ferences from the sample to the population as a whole. Inferential statistics help sort out whether or not the findings of a study really show anything. Researchers usually report the likelihood that their results mean something in terms of a prob- ability value (or p-value).

To illustrate, one study tested the hypothesis that children increasingly show signs of morality and empathy during their second year (Zahn-Waxler et al., 1992a). The investigators trained 27 mothers to tape-record reports of any episode in which their one-year-olds either witnessed distress (e.g., seeing the mother burn herself on the stove) or caused distress (e.g., pulling the cat’s tail or biting the mother’s breast while nursing). The mothers dictated descriptions of these events over the course of the next year; each report included the child’s response to the other person’s distress. Coders then rated the child’s behavior using categories such as prosocial behavior, defined as efforts to help the person in distress.

probability value the probability that obtained findings were accidental or just a matter of chance; also called p-value

FOCUS ON METHODOLOGY TESTING THE HYPOTHESIS—

INFERENTIAL STATISTICS

kowa_c02_031-062hr.indd 52 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CORRELATIONAL RESEARCH 53

Table 2.5 shows the average percentage of times the children behaved pro- socially during these episodes at each of three periods: time 1 (13 to 15 months of age), time 2 (18 to 20 months), and time 3 (23 to 25 months). As the table shows, the percentage of times children behaved prosocially increased dramatically over the course of the year, regardless of whether they witnessed or caused the distress. When the investigators analyzed the changes in rates of prosocial responses over time to both types of distress (witnessed and caused), they found the differences to be statistically significant. A jump from 9 to 49 prosocial behaviors in 12 months was thus probably not a chance occurrence.

Nevertheless, researchers can never be certain that their results are true of the population as a whole; a black swan could always be swimming in the next lake. Nor can they be sure that if they performed the study with 100 different partici- pants they would not obtain different findings. This is why replication—repeating a study to see if the same results occur again—is extremely important in science.

TA B L E 2 . 5

CHILDREN’S PROSOCIAL RESPONSE TO ANOTHER PERSON’S DISTRESS DURING THE SECOND YEAR OF LIFE

Percentage of Episodes in Which the Child Behaved Prosocially

Type of Incident Time 1 Time 2 Time 3

Witnessed distress 9 21 49

Caused distress 7 10 52

Source: Adapted from Zahn-Waxler et al., 1992a.

C O R R E L A T I O N A L R E S E A R C H Correlational research attempts to determine the degree to which two or more vari- ables are related. Although correlational analyses can be applied to data from any kind of study, most often correlational designs rely on survey data such as self-report questionnaires.

For example, for years psychologists have studied the extent to which personality in childhood predicts personality in adulthood (Caspi, 1998). Are we the same person at age 30 as we were at age 4? In one study, researchers followed up children whose personalities were first assessed around age 9, examining their personalities again 10 years later (Shiner, 2000). They then correlated childhood personality variables with personality characteristics in late adolescence. The statistic that allows a researcher to correlate two variables is called a correlation coefficient. A correlation coefficient measures the extent to which two variables are related (literally, co-related, or related to each other).

A correlation can be either positive or negative. A positive correlation means that the higher individuals measure on one variable, the higher they are likely to mea- sure on the other. This also means, of course, that the lower they score on one vari- able, the lower they will score on the other. A negative correlation means that the higher participants measure on one variable, the lower they will measure on the other. Correlations can be depicted on scatterplot graphs, which show the scores of every participant along two dimensions (Figure 2.6).

Correlation coefficients vary between +1.0 and −1.0. A strong correlation—one with a value close to either positive or negative 1.0—means that a psychologist who

correlational research research that assesses the degree to which two variables are related, so that knowing the value of one can lead to prediction of the other

correlate in research, to assess the extent to which the measure of one variable predicts the measure of a second variable

correlation coefficient an index of the extent to which two variables are related

positive correlation a relation between two variables in which the higher one is, the higher the other tends to be

negative correlation a relation between two variables in which the higher one is, the lower the other tends to be

kowa_c02_031-062hr.indd 53 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

54 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

knows a person’s score on one variable can confidently predict that person’s score on the other. For instance, one might expect a high positive correlation between child- hood aggressiveness at age 9 and social problems at age 19 (i.e., the higher the ag- gressiveness, the higher the person’s score on a measure of social dysfunction). One might equally expect a high negative correlation between childhood aggressiveness and adult academic success. A weak correlation (say, between childhood agreeable- ness and adult height) hovers close to zero, either on the positive or the negative side.

Importantly, variables can actually be related to one another, yet the correlation coefficient does not reflect that relationship. Correlation is an index of the linear rela- tionship between variables. As shown in Figure 2.6, a straight line can be drawn that captures many of the data points when two variables are related in a linear fashion. Alternatively, however, variables may be related to one another in a curvilinear fash- ion, yet the correlation coefficient does not reflect this relationship. As shown in Fig- ure 2.7, the relationship between arousal and performance is curvilinear, suggesting that there is clearly a relationship between these two variables. However, because the relationship is not linear, the correlation between the two variables approaches zero.

Table 2.6 shows the correlations among three childhood personality variables— extraversion (sociability), agreeableness, and achievement motivation—and three measures of functioning in late adolescence—academic achievement, conduct (e.g., not breaking rules or committing crimes), and social functioning. These correlations are arrayed as a correlation matrix. As the table shows, childhood extraversion is not a strong predictor of academic functioning and conduct in late adolescence (in fact, if anything, extraverted kids become rowdier adolescents; the correlation coeffi- cient, denoted by the letter r is −0.14). However, extraverted children do tend to be- come socially well-adapted adults (r = 0.35). Childhood agreeableness and achieve- ment motivation both tend to predict positive functioning in all three domains in late adolescence.

In psychological research, theoretically meaningful correlations tend to hover around 0.3, and correlations above 0.5 are considered large (Cohen, 1988). Some- times, however, seemingly tiny correlations can be very meaningful. For example, a study of the impact of aspirin on heart disease in a sample of roughly 20,000 par- ticipants had to be discontinued on ethical grounds when researchers found a −0.03 correlation between use of a single aspirin a day and risk of death by heart attack (Rosenthal, et al., 2000)! This correlation translates to 15 out of 1000 people dying if they do not take an aspirin a day as a preventive measure.

correlation matrix a table presenting the correlations among several variables

F I G U R E 2 . 6 (a) Positive, (b) negative, and (c) zero correlations. A correlation expresses the relation between two variables. The panels depict three kinds of correlations on hypothetical scatterplot graphs, which show the way data points fall (are scat- tered) on two dimensions. Panel (a) shows a positive correlation, between height and weight. A comparison of the dots (which represent individual participants) on the right with those on the left shows that those on the left are lower on both variables. The dots scatter around the line that summarizes them, which is the correlation coefficient. Panel (b) shows a negative correla- tion, between socioeconomic status and dropout rate from high school. The higher the socioeconomic status, the lower the dropout rate. Panel (c) shows a zero correlation, between intelligence and the extent to which an individual believes people can be trusted. Being high on one dimension predicts nothing about whether the participant is high or low on the other.

Height (a)

W ei

gh t

In te

ll ig

en ce

S oc

io ec

on om

ic s

ta tu

s

(b) (c) Dropout rate from high school Interpersonal trust

F I G U R E 2 .7 The relationship between arousal and performance is curvilinear. Because correlation assesses only linear relationships, the correlation coefficient reflecting the relationship between arousal and performance is close to zero.

Low Moderate High Arousal Level

P er

fo rm

an ce

kowa_c02_031-062hr.indd 54 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CORRELATIONAL RESEARCH 55

A primary virtue of correlational research is that it allows investigators to study a whole range of phenomena that vary in nature—from personality characteristics to attitudes—but can- not be produced in the laboratory. Like other nonexperimental methods, however, correlational research can only describe re- lationships among variables (which is why it is actually some- times categorized as a descriptive method, rather than placed in its own category). When two variables correlate with each other, the researcher must infer the relation between them: Does one cause the other, or does some third variable explain the correlation?

Media reports on scientific research often disregard or mis- understand the fact that correlation does not imply causation. If a study shows a correlation between drug use and poor grades, the media often report that “scientists have found that drug use leads to bad grades.” That may be true, but an equally likely hypothesis is that some underlying aspect of personality (such as alienation) or home environment (such as poor parenting, abuse, or neglect) produces both drug use and bad grades (Shedler & Block, 1990).

A second virtue of correlational research is that other researchers often rely on it (as well as experimental methods) to investigate psychological phenomena across cultures. For example, psychologists have used correlational and experimental pro- cedures in other countries to test whether the findings of Western studies replicate cross-culturally, such as studies of perception and obedience to authority (see Berry et al., 1992, 1997; Triandis, 1994).

Psychologists interested in the cross-cultural validity of their theories face many difficulties, however, in transporting research from one culture to another. The same stimulus may mean very different things to people in different cultures. How might the Efe pygmies in the tropical rain forests of Zaire, who have had minimal exposure to photographs, respond to a study asking them to judge what emotion people are feeling from pictures of faces? Creating an equivalent experimental or correlational design often requires using a differ- ent design—but then is it really the same study?

Similarly, when employing a questionnaire cross-culturally, researchers must be very careful about translation because even minor changes or am- biguities could make cross-cultural comparisons invalid. To minimize dis- tortions in translation, researchers use a procedure called back-translation, in which a bilingual speaker translates the items into the target language, and another bilingual speaker translates it back into the original language (usually English). The speakers then repeat the process until the translation back into English matches the original. Even this procedure is not always adequate; sometimes concepts simply differ too much across cultures to make the items equivalent. Asking a participant to rate the item “I have a good relationship with my brother” would be inappropriate in Japan, for example, where speakers distinguish between older and younger brothers and lack a general term to denote both (Brislin, 1986).

I N T E R I M S U M M A R Y

Correlational research assesses the degree to which two variables are related; a correla- tion coefficient quantifies the association between two variables and ranges from −1.0 to +1.0. A correlation of zero means that two variables are not related to each other in a linear fashion, whereas a high correlation (either positive or negative) means that partici- pants’ scores on one variable are good predictors of their scores on the other. Correlational research can shed important light on the relations among variables, but correlation does not imply causation.

Life among the Efe people.

TA B L E 2 . 6

THE RELATION BETWEEN CHILDHOOD PERSONALITY AND LATE ADOLESCENT FUNCTIONING

Late Adolescent Functioning

Childhood Personality Trait Academic Conduct Social

Extraversion –0.07 –0.14 0.35

Agreeableness 0.23 0.33 0.19

Achievement motivation 0.37 0.26 0.25

Source: Adapted from Shiner, 2000.

kowa_c02_031-062hr.indd 55 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

56 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

To what extent would you obey an authority figure? Would it depend on what they were asking you to do? Would you take out the trash if your parents asked you? Would you write an answer to a question on the board if your teacher asked you? Would you deliver

an electric shock to a total stranger if a researcher asked you? In all likeli- hood, your (and most other people’s) answer to the third and fourth ques- tions would be “yes” and your answer to the last question, “no.” Of course you wouldn’t shock a stranger if some researcher told you to do so. No re- search is that important, right? Or would you?

Beginning in the 1960s, Stanley Milgram (1963, 1974) conducted a series of classic studies on obedience at Yale University that took many people, in- cluding psychologists, by surprise. The results of his investigations suggested that the philosopher Hannah Arendt may have been right when she said that the horrifying thing about the Nazis was not that they were so deviant but that they were “terrifyingly normal.”

The basic design of the studies was as follows: The experimenter told participants they were participating in an experiment to examine the effect of punishment on learning. Participants were instructed to punish a “learn- er” (actually a confederate of the researcher) in the next room whenever the learner made an error, using an instrument they believed to be a shock gen- erator. Panel switches were labeled from 15 volts (slight shock) to 450 volts (danger: severe shock). The experimenter instructed the participants to begin by administering a slight shock and increase the voltage each time the learner made an error. The learner actually received no shocks, but participants had no reason to disbelieve what they were told—especially since they heard pro- tests and, later, screaming and pounding on the wall from the next room as they increased the punishment.

Milgram was not actually studying the impact of punishment on learn- ing. Rather, he wanted to determine how far people would go in obeying orders. Before conducting the study, Milgram had asked various social scien- tists to estimate how many participants would go all the way to 450 volts. The experts estimated that a very deviant subsample—well below 5 percent— might administer the maximum.

They were wrong. As you can see in Figure 2.8, approximately two-thirds of participants administered the full 450 volts, even though the learner had stopped responding (screaming or otherwise) and was apparently either un- conscious or dead. Many participants were clearly distressed by the expe- rience, but each time they asked if they should continue to administer the shocks, the experimenter told them that the experiment required that they continue. If they inquired about their responsibility for any ill effects the learner might be experiencing, the experimenter told them that he was re- sponsible and that the procedure might be painful but was not dangerous. The experimenter never overtly tried to coerce participants to continue; all he did was remind them of their obligation. To Milgram, the implications were

RESEARCH IN DEPTH THE SHOCKING RESULTS

Number of Verbal Participants

Shock Designation and Who Refused Level Voltage Level to Go Further

Slight Shock

1 15 2 30 3 45 4 60

Moderate Shock

5 75 6 90 7 105 8 120

Strong Shock

9 135 10 150 11 165 12 180

Very Strong Shock

13 195 14 210 15 225 16 240

Intense Shock

17 255 18 270 19 285 20 300 5

Extreme Intensity Shock

21 315 4 22 330 2 23 345 1 24 360 1

Danger: Severe Shock

25 375 1 26 390 27 405 28 420

XXX

29 435 30 450 26

Mean maximum shock level 27.0

Percentage obedient subjects 65.0 percent

F I G U R E 2 . 8 Data from the original Milgram experiment. The numbers correspond to the number of people who refused to administer shocks beyond that point. So, for example, five individu- als administered shocks at an intensity of 300 volts but refused to go further. (Source: Reprinted from Milgram, 1969.)

kowa_c02_031-062hr.indd 56 9/17/10 4:17 PMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

CORRELATIONAL RESEARCH 57

painfully clear: People will obey, without limitations of conscience, when they believe an order comes from a legitimate authority (Milgram, 1974).

In subsequent research, Milgram discovered several factors that influence obedi- ence. One is the proximity of the victim to the participant. Obedience declined sub- stantially if the victim was in the room with the participant, if a voice replaced pound- ing on the wall, and if the participant had to force the victim’s hand onto a shock plate to administer further punishments (see Figure 2.9). Proximity to the experimenter also affected the decision to obey. The closer the participant was to the experimenter, the more difficult it was to disobey; when the experimenter sat in another room, obe- dience dropped sharply. More recent research implicates personality variables, such as authoritarianism and hostility, that can influence the likelihood of obedience as well (Blass, 1991, 1999, 2000, 2004). Conversely, gender had little effect on obedi- ence in Milgram’s studies—women were as likely to comply (65 percent) with the experimenter as were men. However, even though the obedience rates for males and females did not differ, females did report more tension during the experiment than males did.

The results of the Milgram studies are in sharp contrast to what most of us believe about ourselves—that is, that we would never obey in such a situation. As stated by Milgram (1974) himself, “The social psychology of this century reveals a major lesson: often it is not so much the kind of person a man is as the kind of situation in which he finds himself that determines how he will act.”

Furthermore, more recent replications of Milgram’s original research support the original findings, in spite of many people’s inherent beliefs that we are much less obedient to people in positions of authority than we were three and four decades ago (Blass, 2004). As shown in Figure 2.10, a partial replication of Milgram’s study conducted in 2006 showed obedience rates just slightly lower than those obtained with the original study (Burger, 2009). In this partial replication, participants were not allowed to continue on to give the 450 volts because of ethical concerns, such as those discussed in the next paragraph, about potential harm that might befall them.

One of the issues surrounding Milgram’s obedience studies was the ethics of the study. Was it ethical to deceive participants in this way and to cause them visible dis- tress? Although many people immediately denounced the study as inherently unethi- cal, research suggests that perceptions of the ethics of the Milgram obedience study and related experiments rest not so much on the design of the experiment as on the study’s outcome. Participants asked to judge the ethics of Milgram’s obedience study decried its ethics more when they thought obedience was high compared to when they thought obedience was low. If the study itself was unethical, no differences in percep- tions of its ethics would exist. If, however, ethical decisions are made on the basis of

450

M ea

n m

ax im

u m

s h oc

k

375

300

Remote Voice feedback

Proximity Touch proximity

Increasing proximity Experimental conditions

F I G U R E 2 .9 Effects of proximity on maxi- mum shock delivered. Subjects in the Milgram experiments generally obeyed, but the closer they were to the victim, the less they tended to obey. (Source: Milgram, 1965, p. 63.)

<= 150 volts

> 150 volts

Burger’s study

P er

ce n ta

ge p

re ss

in g

sw it

ch

af te

r 1

5 0

v ol

ts

Milgram’s study

50

60

70

80

90

40

30

20

10

0

F I G U R E 2 .1 0 Comparison data from the Milgram experiment and the replication by Burger. A comparison of the results of participants who continued past 150 volts shows remarkable similarity between the two studies. (Source: Burger, 2009.)

kowa_c02_031-062hr.indd 57 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

58 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

the outcomes obtained, differences may exist, as they did in these studies (Bickman & Zarantonello, 1978; Schlenker & Forsyth, 1977)

For more information about Milgram’s study, career, and life, see the web- site created by Dr. Thomas Blass, author of The Man Who Shocked the World (www.stanleymilgram.com).

R E S E A R C H I N D E P T H : A S T E P F U R T H E R

1. What are two factors that affected the rate at which participants were likely to obey the authority figure and why?

2. What is a confederate and why was one used in the Milgram study? 3. Was deception necessary in this study? Why or why not? What is your personal feeling

about the use of deception in research? 4. What factors or characteristics distinguish those individuals who gave the highest level

of shock from those who didn’t? For example, would personality characteristics play a role? If so, what specific personality characteristics might lead some individuals to go on to give the highest level of shock and others not to?

5. In accordance with ethnical guidelines, researchers today are compelled to instruct participants that they can withdraw from experiments at any time without incurring any penalty. Had participants, including the learner, in the Milgram study been provided with such instructions at the outset of the study, do you think this would have reduced the number of individuals who obeyed?

6. How do you account for the findings of Burger’s 2006 partial replication of the Milgram study generating results that so closely mirrored those obtained in the original study?

Milgram’s research on obedience surprised both psychologists and the lay public, who never would have imagined that participants would have been willing to shock a stranger at the command of an authority who told them that he would take responsibility for their action.

H O W T O E V A L U A T E A S T U D Y C R I T I C A L L Y

Having explored the major research designs, we now turn to the question of how to be an informed consumer of research. In deciding whether to “buy” the results of a study, the same maxim applies as in buying a car: Caveat emptor—let the buyer beware. The popular media often report that “researchers at Harvard have found …” followed by conclusions that are tempting to take at face value. In reality, most stud- ies have their limitations. To evaluate a study critically, the reader should examine the research carefully and attempt to answer seven broad questions.

kowa_c02_031-062hr.indd 58 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

HOW TO EVALUATE A STUDY CRITICALLY 59

1. Does the theoretical framework make sense? This question encompasses a number of others. Does the specific hypothesis make sense, and does it flow logically from the broader theory? Are terms defined logically and consistently? For example, if the study explores the relation between social class and intel- ligence, does the article explain why social class and intelligence should have some relationship to each other? Are the two terms defined the same way throughout the study?

2. Is the sample adequate and appropriate? A second question is whether the sample represents the population of interest. If researchers want to know about emotional expression and health in undergraduates, then a sample of undergraduates is perfectly appropriate. If they truly want to generalize to other populations, however, they may need additional samples, such as adults drawn from the local community, or people from Bali, to see if the effects hold. An- other question involves sample size: To test a hypothesis, the sample has to be large enough to determine whether the results are meaningful or accidental. A sample of six rolls of the dice that twice produces “snake eyes” is not sufficient to conclude that the dice are loaded because the “results” could easily happen by chance.

3. Are the measures and procedures adequate? Once again, this question en- compasses a number of issues. Do the measures assess what they were designed to assess? Were proper control groups chosen to rule out alternative explana- tions and to ensure the validity of the study? Did the investigators carefully control for confounding variables? For example, if the study involved interviews, were some of the interviewers male and some female? If so, did the gender of the interviewer affect how participants responded?

4. Are the data conclusive? The central question here is whether the data dem- onstrate what the author claims. Typically, data in research articles are presented in a section entitled “Results,” usually in the form of graphs, charts, or tables. To evaluate a study, a reader must carefully examine the data presented in these figures and ask whether any alternative interpretations could explain the results as well as or better than the researcher’s explanation. Often, data permit many interpretations, and the findings may fit a pattern that the researcher rejected or did not consider.

5. Are the broader conclusions warranted? Even when the results “come out” as hypothesized, researchers have to be careful to draw the right conclusions, particularly as they pertain to the broader theory or phenomenon. A researcher who finds that children who watch aggressive television shows are more likely to hit other children can conclude that the two are correlated but not that watching aggressive shows causes violence. An equally plausible hypothesis is that violent children prefer to watch violent television shows—or perhaps that violent television shows trigger actual violence only in children who are already predisposed to violence.

6. Does the study say anything meaningful? This is the “so what?” test. Does the study tell us anything we did not already know? Does it lead to questions for future research? The meaningfulness of a study depends in part on the importance, usefulness, and adequacy of the theoretical perspective from which it derives. Important studies tend to produce findings that are in some way sur- prising or help determine which of opposing theories to accept (Abelson, 1995).

7. Is the study ethical? Finally, if the study uses human or animal participants, does it treat them humanely, and do the ends of the study—the incremental knowledge it produces—justify the means? Individual psychologists were once free to make ethical determinations on their own. Today, however, the American Psychological Association (APA) publishes guidelines that govern psychological research practices (APA,1973, 1997), and universities and other

kowa_c02_031-062hr.indd 59 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

60 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

institutions have institutional review boards that review proposals for psycho- logical studies, with the power to reject them or ask for substantial revisions to protect the welfare of participants. In fact, most people would be surprised to learn just how much effort is involved in getting institutional approval for the most benign studies, such as studies of memory or mathematical ability.

ETHICAL QUESTIONS COME IN SHADES OF GRAY

The ethical issues involved in research are not always black and white. Two central issues concern the use of deception and the use of animals in research. Both relate to the issue of informed consent.

Deception in Psychological Research Many studies keep participants blind to the aims of the investigation until the end; some go further by giving participants a “cover story” to make sure they do not “catch on” to the hypothesis being tested. For example, in one experiment re- searchers wanted to study the conditions under which people can be induced to make false confessions (Kassin & Kiechel, 1996). They led college student partici- pants to believe that they would be taking a typing test with another participant, who was really an accomplice, or confederate, of the experimenters. The experi- menters explicitly instructed the participants not to touch the ALT key on the com- puter, since that would allegedly make the computer crash, and all data would be lost. Sixty seconds into the task, the computer seemed to stop functioning, and the experimenter rushed into the room accusing the participant of having hit the forbidden key.

To assess whether false incriminating evidence could convince people that they had actually done something wrong, in one condition the confederate (allegedly simply waiting to take the test herself) “admitted” having seen the participant hit the ALT key. In a control condition, the accomplice denied having seen anything. The striking finding was that in the experimental condition about half of the par- ticipants came to believe that they had hit the key and destroyed the experiment. Obviously, if they had known what the experiment was really about, the experi- ment would not have worked. The same, of course, would have been true in the Milgram study described earlier. Had the participants known that they were not really shocking the “learner,” what would have been the point of conducting the study?

Only a small proportion of experiments actually involve deception, and APA guidelines permit deception only if a study meets four conditions: (1) The research is of great importance and cannot be conducted without deception; (2) participants can be expected to find the procedures reasonable once they are informed after the experiment; (3) participants can withdraw from the experiment at any time; and (4) experimenters debrief the participants afterward, explaining the purposes of the study and removing any stressful aftereffects. Many universities address the issue of deception by asking potential participants if they would object to being deceived temporarily in a study. That way, any participant who is deceived by an experi- menter has given prior consent to be deceived.

Ethics and Animal Research A larger ethical controversy concerns the use of nonhuman animals for psychologi- cal research (Bersoff, 1999; Petrinovich, 1999; Ulrich, 1991). By lesioning a region of a rat’s brain, for example, researchers can sometimes learn a tremendous amount about the function of similar regions in the human brain. Such experiments, how- ever, have an obvious cost to the animal, raising questions about the moral status

informed consent a participant’s ability to agree to participate in a study in an informed manner

ONE STEP FURTHER

kowa_c02_031-062hr.indd 60 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

SUMMARY 61

of animals, that is, whether they have rights (Plous, 1996; Regan, 1997). Again the issue is how to balance costs and benefits: To what extent do the costs to animals justify the benefits to humans? The problem, of course, is that, unlike humans, animals cannot give informed consent.

To what extent humans can use other sentient creatures (i.e., animals who feel) to solve human problems is a difficult moral question. Some animal rights groups argue that animal research in psychology has produced little of value to humans, especially considering the enormous suffering animals have undergone. Most psychologists, however, disagree (King, 1991; Miller, 1985). Animal research has led to important advances in behavior therapy, treatments for serious disorders such as Alzheimer’s disease (a degenerative brain illness that leads to loss of men- tal functions and ultimately death), and insight into nearly every area of psycho- logical functioning, from stress and emotion to the effects of aging on learning and memory. The difficulty lies in balancing the interests of humans with those of other animals and advancing science while staying within sensible ethical boundaries (Bowd, 1990). Accordingly, institutional review boards examine proposals for ex- periments with nonhuman animals as they do with human participants and simi- larly veto or require changes in proposals they deem unethical.

I N T E R I M S U M M A R Y

To evaluate a study, a critical reader should ask a number of questions regarding the theoretical framework, the sample, the measures and procedures, the results, the broader conclusions drawn, and the ethics of the research.

S U M M A R Y

CHARACTERISTICS OF GOOD PSYCHOLOGICAL RESEARCH

1. Good psychological research is characterized by a theoretical framework, standardized procedures, generalizability, and objec- tive measurement.

2. A theory is a systematic way of organizing and explaining ob- servations that includes a set of propositions about the relations among various phenomena. A hypothesis is a tentative belief or educated guess that purports to predict or explain the relation- ship between two or more variables; variables are phenomena that differ or change across circumstances or individuals. A vari- able that can be placed on a continuum is a continuous variable. A variable comprised of groupings or categories is a categorical variable.

3. A sample is a subgroup of a population that is likely to be representative of the population as a whole. Generalizability refers to the applicability of findings based on a sample to the entire population of interest. For a study’s findings to be general- izable, its methods must be sound, or valid.

4. A measure is a concrete way of assessing a variable. A good mea- sure is both reliable and valid. Reliability refers to a measure’s ability to produce consistent results. The validity of a measure refers to its ability to assess the construct it is intended to measure.

DESCRIPTIVE RESEARCH

5. Descriptive research cannot unambiguously demonstrate cause and effect because it describes phenomena as they already exist rather than manipulating variables to test the effects. Descriptive

methods include case studies, naturalistic observation, and survey research.

6. A case study is an in-depth observation of one person or a small group of people. Naturalistic observation is the in-depth obser- vation of a phenomenon in its natural setting. Both case studies and naturalistic observation are vulnerable to researcher bias—the tendency of investigators to see what they expect to see. Survey research involves asking a large sample of people questions, often about attitudes or behaviors, using questionnaires or interviews.

EXPERIMENTAL RESEARCH

7. In experimental research, investigators manipulate some aspect of a situation and examine the impact on the way participants respond in order to assess cause and effect. Independent vari- ables are the variables the experimenter manipulates; dependent variables are the participants’ responses, which indicate whether the manipulation had an effect.

8. Conducting an experiment—or most other kinds of research— entails a series of steps: framing a hypothesis, operationalizing variables, developing a standardized procedure, selecting partici- pants, testing the results for statistical significance, and draw- ing conclusions. Operationalizing means turning an abstract concept into a concrete variable defined by some set of actions, or operations.

9. A control group is a neutral condition of an experiment in which participants are not exposed to the experimental manipu- lation. Researchers frequently perform blind studies, in which

kowa_c02_031-062hr.indd 61 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka jokajoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

62 CHAPTER 2 RESEARCH METHODS IN PSYCHOLOGY

K E Y T E R M S blind studies 49 case study 42 categorical variable 35 conditions 47 confounding variable 50 construct validity 38 continuous variable 35 control group 49 correlate 53 correlational research 53 correlation coefficient 53 correlation matrix 54 criterion validity 38 demand characteristics 49 dependent variables 47 descriptive research 42

descriptive statistics 50 double-blind study 50 error 39 experimental research 47 experimenter’s dilemma 36 external validity 36 face validity 38 generalizability 36 hypothesis 34 independent variables 47 inferential statistics 50 informed consent 60 interitem reliability 38 internal consistency 38 internal validity 36 interrater reliability 38

interviews 44 mean 45 measure 37 median 45 mode (modal score) 45 naturalistic observation 43 negative correlation 53 operationalizing 48 participants or subjects 36 placebo effect 49 population 36 positive correlation 53 probability value (p-value) 52 quasi-experimental designs 51 questionnaires 44 random sample 44

range 46 reliability 37 representative 36 sample 36 single-blind study 49 standard deviation (SD) 46 standardized procedures 36 stratified random sample 45 survey research 44 test–retest reliability 38 theory 34 validity 38 variability of scores 46 variable 34

participants are kept unaware of, or “blind” to, important aspects of the research. In a single-blind study, only participants are kept blind; in double-blind studies, participants and researchers alike are blind.

10. A confounding variable is a variable that could produce effects that might be confused with the effects of the independent vari- able.

11. Experimental studies provide the strongest evidence in psy- chology because they can establish cause and effect. The major limitations of experimental studies include the difficulty of bring- ing some important phenomena into the laboratory and issues of external validity (applicability of the results to phenomena outside the laboratory).

CORRELATIONAL RESEARCH

12. Correlational research assesses the degree to which two vari- ables are related, in an effort to see whether knowing the value of

one can lead to prediction of the other. A correlation coefficient measures the extent to which two variables are related. A posi- tive correlation between two variables means that the higher individuals measure on one variable, the higher they are likely to measure on the other. A negative correlation means that the higher individuals measure on one variable, the lower they are likely to measure on the other, and vice versa. Correlation does not demonstrate causation.

HOW TO EVALUATE A STUDY CRITICALLY

13. To evaluate a study, a critical reader should answer several broad questions: (a) Does the theory make sense, and do the hypotheses flow sensibly from it? (b) Is the sample adequate and appropriate? (c) Are the measures and procedures valid and reli- able? (d) Are the data conclusive? (e) Are the broader conclusions warranted? (f) Does the study say anything meaningful? (g) Is the study ethical?

kowa_c02_031-062hr.indd 62 9/13/10 10:25 AMjoka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka joka

1. boom:
1. help: If you are experiencing problems unlocking this document or you have questions regarding Protectedpdf files please contact a Technical Support representative: In the United States: 1-877-832-4867 In Canada: 1-800-859-3682 Outside the U.S. and Canada: 1-602-387-2222 Email: [email protected].
2. protectedpdf_version:
3. abstract:
4. logo:
5. unlocked:
1. rememberme: Off
2. rememberme_label: Remember my user name and password.
6. title: Psychology 6e Ch02
7. version: 2012-06-07
8. form:
1. neversend:
1. pwd:
2. response:
1. docid: 1000-0001-CFAB-000933EE
2. username:
3. username_label: User Name:
4. pwd_label: Password:
5. login:
9. subtitle:
10. text:
1. instructions: This is a Protected PDF document. Please enter your user name and password to unlock the text.
11. info: COSString{Please Login to View}
1. :
2. :
3. :
4. :
5. :
6. :
7. :
8. :
9. :
10. :
11. :
12. :
13. :
14. :
15. :
16. :
17. :
18. :
19. :
20. :
21. :
22. :
23. :
24. :
25. :
26. :
27. :
28. :
29. :
30. :
31. :
32. :
2. boom.info_publisher: This document is published by: Apollo Group, Inc.