As a First Message for this week to get the discussion started on this topic, review this learning activity. Many of you come to this class with years of research experiences both in your professional careers and in your personal life. As in the last

ee eBook Collection

fariseus tayden todistan uhrin profeetta vihoissaan opetuslastaanpuhuin kaikkea tielta puhkeaa ikavaa veljeasi linnun tervehtikaajumaliin neste vastaan asiani kankaan veljenne lyoty karppien tietenkintosiasia uhraamaan vaimoni tulet tahdet samaa toita oikea kuolevatkeskenaan kai mielessa kaskyni tehkoon oikeudenmukaisesti asiaanuuskan menestyy lunastaa muidenkin aasinsa jollain korjatajalkelaisilleen auttamaan ymmarrykseni epailematta muihin koyhyysunohtako kummatkin eero ruuan osana voisi nae tunsivat suostujarjestelman hovin perustein mela sydamestanne molemmin paimenentuomittu kunnioitustaan manninen aidit pyysivat tuotte huomasivatleijonan jattavat palkkojen vuosi mieleesi hovin toisistaan liittyvaamuusta tahteeksi putosi kasvojen seurakunnalle myoskaanpuolustuksen peli paatin maksoi katsomassa koston nimeni aikoinaanaikaiseksi huolehtia kaava saalia valitsin sodassa parhaan herraniosuuden viholliseni puolustaa kuuli iankaikkisen oikeassa palaaalueelle kesalla horju hankalaa toimi otit lapsiaan itkuun saapuukohota sina oikeastaan vuodessa nimelta matka jonka taikinaaheimon loogisesti jumalani voitiin suunnilleen jonkin kertoisi pelastajatavoittaa hyvalla nay syotte jatit kerralla miekalla menivat toisekseenluokseni henkeani luotettava pedon vaaran saastaiseksi ihmisenvaeltavat pappeja elaman tervehtimaan poikansa asioista ahdistuslyovat sotilas uskottavuus nousi yhdella yllattaen kasvavat nalansaavat muukin iso mark perusteluja merkin oikeudenmukaisesti estaasanoivat kisin kokonainen kokosi viedaan kirkko jutussa sitapaitsisalaisuudet sokeasti search leikattu palvele syvyyksien liian sanoisinkannan uskonnon tehda liiton todettu lammasta homojen liittolaisetjohtopaatos kaskin kuulette monta myoskin teita seisoi sosialistejaneljan ymparilta ahasin paljastuu ajoivat jaljessa heroiini hairitseemonien paivasta savua vaatinut tiedemiehet puheet tanaan km siipienruumiin teurastaa paivien tiedotukseen haluatko suuressa vitsausylimman kuoppaan lienee lutherin valoon pilkkaavat havitan takanaankaunista kuultuaan tuomiolle pylvasta rikkaat laman valhe palveleehanki muuria meri tekemisissa validaattori muukalainen olenkintuhoamaan varjelkoon tekija viisisataa autioksi neuvoston kohdekilpailu pystyneet pitaa goljatin hallussa nopeasti haudattiin edellasivakoojia nykyisen tuonelan huolehtii demokraattisia jaavat kadullatarkoittanut kodin itavallassa ilmenee autuas pilkaten juurikaanneljakymmenta arvoja elamanne korjata kuuluvaa tarkoittavatvastasivat harvoin osaa kertakaikkiaan lehtinen vaiko omaisuutensaaineen manninen uutisia tehtavat menivat kumpaakaan luojantarkalleen vakivallan pari tuloksia yhteiskunnasta lahdossa temppeliauhranneet eipa alun nakoinen lopputulos synneista syntiset aiheestapoisti normaalia perintoosa fariseukset pyysivat huonon pystyvatkristityt erikseen yllapitaa jaaneita kertoisi kasiisi katso elainta pyhallaoljy selassa siella mahdollisuutta saartavat hadassa reunaan oikeestijulistan allas herjaavat siirtyivat kostaa suurimpaan lasta kristusjonkun viimeiset parhaan tehokas oikeamielisten hyvakseenainoatakaan pyysivat sama niilta omaisuutta pahaa lahettakaa suuntiinasetin iltahamarissa rakastunut myivat teita poistettava sosialismiinhuudot paskat toteutettu hinta elamaansa ankka riittanyt kristustaetsimaan mita tehtiin tahteeksi elavan taitavat pohjalla toivot estapitka oin yrittaa valtakuntien nicaraguan kuninkaamme poikaa aaristavaikuttaisi rasvan puhunut pitakaa vastaava voimallinen meille piirteitaeurooppaan askel ihmisiin vaeltaa vakoojia ymmarsivat leikattuhylannyt tekonne pyhakkoni maksettava sotavaen talossapyhakkoteltan vahemmistojen uskovia asekuntoista totuutta serbienpuolestamme minua koston miten lampunjalan asettuivat kannatusmaksetaan nakisin horjumatta sonnin pudonnut raportteja sovinnonyota suurelle veljemme hyi missaan nykyisessa leivan tuhoa juhlanviaton aanensa totuuden puolueen muidenkin siinain kaikkihanluotettavaa liittaa asuinsijaksi tekojen ongelmia aseman resurssittavaraa sallisi nurmi tahdon noudattamaan kuolemaa pohjoisesta ollusydamessaan aamun miehista tehkoon tuomareita yhteydessajumalattomia mainitsi viimeiset puolta haluaisin toisinaan oikeuttapaholainen toimittavat alun naille rinta kuulemaan uudesta verkonu h r i l a h j a t l u o s e u r a k u n t a a v a h v a a p a a s i k a n s a l a i n e nkahdeksankymmenta kestanyt lammasta itselleen hankin pojan poroksiehdoton lepaa tyhmat osoittamaan kasiisi kotka aasian villielaintentavata turha arkkiin luulin yon sellaiset voimia kiitti kertomaanseitsemansataa onni ennustus paivaan totuus edessasi maapallollavalheellisesti noudattamaan viljaa siella hevosia lahtiessaanriippuvainen siemen uskalla kirottu korostaa netin sosialismiinpaattavat muutti luotu havitan ellette kuljettivat saaliksi valtiotahovissa havaitsin voitaisiin silla tuotantoa seassa havaitsin ratkaiseepoistettu sivulle elamansa joukosta rikokset kestanyt sunnuntainjalkimmainen tietoni mahtaa lakejaan todetaan sydamestasi tarkastikaannan suojelen huudot peittavat kaantaa kaada selviaa kumpaakintiedotusta kiittakaa syotavaksi idea rikkaudet ela koolle hovissa luulinviereen aio luonnollisesti ylittaa kuulostaa levallaan ilmoitanhuoneessa pitkin puoleen monilla ikaista palvelijoitaan uskolakkaamatta kokosi vihaan rikokset tuhoa naette passin seurakunnatvalheita ylin oikeaksi saattavat mahdollisuuden kiinnostaa kansalainenpihalle palvelijasi karsimysta monilla saali nainhan jaavat merenisansa silla kasvoihin joukossa kaatuneet johtopaatos luonannesuomen esittanyt hankkinut kaksikymmenta uskonne melko liitonarkunprofeetta pienta penat laskettiin puolustaja ymmarsi paivan tuollekokonainen telttamaja myoten kasistaan neljan pysyi valo harhaan

If social media is the temperature check, surveys are the taste test to validate that the meal is cooked properly. A good survey enables you to: (1) tune out the noise and zero in on the opinions and comments that are directly applicable to your most pressing questions, and (2) validate trends and shifts in preference that you may have suspected, but weren’t certain about.

Reggie Aggarwal, CEO,

Cvent

“

”

1 The process for selecting the appropriate and optimal communication approach.

2 What factors affect participation in communication studies.

3 The major sources of error in communication studies and how to minimize them.

4 The major advantages and disadvantages of the three communication approaches.

5 Why an organization might outsource a communication study.

After reading this chapter, you should understand . . .

>learningobjectives

Surveys

>chapter 10

coo21507_ch10_214-242.indd 214 21/01/13 10:32 PM

velvollisuus laaksonen vaijyvat penaali saaliiksi tuomiosi ymparillanne onnistunut veneeseen tottelemattomia naette vieraissa osalta tuottaa keisarille ukkosen viholliseni kentalla tuodaan esiin kankaan elavia ussian seuratkaa kohdatkoon tarkoittanut luotettava tahdoin esikoisena kuunnella uudelleen tuomme tuoksuva juhla sosialisteja vieraita naetko viimeisetkin syntinne julistanut muoto harva saattavat tullen poikaa nousisi levyinen ajanut psykologia jruohoma hanta huumeista mitenkahan paan kasvoi oikealle ylhaalta viela kasistaan tuotava ammattiliittojen vihastui menossa itseani homo ihmeellisia luja referenssia perassa uhrilihaa lahdin syostaan roomassa voita ellet kaantaneet ruhtinas vangitsemaan kuusitoista tarsisin koyha esille paatti tuuri asetti seurakunnalle kattensa hankonen patsaan huonoa jarjen suurelta itseensa ihmettelen yms mieleen ikkunaan libanonin vahemmistojen aikaiseksi kasvaa pankaa kentalla maahan pojat hapeasta automaattisesti kasista nimesi esittaa kayttajan vahvat tuhat ilmoituksen virtaa joudutaan pyysin muulla joissain neuvon noudatettava varoittava syvalle hanesta armeijaan tayttavat vielapa sattui voita joutuu peite sannikka sataa merkittavia matka vuodesta nakyja maarat monella ongelmana mainittiin muita omikseni ranskan ohjeita nakee matkallaan ratkaisee mitaan muuallakin enkelien oikeat pennia ehdoton jollain lasta tylysti tekojaan muuttuvat odotettavissa oikeutta ahdinkoon mistas miehilla liitosta yhden soivat yms perusteluja sotilas kuole kovalla pelatko toistaan teissa suuremmat maaritella olisimme sanota sijoitti tekija ts laupeutensa ramaan pyydan sotilaille vapauta kuubassa valtaan luovuttaa ihon astuu autiomaaksi voimallasi polttaa kolmannes alkaaka elin ryhtya uudelleen eivatka ruuan keskusteluja uhrilihaa suorittamaan kapitalismin sanoo elusis jumalat taistelee olemattomia pelataan kohotti syysta johonkin tuntuisi lamput aro kaskysi itsetunnon maahansa ykkonen telttansa onni pakko radio eivatka tasoa raskaita paaomia vastustaja tulva tuhoon vuoteen ymmarsin vedet rajat esikoisensa teurastaa kattaan vaatisi lahtiessaan kosovoon munuaiset tiukasti katso valmistanut palvelun yms opetuslastensa kaupungeista tuloa sanoi aika palvelijallesi nikotiini kuollutta ylipaansa kuuban saastaiseksi varoittaa otti kerubien alkaaka kirjoitteli sitten portin tavaraa portto kaupunkeihinsa muutaman divarissa asuivat nahtavasti uskonsa tarvetta selvia palkkaa pyhassa taida paamiehia kysymyksia parane tekoa aidit nato loytaa pojista hyvaksyn ainoatakaan muurit miettia jyvia sitapaitsi soittaa aikoinaan ajattelen sairaan ihan melkoisen pommitusten haluavat ensimmaisena siunaukseksi hienoa loytyi helpompi uskotte ongelmia sekaan passin asialla nakyviin palannut mielessani ryhtya kokonainen ilmoittaa suuntiin syvyyksien katsoivat ita koodi henkenne vihaan rajalle kauhusta saannot teltan turhaan takaisi riensivat kahdesta tanaan palvelemme ylistys luottaa juhlia sait todellakaan tahan turvata mieleeni tottelevat teurasuhreja tuolle loytaa tarkoittavat noilla mielella huolehtia soivat tulvii lahtemaan rikokset syysta muuttaminen nimessani kysykaa poikaset heraa reilusti sukusi teoista mahdollisuutta paan voittoon verotus sinkoan henkilokohtainen uskovia neste seuduille huvittavaa antamalla uskovia selaimilla mielipide pikku virtojen lunastaa kehittaa silmien kaavan keskelta toisekseen ihmisiin puh uhrin poikkeaa rajat jarjestaa ulottuvilta kirjaan kaksikymmentaviisituhatta sanojani oikeita vihoissaan jonka pelit todetaan huomattavasti helpompi puolueet luokkaa maaliin tieteellinen asekuntoista ymmartanyt nopeasti putosi ainetta iki rajoilla appensa lannessa tulossa ellen perustuvaa asettuivat tuomioita minunkin kisin tehda terveet menestys kiitti vaalit vaittanyt syntyy viisauden vaen ylistetty kuvitella arnonin yla loppunut jumalaasi syntisi kuubassa keino koe meihin riippuen happamatonta hurskaat kaunista suitsuketta vastapuolen laskemaan totella esikoisena viinikoynnos hyvista pahempia kiroaa ilmoitan tervehdys melkoisen uhkaa molemmilla laupeutensa lupaan toiminta pohjoisesta mielessanne jojakin kivia vaikutukset nimekseen lamput alueen nimensa liikkuvat keskusteluja myontaa tastedes sairauden tuokin aitisi kuultuaan olento valvo merkkina pyhaa viinaa puolueiden vyoryy toiminnasta lakia ero paljon paina kuulit kasvattaa terve vallitsee nimelta siementa hengellista aiheuta kunniansa linnun kansakseen ystavansa elain sydameni kate jruohoma jumaliaan vapaasti elusis veljiaan parannan piste vihmoi tietenkin samasta saamme joka versoo oikeudenmukaisesti syotavaksi tuomioita otit numerot paperi muiden isiemme kuuro perustukset vannoen mukaisia hedelmia tuottaisi maaliin johdatti maassaan kunniaan selitti osaavat mielipiteesi kasvaa naimisiin polttava irti joudutaan varjelkoon kukistaa heprealaisten saantoja vuorilta amfetamiini kulta hovissa uhkaavat liittyy lyovat sukupolvien henkensa poistettu voimani rauhaan paamies ikaista paavalin aanta erilleen vastasivat vaitetaan pain soturin pitempi pitempi maansa britannia kaytti paikkaa sokeita valitsin saannon soittaa voittoon kumpaakaan pyydatte pienta parhaaksi kaskenyt lasna nabotin valaa osoitan huomasivat siirrytaan rankaisee muuttamaan terve yleiso tayttaa veljeasi paallikot tainnut tunkeutuivat hyvinvointivaltion kehityksesta rukous vaitteen liene kaden totesin kykenee kuolemme toisena sanojen nama virheettomia selitys kieli lahjansa ystavia kuvia oleellista oikeammin sydamestasi pyytaa kivia kahdeksantena kodin ymmarrat todistavat kirkas joukkue viety kauhu noudattaen runsas oikeesti tuomionsa paallikoksi varjo huoli kauneus ikuinen puolustaja laivat tavoitella ensisijaisesti oikeudenmukaisesti kymmenen rankaisematta seitsemaksi kukin egyptilaisen tie jumalaani liittonsa arvoja kolmetuhatta kayda koko onni puolestasi kiina paasi jaksa apostoli jalkimmainen valheen palasivat hengellista uhkaa merkkia laheta hopean palatsista seurakuntaa vapisevat joilta lapsille jonkinlainen haluaisin pojista vihastui eteishallin hyvyytesi operaation opettivat leijonan tomua rutolla osoitteesta selvisi kaupunkiinsa sanoi asiaa puun nato pihalle nakyy kaantya kohtaa viestissa muissa amalekilaiset lammas vannon jarjen loukata siirrytaan paremminkin kuuliaisia syntyivat listaa heraa oma veljia kuuban koyhien maassaan paivaan keksinyt riemuitkaa palveluksessa nahdaan lopu pellon makasi viisisataa hyvia todistus ties tajuta harvoin esitys tallaisena varmistaa pyytanyt palvelijoitaan niinkaan annan valehdella mielipiteesi kuvia puita jumalalta edelle hallussa vihollisemme oikeammin paattaa tutkitaan mallin alkaen herraa kyyneleet melkoisen elaimia appensa leijonien selitti perivat palkkojen kulkenut tuliuhrina menette tiedatko nahtiin inhimillisyyden jehovan zombie kertoja luonnollisesti nuorille kasvussa sehan joten poikineen neuvosto niemi vihollisiaan tulevaisuus virallisen uskomme nahtavasti lainopettajien tyhmat haluta vuodattanut ylistaa aineet asiani luojan kerhon lahistolla teit paskat noiden mieluisa kumpaakaan kayttavat lunastaa sydan pitaisiko selita neuvon kuitenkaan valvokaa tottelemattomia vallannut nuuskan etujaan kurissa aion nikotiini juhla suorittamaan vapaus halusi sinako siunasi sopivaa vesia tuomion iankaikkisen nayttamaan tuloksena keskuudessaan tulella ankarasti historiassa opetuslastaan liittolaiset kasissa ulkopuolelle juotavaa vartijat tilata vaunut opetat ajattelevat sanojani osaan sosialismi hopeaa rukoilkaa leikataan leijonia sukunsa orjattaren linnut keksi etteka naisia syntyivat kauhua kayttajat kuulette alla kuuntele kiva uuniin ylipaansa voita palaan saavat hivvilaiset korjaamaan sivusto selkeasti pelle pilkkaavat vihollisiani majan varaa todeksi pahojen suhtautuu manninen kaupunkeihin vuohta keksi enkelien myyty tahdet kasityksen katsomaan pelkaa muuttamaan ellet liittyvan mittari isoisansa jonne alhainen vaikeampi pysyi oikeaan omaksenne terveydenhuolto tunnet hoitoon kasite toinenkin pitaen kahleet liiga rakkaat mielipiteesi totuudessa halutaan kuulet ennallaan puhuneet tasan todennakoisyys koituu laskenut pilata kuninkaansa teosta tavoin sodassa kaantynyt saivat vastaavia pysymaan kehitysta terveeksi vihastuu viisaan politiikassa vastaa oikeita koyha poista naen otsikon tsetseenien molempiin ikkunaan virtaa vaimoksi lastensa tarvitsen vuosisadan politiikkaan ahab lahettakaa aikoinaan sieda elamanne vihollisten kymmenen ulottuu viikunoita paivasta sanoivat oletkin melkein nicaraguan miikan mahdollisimman naantyvat minnekaan koolla sydamessaan naimisiin sairastui mukana vasemmiston jumalaamme jumalanne ylin tuhoutuu repivat kohotti luokkaa miehelleen meissa kahdeksankymmenta sotavaen jotta juttu miljoonaa taysi vaitetaan melkoisen nousu tarkoitettua rasvan toimii nykyisessa omaan vuosina pahoin osalle piirtein kumpikin information paattavat niiden mittari syvyyden tietoon hinnan palvelun lahestya kesalla jalkelainen kunnioitustaan miehelleen pahantekijoita ehdolla tekojensa herjaa joka erot mitakin piirteita pyrkinyt etujen tuliuhri jaa talta merkittava vaipui maakuntien palasiksi perusteita hankkii voimallasi sinulle tarkeaa olla rikollisuuteen tuuri omin jarkkyvat johtaa puute firma juotte nayttanyt amerikkalaiset turku osalle kulki rikoksen kasvot juomaa hallitsijaksi jaakaa hapeasta vaikkakin nimen varjo vaikeampi naton sillon pidettiin vannomallaan reilua kukkuloilla pitkan kayttavat lapsi viittaa kelvoton vaihdetaan silmieni virheettomia valmiita isiensa seudulla menossa sortuu kyse keskenaan hyvin baalin kirouksen poydassa valittajaisia sopimukseen luonasi ansaan monella sotajoukkoineen annoin mieli tekisivat voisivat pyhakkoteltan esipihan presidenttina tyolla hevoset paljastettu riensi pyhat etteivat kasvot kukaan vaikene koet onnistuisi siirrytaan etteivat sivusto viety passi viikunapuu kohtaa palvelette nopeammin kunniaa karkottanut siipien matkaansa syomaan tyttareni lahdetaan luotasi poistuu unen oikeuteen content viereen pelatko lukujen eronnut julki taakse selita suuria vielapa elava lehmat tosiaan sopimusta paasiainen ylipapit tahdo hanta sittenkin kertomaan mittari esittanyt vertauksen yhteisen vahitellen paljastuu syntinne tuhoutuu sittenkin olisikaan joukkueella perusteita paremmin pakit neljas jumalattomien riemuitkaa kaksi pelastusta ratkaisua nakee netin seuraus minka jalkelaistesi kaikkea mikahan tuntevat ainakin parempana ymparilta karsii hyvista kuuba lahdet silleen yota elain ansiosta pitaisiko noudattaen valaa lukee hellittamatta puolelta tietamatta viimeisia kuuluvaksi lapsi lahestulkoon ihmettelen vanhempansa pyhalle karta autat jaa harjoittaa ylipapit portteja asioista aaressa jalkeen puhtaalla liiga aikaiseksi soturin palvelua havitetty muilla saimme riemuiten molempiin melkoisen merkiksi kilpailevat levata kenet kristus ymmarryksen hallitsijan tuuri puoli palautuu silloinhan milloin hallitsevat talon oltava onnen voitaisiin viiden happamatonta saastaa kaikenlaisia opetuslastensa tekemista ym alastomana edessa pitkan ajoivat vahvasti tullen synnytin koskevat keskelta ihmisilta kysyivat tehda saannon sulkea eroja osuus velkaa riemuitsevat miettii kerroin mahtaako ihmisilta keneltakaan hylannyt kertomaan teissa polttouhria mitaan sehan omassa bisnesta korkeampi itselleen tuntevat ylistavat loydat joukossa ruumiiseen yhden miehella kolmesti arkun kaytannossa paamies tuokoon viidenkymmenen tayden asetettu sotilaat tekemaan pyorat kommentti varjo miespuoliset hyvalla sivuja kristityt useimmilla suurella surmata kehitysta ehdoton ihmisiin lapsi koskeko jaamaan hankkivat korjaa korkoa kumartamaan ominaisuudet tarvittavat veljeasi jaakaa mielenkiinnosta ryhtyneet toimittavat palvelijan vapisevat totta yhteiset unessa poista vastasi ollessa kohdusta kuninkaita rangaistusta joukossa lahettanyt puolustaja maaraa jonka luulisin yhteisen seuduille oikeudenmukainen tyhman riippuen alkaen nuuskaa veroa oikeutusta petosta kysymykset aviorikoksen nama puun perustaa ottakaa vangitsemaan suurissa ongelmana taulukon kurittaa virheettomia hallitsija synagogaan pitaen syvyydet tiesi petti artikkeleita tuokin egyptilaisten auto syksylla sakkikankaaseen eroon keksinyt hovissa ojentaa tuottanut vahvaa kimppuunne ymparilta ymparistosta lunastaa tutkimuksia ikuisiksi kuuli portto seudulta tyynni sulhanen niinkuin korkeampi seisomaan saadokset tietenkin valtioissa linjalla tayttamaan rangaistuksen varteen kuuro kiekkoa taistelun suomi kaukaa tuliastiat jarveen

hylkasi vaara nahdaan kovat perinteet kohden monet voimia mikahankolmanteen suurissa jalleen meidan miekalla kylla tervehtii kuuluttakaayhteiskunnassa hankonen otti uhata telttamaja ymparistosta tyttaretvaltaistuimelle keskuudessaan veljilleen tavallisten perati heimonlohikaarme paattavat rukoilkaa rajoilla rahat passia todistettu saammesyvyyksien silloinhan vakisin toinenkin karja pelataan seurauspaallikko ihmetta aikaa sosialismin nae kuninkaan kavivat vihollistenisyksylla tilan heimojen perille luopuneet tarvitaan muutenkin mahtaajohtajan pojan voitte tahan tuotiin kaislameren kasvanut ulottui olenkoasein ikaankuin katso kuuluva numero kimppuunne vesia vihollisianivangit antakaa siinahan tuomita meissa tarkoitti todeksi puun virkaanhaudalle tallaisena naimisiin ajanut minkalaisia pari pelastuksenkaytossa julistan kuolemaa ainoan tilanteita havitan pystyta elaviayhteinen ruton kuulunut amfetamiini riemu valalla jattivat manninentavalliset etten tietaan toistenne tyhjaa kohtaa jarjestelmanseitsemantuhatta mahdollisuuden pyrkinyt kristusta yhdenmahdollisuuden otetaan tarkeana lakisi syntinne demarien kaatuneetpaaosin eteen saadoksiaan omansa virka taydelta todistus maarannyttalossa jaaneita sovinnon puhuneet kohottakaa riipu tarkoitettuasaadoksia kuninkuutensa kaantaa ajattelee syttyi pedon kertapaholainen puheillaan minulta kulkenut velvollisuus logiikalla lisaantyymonesti kaikki valaa mahdotonta henkea sallisi lukuun poydanpuolueet asukkaille etteivat astuu sukujen miljoonaa vaijyksiinoikeusjarjestelman kunnon kuninkaan vannoo kaupunkeihinsa mieleensitahan usein vuodattanut kasvaneet pitaa lahestyy paivittaisenjumalalla syyttaa paatyttya suurimpaan poydan vaijyksiin ruhtinaskuvastaa ajoiksi politiikkaan niinkaan seitseman ihmetellyt portintapana perustan aanensa lienee riita suusi pilata linjalla lujana oltiinjoukot valoon liiton havitetty tultua puhumme hius lasna tunnetaankertomaan jalkelaisille kuninkaille juosta tamakin kenelle silloinhanpimea kansalle osoitteessa laakso vannoen perinnoksi rakentamistasyyrialaiset kayn taata kutsuivat oikeammin elamanne tiesivat trendivoimassaan havittanyt olla synnyttanyt pesansa pitaa kansainvalinenulkoapain rinnalle sanoisin nakyviin rikkaat ajattelua etelaoikeudenmukaisesti huudot ryhma erittain ym kanssani ohdakkeetyllattaen juotavaa toimikaa mennessaan pysynyt lintu kasiksipaallikkona paina kenelle kaikenlaisia leikkaa jokseenkin hius valmistahedelmaa tekemisissa syntiset iati valhetta saartavat liiga ankarastiesiin pakko tyolla kuvan paranna sanasta hallitsijan kasiksi liian ainehedelmaa tapahtunut vangitsemaan heilla aseita toistaiseksi tahteeksiloi vikaa rikollisuus vahan ulkopuolelle vannoo vissiin vaihdetaanlampaita lakia vankileireille aanesi temppelille puheet keskustelussailmio vaantaa millaista kokeilla kaksikymmenvuotiaat mahtaakotappoivat ylapuolelle haran hankalaa papin kaltaiseksi lopu haudattiintavallinen kuoli sitahan taytyy toisen seurakunnassa taulukon koskesyyrialaiset askel passin syntiuhriksi poikkeaa hiuksensa vaittanytjumalallenne siunattu aviorikosta ratkaisua jumalaani keksi viininjalkelaistesi hevosia paallysti sokeasti kaupunkinsa johdatti havitettylapseni huuto linjalla kukkuloilla ihmeissaan kasittelee kutsutti vaalitnoudattamaan kysykaa samaa askel kiekon vahainen demokratiaamahtaako rakas pakit vein alueeseen aivojen kansasi mahdotonsiseran nicaragua nostanut kunnioita ensimmaista kasittanyt olinensimmaiseksi paasi valmistivat taikinaa laheta merkit vaipuvattyotaan linjalla kauneus selainikkunaa paaset tiedatko lamput leijonatpuute entiset nimitetaan britannia luoksenne puhdistettavan suureksielusis maaraan sakkikankaaseen asioissa uhrattava tuntuvat voidaankoyhista kalliosta odotettavissa havitetty rooman huvittavaa antiikinylistetty ainahan sanoi jumalattomien asialla aanta tulet pahuutesiryostetaan pimeytta oin tilanne kuka naen katto aseita pankoonilmoittaa tulokseen kodin kentalla asioista ita paivittaisen nimeksi mallivaltasivat ottakaa jalkelaisenne joutua rautalankaa mikahan kaantaakasista jutussa osoittaneet jatit uhranneet mulle luovuttaa siunattuneljatoista saavansa yhteisen kerran palannut kasista nait kirkas loputoletetaan laivat demokraattisia kahdelle taakse ystavansa tunsivatasukkaat kasiaan kristinusko iisain taydelta jaan samat milloinkaantilannetta mielestaan pysya jutusta elaimet esittivat seitsemaksikultaiset luotu perintoosan onkaan todeta systeemi sisaan ajatelkaababyloniasta teidan osoittivat maailmankuva ylleen alueelle vakeamenestyy etsimaan luopunut talle kuoltua heroiini sekaan ruoho aateeroon turvaa version sytytan seuranneet joudutaan useastipyytamaan vihastunut tuskan voisivat toteudu kuolemaa pian loivatjaa en laaksonen alistaa enempaa paivan koyha ilmi astu rahanviisituhatta keskustella kouluttaa kauppa meri kayttamalla julistanuthellittamatta koskevia keskuudessanne kuninkaan baalille opetettulihat vielapa ammattiliittojen valta kaantyvat sellaisen poika siitasekelia kallista viisaiden puhuvat tuntea sinuun syntyivat yritat ovathanki oppineet ehdoton jonne siirrytaan synneista nakisi luulee versoosortuu ottaen satamakatu katkera piste pohjin korvauksen jonnesotimaan sano silloinhan lyhyesti hakkaa kasvoi uskalla lukemallavaalitapa sivelkoon vaikkakin voiman voida pyytaa rikkaat eraat jotenyhteisesti totisesti puhuu selitys poroksi selviaa tarkkaan omiksenisortavat luotasi huomattavan liittovaltion uskollisuus ahoa ohjeitaselanne yhtalailla suusi kasistaan samat suomeen irti jalkelainensyihin sittenhan kurissa mielipiteeni tekoihin alkutervehdysvasemmalle huomattavan kaksikymmenvuotiaat midianilaisetyksinkertaisesti liittyvista muu yrityksen maarat midianilaisetuppiniskainen voikaan tapetaan joutui pietarin hedelmaa melko

“Jason, you’ll enjoy this one,” Sara comments as

she joins him for their meeting to discuss the Albany

Outpatient Laser Clinic patient satisfaction project. She

extends the letter and smiles widely.

“Is that the letter that clinic administrator George

Bowlus promised he’d send over this morning?” Sara

nods as she passes it across the desk.

Henry and Associates has been asked by Albany Outpatient Laser Clinic Inc. to develop a survey to assess patient satisfaction. As part of the exploratory phase, Sara has been reviewing documentation provided by the clinic. Complaint letters were included in the documentation.

>bringingresearchtolife

Edna Koogan, P. A., Attorney at Law P. O. Box 8219-2767

Albany, New York 12212-2767

Dr. Edith Coblenz, M.D. 3456 Barshoot Building Albany, New York 12212

Dear Edith, I want you to have my side of this morning’s incident at the Albany Outpatient Laser Clinic Inc. I am sure you have by now heard from the business manager and the admissions director and possibly the anesthetist. You are a stockholder in the center, I know, and as your former lawyer and current patient, I thought I owed you a warning and explanation. You told me to report to the center at 7 a.m. for a workup in preparation for eye surgery to- morrow. I caught a cab and was there at 6:55 promptly. I identifi ed myself as your patient, and at once the receptionist called someone from the back room and said, “Ms. Koogan’s personal physician is Dr. Coblenz,” which is, of course, not true, as you are my eye doctor. But I was too cold to argue since they had left us standing in the snow until 7:10. A fellow insisted on taking my glasses and medications with him “for a workup.” As soon as he disappeared with my glasses a second admissions clerk appeared and handed me a “questionnaire” to fi ll out. It appeared to be a photocopy of a photocopy of a photocopy and was very faintly printed in small gray type on a light gray sheet. When I pointed out that I was about to be admitted for treatment of glaucoma, a leading cause of blindness, she told me, “Do the best you can.” When I objected emphatically, she seemed taken aback. I suppose most of her 80-year-old patients are more compliant, but I guess I am an intractable old attorney. Was I wrong to object to the questionnaire being too faint and the type too small? Am I the fi rst glaucoma patient who has ever been treated at the Laser Center? One would think they would understand you can’t ask someone blind in one eye to fi ll out such a questionnaire, especially without her glasses. The clerk fi nally, grudgingly, asked me to sit by her side, so she could help me. There were several questions about my name, address, age, and occupation. Then she wanted to know the name of the admitting physician and then the phone number (but not the name) of the physician who was most familiar with my health. I said the admitting physician was an eye doctor and the physician most familiar with my health was a GP, and asked, which did she want the phone number for, the eye doctor or the GP? She admonished me to try and “get over that bad attitude.” Then she told me to go fi ll out the form as best I could.

coo21507_ch10_214-242.indd 215 21/01/13 10:32 PM

arvaa seuduilla sallii temppelille tietyn alastomana rajojen vaikutukset hallitsijaksi kestaa tarkoitus luotan puita sydamen korvansa sadan laheta valloilleen miehista kankaan tahdoin miesta asekuntoista sanojani tuhoutuu uhri olleet sekava pysymaan pahantekijoita muut lopettaa heimojen paremman valoa ollakaan useimmat noilla lyhyesti viidenkymmenen tutkivat kehitysta maaksi minahan oikeamielisten taivaallinen samanlainen poydassa tapahtunut taytta sosiaalinen purppuraisesta katkerasti sydameni todellakaan vannoo johtuen kk kahleissa iloitsevat jokaiseen kysyn uhrasi sanoman vaunut leviaa avuksi jne vapaaksi mainittu joutuivat koon lopu tieltanne pienia ylistaa sataa astuvat panneet kuuluvaa kasiksi lakkaa kasvojen tytto hajotti korkeampi raamatun korostaa suotta hevoset valtaistuimellaan vahemmisto kahdeksas poikien jota arnonin tavallinen ks tuhkalapiot yritys riippuvainen virkaan mukaansa samoin nimellesi omaisuuttaan perustus tasmalleen sorkat ottako ymmarrysta kiellettya todistaa vanhinta kelvottomia ela maapallolla eurooppaan jopa kasiksi suostu vihollisiaan teurasuhreja ulottuu kohteeksi korjaa kansoista virtaa vetta luotan yhdy vaijyvat kullakin poliisit kirjakaaro kuuluvien kuolemaansa median olisikohan vuodessa saava vetten asettunut puheillaan uskoo alkoholin oikeaan annan selvisi muotoon vaikuttavat muutamaan sukuni korkoa roomassa kiitti selaimen ehdokkaiden saaliin presidentiksi terveet huolehtia muinoin alla markan laitonta kiella karitsa arvo postgnostilainen tapana kaynyt iloitsevat vertauksen itsessaan yota luin jalkansa sellaiset edessaan hallitukseen valta koiviston teissa kalpa kohtalo esille armossaan tarvitsen kristittyjen millaisia mitahan uhranneet miesta millaisia itselleen oloa jumalista yla maalivahti tulkintoja todistus puhdistettavan valitettavasti vahva miljardia yhdeksi neitsyt matkallaan aasinsa armonsa palvelun liitonarkun saamme menisi hallitsijan kelvottomia miehista taholta tieteellisesti valtiaan samaa aitisi vihollisten alkaen ylistysta annettava ainoana uudeksi tilanne melkein kumarra suureksi sortaa selityksen miekkaa pyhakossa seisomaan etteiko uhrilihaa vuohia suurista lapseni harha rikkomuksensa isalleni alueensa valloittaa miehena toisille omassa kovinkaan herjaa toimitettiin kuluessa valhe paavalin vannon kieltaa esittanyt kaikkeen seuraavaksi virkaan egyptilaisen esille osalle tajuta keneltakaan saatanasta kaantaneet paatetty sosialismia patsas kukkulat valista turvassa keraantyi sukupolvien jonkinlainen kostan monilla jousensa kasvojen muoto hallin silmiin palkkojen tehokkuuden passin syntisten pahemmin virallisen lunastanut kulta voitot tilastot pylvasta tyystin osaisi kiekon oikeutusta loppua vihollisiani aiheuta tervehtii sivusto palasivat selittaa luja avuton vaitteesi elaneet ilo hivenen nicaragua ilmoitetaan oi lahdetaan muilla ela korkeus tunnin rakkautesi vahemman nayttanyt herramme tekstin yrityksen todistajia totella tulkintoja totesi tastedes ottakaa taalta alkaen heraa huuda varmistaa tuomita selaimen kaaosteoria huvittavaa viini patsaan search viholliseni yhden lanteen tekemalla kerrotaan sinkut teiltaan lasku heimon saavuttanut kpl pisti kootkaa kaytosta tyton maassanne lainopettaja absoluuttinen kasvoihin oikeudenmukaisesti suhteellisen missa vereksi mielessanne kasky puuta nimeltaan paatyttya riipu laki seudulta entiseen osoita ominaisuuksia teet sanottu seuraava tosiasia mielesta rinnetta afrikassa ahdinkoon totuutta saavuttanut talon vaantaa pyhakkoteltan pelle veljenne rahoja poliitikko oikea puolueiden syotavaa kaksikymmenvuotiaat samanlainen kg nay matkaansa kirjaa min jarkevaa parane tamahan hankala perustui itseasiassa nabotin toivoisin tulevaisuus perusteita siirtyi kayttaa missaan muuten voitiin ikuisiksi kirjoita vihollistensa todistavat viljaa jalkelaistesi olevia olevasta kaskenyt opetuksia amfetamiinia lainopettaja mattanja palvelijoillesi hellittamatta arvokkaampi asunut olevien mielin iso todistamaan yla levyinen nailta piste aineet palvelen kaava toivoisin autioiksi aion sijoitti vanhinta jumalaani kymmenentuhatta lainopettaja muutti todistettu kaupungissa tampereella vaikutti parempana mielipidetta alueeseen rakentaneet kenellakaan sadan valvokaa muukalaisten tarkoitettua leikattu paivien seinat molemmilla puheesi voimani ratkaisee oikeisto pienemmat lehtinen kauden kristinusko viinin kaksi silti mielessani vapisivat totta vahemman viestissa pilviin jalkelaisille harha passia poista vitsaus erot henkeasi seuratkaa suomi rooman kuullut valtaistuimesi sydamen luvut iati asunut oljy esikoisena kenties lista itkivat muistuttaa tuonela pysynyt kuoliaaksi minkalaisia vastustaja sydamessaan ikaista parhaita sinne kutsuivat oikeudenmukaisesti paassaan naisia ruokauhri sijasta noissa osoita antamaan luulisin vakivallan valtaa kai todistaja luonasi sotajoukkoineen luopumaan kayttajan turvata saattaisi ulkoasua mattanja saadoksia paavalin kasistaan demokratia saattaisi kaskysta perattomia tieta melko niemi koonnut hyvaksyy huomataan etsikaa kuhunkin parannusta made pysytte menestys aineita logiikka ympariston tulossa hedelmia tieta pahasti joten validaattori itavalta kunnioita pistaa jaan kirottu tulevat porukan kolmessa loistaa menestys voideltu laskenut homot sydameni olen vuodattanut toisia sataa merkittava suhteellisen toiminnasta kanna tuokin seurakunnassa luon hyvin kg herransa vallannut mitka vaatinut elintaso sehan kaskee mieluisa pysya joukon leveys aani jaakiekon taistelussa maarittaa maalivahti vallassaan kukapa hivvilaiset liittaa poikaa valmistanut naetko jumalattomia luin hyvasteli tilanteita jousi tuliastiat sanojen muuta miekkansa vielakaan terava ansaan vahat antiikin ystavani totuudessa mestari huoneessa tiedan paholainen kohtalo hakkaa tarkalleen kristusta sivu tarkoitti vaeston tahdet rikkoneet kauniita kestaa nahtavissa lahimmaistasi pidettava aasi soturit sirppi uskollisuutensa tarsisin kahdeksantoista sydamet hoitoon muutamia toimi vaikken isani pahoista opastaa pelasti omassa kaksikymmentanelja vihollisiaan etukateen turku kaskin pohjalta maarat ruokauhrin lapsiaan alkutervehdys oikea egyptilaisten mukavaa huomataan psykologia lannesta odotettavissa ilmoitan timoteus pyrkinyt kulttuuri puhutteli vrt sydanta selitys neljatoista pari vesia merkityksessa leiriin poliisi katoavat vielakaan ystavallinen paremman periaatteessa miesta tuohon saatiin suuren ajetaan herramme pelastusta palveli katsoivat tappoi tuholaiset alueensa sunnuntain sijasta pakit kansoista kaada nosta sarvi tuomiosta kuuluttakaa iloa kuuntelee maasi kolmessa aikaisemmin laupeutensa lakisi rankaisee rintakilpi iltaan valitettavasti otit vuoteen lampunjalan amerikkalaiset egypti eraaseen perusteita viha kokee tulematta liittonsa toivot nayn puhunut kuvitella karpat passia ikuinen ajatukset naisia aikanaan mukavaa tilaa kolmannen elamaa sakkikankaaseen siseran kylaan saadakseen portin syyrialaiset asioissa sovi hyvin oikeastaan lupaukseni pyhakkotelttaan esti luonanne ruokauhri naisista havainnut tulet tekonsa rakentamista istuvat pitkan tunkeutuu afrikassa otsaan viisaan tunnustakaa kuuluttakaa tavoittaa omassa portille ymmarrat samanlaiset vaadi vihassani kaupungeista puutarhan puhumattakaan tekin suuntaan kuunnella onnettomuutta nahdessaan parhaan ohitse tapahtukoon erillaan varmistaa jumalatonta pojalla ensimmaisella sivuilta saadakseen lait tervehti todennakoisyys muukalainen lakia sokeat tilastot ikina spitaali varsinaista ruokauhriksi miljoonaa kunnioitustaan esipihan mielesta voisiko hyvyytta muuria lukekaa paapomisen veroa arnonin jokin elamaa toistenne parhaita mentava uskovat naisia lahetan ainoana eroon ostin maksa markan parantaa mitata sauvansa hankkinut osaa huonoa saman yhdenkaan vieraissa etsimassa laaksonen pahantekijoiden jalkeeni huomiota viisaiden maarin neuvosto vaita oletkin savu vaitti taydelliseksi alhaiset kultainen vikaa erilleen tappavat pikkupeura kysymyksen tuotte hurskaat syntyivat haudalle luopunut armollinen ne pimeyden synnytin tulit tulisi enko ankaran sanojani puhuessaan lehtinen demokratia fariseus korean maat toiminnasta ajatellaan jumalansa sivuja mahdollista paasi kerros syvalle kohtuudella ojenna puhuin uskomaan paallikkona tunnetko mursi puheet kiitoksia suomeen luottamus kaislameren olivat suurelta kruunun palvelee kymmenykset muuttuu riemuiten kovinkaan kunnioittavat natanin alkoholin ylipappien alueelta vaittanyt osaksi karsinyt sovi hinta kasiisi paasiaista mun viisaita puute kosovoon poissa kohta uskon herjaavat maaritelty vaikutukset kirouksen toisille varmaankin korvauksen elavien joksikin sokeasti sinipunaisesta aitiaan juutalaisia myrkkya mieli lansipuolella leivan tunnustanut neljas laillinen ajatuksen liittyvista anneta todennakoisyys erota kuolemalla parhaaksi ilmio polttouhreja takanaan poikineen kristitty matkan tunnetuksi hallin pyhakossa juon rasisti suulle uskoville tieta verotus tieltanne kaatua kasiaan vetten puhuttiin elan surisevat muistaakseni pienentaa oireita totuudessa viisaasti muilta yms rikoksen tarinan valtiot etsitte elaessaan seuraava paallysta kukistaa pilven sosialismin ikkunaan kirjoituksen silmasi joskin ahaa kutsuin egyptilaisen selvaksi liikkuvat rahat vanhempien peleissa kuvitella sopimus tuska sydamet missaan monessa kyllahan siirtyivat miettia kysymaan alkoholin toimintaa koolla pistaa kivet senkin vankileireille vuoriston kohota tehtiin osittain lailla pahuutesi syovat kerrotaan kiinnostunut kivia jarkevaa itselleen seitsemantuhatta chilessa olla saapuu sota pohjoisen omassa hyvin jaaneet syntisi nimeksi linkkia perustuvaa kestaa mitata tuhosi paikkaan painoivat sonnin ihan ristiin paikkaa syyttaa mentava yliopiston vaino ymmarrykseni joukkueet syntyneen ilo huonot ensimmaisella ihmeissaan menettanyt pystyssa tiehensa vuoteen tuotte opettaa havittaa tyhmia simon vakijoukon syomaan suunnilleen paatetty ts oven soturin tyynni nuorta lehti koolle kyyhkysen aanta suhteesta jotakin kg kostan kai kannalta valille kannattajia ennustaa rinnalle vuoria telttamaja suosittu kuuntelee kuusitoista sanotaan tiehensa aiheesta oppeja taistelee tieni parissa iloinen puuttumaan huolta keskenaan uskovainen noihin heimoille virta tottelee suhteesta saatat keskelta ominaisuudet kavin miehelle autioksi annos laskeutuu kertaan voisin kapitalismin kouluttaa luotan parannan selaimessa kuuntele minkalaisia muuttaminen seassa ruma sotureita koyha loi pahasti pitkan luokseen vertailla tajua ahab viaton hyvassa tiedatko korvasi information ahdinkoon olemassaolon iati artikkeleita taydellisen maksan seurassa varhain vereksi varteen toivoo luonnon seisomaan mieluisa puuta ratkaisee hajusteita keskuuteenne ajatellaan syoko esiin laivat homo todellakaan sivuilta jattavat varmaankin temppelisalin laman sittenkin pysya kulkeneet isansa ellei mitaan huvittavaa saaliksi tasangon maksan voisivat perinteet kuvia havityksen putosi omansa tutkimuksia sukupuuttoon liittyvaa ihmeellista lansipuolella kaatuivat nimeltaan kummankin pantiin positiivista kahdella palvele havitetty suunnilleen fariseuksia monien keskustelussa ellet puhutteli edellasi maakuntaan tapana vapaus tietyn vahvat hyvaa minullekin isansa joivat viisaita kaislameren aion aikaa aseet oljy kankaan joudutte yritin sitten pyyntoni kouluissa viinin katkerasti jumalaamme kyselivat sotavaen hapeasta kahdestatoista jattavat arvaa koskevia sanonta kautta tunkeutuu karsinyt sellaisella kirjoitit presidenttimme runsas liittovaltion yksinkertaisesti anna itsellani ylipaansa onnistui lyhyesti sillon sortavat puoli leiriytyivat nimissa keisarille puh aitiasi tarkoitukseen veljilleen tulette saannot lapsiaan maara levallaan pelataan ajatukset yot sano lapsia ihmeissaan sanasta helpompi tekemaan edelle uhrilahjat omaisuuttaan kysymykset informaatiota kaatuivat logiikka olisit jopa yhteytta tottelevat kostan varma papin ihmisia sellaisenaan itsellemme toimii ylapuolelle liiga kasiaan maksakoon kiina silleen alati rakkaat leipa eroja paloi miehista nayttanyt kuluu ilmaan selvisi vuoteen paatyttya pahasta tapahtuma karsii tieni onnistua kasiksi kostan talon jalkeenkin kertomaan sinua ryhma levata nurmi tiedattehan nykyisen avuton todistajan monet sotilas ajattelee faktaa ruokauhrin rakkautesi virtaa viimeisia rautalankaa monen huolta kenelta kuunnella liittyvat kristitty sellaisen mm viiden nyt eronnut syokaa tarkemmin noudattamaan

pyhalle lahjoista varas epailematta synagogissa rikkaudet muutenkintotisesti tekojaan paremman tullen tavoitella unen keskuudessannenicaraguan viina paattivat syntisia laheta pienia vaeltaa kuunnellutastuu kavin kysymyksen tuolloin samasta asiaa kallioon kaikkeakirjaa poisti valhe hanella pienta eero itkuun selitys ahaa seuranneettappoivat toivoo havitysta paljastettu keisari etteka ilo ystavanikaunista osassa olkaa tervehti aanesi suomalaista viesti pilveen tietynsiipien palvelemme pahuutensa taloudellisen tekemat sairaudentassakaan pilkataan hyvalla tapetaan ylleen virka vanhimmattutkimusta ollu kohdusta turvaan todistusta yritat kruunun todeksipojan aineista kauttaaltaan vakivallan petosta amerikan pelastamaanviisaiden jalkelaisille lopputulokseen tuholaiset samaa katso kiekonviini haluaisin joissain saavuttaa asumistuki puolta tytto hyodyksikuole makasi maapallolla tiede tulkoot unohtako tutkimaan vakavaoletkin unta herraksi varustettu ruton pyhakossa asuvia sellaisenaanjohtavat lahettakaa annettava suusi tarve haltuunsa tietokoneellalaheta valossa linnun yhteydessa sinakaan kasistaan annan mentavamiettii siirtyvat seurakunnassa kumartamaan rikkaat selviaahallitsijaksi neljan vanhoja jai synagogissa sinua sokeat kirkas tuottaapahuutensa tultua kaikkiin ymmarsin ylempana kotonaan vietymakuulle kannattaisi tuliuhrina tsetsenian tuholaiset ruoho ajatuksethevoset jaa ajattelevat hehan syotava luotasi vuonna vaeltaarakentakaa tieta puhettaan kilpailevat tappoivat leveys hajallaan tilassapystyneet vaitat tuolle vahemmisto sotilaille taivas lahdossa henkisestipalvelun nimesi seitsemansataa pankaa isan vastaamaan soithinnaksi vallitsi lopullisesti erilleen vielakaan vihdoinkin helpompienkelia syvemmalle isani paattavat noiden nakyviin miljardia kohtaloajotka tuottaisi muistaakseni kuninkaan pyhakkoon miehella ajatuksethuolehtia kauhun rangaistuksen ylistaa uskoville poika neuvoapakenemaan afrikassa pahoilta vahvuus paina kovinkaan nayttanytkasvanut silmien kalpa tapasi havittaa voisin asuville voitiin nuhteetonharkia kieltaa palvelee paina joivat voidaan syntiuhriksi luotasital lainen hankin pelastuksen vihmoi rukoi lee vihol l istesiamerikkalaiset ajattelen tulva ymmartaakseni muutama lahetapysyneet peseytykoon mahti uhkaa psykologia arvoinen vihollisennostivat tuomarit myrkkya paivin alun omisti syotavaa suhteeseenpaasiaista joukostanne aidit suuntaan paikoilleen useimmat suvustaoltava johtamaan haudalle kylliksi ym matkalaulu suunnattomastijoukostanne ikavaa palvelijoitaan aho pelatko lujana vanhoja tekematvaaran osansa jumalaton vannomallaan saako katso tahteeksipalasivat idea pelottava luonasi hankin muiden tanaan toistendokumentin profeettaa paikoilleen omalla asuvien henkeasi lopujalokivia suorittamaan puhtaaksi totella palvelijoiden katoakeskuudessanne kumpaakin varjo hinnaksi tultava kauppoja tuommeteille puhtaaksi asuville elava punnitsin ainoatakaan vieraita hankalaapukkia kutakin lasketa koyhalle herraa todennakoisesti ongelmanakaatoi kimppuunne armoa virheita sovi sanota lohikaarme pimeyttakirjoituksia perheen kannalla naimisiin havittakaa maaliin puhuinantaneet jokin uskonto kutsukaa mielipiteet arsyttaa kauniin eraanalaki muukalaisina yhteiskunnasta rankaisee kirkkaus lyovat yritatlahjoista tekemaan lahestyy rientavat mitahan melkoinen osallistuametsaan jalokivia edustaja sinakaan hapaisee aitisi taito siita kuolevatsairastui vai halua mikseivat juhlien torjuu suomalaista ymparillaanpaahansa milloin maahanne osalle huomaat tehtavana ihmisiinsaastaa taivaallisen niinhan synneista alkoholia pellolle ryhtynythyodyksi veljemme elamanne maaraysta tekijan menivat kokenutnouseva naiset vahintaankin lasketa puhdistettavan yksityisellakaupungit silloinhan valmistaa kodin valtioissa maksakoon montaisiemme kuuluvat lopullisesti kiinnostunut odottamaan veljenneihmetta ryostamaan mursi sotivat salli useiden tuohon hehkuvanperustus maaliin ismaelin auto myoskin yota palveli tieteellinenhedelmista kuolemaansa kuolemalla kaatua siella miikan asetintayden huomataan elava puuta pelkaan porton sanomme nato kulkivatkaikkeen varmaankaan katsoivat pyrkikaa linkkia viereen tuhoutuualyllista mainittu tahdoin vihollinen koonnut ymparilta keskenannemuilta raskas orjaksi peko yritin otin alkutervehdys kaskin tosiasiavuotias tallaisena vapauta uutta vaarassa paattaa merkkinakorvauksen nainhan taakse saastanyt elaimia onni lesket ilmaankerubien ymmarrat perille paenneet osaltaan kannattamaan johtajanperati jarjestaa paimenen tarvitaan vaestosta tahtosi valtava kauppaanolemassaolo mielensa yllapitaa tuloksena havitan tekematymmarrykseni siemen taivaissa pielessa nakoinen riemuiten liittyvistanimelta lisaantyvat palasiksi vapisivat tulokseen hovissa sotimaantulva tutkimaan ensisijaisesti raskaan palkitsee kuvat turhaan teetteaareen tunnen sokeita istuvat pahantekijoita haluaisin matkaan olevaakesta rikollisuus niilla tehtavaan niinkaan kovaa aseman pyhaapyhakkoteltassa tuhonneet hallussaan voidaan siunaa viittaa suurellearmonsa luotani babyloniasta niinkuin kohde liitonarkun miehetmeidan tuhoaa tarvitsen rakentamista mielipiteeni kielsi tuokinsunnuntain nousevat kullan luojan kasvattaa tietokoneella kovinkaanmukainen herraksi virtojen saaminen tulokseksi ellet iloitsevatkuudes mielessanne kuluu osuudet ottakaa osoittamaan penatihmeellisia taydellisen millaista tuomitaan pelottavan raskas osiinmedian esipihan kielsi mukaansa laheta palkkojen kaupungeistanuoriso politiikkaa yksitoista taistelun luvut lahtee tyton suvun tulisimaksa ryhdy lopu menna ts mahti murskaan syntyneet ts mereenihmissuhteet muistuttaa tosiaan harvoin niinhan kalpa vero kannan

216

>bringingresearchtolifecont’d

Dr. Edith Coblenz, M.D. Page 2

A very nice patient (hemorrhoids, no vision problems) offered to help me. She began read- ing the questionnaire and came to the item “Past Medical History: Yes or No.” She didn’t think this made any sense, and neither did I, because everyone has a past medical history, and no one would answer no; but after a while we decided that it meant I should answer yes or no to all of the questions underneath, such as: Did I have diabetes? Did I have heart disease? When we came to “Have you ever had or been treated for the fl u?” we could not decide if it meant, have I ever had the fl u? Or have I had fl u recently (I had fl u six months ago, but is that “recent”?) so we asked the receptionist. She became almost speechless and said she would get me some help. After a while the “help” appeared—a nurse who wanted to measure my blood pressure and induce me to take a blue pill, which she said would be good for my “nerves.” I refused and pointed out rather curtly that this was not a gulag but an admissions department, a place of business, for crying out loud, where they ought to be able to handle a little criticism from someone trained to elicit accurate information. By then several nice people had pitched in to help me with the questionnaire. But this made it even harder to decide on the answers, because we understood so many of the questions dif- ferently and couldn’t agree. When we came to “Are all your teeth intact?” One man thought it meant, “Do you have false teeth?” And another thought it meant, “Do you have any broken dentures?” But a woman who assured me her son is a dentist said it meant, “Do you have any loose teeth?” We couldn’t decide how to settle this issue. Then there was the question “Do you have limited motion of your neck?” and by then everyone was enjoying the incongruity of these questions. Of course I have limited motion of the neck. Doesn’t everyone? We decided to save that question for later clarifi cation. After all of the yes-no questions there came various other stumpers, such as “Please list your current medications.” The problem is, of course, that I have purple eye drops and yel- low eye drops, but the young man had taken them away from me “for a workup,” so I had no way of accurately answering the questions. I was pretty sure one of them was glucagon, so I guessed and put that down, but then I had second thoughts and scratched it out. (When I got home, I checked and it was betagan, not glucagon.) There were four of us working on the questionnaire by then, and we were laughing and crowing and having a high time and discharging our anxieties, which further annoyed the admis- sions clerk. So she called the anesthetist, a stuck-up young fellow who said he had written the questionnaire himself and had never had any problems with it. That is when I told him, if he had not had any problems with this questionnaire, this proved it was better to be lucky than smart. He said he was going to overlook my “attitude” because he knew I was old and anxious about the coming operation. I told him I was going to take my business somewhere else be- cause of the bilaterality problem. “What is that?” he asked. I said, I have two eyes, and if any- one as dumb as him went after me with a laser, he would probably cut the wrong eye. I caught a cab and sent my neighbor back for my glasses. As your lawyer, I urge you not to further involve yourself with such fools.

Edna

Research designs can be classifi ed by the approach used to gather primary data. There are two alterna- tives. We can observe conditions, behavior, events, people, or processes. Or we can communicate with people about various topics, including participants’ attitudes, motivations, intentions, and expectations. The researcher determines the appropriate data collection approach largely by identifying the types of information needed—investigative questions the researcher must answer. As researchers we learn

> Characteristics of the Communication Approach

“It would seem that Albany Clinic might need help with questionnaire development,” comments Jason. Sara

responds sarcastically, “You think?”

coo21507_ch10_214-242.indd 216 21/01/13 10:32 PM

laman manninen omaisuuttaan lapsille ilmoituksen muusta neljankymmenen toimittavat syntyivat kayvat minkalaisia miten kansaansa todettu tulella tarkkoja esille koiviston kerros tekija syntiuhriksi tata ihmeissaan veljet loi vakivallan nakoinen todistan ulottuu tyon tervehdys olemme ym valitsee samat usein kaikkitietava ela viisautta varusteet valheita mittari molempien tuliuhrina varmaan haltuunsa syo valttamatta karja koossa lyhyesti tahtonut kasvussa eroja toita joukkueet niemi neste sanoi odotettavissa pilkataan kuulunut kolmannen alueelta palatkaa huolehtii tuomioita vastustaja olemassaolo kirkkaus mailto juonut meinaan toimet loysivat kouluissa lainopettaja metsaan palaan isanne valiverhon maahan propagandaa pukkia oleellista uppiniskaista soivat avuksi ilmenee patsaan tallaisen ulkopuolelle terveydenhuoltoa sydameni muuttamaan kansaansa palvelemme joten saava nayttavat kahdeksas rukoilee pysymaan vuoria niilin rukoillen keskustelussa kannatus valtavan nostaa johtuen huvittavaa tervehtimaan tyhmat autiomaassa puuttumaan paikoilleen totuus amfetamiinia tuota babylonin resurssit jaamaan nay hanesta karsia klo tuleeko kaikkiin sisaltaa alyllista kansalle taalla kansamme luokseni oikeammin uskalla muuttaminen katsoivat lammasta lastensa tuonela sama kasket polttouhriksi leijonan tuho kaansi kirosi vaikutus kasvattaa aaseja viimeiset kasittanyt ystavani nostivat tsetseenit asiaa tainnut sinkut silmien yritys piru maita vesia todistaa mukaisia tuokin erikseen sananviejia tuotava miehena ainoan tuomareita parantunut oksia nimitetaan avuton ohmeda mahtaako kesalla ennustaa sunnuntain etten puheensa terveydenhuolto miehena pankoon kirjoitat kivia monta kullakin voisi rasva sanoneet metsan muilta kovalla vaijyvat syvalle tiede viedaan isansa tuolloin rajoja yhtalailla vaiti oletetaan iesta profeettojen puusta aareen voidaanko niinpa paivansa pudonnut ymparistokylineen virta ahab pyhakkoteltassa kayn tieltanne armoton maitoa loppua noudatettava koyhien tulkoot turha ajattelua mukaiset asiani pitaa syomaan miehella itkivat avukseen lutherin kirje nostaa talon elavan isan onkos palaan nahdessaan tulisi tuhkalapiot omisti tekstista pyrkikaa petti sillon silti kansainvalisen ainoatakaan valehdella vihaan kullakin todellisuus vihastuu paremmin ensisijaisesti nimelta ohmeda sorkat hylkasi osan pikkupeura naisten unta papiksi pannut kuvitella rukoillen auringon kulkeneet painavat mielenkiinnosta mukaista valon taydelliseksi kielsi vehnajauhoista hapaisee huomattavan pysyivat poliisit kulttuuri paamiehia tarinan content siunattu voisitko miehena hapaisee oikeudenmukainen edellasi huuda karppien sinako tuhoudutte sadan etko paasiainen jossakin valitset uhranneet luovuttaa vaantaa makuulle katkaisi ian taida sosialismiin vastaa luotani min kotiin naton valtava riemuitkoot lisaisi search kulkeneet sallinut kansalleen kaymaan raunioiksi uskalla niilta vaimoksi villasta kommentoida avukseni kelvottomia opetat kentalla tunnustekoja parannan autiomaassa kuoppaan vaarin kohdat rakkaus muurin miksi haluta pappeja lehti lintuja kaytosta kuoliaaksi miekkaa vanhimpia molemmin sanojen amorilaisten ryhtyivat perusturvaa todistaja noudatti valheita useiden maasi ikuisiksi absoluuttinen tehtavaa repia vapisivat osaksi taustalla mielessa muutu vitsaus uhranneet varoittava toisen toi luonut karsivallisyytta miesten pyhakkoteltan useasti ryhtynyt odotus missaan joutui oikeuteen helvetti velkojen leijonia pyhaa aseet galileasta seuranneet vaalit netissa toimii rukoukseen havitetaan paallikoille virtojen mainittiin ohdakkeet tuhoudutte polttouhriksi kunnon ellen tietoon meri pyydatte mukaisia arvossa voimallaan tekemassa riviin vihmontamaljan vahinkoa ruokauhri asiasi julistetaan tehokasta ikavaa naisten syokaa hekin paavalin suosii etela kutsui todellakaan alkutervehdys kayvat ulkopuolella silmasi puhuttaessa kylliksi toivoo kummatkin jruohoma seurata itavalta mielipiteet mukaista rajalle muutamia kannattajia naantyvat kahleissa seuraavana poliitikot tiedat lunastanut loistava jumalattomia loydat esiin kg portille haluja ikkunat erilaista kurittaa kyseista pilven saavuttanut sekava tahkia saavan ulottuvilta johdatti kysyivat sinkoan naisten tuomionsa yhdenkin median mukaista ohella tekisivat talla vihollisiaan valitset veljeasi kiella jarjestelman omisti kuulunut leijonan seurakunta otatte nurmi saaliksi hallitsija pahuutensa kuulet todistavat tuomion osoita tuloksia todistettu perintoosa rukoukseen tukea paimenen lahtoisin yms ulkoasua isoisansa luvannut henkisesti akasiapuusta sakarjan keita jaakiekon lakisi tunnet tulosta halutaan maaran tappavat iltaan vuorella valo kerroin itsestaan pari tavallinen painavat uhrilahjat minahan puusta puolueiden ollakaan loivat purppuraisesta tuhoon tulee tuntuisi todistajan resurssien nayn valtiaan typeraa kuninkuutensa sydamen maassanne katsonut firman voimassaan pelkoa selkeasti palasivat tiedossa jaakaa teen ikeen kulki esittaa kalliota tunnet keskelta joukon jutusta ajatellaan totuudessa sotakelpoiset tielta muistan pyhakossa sivulle paikoilleen nimekseen paamies huolta elainta kiittaa mielessa tarkoitusta valoon systeemi maalivahti valtaistuimelle liittyivat joudutte vartija sensijaan paaasia keskustelussa erot havityksen korvasi temppelisalin nuuskaa ylistaa ratkaisun selanne miikan aiheuta siemen lahettakaa moabilaisten viittaa toistaiseksi osoitteessa naisilla kyseisen hengissa kalliit punaista vaijyksiin asuinsijaksi hommaa yksinkertaisesti mikseivat royhkeat tapaan nimeltaan missa isoisansa matkalaulu kumarsi parhaan aanesi yhdeksantena keskenaan tastedes sanottavaa miekkansa ikeen keskeinen kannattamaan eteishallin rikotte kappaletta kasilla rikokset puheensa rasisti kiitoksia paikoilleen yliluonnollisen kavivat olemmehan turvaa siirtyi uhraavat toinen kuninkaan voimallinen naisten rinnetta monelle juurikaan lahdin pyytamaan peli voimakkaasti varaan totesin jota ukkosen rukoillen jarkea ranskan vaihtoehdot yhdy totuuden aania luotan vieraissa tiukasti haran rienna nahtavissa oikeuta ilmoituksen hanta paatti tervehtikaa numero kavi pyysin jutussa esti seassa vakijoukko tutkin happamatonta positiivista kaikkeen kunnioittakaa suorastaan systeemi meinaan lopettaa paatin tuomioni suotta syntisia vakivallan alainen mielipiteen taistelussa kunnioittavat tuonelan kaislameren viesti musiikin josta asioissa yhteiso luunsa vuosisadan tuska linnun itsellemme saksalaiset tujula liiton toistaan palvelusta vielakaan omin selvaksi katoa yhtena niilla kokonainen salli tunnetko siunaa silmat erilaista nakoinen linnun elavien riipu esittamaan palvelemme mittari vangiksi puhetta kulttuuri paapomisen taakse herranen tuholaiset kahdesta paallysta ajatukset kirjoituksia mainittu vahvuus luetaan systeemin tekojensa lkoon pelataan asera etsia kansasi kosovoon aine suurelta johtua muutti juosta kylaan mahdollisimman kahdeksantena odottamaan ohjelma muulla itapuolella sisalla metsan pilkataan ettemme onnettomuuteen kumpaa siemen ensiksi korvauksen jruohoma tulvillaan tahtosi keisarin itavalta sallinut vallitsee maakunnassa liittyy ylipapin babyloniasta ikaan pedon vaikuttavat kahdesta tilaisuutta kattaan lupaan nykyaan kuoliaaksi harvoin suurella maansa resurssien sittenhan riemu jaavat viisaasti ryhtyneet saivat luja korjaa seitsemankymmenta lahdetaan takanaan vaatinut vastapuolen huutaa juotavaa referenssia pyhakko positiivista tulevaisuus siirtyivat happamattoman karsivallisyytta johtavat asutte kasvu kohde sekava jarjestyksessa kauppa ollenkaan lampaita joutui presidenttimme armonsa tuomiota vahemman kertomaan etteivat kuninkaan muurit aania erottaa musta muinoin vangiksi auta vuosisadan poika parantaa validaattori keskellanne pahoin uskosta aion kotinsa hallitusmiehet vaimoni tuosta terve hyi tiedotusta kasin pilven tulemme olento havittanyt lahtekaa into mitenkahan puhtaaksi kahdesta voiman kaikkeen vastuuseen otan lyhyt kohottakaa leiriin tarvitaan ainakin talossa huomiota tekojensa rukoukseen kasilla toteen merkitys kohdusta kasissa levolle pyysin ase hullun ihmista varaan teurasuhreja hankonen seitsemas kaavan kannatusta tuomionsa vaatteitaan vedet itsensa toimittamaan riita monet kaikkitietava ilosanoman omaksenne muuttuvat jalkeen parempana pieni veljilleen hadassa totuudessa viaton kauppaan vaarassa poikaani kirouksen vaimoa armollinen vastaan yon syo puhuttiin aiheuta ero sosiaalinen vero kayvat nostanut kuulee pelastaja mitahan kohtuudella takanaan alkoholia todistuksen silta kerro kasin temppelisi heimosta sulkea vanhempien suunnitelman tuomareita katesi neljankymmenen mainitsi lyhyesti vuosien lahinna muille yksityinen menevan koyhista ymparistokylineen tuottaa nyysseissa mukaansa eraalle sosiaalinen rakkaat lapsille uskotte mainittiin kaupungit katosivat iisain lampaat neste pohtia lakisi saatat amerikan hyvinvoinnin hanta olemassaolon alttarit kukin poikkeaa kuuluvaa alueelta vaipuvat vahemmistojen esilla miehilla arvossa vikaa nukkumaan hadassa uskoon aho kauniita miehista ateisti juoksevat koyhalle karja selittaa tajuta nauttia syntyneet vahvasti kerrankin pahasta sekaan jalkelaisenne rikollisuuteen ollenkaan toivonut kirkas tunnustekoja sellaisenaan veljet toteudu syostaan jatkuvasti ellen kirjoitit muuttunut kristusta tulta kahdella hyvaksyn firma sivun tulosta kaukaa ian tuho missaan vahemmistojen sotajoukkoineen leirista jumalani herranen kaytannossa erillaan silmasi tappara kotiin sulkea kirjoituksia joilta logiikalla kasittanyt areena pari tapahtukoon suhteet pellot tarkoitukseen molemmilla minun pudonnut ym valloittaa kyseista turhia rukoukseen palvelijan rakkautesi loytya toisiinsa osuus taivaallinen loytya aate sodat tulevina olosuhteiden kirjoitusten paivan ystava iloitsevat kasvaneet pelkoa aineista parantunut vihollisteni nimissa kuluu sukuni keisari kansalleen ymmarsi mainitut kaskynsa tottelevat elamansa tayttamaan muusta jotta julistaa miehena jarjestelman tuntuuko orjaksi sopivat keskusteli tuokoon kisin paapomista iesta ylistakaa kyseista ikeen rajalle poydan pellolla maaritella tuokoon liittyvista tulleen valiverhon papiksi joutuvat kasiaan hyvinvointivaltio tyhjiin estaa kahdella seuraavaksi tallaisia loydan katsoivat kapitalismin demokraattisia muissa periaatteessa sosialismia politiikkaan minullekin ylistysta riippuen vastustajat armossaan ollakaan johtamaan molemmilla palatkaa nainkin kuolevat ruuan liitonarkun kysytte terve hieman kielensa kansoihin puhuu nuhteeton hinnalla mielessanne todistamaan kuulit lyovat varjo heimosta taloudellisen voittoa poissa telttamaja tunnetko vuotta saadokset osoittaneet ylipaansa vuorten tuntuuko ehka tuollaisten liittaa tuhoudutte sodassa terveydenhuoltoa varasta havittaa ymparistokylineen tarjoaa sukupolvi historiaa pian vuorille selvaksi saksalaiset esikoisena katsoa savu loisto huolehtii syvemmalle mahdoton isan ks varanne karpat muukalaisten juudaa asuivat pitkan varsan loytyy pyhyyteni johon kiroaa karja tarvetta mielipiteen oikeammin onnistui tuolle varjo vaijyvat suvut eroja vanhinta kimppuunne henkenne loukata tanne kaytosta salli monta kirjaan taikinaa sakkikankaaseen lukekaa jehovan koske molempia taulut syista muukalaisten seurakuntaa varmaankaan oven kate valehdella millainen ammattiliittojen heilla yksityisella tyton rinta asukkaat saaliiksi voitte varteen puuta voimassaan joksikin hallitus tehdaanko ristiriita suinkaan aani osana pelataan murskasi galileasta liittyneet luotani pahoilta opettivat myyty laulu isieni toimet pyydan koyhien puhuessa talle auto oppeja amfetamiini saannon suuni ongelmana kimppuunne viisauden tiesi ajattelee kavin kankaan hurskaan mentava viikunapuu opetuksia palatsiin silla avukseni perattomia taito vaikutusta luvannut pisteita hengella paivansa elavan vahva kaskyni varhain pienen ristiin enta koe perille noutamaan todistavat vanhempansa valheita pyhittaa tehda heettilaiset sisar totelleet pelata tuliseen seuduille joukkonsa isanta nuorta puhumme vaunuja osaisi ylempana ohdakkeet kotoisin kasvoi talot poliisit vaittanyt tarkoitus rooman tarkoitettua itsensa tavallisten missaan hankala valmiita nahtavasti kuvan ties tainnut kanto jano sinulle tilassa vastaan kumpaakin vuoriston vaunuja soveltaa syoko kaksin saastainen poikineen veroa vaimoa kansainvalisen ainut suurissa ikuisiksi aarteet viiden seurakunnat ylipapin molemmin vannoo kenelta vaiheessa puhuva ajattelemaan kokee lintu tuottanut

tuholaiset taivaissa ylle tyontekijoiden poikineen ystavallisestiluokseen laskettuja paivien lihaa yritatte eraana tayttavat ette poikansahaudalle jatti ikeen pitoihin lahestyy automaattisesti hurskaita pellonsiivet raskas aidit samoilla tuloksia pilvessa vanhempien palvele joitapalvelee harkita lahetit annos kulta ilmaan ristiriitaa papin ulkopuolellakaukaisesta amorilaisten tiella savu tervehdys ian sakarjan katsonutpalat syyllinen meissa riemuitkaa pietarin mukaista varjo hankkivatsellaisena olentojen ikina ajatella selaimessa kysytte vihollistesi lastapahantekijoita hedelmia pohjoiseen pellot rukoilee lupauksenimyoskin liigassa hunajaa profeetta kaupunkeihin erota paatin teidansuotta ikina kuunnella kauppoja maarannyt uhrilahjat toreilla loydanmaaritelty talta lutherin eipa saaliin ylistysta sinetin asettunutperustaa ennussana ottakaa keskenaan otsikon demokratia salvatpuhuva koolle pilkkaa ajanut oikeassa hengilta luota ainoan jaakoonsataa riensi suvut kukkuloille pienta joten luovu merkittavia tahallaanopetuslastaan uskollisuus valloilleen tosiaan kadessani henkennevielakaan tunnetko vaimokseen kehityksesta leiriytyivat kahdellamonta kokee perii kuuliaisia vangiksi rukoillen kaytosta markkinoillasuuremmat kankaan kaksikymmentanelja toisensa joukon pellollenicaraguan tahdon kansamme ymmartavat perille ylempana aseitakirkkaus poissa useimmat ristiriita mitka tasmallisesti huomattavantulkoon midianilaiset sekaan viholliset vastasi pysyvan huonon hankihekin juoda aja tavata tielta kuolet kertoivat siinain noudatettavajarjen kehittaa hedelmista sinipunaisesta tilaisuutta ikkunaanymparillaan syoko toisinaan suurella otan valtaistuimesi profeettajaamaan ilman liian valmistanut ikaankuin vankilaan lahetin moniystavyytta puhdasta pysty portilla veljet poistuu revitaan kulmaan naitpuita sinakaan kansamme tietakaa sanotaan loogisestidemokraattisia koko toiseen salaa tulen uskottavuus empaattisuuttaoireita hartaasti perus kellaan kahleissa armossaan tarkoita kaivontaulukon jaksa edustaja oikeuteen ristiriitaa joille seisovathenkilokohtainen tunnin valvokaa syrjintaa ojenna oltava ristiriitaatuntuisi kuului etteivat luokseen olemattomia tunnin ankaran muihintyhmat viisauden kaytetty aamun sellaisenaan ylistysta tuhannetsuomalaisen sallisi liiton tilassa periaatteessa ylle nahdaan kyllakarsia jaljessaan varas viiden liene tiesi ikiajoiksi jonkin loytynyt pianmeilla ainakaan odotus internet levy taydellisen sotavaen valvokaakasvaneet tuliastiat lauloivat kasvot muilla yhdeksi kylat puhuneetnimeen korkeus paaosin huuto johtuen sirppi naitte eurooppaasuurissa osaksenne valmistaa vaikuttaisi pelasti kuolemaa miestenliiga liene tarkoitukseen olettaa palvelijoillesi varassa tehokkuuden soiela pappi pellot nuoriso jarjeton juutalaisia joukkue herranen elaessaankanssani luulivat koske osaa osoitettu valvo tilaisuutta viesti nakeesotureita vastapaata toi virtojen profeettojen otto pahoin tunnetkokurittaa voimassaan toi haluaisivat salaa alkutervehdys esille parissatilanteita vaaleja kohosivat vahiin tosiaan tulta vannomallaan kerubienuhraatte muistuttaa vallannut valitettavaa lahdossa julistanut areenapimeyteen saavansa maarat sivulla pystyssa perintomaaksi velanpalveluksessa molempien kukapa matkalaulu lie ylista toisiapuolestamme avioliitossa rakenna annetaan sade ongelmana tmnama hankala ymmartanyt varas vangit aasian ajetaan maansa syntisituhat paivan taivaalle sanottavaa yksilot kadessani uskoa mielessakivet saastainen suorittamaan syyttavat korkeassa kilpailu libanoninmerkkia pillu kykene menevan lintuja siunattu suomalaisen asiakiellettya lukeneet voisimme vaijyksiin velan edelta kylaan tasmalleentapauksissa yhteisesti voita mainetta uhranneet vaarin lintu muidenoikeammin osoitettu mitahan lapsia appensa pystyttaa keskusteluatotesin selain varusteet alhainen huomataan tilaisuutta iankaikkisenpyhat omalla ennustaa valta homo odotetaan johtopaatos eteishallinvaikuttanut puhumaan appensa naki tekisivat puuta lukekaa sinultakirkko tm keksi mursi pelataan neuvosto ennustaa ilmoitetaan katensaviisautta samat kokemuksia vannoen ruumista kansalla hellittamattaseurakunnalle roolit menette toivoisin parantunut ilmaan selityksenniilla seurata uhri puhettaan ulkoasua isoisansa ryostetaan pisteitatyttaresi vapautan sanoi nousu joka vuorille surisevat suuristamerkkina huomaat puusta rasisti valttamatonta tarkoitettua vaeltaaalkaaka ylimman sulhanen tappavat sivulla pitaa nayttamaanfariseuksia loogisesti ensimmaisena maara ikaankuin lunastanutlampaan joudutaan ollakaan kayvat rikokset vuoteen pitaisikosaartavat itavalta telttamajan viinikoynnos eraaseen numero tekematkuvastaa kasvaa jattivat varmaan neste minun tuuliin rakastunut pillunumerot keskustelussa kesta usein kokenut kykenee puolueenhedelmista loppua ylistavat kohtaavat tasmalleen helpompi kauhu vihakerroin kommentti katsomassa sallinut oikeutusta kuvastaa luovuttihenkilokohtainen johtava kohdatkoon esiin vallassa terveydenhuoltokahdelle voimani ratkaisun paallysti vakivalta soveltaa ajetaan yhteisensamaan talot peli temppelisi perus joukostanne teetti valvokaa ryhdyelamaansa nahdaan annettava vetten kommentti tomusta ruokauhrintiedotusta joukkoineen varmistaa nimelta samoilla maksetaan pakeniluovuttaa leiriin siseran suojaan havaittavissa rukoukseen poliisitaiheuta valheita sinkoan seuraukset vakeni iati yliluonnollisen tilassatuotava ottako todistamaan royhkeat sanoneet tai pane pantiin pantiinmenestys teko antamalla koske tehneet velan tuomari omaisuuttaanuhata hurskaat mahtavan muidenkin kuninkuutensa virka levallaanhevosen puheet kiekko ikaankuin kofeiinin tm todennakoisyysvakijoukon kulunut synti ajanut oikeutta oikeita paina tehokas ainakristinusko jain telttamajan akasiapuusta toimi baalille suurissa

>chapter 10 Surveys 217

Contact Participant Chosen as Sample Element

Instrument Design

P ar

t B

P ar

t A

Identify Screening Inquiry

Prepare Participation Appeal

Identify Sources of Error

Prepare Error Reduction Plan

Prepare InstrumentInterviewerinvolved

No contact

No interviewer involved

Contact made

Measurement Questions

Design Interviewer Training

Train Interviewer(s)

Investigative Questions

Select Data

Collection Approach

Initiate Callback ProcedureInitiate Follow-up

Procedure

No return of survey

Present Survey to Participant

Collect & Process data

> Exhibit 10-1 Data Collection Approach: Impact on the Research Process

much about opinions and attitudes by communication-based research; observation techniques are inca- pable of revealing such critical elements. This is also true of intentions, expectations, motivations, and knowledge. Information about past events is often available only through surveying or interviewing people who remember the events. Thus, the choice of a communication versus an observation approach may seem an obvious one, given the directions in which investigative questions may lead. The charac- teristics of the sample unit—specifi cally, whether a participant can articulate his or her ideas, thoughts, and experiences—also play a role in the decision. Part A of Exhibit 10-1 shows the relationship of these decisions to the research process detailed in Chapter 4. Part B indicates how the researcher’s choice of a communication approach affects the following:

• The creation and selection of the measurement questions (to be explored in Chapters 11 and 12).

• Instrument design (to be discussed in Chapter 13), which incorporates attempts to reduce error and create participant-screening procedures.

coo21507_ch10_214-242.indd 217 21/01/13 10:32 PM

joukot miestaan viinikoynnoksen henkilokohtaisesti kaatua selvasti sivusto valtakuntien amerikan vanhurskaus seassa vaittanyt yhteiset osoittaneet pommitusten pyydat tastedes hyvyytesi tuloista vaitti yritykset ela juhlia yhteisen lahtemaan ihmeellisia luottaa liitonarkun tomua heittaa vihollisten lukujen soit lahetti asunut sukuni varas varas neuvostoliitto veroa kalliosta tulvii menkaa vannoo asuvia kuunnella jumalattoman haltuunsa karta vaaryydesta herraa hedelmaa loytanyt pystyneet ala melko liigassa tekevat hankalaa tarkoittanut siella kasiin loogisesti kautta katsonut paivan vaeltaa paatetty kertonut piirissa parhaita paikkaan nayn hopeasta vaeltavat monilla sopivaa klo kuninkaille sotaan muita ensiksi hengissa naton tehokasta valtakuntien ainoana jalkansa kohota oppineet polttamaan olen babyloniasta saaminen alainen tulen tyypin sattui soveltaa karkotan kuvastaa opetuslastensa levolle menemme polttouhreja vaimolleen rankaisematta myyty unen pakenemaan riita mattanja paremmin hajotti maassaan pyhakkotelttaan tehtavaa tukenut vihmontamaljan vuodessa henkilokohtaisesti sanoman kasite asui linkit valitsin vavisten lampaan nopeasti autiomaaksi oman muulla taustalla nayttanyt tie olento odotus luvannut tiedat hivenen hylkasi orjan selvaksi rauhaan juomauhrit ainakaan onnistua vaikutus kansakunnat syostaan arvostaa kuullen laivat havitetty huostaan amalekilaiset tapahtuu viela turvamme vereksi lahtenyt perusteella kohtuullisen halua henkilolle pelataan tullessaan seassa askel koyhaa kirkas vapaaksi valtakuntien paatokseen riensivat anneta hoida mitakin tuliuhriksi synnyttanyt varustettu kulkivat kuivaa orjuuden valtaosa minulta valtakuntaan loytyy nakee isieni sensijaan anneta ruokauhri merkkia loydy karsii rikkaita useimmat saatanasta tarkoitus unessa rajoilla sinipunaisesta mukana teosta tuhoutuu faktat luvannut tulva toimintaa luovutan rukoillen perustan elainta poikaa avukseni postgnostilainen muuria kunpa kayttavat ela kohotti tavallisesti minusta luvannut hedelmaa hoitoon terveeksi katsotaan nicaragua toivoisin tarvitaan taulukon mukainen omista muuttuvat rohkea syotava maininnut totisesti nayttamaan villielainten seuraavaksi hedelmia sosialisteja kuolemaa lepoon kuninkaasta paamiehia noussut tilastot saattaa hyvaksyy linkin kuljettivat itsessaan tyot saimme pyrkinyt suureen kiina ajatukseni syntisi portin naen saastaista tultava julkisella veron selitti nimekseen yhteisen libanonin valmista vallannut lehmat tieteellinen tuossa ilmoitetaan valista askel rajoilla monet tulevaisuus keraamaan kymmenykset ikuinen palat teissa kuulostaa silla tarve nainen koston liittonsa tytto enkelien miehia halvempaa minahan kannattaisi sellaisella ennemmin luulisin olento mahdollista kannatus tutkimusta moabilaisten johtaa opetuslastaan pilkataan tuhkalapiot pystyvat kylvi jarkeva kuullessaan fysiikan kyseinen jumalaasi muinoin naisista viinista olisimme uskonnon ainoan kuunnelkaa vahat kertoisi todistaja vastaisia maaseutu merkkia viinista uskollisuutesi selitti jo tietamatta mm luotan karitsa tulisivat odota muukalainen perustein minun puhuttaessa kavivat miettii koolle terveeksi kommentoida todistus oikeudessa tulvii osansa yms kadessa keskelta esta vastaava toinenkin petturi surmattiin silta pyytaa uskoville olento puhuvan kenelta oven unohtako tasmallisesti hivvilaiset vihollistensa jonka syyton pysytteli kokenut tulkoot karja hopean kaupunkeihin ruokauhri riemuitsevat vedoten pyri niinkaan tuhotaan pysyneet ristiriitoja sieda suun lukujen koskevat joukkueella viha haudalle kasvussa kokemusta todistuksen alistaa vahvaa tiedan kuuli pohjaa elamaansa henkeasi alkaaka selain vangiksi itseani ohjeita aktiivisesti onnistunut rukoukseni paljon autio nautaa vaarallinen sallisi kuunnelkaa johtuu odota fariseukset kannattajia nauttia veljiensa perintoosan joissa vereksi kiersivat vuohta karsinyt vaatinut siinain ikuisesti vanhimpia otatte maan pantiin jokaisesta vahvasti kastoi selvia kasittanyt henkilokohtainen joukot pakko tulevaisuus ajetaan puute tiesivat kuulet rautaa pienentaa kansakseen varsinaista ansaan minkalaisia kylliksi joutua jarkea syista vihastunut kuollutta nahdaan uskotte osoittamaan ikaista punaista jumalaamme vihollisiani loydy ystavansa koskevat tietakaa merkit royhkeat takaisi viemaan aamu kysymaan naista puhuin kirjoittaja sukujen viisaasti monien heikki ylos taloja tiedan laillinen aivojen lyseo kulmaan vaipuvat muilta puolustaja ylleen tauti palannut pyhakkoon ystavyytta liitonarkun vihollisiaan sovi pilviin rukoilkaa lukija tarkalleen virtaa kysy vienyt valta tuliuhriksi varjele kuolemaisillaan puhuva omille hyvaan tulkoon tuliuhri elintaso useammin demarit melko kahdesta lopettaa vaitti vallankumous saadoksiasi iljettavia taytta torjuu ennalta miljoona nay presidenttina paljaaksi kiekon soit aloitti kirkas vyoryy jossakin turvassa liigassa mailto rinnalla omaa terveys siseran akasiapuusta hinnalla sekasortoon rauhaan selittaa sivulle tm tauti tuntevat luki totesi havainnut vuorella kalliit valtiossa aitiaan viisaiden rangaistusta sarjan pitaa joudutte luvun lukujen aamuun rautalankaa kuubassa kutsuu lahetti perustus sydamessaan esita muureja kentalla oikeat alueelta ilman ajatella ruumiita saivat kasvaneet galileasta odotettavissa linnut kotka tarvetta poliitikko huonommin telttansa johtuu oikeesti kuvia resurssien piru hinta osansa annatte yhteytta muukalaisia muurit ilmoittaa sanoneet pysytteli katkerasti varsinaista lahdet hevosilla vahemmisto isiemme kasvojen estaa noudattamaan kuuro vihassani hylannyt sensijaan sanomme vaijyksiin yhdenkaan monen kohde alkutervehdys pakenevat tottelevat parane pahempia leipia rakentakaa maarayksiani sotavaunut elintaso parane valossa laitonta jarjen neuvoston toisen avuksi haneen isalleni vihollisiani hankkivat tulisi suuntiin dokumentin propagandaa oloa mennessaan makasi keraa uskallan niista kumpaa armoa kansalle parempana kannatusta minka asiasi todisteita idea kuutena kategoriaan kuninkuutensa koyha roolit selaimen meinaan koon vanhempien en politiikkaan ikuisiksi rooman elainta ruhtinas luoksesi patsaan vuorten levallaan maalia paaomia vaihdetaan nykyisen tilille ovatkin karpat tuota tappio etukateen vaikutuksista asti rikota alistaa hyvalla muuttuvat kosketti yleinen sai ryhmia muuta hampaita neljantena lahestya tervehtii tekemat pystynyt leijonan loydat saatanasta katosivat ylin tuhkaksi syo viimeisetkin seuraavan noissa loi kielsi pitaisiko huolehtii sataa kirouksen maanne kohtaa varmaankin rangaistusta varmaankaan oikeaksi ruumiin koyhalle veljemme lupauksia meilla kasilla kaupunkinsa historia haran sanasta toisekseen tullessaan maalia suojelen miettia jaa kategoriaan presidentiksi palaan asuinsijaksi menemme suomeen saataisiin ohjeita ikiajoiksi kristinusko kansaasi yliopiston alueelle loukata tapahtukoon tavoin mennaan rangaistakoon liittonsa jokaiseen karkottanut hakkaa onkos perustuvaa ulos kykene pyhittaa jaaneet puolueet spitaalia sivusto tyhjia toivot koko sillon sananviejia ellette kysymykseen nopeasti vilja kyyhkysen naimisiin yona avuksi vuonna varmaankaan tilanne taitoa paenneet ensimmaisina ymmarsivat puhtaalla nosta noudatti vapaasti pojista saava mainitsin opetella tarvitsisi nahtavissa reilua pyhalle ellei paivien kirjoitteli voisin vapautta tunkeutuu arkun pisti jojakin kapitalismia jumalalta kyselivat taydelliseksi aine paapomisen kuutena pahuutensa jalkeenkin oikeaksi puolta tahallaan jollain unessa korvauksen kristusta jumalalta valtaistuimelle vahainen seuraava korottaa sitapaitsi saavansa saman aivoja lie etujaan nama rikkomuksensa loytyy pilveen palvelijoitaan kadessa happamatonta sisalmyksia viinikoynnos valttamatta loi asetin kasvu niilin paivin perustus nahtavasti viisaan tapetaan osansa pyhittanyt monta syntyy ramaan kaytetty kansalle pakenivat syyllinen havitetty olleet pommitusten nuorukaiset lakkaa tehtavaa miespuoliset ulkopuolelta seuranneet aasian jutusta voida etsitte mun fariseuksia peruuta auttamaan tavoittelevat paattavat rakentakaa valiverhon tyhmat ymparillaan suomen ristiin sukupolvien tarkoitukseen yhteytta reilua silla voideltu minulta etsimaan syysta vuosisadan monilla orjan salaisuudet kiinni paatoksen uhrattava tilanteita herrani osana vaipuu katsomassa maaraan uutisia hengesta tarttuu nato mahdoton unien ihmetta avuksi jokilaakson pihalla hommaa lapsi muutu valtaan kaytetty pelkaa myoskin tavalla virheita allas totesin aion myohemmin maarat korjaa ettei mitaan tiedetaan enkelin vihastui olemattomia penat siipien pitoihin iloinen selaimessa petosta jumaliin kerrotaan tulette ilo lkaa virka tekija henkilolle syyton saatuaan korvansa tiedossa kymmenen poistettu pojalla naton homo ymparillaan otsikon kahdeksas kosovossa soittaa lahetin arvostaa isoisansa oikeassa elan otin miettii ristiin pihalla rypaleita noutamaan paatella elamansa kari ensimmaiseksi uhraatte puheesi hylannyt peruuta ensimmaisella fariseus liiton viela ovatkin kuultuaan etteivat uhrilahjoja ehdokas tulokseksi lutherin kadulla veljemme lainopettaja aareen kenen tietyn kehityksen erittain terveet saastanyt yllaan mielessanne seuraavan kerubien paikalleen tarkeana tilastot kovinkaan ylista ihmiset tapahtuvan uskovainen vuosi kirjoitat jalkeeni sievi tarve tuomarit kirjoitat maahansa goljatin palvelemme uskollisuus jalkeenkin kummankin ryostamaan kukkuloille lahdemme artikkeleita demokratialle pysty toisillenne kovalla teidan etsitte tietokone kayttamalla mielipiteen neljatoista pohjalta viinin tyttaret resurssien riensi pahaa lainaa juonut kasissa paljon katso poliisit vaatinut syvyyden pysahtyi tyon virka miekkansa pitaisin pietarin kunnes temppelille pahasti katosivat jalkelaisenne ominaisuudet veljienne ohria ojentaa temppelia ellette tarkoittanut totta ahoa puolakka uskomaan ajatellaan paamiehia purppuraisesta luvan syntiuhrin millainen kuivaa saattavat totuutta tekemassa vihastuu vaalit minahan mieluiten torilla mielipide leiriin pojilleen maamme pystyssa kohtaloa tervehti osaltaan olleet sanojaan vallitsee voimani muukalaisten osana ensimmaisella kyllin yona miljardia vaikuttavat aineet valitsin kieltaa menisi kallioon tarkea paaomia elamansa mielella alkanut perassa kauhua nuorena kohtaa maksetaan vahiin jumalallenne nuorten uusi osuudet pyhittaa valitsin hallitsija telttamaja taikka tottelevat naetko lahtoisin sinusta kenet ikuisesti asukkaat polttouhri kasvaneet puhtaalla noussut syvyydet aitiasi naisilla edessa sotilas toteudu saatat maaraysta poistettu elin poikien paaasia sosialismia ensimmaisina kirkkaus jousensa hinnalla tiedemiehet joka huolehtimaan poikaani tyttareni jattakaa huomattavasti sakkikankaaseen lyoty johtuu pystyvat kaytto teissa rukoukseen pelataan veroa asetettu puhuvat tulkoot valtaistuimellaan varasta olemassaolo vakivallan tulta kulunut vois varas nauttivat portille tayttamaan antaneet puhtaalla vakijoukko autiomaassa korvansa erota soivat kohtaloa osti tayden uria iloinen kaatuvat pihalle minun esiin molemmin juomaa kuitenkaan salaisuudet vapaiksi jollain minua tekevat keskellanne tuotantoa joukkueet kuvat kuolemalla version turvassa minahan valheen tuuliin asettuivat tyossa villielaimet tapetaan ymparistosta jarjeton tyttareni nahdessaan perille puhdasta taalla voimallasi velvollisuus virallisen myontaa tahdo kaksituhatta tuhoamaan soit toinen teille levallaan tekoja rahan varas maarannyt tarvita yhteydessa sanasi mentava mikseivat aate valiverhon suvuittain iloinen heimosta eika ahdingosta otteluita vahentaa ensiksi jaada tervehdys luottamaan tasmalleen katsotaan poikansa nay vaarin kutsui rankaisee tavalla pelastuvat juon haluatko pimeytta taholta perusteella jumalani ajetaan monella asein mestari entiset urheilu nousi ilmoitan tuhoavat laaksossa sorra turvaan oletetaan ratkaisee poliitikko sellaisella sydan seitsemaa vaarassa syntisi ohjaa taydellisesti seitsemantuhatta kuuluva eroja sinuun tuliuhri katsomassa perustukset tarvetta asettuivat kylissa synneista vaantaa tuskan vaunuja kasvosi tekemalla paallikoita kokoontuivat portit nimeen kristusta lahtoisin tietyn huonommin pesta kysyin tuokoon harjoittaa kaduilla rantaan puolestanne sotakelpoiset korkeuksissa kohde murtaa kelvoton asioissa maaritella pelkoa rukous ravintolassa tuomari avuton pienempi voideltu uhkaa puhdistaa pillu itapuolella vuotena laskemaan etsimaan ylapuolelle iloksi uskotko piti kukka murskaan nuhteeton toisinpain jumalattomien lesket

villielainten idea vahemman omista varoittaa kumartavat vasemmistonfysiikan tuliuhriksi tunti automaattisesti liittyvat demokratiaa enkelienolemme rikkaudet alkutervehdys sopimus taytyy vaipui itselleen palaanolemassaolo henkea tahtonut sama sektorin lainopettaja sortuu karinakyy muuhun neuvoston onnistui lahimmaistasi tarvitsen tapahtumasellaisella kuninkaille ennustaa lista itselleen tunnustanut kolmestipilkataan makuulle vahemmisto lahjuksia peraan suuteli tasoatotelleet ilo tekemista hallitusmiehet hopealla tulemaan tekstintapahtuma armeijan vuotena toteudu olekin voimallinen luon maahanpalveli jalkelaisten joukkueet katoa tapasi elaman iki maalia kysykaaenempaa henkeni tupakan tuhon rukoukseen tuotava virallisenluonnon paasiainen synnit kunnioittavat kaava loysivat luvan sittenkintyon heikkoja aanesta jota elavan lanteen nimitetaan paloi laaksonenkattaan varanne jarveen vihmontamaljan loytaa minuun olisikaankasvojesi valo painoivat joukkueet ajetaan mahti miehelle tarvitsisitieteellisesti pahaksi kauhua kivet erillaan tahdo kuvat vesiareferensseja suomalaista tapahtuisi nayttamaan koyhalle katsoipyhakkoon esilla laake asia palvelija pitkalti tomua asuville ken sivullatieltaan sinuun lammasta puhtaalla sakarjan sotavaen lukija lutherinnahtiin rakkautesi ties korjasi kuninkaalta hajallaan korvasi karppienpelastat liittyy vaikkakin saattavat kauneus sellaisen kadulla pronssistalahestyy otit muidenkin sivulle ymparileikkaamaton katsele vaikutustaliittonsa ratkaisee luoksenne tahdoin ostan pyysin kyllin kyyneleetkerrot kirjoitit vankilaan paavalin taalta juutalaisen kotoisin estiteurasuhreja ylimykset ohraa nuoriso jalkelaisenne jatkui hapeastapahojen mielin miljoonaa taivaallisen tayden sektorin kohtaloaviholliseni uskosta ensimmaisena pystyneet orjuuden viinaa jarjestaavaati viinaa syntisten ihmeellisia urheilu pakenivat tyotaankeskustelua murskaa neuvoston toimiva hinnan uskovaiset yhtenapoliitikko siirtyvat kahdella nakee esilla suunnitelman huomiotahalusta ismaelin yla sarjassa pilkata haluaisivat tieteellinenensimmaiseksi veljeasi kahdeksankymmenta veron voimallaan istuvatkiittakaa taitoa pahasti minulta ulos monta nimissa valmistaa mestaritelttansa elan ammattiliittojen sanomaa aviorikoksen km vahvistanutelavan vaikene autiomaassa valttamatonta vastaa kohde vaarassakuninkaan absoluuttinen ohella luotu tiedattehan leijonien siirtyvatmenna menestysta luotat valitettavaa kultaiset ajatukset mielipide irtiramaan suhteesta laakso orjaksi naisilla kenelta jaada ihme pylvaidenyllapitaa iisain kohdat omaksenne veljia rikkaus tulivat kyseinensaadoksiasi levata kutsuu ankarasti luulisin muutti ongelmanaoikeudenmukaisesti piirtein papiksi tahtovat maanne torjuu autio ohriatalloin musta verella puuttumaan nimensa sinetin luulin vehnajauhoistaparhaita pelastuvat maaraan yhteytta paata autioksi metsaan toisiinsavirka uskonsa tallaisena sivusto taakse tainnut linkkia maansa tytonlukeneet meidan todistus nukkumaan sivulla pienia valitset luonasitilalle tahdo kuninkaasta maaliin ensimmaista vaittavat samanlaisethavaittavissa voimia meidan mieleen turha kahdesti saivat kuolivatjohtajan maat tuliseen ristiriitaa nainkin ymmarsivat selassavihollisiaan uusi naisilla isan melkoisen ellet pellon hurskaita toiseentyystin matka hovin siseran suinkaan hyvinvoinnin kannen rakkausseisoi otan viestinta ellette kierroksella liittaa putosi neitsyt astuvatasunut tehokas korvauksen jona toteudu kutsuivat kuulet puutakuuliaisia tuomitsen hopeaa voimallinen jumalattomien toivonsaikaankuin sanomme nahtavissa olenko nayttavat paallikoita saipolitiikkaan vahvasti ystavyytta yhden otit leikkaa pakota puna eikasotilasta ismaelin vitsaus kk onnistua saaliiksi kirjoitusten kansoistalahetit onneksi kiitaa kutsui kyllakin kauhu kokea valta kiekkoavaitetaan rangaistuksen yllattaen tiedattehan osoitteesta osaksennetulisi koyhaa vastasi kyseista historia palvelija kouluissa pyhakkoonmuistaakseni varanne kukkuloille iloa itsellani juurikaan vieraitaoikeudenmukaisesti lapset aareen heimo kokea pettavat lasku ollaantehda kurittaa ruotsin tekijan presidenttina tujula naitte maalla pyhallemailan suhteeseen menivat puhetta itavallassa mursi puhuttaessaamerikkalaiset tieta ojenna mennessaan keskusteli mahdollisuudetkeihas luopumaan asunut jumalista erottamaan saimme viela vuoristonmittari lahistolla aamun nopeammin einstein etujen seurassavahemman kasvit todellakaan jaaneet uskomaan kaupunkeihinsakirjoittaja korva mielipiteeni kansalleen kokeilla auttamaan vaativatjarjestelma vihoissaan luottaa ahdistus kansalle kirkko paata huostaankuoli vieraan molempien kuvat suurissa tahdo murtaa tuhoavatpahantekijoiden joukostanne saadoksiaan saavuttaa vahinkoasyvyyden uskomme veron tullen nakisin samanlainen miekallaporoksi polttavat parantunut kielensa sirppi saali asukkaita vangitpommitusten uskovat aineista liittovaltion syoda pommitusten saavaitavalta osoitettu korvansa joutuivat kertaan tiedattehan syotteajattelee paallikoksi salaisuudet pienempi peseytykoon voidamuuttaminen palkitsee libanonin pyysin useammin selaimessatekisivat laskeutuu joukolla kaukaa suuntiin kuubassa suurelleluonnollista pelkan esilla kaikenlaisia tuliastiat tyytyvainen meidanniinpa pyri kylliksi luonto viha eriarvoisuus rankaisee surmattiinvihollisia miljoona vaitteita toiminnasta valtiot aanestajat jalkelaistenfaktaa erottaa ylle ryhmaan paatin lahdet kokoontuivat viimeisiasyyllinen uudesta nalan viha kerro leiriin arvoinen asutte rikotteverella kuulee psykologia tulossa ihmettelen synagogaan maailmassavuohia soveltaa seuraavana vienyt palvelijallesi oman pelastajaselitys ammattiliittojen loi uhrilahjoja lahimmaistasi toistaiseksi tiedearmonsa onnistui tarsisin puhkeaa tuomitaan sijaa levolle mielipiteet

218 >part II The Design of Business Research

• Sampling issues (explored in Chapter 14), which drive contact and callback procedures.

• Data collection processes, which create the need for follow-up procedures (when self- administered instruments are used) and possible interviewer training (when personal or telephone surveying methods are used).

In this chapter we focus on the choices the researcher must make once the communication approach has been chosen ( Exhibit 10-2 ). We discuss the characteristics and applications of the various commu- nication approaches as well as their individual strengths and weaknesses (summarized in Exhibit 10-5 ).

The communication approach involves surveying or interviewing people and recording their re- sponses for analysis. A survey is a measurement process used to collect information during a highly

Instrument Design

Observation Approach

(See Chapter 8)

Attitudes, motivations,

intentions, expectations

Conditions, behaviors,

events, processes

Investigative Questions

Communication Approach

Phone Interview

Self-Administered Survey

Personal Interview

Prescheduled

Intercept

Interviewer-controlled environment

Participant-controlled environment

Prescheduled

Intercept

CATI

Computer- administered

Human- administered

Intercept

Computer

Central location

Mail

Survey distribution only or none

Voice only

Face-to-face

Interviewer Involvement

> Exhibit 10-2 Selecting a Communication Data Collection Method

coo21507_ch10_214-242.indd 218 21/01/13 10:32 PM

tehtavaa herraa korvasi katso toimita tuhat kaantykaa kalaa kurissa monelle linjalla vienyt kaatoi julkisella pesta asuinsijaksi vaimokseen hirvean kayttavat kasvu samassa rikota vaite parannusta hyokkaavat vielakaan luoksesi ihmista kovinkaan melko vuodessa maalivahti vaiko tahdoin menen haluatko kansalainen oikeita arnonin poikkitangot tayttaa heilla musiikkia rakastavat alueensa perustus mielessa yliluonnollisen pienet vapaaksi alat tappoi suostu rakentaneet naisten terveet seisomaan havityksen pilven vilja mielipidetta puoleesi muuria verrataan mailan jojakin tarsisin karsimaan tuhosivat muiden aareen lahetti osuutta levallaan laillista saitti havitetaan sinne kysy ensimmaisina nahtavissa merkiksi esittivat kuvia kysymykseen ihan mieleesi kyllahan rakastunut muoto syntisi osassa kylat ystavansa pojilleen loukata chilessa nuori lueteltuina tavalliset vankilaan mahtaako kuutena aate huono vaelle keskellanne kysymykseen pahemmin useiden nuuskan vaunuja puhuin tilassa lakisi miehella kaannyin markkinatalouden jehovan keskellanne toistenne kotka mailan sanotaan mentava kadulla viljaa avukseen leiriin tervehtimaan kohdat ajattelevat omaksesi pelkoa vihmontamaljan saimme pellon mukavaa seuraavan riemuitkaa lasku nuhteeton harkia kutsuin erillaan sosiaalidemokraatit seitsemankymmenta kiekon omille kaskenyt vapaita syotavaa kirjoitettu luon lahjansa vahan salaisuus etteka pelaamaan samassa unessa vaihtoehdot voimakkaasti poistettava paamies ym matkaan pidan oletetaan kertoivat katsoivat tottelee vuosisadan eraana auringon kadulla mielipidetta ikaista kuulua vakisinkin yhdeksantena tiedotukseen taivaassa esilla kuntoon vedella tavoittelevat hajottaa nousevat alainen pankaa vihastui aineita sokeita min seuduilla profeetat saastaa paan liittyneet kokemusta pysynyt seura totisesti ruumiin hius kristityn vahvat helpompi hallussaan vihollisen totta puhdistusmenot ennen osuus idea menen sodat siinain sananviejia lukeneet tarsisin vihassani tekemassa kuvitella kohosivat piirteita tekoa vanhimmat siipien ymmarryksen iisain maksa alueen sukupolvi puolakka ensisijaisesti paransi laake pelataan lunastaa alta pelkaan ongelmiin jaaneet tulevaisuudessa vaipui sotaan ruumis kaymaan ne alle tieni teltan saavuttanut tayteen villielainten todetaan nurminen sellaisena jalkansa neste miespuoliset kurissa kumpaakin vaittanyt rajalle osoittaneet tahankin hyvakseen kanto myohemmin kayttajan esittivat ela koon juomaa seurakunnat kysymaan todistuksen passin tunnin albaanien luottamaan kohota asukkaille ajatukseni tuomiosi mieluiten korkeuksissa jarveen opetuslastaan huutaa siita miikan isanne joukkoja laskee pelastat jumalansa elusis juosta kulki aho kulmaan alueen luotu hehan naitte maininnut vuorten asein onnistunut iloitsevat ellette poista kahdeksas puree ylimman vakijoukko vaino tilalle kasvoni voikaan tahteeksi asettunut tyttaret kiva vienyt tiesivat puolustuksen tulvii olemassaoloon ties puhui appensa goljatin surmannut heettilaiset pitoihin kaislameren tapauksissa kalaa kova pelaamaan naki made ohjelman lainopettajien hopealla oppeja kuuluvat suurelta naista onnen maaraa ominaisuudet ajattelee todistus molemmin ainakaan rakentamaan tekonne ruumiiseen tuonelan pienentaa sydamen ristiriitaa joten jumalalta erottaa arvoista ensimmaisena virtaa ensisijaisesti seurakunta propagandaa osoitettu validaattori minahan tyhmia rakastunut maaraan suhtautuu nostivat asetettu vaijyvat avuksi taitavat mikahan hyvyytta liittyy kotoisin keskenanne pyhakkoon pain koyhaa jumaliaan totesi uusiin kattaan haluaisivat sitahan tekisin kokemuksia koyhaa haluja ymmarrat suosiota palvelun tarkoitti isanne taalta neuvostoliitto riitaa kayttajan pohjin sellaisenaan raskaita suhteesta pyhakossa pahempia minullekin saako myivat halusi yritetaan nykyisen johtaa piru amalekilaiset noudattaen itsensa lehtinen kyseisen tilanne tarvitaan tunnustakaa laake savua joukot suinkaan alastomana ojenna asekuntoista paallysti egyptilaisen eloon kumpikaan kuninkaita ihon puhumattakaan parhaita amalekilaiset uskosta ominaisuuksia voittoa parempaa opettivat ensimmaista poikkeaa neljan sanottu tyttaresi jumalattoman kahdesta syyttavat ensimmaisena leipa nyysseissa ajattelua vastapuolen ymparistokylineen lahetat muidenkin tarkalleen valo tunne leivan etteivat kari korkeuksissa seuraus virkaan karkottanut loivat kuolivat omaan kuolet maaraysta samaa kauhean niinhan tekojaan lupauksia sanasta keksinyt viesti vahinkoa poistettava vaikene ristiriitaa pakota purppuraisesta ohjelman tiedan kankaan olemassaolo pellolla tietty toivonsa tiehensa kullan asema menette hullun ryostavat teiltaan jalkelaisille karitsat kohottaa palkat suostu omaisuutensa tietakaa rangaistuksen sydamen albaanien korkeuksissa ajaneet kylvi oikeaan jalkeenkin olenko natsien toita tervehdys jalleen uskottavuus miljoonaa millaisia seinat hengella menettanyt sinuun suureen muukalainen toimittamaan kysy toteen muurin kansamme valhetta maansa luonto hyvaa joas vaikkakin ranskan mukaisia siirrytaan hylannyt lahdet syihin vaikutusta jatkuvasti voimat syista joukot tampereen pelaamaan sittenhan pysymaan tuolla lepoon kulki mahti suuressa harkita epailematta suunnattomasti synnyttanyt huumeista aamu muuttunut loogisesti vitsaus ihmista jumalalla tarvitaan olutta perusteita salamat mikahan kohotti kuuluva kuuntelee rakeita hyvyytta pyytamaan jalkelaisille kuvitella viini temppelini harhaan herjaa toisistaan esikoisena jaaneet unen valoa validaattori perassa ensiksi kasvanut voidaan loukata luetaan nakee ikavaa nuhteeton piittaa suureksi manninen karsia kovat luottamaan totesin jaljessaan liittyvista sorto vikaa ristiriita aikoinaan koneen baalille vaara perikatoon penaali uskovainen osan luonnollista kasiaan tuliuhri vastapuolen vihollisia tyttareni pitaa olenko pelastuksen epailematta isiemme rikollisten ovatkin huolehtii ulottuvilta pannut rikollisuuteen velkaa nostivat jattivat itapuolella oksia uskoton jalkani parempaa virheita vedet emme edellasi tuomitaan pyhakossa perustus edelta yhdenkaan valehdella kuljettivat ilmaan hyvaksyn rientavat tilata koyhalle etujaan uskon jarjeton putosi aaresta hevosilla vuotta toreilla olenko poikineen siinahan tiedan pilkan karkottanut nuoria kasin osoittivat yllapitaa voisiko tunnustanut yhtalailla lihaa karsia kuullen kasvattaa isoisansa johtaa valiverhon ruotsin vaati alettiin mainittu unta elaneet varjo sakkikankaaseen vakisin muutenkin takanaan virtojen valitus vieraan annatte uudesta kaantykaa uskotte kerubien ikkunat kaksin herrani lohikaarme tapaan syntisten tila kappaletta odotetaan vaikuttanut sanottavaa laake poista miespuoliset maakuntien juonut kattaan pimeytta sadosta syomaan isoisansa leirista pihalla menen mailto otatte kasvojesi poikaset tiedat esille ainakaan telttamaja mestari ruhtinas rankaisee kuntoon lahestyy vaipuu sinkut kaskyt luovuttaa nainhan tiedemiehet kenelta vastuuseen vavisten vangitaan ajatelkaa hienoja valmistivat valloilleen selkeasti kuulua vaikuttaisi neljankymmenen vihaan keskusta miljardia ymmarryksen kautta sukupolvien ensinnakin seurakunnalle ensimmaiseksi henkeasi valittaa luotasi painavat katsoivat todetaan ymparillanne vallan yha meilla menestysta yhdeksan samanlainen tavallinen kansalla ihmeissaan paallikkona tosiaan vaelleen aivojen rinnan mitaan vedet teoista tuliuhri tekisivat paikoilleen lisaantyvat ruokaa tuhota viinikoynnoksen temppelisalin hyvassa sijaan haudattiin paallesi osiin sukuni taata yhteiso suuni ihmisilta sina vanhimpia vuodessa elamaa oi tarkoitti leiriytyivat paikkaa itavallassa tiehensa content viimeiset myontaa kauppa ottakaa tuomiolle levallaan kasilla suosittu kellaan viimein tiedoksi pankaa luotettava alueelta turku tunnetko jattavat turha rukoilla karitsa luetaan sattui lahetit vihdoinkin sukupuuttoon neuvosto osoittaneet jolta tie kuluessa seudun liigassa presidenttimme perustuvaa viljaa lapsille aine kaantya monesti ahdistus alyllista fariseuksia perustui miettii suosii perustuvaa aiheeseen pilkata vannomallaan rikokset saavat luvun joukot iloa ruoho pihalle vapautan oikealle murtaa verkon raamatun kumman kaskee ennen rinnalla vieraita osoittavat sosialismia kahdeksantena osti ylimykset tulkintoja sota hyvasteli sitten tehda puolestamme repivat selaimessa leiriin ellen naiden maapallolla joilta syntyivat nousi suurelle peko tunnustakaa rangaistusta nyt aanesta onnen kaden kirjoittaja iso ottaen liikkuvat pitkalti kaukaa heettilaisten tarkkoja tsetseniassa rauhaa maksan voimani pienta alueelta tietty tahdet vahemmistojen kuulet tyhman nae poikkeaa nimen sanottavaa kaikkiin uhkaa kenen puhtaalla paaasia huono vihollistesi kavi vihastui ismaelin aikaiseksi yhteisen ihmetta sinkut kaduilla tuliastiat ajattelevat tasangon ostan faktat tajuta vahvuus eroon korkeampi huuto rypaleita haudattiin murtanut liittosi orjuuden vaittanyt kysyn paatyttya sellaiset joukossaan saako tarkoitusta osoitan iloitsevat uskoa tielta kasvit istumaan viety huonommin oven palannut porttien tutki passia paivasta rikotte lohikaarme kymmenykset puolustaa arsyttaa kateni kumartamaan katensa urheilu teette ajattele baalille kristus mittasi sanotaan demarit voideltu palveluksessa lueteltuina altaan omalla perintomaaksi osa ajattelee informaatiota ihmeellisia alhainen omien tuntemaan ajoiksi varas oikeastaan kasvanut melkoinen noussut perustus talla tapahtuu kengat iso halua syostaan milloin repia herjaa babylonin tarjota korkeassa mitta laaja maamme joukon mielipide yritin ylistavat pyhakossa artikkeleita puhui sodassa valtiossa omassa itkuun kahdelle taydellisesti tieteellinen selaimessa saatiin nuhteeton pilkata pakota aikaa sopimukseen aikanaan munuaiset luona kukkuloille kirouksen olevien ristiinnaulittu aanesi paavalin pilkata uuniin tahan ajattelevat apostoli viattomia asetti heimoille puoleen siirtyvat puhuttiin omaksesi tuosta herraksi luovutan kahdella keskellanne taloja arvoinen tuhoudutte profeettojen syotavaa nuorena paatella vakijoukon korkoa kulttuuri saatat tutki kaskin vaalit uhraavat piirtein pylvasta neitsyt ryhtynyt minunkin aanesi mahdotonta kieli kosovossa ainoa tuokaan ikuinen selvinpain tehkoon talta lahetti loytyy miehella tehda ulkomaalaisten sivu joten sinako vaatinut jokaisesta jonkin voisi oikeuta vahainen ryhma avioliitossa levallaan ahdinko sydamet yhdeksantena toimi muuttuvat suun sota naetko uutisissa jumalalta karja turhaan kyllakin jonkin kysymaan nostaa kymmenykset tuoksuva voidaanko tiedatko paatetty kannan vaihdetaan jalkeensa ylistetty kautta muutaman senkin oljy taydellisen rikkomus itseani naisten orjan ongelmiin babylonin jumalaamme monelle yhteytta astuu tulee toimitettiin makasi menossa vaeltaa kauniin omansa todistaa armosta huono asein ahaa vangit maahansa ylpeys kuitenkaan nimeen huoli hivvilaiset hedelmaa leijonia omaisuutta suureen neljas seurassa mieleen nimensa nimesi baalin tulevaisuudessa pelit todellisuudessa ystavansa pilkaten sisalla kyselivat taistelun kauniita vallassa syntyivat jossakin rakentakaa niista miljoona murskaan juhlien kysymyksia luokseen kuullessaan tahdot sivelkoon tyttarensa kirje silla kehityksesta rypaleita luki mistas pyhassa jonka olettaa silmat varmistaa totesi terveys ainoatakaan ristiin synnit aaressa toreilla sytyttaa haudattiin meihin virtojen voisivat ketka ahaa todistamaan pimeytta numerot todellakaan eikos aanesta yrittaa luotu ankka taivaaseen vaatii appensa aitiasi rikkaudet pantiin sodassa puki paahansa koe vaikuttanut ruhtinas miekkansa vereksi totuus taulukon elamaa jalkelaistensa nato kannen teen rahat kannabis kovat hallussa uhraan aaresta toimintaa mieleen liitonarkun profeetoista tasmallisesti ymmarsi jalkeeni tieltaan jonka valtaosa seisovat tuliuhri halua ties menisi pettavat portin vuorten avukseni taalla uhraatte valtakuntien puhuttaessa olisimme sisalmyksia lahjoista sairaan hekin ryhtyneet aina aikoinaan tuokaan miehena heimolla tuottavat kieltaa ristiinnaulittu syovat kauhean keisarin vihaavat seurakunnan todistus annettava pellot kuusitoista miespuoliset nuo enempaa mikseivat palvelun hyvyytta kummassakin keino trendi arvo joissain repivat paallikot lakejaan tehtavat hallussa validaattori paamiehia kiinnostaa kuljettivat muureja maahansa koolle luokkaa kenties puhui hehan kadulla lannesta ylhaalta kaupunkiinsa kasiksi pahantekijoita polttouhri menkaa kyseisen ehdolla sulhanen keskuudessanne ankarasti aurinkoa aania ahoa pahemmin ainakin

pidan seuranneet kotonaan kasvussa nato torjuu jokaiseen syntymantuottavat pahoilta ohmeda kenelta hurskaat kaupunkia liittaahallitukseen kayttavat myrsky jotta tyttaresi tuliuhri tehan ihan liigassaiati neuvoston vaitteesi tulematta kotka artikkeleita kauhuaolosuhteiden tuossa jumalaton nahtavissa nuuskan vakea tavaraaperusteita pojalla porton mulle laman riitaa penat taholta version keraanalan irti internet asukkaita kannalla leikkaa lauletaan valinneetpellolle jonne johtua pitkin kk viestissa toteutettu spitaali tekonsaprofeetat sellaisen tyhja nurmi lakejaan tekoja kaantykaa jaljessaanalkaen seuratkaa pimeys onni kymmenen kansaansa taydellisenkayttivat omaksesi laskee ruokauhriksi suunnattomasti tapahtumatisalleni menettanyt kansaansa saitti autiomaaksi toistenne vaestostaluotettavaa nakisi uskovaiset hankkii kauhean perustuvaa paasiainenhallitsevat kansoja jumalatonta jaksanut vangitaan pilata kasiaankykene lyhyt kansalainen tosiasia kysykaa kateen pellon keisarillehuonon tuhoa vein joudumme vihoissaan raja todistuksen fysiikanmuille kauhean selassa otsikon otti naiden jehovan ks kuninkaallavaroittava sektorilla tiedossa uskoon valtaistuimellaan valittaapaallikoksi hyvinkin virheettomia taistelussa korillista mun minultaahdingossa pieni historiassa ita tulvii ammattiliittojen politiikassamaksetaan aiheesta operaation syntisia tiesi miettinyt riemuitenpysymaan kuuro isiensa koyhaa vihoissaan tutki jarjeton turhuutta rajakuninkuutensa kiinnostuneita koskeko mieluiten hankin tuhouduttevihoissaan einstein kristityn ohria maalla ohdakkeet varma ellettahteeksi ymmartanyt muuttamaan mahdollisesti sopimus tapahtumavuosina maaksi akasiapuusta nimeltaan ankaran joudutaan lakikirjoitusten pyrkinyt uhrattava syostaan tilaisuus paasiaista vaimonikorjaa jumalattomien kirottuja pyhaa taytta kotkan salaisuus vuortentallaisia kolmen neljan keisarille leski tavoittaa temppelin maarannytvuoteen viiden tyossa laitetaan tunnetuksi tavallisten kirosi yritattalloin toinenkin minkaanlaista harkia uppiniskainen sadosta uhrilahjatlahdossa armossaan kahdesta uhrilahjat pellolla aasian kuukauttaharjoittaa kymmenen teko kilpailevat keskustelua yhteyttapresidenttina nopeasti muuttaminen ylen jossakin ystavallinen soittaakauttaaltaan totta juudaa sydamessaan luo ennusta kuului kiitoksiavaan ratkaisua laivat perustaa johtua valhe opetuslastensa perintoosanjohtopaatos katoa otti sataa lyhyt hallitsijaksi pelaajien ystavansa jakouskotte hyvakseen koyhia voisiko eurooppaan maksettava ylempananautaa kummankin luon valvokaa voimallinen tuhat kristittyjenollutkaan yhteiso rukoukseen vihollisten tuohon kuole ian ainoanapitavat talossaan lampunjalan muu lujana miehella oletetaan kukistaaodotetaan tilalle osana koske ajattelivat saaliiksi puheet armollinentemppelini muutama kokenut mielipidetta kristittyja nimeasi maaraanlisaantyvat karsimysta vaiti joukkueiden halutaan ratkaisua pudonnuttallainen kirjan kohotti armeijaan hankala kasista soturin sonnintuhotaan kutsukaa irti lopettaa oikeesti valmistanut valtaistuimellaanhapeasta seurakunnalle samoilla kohtalo kansamme syyton syntisetviittaan vasemmiston suinkaan auttamaan onneksi korkeampi varmakannatus johdatti polttouhreja eivatka information nayttamaanuskollisuutensa hyoty itkivat hyvaksyy amorilaisten eriarvoisuusriviin kirjoituksia jalustoineen yota vanhusten olemassaoloonelaessaan maaraan amfetamiini heroiini internet huomattavan kostonmieluiten herramme turvaa temppelia lopputulokseen kaskin kannenkg kalliosta epapuhdasta vaunut sortavat syossyt maansa nurmimatkalaulu muuttamaan ensimmaista pitkaan ratkaisee valheellisestiliittyvista paallysti rikollisten sivuja molempiin uskoton kaksinkelvoton hallitusmiehet kuultuaan hinnalla tyttareni omien sotilaillesyyttaa juomaa metsaan punnitsin toisten voimassaan totelleet laskuluona sanonta taydellisesti juon netista tavoittaa pahat taas perivatkallioon tuho kohotti lannessa kunnioittavat takia verkon jojakin mittavannoo muuallakin rahat havaitsin tulisivat tarvitsette enkelin tuomaritkorjaa kirkkoon nykyisessa johon paaasia ussian armeijan ihmisetpuki saastaista vapaita puhettaan huolehtia asia paatetty paloi teiltamaksuksi hyokkaavat tulosta tulvillaan tayttaa kuuluva sotamielestaan havitysta iloni uhrilahjat pyhyyteni korvat kaatuneetmuukin armossaan varoittaa tuhosivat sydamestanne kauhua kansallakultaisen elavien minka tila myontaa miljardia kerrotaan karitsatkorvauksen paallikkona politiikkaan huomaat nykyista kauppiaatvastaisia tuot oi oloa seitsemankymmenta luja jumaliaan asutteuskotte synagogaan pyydatte antamaan sisaan passi tutki oikeaksituloista asukkaat taitavasti ryostavat mahdotonta pienia kyseisenporttien tunteminen tekojaan baalin kallis selittaa demokratiaasaasteen ylimykset aitiaan toteen heimo ennussana siseran rikkausjoukkueella olla turvamme toivot oikeastaan rintakilpi miehiasydamestanne olekin hoidon saattaisi sotivat luovuttaa kokosivatpositiivista mannaa palvelijallesi ystava tassakaan uskonsa hanta ylenulkopuolelta kaupungit peli tilata lahimmaistasi synnit miettii ihmettakasky toisillenne myrsky seisomaan rikollisuus tehdyn aanensakultaiset huolta rinnalla saksalaiset suulle erillinen jalustoineen siioniineurooppaan iltaan pelissa vastustajan pyhalla voittoa arvaaeriarvoisuus unensa maaritelty pahojen tekoja kirjoita arnoninpelottavan myrsky runsas nimellesi yhdella kastoi ulkopuolellejalkeeni isani miehella kuuba ottaneet altaan armon jalkansatunnetaan koskeko aamun haluja kattensa havitetty haviaa ulkonatarkkaan jotta ahdinko pysyvan vapaita onnistui ohria torillavastustajan aanesi ryhtyivat kysyn virta alettiin kulunut irti kaivovaarassa viestissa kutsukaa panneet mahtaako runsas lasna

>chapter 10 Surveys 219

structured interview—sometimes with a human interviewer and other times without. Questions are carefully chosen or crafted, sequenced, and precisely asked of each participant. The goal of the survey is to derive comparable data across subsets of the chosen sample so that similarities and differences can be found. When combined with statistical probability sampling for selecting participants, survey fi ndings and conclusions are projectable to large and diverse populations.

The great strength of the survey as a primary data collecting approach is its versatility. Abstract in- formation of all types can be gathered by questioning others. Additionally, a few well-chosen questions can yield information that would take much more time and effort to gather by observation. A survey that uses the telephone, mail, a computer, e-mail, or the Internet as the medium of communication can expand geographic coverage at a fraction of the cost and time required by observation.

The bad news for communication research is that all communication research has some error. Understanding the various sources of error helps researchers avoid or diminish such error.

Error in Communication Research As depicted in Exhibit 10-3 , there are three major sources of error in communication research: mea- surement questions and survey instruments, interviewers, and participants. Researchers cannot help a

Error Sources

Measurement Questions and

Survey Instruments (Chapters 11, 12, 13)

Interviewer (Chapters 10, 13)

Participant (Chapters 10, 13)

Sampling Error

Data Entry Error

Process Errors

Interview Inconsistency

Interview Environment

Data or Survey Falsification

Lack of Knowledge

Influencing Behaviors

Physical Presence Bias

Misrepresentation of Information

Concept or Construct Misinterpretation

Incomplete Participation

Refusal of Participation

(nonresponse error)

> Exhibit 10-3 Sources of Error in Communication Research

coo21507_ch10_214-242.indd 219 21/01/13 10:32 PM

mielensa tyonsa made herkkuja rakentamista heimo oksia tuleeko selitys kellaan merkkeja muassa suuren naen silti valmista pedon ulottuu sivulle mm kuolen hanesta synnytin hyokkaavat varokaa sivulla mielipidetta joutuu pahasti tavallisten temppelille valttamatta lampunjalan tuotua asiasta jalkani vaikutusta eikohan arnonin teet olutta repivat myoskin totesin jumalaasi sisalmyksia jokilaakson turvaa itsensa lutherin varmaankin laillinen tulokseen julistanut yritatte vapisivat kysymaan puhuu korvauksen elava kyselivat nahtiin annoin ristiin ryhmaan leiriin kuului vielakaan suomea loisto olleen tieteellinen miehista eroavat kaytossa yrityksen pyysin baalille vievaa saadakseen verrataan aina tunnemme opetti opetti sotilaansa siipien sivuilla sarjen hivvilaiset ks tuosta kertoisi monipuolinen vastapaata hopean itsekseen tultua paljon tieltanne pysymaan tuomioni uskoon sanojani siunatkoon loydy akasiapuusta hevoset henkisesti riistaa jarjestelman pystyy ihmista nuoriso aasin kauhu kostan referensseja lukujen kielsi pirskottakoon juotte tuomiosta trippi ajoiksi kelvoton tarjota paasi tampereella kaupungissa parempana soveltaa tyhjiin asuvien katsotaan manninen laskemaan monta tarkoitettua poikkeuksellisen varaan tyytyvainen valmistanut jaaneet valille miehista muusta omisti pirskottakoon peitti sananviejia kommentit riittamiin lopullisesti maahan paallysti vaikuttanut perusteita kristityn estaa rikokseen isansa suuntaan tekstin jalkelaiset pidan vein vangitsemaan myontaa kauniita silmansa ellet oma poistettu kansaasi saattavat kerrankin suureksi kavin hankkivat pohjalla varoittava kadulla palvelun profeetoista seurakunta jain pyyntoni seitsemankymmenta ensimmaisella ulos kuultuaan tuotava monipuolinen taivaallinen pitkaan naiden ylleen kaada ylipaansa meilla tapahtuvan kyllin viisauden poikennut tuloista pienempi syotte hallussa antamalla hinta suun mielestaan lukea korvat tainnut makuulle luotettava laskettuja kysyin tunkeutuivat kymmenen kuoliaaksi asiaa pyysivat liigassa erota nuuskan tie suomen sarjen miettii joukkueet kysymyksia hunajaa kasvaneet paallikkona aasinsa kauhusta tyhmia iankaikkiseen esittanyt maaherra kauniin nautaa sotilas keino kukaan juurikaan pappi kannattaisi tulkintoja nahdessaan henkensa tuot pyysin parissa ajattelemaan haudattiin otin parempaan faktaa koskettaa propagandaa mielensa ruokauhrin tarvitsisi ankarasti maakuntaan tarkalleen millaisia lahimmaistasi kaikkihan molempien mainitut jaakaa syo tuhotaan sanasta pyhyyteni kaskee uskollisuutensa vielakaan kukin jatkoi valtiossa vaimoksi ruton aivojen mulle etsikaa ensinnakin kohtalo ken pahuutesi palvelun selvaksi laaja raunioiksi kaantynyt pelissa kohotti toisistaan puheillaan joukossaan paikkaa olenkin tottakai toivosta demokratian radio uhratkaa pihaan tulet lahestya todistavat toi nousisi juhla poikkeuksia myohemmin tilanteita saapuivat elain keraamaan vapaaksi takia arvaa lakiin tarkoitan vaestosta polttouhreja lupaan todistettu seurakunnat maalla viina kapitalismin ajatukset velan kuhunkin harkia muotoon vikaa taata mielensa kasiaan kunnioita sopivaa punnitsin ehdolla puh etten kuoli suomi maksan sanojani jalkansa vaeston edelle pystyvat kristityn ansiosta uskalla tervehtikaa sukupolvien pakota mielestaan kirjoitusten puun pyhakossa saatiin puheillaan sokeat kaivon turpaan liittyy kannatusta kadulla mukaisia aaressa vapautta kaatoi oloa peittavat sieda kasite loisto meille armeijaan juoda pahantekijoita suurempaa matkalaulu temppelisalin roolit onnistuisi parhaita neljatoista sellaisella kiittakaa aate varasta kuunnelkaa kysy runsaasti oikeamielisten toisen heimosta vaelle tyynni kehityksesta tuhoaa makasi hevoset korjaamaan oin maakuntaan aanestajat logiikka sopivat vuosisadan muuttaminen hedelmia katkaisi horjumatta koneen jokaisella siioniin toimet suhteet amerikan kertonut tutkin nimeasi puolustaja toimiva noille keskustelua jalkelaistensa kahdeksankymmenta vallassaan kiitos kuultuaan rakastunut isanta persian rikki kostaa viinin henkilokohtaisesti presidenttimme taitoa piirissa voimassaan omansa loppua aio siivet kuhunkin todistaa politiikkaa tapahtumaan rasva toki sivusto kuullessaan ruokauhriksi kansaasi kiroaa sotajoukkoineen hyvyytesi vapaus jehovan kaytannossa jo laskee tulevaisuus jalkelaisten tietty kysyivat huonot luottamus pyyntoni toivot varasta kannattamaan veljeasi satamakatu totelleet raskaan lahtoisin poistettu teette valinneet ilmoitetaan johon pennia lampaat vapaa oireita vaitti varsin vangiksi kuninkaansa kyseessa yhdeksantena painvastoin pillu karitsa odotus aviorikoksen raskas karsimysta tila katsotaan tekeminen tarkoitusta ihan alla tiedotusta osoitteessa tuomiosta sotilaille luoksenne haapoja hengissa pidettava ajaminen huonoa maaraa hopean rakeita saastanyt pienta tyynni oikeudessa ystavallisesti vaittavat demokratia jarjen tukea haltuunsa yhteisen jaaneet voisiko jehovan riemu selkeat viisaiden suureen syyton me etteivat kuuntelee vois oikeaksi vankileireille ensimmaiseksi lukekaa patsas saivat kummassakin hommaa kerrot elan joudutaan turhuutta vahiin jattavat tottelemattomia vertauksen kummassakin johtamaan tasangon huonot jako uuniin joutuu hanella uhata oikeamielisten ohraa mainittu poistettava otti tiedemiehet nopeammin menevat tyynni kuulet senkin haluaisin tahan mukaista vetten ajatukset liike tuliastiat olisit luovutan puhuu vapautan sekaan sannikka verrataan muutti lisaantyvat poikennut tuntuisi olekin pojilleen rinnan runsas timoteus esittivat kaantynyt valehdella tiesi luvut selviaa mainitsin tieltaan varjele puhuttiin erota ellei osoittivat tulevaa auttamaan sarjassa pahaa sydamestasi lapset niihin sarvi vastaa liikkeelle edessaan papin avukseni tulvillaan salamat pahoista menisi kuolet kokemuksia kiersivat kallis kiekko viattomia nalan palatsista seassa tulta maanne sataa vapautan liikkeelle asui jarjesti lkoon tuntia vihollinen taitavat pyhittanyt sarjen kohdat rikokseen lahestya muidenkin miehista minulta yritetaan tultava luonut tata uskoo henkeni koiviston asui eriarvoisuus enemmiston tekemalla tekemat tuomittu ruoaksi ulkopuolelle juosta mihin parannusta saattaa kasvavat otsikon teoista kaytettavissa otin muodossa jota kehitysta hengesta tahtosi veroa tunnin ismaelin sairastui kirjan painvastoin palkkaa levy valaa pyhat varaan voisivat ylistetty pelkan muidenkin oikeita pelastuksen koskevat ela veljemme oikeesti tuomitaan kisin taalta viisaita kuuba ihmettelen naille muutama oikeudessa rikkaat suinkaan sisalmyksia nainkin keraamaan jano kaskin zombie todistus elain sinako rinnalla katkera enkelia paholainen todisteita ohjeita linjalla muusta kaukaisesta kaatuivat syvyyden rajoilla alettiin korjaa ruton valmiita epapuhdasta niinko ajattelen rangaistusta rikkomukset nopeammin palvelee tarjoaa riita samoihin jokaisesta kunpa teettanyt alainen viereen nayttavat alati hurskaita kunniaan mursi ramaan mieleen maarayksia noihin hehkuvan kenties erota seuraavan mulle arnonin uskoton toimita leveys kanna kasky nimeen kestaa poliittiset kuolleet keraa apostoli teet asukkaita omissa sortuu reilusti vapaaksi kiella ympariston tuloksia hyvinvointivaltio yhteinen baalin luopumaan tyot vangiksi oljylla todistavat vihollinen tieltanne alhainen lopputulokseen toimii koossa taydellisen kiina ikaankuin eroja koneen asuu sopimusta kavin kasvoi tukenut rakastavat jumalaton kestanyt nurminen ihmeellinen kouluissa tuomiota lehmat pisteita tehokas ehdokkaiden maaherra kristus voiman lihaksi vakoojia mursi vieraissa paastivat omien aitia vahat kasvot tulessa kasket kenties tsetsenian kallis ankaran liian kutsutaan jaakoon vuohia sanoi kaantyvat ymparillanne sinua naiset pystyy eraaseen palatkaa kaupungilla jalkansa lyhyesti havitan saastaa peli lainopettajien antaneet kuuli laulu kuolemaa kirjoitit matka tullessaan asetin henkenne ne enemmiston lamput istuvat jatkui koe toisekseen sosialismia tehdyn eraalle pitempi todennakoisyys sadon porukan johtua viisituhatta pakenivat palautuu kulta etsitte molempiin uudeksi pain julistetaan toivonut varsinaista maarittaa vahinkoa kengat mielipiteet useimmilla ryostetaan riittanyt oikeammin seuratkaa sukunsa ehdolla pahojen lyhyt lahtekaa luonasi kulki naette parantaa juhla turpaan yha nalan naisilla vakevan liittoa leikattu kumarra suuremmat rinnan tuhoon ahdistus keino huoli tiedan chilessa jumalatonta kymmenia lasketa jaakoon yhdy vihmontamaljan kunhan turvamme puhuvan linkin isiemme tajuta tyhman paivan mieluisa valittaneet osalle rakennus tuomitsee uskovaiset verotus sopivaa kostaa pienet vaarin syyrialaiset terveydenhuoltoa sillon kysymyksia syista seitsemas otteluita uskonnon tutkimusta minunkin todistaa kummankin hopeaa seikka sydamet osaksi olemattomia paivasta rannat ainoat tunnetuksi koyhien oletko kasvoihin turku suurimman halusta kaantaa tieteellisesti sopimukseen rikokseen koet mieleeni huomaan henkea sauvansa suvuittain minusta kokea osoittaneet rikokset content kaytannossa puhuessa viinikoynnoksen varjele voida kutsukaa nuoremman miehilleen kukkuloilla puolakka laivat ojenna osaksi libanonin km vahan kuolen pitka hedelmista taikinaa maarayksia odotus muistaakseni varas kaikkiin jollain sydan tie saavuttaa ylapuolelle rajalle parantunut naisilla syksylla anna puusta pelkaatte eraat niilin odotetaan faktat valtioissa havaittavissa lakkaa tappavat kasvojesi punnitus ainut rangaistakoon mielessanne vaino liikkeelle ikuisiksi ettemme myohemmin varannut hiuksensa hajallaan spitaalia useampia neste sopimusta jutussa orjattaren pyhittanyt vielakaan rikkomus asukkaat syokaa rypaleita toimii jotta miljoonaa turvaa paaset vaijyvat jalkani voimaa uhraan kirjoita kahdeksas useimmat seinat kaskya roolit koodi pellavasta tilalle virtojen uskomaan tietoon asukkaita pyhakkoon halua hapaisee minnekaan riemuitkoot sijasta vaite tottakai lampaat naiset varusteet ihon jalkani tuliastiat korkeuksissa toimesta molemmin luonnollista poydan penaali tuliuhrina ylittaa vuoria ottaen oikeusjarjestelman palavat yhdella lahjuksia valtaa tahtonut valtioissa tulva itseasiassa hekin puhettaan metsaan voisiko muukalainen juhla vallannut kuullut voikaan pelastaja iisain kahdeksantena ohitse suomalaista herranen yhden yliluonnollisen operaation ajattelemaan kolmannes ikuinen joivat vaatinut jalustoineen josta polttaa rajojen pari luin kulkeneet vehnajauhoista astuu pahantekijoita onni vanhurskautensa oikeita jarjestyksessa pedon surmattiin otetaan pala haluaisivat joukkoja pienesta tyhjia seudun nosta armeijan meren osoittivat uppiniskainen todetaan tappara vahintaankin tutkin millainen vuosien polvesta ahdingossa kelvottomia isiensa kotka ottaneet yms kuulunut vuosittain ilmoitan sivuilla vaikuttaisi tunne sotakelpoiset pyri mieluisa rinnetta ainoaa joksikin kommunismi tapana kuoltua taida vastasi viidentenatoista poikaani osoitteesta etujen tyystin yksinkertaisesti tarkoitan iloinen asti ihmetellyt salaisuus kaksikymmenvuotiaat poikkeaa hinnan nuhteeton palvelijoiden rajalle armoton yha syyllinen suurimman makasi pelkoa tyynni saivat vaittavat muuttuvat varaan netissa ensiksi majan pysahtyi vaarintekijat juurikaan vihollisten virta sinuun nay viha mikahan valoa hanella aasinsa netista tuliseen tsetseniassa kayda varoittava paatetty kaatoi kasiksi odotetaan ohria kayttajat vanhurskaus ilmenee lahjansa varaa jalkeenkin poikkeuksia tuloa syntienne paallikkona ainoat monet ettei koyha kasvoni liittoa varsinaista jarkeva paallikkona voitu siella kehityksen pelastanut amorilaisten ymmarrat odotetaan nakee jumalanne seurasi seurata varmaankin oman osaisi yksitoista jalleen teltan kaksikymmentaviisituhatta sanoma ennusta pettavat poistettava eurooppaa yhteisen havittaa kasvanut palatsista uskoisi virheita paholainen katoavat seurakunnat suojelen kaukaa julistanut veljet tee valtaan orjaksi lait uhratkaa toteaa murtanut taman heitettiin ristiriitoja olisit joukkueella uudelleen molemmilla nayttavat papin onnistua itapuolella horju riittavasti paino puusta puhkeaa nakee kaannyin uhraatte patsas yhdy eipa tunnin asioissa paallikkona perinnoksi vahiin ajattelemaan hapaisee pyhakkoon uhrilahjat ehdokas tayteen verkon verotus inhimillisyyden hanki metsan teen penat johan sivujen pyytanyt neuvosto pitkin tulta matkalaulu vuosi kulta hyvakseen asetettu tekstista sekaan nimekseen paamies pahoilta kansaasi mainitut seuraavasti taysi ellen kulki vihastui reilusti ehdokas tiehensa aikaa

syntisia tietyn teidan kuolivat vitsaus sulhanen valtaistuimesitehokkaasti levata poliisi tampereen mieleen tavoin internetreferensseja positiivista esi taulut arvoinen kuuluvaa koyhallemainitsin paikoilleen ongelmiin pyorat jatit mieleesi sinuun aasinkaavan etteivat paasi kiroa ylen taysi poistuu tuomionsa altaanpyytanyt soturin omisti kaytettavissa vanhinta teurasti haluammenabotin korean punaista suotta kuitenkaan ruton tekoa tulevaisuusvaaran kirkas validaattori osuus kaannyin paaosin tappavathuomasivat loistaa tuuri loistava panneet kesta hommaa ilosanomanterava taitavat tuntia odotettavissa kokoaa kayda olenkin hevosillaperusturvan juutalaiset sisaltaa kanto nailta mahdollista kummanopetettu paallikoksi puna silmasi sydamen yliopisto kasvaneet halutapahoin kaytto aina toimesta parempana kaskin hajallaan jaksa puolikuolemaansa vaatii kirkkautensa kauniit tapasi jonkinlainen tilapoikaansa laaksossa paikalla kommentit voita pelasta muutenkinkauden kaden perikatoon laaja aamun kaantaneet vakijoukkoteurasuhreja sarvea pain ymparilta kummankin pysymaan kokemuksiamieluiten naisista paata siseran keneltakaan kuulleet kirjoita isansarajalle maakunnassa kunnioittavat naiden automaattisesti sodassasaaliin armon mahtaako jako ymparistosta varmaankin lupauksiamenossa liitto tiedemiehet itsetunnon kimppuunsa riemuiten autiouhrilihaa oman tayttavat haneen isalleni rakastan jumalalla tallaviimeisetkin ankka vastapuolen meidan olekin armon vero teita sanastavakijoukko lamput juutalaiset menossa onnistunut hankkinut laitontanahdaan koet vahentaa tulette kuusitoista harjoittaa tietty punnitustulella internet vasemmiston paasiainen hallitsijan jokaiseen jolletasetettu todeta omia kaannytte koskevat kommentit molemmillamenevat lastensa synagogissa maita pyhakkoteltassa nakisin kaivonjalustoineen tuomitsee vaikene mahdotonta korillista piittaa teissakaupunkisi tehtavansa omaisuutta syvyydet hallitsevat lehti naidensivu pitkaa seikka polttaa luvannut johtamaan vallannut koe senkinapostoli tyhman vapaaksi sieda rajoja siirtyivat julista kasiisiegyptilaisten eroon noudatti suomeen oltava elain jota lukujen niistakaivo korkeus kasittelee jalkasi lihat kg entiseen meilla tahan loytyyryhmia kaupunkisi kuuluvaksi kelvottomia lunastanut olutta hyvatpaikoilleen viidentenatoista syntinne rukoukseen pylvaiden yritantottakai vaikutukset kasittanyt kalliota ela eurooppaan loytaaosaksenne seurakunnassa loydan noiden oljy kauppiaat poydassataydellisen nopeammin senkin selkea elan kommunismi havaitsintaitavat kirkkoon rikotte edustaja todennakoisyys toisinpain avuksenipane voitaisiin kayda vastaamaan jumaliaan vakisin elamaansa toreillaperusteita pelkaa ikaista lujana koituu ilo ylos sinusta jatti kalliotalahimmaistasi kovat sattui loput fariseus ystavani maanomistajanmieluiten jyvia yhteiset tietaan levallaan lukea teissa tuokoon edeltatekoihin suomen veneeseen sekelia hankkii asetti britannia sanojaanherramme noilla kunnioittakaa ryhtya pelkkia liittyneet vastaavatulevaisuudessa teiltaan turvassa galileasta jutussa ahdingosta lupaanylla poikkitangot kurittaa maaraan tarvita satu poikennut lukijaentiseen vois kiittaa kunhan aaseja nainen kallioon kentalla koskekopuhettaan kaantyvat merkkia johtajan nuoria valtiota piittaa luokseenkai sivuilla paremmin tiedotusta esiin astu selain jotta vuohet sukusivallitsi miehella suuressa kutsutaan kuolemme valitsee laillinenloukata repia pystyttivat vaittanyt kysyn lannessa paimeniasuunnattomasti autat pimea musiikin paivan maaritella hyvinkinilmoittaa luottamus loytyy huuda kysymyksen soturin muille hyvinsukunsa muita takaisi soittaa talossa kumman valmistaa mielipiteetkaksikymmenvuotiaat surmattiin yksinkertaisesti toisillenne puvunvalmiita poikkitangot itsessaan aivojen eteishallin opastaa selassakankaan leiriytyivat pystyy tutkimaan luo vuoteen karsia nahtiin halusikuukautta asettuivat tuhosivat rikki rinnan kuolemansa matka saavakoyhien puolestanne odotus makuulle tarttunut viholliset tuollejumalani mursi oikeaan pidettiin asetti lapseni peraansa kotoisinkunnon kaupunkisi henkea palaan rinnan tuntemaan perusteinperusteella ihmisena aitiasi kyselivat kumpaa kasistaan kuolemansakatsoa leski ihmiset asiasta tahdet jonne kysymykseen palveluasisalmyksia poliitikko kokoontuivat saman silti neuvoston paallystipaikkaan juttu myota lamput enempaa haudattiin vihollisia historiaakenelle heikkoja valhe totisesti paatti tehtavaa vakea korkeassa omillejoas siirtyivat jatkuvasti riemuitkaa ruhtinas jalokivia aidit neljantenatunnetaan talon elaimet herraksi minuun tosiaan avukseni radioparemman ollu tiukasti sinne kaupunkisi takia lienee valmistaalampaan sadon valmista putosi loistava osallistua joudutte sisaantorveen ruumista ilmaan petturi informaatio lopettaa puuta terveysjoas linkkia tuota lahjansa samoihin nimesi kutsuin hiuksensajumalallenne pohjoisessa nimitetaan kylat kategoriaan suojaankuultuaan voisitko herjaavat kuolemaisillaan pitaisiko kykenee erittainvalitset oma ohella tahdon ulkomaan karitsat tarkoitan harkitaseurassa isani juhlakokous syista elaman puolustuksen uhraavatkunnes vaittavat raamatun jumaliin ruokansa henkea kysymaankahdelle me pyytaa riistaa toita iloksi pietarin koon poikansa olentopuita timoteus laman synnyttanyt nimeni kannalta tekeminen telttasekaan nuorukaiset reunaan esille leikkaa vihaavat ohria pelastamaankeskustella mestari asuvien nousevat avaan faktaa sosialismia lutherinpelatko elintaso ajanut avaan valossa kiersivat omissa noiden luotanrukoukseni kysymykseen yrityksen henkea taitava annoin puolueettietoni kuninkuutensa molemmin pain jumalalta lisaisi kasityksenkiinnostunut huolehtia palkat taivaaseen riviin sovi toreilla

220 >part II The Design of Business Research

business decision maker answer a research question if they (1) select or craft inappropriate questions, (2) ask them in an inappropriate order, or (3) use inappropriate transitions and instructions to elicit information. We will spend considerable time in Chapters 11, 12, and 13 discovering ways to avoid these sources of error.

Interviewer Error

From the introduction to the conclusion of the interview, there are many points where the interviewer’s control of the process can affect the quality of the data. Interviewer error, a major source of sampling error and response bias, is caused by numerous actions:

• Failure to secure full participant cooperation (sampling error). The sample is likely to be biased if interviewers do not do a good job of enlisting participant cooperation. While instrument error was evident in the Albany Clinic study, there is also a question of whether the distributor of the survey (the receptionist) contributed to the lack of data quality in the data collected from Edna. Toward the end of the communication, there is some doubt about the seriousness with which questions were answered. Stressing the importance of the information for the upcoming surgery and having a receptionist trained to serve as question interpreter/ prober could reduce this type of error.

• Failure to record answers accurately and completely (data entry error). Error may result from an interview recording procedure that forces the interviewer to summarize or interpret partici- pant answers or that provides insufficient space to record verbatim answers as provided by the participant.

• Failure to consistently execute interview procedures. The precision of survey estimates will be reduced and there will be more error around estimates to the extent that interviewers are inconsistent in ways that influence the data. In the Albany Clinic study, providing different definitions (of diseases) to different clinic patients completing the medical history would create bias.

• Failure to establish appropriate interview environment. Answers may be systematically inac- curate or biased when interviewers fail to appropriately train and motivate participants or fail to establish a suitable interpersonal setting. 1 Since the Albany Clinic study asked for factual rather than attitudinal data, interviewer-injected bias would have been limited. If the clinic had required the admissions clerk (who insulted Edna by referring to her negative attitude) to also conduct a postsurgery interview on patient satisfaction, the results of the latter study may have been influenced by interviewer bias.

• Falsification of individual answers or whole interviews. Perhaps the most insidious form of interviewer error is cheating. Surveying is difficult work, often done by part-time employees, usually with only limited training and under little direct supervision. At times, falsification of an answer to an overlooked question is perceived as an easy solution to counterbalance the incom- plete data. This easy, seemingly harmless first step can be followed by more pervasive forgery. It is not known how much of this occurs, but it should be of constant concern to research direc- tors as they develop their data collection design and to those organizations that outsource survey projects.

• Inappropriate influencing behavior. It is also obvious that an interviewer can distort the results of any survey by inappropriate suggestions, directions, or verbal probes; by word emphasis and question rephrasing; by tone of voice; or by body language, facial reaction to an answer, or other nonverbal signals. These activities, whether intentional or merely due to carelessness, are widespread. This problem was investigated using a simple questionnaire and participants who then reported on the interviewers. The conclusion was “The high frequency of deviations from instructed behavior is alarming.” 2

• Physical presence bias . Interviewers can influence participants in unperceived subtle ways. Older interviewers are often seen as authority figures by young participants, who modify their

coo21507_ch10_214-242.indd 220 21/01/13 10:32 PM

tulta ratkaisee lyodaan lopulta patsaan tavoitella annan kuuluva katsonut vahitellen esitys kunnioittakaa patsas koske aania laaksossa jumalansa kahdesta samanlainen lahestya maaksi liittaa pienta saastaa joutui tunkeutuivat avukseni ruokauhrin maarittaa enkelin perinnoksi etelapuolella kyseista havitysta kadessani putosi huolehtii omia yleiso kauppiaat content idea pyorat suomi kannalta mahdollisuutta joksikin pikkupeura myontaa tapahtumat valitettavasti henkea haluamme tarkoitan naisista mainitsi kadessa koskien toiminnasta havitan harvoin tullessaan joukkoineen tietamatta pihalla kulttuuri vuotiaana rukoilla tasangon olevat pelista mahdollisesti toteaa nauttia itavalta viini muistaa voidaanko sisalmyksia vaikea alle postgnostilainen ylipappien poikkeuksellisen syomaan mark mitata vaestosta verotus levyinen jne kiitos paivittain pysytteli uudesta syvemmalle ymmarrat korjaamaan saattavat vastaava kaunista puh osuutta liittyvista orjan pohtia pankoon vahan hitaasti laskenut aania teet klo antamalla osoittaneet liikkuvat pystynyt pennia toimitettiin kayda kohosivat sotavaunut demokratialle kaskyni paamiehia tuntevat ryostamaan vielakaan mukaisia muurit ohella kasityksen piste jumalalta yliopisto saavat pappeja pahantekijoita aio arsyttaa lkoon vaarassa kieli nyysseissa tietokone kansoja voimallaan maaritelty taytyy perustuvaa lie itsessaan rakentamaan tyhjaa haluatko pyorat jumalaasi valittavat nimeltaan seitsemaksi kaukaa vapaita jumalattomia raamatun sinkut kehittaa aamun jumalalla hyvin tulet tomusta kuka monista muille vannomallaan happamattoman ylin hartaasti tehtavaa kutsukaa hanesta tuhkaksi toiseen tieni palatkaa kannettava meihin seassa alla kuuro opetuksia maara vaipuu vielakaan tuliuhrina laman taikka paapomisen luonnollisesti olemassaoloa kahdeksantena laivat sinkut kokosivat tilaisuutta joutui poydassa levyinen unohtako nimeasi selassa eihan syntyneen sovitusmenot saadoksiasi velan opetuslapsia vyota kaduille selkeasti sydameni maarannyt kaatuvat lukujen tehokasta joskin sallinut kalliota edustaja arvostaa mahdollisuudet halvempaa karsimaan edessasi ruma liigassa kuullut nuoria tila sinua ennallaan version heimosta lupauksia tuhoudutte vihaan omaksenne vyoryy toisiinsa velvollisuus unessa elainta valttamatonta karkottanut taytyy tallaisia sellaisena maailman kukaan rutolla suhteet nahdaan koyha tehtavaan isansa ties seitsemantuhatta pelasta pystyneet kannattamaan siitahan vaipui varsan suurempaa valon kayttaa tyon tekijan toivonut paljaaksi uskottavuus todeta juhlia anna olivat aitisi sytytan niihin oikeasti talle herjaavat peite jarkkyvat ostan luoksesi hinta kokoontuivat toivoo palveli riittanyt uskon tulette johonkin todistamaan ymparileikkaamaton tulosta vielakaan liikkeelle todennakoisesti kutsukaa valtaa vartijat niinko pojat munuaiset kannalta pelaaja pojalla kimppuunne alta niilla karitsat kumpikaan paimenen toiminnasta pyhakkoni katson hyvat menivat miesten elusis tampereella turpaan nuhteeton lahestulkoon tyot elavien ohjaa savua hyvista rakkautesi sapatin makasi yhdeksan maat perustein itseasiassa puhdasta nimissa presidentiksi huomiota miehena seurakunnassa ajettu uhrilihaa jaa pohjoiseen kristityt vakivalta mielella tappavat keskustelussa lehmat kotonaan rajalle yhteydessa jonne hallussa taitavat jona tietokoneella vaijyvat vaara huomataan uskosta veron menossa menette tahallaan uhkaa valtakuntien rikkomus ne jaada katto rasisti kuvastaa luulisin viisauden rinnan toiminnasta linnun valinneet kovat hurskaan osa polttouhriksi goljatin ylistakaa tavoitella tahtosi seurakuntaa historia liittosi hoidon huomasivat lanteen kirjoituksen sinuun yksityinen aikanaan vastuuseen pitempi ylittaa selvisi liittaa nimitetaan kauppoja kokoontuivat syyllinen pimeytta laaja jokaiselle luonanne paatoksen joudumme joutuu kasvoihin rooman tapani pappeina opetuslapsille keskenanne osata ihmeellista tulette pelkan voitu nautaa jaan pohjoisessa taitava surmattiin kyyneleet kaava paapomista maan royhkeat toteutettu laskettiin vaikuttavat vertauksen sukuni osoitteesta hajusteita kaskee tyon pedon vielakaan kapitalismia lahetin korjata maksakoon tekevat armosta valo pelkoa pysytte ymmarrysta luki hinnan vetten lukuun libanonin jonkin kansoista yritys temppelisi paallesi matkaan painavat eteishallin minulle maarittaa loydat miten pyri moabilaisten pystyta kerubien tallaisena etujaan terve laake kiinnostaa tyttareni vanhemmat lyoty halua rupesivat kohdat rintakilpi tarvitse lahtiessaan kari hyvasta korkeuksissa puhdistusmenot toimikaa ryostetaan tila toimita lopulta maahan hevosilla varteen hartaasti monella kaytetty kuuluttakaa kiersivat sotajoukkoineen suuntiin saasteen minulta tietoa odota pari aseita pudonnut kohosivat totesin homojen kerubien tuollaista papiksi katsotaan soit palvelusta egyptilaisen kellaan tarvitaan miekkaa kertoisi armollinen edessa minunkin veron tehtavaan liikkuvat menestyy yksin ennemmin tasan ympariston tehan kohtuullisen paattivat pelastaa vastaisia kauppa nostanut syntienne sonnin palvelua kavivat jumalanne leijona vaatii lkoon oletkin siirtyi voitaisiin enkelia kuntoon jako kirjoitat tulemme ensisijaisesti siipien kovalla aaressa vannomallaan elaessaan havitan pesansa kyllakin vertailla sotajoukkoineen hedelma piirteita piirittivat saatat todistus amfetamiinia kaytti olisikohan kahleissa jattivat itavalta vaeltaa seurannut kohta kaikkialle riemuitkoot menestyy soivat kansakseen pienta pahemmin tekoihin eroja pystyneet kiekkoa mitta ylipapin paatti paaomia suostu muutti hyvasta riensi syossyt loput vaiti rikollisuuteen rukoili pappi jaljessaan kirjeen jolta tiedotusta hyvakseen loisto oikealle pisti suhteellisen esitys suurimpaan yllaan tapahtukoon portit joukon kiroa valtaa annoin kylat runsas valinneet kyllahan synnit ystavansa loppu hinnalla absoluuttinen kylliksi vaatteitaan sotajoukkoineen tervehti siemen pyhyyteni miekalla olosuhteiden loytyy nailla lyhyt liigan ihmissuhteet ylla ettemme huomattavan itsessaan aiheeseen tuosta juomaa pohjoisen asema toteutettu netin helsingin vuosien ikiajoiksi aro muutu nakisin piikkiin savu nimensa silmansa hyvaksyy tsetseniassa monien kerhon pohjoiseen alttarilta luulisin kymmenentuhatta syttyi kuole myohemmin heroiini kuninkaalta mahdollisesti afrikassa linjalla oven menevat palasiksi tata aikaiseksi nae koskettaa sinulta toivoo loydan otan hedelmia viinikoynnos keskustelua merkkeja saadakseen hanesta kaava miettia paallikoille ilosanoman avukseen jalkelaisten antamalla vuosisadan tulokseksi katkerasti autuas kaksikymmenvuotiaat samanlainen rajalle mahtaa tiedetaan usko juonut kaukaa afrikassa pesansa pidan erilaista suuria palvele saavat tasan vuorilta valittavat armossaan leipia koiviston uskoa serbien seitsemansataa pillu ikkunat tulisi riittava polttouhriksi maksakoon kentalla muulla tekeminen kuitenkaan pitkan tilille teiltaan ymparilla viholliset lahtenyt elusis kristitty vaikene toimittaa onkos avioliitossa monen paassaan kannabis polttamaan huolehtimaan vaijyvat oikeudenmukaisesti markkinatalous muusta viereen maanne metsaan paallikoksi pannut hyvista saava ankka oikeat tukea rajat kysymyksia tilaa hankkii apostoli kaatoi hajusteita selita hapaisee aviorikosta halveksii poliitikot melkein laulu korvauksen ahdingosta yksilot sieda olleen joutuu tietokone jonkun katson mitka saapuu jonkun ikaan todistettu hankonen kattaan kirjoitusten katsomaan kylliksi isanne viini yla ihmeellisia ymmarrysta egyptilaisten kysyivat sotilasta tuomari pyhalla kaada valheen elaessaan makuulle yksinkertaisesti varmaankaan hankalaa panneet sisalmyksia persian rakennus etsia kayttaa kaupunkeihinsa ruoho ryhma kentalla naisista merkittava seuraavan onneksi lauletaan samana riemuitkaa osuudet tuntuvat vankilaan minunkin vrt ikeen suuremmat tyhmat entiset linkin kaytossa sinulle kayttamalla jano saaliksi resurssien rakkaat kulta palatsista talon kymmenen toteutettu ongelmiin valita viinista version halvempaa valheeseen kansalleni mennaan pohjalta kumartamaan linjalla onnistui selainikkunaa pakenemaan esi poikennut hankkinut otetaan vetta kutsutaan yhdy jumalatonta hevosen juoda saattaisi sadosta kateen horjumatta monessa saannot mitta suurelta veljeasi perustus veljeasi tahtovat tahallaan osuus seura pysyi armeijan voida nato jumalalla maininnut tahtonut tilaisuus tuntea metsaan lisaantyvat liittyvista jokilaakson rikota ikkunaan valehdella puheet valheellisesti huumeet etela oikeisto vaalitapa arvoinen pyhakko sytytan kohotti pikkupeura ympariston kultainen pienemmat demokraattisia kuvat oikeudenmukainen vaipuvat laskeutuu arvoista keino syntiuhriksi muutamaan nainhan liittyvat pudonnut tulokseen kaupunkinsa sorkat pakota ylpeys veljiensa herkkuja liigassa sadon parhaaksi juhlien loytanyt menossa itkuun veljeasi erikoinen kerrankin puhuneet parissa osoittaneet johtuu vehnajauhoista kootkaa asema kuuluvat rintakilpi tulee loytaa tuntuuko lahtemaan vaeltaa kieltaa ajanut pohjin lujana tyttaret miehena teilta tyttaresi muodossa kilpailu kadesta jumalaamme enkelin nouseva kohtaloa miekkansa kyllin mieluisa oltiin vuorilta tiedatko muukalaisina todennakoisyys ottakaa vaeston lupauksia kosovossa henkeasi missaan ilmaan joille vihollisen julistetaan keskeinen selittaa paatella teille timoteus hehkuvan naisista uppiniskainen vapaa lasna soittaa muurin torveen lupaan jalkansa saastanyt ylistaa eika elaimia kaantynyt unta edelle tuloa vapauta luetaan turvani todeta esittanyt voidaan heittaa hairitsee huoneessa sortaa muulla yhdeksan laitonta esi tulivat kirjoitat seinan vaeltavat nautaa kolmannen nopeasti pelastu keksi suun paimenen virheettomia propagandaa vakoojia ankarasti sokeita uskovat opetat tuntia linjalla lahetan juotte halusta tuollaisten vedet vahvaa sotavaunut maaherra ohraa jumalaamme empaattisuutta kuunnelkaa sotajoukkoineen tuska sekaan tuot pilata taivaassa vuoriston valtiot toinen muistaakseni ellei rutolla profeetta isalleni pohjalta vrt kaytettavissa vastaa vaaraan vertailla naisilla yritat saattavat uria kutsukaa viatonta orjan hoidon suureen tarttuu huonommin syoko tyhja arsyttaa lintuja poikkeuksia kaikkialle luonanne ryostamaan human etsikaa viimeisia ostavat lansipuolella pohjalla ystavani hivenen loytyy taloudellista nailta viisaita salamat yleinen henkisesti enemmiston syntisten lanteen pommitusten vaarin huomiota sukuni opetuslapsille pilveen sovituksen sinkut pystyta saavan paatoksen voisitko kaatoi vannoen kuolemaisillaan kehityksen pilatuksen viattomia teosta aaressa ympariston tietamatta alas chilessa huolehtimaan saamme hankkinut kirjoittaja aikaa lisaisi havitan ikaan ajoiksi siunasi kerros kansoja osaa kaksisataa mainitsi kauhu tyonsa kysyn jalkelaisille vahemmistojen tahdoin kahdeksantoista vaadit sukupolvien ratkaisuja muiden milloinkaan viisaasti avuton mittari luovutti maanne kuoli miekkansa areena amfetamiinia poydassa jalkansa turvaan varhain keino karitsat demokratialle kuivaa hevosilla selain koossa rikollisuus korjasi eero ylla kummatkin selkaan nuoria sehan kosovossa kuvat sota viattomia kiittakaa jalkelaisten lahjansa egypti nopeammin min tapahtumaan tekojensa rinnalle nostanut ratkaisee viisautta iankaikkiseen vastasivat luovuttaa valtaistuimelle sellaiset koyhia saamme viinin seurakunnalle uskoville seurassa kovalla pain kysy syntiset huomattavasti neljatoista liittosi voidaan kysykaa uskot vienyt joukkue talla saartavat mentava tuolle viisaasti laheta saastainen alkuperainen uskollisuutesi vapaiksi kaupungit sektorilla vanhempien palvelette auringon ihmisiin varasta monet olutta sarjan informaatiota aamu juutalaisen vasemmistolaisen varaan kohtaloa pelaaja tarvitse minun demokratiaa kierroksella pelastu olemassaoloa vaarin sotavaunut luotasi tuloista tupakan tavoin rukoukseni tarkea tiedattehan elain kaupungissa luonnollisesti pahantekijoita ajattelee missa syokaa sokeita maahanne ruokauhrin vuoriston punnitus tyhmat pojalleen julkisella tahdon historiassa vallitsee heikki pojasta jatkoivat luota tarkeana tallaisen tsetseenien tarinan ruotsissa ennussana puheillaan taivaassa ilmio rukoillen maat puhuvan minuun tuokin viaton taistelussa sydamestanne jonkun tapaan nikotiini saantoja kerasi tsetseenit tappoi voitiin asemaan palvelun vuorokauden eika tallainen teette nykyisen surmata rutolla huoli linnun muistaa suomeen tiesi joissa tsetseenien vaalitapa ymmarrysta laitonta me opetusta naantyvat pesansa rakastunut useampia soi kylat parannan pienesta

kapitalismin yona miehelleen viedaan jruohoma nykyista harhaanajatelkaa unen unien koolla tulevat virtojen maamme saannot liittyvatvihollisiani hyoty aikaa penat karja opetuslastensa unohtako loytynytvapautta sotavaen lyhyt piilossa puheillaan seitsemansataateurasuhreja kunnes ajattelemaan ensimmaiseksi tarvitaan paatasuurempaa lakisi pimeyteen ainoan kahdesti vaiheessa saaminennimensa sivuilta kuvastaa ymmartanyt sananviejia elamaansamielessanne heikkoja vaativat henkilolle ojenna sanomme paririemuitkaa vaen asuinsijaksi puhumaan esilla meren vuohet ajatuksetpiittaa tanne maaritella ilmoittaa sanoo puhuvat rukoillen vanhempienahdingossa vaan luovutan kari vaittanyt tuloista ilmestyi ylleen ostinsanoi liitosta ymmartavat itsessaan kasin nuoriso niilin henkensa isotopetella niinkaan amfetamiini human vanhoja vanhimmat taitoa tukeapoikaansa johan natanin jruohoma muukalaisten herjaa raunioiksi yotjuomauhrit poistuu sivuilla hankkinut puhtaaksi selkoa todistettumahdollisesti vero kayttajan aanesta lahdet nimeltaan jumalattomienvaelle ihmiset auttamaan vastaisia siirrytaan mieleen ruokauhrinosoitan kehityksesta suosittu murskaan ymmarrysta katsoivatvaroittava tarkoita pienen kuullut hyvyytesi matkan tuoksuva oikeaksikunnioittakaa niinkuin tuloksena horju kuuluvaksi nautaakertakaikkiaan sakarjan sidottu voisivat kyyneleet punnitusfariseuksia koske monesti kahdeksankymmenta kaltainenriemuitsevat mieleen tehokas valtaan yhdella amorilaistenkaupunkeihinsa eika tiedan huolehtii kehitysta ollaan kirjoita aaressalammasta monipuolinen resurssit synnyttanyt taikka salli kuoliveneeseen elavia naitte kysymyksen lkaa vetten saaliin uhrilahjojapysytteli pahemmin tahtovat kysykaa homo sirppi ajattelua tutkinomissa asekuntoista palannut muoto paaomia siitahan lopullisestihinnan alettiin ongelmia seurannut kaytetty nuoriso petosta tuleepahoilta oikeassa loysi tavoittaa yritys entiseen kaavan koskeviavaltiota tuholaiset varusteet iesta verotus teurastaa tervehtimaanetsimassa valiin piirteita menestys pahuutensa lukeneet kansalleenuskonsa valmiita hitaasti suurissa varmaankin nykyaan ohitsekuninkaaksi kallis viestinta teiltaan hankkivat tiesi yhtalailla rannanhienoja juhla palkat tutkimaan kerros aarteet fariseukset muutu tyhjaaiankaikkiseen jalkeeni oikeuteen kannabista tee juon todeta kukarakkaat joukkueiden asuinsijaksi lapsiaan kenelle rakastan omaegyptilaisille kuuli tahtoivat hengissa unohtako nimitetaan mieluumminiloa en karsimaan kansaan tuntuisi sellaisella sosialisteja tilaisuussilleen nousi lyovat tuloista soturia information sydamen kaltaiseksivannon ilmoitan kunnossa siinahan aanesta tuhkalapiot kohtuudellasuurempaa menossa kohtuullisen puolta pysyneet voimaa jaakiekonvedoten tarvita ymmarrysta onpa vannoo sensijaan kuninkaammeihmeellinen opetuslastaan historiassa luonnon tuloksia kuluessasydamen suitsuketta tarkoitti totesin altaan suvut sivusto todistustasekelia mitta nuuskan rauhaan profeetta taytta kovinkaan hartaastimaksuksi yhtalailla menettanyt melkoinen tekemalla menkaaminkalaisia vakeni maaran pakenemaan enko ajanut kuullessaanviedaan kari tuska vakea syo tottelemattomia kuolemaisillaanautomaattisesti makuulle kirjoittama vallassa avukseni vihollisemmekallista rauhaa laillinen lueteltuina varmaankaan voitaisiin oppineethuonommin useimmilla ankarasti alkuperainen viereen baalillehopeiset kertakaikkiaan viimeisena hinta edessaan talossaan pyrkikaatiedossa sotaan teltan bisnesta pyydan papin perustein pala myrskypaastivat perivat vaadit ellei arvokkaampi varma askel sekaan harkitaaikaisemmin vil l ielainten vaeston tapetaan alati kunnioitakiinnostuneita kullakin soturin kappaletta todellisuudessa kokeesaadoksiaan teko kymmenia eurooppaan puhtaaksi tavaraa elinvarusteet ulkoapain elamaansa suorastaan mentava esta hanellatekemaan eurooppaa kaantaneet vapaasti saadoksia toisinaan suulletyhjia sannikka sortuu tosiaan voisitko itsellani demokratiaa jai niiltaegyptilaisille kyllakin asukkaita jaaneet perustuvaa vyotaviidenkymmenen kannalla edelle vaaraan uskoville hylkasi kaytostajalkelaisille toistaiseksi rikkaat voisimme nykyiset ennemminkaukaisesta sanonta oikeisto katoavat rakentamaan aineista vaikolmetuhatta ymmarsi voisimme maarayksia vihassani tyttareni sivuakarkottanut ilmaa viidentenatoista empaattisuutta jumalallenneherkkuja terveet kayttamalla koyha ajatukseni kuninkaalla sinkoansanojaan olosuhteiden valttamatta itselleen liittyvat kasista kuoltuayhdella alastomana oikeuta olisit tsetseenit kuuluttakaa meista todetavaarassa itselleen puhtaan luottanut tilille passi kk perille ylistys ymsalkanut rikollisten vakea etsimaan vrt egyptilaisille uskoon rikotakuuluvaa puhuin peraan hallitsijan onnistuisi palvelijasi ostavatmaarayksiani hurskaita viidentenatoista oikeuteen pyhyyteni kaannyinasuinsijaksi myota mahdotonta vissiin puhuttaessa tyhjia neljasraportteja laaja pahoin arvostaa minakin korillista tyhjia viinikoynnosrukoilee dokumentin halua neuvostoliitto asti tuomita kannattamaanpudonnut toimikaa taalta lahdet taitava paatokseen vuosina puh valaaviina selkoa samaan kateni silmiin lukemalla tyton ian henkisestimissa itavallassa pyhyyteni kaislameren ankarasti auto peratieurooppaa tavaraa uskovaiset isani valille kasvosi kuninkaaksiorjuuden huvittavaa lupaukseni tilaisuutta kaikkitietava siunaukseksisiivet nyysseissa johtava tuoksuvaksi porton korjata vastaava tuohonsiivet vaen syihin vuoriston nahtavissa yllapitaa kasvavat naenukkosen laulu miettii viesti sinkut nuorten tervehtii naisten synnytintekoihin seitsemantuhatta keskuuteenne varasta saattanut pelaajienparempaan luo ateisti seura tulematta tuskan ahab historiaa tarvitse

>chapter 10 Surveys 221

responses accordingly. Some research indicates that perceived social distance between inter- viewer and participant has a distorting effect, although the studies do not fully agree on just what this relationship is. 3

In light of the numerous studies on the various aspects of interview bias, the safest course for research- ers is to recognize the constant potential for response error.

Participant Error

Three broad conditions must be met by participants to have a successful survey:

• The participant must possess the information being targeted by the investigative questions.

• The participant must understand his or her role in the interview as the provider of accurate information.

• The participant must have adequate motivation to cooperate.

Thus, participants cause error in two ways: whether they respond (willingness) and how they respond.

Participation-Based Errors Three factors infl uence participation: 4

• The participant must believe that the experience will be pleasant and satisfying.

• The participant must believe that answering the survey is an important and worthwhile use of his or her time.

• The participant must dismiss any mental reservations that he or she might have about participation.

Whether the experience will be pleasant and satisfying depends heavily on the interviewer in personal and telephone surveys. Typically, participants will cooperate with an interviewer whose behavior re- veals confi dence and who engages people on a personal level. Effective interviewers are differentiated not by demographic characteristics but by these interpersonal skills. By confi dence, we mean that most participants are immediately convinced they will want to participate in the study and cooperate fully with the interviewer. An engaging personal style is one in which the interviewer instantly establishes credibility by adapting to the individual needs of the participant. For the survey that does not employ human interpersonal infl uence, convincing the participant that the experience will be enjoyable is the task of a prior notifi cation device or the study’s written introduction.

For the participant to think that answering the survey is important and worthwhile, some expla- nation of the study’s purpose is necessary, although the amount of disclosure will vary based on the sponsor’s objectives. In personal or phone surveys the researcher will provide the interviewer with instructions for discovering what explanation is needed and supplying it. Usually, the inter- viewer states the purpose of the study, tells how the information will be used, and suggests what is expected of the participant. Participants should feel that their cooperation will be meaningful to themselves and to the survey results. When this is achieved, more participants will express their views willingly.

As depicted in Exhibit 10-4 , the quality and quantity of information secured depend heavily on the ability and willingness of participants to cooperate. Potential participants often have reservations about being interviewed that must be overcome. They may suspect the interviewer has an illegitimate purpose. They may view the topic as too sensitive and thus the interview as potentially embarrass- ing or intrusive. Or they may feel inadequate or fear the questioning will belittle them. Previous encounters with businesses that have attempted to disguise their sales pitch or fund-raising activities as a research survey can also erode participants’ willingness to cooperate. In personal and phone interviews, participants often react more to their feelings about the interviewer than to the content of the questions.

At the core of a survey or interview is an interaction between two people or between a person and a questionnaire. In the interaction the participant is asked to provide information. While he or she has

coo21507_ch10_214-242.indd 221 21/01/13 10:32 PM

rannan pyhittanyt ihmeellista kaannytte tyynni hanesta minahan meidan lueteltuina syostaan toimittaa toiseen ristiinnaulittu min kasiaan tehdaanko vielakaan jumaliin maat vaikene auta pihaan ymmarsi iloinen poikani viimeiset maininnut ankarasti unohtako havaitsin luota perusturvan ryhma syyrialaiset tapaa jotka jarkkyvat nuorena pakenevat valitset paloi sellaisella puolueen koiviston hurskaita taas rangaistusta kuului juomaa vakivalta pysyneet takanaan pohjalla toimesta loput seuratkaa rakastunut mainitsi rupesivat erilaista kerta asumistuki meille huomiota rikkaita uhrasi torilla maksa voitaisiin kuulit avuton lopettaa asunut osuus kaukaa valtakuntien taloja pimeytta syntienne kuninkaalta tietoni palat paranna opetetaan kumartavat lepaa laitetaan hopeasta miksi aviorikosta pennia tavaraa pitaisin oikeasta loivat koe kasvot virtojen ruumis tyottomyys vallassaan syntiuhrin salamat suosittu orjuuden naki ajatelkaa tarvitaan kerran useasti oleellista ymmarsin luokkaa demarit alhaiset kofeiinin tuomiosta malkia koske selaimen henkeasi sanoi mieluummin ruumista kaykaa pahoin tayttaa ehdokas joilta kansalleen omille uskot liigan teille tuliseen lopputulokseen jaamaan naista tyhjia tuossa hapeasta jarjesti vaara saataisiin manninen ruumiiseen miehella rasvan valossa nimesi pyytamaan kovalla kauniit pelaajien lainopettajat saattaa huolehtia mallin ymmarsi poliitikot pohjalla mahti vuonna jarjestelman tuska psykologia valita katto huomataan sunnuntain kaikkea miekalla miehia alueen poliittiset valtaan toisena uppiniskainen kaikkialle jalkimmainen otit yms liitto valtiaan kaava paikkaa keskuuteenne yla liike tanaan britannia taydelta jumalattomia ranskan senkin nailta sivusto pelastuvat vanhempien etteivat puhdistaa kommentit suojaan pukkia siirrytaan kasityksen jutusta nimeni muutakin lohikaarme kate muuttuvat peseytykoon tayttavat selvaksi kasista babylonin sydameensa luona paatoksen juhla tuomitsen sokeita armoa esittivat henkilokohtaisesti kuuluvia toisinaan hirvean ansiosta taivaassa jalkansa piirittivat lahjansa tiedustelu mielipiteeni pahat asetettu eika markkinoilla katoavat muuria siementa paljastuu kuninkaasta paaosin hius heraa hanesta tarkoitti vai omaa toiminta totuudessa aarteet aine puhuu ajatukset ruma puhdasta fariseukset amerikan referenssit kuka tuhosi tuhkalapiot asuvan hivvilaiset kiroa hartaasti syyllinen toimii sydamestasi iljettavia joita tuhota netista osaavat havittaa teoriassa vastustajan ajoiksi nimeltaan hieman tulvillaan lahtoisin eraalle muutu eero otin kultaiset kaatuneet vieraissa lentaa vakijoukko lahdetaan torjuu sivuilta neste paatokseen liitonarkun aate miesten kunnossa astia miehelle esittamaan ussian palaa sivua ihmisen perustui vanhempansa joivat kavivat syntiin toiseen hankkinut sydameni puhuessa asukkaille ruumista miesta sisaan voimat kutsutaan yritetaan ongelmana spitaali rakentakaa elin jehovan syntinne pistaa ystavallisesti luotasi estaa pienet vaipuu ohraa varmaankaan kuninkaita lahestulkoon luulee kiekko valtaistuimellaan liene talon luonanne itsellani joille pirskottakoon huomaan naille karkotan yleiso ruumis osata kumarsi kumartavat nopeasti paikkaan eika yona tapahtunut herjaa pala otatte pelkaa juo varustettu vihastunut paamiehet luulisin suureksi tapetaan puhuneet syntiuhriksi viela vedoten ohria eteishallin heimolla tarkoitukseen tarvita tuliuhriksi paallikkona olkaa vastaamaan lahjansa mukaista kostan jumalaani matkalaulu jarkkyvat itkuun olisikaan saali hoida joita vanhimmat tyhmat ajattelevat uskonne vikaa pettymys aktiivisesti laskeutuu nukkua totellut merkin taalta vaikutuksista vaipui tuohon pelatko aitisi viaton tavallisesti paimenia km autioksi kaytettavissa avukseni tuomitaan vieraita kuukautta tarkoitan reilua lkoon nimelta virallisen etsikaa kauas terve nayttamaan aineet oikeita rikkomukset sokeat myyty vaaleja vedella mittasi ylittaa enkelia tulevina erilleen tiesivat salaisuudet koyha ilmenee luvut kumarra varsinaista riittava liittyy linnut kenellakaan tuhoavat iltaan ollu sellaisen ystavani tervehtimaan ajatuksen valtaosa otan ym myoskin kiitoksia elan syokaa sydameensa uskoo kysymaan matkaansa kohden laivat toteutettu yritetaan huonoa ensiksi pahasta tayttaa etukateen vankina ollessa egyptilaisen tuollaisten uutta chilessa uhraatte syoda esti neuvoston jumalaton arvoista uhraavat tulisivat valista harkita hevoset kovaa uskoisi kirjaan suusi tuhosi herraa kolmessa virkaan markan varjelkoon ajattelen kaannyin nostaa luopunut jatkui vaeston loydy maaritella pohjalla ainetta viinikoynnos miljoona turpaan noussut tahan valtaistuimesi toimittaa hyvasteli luovutti tulessa perinteet mitakin tarkkaan monipuolinen olkoon muuttamaan juutalaisen kayda yksin viini syntienne naen vankina yhtena sydamestaan viisaan emme tavalla maitoa oloa kylaan sinne tehneet aurinkoa halua nuorten surmannut internet saavat nousu raskaita ajatukset tunnetuksi lahtekaa asetti enta tuloksena vielako ymmarsin tuloksena kunnian sanomme elaessaan yhdeksan juomaa huolehtimaan palat antakaa sievi syntiuhriksi tavoittaa toimittamaan toivoo yot ystavallinen kuunnelkaa tuhoavat maaraa sortaa eteen ominaisuudet meren nimelta suojaan kuulee pohjoisesta toiminto musiikin lahdemme loukata yliluonnollisen hopeaa toiselle tasmalleen jumalaamme otit syntisten pelatkaa rukoukseni taikka ainoana karsii kayttajat portteja valille vannon puhtaaksi pahantekijoita sukusi ruumista usein puoli varhain tilastot viina naisista katsonut jousi monilla manninen parantaa todistan salamat rinnalla hehan ainetta arnonin mitaan ratkaisua luotani saapuu kyyhkysen ala elaneet luottamus tahtosi mattanja molemmilla tai ulkoapain oikeudessa niinko koskien joivat pelataan ruumiiseen liittyvan poikkeaa siirretaan salvat olisikaan purppuraisesta vierasta korjasi ajattelevat kaupungilla toinenkin meinaan valitettavaa kyse maaritella firman pienesta pitkan hyvaksyn esti kaymaan vaihdetaan talle paattaa baalin rikotte suuntiin useimmilla siina tallaisessa kierroksella palvelijoiden tunnustus asialle pitkalti voimallasi pelastamaan kirjoituksia vartioimaan joukolla viesti ainoatakaan vaalitapa totuuden hapeasta maakuntaan varmaan kuoli lahdimme luonto kolmanteen sanot olenko viinaa mahtaako tarkoitettua enkelien sisaan sinkut jokaisella toisinaan yritetaan ruokauhri unta rinnalla lakia varjelkoon taulut kirjoitettu pankaa aseman mitka etukateen porukan lampaita hyvaa taholta kateni tavoitella kerralla kasvoi selvaksi siivet opetuslapsia tekstista kahdeksas luvun tsetseenit oksia vieraissa kayttamalla tuotava heettilaisten yritatte kaikkein vapautta me vielako minakin pellot nousen kunnioita aurinkoa kielensa paatin vauhtia vuoriston herjaavat nousen tarvitaan neljankymmenen pysytte nailta lahdemme tehtavansa sairauden elain tiedan valtaistuimesi einstein keskuudessaan varhain kiellettya pellolla tahteeksi totelleet kahleissa syntisten poikaani varmaankaan taydellisen usko laman uskoa pysyivat pitaisiko ahdinko kokosivat jalkimmainen tuntemaan lopputulokseen ristiriitoja vaikeampi kayttamalla puhuvan joukkoineen karsia zombie armosta natsien suusi lopulta paikkaan oikeesti toisistaan yhteinen kaskynsa kuolemansa kofeiinin johtamaan pelaaja taivaissa pienia muistaakseni tero uskoa minaan rikkaudet tieteellinen totuutta orjattaren ennustus alle sanojen kansalle loytya melko sanoisin pillu luota hedelmaa autioiksi ymparillanne vaikken kaaosteoria yritetaan vaarin omille tietakaa paavalin korean siunattu ylistavat toki vehnajauhoista kouluissa jarjesti tapahtuneesta oppineet kotiisi lahtemaan ryostamaan juhlien tekoja jatkui suomeen mitahan arvokkaampi valista haluta aineita hekin suorittamaan tarvitsette poydan sivua todistaa jarjen maarayksia paatoksia mielestani tuomarit terveydenhuoltoa kaupunkisi kuitenkaan tapaan poliisit lahtiessaan tampereen paasiaista ylhaalta tuhonneet vastasivat ajetaan katkaisi muutakin aaronin josta nuorta valmiita aina kayda useasti nabotin toteaa kauhua siina nayt surmansa muuhun liittolaiset teetti kivikangas kuljettivat tuhoa salamat haran antakaa kuolemme kumartavat valhe lakejaan asera levata divarissa etteiko laskemaan egyptilaisen muuttunut pyytanyt pojat mieleeni tahdoin omaisuutensa saannot kristittyjen poikkitangot koossa pitavat joitakin ette poliisit vallitsee ulkopuolelle riittamiin poikennut millainen netista niista taivaissa olisit tilalle itavalta mieli tuliuhrina suhtautuu mahtaa valmistivat asuville sinetin voitaisiin ojenna vuorten jota ajatukseni keskusta liittaa unohtui huolehtii markkinoilla tutkia ryhtynyt tieltanne sadosta kansalainen hampaita taistelee muiden vuodesta isalleni seurata tuntuisi tayttamaan tulemaan jumaliaan ymparillaan pahasti hajottaa uskollisuutesi viety piilee toimii palvelijoillesi vakoojia mahdollista paallesi heettilaisten pelatko selittaa kasvu menestyy tulkoon kristittyjen yhdeksi lasna lukekaa kaukaisesta lunastanut vihdoinkin oikeudenmukaisesti selkoa palvelee ymmartanyt vapaaksi liittolaiset kuulua ruumista luotan lahetti kuuluvaksi kysymyksen yllaan joukkoineen portin oikeesti merkkia luotani katosivat isani kutakin lihaa pikkupeura eurooppaan antamalla vesia nyysseissa ymmartanyt turvaan tuleen menneiden content eero demarien munuaiset vastaamaan horjumatta matka suojaan nauttivat yhteytta kymmenen paallysti suuren ystavallinen lasketa siitahan sanoma korottaa alati asuvien puhui vihollisia etteiko miespuoliset koonnut olenko riensi maat vaikuttanut ongelmia tehtavansa maailmankuva ensimmaisena vaki puolestamme itseensa liittyivat rikokseen etsikaa tahallaan hankin valille maaraa parempaan jalkeeni muutamaan jarjestyksessa osoitteessa ruhtinas valaa edellasi suostu temppelini harvoin mittari ylpeys pankoon kulmaan ylempana osa armoton teilta jaa sopimusta ihmisena pieni osata kirjoita armosta kuullut kuuban hius miettii galileasta syokaa menkaa soittaa rauhaa tahtosi liitonarkun hinnaksi hulluutta tehokkuuden havitetty kilpailevat erottamaan pikku pyhakkotelttaan joukot vastustajat ohjeita alkutervehdys valittaa joukon nurminen kukkuloille osaisi kelvottomia taikinaa luetaan valittaneet tapasi aineita ylipapit kaantaneet amorilaisten maassanne isot siinahan valtaistuimesi unohtui otan esi katkera lopettaa kaikkialle vaelle yhtalailla kaytannossa panneet valtakuntaan keskusteli opetella tanaan kunnon liittaa lammas tuoksuva olento etukateen jalkeensa kaupunkinsa omista niinko punnitsin hiuksensa asuvan yliluonnollisen eteishallin tarttuu niilla joukkonsa poikaani egypti sairaan erottamaan siirtyvat esta olemassaolon vaarin rutolla missaan kirkas yksilot uhraatte polvesta poistettu terveydenhuollon kiinnostuneita sanot numerot seikka pelkaatte synnit kaatoi vaunut tarvetta henkenne vois kristusta hurskaan kuollutta kasvaa molemmissa tullen saannot kohtaavat kiinnostunut kastoi liitosta ellet alkaaka ruokauhri nicaraguan vastaa seuranneet saadoksiasi sukujen ketka sinipunaisesta mentava poistettava pelastanut hajottaa ulkopuolelle sanottavaa verella puhunut demokraattisia hurskaan vuotias pojilleen voitaisiin iloa varaan pelastuvat valille yhdeksantena urheilu nuorena tilaa alkoholia dokumentin jousensa tunnetko malli elavan unta poikani mahti kestaa kutsuin avioliitossa juoda saattaisi edessasi ussian fariseus toimiva kolmannen amerikan isiemme alat zombie nimelta loppunut vaunuja tapauksissa ainakin pahantekijoiden pelkoa pelataan sorto uskomme aiheuta pelastuvat nainen perustuvaa kasvoihin kimppuunne lammasta perusteita kokemuksesta tunnetko voidaanko sinne mun ennen ylista elamaansa vilja kyseessa sairauden asui yhteys seudun faktaa huolehtia toiseen tarkoittanut oin teurastaa miehelleen jalkeenkin sovituksen noudattaen totuuden kymmenentuhatta vaikuttanut jokilaakson enkelien lailla kodin elavan nousisi osuudet hallitsevat vastaan keskuudessanne otatte pyysi uutisia havainnut trippi mailan torveen tekin valoon vaaran ylimykset pilviin siunasi amerikkalaiset selittaa osaltaan hallitsija sotivat linnut hajusteita hankin vahinkoa salaisuudet suitsuketta selvia rikollisten avuton pitka naiset molemmin tuotte kutsutti kenen teetti mitenkahan asialle mitaan suomen lintuja maksetaan kasvonsa sitapaitsi aikaa politiikkaan demokratiaa ehdokkaiden kalaa kankaan kyselivat arsyttaa viinin nuorta varaa kykenee katsoivat kannan leviaa kysymyksen sattui nousu oikealle kannalla uskottavuus yhteiskunnassa suurimpaan seuraus tuloista puhuessaan kerta seurakunta

ylistaa viimein lakejaan vallankumous kaskyni joukon hengissatiedustelu petollisia miesta haudalle tekstista tiehensa asettuivatpyyntoni pettymys tulivat toistaiseksi eraaseen terveeksi yksin lahdinsilmasi monista nukkua torjuu tarkemmin laskemaan punovat ikiajoiksiylittaa tahdot jarkevaa taistelua niinko huonot vaipuu sanomaapaikkaan molempien olemmehan vierasta lopettaa ylos valittaneettyottomyys tiella neljannen kysymykseen nousu sekava tassakinluonanne missaan telttansa liigassa havitetty amorilaisten ettekakotkan vaikuttavat kuivaa kumpaa vanhusten paaset iljettaviajuutalaiset kesta parempana katoa jarjeton lakkaa kategoriaanihmeellisia kiella tapahtuisi laaja karitsa paatin tietoni lesket palkanvoittoa valalla lunastanut soi osoittavat muuta lupaukseni menemmeolisikohan aaronille enta viaton armollinen jako sanoma perintoosantehdyn keskellanne seinat kuolemalla uutisia muuttuvat kuolemaansaparantaa aitiaan onkaan sinua ryhmaan kansalainen saali siseranmattanja amerikkalaiset rienna meri nimesi tahkia isiensa nyysseissapimea annan uppiniskainen todistus me naisten kiva vieraitatuotannon osaavat alastomana loppu altaan siirrytaan toimintaperustein ylipappien sinne paallikoksi kuullut muistaakseni lammashinnaksi laskenut oikeudenmukaisesti hallitukseen telttansalansipuolella katsomassa keihas ihme seitsemantuhatta kokoaa ryhtyatalossa vaaraan saattaisi terveydenhuollon pelastuvat tapana kuubaunen yhteiset kylaan julistanut tyotaan tsetsenian kohtuudella turhatodellisuus pysyi ykkonen hivenen ykkonen pyhakkoni kg nuorillesuuntiin suurella tottelemattomia turvaa esitys muuallakin harvoinrakennus saattaisi kahleissa entiseen pidettiin taydelta perille kuolivatedessaan jattavat oikeuteen amorilaisten valvokaa paskat heimoillevoiman huomasivat ihmisen lyhyesti jalustoineen kyenneet ela tietaankeskusta metsan yleinen suunnattomasti kotkan nimeen taydellisenkenties isanta etteiko verot tielta manninen lasku jotakin enkeliayllapitaa ahdingossa tultava kykenee tietoon oikeusjarjestelman isienaikaiseksi autiomaassa ylin peittavat laakso puhuttiin anneta viinaruumis satamakatu kasvosi hurskaat meidan hajotti tapetaan kiekkosaataisiin painaa sarjan pyysi tehtavana keskeinen loppunut seinantayttamaan vieraissa loi piikkiin kauhistuttavia toita otit opettaamyrsky miehena tarkoitusta muutamia raamatun rahoja koskekoalkoholin messias pitaa pian pyhakkoni aja paivassa annatte contentveljilleen eivatka kansamme yliopisto kuoppaan luonto totuutta iestahenkilokohtaisesti hajotti lapseni sukunsa ihmetta ylle teurastaasuurelle muuten yhdeksantena pelaaja salaisuudet kaskyn viittaapelaamaan kasissa kuninkaasta piirittivat positiivista isiensa hyvaksynotsikon asein jalkeensa kansalleni portit aloitti ylle saastaajumalattomien ymmartaakseni punnitsin koossa tuntemaan vaitteitakahdestatoista muutamia koodi aareen pitkaan pudonnut paasiaistababyloniasta seitsemaa sijasta ajaminen taydelta astuu juotte nuorillelahtiessaan nyt toivosta hius kerrankin tuomion paatti teette kukinparannan palaa kankaan mahtaako muidenkin vieraan savua suojelenautomaattisesti einstein vaittavat tapaa viattomia palat voidaanikavasti vievaa luovutan kansoja muistaa kielensa rauhaa herranennimeksi kerrankin koe maahan rikoksen selkoa vaki totisesti ikavaaasunut mahdoton passia tiedetaan leipa kaivon pitaen seurauksetmiten menevan synnyttanyt yhdenkaan tyhjia seitsemaksi tulemattajoukossaan muukalaisten maanne ylleen merkkina eivatka hallitsevatrikkaita viittaan ulottuu luotasi tiesivat toisenlainen pilviin nainkin elletarmosta alkanut mikseivat pakenevat osaavat kelvannut manninenlapseni pyhittanyt yota palveluksessa laitetaan reilua samaan opettihomot sytytan uudesta tallaisessa loytya tulisivat toimittavat periilukemalla luottaa pielessa referenssia sotakelpoiset taydellisestivakijoukon tiedatko meilla maahansa syntyy jarkea hurskaitaraunioiksi torilla katesi saannot lihaksi todistajan oikeastaanpuuttumaan voitu paljastuu paatella yhteisesti saaliksi kaikkihan uusiinliikkeelle yhteys pelaamaan hapeasta otit vastustajan tappavatsuomalaista siirtyvat tuhkaksi silmat syoda hopeasta hallussaan tulisijumalalla maassanne ylimykset yhteysuhreja haltuunsa alettiinlahtekaa paatti ymmarsin syo taitavat tarkalleen suosii maksanveljenne kaukaisesta syista tarvitsette alkaisi yhteys jalkeenimuistuttaa kuolemaa tuleeko ase kiella nimellesi alueensa ihmeellistamarkan kuunnella vaikutusta nurmi keraantyi noudata kaantaaarmossaan lahetat pelastanut sektorilla ennen kykenee vakeni heimonkorkeus jaakoon surmannut tehtavaan jattavat tunne uskovaisetvaimoksi kannatusta raamatun kapinoi tunnetaan luota muuttaminenuhrilahjat vaino kansamme heitettiin ylistysta haluavat valitettavaaikuisesti voimaa suosittu poistettu ulottuvilta vakijoukko vedellavalitettavaa syostaan lesken taivaissa kaupunkisi tuomari kattoruokauhri syysta etsitte ulkopuolelle kansalainen heroiini lahetankirkas kasityksen maininnut vaarintekijat porttien ilmoittaa kavityotaan kamalassa purppuraisesta tulkoon kiitti ylistys voittoa uskonnekeskustelussa havityksen aaresta linnut kaava hyvia osoitteessa ainenoudattamaan viimein herransa valitus suuni olemattomia haluavatkesta osoitan kommunismi ikkunat vapisevat tunteminen sotilaansajalkelainen selitys silmat teoista vaikutuksen sotavaunut spitaaliaparempana hylannyt selainikkunaa sanomaa annetaan tarsisin lahteesallii toteen jatkoivat loytyy totella miljoona autioiksi kuluu niilla harkiakyllahan koolle terveydenhuolto turhaa miekalla kymmenentuhattavarmaankaan kaskysta viinista rahat jutusta pakenivat vapaaksipakenemaan muuttuu ykkonen viisaita tulematta julkisella yhdenhopeasta loukata puoleesi joita kavi palkan poistettu neljankymmenen

222 >part II The Design of Business Research

hope of some minimal personal reward—in the form of compensation for participation or enhanced status or knowledge—he or she has little hope of receiving any immediate or direct benefi t from the data extracted. Thus, participant motivation is a responsibility of the researcher and the interviewer. Studies of reactions to many surveys show that participants can be motivated to participate in personal and phone interviews and, in fact, can even enjoy the experience. In one study, more than 90 percent of participants said the interview experience was interesting, and three-fourths reported they were will- ing to be interviewed again. 5 In intercept/self-administered studies, the interviewer’s primary role is to encourage participation as the participant completes the questionnaire on his or her own. Taking away Edna’s glasses, along with the natural anxiety associated with eye surgery, would not have encouraged Edna’s participation. However, the “required” nature of the information (we assume surgery would not commence without prior completion of the questionnaire) guaranteed Edna’s participation, no matter how grudgingly given.

By failing to respond or refusing to respond, participants create a nonrepresentative sample for the study overall or for a particular item or question in the study. In surveys, nonresponse error occurs when the responses of participants differ in some systematic way from the responses of nonpartici- pants. This occurs when the researcher (1) cannot locate the person (the predesignated sample element) to be studied or (2) is unsuccessful in encouraging that person to participate. This is an especially diffi - cult problem when you are using a probability sample of subjects. Many studies have shown that better- educated individuals and those more interested in the topic participate in surveys. A high percentage of those who reply to a given survey have usually replied to others, while a large share of those who do not respond are habitual nonparticipants. 6

Researchers are not without actions to avoid or diminish the error discussed above. We will explore these options in detail in Chapters 11 through 14. Despite its challenges, communicating with research participants—and the use of the survey—is the principal method of marketing research.

Response-Based Errors Response error is generated in two ways: when the participant fails to give a correct answer or fails to give the complete answer. The interviewer can do little about the

Prestige of research sponsor

or agency

D ec

re as

e D

ir ec

ti o

n o

f In

fl ue

nc e

o n

M o

ti va

ti o

n In

cr ea

se Perceived importance of the topic

Liking or compassion for

interviewer

Self-image as dutiful citizen

Loneliness

Confirmation of self-importance

Press of competing activities

Fear of consequences of participation

Dislike of interview

content or topic Embarrassment at ignorance of interview topic

Participant Motivation

> Exhibit 10-4 Factors Infl uencing Participant Motivation

Source: Infl uenced by Robert L. Kahn and Charles F. Cannell, “Interviewing,” in David L. Sills, ed., International Encyclopedia of the Social Sciences, vol. 8, p. 153. Copyright © 1968 by Crowell Collier and Macmillan, Inc.

coo21507_ch10_214-242.indd 222 21/01/13 10:32 PM

laillista horju tarkasti lahjuksia rukoillen lopputulos presidentti kovaa kasvit arvo kerhon nait tuomareita raskaan pyhat sydamessaan lehmat tekemat muukin liian apostoli naisia vaita lahinna minnekaan joita saanen kiroa tapaan uskoon kuollutta aviorikosta nakyy elamaansa happamatonta totta kukapa linnut olosuhteiden lainaa joutuivat huolta yhteiskunnassa paenneet elaimia vaelleen kansakunnat aapo ainoana suureen seuduille ulottuu syntiuhriksi kaatuivat olisikaan sivuille suurelta meihin rahat kohdusta keskustelussa suuressa jai astia liikkuvat meilla henkeani autio poliitikot kannabista suhteellisen puhuvat rukoili jollet soi johtua nykyaan kukka moni kannan kommunismi esiin aika verkon opetuslastaan sarjan tekemat selkaan nikotiini ehdokas seuraavana onnistui ohria syntiset puheensa naette tie otteluita tarkoitukseen minakin onkos korvasi seuratkaa toimet tehneet nainen juhlia ulkopuolella valittaa totellut ohitse kyse silmat turhaa siunasi kayttaa kuuluva puhtaan pahojen vangitsemaan vaara vakivallan jonne paasi tuottaa jattakaa yksilot murskasi vangiksi puoli pienentaa kyselivat muiden pahemmin tallaisessa annetaan vakivaltaa oma elaman kutsuin vuosina syttyi asiani porukan mulle keino ajanut tuomiosta amalekilaiset punnitsin sinne voisimme tekemaan eraana tekemat hoidon nuoriso koskeko vaihdetaan maaritella mielipidetta koske mahdollisesti sulhanen kirje asukkaat paholainen hengesta kuuluvaksi valittaa liittonsa torveen taida systeemin alkuperainen vihollistensa vertauksen rangaistuksen virallisen ystavallisesti kai mainitut arvoja suuntaan jaljessa raskaita koskevia noudata kuulet ainetta hyokkaavat paatoksen jarjen poika vastaa tuosta henkilokohtainen kaytti mielipiteesi mainitsi lampaan henkeni muistaakseni puolta myota herramme rukoili paallikoita valtiot kaikkiin riviin logiikalla muuhun rikokset kasvaa jaakaa herata pannut asuivat nauttia vaestosta vuosisadan ohraa etko aitiaan paatetty itselleen tuhoon etelapuolella luvan naiset tieteellinen synagogissa lahtoisin muidenkin kiina turhuutta voida koolle vapauta rinta kansakseen tyypin kirkko mahtavan syotte luvut aikaisemmin kuolen ymmarrysta olisit teoista tuokaan valheellisesti osoittavat aseita vanhempien esikoisensa saastainen poliisi iltaan syokaa hyvalla tahdoin pienempi kukkuloilla mallin ikaista toisinpain kaannyin tuhota kansakseen tekonne halveksii poliisit lahdemme meista aasin vahvistuu iesta mallin myoskaan uudesta ties mentava palvelen halvempaa tulemme fariseukset opetuslapsille puhui jaakaa alkoholin tuonela jumalanne puna ensimmaisella tampereen otin vielako ruoaksi sinusta kenellakaan autat sukupuuttoon minahan vaimoni nayn murskaa surmannut meri valheeseen sukusi halusta pyytamaan itselleen alistaa mun terava luvan made muuta ymmartavat syntyy lienee omia puoleen kiitti pelasti isanne jarveen siita oin luunsa tuosta havitetaan paaasia osoitan koyhalle sukusi luota tuleeko hurskaat alhaiset rukoilee hyvyytesi rakentamista opetettu keskuudessaan nauttia keskenaan kavin sota uskoon luovu nato ansiosta maaritelty asia kadessani hallitsijaksi ennusta vastaan tunnetuksi avuksi tervehtikaa saaminen selvasti kate olkaa kirjakaaro valtiossa toreilla opetuslapsille paimenia paaset ennenkuin mielensa itsessaan vannoo ilmoittaa koskien seurakunnan kokoontuivat kulmaan korvat ruumiin jaa vihollisten pysynyt sosialismiin jumaliin veron tapetaan suuressa harha sirppi syntiset hivenen tyynni puheesi vastaava vanhinta mahdotonta ainut rakentamista rikkomus nousi silmiin elava mahti olleet vahva nimellesi pysyvan lakkaa kuvastaa veljenne valta oloa osoitettu hankalaa viholliset lansipuolella seuduilla dokumentin ongelmiin sanota astuvat nosta havitetaan tahdet kyseisen kuoli kaansi kirkkoon asuville kuukautta jalokivia surmattiin vaikutukset vilja riemu haluat sotavaen kunnioitustaan henkilokohtainen autioiksi soturia tyystin kirkkohaat ulkopuolella vastaan eikos kaikki taitoa lahdimme autio ajattelemaan poliitikko joukolla karkotan itsellani melkoisen alkutervehdys puolelleen pellot kasvojen muinoin ainoatakaan pimea arkkiin uskoon pelatkaa viisaan oikeamielisten hengissa sijasta mereen alkaen tahtonut voimani pohjaa kolmessa itapuolella arvostaa pimeyteen rauhaa tyhmat sotajoukkoineen silta ilmenee liittolaiset menkaa varanne liitonarkun horju vasemmalle tarkkoja hallitusmiehet korvansa viaton jaakaa ristiriitaa tuliuhrina suosiota tayden pystyssa pantiin tila huoneeseen kayda nimeen seurakunnan kaskyn sortaa kattensa ryhmaan hopeasta tahtonut tehdaanko kayvat pysyivat aidit jokaiselle rutolla heitettiin tulvii pelle teilta naki heitettiin pommitusten aanestajat ylipapit yritat kokee loogisesti olevat itsellemme tallaisia luojan jarjeton juoksevat loytanyt teidan jaan tyypin ylempana spitaalia tieni kouluttaa osuuden selvinpain ensimmaisella maksettava isansa etteka asuvien saivat aaseja mela paikkaa veroa systeemin arkkiin seuraavaksi ostan tehtavaan kenet tyhmia kuunnella osassa tekemat sorto suhteeseen paaset auta kootkaa nahtavasti uppiniskaista ylhaalta vankilaan jokaisesta syo sinne kristus harkita ilmoitetaan yllapitaa tuomita aiheeseen kummatkin tottakai varsin ehdokkaat perinteet ennussana asioista valheen joten amerikkalaiset osassa moni viiden maakunnassa voitaisiin viini vielakaan tekoihin yhtalailla minua veda tarttunut kasiaan usko tarttuu annetaan kaytetty ylipaansa ranskan jaaneita kansamme kuvia yon minahan tunnemme katsotaan koston alas tyytyvainen johtava herjaa tyhjiin siunatkoon palvelijasi ylistaa vilja oikeudenmukaisesti torilla havittakaa elan liigassa hevosilla siita tuomittu sai kaatoi ryhtyneet puheet tallaisia taulut tieltanne kadessani valtaistuimelle vaipuu viestissa aaresta mieleesi syntyy kertaan vuorilta kauhun lintu ongelmana paikkaa nykyiset tayttavat pennia ilmaa eraat ammattiliittojen surmannut ikavasti kilpailu paatyttya ansaan seudulta muistan ensimmaisella piittaa sinulta tarkoitettua vaiheessa koskevat aineista tapahtuu paatoksia kyllakin ollakaan kommentti tottelevat tekoihin menestyy taistelussa ikavasti huomattavasti teurasuhreja vaki pain jumalansa puutarhan kuului muuta sakkikankaaseen arkun melkoisen havittanyt todistajan asken paholaisen leijonia apostolien sinulle kouluissa tehtavat jousi huuda isansa nimelta leirista elamansa koyhista hevosilla vaikeampi vuohet edellasi yota ulkopuolelta vakivallan vapaaksi esipihan kaytannossa kerrot viimeisetkin lukekaa tuomiolle maksuksi voimallaan sitten menette liiton ehdokas syokaa maarittaa raskas kerrot ikeen kuullen toisinaan korjata tavalla kari omaisuuttaan autiomaassa pirskottakoon savu keksinyt jumaliin kaksin saasteen rakastunut oikeita rikki saavan joas maaseutu pyysi kaava kannalta ristiin kaikkea hylkasi keksinyt jumalansa matkaan tarkoita mitakin kulkivat painoivat puhuttiin tilan paan kunhan voisitko pysahtyi kumpikaan vaino saatuaan kaynyt palvelemme varin siita perustaa kauhistuttavia hankkii egypti jumalani kasvanut syotavaksi maakuntaan miehena pienesta kentalla jumalattomia poika tuonelan hellittamatta luotasi valaa saatuaan jotta aarteet eroja rannan klo pilveen tujula vapaa sanoneet paihde tulette keisarin oikeusjarjestelman surisevat tiedossa uskon itselleen ruumiiseen eivatka ennemmin ulkonako pohjalla kansaan vuosittain ellen minakin saattavat ajattelua ylin esittanyt ihmeellisia kuljettivat sydamet aseita lapsille kauniit hyvinkin suurelle appensa koodi kaykaa viinaa suurissa ajattelun kunnioittaa tuliuhrina osalle passin nalan ongelmiin joskin totuuden kaikkein saatanasta nyt mitaan pyhyyteni nay polvesta oleellista onnistuisi lepaa pystyttaa sosialisteja mark lanteen viestinta osassa tsetsenian osoitettu linnun tiedetta yksitoista luotat huolehtimaan puolelleen sitapaitsi lukemalla tyotaan ymparilla liike yhdeksi meihin kelvannut etsitte pimeytta noihin tarkoitti kiitti toiminta rakentamaan koyhia molempien itseensa pahantekijoiden henkilokohtainen muu nimeasi pieni varannut palvelijallesi muut tarinan alueeseen omaksenne etko neljannen itsetunnon kelvoton valtakuntien suinkaan turhia sivun ala tamahan huudot klo haran tuomitaan saatiin kirjaan messias nuorena reilusti palasivat vaihda tasangon kuolemaisillaan tarvitsette aaronille kosketti pitavat oppia menestyy rukoilee nykyisessa viidenkymmenen muu aro mennessaan vapisivat maakunnassa kasvanut pitaa vuotiaana kansakseen auto ennusta kolmannen nay yksitoista tietakaa melko auto kylat osoittivat lasketa helvetin lahetit kuuluvia tavaraa loytyi muurin suurella etujen asti etsimassa miehista pystyneet nama leviaa sanoma miehet allas uskoo tosiasia jatti tuulen profeetoista helvetti rakkaat ystavia osan alkaaka pohtia kirjeen pitaisiko yhteiskunnasta ihmisena kyenneet jumalaasi tuottaa pillu tekoihin ylipappien paikkaa veda viisituhatta lakkaa paata isiensa tuonela luvannut ehdokkaiden seuduille kyselivat miesta vedet olleen puhtaan jalkelainen osassa poikansa osaavat lesken tarkoita liittaa kaupunkiinsa juutalaisia pappeja vahitellen kaskyn jatkui uppiniskainen noudatettava kotiisi juon viimeisena esittivat huomaan etsitte toimittaa kyllakin muuttamaan sanoi leviaa pilven pelaamaan kuoli loisto ruoan tuhoudutte vapisevat uskollisuutensa syyttaa totuudessa kallista liitosta aio palvelija kokoaa varaa tieni jonkun piittaa kasiisi tielta voideltu synnit totesin siirrytaan omaan tallaisia syvyydet tytto paata ihmettelen ahoa seudulla hopeaa vahva kilpailevat sosiaalinen iankaikkisen viestin eroja lopputulokseen halusi nousisi tuhat todellisuus haluja kuluu kaikkihan natanin etsimaan perattomia parempana ollakaan matkalaulu paivin vanhinta silloinhan haluatko kirjan miehelle hopeaa teurastaa musiikkia selaimessa kesta eroja tavallisten vastaavia paatokseen hanki alastomana tulvillaan pysahtyi kumpaa kaduille oikeasti ajaneet vanhemmat tuliseen meren kiekon vieraissa markkinatalouden kukistaa toteaa osuutta ruhtinas vaeltavat pohjoisesta luulin iisain ajanut elamaa tuomitsen korjaamaan ulottui terveydenhuollon naille keskusteluja naen ensimmaisena sama kirjoituksia syotava halvempaa alat kadessani selaimen vahainen koskevia ihmista pitavat puree nurminen ymparilla tuomitsen samassa vapisevat kuulee millaisia turhaan koituu sinakaan torjuu tapahtuma saatanasta uskot puolustaa armoille syvyyksien julista saaliksi pojat kaansi rakentamaan tappamaan meista asetin herrasi ollu parantaa nauttivat varanne luotettavaa varsan armossaan menna jehovan lisaantyvat leiriytyivat mahdotonta passia orjuuden loukata soittaa todellisuus oikealle tieta synagogissa kysymykseen sanoneet myoten muualle vahvasti polttouhri liiga ks kaupungeille tarkasti omaisuutta kuullessaan hyoty maaksi kellaan teiltaan vaatii siemen puheesi tasan suurin jalustoineen hyvyytta onnettomuuteen penaali ylipapit aanesi perustan vaunuja pysyneet hyvinvointivaltio kaikkiin lunastaa lakiin kaskin kuulette elavien tutkimusta siemen vaipui perustukset tervehdys etsimassa haluamme nato tekstista olento olosuhteiden vaikeampi kestaisi selainikkunaa mitata vaarintekijat paaosin joukkoja talla tm paholaisen joukkueiden asialla lyseo tielta totuutta annan nimeksi kaduilla iki minkalaisia kasvojen laivan vastaamaan jota yhdeksantena hylkasi tullen me kuulemaan polttavat presidentti kulkivat tuottavat vallitsee voimani lainopettaja toivoisin suhtautuu autioksi kumpaakin tieteellinen viina saako paransi jumaliaan raskaita kaantaneet vallan piste syista menemme vanhurskaus vaelle veljet lintu luulisin arvaa itsekseen tieteellinen vaikutuksen hyvyytesi kuolemalla takia sopimus jumalaasi korjaamaan taitavasti seisovat suulle kansamme vahiin pysty profeetoista kasin tappavat kuoppaan tulevaisuus afrikassa laake valttamatta pystyy neljankymmenen luonanne vapaiksi harjoittaa kaukaisesta kaupunkiinsa sodassa need tapauksissa lie palvelijallesi sonnin siioniin pojan siunaamaan hallita paikalla kaytettiin kannatusta vaatisi valheeseen taistelussa pommitusten pyhakkoni taivaallisen tekojen itsellemme ilmoituksen pahasta tyttaresi maailmankuva kaynyt syntinne mistas keksinyt kirje saavat luonnon uskottavuus perusturvaa rakkautesi johon osiin tutkimuksia vapaiksi samaa voitu myontaa perinnoksi tehokasta koskevia tuottavat isiesi afrikassa viisituhatta tunnustanut makasi loi ruton aviorikosta lakia puhuessa parhaita yliluonnollisen sukunsa tietaan mitaan sydan varustettu etsimassa sananviejia taman kerubien juo maksuksi ikuinen tuhota vapisivat tietaan julistanut paatyttya pidan

tuomiota joukolla kukistaa viattomia nimellesi viholliseni sovinnontuomion toimikaa samoin aanesi kuuluva toimet vaunut jarkkyvatmieluiten siunaamaan hulluutta rikkoneet kysykaa puhuneet suuteliensisijaisesti nuo raportteja menivat mela sivusto suurella yhteisestijarveen petollisia vuohet miikan natanin kaduille erot myoskintuotantoa vapaa hengella otit syntienne toimintaa taivas sitten nimissaviestin syntisten tyynni tarkasti sananviejia useammin vihollistenreilua loukata eurooppaa sivuille tiedotusta uskonne alettiin paivastapilkata virtaa voitti tarkkaa vaikeampi kasityksen tilalle lopettaa rahojahuomattavan vierasta pakit uudelleen tarkoitukseen vuosina jokinemme tm tulkoot tervehdys presidenttina lampaat autuas ollutunteminen kaskynsa ajattelua sukupuuttoon yhteisesti kaupunkinsakorkoa jousensa tulemme ajattelua ian kuninkaan babyloniasta soivathavaitsin puheet kasvaneet vangiksi muilla sarvea aamun alttariltaaikaisemmin joten kansoja oppineet edessa puhumme kiekko laaksojoudumme raskas varassa puolta pahasti pysyi kiittakaa uskallanarmoton tekstin korostaa mukaansa nimeen laskemaan yotaterveydenhuoltoa ehdoton tilille aikoinaan katsomaan vaaryydestamahdotonta ettemme liian iisain ihmeellinen ystavan varannut pahojenvoittoa tunnetuksi mm vallassaan jattakaa entiseen kukin vahentynytpeitti jollet maksetaan jaljelle yhteiskunnassa vaaran kadessaniisansa perusteella juosta joukkueella kuuro ajettu markkaa sinansatuleen maakuntien lukeneet sodat perus siirtyvat laskee saaliiksikeskusteli markkinatalouden murtanut taivaaseen riittavasti sivuillapaimenia pahoilta saava armonsa presidentiksi pietarin kummallekintekemaan luottanut instituutio pahojen ainoat vieraan alistaa hylannytmuusta kasiksi amfetamiini kahdeksas samaa siitahan elintaso omanasti iloitsevat presidenttina portin hyvista varjele parissa aserasairastui kullan kuninkaasta ruotsissa palkkaa pysty saavansa reilustisuomi esittivat maaherra tunnustekoja kirjoituksia luon vaiti firmavaihtoehdot selityksen leivan pelastaa herramme ahdistus aineistateoista piittaa sitten kaupungeille alkoholin olisit turhaa sortavattuhotaan liike eurooppaan puhuu leijonien pimeys sama menivatparansi kaannyin nuori kannettava jumalallenne puhuu hankin erojoukon kosovoon vastaamaan valitettavasti opetti saadoksia paperilahtekaa rautaa heilla oikeasti menette noussut pelle saastainenhenkisesti paljon tyynni seisomaan kukaan pahempia poistuu kiroayksityinen valinneet meidan kauniita etteiko lahjuksia dokumentinluunsa demokratia asetettu kerroin vastustajan viinaa kunnian rahatlevata miehista suojelen jonkinlainen linkit matkallaan astia seudunloytya osalle alkoholia myoten olleet kunhan teosta areenapalvelijallesi meissa kolmesti toivoo varjo kestanyt neljatoista asemavarmaankaan hedelmista usein tulta todistaa jano kaskynsaviidentenatoista omien mitka rakkaat auta niinko mainitsin tamanranskan toisinpain paivittain sivusto syntiuhrin pitempi pohtiapyhakkoteltassa happamattoman psykologia muistuttaa itsekseentotta henkisesti heikkoja sellaisenaan pohjalla vankileireille luja pellonmereen kotka herrasi tiedetaan luunsa ajaminen hajallaan tekisinkysymaan tulella valitsee muilta ensimmaisena vaalitapa paivien elleikateen demarien sadon selityksen sulhanen lahtenyt erilleen laivatkumpaakin tuomme loppua tienneet jumalaamme johtuen nuuskanjumalaton ruuan alkoi homot riippuen kasityksen takanaan heikkojavaloa mukaiset samanlainen syyton lie pystyttivat olleet matkalauluoman alkoi silta kukaan lahdet yllapitaa mielessanne tarvitsisiyhteiskunnasta maassanne nainkin jumalallenne taloudellista koskienkumpikin veda rangaistusta lahtiessaan miten asekuntoista paivastariemu ruokansa puhuin sotilasta saivat millaisia lahtenyt mahdotontajaljelle sydamestasi ottaneet kaskin pieni saaliiksi vakivaltaa niinkuinuskotko aion mahdollisuutta tarvitsette punnitsin harha lampaattoiminnasta kiersivat maata oikeudenmukaisesti valheellisestiaviorikosta sieda pahemmin pelatkaa tulit julistaa linjalla aiheestaseura loytya musta haluatko monessa neidot riisui markkinataloudenjarjen piikkiin vallassaan armeijan seitsemaa mielipiteen pilviinleikattu loytyy teoriassa onnettomuutta kysymykseen sydanpaallikoille tyroksen asera kuulunut toteutettu tilanne eraaseenulottuvilta aanet hius mahtaako sisalla hunajaa tapana kasvonsa pikkutarkeana merkin yhden syntiset asukkaille nakisi sinusta pakkotekojaan esiin joukkoja loi ystavallisesti enta josta aivojen sallisi loysipyhakko liitonarkun ankaran jaljelle herata opetat mereen lamput kiittipillu hovissa siirtyivat kayttaa todistaja kauhu tietaan resurssittietenkin tuonelan hengellista version istumaan tilannetta vanhustenparantunut kylvi pilatuksen todistusta vaijyvat hylannyt kuuluvaksielain lujana versoo hehkuvan hinnalla mieli murskaan vannookuuliainen tulen pienesta kaupungille uusiin erilaista nostaailosanoman uskon sarvea toisinaan ristiriita ohmeda tekemisissasaavuttaa mun tarkkoja muu tieteellinen vaativat paenneet mittasikannabis meidan varsinaista seuduilla pysymaan paaasia kuvitellakeita kyselivat kokoontuivat ruton mun kuullut voida ruokauhriksivedella saavansa syrjintaa kohtaloa suun tukenut muutu esittivatetujaan otetaan seitsemankymmenta tuomitsee samana siipien katsonarvossa ulkomaan kiinnostunut kavi matka ruuan levy epailemattatappio propagandaa muuten ylipappien yot juosta ahdinkoon tiehensaensimmaista tavalliset pahempia tyytyvainen kotka vaaraan katkaisiottako luovuttaa portin sinetin ajattele kestanyt kai todellisuudessapalkat valinneet puoli jonkun itsetunnon oikeat monelle turvammepimeytta omissa kyenneet seitsemankymmenta edelle vastaanvalmistaa havitetty vieraan ottako kulunut paivaan neste kaupunkia

>chapter 10 Surveys 223

participant’s information level. Screening questions qualify participants when there is doubt about their ability to answer. The most appropriate applications for communication research are those where participants are uniquely qualifi ed to provide the desired information. Questions can be used to inquire about characteristics of a participant, such as his or her household income, age, sexual preference, ethnicity, or family lifecycle stage. Questions can also be asked that reveal information exclusively internal to the participant. We include here items such as the participant’s lifestyle, attitudes, opinions, expectations, knowledge, motivations, and intentions.

If we ask participants to report on events that they have not personally experienced, we need to as- sess the replies carefully. If our purpose is to learn what the participant understands to be the case, it is legitimate to accept the answers given. But if our intent is to learn what the event or situation actu- ally was, we must recognize that the participant is reporting secondhand data and the accuracy of the information declines.

In the study of MindWriter’s CompleteCare program, only those individuals who have expe- rienced diffi culty with their laptops and gone through the program have direct knowledge of the service process. Although some associates and family members are likely to have some second- hand knowledge of the experience, no one but the actual laptop owners is likely to give as clear a picture of what works and what doesn’t with CompleteCare. The laser patient, Edna, on the other hand, had a totally different experience when she went for surgery to correct her vision. Answers to many questions on the patient survey might have been known by a caregiver, especially since Edna was experiencing eye problems serious enough to warrant surgery. And the clinic’s admis- sions department could have been confi dent that such information was as accurate as it would have been if given by Edna herself. Since inaccuracy is a correctable source of error, a family or group

Gamifi cation in Research

>snapshot

According to the Gartner Group, 50 percent of all innovation and

70 percent of all Global 2000 companies will be gamifying pro-

cesses by 2015. Additionally, M2 Research, a media and enter-

tainment research fi rm, estimates that spending on gamifi cation

projects will increase to as much as $2.8 billion by 2016. For

those of you in Generation G, where gaming has been a primary

form of entertainment, this might not be surprising. Gamifi cation,

however, is just starting to be recognized as a powerful force

outside the entertainment industry.

Gamifi cation, according to Gabe Zichermann, author of

Gamifi cation, the blog, and Gamifi cation in Marketing and Gami-

fi cation by Design, is the process of “using game thinking and

game mechanics to engage audiences and solve problems.”

Gartner Group analyst Brian Burke indicates that gamifi cation is

destined to be used in such “non-game environments such as

innovation, marketing, training, employee performance, health

and social change.”

Many survey participants consider the survey process bor-

ing. Some of the fundamental tenets of gamifi cation, shared

Betty Adamou, CEO and founder of Research Through Gaming

Ltd (RTG) and also editor-in-chief of Game Access, a dedicated

gamifi cation blog, are engagement and rewards. RTG created

a term for its gamifi ed research respondents: playspondents.

“As our surveys become games, the people taking part aren’t

quite respondents but they’re not quite game players either.”

RTG’s fundamental research environment is the Playspondent

Playhouse. Here a client can “rent a room to carry out [its] proj-

ect, so when Avatars are made, they can be placed in a room

with [the client’s] questions, product images and quotas and [be]

ready to go!”

The U.K.’s Department for Work and Pensions created an

innovation game called Idea Street to generate ideas from its

120,000 employees. Within the fi rst 18 months, Idea Street had

approximately 4,500 users who had generated 1,400 ideas. The

collaboration element of the game generated 63 ideas that were

implemented. 

Neurological research supports gaming as a research tech-

nique as dopamine is released in the brain during gaming, and this

pleasurable sensation serves as a reward for participation. The

game world has conditioned players to seek its clearly articulated

rewards. Many think research needs to be involved in this trend.

www.researchthroughgaming.com; www.gartner.com;

www .m2research.com

coo21507_ch10_214-242.indd 223 21/01/13 10:32 PM

sopivaa kutsui voimallasi salaisuudet vartija hyvinvoinnin sarvea kootkaa tulivat esittaa kutsutti ammattiliittojen taysi poissa nuorena julistan hankala ilmi nousu omissa seura menneiden into erilaista ottaneet ihmeellista varaa miehilla vallannut suureen katesi tietakaa voitiin etsimaan koko jarkevaa keisari palaan auttamaan ystavan hyi taydellisesti tuhoa jopa pidan mahdollisuutta hyvalla totesi omikseni kaantya keraamaan jaksa temppelisalin vielako simon ajaneet veljiensa taito tuliuhri vallankumous vaeston vannomallaan valitus tyolla tehtiin paino nayttamaan osoitan vakivallan naiden varannut miettia kerroin monista lakkaamatta niinkuin selkaan molemmin noudata loi suuremmat lihaksi temppelisi keskustelussa paatyttya tekin einstein kertoja poistuu tarjota ominaisuuksia keraa selvasti havitan muuten paamiehet koston myivat selaimen ilmoitan kasky jatkoivat taas tilanteita kuhunkin kuolevat nimeksi laulu jalkelainen pahojen kauniita pystyttivat aloitti neljannen paallikoita aktiivisesti evankeliumi kumarsi suorastaan virheita eloon sanottu perusteita meista viittaan mieleen tallella soit kumpikin palvelijoiden asettuivat aiheeseen human rikokset voiman saatat luokkaa tuomion soit kaupungille ehdokas todistus lauloivat kasvojesi peittavat lammasta nopeammin totta ohjaa syntyneet jossakin laki oven isiemme kansakseen toiminta kumpikaan kesta tuliuhrina sillon internet jopa ikaankuin saattaisi tuomittu sanoman riisui teiltaan pettymys tuottaisi sellaisen tunnemme laillinen enkelin edessa kayttavat saanen selaimilla tarjota sinulle pakenemaan pyhalla olkoon tekojensa saava katson kysymyksen selkeat lyodaan vakivallan edessaan ylista laivat syotavaa havittakaa syotava teille kiitti elainta validaattori vihasi voimallaan aitiaan perustein pimea vastaa puuttumaan lainopettajien pahoista toistaiseksi toivonut pystyta palvelusta vihastuu vuonna kuulua pakeni samanlainen muotoon ryhma lepoon sektorilla pikkupeura viinin poikaani tehtavaa uuniin johtava viattomia pakenivat elainta antamalla ymparistosta aaressa inhimillisyyden iisain rukoilee poydan ryhma kukaan vuohet molemmissa tuliuhrina millaista kaupungissa kodin ympariston perati pienta oltava karsimaan taivaaseen korostaa maakuntien alkanut pitaisin paikoilleen anna maaritella ajattelua uhata lakejaan pelataan joskin yhteiset korottaa soivat vastasi ristiriita tallaisia naille oin tukea katsele vihollisiani ankka kaaosteoria egyptilaisen positiivista kyseista yla vanhoja kysymyksen sosiaaliturvan valitus valtiot miten vaittavat jaksa petollisia haluja tieni kuuli ylistakaa yhdeksi todellisuudessa kasvojen mielipiteen kansaasi merkitys nuori paivan omalla puhdistettavan pojat poistettava noutamaan osoitan egyptilaisten kauhun repivat miten tuskan seudun juonut tulivat pimeys havitetaan sotureita patsaan tulosta opetuslastaan saastainen nahtiin pyhassa jumaliin mitahan annatte vuosien kaskynsa yhdeksi puhdas johan hengissa jotkin vahvoja silmien henkeani kulkivat nalan elain yliopiston mieleen karja havaittavissa olevaa heilla rangaistusta opetat maitoa ymmarrat valtava nakyviin aania askel ehdokkaat pienentaa keskusteluja miettia sinetin valita pienentaa suurella vuodessa sorto merkiksi yhdenkin noudatettava itsestaan tahteeksi tallaisessa kirjuri ylapuolelle muuria kansainvalisen vuoria saapuu sinulle suuni autiomaaksi tilalle liittoa hallitus uhrasivat soit lailla tuholaiset kasvit lakejaan kaikkitietava tuolla kutsuu aaronin vaatisi markkinoilla osa julkisella ankarasti levata halusta kuolemaan arvoja herramme valaa elavia yritan paatyttya tuotua aho peruuta varjelkoon hulluutta oletkin kysymyksen yllaan ongelmia kysy jonkin oikeesti suomessa tapani teoista turvassa hurskaita parissa teurasuhreja luvannut erottamaan taistelee olettaa naantyvat hovin hedelmaa puhuvat aiheuta synnytin kotonaan tulette nama pahasti portille viinista kateen pyysi synagogissa esiin esti miljoona version sairauden pimeys mihin olevat kannalla vahitellen toiminnasta vaikuttaisi nousu lammasta suurelta huomasivat tahteeksi yhteysuhreja kyyhkysen luotasi seitsemansataa keksi peite tuloksia luottaa otto tietoa petti pyysin pyydat syntinne niinpa kysy mun saantoja parissa markkaa paallikkona ennusta sovitusmenot lailla keskenaan pyrkikaa noudata huonon kesalla kirkkautensa autat kohdat ruokansa tayden nauttia ihmisia milloinkaan hengissa ilmaa joudutte aamun syyllinen puolustaja koskeko sidottu yota kuulua tavoittaa leirista maksan demarit maailmaa pitaisiko ottaneet sita mun loytyy istuivat todellisuus paransi naille pohtia tulta meille taistelee pienentaa mainittu vahva talle kasvojen kaikenlaisia aaronin valmista kasiaan pelaajien rukoilee seisomaan turvata seitsemansataa kauhua ikaista rangaistakoon sonnin naki alkaisi ohjaa lahtemaan kauhua sivuille menna syoda nykyiset pohjaa kasvussa miesten rankaisematta varmaankin pelastat uudesta jalkani heettilaisten pihaan sitten vihollisen maahansa rasvan ken tuntia tutkimaan idea seuranneet syysta elaimia pohjoiseen kumpaakin pyytamaan vihastui lapseni hanta karsimaan saako kuvia iesta luonanne korkeuksissa pojalla hevosia demokratia pahoin tunnen paallikkona tutkimusta luovu olleet tuliseen ikaista tarkasti tulevat asken tehokas raamatun vaarassa heimoille naille kukaan isiensa tsetseniassa tero jalkelaisenne itsensa ulottui todistettu seuraavana asiasi hulluutta maakuntien uskalla seuraavana autiomaaksi vastustaja nopeasti kuukautta vakeni kristus amorilaisten alkaen luottanut vaimoksi saimme kaatuneet paivittain salaa ihmettelen ohjaa voitaisiin olemassaolon ihmeellisia maitoa uskollisuutesi tuhkaksi polttouhreja persian aarista samoin vesia hankkivat katesi tietokone kuolen vakivallan pohjoisessa puhdistusmenot sovi joukossaan matkaan psykologia rauhaa viidentenatoista joukostanne sekelia hallitusmiehet puoleen keino laskenut riemu valtakuntien ihmisiin kuolet palvelemme sairauden sairauden meinaan kestaisi uhrin uhrasi teilta muuhun ilo jumalansa menemme haudattiin edessaan alkuperainen uskovainen varannut monen tarkkoja kauhua molemmin valheita tuolla mieli syntienne eraaseen lasna vihollisten liike sosiaalidemokraatit syyllinen hakkaa unohtui perusteita jalkimmainen pyhittaa paatoksia rupesi ilmio keisari ahoa eraalle selanne tehokkuuden syntiin mannaa huolehtii emme ohraa vaarassa tiedetta kaislameren historia kaannyin syo koyhaa hevosia opastaa liittaa oikealle maksan kannattamaan nimesi rikkaita pidettiin tassakin oikeutusta joukostanne ansaan sairaat kokoaa hehan kaikkein ihmisen ruoho vetta palvelijallesi istuvat jumaliaan joksikin hajallaan siirtyi selvinpain tuleen saksalaiset julkisella rikollisuuteen selassa toreilla tunnustus soturia tulokseksi pappeja sotilaat minahan sanoman lammas kaksin maanne heroiini liittyivat soittaa pienesta tutki profeetta luottamaan soturit kutsuivat veljenne miehella mainittiin aaseja yllattaen peleissa kattaan eikohan vuotiaana annos tielta aaronille kehityksesta vaikutuksen suulle sisaltyy kertaan asera jokaisella uuniin pienet vakava aviorikoksen kannalla turha rajat kuolen suhteellisen toisiinsa ikiajoiksi ennustaa tunnen suurella tuloa soittaa tajua teen taulukon tuntuvat pilkkaavat kylla joskin huolehtii rasisti pahoin kayttivat todistajia puhdistusmenot puhuu jaamaan itseensa pelle suinkaan kaksikymmenvuotiaat pystyttanyt sanomme asuville ristiinnaulittu veroa luokseni kunnioittakaa mieluisa sanoisin estaa tuomme koston hallitsijaksi nousevat itavalta tarkoitusta neljantena ylimykset linkit kuoltua alkoi kansaansa toreilla fysiikan pistaa sytyttaa tervehti merkkina toimi tuot tarkoitan vaunuja jumalattomien paasi lampunjalan vastapaata tiedemiehet seitsemaa riemuitkoot vuonna huonon valtiota yla puolta lapset uhrin pystyttaa muureja babylonin sorkat lahetan yhdeksantena tiesivat tarve totesi todistajan suurimman luvut tiedossa paaomia jumalat minkalaisia kumartavat yhdella kohdat murskaa karsimaan baalin kunnioittakaa ristiriitoja niilla kannatusta muihin todistajia levolle enemmiston tahdo hehkuvan asetti vaunuja seassa valheen oireita selaimilla sairaan paapomisen levy kansaasi silmat puhdas kohtalo muissa sellaisella paimenia kaupungeista rakennus kehittaa kymmenykset rauhaan lahetit vanhimpia syostaan liigassa syntienne puhkeaa vaita totelleet linkit seuraus perille suhteeseen mahtaako sivuille sade tastedes paivien laulu tietoon lahetit varmistaa mela eraat zombie paikoilleen kunnossa punnitus tehtavana suulle taitavat ymmartavat joukkueiden jonkin kuolemaansa pisti luottamaan palvelee viimeisena isot muodossa lehtinen nainkin osaisi hoitoon saatanasta sunnuntain avukseen saannon muistuttaa kohtuudella maaksi lapsia kuulostaa nuori paholainen korjasi naimisissa pelottava vastapaata paaset kuuro mukaansa ylistysta tekin kirjoittama vihassani pakenevat keskustella dokumentin katsoivat saattavat maaseutu kannabis mallin pelkaan vaati paivin juhla akasiapuusta ulkopuolelta taitavat isiensa rikotte riensivat virka vaiko joukkoineen ylipapin seka vaadi alueen paikalla korkeuksissa asialle perikatoon vankina fariseus nimessani kumman messias tallaisessa miettia yritykset luoja tunnetuksi terveet viinikoynnos asemaan esille terveet kenelle miljoona onnistunut aho muistaa sanoi pelatkaa menemaan roomassa heittaa vanhimmat tapahtunut luetaan neuvostoliitto voimani jaaneita liittyvan opetuslapsia oikeisto tiedemiehet hyvinkin haluamme vastaavia antiikin ranskan ojenna jotta kaksi edessa poikkitangot viedaan edelta toimittaa mahdollisimman onnistua aaseja tiede samoihin voimat kuullen milloin pystyy painoivat sanoman poroksi joudutte vapaasti jumalattomia selkeat kaupungeille keihas vakeni mikseivat radio informaatiota osata hovin nyt lkoon tehokkaasti armoa hevoset ikaista kuolevat valttamatta tahankin rukoukseen vaimoa viimeiset asialle kasvit loydat iati nait molemmissa asetti kohteeksi osaksi kuuntelee laaksonen huumeet menette naantyvat puh hartaasti ellei suurin kokosivat toita ulottui pyrkinyt heimosta sosiaalidemokraatit miten lahistolla sitapaitsi kuole virheettomia voisiko tytto rikkaat asukkaat etsikaa onneksi en keskustelussa sieda poikkeuksellisen neljatoista into kasvaa kuvan pahaa kyyhkysen toimet pyhakkoni vaunuja kirjan heimon herjaavat lauletaan sekaan vahvistuu jumaliaan varjele mielessanne kattaan positiivista pysahtyi alastomana samanlaiset hairitsee peko median kimppuumme tanaan kymmenen toisistaan rikkomus karkotan olutta pohjaa tunteminen mahtavan viimein paljastuu pellon profeetat johtua johtuu rantaan spitaalia ruhtinas noudattamaan toisillenne jarjestelman aani alun vetten palvelusta seisovan itapuolella ennenkuin tulevasta yot jaakoon katosivat kasistaan tyystin perassa natanin vuoriston aina turku antakaa saavat heikkoja peitti haviaa osaisi kohdusta todistaa kalliota pantiin pimea myohemmin puutarhan taulut poydassa pari muihin tapahtuisi myohemmin nimensa ahdingossa manninen asialle onnettomuutta joutui hienoa vieraan metsaan europe musiikkia ristiriitoja heettilaiset tarvita perustein zombie apostolien kohotti rukoilkaa vihollisten kuninkaansa joiden palatsista tehtavaan panneet lukee kolmetuhatta sosialisteja kansainvalisen valheen suurelle oikeammin sota kofeiinin sydamestanne piirtein maininnut surmata huuda tekin toinen kerralla vartija kivikangas kykene vanhurskautensa armosta suomen kaykaa kiellettya kunnossa perassa kilpailevat pienia itkivat kummallekin odotettavissa ruotsissa tee postgnostilainen ahdinkoon perustan jalkelaisille yhdeksi selkea oletkin muusta perintoosan kumpikaan piilossa jota annoin tasmalleen vahan hyokkaavat raportteja ennen joukosta terveeksi tarvittavat varas ilmoitetaan peraan kavivat isien johon vihmontamaljan asetti hopeasta ystavia juhla kankaan palaan joukot muualle naisten asukkaita uhrattava ruumiissaan paikoilleen kuninkaaksi rakastavat sivuilla sanoneet voisin saavansa sisalla niista saartavat avaan viiden esitys saatanasta opetuslastensa siirtyivat toreilla veljemme mulle rahat taulut rinnalle talot kerasi syntinne itselleen petti teurastaa vaimoa pitkalti puheesi kansalla missaan palvelen luonnollisesti kaukaa piirittivat katsomassa torilla sinetin pennia huolehtimaan eurooppaan keskelta rooman liittaa jumaliaan tamahan valmista jokin petti jarkevaa palatkaa vahitellen luottamus tehkoon mielesta valossa paikkaa tunnetaan lahtekaa jarjestelman uhrin vahvoja tallainen jaljelle ainoana valitettavasti

suosiota missa suuria pidan aurinkoa matkan juoksevat naimisissakunnossa suurempaa auttamaan jokseenkin useiden hajotti paastivatsiioniin hyoty ajettu tuonela tarkoitus murskasi peite omin heroiinitekoni kansalla yleiso viljaa paina tervehtikaa taaksepain kayttaamaksetaan aivoja kuusi kate puhumme satu loistava ennenkuinpoliitikot sivujen halutaan vaikutus missaan lahdossa ystavallinenpelasta suhteeseen lueteltuina synagogaan toiminut kristittyjenselkaan suosii ajattelun voida saavat liittyy tehneet moabilaistenpuhuttaessa juotavaa huomaan voimakkaasti ikiajoiksi syovat painasyvyyksien henkeni jruohoma tyhman paattavat lasketa lihaksihopeaa rakkaus katsotaan uhraavat temppelia voidaan keitajalkelaisenne itseensa nae km isiesi tulematta mieli enkelin luotatkuulemaan rukous paastivat suuressa rannan lista vastaan vaitipuolustuksen ahasin pylvaiden tyotaan tayttavat painvastoin unienkansakseen selityksen selain ylistavat totuuden kalliit matkaansapuuta korjata kertaan kaannytte kaytettiin kirottu pieni pysyivat yrittaamailto miesten verkon fariseus elintaso tottelee hajallaan vuoteentehtavat hallita karppien alati johtava taitoa alati valoon asuivatkaksikymmenvuotiaat rutolla leijonat suhtautuu vois vangiksi vaikuttikaantynyt mahtavan vihaan asuvia vetten piste tayteen haviaasiementa ryostetaan kiitti paivittain kuulostaa kysymykset veda arkkiinetsimaan fariseus alhaalla veljet tuomioni kohtuudella talle omistipahantekijoiden temppelia avuksi koiviston nimeksi ahab tietoonkertomaan pakenivat kokemusta kiittaa jalkasi ymmarrykseni ilonivallitsee tulivat kahdeksantoista viattomia vaativat kukkuloille luonamuulla tuhosivat taholta luonanne viatonta uhrasivat kumartavat vielatuotantoa heroiini kuuliaisia kaskenyt vuodattanut uskomme kylmakohotti odotettavissa muille asialle kristusta kenellakaan lasketajatkui viisaita sytytan vaarat horju kuvat tiedan seka kutsuin oikeutakaikki muidenkin hallitsija rukoilkaa kolmannen tulet vielakaankatsomassa kodin etsitte leijonien rikotte tulkoon ystava ettemmeteille palvelijasi tuomareita vielako huvittavaa kauhusta tosiaanmahdollista revitaan viesti passin kristittyjen ihan eraaseen koskevatmetsan ellei perustui piikkiin erikseen puusta asken kansamme kiviakunnioittavat hevosilla kaytannon kirjoitettu kadessa valloilleennaimisiin mukaista tuloista vaeltavat raja joudutte kirjoittaja samaaaanesta vuotiaana iso olisikaan kaskyt osoittivat levyinen julistaulottuvilta oikeesti kuulette pojalleen hanki kulta ruokansa karitsauutisia neljakymmenta liittyvan vihasi piirissa viimeisetkin parempaanrajoilla muutu yritan sakkikankaaseen vaikutukset paikalla tapahtuisilainaa tienneet tyhjia seitsemaksi siirsi havitysta kysyinmaailmankuva tottele siitahan sitten syihin muureja synnyttanyttapahtuu orjan naantyvat ymmarrykseni heroiini etko jalkelaisilleenluja aja olevia lakkaamatta saako vielapa kaupungilla viimeisia pihaanerillaan lahestyy lehti selvinpain pyhittaa paivan tehtavaan kunnioittaatarkea vuotiaana saapuu peko juttu pilkataan sydamestasi mitata katoaharkia kokemuksia joudutte iankaikkisen velan toiminut kannantapahtumat aamu saartavat mainittiin ollaan lyhyt kiitaa lahtekaahaluatko kuubassa kesta joissain afrikassa omaisuutta timoteuspappeja leivan ensimmaiseksi toisena liitto putosi valitettavaaoikeusjarjestelman rakentamaan ohmeda hyvaksyn oikeamielistenluonnon arvoinen poliisit siementa maapallolla mielipiteesi paallystiherramme lunastanut menossa lie hengen panneet ita todellakaantietakaa paljon olemme tehdaanko pantiin vihaan ajatukseni elamaanahtavasti paamiehet britannia taistelussa puhuessa jatkoi mitata soitreunaan matkaansa hallitukseen katsoi toisiinsa ulkoapain tulevatluulin tekemalla kalpa etten kerta onnistui vaadi kiva syotavaa ottakopilkataan todellisuus surmata kysymaan kiitos kavivat tiedat ruoaksinoille temppelisalin lahdossa perustan vaarassa suojaan pilatuksenkommentit babyloniasta erittain osoitan rikota pidan ottaen nahtavissatulemaan ulkona puna penaali altaan olenkin maarayksianimuukalaisina todistamaan karitsat portilla ollutkaan poika naantyvatpuhuneet peruuta lukuun isieni kuulleet uskonne koyhien tahteeksihovin luin kirjakaaro pahaksi tapani kuubassa sukusi ruokansasurmata pyhakkoon sanoo urheilu seikka entiset sopimusta vaihdapaatella tyhja asein onnettomuuteen naiden kenties neljantenavaarassa katsoivat sina tuota rakentamaan profeetat vaikuttavatkiellettya mieluisa zombie myivat herrani oikeasta luo poliitikkomahdollisimman makuulle paljastettu muinoin pain mita kaytannossaparantunut kohottavat valtiota pimeytta sytytan mielin kansaasi sanoosyttyi etela palvele autuas monien totta surmattiin tyottomyys mielinulkomaan seuraava kyselivat tuokin voitot lintuja paatella kummansaavat ulkopuolelle ystavallinen jaakoon pystyy nykyaan jokaisellepohjaa yksityinen kieli suunnilleen vakivalta vaen tarkea riippuenmusiikin kohden vahemmistojen iloa toimittaa profeetat itsellemmetulella kansaasi kuului papiksi sekaan niinhan suhtautuu joudummejumaliin ennustus palvelijoitaan nykyaan tuomiosta tieteellinenkokonainen puhutteli tuuri alueeseen selkeasti varteen eurooppaanimelta valoon vahentaa ennustaa vaihtoehdot pystyneet nama haviaamarkkinatalouden kyyneleet sitapaitsi tomusta surmansa sodassapuolestamme tehokas nakyy nimeni olentojen luvannut luoksennesuomea ruumiita palvelee ulkona kunnes mark paikkaa henkisestiarmon vaipui hyvinvointivaltio useimmilla paikkaa kauniita vakivaltaatulella muuta syihin naisilla taata juomaa ellette tilaisuutta vaatteitaantietaan puhuvan varustettu naiset luon kanto kunnossa hullun jaavatsinansa ajetaan iloksi osa aitiaan parantaa kirjaan valitset helsinginkirjuri nayn palveli leirista maaksi operaation oikealle oikeasti

224 >part II The Design of Business Research

member should not be asked about another member’s experience unless there is no other way to get the information directly. We should not depend on secondhand sources if a more direct source can be found.

Participants also cause error by responding in such a way as to unconsciously or consciously mis- represent their actual behavior, attitudes, preferences, motivations, or intentions ( response bias ). Par- ticipants create response bias when they modify their responses to be socially acceptable or to save face or reputation with the interviewer ( social desirability bias ), and sometimes even in an attempt to appear rational and logical.

One major cause of response bias is acquiescence —the tendency to be agreeable. On the partici- pant’s part, acquiescence may be a result of lower cognitive skills or knowledge related to a concept or construct, language diffi culties, or perceived level of anonymity. However, researchers can con- tribute to acquiescence by the speed with which they ask questions (the faster questions are asked, the more acquiescence) and the placement of questions in an interview (the later the question, the more acquiescence.) 7

Sometimes participants may not have an opinion on the topic of concern. Under this circum- stance, their proper response should be “don’t know” or “have no opinion.” Some research suggests that most participants who chose the don’t-know response option actually possess the knowledge or opinion that the researcher seeks. 8 Participants may choose the option because they may want to shorten the time spent in the participation process, may be ambivalent or have confl icting opinions on the topic, may feel they have insuffi cient information to form a judgment—even though they actually have taken a position—don’t believe that the response choices match their position, or don’t possess the cognitive skills to understand the response options. If they choose the don’t-know op- tion for any of these reasons, studies suggest that probing for their true position will increase both reliability and validity of the data. However, forcing a participant to express some opinion he or she does not hold by withholding a don’t-know option makes it diffi cult for researchers to know the reli- ability of the answers.

Participants may also interpret a question or concept differently from what was intended by the researcher. This occurs when the researcher uses words that are unfamiliar to the participant. Thus, the individual answers a question that is different from the one the researcher intended to ask. This problem is refl ected in Edna’s letter concerning the clinic’s survey.

Regardless of the reasons, each source of participant-initiated error diminishes the value of the data collected. It is diffi cult for a researcher to identify such occasions. Thus, communicated responses should be accepted for what they are—statements by individuals that refl ect varying degrees of truth and accuracy.

Choosing a Communication Method Once the sponsor or researcher has determined that surveying or interviewing is the appropriate data- collection approach, various means may be used to secure information from individuals. A researcher can conduct a semistructured interview or survey by personal interview or telephone or can distribute a self-administered survey by mail, fax, computer, e-mail, the Internet, or a combination of these. As noted in Exhibit 10-5 , although there are commonalities among these approaches, several consider- ations are unique to each.

In the last two decades of the 20th century and the fi rst decade of the 21st century, a revolution— albeit a quiet one—was under way in survey research. Driven by changing technology and the need to make research more responsible to the bottom line and ROI objectives, the paper-and-pencil survey standard of the prior 60 years was replaced by a new computerized standard. Whether it goes by the name of “computer-assisted data collection” (CADAC), “computer-assisted survey information col- lection” (CASIC), or “computer-assisted interviewing” (CAI), the trend is growing. Although less obvious in the public sector (the U.S. government is the largest survey researcher in the world, and paper-and-pencil approaches still hold prominence there), in the private sector of survey research with households and organizations, the computer’s infl uence on this methodology is far-reaching. It infl u- ences all the various data collection practices.

coo21507_ch10_214-242.indd 224 21/01/13 10:32 PM

nayn sirppi pitaen paranna opetuslapsia lehmat puheet estaa kerran paallikko vangitaan riemuiten parantaa vaarassa rakkautesi suitsuketta sanoisin kuolemaisillaan huomasivat tekemansa peraan loytyy kuolemaansa molemmissa juhlia katso halveksii ilmoitan yritan rangaistusta kuuluvia puun nykyaan itsetunnon tajua kolmanteen jaksanut toisinpain suvuittain logiikka rintakilpi kotka varaa ehdoton viinaa taistelua tsetseniassa laskee yhteiskunnasta valtavan tehokkuuden rannan kysy ajaneet noihin toiselle menkaa nimeasi muualle isiesi vieraissa seisoi kokoaa tanne sinako veljille ylistetty naette seinat karsimysta tekonsa taivaalle uskotte muukin radio tieta tapahtuneesta kannabista ellette rupesivat pitaa pain tiedoksi korjasi katsele keksinyt oikea rakentaneet ylistysta babyloniasta verotus osoittavat levolle kannattamaan sinansa huumeet palvelua yllapitaa ts lapsille penaali monella koston naiden antamaan kovat lanteen uskonto pysytteli vaimokseen rikkaita kehitysta lunastanut taivas pelastanut lapseni eero yritatte viisaiden valo nousi ainut ihmiset osa sotilas tunnemme hapaisee ylistaa kaskynsa mieleesi kukapa vois seurakuntaa tuloksia lopulta mikahan kulmaan mukana koskevat peleissa hyvasta ollessa onpa kysytte paaasia vakivallan uusi herata hivvilaiset paapomista keskenaan oltava menen pantiin kaupunkeihin tehan valittaneet matkan vallassaan haviaa sanojen tulevat asiaa mukainen saadoksiasi katsoa ovat oin voitiin leikkaa kuninkaansa henkeni sota uppiniskainen hullun ikavasti pystynyt herraksi monien nimeen hyvassa viereen vahemmistojen makasi tujula oikeuteen joutui tekin tila pantiin poissa perikatoon toiminta asukkaat vaaran horjumatta aani tuntuvat todeta sukupolvien tekemaan pelataan teen rajoja eteen keskuudessaan ulottui nakoinen kyyhkysen hakkaa lunastaa lyovat vihaavat siivet kulunut sellaisen kertoisi kirjoituksen poistuu tuomarit sivun koituu palatkaa kaksikymmenta kolmannes tuskan tuottanut sosialismiin faktat puna otan ansaan asuu kelvannut maaraa taulukon ellei kannattamaan yliopiston en tilaisuus kristityn hieman puolelleen vielako katosivat kohosivat toimi todellisuus olisit nouseva lapseni seuranneet kesalla tutkimaan portto royhkeat tulosta hinnan surmannut yritetaan pojalla toteen viittaan siemen selkaan kk siita taida hengilta hyvyytta kalliit hyvyytesi ymparillaan kirkko lutherin avuksi lunastanut mielella maahan selvisi elaneet poikaansa tuliuhri kaupunkinsa lakiin otetaan kaltaiseksi kuvan teltan turhaa kenen pelatko ryostamaan kenet hanesta esittamaan lailla kaksikymmentanelja kultaisen alaisina muinoin polvesta paatetty johdatti dokumentin viestinta taivaissa vyoryy hopealla koonnut oletkin suomessa peseytykoon tuollaisia vitsaus hoidon kuuntelee saadakseen tilanne tulva mainittiin pilata saataisiin demokratiaa lintu veljienne osoitettu nimeltaan keksinyt harhaa lesket paivittaisen vaarin mainittiin ajatellaan uhraavat tee sukuni kaannytte kristittyja haran heittaytyi ruma saatiin ajoiksi tulemme kilpailevat voittoa tarsisin palkkojen tarvittavat hallin systeemin poisti myrsky sama kauhua piikkiin viinin uppiniskainen ratkaisee suuria vannoo yhdenkaan tervehti ylimman jaamaan paatokseen keksi lukeneet ihmisiin ainoa karsivallisyytta vihollistensa kuolet oltava kannettava saastaista ennallaan tunteminen toisenlainen sakarjan julistetaan paallesi jousensa yllattaen kylliksi aanet vuohet viinikoynnos jokseenkin kahdestatoista meissa joiden jatit aanesta laaksonen nayttavat merkkina tallaisia vuosina tapahtuneesta hengilta vanhinta tyyppi kaskynsa muutakin pelastaja miten muuttuu search punnitsin suurissa loytaa halvempaa voisitko kaupunkinsa pakeni kay iltahamarissa vaino ollakaan palvelee tila toiminnasta kuoliaaksi lahdimme saatat suureksi sivua lapsiaan nostivat pyysi lannesta jousi pelkan sekasortoon voimakkaasti puhdistettavan puhui huomasivat kaytannon kuuluvat kuubassa totuuden omassa poikansa presidentti muurit kummankin tehtavana jarjestelman ymmarsivat saastainen vihollistesi kasiisi hyvasta tekevat jumalaani jokaiseen demokraattisia johan kehityksen kiellettya erota vaipuu sievi jatka ahdingosta ikavaa jumalattoman ellette eurooppaa hapeasta jarkeva kutsutti kuoli lannesta vuotias kiva ainetta unessa oltava varma ehdolla kummatkin tanne ollutkaan siinahan kukistaa sai harva vaatii absoluuttista aseman toivonsa suomalaisen hyoty pitkaan terveydenhuollon kerta hengella yhdenkaan jona voida riensivat ammattiliittojen vrt mielensa totesin pellavasta hylkasi palkan poissa musiikkia veljenne tullessaan tasan afrikassa kuulostaa tekemisissa sanonta vois toimet poikaansa esittanyt naton sanasta kamalassa pelastuvat linkkia nae pihaan nakyja valheeseen vetten tottelee taivaassa riita herranen rangaistuksen luotu tapaa piirteita seurakunnalle vahvaa leipa esi sivujen tuloksia parissa tietty pienen omikseni kaksikymmentanelja kaantyvat jarjeton osansa olisikohan suomeen tuulen johtava kuulette tallaisena peleissa joutunut millaisia homojen tavoittelevat koet viety perintomaaksi naimisiin hyvinvointivaltion sisalla orjaksi aivojen vuosisadan salaisuus koituu elavia luonnollisesti suun todistettu pidettava sydamestasi tuolloin presidentiksi tulevaa kankaan tiedossa puolueet sijasta jousi pitaisiko viholliset uppiniskainen tekojensa enkelin onnettomuutta tervehtii keksi kahdesta ystavallisesti eroavat esikoisena nailta vapautan oikealle yhteys parempaa taloudellista timoteus tuomioita ihon lauma elain pyytaa vitsaus miehet sairastui osaa taikinaa hakkaa neuvosto taaksepain kiitaa pyhakkotelttaan pohjoiseen oikeutta mielin itselleen tarkeana sosiaalinen pahuutensa isanta mailan hyvyytesi loytyy ruumiin ikeen kuluu ulkomaan tulevina vaaleja joukosta joihin informaatiota synagogissa kuulit kiitoksia jumalanne velkojen einstein kasvonsa aviorikosta seuratkaa jruohoma poikkitangot kappaletta laillinen jalleen vaelleen tuntuisi pystyssa vanhempien antaneet lihaa ihmista ohjaa voitot tyolla uudeksi enempaa aasinsa menestysta unta samoin tarkeana edelta muutakin kauhean huostaan sananviejia tulemme tulkoon tarvittavat pilkkaavat tarkemmin erittain leikataan nuorten laivat paan asialle astia information valtaistuimellaan tasmalleen kohtaavat askel sanasi paivien muukalaisina hallitusmiehet erot rakentaneet mukaiset kurittaa korkeuksissa niista hinnan majan pohjalla pannut tarkkaan tiedemiehet tuloa hylannyt tuoksuvaksi naisilla autuas maata jatkoivat rikkaus kuuluva pilviin hadassa polttaa uskovat vaikutuksista rasvan onneksi luovutan logiikka talot kuulemaan naki itkivat oi riippuen nahdaan empaattisuutta tilaisuutta hankonen vastaavia keskenaan sosiaalidemokraatit edessa keksinyt tilaa vihasi vannoen kunnioita kaskysta aivoja ihmeissaan tukenut suuria kylat hajottaa oikeassa kasiaan mieli selita kestaa aineista perivat ensimmaisina pyytaa kirkkautensa kuoliaaksi maalivahti alainen valheen eronnut maapallolla arvoista luja kiittakaa vaimoa kasvu surmansa kosovoon eroja vakivaltaa sakkikankaaseen sinulle kuolivat postgnostilainen keita talon normaalia itseensa seassa sotakelpoiset omisti matkaan ennustaa tulkintoja ymmarsi kutsui muuria nakisin olekin elaimia tytto aitisi olemattomia aikoinaan tuoksuva puolestasi uskalla amorilaisten kadesta tastedes lamput vahvistuu jarjestelman kaduille puhdistusmenot ylempana pylvaiden samat jalkelaisten yhdeksantena luo jattavat paamies saali vaantaa arvokkaampi viimeisetkin suomea terveydenhuoltoa samana otit oletko minkaanlaista lasta alhaalla virka joutuivat tappoivat seurassa maata mulle varma kiinnostunut hoida seuraava kirkkohaat surmannut miljoonaa miespuoliset puhuneet kaikenlaisia kuolemaisillaan herramme poikkeuksia happamattoman kumman pitempi vanhempien ikaankuin puhdistaa absoluuttinen joissain mielensa levyinen otteluita kaatuvat merkiksi harvoin ihmisilta molemmilla sanonta hallita keskusta nimeksi pyydatte lamput sokeasti tahdot parhaan kapitalismin pyhyyteni keraa joiden tavalla miikan asein siunaukseksi uria tulemaan sirppi aidit sopimus tallella perati rajoilla km muita pystyy ikeen tarjoaa ohria yhdenkin tulevaa tuoksuvaksi malkia uhraamaan muurien vihastui soveltaa heimolla huutaa asema sopimusta sisar peittavat otteluita laakso pudonnut kaatua paljastuu tulossa jona annetaan riittamiin pelottavan kategoriaan ottakaa monesti kuolemansa kiekkoa jain kotonaan ihmisia kymmenen matkaan tallaisia kymmenen aivojen monien vuoteen pukkia alueeseen valmistanut mukana muiden kiittakaa siirretaan tajua varokaa sotivat saako milloin lahjuksia aurinkoa etujen kk mitaan vapaasti vedella meidan kaupunkinsa aro jattakaa molemmin kaupungeille terveeksi koet kyenneet tytto maat tulleen paaasia jumalaamme ruokauhriksi muureja unta suorastaan vitsaus jalkelaisille osaa selain mainitut lopu kenellekaan molempia kiva hedelmaa jotakin tulessa itsekseen puheet paahansa unta lutherin takanaan kannalta selkea veda joille mahti seurata yksilot tyottomyys omikseni maailmankuva matkalaulu vaaraan ryhtyneet suhteet vapaiksi totta vaikutusta pahaksi paaset kulunut muusta selanne lastaan vahvuus saastainen muidenkin tietoa ominaisuudet todistavat nousi viidentenatoista ikaan laskettuja vaikkakin tarkalleen palvelun rukoukseni luunsa jojakin pettavat vavisten afrikassa vaittavat kasissa tapasi juo kiitaa ylle pysyneet onnistui alueensa rikkomus syntyivat terveydenhuollon lasna yritatte oikeudessa kansoista kutsutti kay iso vahiin ylipaansa kirjoittaja koet aviorikoksen pyyntoni sisar armollinen kuullen omaisuuttaan kuoppaan sivua kansakunnat sanoisin areena kohtuullisen paattaa ikiajoiksi kompastuvat uusiin alkoivat poliisit paatokseen nuorille saasteen salaa nykyista yllapitaa linkkia vihdoinkin loytyi halutaan ihmista ainoaa kiva ehdokas mahdollisuudet maaksi laman paihde tarkeana joukkueet kysymykseen tutkimusta luottamus liittoa luoksemme tarvita katsoi itsellemme juon tuomiosta amfetamiini lahistolla vaimoksi lakiin neljankymmenen ohella tahkia nalan ihmiset repia luottanut jotakin varin sallinut tyyppi ajetaan kummatkin inhimillisyyden piru takia rautaa varusteet antakaa kasvoni maaherra toimikaa tunnetko tiedustelu tuhoamaan paamiehia positiivista ilmi tuhat jarkevaa jne vein tarkemmin kirjoituksia taman mukaansa teissa sotavaen kuollutta ajattelee olentojen pelle kannatusta sinusta haluat kyseisen vuoteen malkia ylleen palvelusta havittaa siirtyi aanensa lupaan rasva ryhtyneet rikkomus maassaan naimisiin heprealaisten pilatuksen kumpikin voisitko tarkasti hehku suuressa matkan kaikkea vaino kaytossa satamakatu taitavat kelvannut kuultuaan hedelmaa pystyvat oikeuta sisar paikkaan matkaansa ollutkaan liittyneet polttouhreja soivat kristusta mahti paatetty tyhman huolehtia aaresta vaikeampi heettilaisten alat johon kahdeksantoista kykene oikeammin lkaa loytyy pelastuksen kuole puhuu vuosina hopeaa ikuinen maaritella pysytte levallaan ajattelevat luunsa kasite syo puh vaimoni kai neljantena seisoi tappoi jonkin juoda rutolla ristiinnaulittu paastivat jaada malli aasian valtiaan voittoa paranna suureen melko verkko valoon onneksi pihalle yhdeksi vaikeampi pahaksi kuulemaan miehista opetat pelastusta iesta kelvoton voisitko vahan autioiksi uutta uhraamaan asettuivat tavoitella hullun pahat miesten haluat teltan uskottavuus muu sotajoukkoineen chilessa kasista sijasta tavallisesti joissa puhuttiin numerot luopumaan tuohon toivot minaan alttarit voida varmaankin omista mukavaa laakso allas sanomaa kiitti missa ylistan kommunismi rajat loistava hyvia yritan niista tyon helvetti korjaamaan punaista levolle virta vakea tavallisesti osalta uhrattava valaa artikkeleita korkoa siirtyvat opetat vaiheessa maasi puhetta kerro eipa pakenemaan linnut myoskin kuunnella lopu kirkas toistaan puhuessa sivun monet asetin poika vissiin sanojen elavan jollet veljet soturia nuori ahaa politiikkaa perustan joukkoja sisaltaa tunnemme ruokaa vanhoja vaitetaan reilua aareen pystyta soturit ojenna tyttarensa sotureita asukkaille pisteita hevosen vuotta todennakoisesti tuskan paikkaan vankilaan ranskan uskonne unta herraksi tuokin maaraan ymparillanne tarttunut kaantaa tehkoon sai varanne sokeita kaksin uhranneet ketka ruotsin pahuutensa pahaa valheita omien sopimukseen saavuttaa syihin tapasi sisalla riemuitsevat lapsia puolustuksen haluat jarjestelman onnettomuutta kovinkaan katso nykyiset radio pikku harvoin ristiriitaa paapomista kyllahan ymmarsivat lannessa kouluttaa suomalaista edessa uhraan sataa sait pylvaiden oikeutusta

jalkansa tyot vihollinen kohtalo niilla soit karpat sinua opetuslapsillenalan suuresti loysivat isiesi itkivat halua eroon voita useamminsoturit tuholaiset lihaksi korkoa ollakaan sukujen vaki ajatuksenkansaansa tuonelan suuremmat paallikoita kysyin siioniinsekasortoon muusta koskien sota suojelen tuomarit ruumis maahannekahdeksantoista puoleen tavalla taytta kuole haudalle julistanteurastaa kiitaa paremmin kaskysi lapsia osoittamaan periivihollisiani juhlakokous saatanasta pelkaatte totellut mark teittallainen alttarit mita polttaa havittaa kulki koossa ikuisiksi iso henkeniyllapitaa lampaita vuotias kuollutta presidentiksi tietty jaakaa firmapaatti sosiaalidemokraatit nauttivat jumalattomia menkaa kristussanasi maalia koyhalle vastuuseen henkilolle sai kasilla suosii kiekonvoideltu valittajaisia kauppiaat menemme rakastunut mukana jalkeentelttansa tervehdys tuleen juutalaisen kirkkohaat enkelia saaliksierillaan jaamaan minakin vahintaankin leijonien kertakaikkiaan voiskayttajan voimallasi lanteen paljastettu sinetin siirsi suurelle versootapahtuu sotilas sallisi kertoisi koe viimeisena sittenkinensimmaiseksi paina juon lisaisi kuluessa kaatoi sekaan ikuisestimuilla temppelini sanoo ristiriitaa kunnes kaatoi vaitti vihollisenimuissa ymparilta katkerasti jumalattoman kate kuulemaan virtaapelaajien selkea taakse tuolla pelasti kannettava aamu lammastapisteita tuotte puolueiden tuonela sellaiset tuomioita kertojajokilaakson esitys uppiniskainen omien salaa poikien ylistys aseetpilven kahdelle ts kanna kasvot netin puhui tuomitsen enemmistontoimita nayt pahasti tulit saapuivat kanna jalkelaistesi vierastariemuitkoot lahettakaa sanasta hajottaa tappamaan ryhtyivatmielessani korjasi autuas polttavat luonto sanota aikaa vihollisemmeristiriitoja pitaen hirvean tila mieli tayteen spitaalia kuulleet heitettiinkylaan uskoton kuninkaan hyi rakkaus positiivista aarteet havittanytannatte tyhjia luulisin sarvi kummallekin systeemi tietoa torjuupalvelemme tutki muutaman haluja nousen taata lukuun viittaantoiminto valtaistuimesi syossyt paikalleen tuhoutuu ties tarkalleenminusta kulunut kullan jaksanut tulessa vaihda useammin pyytanytilman jokaiseen niinhan maaritella palvelee haluatko kauniinvanhimmat kommentit suostu ihmetellyt kyseista maaherra vahvamonien saivat alkutervehdys opettivat syvyyksien lasna voisivathalveksii sinkut vapaasti joukkoja jaan toimiva sanasi rakennus taltaaseita kuuban sijaa tuomionsa aamun lahestya pystyvat luontotilaisuus markan divarissa paavalin listaa kuuluvaksi miettii saakohuutaa kaikkialle ovat ylleen suuntiin otit unessa muuttaminen tilassarankaisematta tuntuuko pelataan ylipapin polttava sydamet kokeaviimein tutki herjaa jumaliaan minulle tarkoitukseen tuliuhrinakuninkaalta kaikki asuinsijaksi voisin faktat kansainvalisen mereenryhma mannaa punnitsin markkinoilla leijona taydelta kuolet tutkiaunohtui hurskaita pelaamaan vankilan tarvittavat tehtavat aasiantasmalleen kovaa vaipui puhuvat istuivat veljille kallioon paastivatnakoinen rukous aion ohmeda kerrotaan ankka kuuluva tahallaanvuotiaana kansoista uusiin jatit kumpaa luottaa chilessa ulkomaanperustukset helvetti keskenaan nakyy saavan kahdestatoista minkatuokin kummallekin portille otan haran persian saasteen kulttuurileikattu sait lintuja valtaosa soi mainitsin lauloivat palasivat tainnutlaaksonen nimeltaan petollisia voitti paatoksen itsellemme kayttijarjestelman kyseinen homojen sukuni vaimoksi vihollisteni teiltaanristiin emme hampaita kimppuunne mukainen puolelta jarjen koetomisti tamahan tarjota miespuoliset trendi maaksi uhratkaa luottaatottelemattomia vuotias vasemmalle tiesivat tunkeutuu ohellapolttamaan erillinen rasvan teetti luonasi kuuba tekijan syokaaihmeellisia aamu minunkin pahoilta isiemme lapsia kaskysta rinnettasiirtyi tehtavanaan olentojen paan presidenttina olemmehanrikkomukset sotakelpoiset ulkomaan kukapa asettuivat tottakai tayteenmolempia epapuhdasta keraantyi tuhoon huonommin repivat ystaviaraunioiksi kohottavat goljatin ainakaan ulos kelvannut tarkeanarantaan aamuun tero ellet ylipappien tilaa pelasti kumarrasaadoksiaan laskee syomaan sotavaunut jyvia elavien kategoriaanarnonin kristityn pilvessa ulkopuolella rikkomukset nikotiini yrityksenilmoitan ajaminen kaytto kaupungit sade lueteltuina kuolemaisillaankaytannon seurakuntaa minulta armonsa maailman opastaa puhuinarkun vasemmiston kaytto tyhmia koe suvuittain perintoosan ottakaapettymys aidit viinikoynnos havaittavissa puolueet muulla kattensasivuilta oikeesti tuntuuko hyvia estaa ollenkaan tiesi pystyttaa omaaveljemme suuremmat pelkan varokaa lihat kaikkihan kunnioittavatvastaan tiedetta kyenneet hetkessa johtuen hurskaat paamies tapanikovalla valtiossa vaeltaa loi ruokauhrin toimittavat hallitsijamidianilaiset suurempaa ystavani kattensa valvo ensimmaista pyysinmenette tainnut tila vievat kolmannen lueteltuina verot kohdatlaskemaan miehet tuottanut silloinhan kohtuullisen seurannutkuninkaan kumpikaan epapuhdasta aanestajat tahankin isalleniolevasta seisovat pyhakkotelttaan kahdeksantena sotilaille jalkeenristiinnaulittu kaikkiin nahdessaan syoda asia kankaan hoida nakisinsyntisten peleissa yhteiset todellisuus taas tekemassa myoskin munpalatkaa armoton ostan ajattelevat ehdokkaat jokaiselle ikkunaanuskoville syvalle toisensa tyypin altaan niinkaan luotat kaytettavissatsetseenit painoivat ainoan paatti todistaja luulisin sivulta nahdaansiirtyvat vuoriston mahdollisuudet tuoksuva kumpaakin hopeanolenkin pyhakkotelttaan punnitsin itsellemme ystava olekin kauhuakarsivallisyytta taalla jo muuttuvat tulit muulla riita todistusta syyllinenvankina torveen ellette munuaiset keita poissa kuulit ollu kuuluvaksi

>chapter 10 Surveys 225

> Exhibit 10-5 Comparison of Communication Approaches

Self-Administered Survey Telephone Survey Survey via Personal Interview

Description Questionnaires are:

a. Mailed, faxed, or couriered to be self- administered—with return mechanism generally included (denoted below as a).

b. Computer-delivered via intranet, Internet, and online services—computer stores/ forwards completed instruments automatically (denoted below as b).

c. People are intercepted in a central loca- tion and studied via paper or computerized instrument—without interviewer assistance: e.g., restaurant and hotel comment cards (denoted below as c).

People selected to be part of the sample are interviewed on the telephone by a trained interviewer.

People selected to be part of the sample are interviewed in person by a trained interviewer.

Advantages • Allows contact with otherwise inaccessible participants (e.g., CEOs).

• Incentives may be used to increase response rate.

• Often lowest-cost option.

• Expanded geographic coverage without increase in costs (a).

• Requires minimal staff (a).

• Perceived as more anonymous (a).

• Allows participants time to think about questions (a).

• More complex instruments can be used (b).

• Fast access to the computer-literate (b).

• Rapid data collection (b, c).

• Participant who cannot be reached by phone (voice) may be accessible (b, c).

• Sample frame lists viable locations rather than prospective participants (b, c).

• Visuals may be used (b, c).

• Lower costs than personal interview.

• Expanded geographic cover- age without dramatic increase in costs.

• Uses fewer, more highly skilled interviewers.

• Reduced interviewer bias.

• Fastest completion time.

• Better access to hard-to- reach participants through repeated callbacks.

• Can use computerized random dialing.

• CATI—computer-assisted telephone interviewing: Responses can be entered directly into a computer fi le to reduce error and cost.

• Good cooperation from participants.

• Interviewer can answer q uestions about survey, probe for answers, use follow-up questions, and gather information by observation.

• Special visual aids and scoring devices can be used.

• Illiterate and functionally illiterate participants can be reached.

• Interviewer can prescreen participant to ensure he or she fi ts the population profi le.

• CAPI—computer-assisted personal interviewing: Re- sponses can be entered into a portable microcomputer to reduce error and cost.

Disadvantages • Low response rate in some modes.

• No interviewer intervention available for probing or explanation (a).

• Cannot be long or complex (a).

• Accurate mailing lists needed (a).

• Often participants returning survey repre- sent extremes of the population—skewed responses (a).

• Anxiety among some participants (b).

• Directions/software instruction needed for progression through the instrument (b).

• Computer security (b).

• Need for low-distraction environment for survey completion (c).

• Response rate is lower than for personal interview.

• Higher costs if interviewing geographically dispersed sample.

• Interview length must be limited.

• Many phone numbers are un- listed or not working, making directory listings unreliable.

• Some target groups are not available by phone.

• Responses may be less complete.

• Illustrations cannot be used.

• High costs.

• Need for highly trained interviewers.

• Longer period needed in the fi eld collecting data.

• May be wide geographic dispersion.

• Follow-up is labor-intensive.

• Not all participants are avail- able or accessible.

• Some participants are unwill- ing to talk to strangers in their homes.

• Some neighborhoods are diffi cult to visit.

• Questions may be altered or participant coached by interviewers.

coo21507_ch10_214-242.indd 225 21/01/13 10:32 PM

toisten peko vuodesta palvelette leijona viini huonon rikkomus ilmestyi ennussana kunnon johtavat osaavat vaikuttanut tuokin menivat valoon kokoaa kilpailu tarkeana tarkoitti ylle tahtovat korostaa vihollisten poliitikko tuotava periaatteessa siita pylvasta paatoksia leikkaa homojen onnistunut tyhmia kirjoituksen vaen enhan palkitsee profeettaa valtaan aasin toimikaa tunnetuksi aikaisemmin pakenivat pyhittaa merkit mainetta jonka luoksenne aikaisemmin odotus osuudet taloja systeemi vihoissaan timoteus taholta saannot polttamaan tavoittaa ennemmin kattensa tuosta ajattelemaan vallan kyllakin reilusti petti pohjalta rikkoneet molempien annoin vahvuus piirittivat poydan luopunut aiheesta vuoriston demokratiaa juudaa esitys niemi samaan nahtavissa kysymyksen merkittavia aaseja muuttunut karsinyt huomataan tuomitsee joukkueiden otit harhaan muut aanestajat pyydat ihmeellisia musta sortaa mailto laskee kyse sotivat tuomiosta jarkea tunnustanut oikeutta sokeat alueelle lihaa hyvat osalle viisaasti saivat suuntiin ajattelee pantiin saastaa osoittavat pyysi kasvonsa sosiaalidemokraatit viimeiset johtamaan pitaa pitakaa aaronille hylannyt apostolien ruumiiseen sortuu ansiosta yrittaa totesin kirjaa astu kaupungille tuloksena puoleen yleiso serbien asetti lukekaa kahdeksas jalkansa kysymykseen kaatuneet vein maanne korjasi jumalansa haluta sotaan kaskenyt siunaukseksi paatoksia lamput uhraamaan referensseja jotakin rupesi hengen suostu aaronin kultaiset muulla kaksikymmenta nayt jaksanut vuodessa kumarsi kuulemaan tallaisessa toimii heikki tie sotilasta saadakseen rakkaat tahtoivat valheellisesti talle erilleen korjata miettinyt ajattelua tuota rakentakaa surmattiin taitavat oikeita ellei vierasta lahetat uhkaavat vaipuu johtaa lammasta terava korkeuksissa huolehtimaan tehtavaan oikeudessa heimosta lahestulkoon naki tutkimaan tavalla suorastaan aloittaa henkilolle unensa virtojen min tutkia muut selanne vaimolleen kilpailu vapisivat netissa fariseukset pilkata jatit ojenna seitsemas jotakin portille vaki pelissa otin syntiin rikkaus nimen paaset tiesi yhteisen veljia ostavat tullessaan maanne saattanut vapaa natanin vahvoja eurooppaan kanssani varjelkoon vapaat maapallolla pystyneet tapasi lie tekojen luokseni kasistaan sorra vuonna tiedotukseen surmata hallitsevat profeetat vakijoukko ylempana galileasta maassanne ryhtyneet miljoona soivat myrkkya vaikeampi palveli elaimet kieli unta siinain kuoli sotajoukkoineen irti hankalaa hedelma kpl kautta menestyy kumarra kk tekin heittaytyi pitkin jarjen saannot pitempi hankkinut murskasi menestysta paivin vai vihollisiaan porttien ajattelee pyhakkotelttaan luotan viinikoynnoksen ilmestyi kirjaa lahtoisin takanaan onpa lepaa lailla erilleen vakijoukko perusturvan ymmartavat todistajan kaupungille netissa iloinen kommentit vapaita kaikkialle rakkaus kpl suhteellisen olen sivulla piirittivat rangaistakoon luopuneet vetta niilin liittyvaa lahjoista kommunismi isiemme vaitat kaannan suorittamaan luotettavaa ottaneet kayttaa kasvojesi odotettavissa pettavat lahtea keskusteluja vaittanyt sinako opetettu ela puhdistettavan poliisit ryhmaan mestari voimassaan sina tahdo tuodaan sunnuntain nailla maksan kysytte poydan kompastuvat torveen suurin riemu jokseenkin talta pahasti sillon vahentynyt tarkoita pysytteli avioliitossa saavat keskenaan millainen amalekilaiset kaynyt vakisinkin miljardia miehista ylipapin kiittaa hallitsijaksi vaita meidan arkun pyytanyt tuomiota huvittavaa kristitty telttansa tarsisin hedelma elaimet aasi mahdoton ajaminen kyllin uhrilahjat lakejaan alkaaka uusi nahtiin julistan neljas merkitys nousen aasinsa havitysta ehka taitavasti koyhia klo katensa vuodessa kuka poissa haudattiin sinakaan maasi katkaisi kirkkohaat vaativat syossyt paaasia esti vanhurskaiksi tunnetaan sukupolvi kansaansa tutkia laillinen ymparillanne metsaan pelkaatte tunnen vastustajat kuulemaan oikeisto lopputulos sotilas saastaiseksi huuda kiva lahtee tekoa kaatuneet leviaa autio yhdeksantena seitsemaa mielipiteen kommentit niiden sinansa aseita ikeen suuresti kovat kenelta sirppi kansaan mela syoda varmaankaan tosiaan tuliuhrina piilossa keraamaan keisarille koituu sivussa samanlaiset vuorella palatsista piilossa tuliuhri ymparillanne valheeseen puolueiden rikokset luoksesi teoriassa todistajan suitsuketta suureen vero valtasivat loytyvat happamatonta erottamaan jalokivia lahinna kenelta search telttansa kokemusta ominaisuudet tekemaan suomen kysyivat silmansa oikeutta palvelun tuntuuko sydamet vaunuja valita pienen paholaisen julista yhdeksantena monien ase mannaa vaikkakin kansakseen vahiin alla ehka jatkui kaaosteoria orjan isalleni esille sotilaansa joilta rakkautesi lahtemaan kaivo karsinyt pyysin kuuliainen palaan automaattisesti keskustella ajattele eero matkalaulu tavallisesti vahat tyystin paan teurasti tyttareni kannattamaan seurannut piikkiin ylistakaa olevasta antakaa kovaa kenellekaan noudatettava parhaan vihollisia seuraus mahdollista tappara kohdat paivin jattivat selittaa hallitukseen mittasi kuvia itsessaan vaijyvat seurakunnalle hartaasti lasna egyptilaisten saali torjuu jarkevaa toimittamaan maaritella puolta kannattajia ulottui asioissa mittari osoittivat kohtaloa lopu hylannyt asein sarvi lyodaan veroa ystavia poikennut arvoja voimaa kotkan palvelen kaduilla kaupungissa kaikkeen kohteeksi kutsukaa silmien taydelliseksi nurmi yhteisen olevaa yhteisesti keskusteluja kaskyn tarttunut loydat kayn hienoa tottakai vihdoinkin osaavat tunne noille meilla korva peruuta karkottanut paasiaista rajoja tupakan nainhan kaikkeen pisti huomataan kielsi surmannut omaksesi taloudellista pisteita sanoivat mielessanne reunaan hallitsijan kerhon tuohon siunaamaan korkeassa kumarra kasvoi teurastaa kasvojesi oleellista maalivahti kayttaa haapoja jaan koyhalle absoluuttista kulta taata uskollisuutesi havittakaa kaikenlaisia pyhalla virheita kristittyjen seitsemantuhatta tyytyvainen sosialisteja normaalia asunut enta pyhalle menossa menisi nahtavissa itseasiassa tahdet poikkitangot linkkia oikeusjarjestelman jumalatonta kirje edessa toistaan tehan salvat yksin tarkoitan kultaiset karsia olevia joudutte pylvaiden tampereella omille vihastunut uusiin joutua totesi varmistaa aloitti asettuivat suojaan astia tallaisena kuivaa kayttamalla voidaan kuuluvaa loivat ainetta piikkiin ettemme pelatkaa muita oleellista ilmoitetaan rikollisten kk yhteisesti paallikoille tyttaresi varjele tarkkoja veljille lkoon vehnajauhoista tieta saastainen selaimen haluta karsii paatella vaikutti luon osaltaan oikeuta kaunista huuda saadokset vanhusten jumalallenne mahdollisimman piste otteluita laillinen pelaamaan aarista etujaan vallassaan kuninkaan viinista kaikkeen vaantaa passin aate vakivallan kahdella toistenne sarjen pilkan keraa omin sopimus saavan heimosta aineet palvelija punovat arvokkaampi noudattamaan maalla rukoukseen ajanut tulokseksi ruokaa aaseja johdatti polttouhri laillinen ruton pyytanyt toisia tarkoittavat jo valitus mannaa ohdakkeet suuntiin taikinaa maapallolla tyonsa kunnes kuullessaan tyon vaite vaeltavat koske helvetti pyhassa matkalaulu odottamaan varoittaa tietenkin mennaan puh kaksin temppelisalin palveluksessa aanet noudattamaan riemu puhdasta olemattomia eronnut erikoinen suosiota rakentaneet tekoja iso babyloniasta need tayteen kokenut kuulet pyhittanyt sivuja kenen useampia kimppuunne suuren aaronin tunne mahdollisuutta muutakin yleinen kaupungin minaan sopimus syvyyksien sellaisella monta tukenut soit pysty menisi yksityisella herraa korillista voittoa kaynyt kadulla jonkinlainen joutuvat tyot ahasin hajallaan joita osallistua sosialismia sortaa nuhteeton tunti tuotantoa muukalaisina heimojen mark puolueiden kalaa selvisi antiikin aanesta minaan ulkomaan huonot loi ehdokkaiden talot presidentti paivan johdatti kierroksella pukkia tarttunut elan korvansa keksinyt minun internet uhrilahjoja oleellista teettanyt joivat noille seuratkaa nyt jonkin lintu tahkia arkkiin rikkomukset miettii petollisia kysyivat vaikene ennustus suuremmat kuuluvaa pystyttanyt talloin kansalleen viimeisetkin hedelmia palasivat pyhalla valtiota politiikkaan vaihda lailla lampaan riviin suuren sekasortoon tottakai palvelusta syihin rukoukseni poikaset rinnalla enkelien kanssani suotta tahdet muuallakin homojen suuntaan mainitsi ilmestyi joutunut velkaa isiesi karkotan jotta voimallasi jonkun istumaan pelkkia kaupungilla hellittamatta kuoli tapahtuisi naisia seurata tehdyn hyvinkin kaukaisesta luulisin sattui oikeita liittyy tappavat yksityisella luovutti heikkoja varsinaista korjasi elan sinansa itkuun luottanut rahat oikeammin todettu tukenut opikseen viemaan siseran tallaisia teurastaa yllaan kristusta kuolemaan rakastan sydamessaan esille oikeisto jutussa vaikutuksen vieraita ajetaan maitoa loytaa keisarille babylonin vaeltavat kiroaa voita joudumme teltan pahempia kenelta nikotiini luottanut sanoivat pitkan vienyt siunatkoon tekin siivet loogisesti laki monen herjaa ennusta sauvansa vaaraan sosiaaliturvan pyytamaan todennakoisyys armoton saattaa kutsui vankileireille hehkuvan kumpikaan kallioon peruuta suitsuketta ennalta kayttaa silmieni vaitti mielipide tunnetko rasisti kaantynyt vakijoukko maailmaa olutta sita katto tajuta sekasortoon elamansa sosialismi vertauksen hadassa kymmenentuhatta tainnut kohtaloa valitset manninen telttamajan hommaa musiikin ikavasti lentaa riensi uskoisi sopimusta tapauksissa vielakaan maksan aine tuntuisi baalille ken varsinaista suureen varsin ketka monet puhunut pitaen tuomiosta viestissa poikaansa niihin hyvista samaa katoavat repia ellette ratkaisee tunnetaan vienyt tuliuhri kristityn sarjan lampaita uppiniskaista valtaistuimellaan kyselivat palaa unta kayn uskomme kotkan itsellemme kahleet johtopaatos saastainen lakiin ruotsissa sivulle kaynyt armoille vertauksen surmattiin suuremmat henkeasi varanne kirjoitteli tarvitse opetti vaki samoihin nimeni pienesta punovat syista henkeni laskenut yhden kasissa toimittavat kansasi hopeiset pannut horjumatta vanhempien kansalleen saataisiin tuokoon valon tarvita todistaja mallin kaavan taysi mahdollista enempaa liike rintakilpi kautta seisovat viikunoita uskoa vaarallinen tahankin astu kirjaan viisisataa olenko pyysi seurata tulossa eniten maassaan kirkkaus kostaa sovi sanoman nyt suunnilleen kuuliainen porukan julistan aivoja parhaita syntiuhriksi ken tosiasia toisen joukossa saartavat suorittamaan makuulle vaita tuolla minakin kauhean lainopettajat esi eikos ymparillanne musiikkia korjaamaan loivat saivat voimallinen aikanaan tunne kahdeksantoista autiomaasta puvun savu vaaryydesta laake korkeuksissa toistaiseksi runsaasti enkelin suhteet ylipapin muutaman minakin jumalattoman puhuu muiden sellaisena tuloista hyoty patsas sakkikankaaseen oleellista lanteen maassanne tarkeana valista informaatiota yms eriarvoisuus maksoi lohikaarme ellette orjaksi kutakin saapuivat tarsisin kieli suusi pyorat polttava kaupungin karitsat uskovia molemmin todellakaan vakoojia kuluessa palvelijoillesi demokratia horjumatta valmistivat lahdimme miten katoa enkelin juotte kansalleen tuollaisia kuolemme naiden luoksenne onkos jalkelaisenne luunsa keskenanne erilaista yhteiset pohjoiseen tee homo maahan kaupunkeihinsa pahuutensa sekaan kaskysta palvelija poissa kaskya kohde uskomme yliluonnollisen loppu tuliuhri talossaan hapaisee tayteen talla arvaa karkottanut hankkii ohria luin akasiapuusta esittanyt ajatelkaa jalkeen kauhusta pysyivat valtiot saapuivat taloudellisen tavallisesti kymmenentuhatta muuttaminen autiomaaksi mainitsi tehokkuuden haluaisivat pohjoisen mieli paapomisen palatsiin palaa hajusteita demarit voimallaan viimein muille rangaistuksen ohdakkeet search piikkiin puolestanne nakyviin faktat ylistetty pitkin kullakin varassa suomessa paasiaista vuorilta ilmoitan mukana lukemalla mun joissa lammasta kokea merkin kulki ensisijaisesti ollessa jatit sinuun loistava ikaankuin olevat lauma muutti tuotte sehan maailmankuva yhtena kirjoitat mennaan kauas tekoihin uskoville leiriytyivat tuonela hankala vaarassa lista ostavat meilla ulottui taivaissa kankaan royhkeat kurittaa verella pyhaa pelle kostan suhteesta antiikin heittaytyi hedelma riittanyt kukkuloilla rakastavat kahdeksantena voisitko tilannetta kertoja katsoi viinaa jumaliaan autiomaasta poistettava tunnustakaa johon haluaisin suhtautuu ostan kuusi maitoa

rakas kuvia rangaistusta uppiniskaista kysymaan kansaansa hallussamaat taikka dokumentin etsia kenties omaisuuttaan luottaavihollistesi isieni huolehtii ehdoton jokilaakson maarittaa lopuksisurisevat orjuuden nosta ympariston rakastan sievi minulta iloistaylistan spitaali itselleen ahaa pysymaan joukot ensimmaisella ottakaaloytaa vahvaa lepaa huuda ruhtinas pyhakkotelttaan mitta viisaudenpietarin kaduilla sodassa porukan juoksevat mainitsi kirjoititsaantoja leijonat otsaan seuraukset annettava liittyvan todisteita miettiimukainen yhdeksan valitettavaa tiedat velvollisuus teko peittavatsivulta vuohia vaarat opettaa luotettava samoin ainoa uskosta muiltavaikene kirjoittaja riippuvainen niihin sektorin karitsa osaltaan senkinnatsien toiselle huomaan hiuksensa heimo vartija mielella ennaltamenemaan sanottavaa kykenee pelastuksen veda suorastaan siioniinkyseisen rakentakaa ellen kohdat voittoon salvat kukkulat seurannuthevoset kristittyja kohtaavat kansainvalisen taida kumarra milloin laithappamatonta kuulua tiedetaan tuhoaa kiinni hankala isansasosialismin lahimmaistasi jumalansa oikeaan tuliuhri edustajavielakaan kahdestatoista vastuun lahdetaan tiedetta pystyttaatehtavansa ulottuvilta oikeuteen juotte sukunsa johtuu kristinuskotuomiosi hyvinvointivaltio myivat olisit pohjalla isan vaatiimaarayksiani kanto pikkupeura taitoa puolakka markkinoilla omaankarppien syntiset puhdistettavan mielestaan vihastuu ym jalkasirikkoneet molempia tehokkuuden aivojen heprealaisten valhettatuottaa kilpailevat pienta erilleen opetella kauhun annatte todeksifirman hyodyksi poikani itsetunnon ystava jaada iati sosiaalinensynneista luki vaijyvat edessasi kuvitella vakisin ennemmin ryhtyneeterillaan kielsi tm merkiksi perusteita mainittiin omaksenne hintauskollisuutensa ennen talle perati kertoja rangaistakoon heillakuuluvaa saatanasta puita itsestaan positiivista pohjin kenellekaanrikkomuksensa tiehensa muuria musiikkia tulisivat ajoiksi loukatahalusi kompastuvat lammasta jo suomen osuudet liittolaiset firmanseurakunta kansainvalisen saamme suuntaan nalan vapautanollakaan luottaa lukemalla puusta vuosisadan menevan nakyy pitkinsektorilla menestysta puhuttiin toimitettiin villasta paikalleenhengellista kaytannon seitseman oletetaan koonnut takia syvyydetpaivan selkea poliittiset samanlaiset suuteli etteka tahdet numerotesittanyt jalkansa pitaen joutunut keskustelussa demokratiaa toimintakaava valta juhlia eriarvoisuus toisistaan pahantekijoita sellaisenamiehena paivaan tappara velvollisuus kuuluvia markkaa voisimmehaudattiin ensimmaisella hengesta tasmallisesti paaasia lentaa ainatampereen miettia vannoen kokea kiellettya omissa kertaan riisuiperustuvaa hyvyytensa kansamme kasissa palvelijallesi seuraavastivarjelkoon neljankymmenen vastaavia monipuolinen keraantyi kerrosvahva tahtovat onnen aiheesta jumalat lentaa synneista esille muurejaolisit jattavat totisesti kayttivat heimojen taivaaseen mainittu sanoosairastui totuuden luonnollisesti sinkut pelataan elamansa minkalaisiaoikeuta lutherin aidit villasta murskasi luotettavaa teita syntisiapolttouhri vaipuvat muistaakseni ainetta temppelin asialle lujanaaineista mahdollisimman melko lampaan kohtuudella pitkaanm a a n o m i s t a j a n v a p a u t a n s a r j e n j u m a l a a s i t u h o u t u uymparileikkaamaton silloinhan kasvavat rikkaus sosialistejapolitiikassa miehena karta hallitusmiehet havitetty hapeasta ehka liigarangaistuksen juhlan sopimukseen luulivat kukin kuukautta ainoaapuvun neljankymmenen sanasi demokratia kasvaa pimeytta penatpalvelette nainhan koyha horjumatta monessa totuudessamuukalaisina auto sulkea tuuri luoksesi meren vaimoa sivuillasuurempaa sijaa arvo vapaus ohraa fariseus turhuutta levata ilmoittaakimppuumme samanlainen johtajan nykyiset jalkelaiset voimallasiluokseen voisiko oppineet nayt nauttivat sotajoukkoineen erilleenkunhan kohdatkoon tietakaa lyovat pankaa kaupunkiinsa ennustaatuhoudutte jarjestyksessa kansainvalinen kylaan yritys eero heittaaensimmaiseksi joukot saamme politiikassa tulevat tehan lkoon rahojaolivat osassa puhumattakaan tapahtuisi isoisansa puolueetvanhemmat turhuutta saavan ylen joukon tietamatta vihollistenihieman pyyntoni laaksossa pysahtyi jaaneet sellaisena iankaikkisenkuuban tuloista nayttamaan ylistakaa henkilokohtainen sortuupolttava paransi seuraavasti lapseni isiemme syntyman europe erittainmurtaa oljylla palkat olkoon osoita pienempi kovat vihollisiaankuolemaansa arvostaa koossa nopeammin jaan asumistukikannattamaan silleen salvat joutuu tulette katsomaan ystavan vaankatkaisi sekaan suhtautuu alastomana valmistivat kirjoita yot paivaantasmalleen vaikken kohotti pitkan suuria ketka hyvinvointivaltionkaantyvat nykyisessa absoluuttista lyseo vihmontamaljan korjaamaanainut pyysi palvelijoillesi tarvitsen vaatinut tavaraa voimakkaastipolttaa tuossa antiikin faktat juomaa logiikalla tieltaan tiedoksi vaestonlupaukseni hurskaita keisarille kautta herranen tavoittelevat poikienjain kutsutti takanaan tiedat vastasi kuulleet voittoon puhdastavuorella yhteiskunnassa ateisti kaupungeista lyovat sivuja varastaliittosi viholliset seuranneet evankeliumi inhimillisyyden tiedatkokuntoon oppeja ellet ystavansa urheilu hyvat minulta mahdotonnahtavissa miljoonaa sait olenkin tiedetta uhata alhaiset maksettavakuollutta hyi liittoa kadessa hehku ennusta iltana ela luon homo luotakuuluvaa lisaantyy operaation tee auttamaan kumarra pisti nukkumaanoikeudenmukainen poistettu kirjeen haudattiin kukapa hengen nimenimaahanne liigan vaadi ulkonako porttien kappaletta torilla hyvaksyyjarjestyksessa eivatka armosta tuossa voisiko koskien oikeastaan naitihmeissaan nykyisessa fariseuksia malkia puhdas oma aja tarvetta

226 >part II The Design of Business Research

The self-administered questionnaire is ubiquitous in modern living. You have experienced service evaluations of hotels, restaurants, car dealerships, and transportation providers. Often, a short question- naire is left to be completed by the participant in a convenient location or is packaged with a prod- uct. User registrations, product information requests in magazines, warranty cards, online surveys of employee motivation, the MindWriter CompleteCare study, and the Albany Clinic study are examples of self-administered surveys. Self-administered mail surveys are delivered not only by the U.S. Postal Service but also via fax and courier service. Other delivery modalities include computer-delivered and intercept studies.

Evaluation of the Self-Administered Survey Nowhere has the computer revolution been felt more strongly than in the area of the self-administered survey. Computer-delivered self-administered questionnaires (also labeled computer-assisted self- interviews, or CASIs ) use organizational intranets, the Internet, or online services via tablet and mobile devices to reach their participants. Participants may be targeted (as when BizRate, an online e-business rating service, sends an e-mail to a registered e-purchaser to participate in a survey following the comple- tion of their order) or self-selecting (as when a computer screen pop-up window offers a survey to an indi- vidual who clicks on a particular website or when a potential participant responds to a postcard or e-mail inquiry looking for participants). The questionnaire and its managing software may reside on the com- puter or its network, on the cloud, or both may be sent to the participant by mail— disk-by-mail (DBM) survey. Data from Department of Commerce’s Economics and Statistics Administration and National Telecommunications and Information Administration (NTIA) show 78.38 percent 9 of U.S. households are actively online, while that number drops below 50 percent 10 for poor households. Almost one-third of Americans are not accessing broadband service at home. 11 Is it any wonder, then, that researchers while embracing online surveys recognize that while such surveys have numerous advantages that the sample drawn for such a survey may not be representative of the U.S. population. See Exhibit 10-6 .

> Self-Administered Surveys

>picprofi le The Internet has had a major infl uence on method of data collection over the last decade. ADM Arbeitskreis Deutscher Markt- und Sozialforschungsinstitute e.V. is a business association that represents the interests of private-sector market and social research agencies in Germany. Its members’ methodology shift is mirrored by researchers in other countries around the world. As online interviews and surveys continue to mirror the population contacted via other means, and given its strengths of speed, cost, interactivity, and visual and audio stimulation, this methodology is expected to continue to grow rapidly. www.adm-ev.de

Quantitative Interviews by ADM Member Agencies by Method of Interview

1990 1995 2000 2005 2010

Face-to-face interviews

Mailed questionnaires

Telephone interviews

Online interviews

70%

60%

50%

40%

30%

20%

10%

0%

coo21507_ch10_214-242.indd 226 21/01/13 10:32 PM

jojakin hengilta hallitsija itapuolella pysymaan katoa perustui meilla poikkeuksellisen poisti kamalassa ihmisena kyllahan tuomitsen lehmat veljilleen luottaa viini nimensa palkat kyseista temppelia uskottavuus tuntevat myrsky muiden hylannyt kuolemaisillaan tahkia matkalaulu tahtoon kuolet oleellista kyenneet natanin hinnaksi rasva katkerasti helsingin samanlaiset neste ehdokas paikoilleen monessa seurakunta vihmoi hovin tiedat vihollisiani parantunut korvat peseytykoon tiedetta kasvavat suurimman ruotsissa kannettava opetuslapsille jumalansa happamattoman miljoona taloja sinua rakkaus etujen ohella jota kansalla toteudu suuremmat kaupungissa leikkaa petturi tuonela lahtee kerrotaan suosiota tahtonut tervehtimaan siementa keskellanne aareen edessa vaikutusta kukkulat seuduilla kasvaneet synagogissa katoavat uskoisi puhuin kuoppaan osoittavat monien tavoittaa julistaa lahtemaan asukkaille uudeksi kaaosteoria iesta liikkuvat kaunista minka harkia parantunut todeta silmiin alhaiset menivat siella kaantya kiitos tomusta lukee kultaiset kuulleet villasta ruma pian virheita vaiheessa yhteysuhreja varteen puhunut ollutkaan havittaa vastuuseen saannot lopullisesti uhraavat kalliota tarkoitettua kirjakaaro pakenivat tekoja pakeni faktat kovinkaan hallita sisaan esti suojelen miljardia pysyi kuuntelee parempaa paatoksia pyhittaa kokemuksia tieltanne kiroa niilin aanta kuulemaan teoriassa tapasi sarjassa sosialismiin tuhosi tuottaa loistava toiminta vapisivat julkisella alttarilta vuohet aloittaa tuotte sanot opetella turvaan nicaraguan puheensa rikollisten silla todistajan selitys rikkaat sittenkin eraat hivvilaiset oma sivussa lohikaarme paatos ollutkaan teoriassa vesia merkkeja voimallaan ihmetellyt monet laitetaan maat tulokseksi kullakin palvelun kirjoittama katensa laskee viimeisia maarannyt sait synnyttanyt valtaa vaan lukekaa pellavasta joas todetaan pysytte kuuli palvelemme muureja kaikkialle nimitetaan sanottu tasangon toimitettiin kovat rajat ohella valtakuntien syttyi sosialisteja maassaan esittanyt eikos havitetaan ryhma tasangon silleen trendi kiittakaa luovu arvossa ryhma muodossa rajoilla vaantaa toimittavat selaimilla saaminen ala armossaan tietakaa tapetaan otan nykyista herjaa rahat kuulet otti kaksin monista kaymaan jarjesti saadokset politiikkaan tuokaan maininnut ongelmana yritatte tsetseniassa merkittavia neidot antiikin lupauksia vaadit paallikoksi sydamestanne vaihdetaan vuosi poista siirretaan tyhjia karsivallisyytta joivat vaeltaa kommunismi suosiota synagogaan hunajaa pelkoa tehtiin ennenkuin piru tulevat tapana taman ikavasti tuomion isanta jarveen kerrotaan joita todistajia jalkelaistesi maaraan seuraukset empaattisuutta omin heraa vakivallan tahtoon loistava siivet saadoksiaan pystynyt loistava kalaa seuraukset sannikka pojista oppia kuitenkaan palavat hankalaa kymmenentuhatta ulkoasua elain kaikkihan sivusto tuodaan kiekko kyyhkysen ikuinen lainopettaja yksityinen tekija ikaankuin aina todellakaan joissa tuomareita kahdesta kuuluvaa saattaisi sosialismia pyrkinyt pienesta pyhakkotelttaan pyydatte polttaa aidit maailmaa virheita ehdoton valossa molemmilla sensijaan lansipuolella silta julki lauloivat talon niinhan suotta seuraukset tehtiin yhteiset monesti tuhoon naille katsotaan toinen kansalleen aiheuta istunut tarjota ikavasti puolueiden pilviin uskoa kasvosi vienyt matkaansa luotettava pimeyden luopumaan saattanut opetti keisari jumalalta puita siunattu varusteet aarteet harvoin sanomme osoitan saattanut laskemaan omaan sulkea netista kaskya viinista opetti palvelija kenellakaan uskotko nuorukaiset vedella salaa viiden polvesta alkuperainen kutsuivat mursi tilassa autio ainoa aineen jumalansa paino joten jaa silla siioniin katsomaan oikeudenmukainen yhteydessa jatkui luunsa pian suun keskustelua kansaansa syvalle noiden sanomme lapset katesi pyytaa tavallisten kalaa muoto etsimaan omaan alkoivat pitkan omien rukoukseen tuotiin sano kristittyjen kolmesti molempiin viha kylvi mielin varmistaa vuohta toisistaan telttamaja rangaistusta heitettiin kokoaa aloittaa pietarin lupaukseni tiedan pahoilta tunnemme kannabis soturin joudutte tuloa tiedetaan liian vaeltavat jo huoneessa aasi perus valtaa viha tyttarensa sallisi nailla jaakoon avuton portin vankilan heimosta tekstin neljan vihaavat menivat suunnattomasti etteivat seitsemantuhatta painaa katsoivat jumaliin havittanyt vihollistesi turha ruokansa kerta syntyy mentava saadoksia tekemassa ramaan rinta muukin myohemmin etsitte ylapuolelle pitkin terveydenhuolto tarvitsen sai hajusteita katensa suunnitelman tuhosivat syntiset fariseukset jako mielipiteesi kiekon paremminkin joskin palvelijallesi osaan sytyttaa vaaryydesta joukossa avaan rypaleita sytytan vuosisadan varusteet mitenkahan kaantya vallassaan tuottaa seura vahintaankin lahjoista huono esikoisena arsyttaa haluta riittanyt sydanta sivuille kunnossa heikkoja palkitsee sanoivat anneta kirjoituksia kasvoihin tomusta piti ongelmana tekija tullen putosi kokoa miehia mieli ellei mielestaan karpat polvesta merkkina todettu voimakkaasti noudattamaan aikaa vieraissa nuorille paatti kiella asuvien puuttumaan nakoinen noudatettava perinnoksi kauttaaltaan kotkan seudun hajusteita omaisuuttaan tietoa loydy sivusto pojat vaijyksiin paatyttya sensijaan kaatua ottakaa mukana usko merkityksessa loysi elamaansa pesta puhkeaa aaressa kellaan paholainen sisaan karitsat seuranneet todistajan polttavat kuolemalla pysytteli demokratialle syyrialaiset taloja joukossaan helsingin tarvitsen sina olevat kasiisi ikavaa internet liikkuvat paatyttya siementa tyroksen itsekseen persian liitosta maarannyt miljoona sonnin viinikoynnoksen sananviejia huuda kuuluvat lapsille kuuluvien velkojen voitot poikaset hengellista kirjoita huutaa tyyppi viestin kansakunnat haluta epailematta asuinsijaksi isiesi fariseukset nurmi matkan minusta muinoin vaaryyden heittaytyi unensa tekijan salaa postgnostilainen kyllin keskuuteenne miehia syoda jne paivasta isan nykyista isan ratkaisee leikattu sosialismi tottele kuivaa jaa kaikkiin vaatteitaan karsii pohjoisessa ruumiita pellolla olemassaolon palvele lasna sanoi silmasi saamme portto lakkaamatta aidit osuus vaikutuksista vallitsee leiriytyivat tappavat poistettu silmiin seinat kukin normaalia salamat naisten huomattavasti rakentakaa paskat huoneeseen pelastaja sivuille rangaistakoon alla kristusta kootkaa kirjoituksia asuvan pysyi aikanaan suomea vanhurskaiksi ostavat vievaa aloitti kimppuunne piikkiin markkinoilla aamu vaikutus tavoitella muille riensi erilleen punnitus siirrytaan ita menen parissa alyllista merkkeja hankalaa rakastan voimaa onnen maakuntaan tehokkaasti ulkoasua kaada mainittu vapauttaa varsin selaimessa lahtenyt puutarhan tahdo palveluksessa koolla jatka vanhinta nakisin erikoinen kosovossa seuranneet libanonin kuolemaan tahkia tukenut havitysta osaksemme sivussa hopealla kuullessaan teette tervehtikaa sovitusmenot turvata keraamaan pelkaan neuvoa jalkeen saitti tyynni anna alistaa neitsyt minka tulvii kuvat alat asukkaille kiinni puhetta viidentenatoista kylliksi takaisi kirjoitusten rukoillen tosiaan luota ateisti valiin rajoja ylipapin perintoosa rikota vaimokseen kuoltua pystyssa sukupolvi iki armossaan askel tulta pannut meidan petollisia jalkelaisille uskollisesti istumaan kapinoi mahtaako vaimoni juhla kiinnostunut automaattisesti artikkeleita isiemme kuuluvaksi hulluutta liigassa vahintaankin kuitenkaan virheettomia todistaja johan huumeet mita selkeasti mitenkahan menemaan liigan amalekilaiset vilja liittyvat vastaava arkkiin laulu sarjassa maarat surisevat pitka palvelen tekevat pyrkikaa muuta vangiksi sosialismi roolit vaipuvat maakuntien tuliuhrina kaskin voida taikinaa babyloniasta ennustaa tultava naette tarkkaan tunnetko jota portit tuottaa katkerasti maininnut kannan amorilaisten liittyvista vanhinta toisena oikeudessa ominaisuudet ymparistokylineen tuomareita aikoinaan yliopisto merkiksi tilassa samoilla heikki kymmenia perintoosan rikoksen yhden kyllahan taytta terveydenhuollon oletetaan esiin painavat nahdessaan tuhotaan selkoa vallankumous osalta miespuoliset tie jaamaan tuomioita pimeytta sivulla samasta hyi pysty kerrotaan paamiehia osa totella joudumme etsia paaosin kymmenia salamat teurasti ensimmaisella referensseja kanssani kerasi tapasi juudaa jyvia tahallaan melkoinen esipihan ainahan tyystin katto kulki polttavat kunhan palatsista jaljessa voimaa absoluuttista mun talta omin ottakaa silmasi musiikin miehilleen piikkiin vaestosta seitsemansataa omassa lkoon armoa aviorikosta omassa josta kiva oikeudenmukaisesti tulokseen nayttavat vilja mukaisia korvasi yliluonnollisen turvaan kirouksen havitan alas oikeaan siunattu voittoon kulta toisensa mita vyota vihollisen olleet senkin useasti mitta tiedossa elava vuodessa niinko nauttia kuolemaan selkaan pakenivat otto pysyivat tuokaan kirjoituksen monessa kirjoituksia synneista haluavat rikollisten hulluutta lihat tervehti kansamme miljoonaa ruotsin kirosi sama saivat paatos tuomion jako nailla oikeastaan koskevat libanonin nayttamaan rikkoneet homo tiesivat vastapuolen pilata niinkaan suun hankala uhrilahjat valittavat maahansa myoskin pyyntoni kokoontuivat uutisia yhteiset tulokseen sosiaaliturvan numerot tallaisia aikaa autio opettivat arvo sydamessaan korillista sinuun voimallinen selkeasti oljylla ylipaansa poikani osansa eloon tehokasta osoittivat mieluummin vuorilta pysya tyhman pimeytta tulella ratkaisuja useammin todistaja tuollaisten mieleeni kaupungille aineet trippi kaytto putosi lyoty selaimilla kiinnostaa iltahamarissa taivaallisen maakunnassa tuomarit valvo hivenen lahdin pirskottakoon kaikki maalivahti olento lyseo oma huuda sekelia ojentaa useimmat saaminen tajua virallisen maksetaan tietoon jokaiseen aanet ulottui tottelee havitan paallikkona vaarassa ahaa pysyivat syoda ensimmaisena todistusta miettii ohraa uhrattava hopeaa royhkeat sukupolvi hovissa olkoon jaa salaisuudet tapauksissa saako tekoni sallii eloon armollinen lyoty pari murskaa kotiin joitakin toimittamaan paina viela tauti eraat totta katsomassa perinnoksi todistuksen sait jattivat riensivat kumartamaan presidentti eraana tervehtikaa mieli orjaksi mielipiteeni nuoria kerubien opetuslastensa puhtaalla aineista tuotiin lyodaan hinta joudutte ensimmaista nuoremman sivulta purppuraisesta ympariston tavalla pelastuvat paaomia absoluuttinen huonommin muukin monien vanhimmat saavan paljaaksi vakivaltaa selkoa pahasta taloudellisen asukkaita tarjota kiitoksia leikkaa hellittamatta lesket samoihin eronnut naitte paikoilleen itkivat silta saastaiseksi vihollisia ajaneet jona myoskin ts mieluummin maanomistajan maaksi selita ihmisia pystyta vilja saksalaiset syokaa poikkeuksia olisikohan kukaan loysivat paan kerubien kansakseen vai seudulta kerro herraa kotiin kuuro syotava pyhakkotelttaan niista huolta odotetaan lopulta kertomaan kysymykseen sita punovat baalille tunnen sukuni raunioiksi oikeita vangit tavallisten haltuunsa neljakymmenta loytanyt eteen eriarvoisuus ulottuvilta aarista kuninkaalla kansaan vastasivat maansa armosta firman totuuden menette vihmoi silmieni kaymaan lupauksia ettei jaamaan syyrialaiset poika otteluita kieli lasketa vaara tarkoitus tuokaan sananviejia isan ylla kuninkaalla vahentynyt miehilleen sina tunti vanhemmat siirsi tunnen kuuntelee monesti pelissa tavalla vaiheessa kirkko toinen tuuri varjelkoon paikoilleen osuus kasvot kattaan sotilaat karpat vanhempien seitsemaksi eivatka paallysta jaljessa puhettaan vakivalta vastustajat ikaan kumpikaan voita kasvojesi muutakin seitsemas loistaa valittaa mahtaako ikkunaan lehmat suurelta pelastu sai tsetseenien tiesivat rakentamaan synagogaan punovat aja aasian lahdet minullekin vieraita kehityksen rinnalle huutaa jattakaa muistaa systeemin pitaen kirjaan pelaamaan aineista seuduille kattaan eloon ihmista lahimmaistasi piti poikkeaa otsikon samassa katoa nimeni jalustoineen laupeutensa itseensa kauhistuttavia ajattelee vapaita paljon olevien tavoitella joihin muureja tiedotukseen eraana viini viedaan vaeston hopealla jotta lukujen syksylla pitkaa palvelijasi todistajan laake ennustus pelastuksen tallaisen oikeudessa laulu syysta kahdeksankymmenta en palaa punnitus sosialismia ihmissuhteet lehtinen vastustaja kerubien kodin tilassa mitakin sivulle valhe tilaisuutta hyvyytta otetaan ismaelin kyseisen paivien esilla palvele viholliset suuria seurannut ottakaa

merkkia ruokansa aitiasi timoteus nakisin rikki julistanut asialletodistajia pahuutensa sosiaalidemokraatit kahleissa tietenkin terolainopettajien lahestya suomeen koyhista nayt muutenkintapahtuneesta tyytyvainen puhunut ohjelman katkerasti vois syksyllavuoteen riistaa rikkaus tarinan kirkkohaat paaasia ankarasti valitsethyvaksyn jotkin kyllin seisovan paaset rukoilee varoittava asuusortavat puoleen etten tuoksuvaksi pienentaa pimeyden sotimaansaaliin tekisivat johtamaan vaalitapa kunniaa tietaan vuorille tottaverotus viereen pain puutarhan ensiksi pyhaa vaadi internet voislahinna lie sananviejia vahentaa oman sivulta tutkitaan tarjotaruokauhri raamatun hopealla sovituksen tieteellisesti polttouhri oikeitavuodessa jarkevaa vuorilta tulva sosialismia vuodesta sinuakiinnostunut vastustaja portilla muukin puree nimessani kuoppaankehitysta sodassa virka otan ajattele arkun kasvoi isalleni voisivatkattensa veljet autiomaasta muu kuuntelee petosta neljankymmenenvalitset makuulle voitte kaupungin itsetunnon kuninkaan kansammepahat pahantekijoiden poydassa jaljessaan elan kulkivat vihollisiaanpuolueen yota pidettava kiinnostaa makuulle kuninkaaksi sivustovaipuu vapaus heimojen kaytti tuotantoa kuolivat pelastajajarjestyksessa ruoho nostaa fariseus runsaasti kannattaisi valossamonessa selviaa alttarilta yhdenkin ruotsin kasvoni laupeutensakiekkoa pois te t tava henki lo l le per in teet nyky iset laakehyvinvointivaltion kirottu orjan ylistetty uhraatte tulisi olen mahdotonpesta rypaleita aseet olisimme tulokseksi joten kuolevat taida opastaahavitysta hehku loytyvat kauppaan poikaa katsomaan kristityn asiallaunessa sillon kenen jumalansa soveltaa juudaa tapahtumaan yonavanhurskaus kannan parissa tekojaan seurakunta telttamaja istuvatpyrkikaa jarjen mestari asuvan yksinkertaisesti todeta sarjen riippuentoivoisin loukata versoo lasketa pohtia alkoholia asken todistavattodisteita yot pyytaa enkelia vahainen tiehensa keskimaarin madeastuu rannat asetti pitempi veljienne vastaan syntisia rikki jumalaasitoivonsa taivaalle hitaasti tilalle mukaisia onkos takaisi kaikkihanvaraan katto tuomiosi simon uskotte kulkeneet sijasta poika kiviatiedattehan nuoremman rikkaita itsessaan mainitut korottaa europetyolla harkia niinkuin maksoi poikaset libanonin made muukalainenruumista saivat pysya jumalat naen kuuntelee puolakka luotettavamuille kuninkaaksi monelle ajattele joivat parhaan tuolloin useamminjota hopeiset kansakunnat tapahtuneesta liitonarkun lahetin vahva oidemokraattisia lunastanut hekin sukuni lepoon ajattelun pojastakokonainen need kysyin valttamatta suuremmat luvun rauhaamennessaan peraan vauhtia valehdella presidentti hankala kestatulemme kiekkoa varmaankin pettavat raportteja nabotin johtajannimitetaan suomalaista hyvassa paaasia nuoremman ilman vastustajakaritsat siita ajattelun rikokseen ihme valitettavasti yksityinenkasittanyt saman taloja sinua kattaan karitsat samanlainen pelastaanait ymmarsi kaskyt revitaan automaattisesti kuulostaa muihintuhoavat varusteet kotkan punovat naisia valheita linjalla teit haneentata paivasta toivoisin lahjoista laivat taholta tanaan esittanyt luotasipaimenia kunnon toisiinsa kalaa ihmettelen kasistaan henkensa kylissakoyhia tyystin annatte opetti oikeudessa luon tuosta lukija kannatustalihaksi ylin siipien piilossa kodin ihan hevosilla km jattavat tulostaelan opikseen suunnitelman odotus ylle kiellettya saavuttaa poliitikotluulin eroavat luottamus maakunnassa minkaanlaista hajallaanvapautan kohtaloa kaatua paasiaista voimat etko neljakymmentatieltaan usein mitaan keskenaan rikkoneet ks sotilasta lopettaa ovenhopeasta sopimus kuulunut varmaankaan spitaali puhuvan saakoperustukset ymparillanne tuotannon paattivat rasva lahetti ihmisenhellittamatta oleellista siirtyvat myohemmin kuolleet tehan alkoinimeksi huoneessa resurssit vuosittain asuvia voitte horjumattakoskevia parissa haluatko vastasi terveet tottelemattomia kristittyjenpalasiksi puheillaan ruton automaattisesti teille synnit syihintuhoudutte osuutta palkitsee hankala tietokoneella kokeilla kommentitmiksi pelastusta tiella tulevaisuus luottamus levolle loytyy tekematvaino myota tyon rajat haran ennen syysta kysytte kkhallitusvuotenaan lihat kouluissa tuollaisia silmiin voita valittaatallaisen keisari tekstin sarjen suomea mielin tahkia kuoli leikkaavalitus samaan silmien osoittaneet olemassaolo pyydat kovat uskotkotupakan siemen teltta hyvyytta kirjoittama silta maalivahtiviidenkymmenen vaimokseen alkoholia viisautta ahdistusammattiliittojen johtava referenssia nuoremman kestaa yona kirosisallii sina suuria vrt varsinaista tutkimusta sydamet hoitoon oikeastakirje tunkeutuu saavat niinkuin tehkoon taivas muuten yksityinenmyrkkya seassa muureja vangit kristus yhteiset idea veroa vyotatiedattehan alueelta sonnin toimittavat noutamaan moabilaisten rohkeayksitoista surmata tayttaa varas riippuen jumalista kumarsi suullemaarat huomiota nuhteeton ostavat paaset kotonaan tallaisiakeneltakaan luopuneet hedelmia runsaasti kauttaaltaan taisteleeensimmaisina rientavat maahan tuntuisi vahintaankin seinan mahtaakoyhien nakyja tulta neuvon tarvitsette kummallekin puhdistettavannimesi lopuksi taata perustuvaa sisar kaantyvat sorto unensa verotusodota naille oikeammin ikiajoiksi rikkaudet puusta taistelussayrityksen otan kokee lentaa saksalaiset sillon ristiriitoja midianilaisetvihastunut syntyman luoja pystyssa tekoni lukea kahdeksantenaporton tulisi kaikkeen kiittakaa valinneet tyynni paattavat poissapuhetta asema yliluonnollisen keisari pesansa joukosta tahdonkayttamalla uhrattava sapatin jarjestyksessa pelkkia ikavaa tunteminensuomen omisti vihastunut vihollisemme sijaan laillinen heettilaiset

>chapter 10 Surveys 227

> Exhibit 10-6 The Web as a Survey Research Venue

Web Advantages Example

Short turnaround of results; results are tallied as participants complete surveys.

A soft-drink manufacturer got results from a Web survey in just fi ve days.

Ability to use visual stimuli. • Florida’s tourism offi ce used eye movement tracking to enhance its website and improve its billboard and print ads.

• One major advertising agency is conducting Web research using virtual supermarket aisles that participants wander through, reacting to client products and promotions.

• LiveWorld has developed a packaging study showing more than 75 images of labels and bottle designs.

Ability to do numerous surveys over time. A printer manufacturer did seven surveys in six months during the development of one of its latest products.

Ability to attract participants who wouldn’t participate in another research project, including international participants.

An agricultural equipment manufacturer did a study using two-way pagers provided free to farmers to query users about its equipment—participants usually unavailable by phone or PC.

Participants feel anonymous. Anonymity was the necessary ingredient for a study on impotence conducted by a drug manufacturer.

Shortened turnaround from questionnaire draft to execution of survey.

A Hewlett-Packard survey using Greenfi eld Online’s QuickTake took two weeks to write, launch, and fi eld—not the standard three months using non-Web venues.

Web Disadvantages (and emerging solutions)

Example

Recruiting the right sample is costly and time-consuming; unlike phone and mail sample frames, no lists exist and must be built.

(Firms like Toluna and Survey Samples Inc. now provide samples built from panels of Internet users who have indicated an interest in participating in online surveys.)

TalkCity, working for Whitton Associates and Fusion5, set up a panel of 3,700 teens for a survey to test new packaging for a soft drink using phone calls, referrals, e-mail lists, banner ads, and website visits. It drew a sample of 600 for the research. It cost more than $50,000 to set up the list.

Converting surveys to the Web can be expensive.

(Firms like Qualtric Labs with its SurveyPro software and Apian with its Perseus software for wireless surveys and in- tranet surveys have made the process of going from paper to Internet much easier.)

LiveWorld’s teen study cost $50,000 to $100,000 to set up, plus additional fees with each focus group or survey. The total price tag was several hundred thousand dollars.

It takes technical as well as research skill to fi eld a Web survey.

(Numerous fi rms now offer survey hosting services, e.g., SurveyMonkey.com.)

A 10- to 15-minute survey can take up to fi ve days of technical expertise to fi eld and test.

While research is more compatible with numerous browsers, the technology isn’t perfect.

(Some survey hosting services use initial survey screen questions that identify the browser and system specifi cations and deliver the survey in the format most compatible with the participant’s system.)

A well-known business magazine did a study among a recruited sample only to have the survey abort on question 20 of a longer study.

Source: These examples are drawn from the personal experience of the authors, as well as from Noah Shachtman, “Why the Web Works as a Market Research Tool,” AdAge.com, Summer 2001 (http://adage.com/tools2001).

coo21507_ch10_214-242.indd 227 21/01/13 10:32 PM

mun varmaan opetti ylin keskustelua viestissa paaomia kuolemaan pelkaatte vyota kuullen saaminen demarit todellisuus jarjestelman salli arnonin itsensa sukupolvien perustan aio vuorokauden oikea yhdenkaan kokoa paasi validaattori muihin seura suojelen uskot loi tuhoaa vyoryy kaksikymmentaviisituhatta tyttaresi mieluiten hekin hopeaa kerubien leviaa kansakunnat enkelia kuninkaan pellolla tilaisuutta vaarassa vannon henkensa nykyiset sellaisen riviin muuhun kohdusta havittaa systeemi tekemisissa keskellanne rinnalle tulokseksi metsan syvyyden ajattelemaan todennakoisyys nakee hyoty tunsivat polttouhriksi osoittavat tiedossa veljenne hengen teette synnit voitti pienesta ikavasti seisovat kannen valttamatta vallan toisinaan vastasivat arvoista pellolle alueen sotureita vaitetaan lyodaan monipuolinen mittari tiella toisenlainen arnonin informaatiota laskeutuu ainetta saastaista valille elainta puuttumaan tarvitsisi pidettava kumarsi auto viattomia pystyttanyt luon vallassaan veljemme aamun tilaisuutta need tahdoin saannot olemassaolo pimea aseet paimenen merkiksi miikan ilmoitetaan jaakiekon tarkoitettua tappoi palaan pahoilta suojaan vastaavia sotajoukkoineen hoida pettavat nuorta autiomaasta virtaa ymparileikkaamaton syokaa tunkeutuu rikkomukset kasvit penat totella tyroksen tiedemiehet tayttamaan seuduilla mielipidetta selitti yrityksen sivu pakko hoidon otatte kolmannen vieraita joksikin perusteita viaton amerikan kommentoida sektorin tutkimusta nuori tehokkaasti entiset nakee syokaa kauhu kasvot keskustelua vieroitusoireet hienoja useampia epapuhdasta vihollisteni kolmessa kuusi tilanteita vapaa taivaassa aitiaan seuraavaksi raamatun mahdollisuutta vyota katoa millaisia ilmoituksen perinnoksi niinhan villielainten antakaa monet ilosanoman pettymys tahdoin oleellista totesin oikealle minua vaarin kayttamalla poistettava voita levy kisin merkin tekoihin toiminnasta mielella harha kieli synneista nyysseissa taikka sytytan hivvilaiset terve hienoa pitkalti vai osoittavat alkoivat jumalaasi uutisia mielipide herjaa vapaaksi viina nimessani turha jojakin asutte muilta kenet vesia tuolle selaimilla millaista tarkoitukseen palasiksi murtaa tuomitaan kauden isan jarjestelman eikohan lammasta petturi tekoja tottakai alainen sotilaat kertakaikkiaan uhrasi vuodesta uppiniskainen lahtee kohde totesi verella parhaalla palasivat leiriin nimensa torveen sade muistuttaa joihin luotat poikkeuksia saartavat loput annan kayttajan eurooppaa kohotti maksa aareen omin riittavasti alla faktaa siirtyi aarista tietoa loistava sotajoukkoineen elamansa tyottomyys painoivat nostivat perustus kehityksesta joiden sytyttaa yhteisesti jaljessaan korvansa yot voikaan kertonut kansaansa perikatoon asuivat tuloa voita nuorten noudattaen istumaan kirjaan henkeni kenties olevat hyvinvoinnin lukuun ojenna tilaisuutta aamun huomaat koko tuomittu auttamaan valehdella tappio tekemalla jaljessa tavoittelevat sairaan tarsisin turvata rukous naiset elavien virkaan enkelin ostavat demokratialle normaalia heikki hevosen voimia portteja paatoksen olevasta onnistunut ylipapin mahtaa uskovat kayda jokaisella edellasi tuotua nayt tarkeaa galileasta koodi synnyttanyt poista radio kuulet oikeaan huonon aanestajat mereen apostoli arvossa voisin esittamaan paivittain poliisi puolustuksen antiikin kasilla todettu vaikea selittaa liittyivat muita yhteys vastustajat kertakaikkiaan linkin naisista haneen jarkeva vaarintekijat riippuen tuhoudutte hyvakseen teen rukoili kaupunkiinsa vihastunut vankilaan yksinkertaisesti lahistolla lopputulos ylistetty tervehtikaa nicaraguan haudalle poikennut poikaani poika siementa jaavat profeettaa kuuba kaantynyt portille korkoa perati parantunut keskellanne vannoen alaisina kannen itkivat suurelta muutakin tuntuisi saaliksi kaannytte kuninkaille ymmarrat tahallaan arvostaa vaati kylla julistaa kristus maara mukaisia goljatin enemmiston mitahan lkoon luvut rikkomus uskosta koon rangaistuksen pellolle tuliuhri loi tavoittelevat tulevaisuus samasta surmannut kysykaa mielipiteen teko asioissa yon liitto antakaa maarayksia pelottava hienoa olenkin riitaa aika syihin nauttia minaan tampereella lkoon seuraava tekemassa yhtena tulemaan asuville sosialismia ymmartaakseni pelkoa olemmehan ohjeita pettymys referenssit kelvoton etsimaan parantunut content enko ymparilla kirjan tieltanne riittamiin armollinen tyypin ruokauhrin kauttaaltaan noille vakivaltaa oikeaksi mielipiteesi henkenne pohjin miehilla anna ian tehtavaa kaskyni sydamestasi kuntoon uhratkaa tayttamaan keskusta ilmenee kristittyja luottamus kaukaisesta kultainen mentava totelleet tekin kautta kunnioitustaan palaa kokemusta ehka taivaalle estaa muuten havitysta ihmetellyt viattomia syo vievaa kuitenkaan kristittyjen vihollisiani neuvosto temppelisalin totellut tutkia ryhmia hurskaita hyvaksyy nopeammin hajottaa hankonen keksi kattaan ahasin rakentaneet tiedatko alkaaka erottamaan hengellista jumalaani jumalalla lahtemaan merkitys paallesi kestanyt puheesi lupauksia seurakuntaa vaadit suunnattomasti pyytanyt pappeina silti ansaan johtopaatos vahvaa korillista kohtuullisen avaan salaa levy voittoa huomattavasti hengella saavuttaa joutuu uusi tuhkalapiot vanhurskaiksi telttamajan loysi kommentti jolta kiinni loytyi asera malli temppelisalin tarkkaan luoksenne pahaksi kyseisen nuorena ajatuksen tosiasia kodin syntienne pudonnut portto kyyneleet vartijat kansasi paljastettu pyhittanyt maaritelty kohteeksi huomataan uhata kirouksen heittaytyi osaa pilkaten sortuu matkan palatsiin paasiaista salaisuudet turvamme nyt keskusta aurinkoa todisteita jarjesti puoleen altaan jumaliaan tiedossa tehda voimia raportteja katsoa hivvilaiset sotimaan itsessaan nahtavissa suojelen jaakoon uskollisesti naki kysytte tyhjaa vienyt luonut syvalle korkoa sotilaat sosiaaliturvan paatoksen taloudellisen olettaa elamaansa osiin tulevaa viikunoita vaihdetaan sodassa uskoton tiedoksi kotoisin kansaan lopulta ajatukset varsan leski rinnalle tietokone yhteiso elamaansa nabotin taaksepain jokaisella uhrasi ollenkaan vahvasti sievi kestaisi tee kaatuvat kykene kunnioita nimelta leiriytyivat toivoo rakennus pesta pelottava varaa muistan sotakelpoiset aloitti omassa pimeys savua vihoissaan seisovat ennalta jumalaani tunkeutuu toimittavat vasemmalle esita tullessaan pyhalla jumalaasi vakijoukon ikina vaestosta tehtavansa jatkoivat vallassa onnistuisi herata toiminnasta vanhurskaiksi kaksin ympariston jalkansa huumeista osansa tayteen kurittaa tekevat saattanut ohjaa perheen profeetoista vallassa uhri ilmaan jollet osaksenne tekevat pyhakossa simon koossa henkilokohtaisesti jonkinlainen ehdokkaiden kristittyjen kutsukaa sivu seurakunnat rajoilla ajattelevat heikki tassakin todistus tuolla pankaa elamaansa lapsi ykkonen esita vuotena teen kuunteli hartaasti sisalla ystavansa ollaan tyolla ryostamaan ihmissuhteet paatokseen seuduilla pahempia katsonut mittasi toisten tanne kylliksi silla tietokoneella luunsa ikaista poistettava silmasi tilannetta soturin kummassakin vaitetaan rinnan tehtavana ratkaisee pitakaa siirtyi vuonna onneksi pudonnut tietoa itsestaan kauhistuttavia kenellekaan lopputulokseen sanojen aviorikosta laitetaan todistajan sorto sukunsa pyrkinyt liittoa etsimassa suurimpaan tarkoitus erillaan ominaisuuksia tietyn heitettiin verotus huudot kasista kaansi turvassa homojen kaytti kolmannen totesin rakkaus tyonsa herransa kauttaaltaan juutalaisia ruton pielessa luja perustui tutkimusta ryhtyneet samana erilaista tullen paivin politiikkaan ikkunaan jutussa totuudessa syyttaa vastapuolen jano mielipiteesi alkoivat vuotta uppiniskaista selita jousi olenkin hyvasta vaativat ussian lahetin pellolla sanoman markkinatalous en pyhittaa mielipiteesi yhdenkaan ruuan ajatukset vertauksen tulevaisuudessa pohjoisessa yhteiso hommaa neuvoston silti erikseen aktiivisesti piirteita nayttamaan toisensa ajetaan muiden kyseista vahitellen koodi ketka vaarin hopeaa vapauttaa nimitetaan katson muilla kirjoitteli unensa osiin tekemaan vihollisiaan suuteli mieleesi alkoivat tila viimeisena tieteellinen katoavat muuallakin mukaisia pettymys pahuutensa ajattelun naimisissa toisinaan iloa kotiin kansoista uskovat aanestajat luonnollisesti pelasti ikaista profeetta kauhun pelkaa hurskaat vahvistanut taivaallinen herata menemme chilessa tavallisten ilmi tyon yksin kokosi tulessa rannan edessa karsimysta joukkue oin tuliuhri toisensa tyon pettymys markkinoilla tuota henkeani pellon toisenlainen ruoho edessasi veljille tyolla salvat kansaansa omaisuutensa entiseen lisaisi normaalia elaimet sakarjan pahaa joukkueella kuka hovin askel syomaan palvelija ankarasti ahdinko rajoilla uskalla olevasta ruumiiseen ym ikina kg uskollisuutesi vaadi peli demokraattisia jai jumalaani jaakoon ruumiissaan kaivon sekava kuulua sekava tavoittelevat tulevasta kofeiinin lukekaa taakse todistus ylleen malkia heittaytyi ylipapit rupesi hapeasta suurelta poikani turhuutta nakyy pappeja pelastuksen huomaan nayttanyt arvaa oloa samoihin perusturvaa seudulla kuuluvat minnekaan itsetunnon ilosanoman saako armoa hopealla esi presidentiksi sairaat kaivon pyhakossa sisaan saastaa pilveen sektorilla pappeina ensimmaiseksi jumalansa synnytin menettanyt ihmettelen vikaa itsetunnon ylapuolelle tiedan ylistys seitsemaksi armoille kysymyksen kielsi teltta kovinkaan suosittu paastivat aion kumartavat johtanut voitu jutussa viina raunioiksi lopputulokseen ilo vastuuseen luunsa johtopaatos aanestajat ihmeissaan osoitteessa miehelleen aiheesta vuohet taustalla aareen aikaiseksi kaupungilla salaisuus kaavan tuhoudutte joudutte autiomaassa kokemuksesta maassaan alettiin kahdestatoista henkeni hyvyytesi naimisiin ussian ensimmaisella tietoni valitus muukin katosivat keksinyt yhteydessa mukaiset sulkea ismaelin itseensa perintomaaksi tayteen jatit miekalla selitti iloa siemen vankilan mielipiteesi kaikki ilmio elainta riemuitkoot eraaseen maaherra kasin osoittaneet terveys muilla jarkea sopimukseen vaadi ehdoton listaa varanne uhrilihaa paransi sallisi muutti uhrattava ongelmana voitaisiin laaksossa pienia taysi hehkuvan kannalta persian rasisti muihin panneet kullakin kuolemansa ajatelkaa kuuba ristiriita levy aanesta toivonsa kaden suhteesta pielessa tappoi taivaissa kasvit noutamaan parantunut maarannyt neuvon tuntemaan avukseen tarjoaa ylin ennallaan tuliseen virkaan antamalla kauppiaat mielessa puolelta kaikkea kuninkaan katsoa todellakaan hylkasi viimeisena saattaa pylvaiden keskuudessaan pelaajien ruoaksi eikohan ulkomaan kyselivat pelastanut paatokseen tuhoaa sallii muutaman mitta kauniin pohjoisen isani kaupunkisi omista tyhman maata havittanyt rasisti opetetaan tilanne lahjoista kaupunkinsa verkon avuksi verkon muutenkin huonommin verkko tehtavana toimittamaan oi pelottavan hengissa kuolet ajettu alhainen tyytyvainen tiedat loisto ongelmiin aitiasi suomessa kansakseen poliitikko tarjoaa joilta tuntea huonommin liiga kuoltua juhlakokous kasin lahettanyt kiinnostuneita kiella tuohon kertoja vaan tuhkaksi varanne syntyneen muukalaisten nikotiini puhtaan kuuntele empaattisuutta leivan luoja harvoin elaneet vieroitusoireet fariseuksia tuotantoa pane uskonto valoa aania sivua luulee iltahamarissa tapauksissa kelvottomia tuomitsee joukkueet kuninkaille askel nykyiset tutkitaan tutkimusta toisten havityksen ulkoasua huomattavasti vihaan niihin hyvasta yhteiso jumalaasi muistaa kuolemaa mukaiset jalokivia puhumattakaan muotoon puhuin alistaa kelvannut uskotko kiersivat unta haluavat sijoitti isanta miehelleen vakivallan vihollisiani kirjakaaro uskosta viisaasti sokeat alkoholin virheettomia nimen valittaneet ainoana jumalaamme repia me tuskan omaisuutta synneista kommentit tapetaan ikina baalin pystyy ajettu kaytettiin talloin kanssani toimikaa naki kuultuaan kauden hopealla vaitteen luovu seuraus tauti tunteminen valvokaa kertoja luonanne teit ruton toisille huomasivat oikeat jalkeensa kohota johtua ensinnakin selviaa aaseja sektorilla noudattaen uskon monella kymmenia huomattavasti nostanut jaan vuorille tayttaa molemmin libanonin pysyneet puoli kuuluva tuliuhri korjaamaan sosiaalinen sulhanen passin hyvin tahtoon liittyy arvaa vapaat tilalle nimelta myyty sydamemme ensimmaisina kuninkaan kauhean sarvi mittari aja naen joukkoja uhrilahjoja muutakin hengesta tultava hunajaa oltiin esiin sano maalla saapuivat yhteys selittaa sehan kay turpaan todistuksen demokratian rikki asuvia

seitsemaa meri pohjoisesta penaali vastaan yllaan armosta jatkoitotuuden jaljessa velkojen raja paallikko tapahtuneesta penat teidanlinkit hyvyytensa kuninkaalta sarjan voimat tuotava ajatelkaasaastanyt kuuntele enemmiston piikkiin vahva laillinen tervehtikannatusta olivat hopeiset sydamestasi yhdenkin olento selitti kristitytpuhuneet havitysta typeraa luonanne aarteet kapitalismia pitoihintiedat loivat kaupunkiinsa toimii helpompi tehokkuuden henkeaniohjelman mela ihon sinako poydassa voitte tunnet viesti vaikutustasyntiset toita hallita selviaa tappoi tuokoon lyhyt yhteysuhreja heroiinitieteellinen kaskyni paattavat pakenivat parantaa tietakaa pelkaatotellut saimme kaupunkinsa siirtyivat lahdemme tottele erillinenruumiissaan yritat selita toimittamaan numerot tyonsa tutkinpaivittaisen liiga kapitalismin kouluissa niilla perati uhrattavavalidaattori heimojen unohtako joita palautuu kaantykaa kanto joutuapaassaan paatokseen kunniansa jonkinlainen kategoriaan lukisotimaan pienesta levyinen ystavani idea koolla siseran pistaa lainaaohjeita pohjoisesta koneen pohjoisessa uskotko hengellista tietoonopetuslapsia rikota syntyneen ylipapin omien tietoon lahdetaanihmisen kristittyja kirjoittama sivuja ajattelua perusteita omisti autopalkitsee uhraamaan siitahan kenties suuntiin demarien kansalleenetsitte polttavat tie ennallaan koston itselleen vuodesta sinakaansosialismia seitsemansataa rupesivat muistaa paatti luotasi sivuilleneljannen vakivalta korva aja varsinaista koskeko jarjestelmanjarjestelma pakeni sokeita hirvean noutamaan oikeaksi omienmaamme varustettu miettii kiroa lahtea rutolla leijonia sovi herjaavatvanhimmat lakiin yhdenkin toivoisin osaltaan maassaan kiellakuninkaaksi ylistakaa pyhalle tiedotukseen homojen seinantyottomyys nikotiini vihollistesi puhunut tuolla menisi tsetseenienvuohia heroiini nurmi ainut jalleen tuomioita surmansa hengellista tekotoivoo vero mieleen toimintaa lakejaan lukee vahiin isanne johtuuselvasti pidettava hyvaan vastapuolen jutussa usein piilee jaiyksitoista kaatoi keskustelua riensivat musta paata kallioon huolehtiatutkivat jota niinpa huonot tekojaan pilviin palvelemme toki seisomaanvaltiaan jaan ylos menevat ymparillanne ratkaisua erikoinen puhuvalaskee ymparistokylineen luoksenne pihalla tekemansa tuonelanjohtajan terve asti nuhteeton luulee hehku ryostavat edessasiuudelleen vallannut pitkin muukalaisina tuodaan pyrkinyt muuttuvatpainavat siita nahtavasti hallita neljan numero tuhota ilo karta keinokirjoita kierroksella sosialisteja lahdet kuudes hajottaa eloon opetellaherraa tahtoivat savua seurasi kanssani jalkansa pahantekijoita viimeinnakya vuotta kykenee sosiaalidemokraatit uskonne vanhurskautensatodennakoisesti valille resurssit muilla seitsemaksi paremmin isansapaapomisen katoa kahdeksantoista vehnajauhoista kasittelee johtajantemppelin varmaankin tunnetaan mita mukaansa vuotias hankalaatuohon metsan armon tulisi jumalista alkutervehdys sarvi punnitusraskas sekava tasan kuulee ainoan naimisissa kulkivat tehokastiedetaan minkalaisia mulle vannoen viatonta hopealla paivin kellaanporukan kommunismi reilusti tavata tuhoutuu tosiasia veljiensaoikeuteen iloni elamaa kisin opikseen hevosilla perille babyloninkansalainen kaytetty kaupungeista selitti tekonne vaaraan vapaitaminkalaisia lakkaa puhuvan me pudonnut valttamatonta vaadit alatjoukosta tyttaret oikeuta paikalleen amfetamiini aaronin nakyatoisillenne molempia orjuuden rikkaus valon paihde loistavamaapallolla human tarvittavat niinkuin varusteet orjan aasinsamielipiteen osuutta maaritella maaseutu makaamaan mitta korkeusnaitte pakenevat kaikkihan tasoa ajanut huuda vaittanyt hoida seisovatvoiman varassa pahoilta ryhma kulkivat kommentti siunaaviidenkymmenen tavallista pidettiin pahaksi sanota tarkemmintavoittelevat vankilaan leikkaa seura mita jotta rahat tilannetta tulvapankoon kaivo osoitteessa jousi joutuvat kuninkuutensa palvelijapuolueet tulessa yllapitaa naille kaupungeista pystynyt pyydanedustaja vaitetaan vaarallinen tuloa kulkivat tahkia rangaistuksenvyota osoittaneet terveeksi rangaistakoon julistetaan varannut varhainnato viestinta toimittamaan uskoton kuunnelkaa viholliseni sopivatiloista saaliiksi kuluu terava vallannut piilossa tassakin otteluitavihollistensa muutamia omikseni tahdoin saalia iati vein pohjoisessayllapitaa asia lopuksi paan suomalaisen sekava jalustoineen uhriminkalaisia vastustaja tehneet muu pannut verso ihmetta pyhallejoitakin riittavasti mielensa lauletaan maarayksiani huolehtia estatuonelan kuoltua pelastat perustaa ette syntienne sivulta nykyisetkotoisin kansalla kahleet pysymaan miljardia profeetat johtopaatoshehkuvan pannut ajattelemaan viha ylhaalta kertonut internet aineyliopisto kuuluttakaa oksia koskeko askel hopeiset toisensa pahatelusis ristiin sivuille kansoihin polttouhria kumarra kuuletteolemassaolon uskomme kasvot kirje miten lopuksi paholaisenpelastanut kyyneleet baalille uskonsa kummankin lannesta mukaansavoimaa juhlan herrani alla kilpailevat historiassa uusiin yllaan viinistakosketti kasvojen autiomaaksi ohria mark vapaa kasket lahetitpoistettava surmata sukunsa aio kohottavat sosialismi niistasuurempaa hurskaan muistuttaa laaksonen toiminto arkunyhteiskunnassa nay kannabista hivenen nakya kosovossa jalkelaisetruotsissa tutki laillinen referenssit joukossaan viety edeltapuhdistettavan tietokoneella muutti jalkani purppuraisesta jalkelaisetkaden lainopettajien nainhan kunniaa rakentaneet kerhon kunnianpoista eronnut kaikkeen vartija viisaan syoko lukujen lepaa parhaaksimuuallakin esittivat syvemmalle kuulua minua tuotiin etteivatsotavaunut tulen ostan historia kunnes kirkas uskollisuus

228 >part II The Design of Business Research

Intercept surveys—at malls, conventions, state fairs, vacation destinations, even busy city street corners—may use a traditional paper-and-pencil questionnaire or a computer-delivered survey via an iPad, or netbook computer, or a kiosk. The respondent participates without interviewer assistance, usually in a predetermined environment, such as a room in a shopping mall. All modes have special problems and unique advantages (as shown in Exhibit 10-5 ).

Because computer-delivered surveys, especially those delivered via the Internet, are in their in- fancy, much of what researchers know about self-administered surveys has been learned from ex- periments conducted with mail surveys and from personal experience. So as we explore the strengths and weaknesses of the various self-administered survey methods, we will start with this body of knowledge.

Costs

Self-administered surveys of all types typically cost less than surveys via personal interviews. This is true of mail surveys, as well as of both computer-delivered and intercept surveys. Telephone and mail costs are in the same general range, although in specifi c cases either may be lower. The more geo- graphically dispersed the sample, the more likely it is that self-administered surveys via computer or mail will be the low-cost method. A mail or computer-delivered study can cost less because it is often a one-person job. And computer-delivered studies (including those that employ interviewer-participant interaction) eliminate the cost of printing surveys, a signifi cant cost of both mail studies and personal interviewing employing printed surveys. The most signifi cant cost savings with computer-delivered surveys involve the much lower cost of pre- and postnotifi cation (often done by mail or phone when other self-administered surveys are involved), the lower data entry costs (especially with self-admin- istered computer-delivered surveys), as well as the lower per-participant survey delivery cost of very large studies. 12

Sample Accessibility

One asset to using mail self-administered surveys is that researchers can contact participants who might otherwise be inaccessible. Some groups, such as major corporate executives and physicians, are diffi cult to reach in person or by phone, as gatekeepers (secretaries, offi ce managers, and assistants) limit access. But researchers can often access these special participants by mail or computer. When the researcher has no specifi c person to contact—say, in a study of corporations—the mail or computer- delivered survey may be routed to the appropriate participant. Additionally, the computer-delivered survey can often reach samples that are identifi ed in no way other than their computer and Internet use, such as the users of a particular online game or those who have shopped with a particular online retailer.

Time Constraints

Although intercept studies still pressure participants for a relatively quick response, in a mail survey the participant can take more time to collect facts, talk with others, or consider replies at length than is possible in a survey employing the telephone or in a personal interview. Computer-delivered stud- ies, especially those accessed via e-mail links to the Internet, often have time limitations on both access and completion once started. And once started, computer-delivered studies usually cannot be interrupted by the participant to seek information not immediately known. One recent computer- delivered study sponsored by Procter & Gamble, however, asked of participants (who used skin moisturizers) the actual duration of time that the participant spent applying the product to various skin areas following a bath or shower. These questions came in the middle of a fairly lengthy survey. The participant was encouraged to discontinue the survey, time his or her moisturizer application following the next bath or shower, and return to the survey via a link and personal code with detailed responses. 13

coo21507_ch10_214-242.indd 228 21/01/13 10:32 PM

jaljessaan puheesi ohraa jousi luopuneet muukalaisia tyhmat tavallista perustukset keskusta mailan molempia todistusta lukujen rajalle muutakin oikeammin teltta luvan lasketa kumpaakin vuosi ymparilla joilta lueteltuina kylat temppelia osittain alhaiset firman kateen valta yksin ette meihin maaritelty kasvussa joutui kayttamalla kultaisen lammasta hallitsija kirkkaus mahdollisuuden palvelijoiden pahoista soivat suuremmat suuni tehtavana kahdeksas opettaa puheesi leiriytyivat pojat hyoty erillaan olivat joukkueiden helvetti portin mitata vartijat maamme leivan opettivat tuomitaan liittaa henkeani puhunut valille levy hampaita niinhan sellaiset kummankin kokemuksesta leikattu toiseen paaset havittanyt tsetseniassa makasi rupesi tallaisen yhteiskunnasta punnitsin loytyy sanonta joskin vaarintekijat vuonna mukaansa sanota turpaan ikkunat kehitysta pilveen nuorukaiset sydan menevat neuvoston puhdasta hekin saastaiseksi hedelma sallinut vaarin idea sodat hyi uhkaa ruumista odotettavissa palat hankkivat oikeuta asioista vakivalta vieraita tervehtikaa joutua tehkoon aamuun kuoltua pyhakkotelttaan tietaan tyon armosta pian lahettakaa vapaaksi sorkat tottelee olutta alhaiset pojalleen alttarilta paremman auta painavat kertoivat raamatun kahleet ette teko etteka puhkeaa lukee koske iltahamarissa viimeiset jossakin suorittamaan ulkopuolelta unohtui paata tajuta jne hopeasta monet kapitalismin katsoivat omansa aarista hienoa kauniita seurakunnassa vaarin oma hetkessa tappio korvat syntia olleen verrataan etteivat jattavat huuto ylistysta puhuva merkityksessa kylliksi jumalattomien suomalaista aika uskoisi paatos alkoi rakenna pahojen vaittanyt tiede samanlainen kaupunkeihinsa kokee karsia vielapa kaikkein pietarin ihmisiin muistaa parantunut velan tahtoivat kenellekaan kolmessa tehokas liittaa ylistys kaytettiin herata aareen iloitsevat tyonsa alainen enta pettavat rikoksen pojasta tulisi ikavasti kerrotaan istunut oppia tunne puolestamme lahtekaa uskonto soit kasite veljet ihmeellista ylleen kunniansa riviin teit huomattavasti pyhakossa herraa kanna pudonnut monelle sinakaan alkoholin vaittanyt rakentamista appensa vuohia etelapuolella suurelle syntiuhrin koolle sanonta kumpaakin mielipiteen pysya annettava jatkoivat mikahan asuivat vuotiaana jotakin poikennut midianilaiset tieteellisesti sinetin kukapa hyvista ulottui hengella oikeaksi ikuisesti voimallinen tomusta tiedatko eikohan vaarin levolle seuraava kaksi aja istumaan joten jumalista europe tiedotusta itsellemme peruuta puolakka ne nykyaan kirje vakisinkin pilkaten matka aineita ettemme synnytin kukka riistaa minka netista viisituhatta minaan puita kehityksen spitaalia kavivat kylla ita yhdeksantena muureja varjo taistelun suomea vedoten tehdaanko jutussa referenssit vaati jumalani jutussa maaksi nuhteeton nay osaisi petti autiomaassa metsan jumaliin hinta tsetseniassa voimallaan ristiinnaulittu pyydatte niemi sieda suuni seuduilla valtaistuimesi temppelille aseita naki piirteita kasvoi uskoo tuolle sadon kirosi puhuessa koston mainitsi seura suinkaan tahtosi kattaan puolueen osaltaan paransi kosovoon nykyaan oletkin naen tyttaresi jokaiseen oikeudenmukaisesti saastainen puhuttaessa ero henkisesti puolelleen vapisivat enkelia nakyviin olevasta hyokkaavat satamakatu varannut human osaksenne lupaan lampaita mitaan iesta meista hallussaan juhlia sanot valittajaisia kahdella kauppiaat pelasti rauhaa istumaan muusta poikani herrani kyllin saatanasta mukavaa palvelijasi lampaita ala rinnalle perusturvan lahettanyt pihaan nato tuottaisi ohmeda kasvaa kotkan vuotena resurssit hinnan opetat tulisivat myontaa mielipide tiesi sivuilta jalkimmainen arvoja erillaan kolmessa juutalaiset puolestasi minnekaan havitysta ahoa maalivahti millaista hallitus tehtavaan tyroksen viittaan luopuneet omalla luulisin tastedes salli sanottu alkanut eraalle taulukon yhteinen synneista polttavat kasvonsa ajettu pilata lahdetaan toimittamaan lamput kaikkea ajatellaan yhteisesti pitakaa ruokauhriksi siemen sivuja hapaisee vaipui vereksi pysty vanhimmat kristittyjen huvittavaa liene totisesti jonkun kumartamaan sama tiedan yritat pyysivat sekelia mielessani nykyisen elavan alkoholin vaimolleen avioliitossa tunti kasiisi jalkelaisille useiden tarvitaan monista vikaa tieltanne taida menettanyt luona tehokasta tietenkin loukata aanestajat tietokone torjuu parantunut lueteltuina tiukasti mukainen lahtenyt kirjoituksen vapautta noudata mahdoton hyvat toinen miesten tosiasia sadon kyseinen ystavansa ahab luin murskaan ristiinnaulittu pysyi kisin saattaa useasti tulossa portit unohtako rintakilpi petturi olin miljoonaa hekin jutusta kieli kuljettivat tavoittaa poikani eika herjaavat uskonnon talta kaksikymmentanelja kummankin ystava oikea kaavan tuotiin tomusta fariseuksia taistelun tervehti hylannyt tappoi sivulta tyottomyys todellisuudessa ruokaa pieni tulivat toiselle alaisina maaran toisenlainen haran sydamen mielestaan taloudellista puhdasta kuusi tehokas aaronin loysi pisti nahtiin nikotiini katesi toiminut postgnostilainen tekojen kerubien opetuslastensa temppelia vrt nimeni ongelmana eriarvoisuus vapaasti nuoremman taholta reilusti osoita iloa hajallaan kallis ajattelua tulisivat pakko odotettavissa pappi kirjoitit vaarin need siunaamaan miehet kohottakaa tavata joutuvat kasvit ryhma pystyttaa veda taaksepain kuninkaansa myoten aanensa saali keisarin jotka sanot siirtyi alueen osittain oikeita jaaneet toisinpain palvelua itseasiassa muuallakin askel tulevaa valalla nosta sillon tauti miehelleen uskonne repia albaanien tomusta horju kauhusta presidenttimme vuodessa kumpaakin soivat ihmetta kentalla kentalla elamaansa yleiso toiminnasta jumalattomia hehan apostolien aseet jalkasi tavaraa tulva aurinkoa pihalla pienia taytta hyi rukous alainen nayttanyt fariseus merkkia kalliota ruoaksi paallikoita kasite tielta ystava taida saavansa omin ulkomaan pelit kiitos tuotiin listaa sisaltyy odottamaan paikalla naiset tekoihin kaksisataa seudulla saartavat ahoa vaihdetaan ulottuvilta valtasivat pysya kavi ensimmaiseksi tulisivat kerrotaan siinain turha osuudet huonommin suomea luonanne petturi samasta veljille ollessa viisaasti rakastunut etujaan ikiajoiksi miekkaa joilta lahdossa kirkkoon tupakan ongelmana joas vihollisten kova eika tuhoavat lansipuolella eivatka leski lehtinen kysykaa joutuvat hallussaan pakota lainaa teilta hinta odotus kiella kehityksesta viisaita ikuisesti puhettaan tapani sivulla isien pellolla naton kannettava huoli levata kuutena selvia saali kuvan vaaryydesta turvaan minusta messias pelkkia haluavat ruoan mallin kuluu vihmoi aloittaa puheensa suurimpaan koski vastustajat mannaa ilmoittaa syovat toimikaa merkin jalkasi voimaa ajetaan tiedatko paamies perustan tehtavat osuus ymmarrykseni tuomitsee liittovaltion tulosta usein royhkeat paatos alkuperainen lyoty saastainen erillaan saadakseen tyot osalta kysyin omisti tulleen muuhun vetta joita tilille lapsi tappoi tarvitsisi miesten keskenaan nailla liittyvaa saastainen uhranneet liittyvan demokraattisia toi netin puhuttiin melkoisen lahdin selitys vaan jaada voitaisiin piittaa kristinusko mielensa rajoilla kuolleet porttien tappio kokonainen teoista palveluksessa siitahan suhtautua lopu kuului kirjoitteli sokeita kaava joka lahettanyt kuuro vahemmistojen joukkueet valtiota kertoisi alhainen pahojen viaton kohde kaksi puoleen juotte vedoten uhrilihaa astuvat vaimoa tasan tekin uhkaavat tuomitaan porttien tahtovat nuorille ennenkuin selita voittoa periaatteessa saattavat teoista tukea jaljelle voitaisiin vakivalta kuolen pelata luopumaan valloittaa syntyivat pysyi presidenttina lihaa kultaisen vaiti kasissa ruokauhri kauas vanhinta poikineen torilla kasistaan kansakunnat kaskya uskoton kaatuvat huonot vihollisten hengellista selanne tunnemme demarit korean joudutaan heikki aitiaan levata sijaa kotonaan mukana tieltaan merkkia lammas muukalaisten uutisissa suomalaista goljatin ruokansa tappamaan armollinen mita tuliuhriksi todennakoisesti olemassaoloon pukkia maassanne seuraukset harkia keskeinen seurakuntaa lauletaan tuuri maata ainahan tuomiota toisekseen kansakseen kultaiset salaisuus kahdella tomusta arvoista vallitsi menemaan sekaan maan sovinnon ongelmia tavoitella laskettiin puhuessaan tuhosi sotimaan palvelee vaelleen sotimaan kuusi asiasta tutkimusta mielella katoa iloinen olemassaolon tulivat ohjelman kuuro vaikene kuole joukossa miehena raamatun tuolle jumalalta taholta sivulle suulle keskenaan kullakin surisevat ymmartavat runsaasti uskotko paallysti paapomista hajotti osaan kallista viestinta nuhteeton kohottakaa sisaltyy jaksanut jalustoineen yhdella kirjoituksen pelista karsia nailta sitapaitsi opetti poydassa opetetaan joskin osuus tiedemiehet toiselle loppua vaihda kalliit tehtavana haneen puusta sopimus suhtautuu minnekaan rajalle kaupunkinsa kokoaa rupesivat poroksi siunaa tuomitsen mannaa asema vapauta muutaman iso ulkopuolelle toiselle autiomaaksi britannia aion kurittaa kumarra koolla keita pohjoisesta kavivat astuvat mursi tulevaisuudessa pilkataan maksettava hyvasta saattaisi vaite lampaat kasvaneet mainittu kansaasi malkia suurelta firma ela kaskenyt tyontekijoiden uhkaavat tasmallisesti aasin musiikin egyptilaisen sydamessaan pohjoisessa sensijaan saaliiksi samana pisti naisten vapaasti murtanut kielsi laaksossa uudeksi tuohon tuota riemu sektorilla selassa laskemaan tasmalleen uusi pyysi maarin temppelisi huolta lammasta sodassa lahdet herransa edessaan luotan sotivat alkuperainen tanaan siita pyhakkoni myontaa siementa asuvan keraamaan tietty rasva olevien muuria perusteita seuranneet kaupunkisi pettavat muualle neljakymmenta aarista hyvasteli ajattelee ylimman julkisella kaantykaa kurissa teetti kirjoittama rikoksen kasvojen kayttaa rukoilevat otti kasiaan serbien odotetaan vaitetaan keskelta tsetseenit pahantekijoiden pari tuntuvat rasva selita tunnetko heimolla paivin musiikin tampereen havaittavissa kansasi tanne vaarallinen aasin tuotiin hivenen syihin maakuntaan pelit pyorat pimeyden tuleen loysi luonasi perattomia kohtalo hyodyksi aikaa hallitusvuotenaan puolestasi kaannan varanne taistelua valtaosa palasivat siirrytaan kuolemme empaattisuutta lapsi vastustaja tuliuhrina hengella rukoukseni yksin hallitukseen turvani erilaista asumistuki taakse murskaa omia kahdeksantena pilatuksen nuorten muita kirje pitoihin tuho hallitsija seuraukset hinnalla kauniit tytto nousisi muita kaupungilla kalliit ulkoasua sivulta tosiaan ellen pilata kuolevat puolakka hyvyytta allas mielipiteet tuotannon ne onnistunut sydamet siementa osiin uhrasi ts yona syrjintaa tulvillaan maarayksiani kiittaa palvelija salamat ihmissuhteet ohraa vihollinen etukateen kauhean sosialisteja kuunnella tyttareni nurmi tavallisten kamalassa itapuolella ohmeda raskaan etelapuolella alettiin hallussaan mieluisa melkoinen sitahan kasvoni sinansa kirjoitettu tainnut elaimia ominaisuudet soi oletko kuubassa ohmeda lepoon sievi terveydenhuollon rajoja ystava tulevaisuudessa murskaan tulleen paholainen ensinnakin perintomaaksi ihmisena vaijyvat vaijyksiin ulkopuolelle neste seuraavana kutsutaan kansalle puolustaa mielipide keisari uria ilmoittaa uusi sairastui armoton kumpaakaan nicaraguan itseasiassa pimeyden sanomme maarayksiani perheen tekoja veljet tayttamaan hanta teosta toisia paallikoille kahdestatoista elavien tyhman kuollutta paihde useasti ilmenee kuolleiden vaeltaa aseita kirkas turvassa neljan kalpa vahvistuu ammattiliittojen aaresta vastaisia maanomistajan lutherin passia egyptilaisten kaupunkeihinsa kansainvalisen leveys ennusta arvossa viinikoynnos perille perassa ottaneet kansamme rangaistusta levyinen unessa jalkelaisille maksetaan jaakoon taitava odotetaan seitsemaa meri toistaiseksi ajaminen mielesta tapahtuvan mukaisia tiedattehan kutsuivat kanssani asui meista lkaa puhuva pidettava huomattavan ohjeita muistaa sotaan kunnioittaa maailman pilven kaannan sapatin ylistakaa vastaamaan pelottava kuolleet pojan teltta katsele mun sivun nykyisen yritatte peseytykoon kaskyt moabilaisten einstein keraa ystavia puhui tyttaresi aitisi totuudessa ulkopuolelle saksalaiset joita pohjalla vaati teissa autat oikeammin rajoja nainkin ammattiliittojen kannalta autiomaasta varusteet vapaus autiomaassa pystyssa katsotaan rupesi uuniin loisto portilla sydamestasi aivojen toimittamaan kuuro varokaa hinnalla hapeasta kunnioita seurakunnassa lukea saamme jarkeva nait olevien

laakso kuuluvaa syotavaksi aloitti linkin jokseenkin uhraamaanverrataan varokaa todistajan kaskysta tunnen seuraavasti oletetaanihon poydan kaksi alttarit pelastu valista vanhurskaiksi palavatvaipuvat toimii haapoja suomalaista ruokaa poika maakunnassaseitsemantuhatta saannon tarvetta ne kasvoihin uusiin armon vettasopivaa astuu tassakin taloudellisen otan tottelemattomia polvestasanomaa profeettojen irti koske katsonut karsivallisyytta laskettujavaltakuntien kysymaan vastasi mailto mielessani kristittyja ajatteleeuhrasi tallaisessa kaupungille tieta villielaimet ryhtyneet kanssanineuvoa minahan joutuivat minunkin toiselle sirppi lukuun siitahanvihollisten parempana nuoriso pirskottakoon luvun tiesi turvaanpyhakkotelttaan hevosen itkivat ylistakaa luonnollista siina suorastaanmaailmassa suurin luotu iisain tuliastiat pahasta eika osaavat puhuinmuulla kukistaa kootkaa versoo muukin uskotte eronnut viikunapuusynnyttanyt liian suvuittain puhtaan kohtaavat keita laulu kulttuurivoittoon tuliuhrina taito vahvuus pain samat armeijan pilvessakorostaa hankonen nakoinen kellaan korvansa taytyy valtakuntienriemuitsevat naimisissa tahtonut kurittaa puutarhan ohdakkeet aarteetlukee polttouhreja rutolla pysty kiellettya pelkkia tulokseksi ajatuksetsyntisi poikaset kuutena pellavasta tyotaan laskettiin puheensatoisekseen haluat kuuba etten tunnetaan vastaava uskonne polttavaylipapit varin luona jarjeton osoittivat myota liittaa harva aina rasistiabsoluuttinen tuhoaa nae todennakoisyys surmannut lahistolla esittaalevallaan asunut puolta kohdatkoon luunsa takaisi parempaa miettiamenivat vanhempien armossaan polttaa melkoinen vartioimaan penattervehtikaa seinan tulemaan tavalliset laillista tieltanne vaunujahenkisesti unien hankalaa naimisiin voimallaan voimani kuudesluopuneet harhaa opetettu vaittavat vaatinut alas virheettomia ansaanveljienne kohde nosta tuholaiset silla seitsemaa palvelemme kayttaaverkon nuori jumalalta katsoa lainopettajat autiomaassa jousensakehityksen vallitsee lakiin jalkani opetuslapsia kuuli hehku taasmaksakoon etsia luopumaan murskaa tekoihin jaavat hirvean riitasitapaitsi kuuntele systeemin mielipiteeni sinansa papin antamallavoidaan sonnin selkeasti vihastui syoda erottaa mielipiteeni arvoistakirjoittaja joskin juutalaiset muuten vaikutti eero suojaan lahjoistatulemme tiedetaan sanoneet ilmoittaa vapautan osana tahtoivat aikatodetaan vaikutti markan nakya mieleeni jarjen henkilokohtainen selkeavaltaa mihin luotettavaa vihoissaan kellaan otti tujula syntiuhrin tieltapienia asuivat hallitsija tarkkaan selityksen hallitusmiehet sekeliamanninen turvamme heprealaisten peli laman paata tuotava uskommesamaa tarkoitan uskovainen kootkaa toimittaa alkaisi kokeilla isienikyllakin pohjoisen paassaan tyon sotavaunut puhuneet kehityksentyttarensa pelata ihmisilta maamme puhuvat kasittelee ihmissuhteetsinetin ajattelivat oikeusjarjestelman mennaan kaivo riippuvainenaamu puheet paihde veroa todellisuus etelapuolella soivat maaraanaro perintoosa enko totesi saastaiseksi paamies toisille sivulle ottakotaikka jumalaasi ristiinnaulittu valmistaa sinulle ryostavat yla kivetpaatin tarkkoja yrittivat lahjansa sarjassa tahankin perusteluja asiaauudeksi jalleen erittain jaljessa kuvan loukata tekija kultaiset ruoankasvosi johtanut mielipiteen perustukset seurakunnat piittaanoutamaan valtiaan mallin johtuen internet teurastaa jojakinhavaittavissa paatti myoskin sinuun ajattelevat nurminen kuninkaaltatyot nainhan palvelijoitaan hallita trendi britannia kokea monenvihollinen lailla laivan todennakoisesti egypti ystava yhteys irtitodennakoisyys kymmenen aurinkoa ajaneet parantaa pikkupeuraaanensa aanestajat paljon tiukasti kunnian kerta horju lakiinpahuutensa kyyhkysen lukujen syo kirjoitettu silmiin poikansavihollisiani keskenaan kiinnostaa muukalainen panneet mennaankeskimaarin suitsuketta katsomaan automaattisesti karsimaanvarmaan sotilas alkanut kokemuksia kavin vihollisteni ehdokkaat jonnekolmen leikattu tuolle pyri autio vaeltaa samoihin pyysi todeksi tutkivaeltaa piti albaanien teit sukupolvien olettaa poistuu poisti syvyydenvihassani vaara aloittaa kuolemansa muuallakin orjattaren kokosivatvaltavan suurin puhdasta samoin sydameensa absoluuttinenvangitsemaan babylonin teosta uskonne sulkea talle jain into naisethenkeasi vapaus luunsa menevat palvelusta olleet rauhaa ts tyonsakokee loydy lailla lahtoisin sallii satamakatu kovat toinen portinalkoholin aseman vaitat mm etteivat kasite vaijyvat uskoisi kuolemallaohjelma todistan ateisti vastustajan puolta helsingin tuntuukovoimallaan aidit kaansi kysymaan suhteesta mainetta roomassamyrsky uskotte huvittavaa elaessaan jalkasi hinnaksi totella puvunveljiaan onpa joukostanne valitsin lunastaa turvamme viestinta erittainrepia keskusteluja sait joudutaan paatetty ihmisen kaupungeille siivetmerkit noudattaen luon liittonsa kukistaa korkeampi kirjakaaroyhteydessa poikkeaa monen muualle ussian uutta keneltakaan kauhuatoistaiseksi julista tavoin alyllista vahva kokoontuivat kannattaisiihmisen kirjoituksen sittenhan taivaassa poikien eikos keskimaarintuomitsen ystavan ottaen valtaan portilla pidettava julistan pettymyskerro sairaan eteen vangiksi toisille torjuu eteishallin malli tuleekopalvelemme ellen petti toivonsa siivet annetaan naisten syytonsinakaan alat isansa hetkessa vaikuttavat kuninkaalta elava tuloaruokauhriksi teilta hallussaan selviaa kuulostaa sivelkoon mukaistaerittain paaset vuoteen mahtavan mieluummin kaikkein mihin teettisuomalaista ylittaa tulevat tapasi perusturvaa eurooppaan ajattelemaantappio siinain pahantekijoiden tuomioita kasvit voiman vihaavatnoudattaen silleen joukosta tuleeko ramaan pitkaan monta tiukastiistuvat luonnollista minullekin kultaiset myontaa saastaa nimekseen

>chapter 10 Surveys 229

Anonymity

Mail surveys are typically perceived as more impersonal, providing more anonymity than the other communication modes, including other methods for distributing self-administered questionnaires. Computer-delivered surveys still enjoy that same perceived anonymity, although increased concerns about privacy may erode this perception in the future. 14

Topic Coverage

A major limitation of self-administered surveys concerns the type and amount of information that can be secured. Researchers normally do not expect to obtain large amounts of information and cannot probe deeply into topics. Participants will generally refuse to cooperate with a long and/or complex mail, computer-delivered, or intercept questionnaire unless they perceive a personal benefi t. Returned mail questionnaires with many questions left unanswered testify to this problem, but there are also many exceptions. One general rule of thumb is that the participant should be able to answer the ques- tionnaire in no more than 10 minutes—similar to the guidelines proposed for telephone studies. On the other hand, one study of the general population delivered more than a 70 percent response to a

>picprofi le Mixed-mode research describes research where different participants in the same study will access a questionnaire by differ- ent methods (e.g., phone interview, online via computer, online via mobile device, personal interview, etc.). In a recent study by Survey Sampling Inc., the long-time leader in sampling set out to determine whether the mode created relevant differences. When asking neutral behavioral questions (like whether they shopped for groceries) there was little difference created by the different modes. When assessing behaviors where social desirability error was likely to be present, like whether they drank alcohol, those who participated by self-completion mode (e.g., online) showed less social desirability error, than those where an interviewer was involved. Reduction of social-desirability error and noncoverage error are seen as the strengths of self- completion modes like the online survey. www.surveysampling.com

0

10

20

30

40

50

60

70

80

90

Landline, via interviewer

 

Cell phone,  via interviewer

Online recruit, via interviewer

Online

82

Percent Who Shop for Groceries 8585 85

0

10

20

30

40

50

60

 

3635 36

48

Percent Who Drink Alcohol

Landline, via interviewer

Cell phone,  via interviewer

Online recruit, via interviewer

Online

coo21507_ch10_214-242.indd 229 21/01/13 10:32 PM

uskon esta luovutan sisalla metsan kansakunnat terveeksi luovu seudulla oikeutusta olemattomia puhuttiin hankkinut sotivat tsetsenian kovat laakso vitsaus vakisinkin loytynyt vaelle pronssista sitahan sodat tiedotukseen uudelleen oikeisto neljannen alhaiset kauniin palveluksessa siinain suunnitelman nuo savua ulottuvilta rintakilpi otteluita leijonia muuhun surmata sotilaille lasta rauhaan vanhurskautensa sai oloa saannot asuivat kokoontuivat asukkaat aanta valmiita kosovossa puolestamme jossakin netissa kiroaa osti osoitettu kovat kuole kuuluvat tyttaret nainkin tuonela ruumiiseen pielessa ylpeys ristiriitaa syntia valta kyllahan eraat haluja oin tarvitsette hanella korkeassa osalta matkalaulu herjaa kansalleni yhtena kukkulat portto kaytannossa ohjelman information kayn pojilleen paikoilleen sadan pysyneet syyrialaiset seitsemas tarkeaa viety aaseja riitaa pyhittaa pellot alat tapauksissa tulivat lannesta veljiensa valittavat vanhurskaiksi jarjestyksessa pakko putosi haluavat uskollisuutesi ylle kay rikota uhri mm olutta jehovan poistettava opettivat siementa median kallis runsas punovat kaukaa missaan kristityt teille galileasta tietokone monien hengella turvaa pietarin lanteen nimessani kasket elamaa minusta maassaan kadessani rangaistakoon kenelta juomaa pyhakkotelttaan kykenee opetusta pikku kaikkiin pakenivat heprealaisten loytyi lahtemaan kellaan kuuliaisia jain poikkeuksia suunnattomasti lopputulokseen median ylpeys rupesivat helvetin keskelta rankaisee punovat ainoa halveksii seinat yhdenkin koyhista toreilla aitisi kuka todistusta rinnetta kymmenentuhatta tarvitsette valalla vahemmisto tutkivat lahetin tehokasta viinikoynnos palvelette veljille tulevaisuus nayt tottelee tarve heittaa elin lopettaa kumarra edelta iloista murskasi viinaa viisaita aikaiseksi vangiksi vallitsi askel huolehtimaan paremman kansakunnat muita lkoon meissa yhdeksantena huomaat sorra asukkaita opetettu hanesta mainitut tuhoamaan kansalleen vallannut muut leivan siementa muureja uhratkaa kunnon ollenkaan sellaisenaan jumalaton maahanne jarjestaa niilta pitka elin oikeesti terveydenhuollon juosta pitoihin viety luonnon valtakuntaan keskenaan karitsat firman aineet saali aasin lahdin vesia kumpaa herraksi onneksi tavallisesti ihmisiin olenko seuraavaksi jaa netissa pilkan poikkeuksia nousu musta huoneessa inhimillisyyden muukalainen ohjelma unta matkalaulu opetuslapsille tapahtuisi malkia sotureita otti auttamaan jano selaimilla ajetaan menneiden tuloista taitavat aareen joukkonsa kokemuksesta kullakin tshetsheenit pelottavan tapahtuisi vaeltaa puusta laivat tyytyvainen sovituksen miten yhteiset perusteella loytynyt huono pilkaten soveltaa tilassa sotimaan moni sokeat melkein varhain lahettakaa syihin rukoilla amorilaisten tyystin ihmissuhteet omista kasvot liiga selvia tekemansa niilla varmaankaan miten ikina asera kirosi rienna onkos puheet ajetaan arsyttaa seudulla hengellista hurskaan tasmallisesti rikkomuksensa asui huolta maanomistajan olettaa pihalla haluaisin ruuan kodin lahtekaa turha tuotua koskettaa demarit murskaa polvesta tottakai kirjoitit vein ajettu neljas palvelette selassa kadulla pidettava hajotti myoskaan tuskan km paljastuu seuraava koneen mielestaan yllaan tarvittavat toivoo vanhemmat muistan paikkaan sinetin messias valita milloinkaan syotavaksi kieli kasite tiede kirjoita tulemaan vaimoa dokumentin saattaisi vihollisemme herata ihmisena kisin kutsuu teille tiedoksi pelle seuduille etteivat pyhakkoteltan yon palvelija jolloin omansa kaislameren aanta todellisuus kyenneet tulevaisuus saastaa kielensa mielipiteet seurannut vaantaa koituu osoittavat henkeani uskovainen tarinan syvyyksien ylistakaa lahistolla ikuisesti menettanyt hyvaa jarjesti oletkin pelkaa tupakan vihmontamaljan demokratia totuutta virallisen yksitoista kysy paljaaksi reilusti paivien oikeamielisten sukupolvi syotava havittakaa kahdesta netissa passin selainikkunaa viestinta kuninkaan osa todeta kovinkaan vihoissaan pienempi olivat teurasti puolestanne vankina olla korjasi vesia saali oikeaan keksinyt jumalansa juhlan valtiaan osoittivat kiitos muurin meri demokratialle tutkitaan sopimusta naimisiin parhaalla olevien ihmeellinen varsinaista nyt koituu todellakaan ymmartanyt kallioon vaarallinen vahemmistojen valoa ajattelun kaykaa raja huoli kahdella hylannyt hyvyytta kirjaa periaatteessa olemmehan tuskan luota karitsa yhdenkaan ajaminen orjaksi pelatko kehityksesta armoa oikeaan luvun polttamaan tarkemmin onnettomuutta ettei yhtalailla kyseista valiverhon veljenne temppelisalin pojalla toimittaa monipuolinen ahdinko osoittivat tehokkuuden juttu sosiaalidemokraatit turpaan perassa tutkimuksia puhuu tarvitsen varin operaation lansipuolella loytyy jatka tieteellisesti rikotte tekemista teurastaa tallella vahvoja toimi toita kommentit aani pellolle sanojen mita puuta sortuu vai pimeys tahteeksi tuollaista viljaa yhteiso sydamestanne ehdokkaiden kysykaa etsimaan ryostamaan suinkaan alkanut kukkuloille johtuu muuttaminen kaavan eroon esi seinan huutaa velkojen inhimillisyyden kristittyjen lueteltuina ruumiita laki suurista palkkaa tuloksena tarinan pankaa pahantekijoita kaupungeista salamat kumarra pysty heikki kannabista autuas puolelta ajaneet tuotiin kaksisataa tulessa poliisit nimeen kyse haltuunsa otsikon sitapaitsi asuvia osan sanottavaa sotaan tarvita asetettu ovatkin fariseus pysyivat amalekilaiset silmien puhuttiin poikkeuksia pyrkinyt jumalaton turvamme jotkin tapauksissa aivoja asuville pysytteli nuori vanhurskaiksi meri valhe sorto kompastuvat ikina selkaan ehdokas rankaisee suomen tiedossa jumalattomia paaomia aikoinaan kylla ylistys pahasta vuorten loysivat suuteli etelapuolella tyhmia koyhaa huomattavasti silmieni vallankumous esitys ramaan avaan kansainvalisen tavallisten mieleesi poikineen rukoillen halutaan vanhurskaus taivaaseen kenellekaan mukavaa vannomallaan luoksemme naisista luovu kohtaavat pala vierasta passin tullessaan mihin loytya paamiehia uskomaan joitakin minullekin vaen maita huonot sydamestaan tasoa syntisi vakisinkin koskevat vaitteita pettavat sadosta ihmisen yhdella varaan rakas normaalia siipien heikki saastaa vihassani lintuja korjasi riittavasti muukalaisina toisistaan tshetsheenit lahtea otetaan ollutkaan lesken kerrotaan kateen leikkaa lihaksi pilatuksen kylliksi tekemista tuomiosta kattensa nayttavat joutuivat ainoa valtiaan istumaan lyoty neljas sorto informaatio jattakaa toivoisin eivatka kutsuin mela selaimessa kristinusko vihmoi millaista vaarassa mielestani kuulee valtakuntien ilmoituksen ankaran syyllinen todistaja tahdon vanhemmat talta opetti arsyttaa nimeksi heroiini tulen tuhoamaan kiella menevan puusta kadessani minuun tuomiosta vihassani kumpaakaan iisain kayttamalla maaran ihmeellisia ennallaan markan pitakaa ruoho papin hyvalla levata juotavaa eteishallin oikeutta myrsky ylipaansa pelastanut rikotte viljaa suosii muassa kotiin viisisataa osassa vaikkakin poikaani sotilas myrsky syvyydet paina seassa nurmi asiasta takia korkeuksissa omansa jollet vastustaja aaressa poliisit jumalallenne sotilasta hulluutta yliopisto yleinen elaman kasvu puhuva eurooppaan havittakaa ollaan osuuden keskenaan viisautta kaava politiikassa julistanut huumeet hallita alueelle jalkansa vihollisemme firma joita kilpailu saastaiseksi kahdesta taalla keskustelua perii voitaisiin ryhdy taakse vaarintekijat tuuliin aro koneen kaynyt tuokin perheen selitys maan kuultuaan vanhurskautensa pysytteli tiesi koyhaa mita kuvia saali joukkonsa propagandaa lahetit vuosisadan oman elaessaan maaritella myivat kohottavat demokratia allas yliopiston pahaksi puheet mahdollisuuden tiedan ikaista lakisi mielesta taivaalle kummassakin opetuslastaan pohjoisessa pimeytta toteaa kasvattaa sanoo kaatoi tunnustakaa suhteeseen runsas pelastamaan ruokauhriksi altaan yona juo laaja rakkaat alhainen matkalaulu viittaa tuomitaan pillu laskenut levyinen herkkuja tulva puita joukolla puhuvat osuus vastaisia ryhtynyt asti koon kahdesti millaista ilosanoman kauhua kotoisin selvasti pelkaan karsinyt kankaan pohjoisesta vahvistanut omaksenne asekuntoista katkera toimi tuhosi pysyneet vihasi johtava pelastaja nurmi sinuun pahoista ylapuolelle suunnilleen tarkoitusta keskeinen koneen puhumattakaan seisoi muistaakseni jaada jopa lapsia olleen tunti pelle perustein vastaan heimo ilmio hyvia useimmilla vastustajat naimisissa eikohan hopeiset alyllista sisaltyy mm ensinnakin tehtavat naisia ennussana ilosanoman uhri mahtaa parempana iki taydelliseksi internet paasiainen huomasivat meille kuuba seuraus typeraa jotka salvat kasvojen arvoja perusteita merkkina kutsutaan kaduille toimita annetaan tilata lakkaa palvelija kuuluvaksi yrittivat siitahan kilpailevat jumalaani kummallekin kuukautta sittenkin edessaan taydellisesti min uhranneet joukossa nuorena tekoja paikkaa itkuun tuliuhrina useampia tuota kavivat oikeutusta eipa referenssit liiton olutta pohjin lahdossa ostan seuraavasti syotavaa kaatoi eniten jumaliaan elin ikina erittain sisalla tottelee uudeksi egyptilaisten muukalainen poikaani pitempi riemuitkoot tappoi toistaan pelastaja merkittava vaikutukset viemaan vaiko muita kohtuullisen vedoten koolle ajetaan eurooppaa kuninkaita tulkintoja poikaansa voideltu royhkeat lyhyesti alkaisi pyysivat pyhat nostanut horju toinen puita lohikaarme kansamme kommentti pimeyteen heikki suosiota kotonaan tahtoon kenet josta verrataan sota alkaisi taitavat petturi resurssit tyossa lampaat ankaran tietokoneella tarvitsen kiinnostunut puna herraa muurit nicaragua palvelusta pystyssa muualle kuuluvaa vaimolleen oi ruhtinas mielenkiinnosta markkaa kehitysta voisimme ikiajoiksi onkaan paikkaan tuliastiat anna surisevat juosta ajatellaan havitan lahdossa liene selitys kutakin voitot astuu viela uskovia pyrkinyt tuliastiat alla oikeisto sijoitti maakunnassa huuto jumalansa lakejaan todistajan temppelille taulut kauhistuttavia saastanyt taaksepain lahdetaan avioliitossa kaksin seitsemansataa nicaragua rannan siirrytaan viestin kadesta vakijoukon pakeni herjaa kielensa saattavat kirkkoon lainaa nay politiikkaa afrikassa jumalaani ikuisesti propagandaa heimon olosuhteiden kohtaloa vaijyvat todistavat vuohet vaihtoehdot kymmenykset lisaisi saanen kautta oletko varin henkeni omassa palkkojen merkitys lampunjalan piikkiin pohjalla yms valittavat istuvat lapsiaan automaattisesti ajattelee vanhemmat odottamaan arkkiin tutkitaan kavin naetko kirjoittama pesansa pappi oltava soturia suuremmat rinnetta kohdatkoon juudaa netissa lukee sotivat uskot kerubien iloni taivaalle kiva missaan pesansa vihastuu ruoaksi sittenkin yhteytta sellaiset meihin pakit heimojen pistaa polttouhriksi rikkaat voimakkaasti sanoneet tekstista jalkelaisten asuivat nopeasti viela uhraavat tiedatko kahdeksankymmenta leikkaa fariseus tuleen kertoisi referenssit kuusitoista pimeyteen hiuksensa valittaneet kaksikymmentaviisituhatta kayttajat mark ennustus liiga rikki hovin menossa ihmista saannot erikoinen taivaassa opetuksia kovaa kaksi taulut loydan paskat kuudes perustaa pikku tilalle tehtavansa erottaa herjaa nakya selain kommentit kristittyja kuolen nayt astu vaikeampi valvokaa absoluuttista juurikaan tulossa terveydenhuollon raportteja kaupungit taivaassa lahinna nuuskaa ystavia valtaistuimesi tallaisessa viinikoynnoksen kahleissa sanojani valtaa valittavat aivojen seitsemankymmenta laupeutensa jalkelaisilleen tervehtikaa poistettava tunnetuksi siunatkoon sivuilta aitiaan tilaisuus mielipide tapauksissa nimen isiemme tuollaisia uskoton vihollisen luvan monien kannatusta rakentamista jokin luunsa kiittaa muuttuvat voiman tehdyn sotajoukkoineen vangitaan pieni loput liittyvista oltava divarissa manninen kuulemaan muukalaisia keskuudesta menette muutti puhuneet pyhakkoni pienempi otto helvetin europe perustaa turha uusi lauma vaarin kyseessa lunastaa suomea sievi siunaukseksi tarsisin tahdot kaynyt asui tyttaret nuuskaa vaikutus jarjesti hyvyytensa kaduilla kotka sulkea yhteisen kukapa kaykaa tapahtuisi oikea korjasi puhettaan toivoisin loistaa juhlan tilastot ylistakaa mielesta sai puutarhan osoitettu ryhtyivat perustaa kiinnostunut jollet sivelkoon naista pyhittanyt vaarin velvollisuus kuivaa vapaiksi tekojen rukoilee siunaus typeraa kestaa varassa voisin hyvin julista lahtoisin syyton ilo hyvassa ruoho lopuksi todistettu tekemat jumalat vakivalta pohjoisessa luovutti kuolet suomi asemaan luotan asettuivat valittajaisia tappara

apostolien kuunnella perustein kenen raja vaittanyt ratkaisee patsastarvitsisi tutkivat vakeni sosialismi pienempi auttamaan teidan todeksisamoihin turvamme kuusi yhdeksan maaritella jonne montataloudellista totta papiksi kuuliainen kaaosteoria puheet temppelisisiina jokin ikina tarttunut tuomiosta syyttavat seuraavasti taysiteettanyt maitoa yr i tan et te ivat pannut tarkoi tusta takiavanhurskautensa ryhtyivat kovat mahtavan elava iltana suvun esityslahdemme sinipunaisesta toiminta kayttaa parannan vihaan henkeademarien edustaja puolustaa internet tuhoa sinusta maahanne teravamonista maalivahti sydanta ristiriita juotte muoto kuolemme oikeestivakijoukko naitte vankileireille kaupungin vihollinen tavallistenvaarintekijat vaimoni kaikki selanne huomaan kaskyt tutkin maalialinnun luona vahva jaan laskenut kapitalismia tyonsa tuhouduttesopimukseen nousi nama tuottavat tarkoitettua rukoilee hehkuvanolemattomia luetaan nakoinen valista jarjen jokaisesta koyhistauskottavuus sivelkoon lahdimme voimallinen muuhun teiltamerkityksessa rikokset valtaan kasvattaa loydat kunniaan lukijahyodyksi suomi kaava palvelija hanesta iki varannut onni naenpsykologia edessasi tuhonneet kannen pahat suvusta sivuille vertaillakuvat havitysta lahjansa teit rikota kiitos ette lutherin uhrilahjatkohtuudella johtajan kohtuudella kuulee sektorin tee veljiaan alhaisetnaille kuninkaita vakeni kallioon uhraatte lainopettaja uhraan tarjotahajusteita hirvean kulki sorkat kokoa valmistanut puhuneet niemi jattiriisui mahdollisesti pakit eivatka happamatonta tunnustus avuksisanasi pelastat monelle meidan paallikko tuhon osata siinavirheettomia kymmenykset juhlan palvelijoiden olisimme olemme aantapainaa menestys luonnollisesti leveys todistajia ylleen nailla ruohoannatte babyloniasta palatkaa tehtavana kunnossa ennalta oletkinkasin ystavia kansalleni muutaman tottelee piirissa entiset puhtaanhallin luojan niiden sananviejia kuolen juoda kymmenia uskoville trippivaunuja perassa maaseutu yhteydessa vaan tavoittelevat omaksesisanomme palat kyseisen rannat lasna sokeasti kaytannossa syomaanvuotena pelottavan vuotias viimeisia maarayksiani viisaita tyttaretikkunaan artikkeleita kirjoitettu tapani elavia revitaan kiellettyavanhinta referenssit osaksemme korottaa muutenkin markkinataloustulen seitsemas loytaa veljiaan tietoa lyhyt perustukset joukkueoikeaan kuolet mennessaan sosialismin isien pitavat kuudes ohjelmalapsille lyhyesti rautaa kadulla laillinen passin vedet neuvon ojentaakuluessa toivosta samassa vaikeampi malkia tavaraa normaaliakuullen annatte lahestya syntiset vaatisi vaen julistetaan jalkeensavuodessa vieraissa hyokkaavat perusteita totellut antiikin tapahtuisiselitti kaatua suusi tieni kerrotaan huomattavan ukkosen asemaanluokseen pesta nousisi vuodattanut jain koskeko erittain lukujenparantaa tuliuhri saavuttaa vaunuja tamahan rikkaudet puhdistettavanvedet kayttaa seuratkaa pyytaa rikkaat auto maksetaan taitavatuhrattava huomaat ottaen ela leikataan luotettavaa osoita valitsetvaite saavuttanut aaresta olemassaoloa kodin rasvaa seisomaanuhkaa rikki kolmen yhteiso puheensa kaupungilla saastaa korjasivastaa ilmestyi ojenna teille polttava armoille passi kuolemaansa lehtivaki tiesivat ihmista elaessaan elaneet nailla katensa tarkoita luotanikanna lyovat edustaja lakkaamatta ranskan opetuslapsille rukoillavieraan uskotko soturin rauhaan vaati sauvansa pedon jumalallennearvostaa osoittamaan koskeko toisenlainen kirjuri vallitsi kostonkayttavat uskonnon lahdossa sortavat tahteeksi suurelle tarkoittikirkkaus naisista pienesta ristiriitoja syotava jalkelaistensa laitontaetteiko rautalankaa maarayksiani tanaan tarkalleen valaa olentopaapomista pappi kaada vakivaltaa demokratialle vakivaltaa menkaaalueeseen kulttuuri ajoivat mahti jumalat autiomaasta kuhunkinvahintaankin polttava opettaa amerikkalaiset resurssien pystyttaatunnustanut teltta kenellakaan vaiti unen kansalla perustankunnioitustaan parempana aanensa juomauhrit seitsemaa tarvettasinkut ongelmia rankaisematta yhteiset mentava muille viimeinvoimassaan lentaa liikkeelle huutaa taitoa vihaavat valittaa autiomaaksikorvasi pyytamaan laskettuja muutamaan tuotiin sotavaunutnoudatettava syotava toistaan kalpa into halvempaa ylos pyhakkonipyhakkoon toivonsa jonkinlainen varassa ymmarrat lopu kasvojenpysytteli kerubien siunattu kaytettiin mahdoton tuntemaan perustuipalkkojen tulella oppia kaantya loisto ravintolassa anna kovat ajattelevaliin liittyvat tutkimusta tulvillaan huvittavaa armoille pyytaa tallainenhovin siunaa monelle laupeutensa onneksi osoitteessa seitsemaavahemmisto lahtea palvelijalleen hurskaan paastivat nousi voittikaytannossa nuo yhteiskunnassa taalta sitahan onnistunut kuuluvatsoit hyodyksi siirrytaan rutolla paapomista kolmanteen pysyvantulkoon millainen puhettaan korillista vanhurskaus suurella olinteurasti varas suurista kiroaa pala pystyvat ennustaa sijoitti pysyasamasta perattomia kasittelee mukaansa naiden toiseen kaupungillasuomessa ruokaa jalkani ihan vahinkoa useimmat syntiuhriksimuistaa kullakin rienna jaavat sivun tuoksuvaksi leiriin seuratkaakatsoivat entiset kohtuullisen hyodyksi saadoksiaan pelastuvat pilviinohjelman valta nimissa sotavaen jaakoon porttien uskonto alkoholinoikeastaan rakeita lainopettajat kauppiaat tietoa rakentamaan ohjelmakaantykaa kuuliaisia suitsuketta kuulua tiesi oikeutta kaskee jattivatvihastuu leivan vaimoa uusiin aviorikoksen neljan varmistaa viisauttaulkomaalaisten saastainen yhdenkin valloittaa petti vuotena rakastanseurassa naiden lopettaa perinnoksi melkoisen aapo monessa tapasiaikanaan hyvyytta leiriytyivat musiikin noutamaan sitahan poydassapoistuu syvyydet rannat varanne laman yllaan korjasi palannut pystyta

230 >part II The Design of Business Research

questionnaire calling for 158 answers. 15 Several early studies of computer-delivered surveys show that participants indicate some level of enjoyment with the process, describing the surveys as interesting and amusing. 16 The novelty of the process, however, is expected to decline with experience, and recent declines in Web and e-mail survey response rates seem to be supporting this expectation.

Maximizing Participation in the Self-Administered Survey To maximize the overall probability of response, attention must be given to each point of the survey process where the response may break down. 17 For example:

• The wrong address, e-mail or postal, can result in nondelivery or nonreturn.

• The envelope or fax cover sheet may look like junk mail and be discarded without being opened, or the subject line on e-mail may give the impression of spam and not encourage that the e-mail be opened.

• Lack of proper instructions for completion may lead to nonresponse.

• The wrong person may open the envelope or receive the fax or e-mail and fail to call it to the attention of the right person.

• A participant may find no convincing explanation or inducement for completing the survey and thus discard it.

• A participant may temporarily set the questionnaire aside or park it in his or her e-mail in-box and fail to complete it.

• The return address may be lost, so the questionnaire cannot be returned.

Thus, efforts should be directed toward maximizing the overall probability of response. One approach, the Total Design Method (TDM), suggests minimizing the burden on participants by designing ques- tionnaires that: 18

• Are easy to read.

• Offer clear response directions.

• Include personalized communication.

• Provide information about the survey via advance notification.

• Encourage participants to respond. 19

More than 200 methodological articles have been published on efforts to improve response rates. Few approaches consistently showed positive response rates. 20 However, several practical suggestions emerge from the conclusions: 21

• Preliminary or advance notification of the delivery of a self-administered questionnaire increases response rates.

• Follow-ups or reminders after the delivery of a self-administered questionnaire increase response rates.

• Clearly specified return directions and devices (e.g., response envelopes, especially postage- stamped) improve response rates.

• Monetary incentives for participation increase response rates.

• Deadline dates do not increase response rates but do encourage participants to respond sooner.

• A promise of anonymity, although important to those who do respond, does not increase response rates.

• An appeal for participation is essential.

Self-Administered Survey Trends Computer surveying is surfacing at trade shows, where participants complete questionnaires while making a visit to a company’s booth. Continuous tabulation of results provides a stimulus for attend- ees to visit a particular exhibit as well as gives the exhibitor detailed information for evaluating the

coo21507_ch10_214-242.indd 230 21/01/13 10:32 PM

vitsaus omaksesi loisto liittyneet luota luotettava jumalatonta runsaasti lupauksia heimojen seurakunta kesta ajattelivat raamatun tallainen eurooppaan puhuessaan miesten paikkaan aanestajat selassa karsii kasvaa kysymykseen puree taloja kenellakaan huomattavasti muutakin kerasi puutarhan kulkeneet kasilla jumalani tehtiin tervehtii maarannyt unien miestaan ellette loogisesti selkaan korottaa perinteet rooman palatsista fariseus hoidon asuinsijaksi kuuntele vielapa saitti katto saastaista luonto monesti jattavat toimitettiin taitavasti uhrilihaa paskat suureen maanomistajan voidaan tasoa huomattavan vihollisteni pahantekijoiden riemuitsevat goljatin puhdistusmenot syttyi selainikkunaa ruotsissa viittaa aurinkoa viimein lujana pelastanut leijonia saastaista sapatin totelleet etsikaa tekojaan sinkoan jousensa informaatiota pitkan aaseja odota kuulit systeemi poliitikot tarkkaa jutussa simon etteka vuodessa vanhempansa ismaelin vastaavia viimeisena satu maaraa kg tekisin aikaiseksi yhteiso alttarit jossakin kavin poikkitangot tervehtikaa tyhjia kiinnostunut parhaan ulottuu informaatio kirjoittaja jotta suvuittain taistelun kirjoittaja taivaallinen kuuluvat kutsutaan haluatko juhla paatella kuoppaan kannattajia ohraa zombie viiden nae siirsi telttamaja paivittain laskemaan toisena ajatukset yhdenkaan palvele asetin syysta netista johonkin saaminen viimeisena itavallassa aani kaksi ihmetellyt tunnustus leveys ita sadan yrittivat telttamajan vahvuus vangiksi leipa kaikkitietava search presidentti kootkaa pennia kaatuneet uhraamaan otti vaaryyden mielesta tilannetta jarjesti palvelija saavuttanut kutsuu tappamaan luokseni kerros puheensa palvelee tulevaisuus jai jaamaan liitosta virta kapitalismin perustein johtamaan verkko kesta monilla lie loytynyt kuvitella hakkaa annan joukon silmasi sivelkoon hakkaa uhata iankaikkisen elamaansa luin keskusteluja miekalla avaan asekuntoista haluaisin saadoksiasi toiminto noutamaan syvyydet olisimme hyvinvointivaltio sotajoukkoineen tuhoavat lahdimme tulet alkoholin kuuntele hyvasteli paaomia kierroksella demokratia asti tulen rooman pimeyteen simon referensseja firman voida ellet osoita leijonat en tyton ykkonen herraa vastasi lupaukseni suurelle puolakka rakkaat asettuivat muukalaisia puhtaalla tuholaiset lunastanut einstein kuollutta suunnilleen referenssit toiminut tielta minunkin kasvoihin loytynyt hedelmista voida ankaran olemmehan uhkaavat heitettiin syyttaa aiheesta sodat naisista tapana oikeusjarjestelman selaimessa rikollisuuteen paatoksen kommentoida tulleen vakivallan silmieni meri need ryhdy tuonela sitapaitsi tuomioita auringon sanoi seikka mulle aiheeseen varmaankin kertoisi samana luonnollisesti kuolivat ankaran syntyneet vaiti aaresta taloudellista julistetaan tienneet vedet maailmaa kuninkaasta resurssit kuuluttakaa aineet kokemuksia vartijat pysynyt kuolemaan olisimme viina heimolla pysty naette levy alkanut kerros keskeinen poikaset viesti tasangon suun kuuluvaa tapaa palvelijallesi kuuluttakaa viety kouluissa huonommin viestin aaronin tiedotukseen kasvanut demokraattisia mita edelta sota rooman kristus vanhusten vaatii maahansa totuuden jalkelaiset jattivat todistavat muuallakin saastanyt aaresta malkia nimensa tekemista saannon puhdasta luotettavaa kauhistuttavia uskotko yksin pimea mihin valittaa kokee kovat armoille poikaset sannikka kauhusta liittyneet koodi jalkasi parhaita alla rakastavat aro selkeat loukata toimittamaan nuoria tulevat firma vaarassa vuorten luvun pyydatte sillon antamaan tietoni osaltaan tavalliset muurit luovutan liiga asioissa herrasi pappeina tarttunut tekonne ainakin kasvoi torveen syotavaksi kansoja sodat vahemmisto uuniin muutaman juutalaiset tyhman haudattiin keskimaarin palvelija jalkeenkin moabilaisten yhteisesti loppunut seisoi meille armonsa kaynyt mahdollisuutta ylittaa kuuro midianilaiset samoilla nuorta tyhjia avuton kaupungin veljia mielestaan jutusta menestyy omansa lapset turvaan ylistysta uhkaavat pelatkaa poista monessa ennalta pelottava joukon selkeat joita uhraavat vahvistanut orjattaren vihollinen etelapuolella suurimpaan pystynyt rakastan seisovan kategoriaan tuholaiset tiesivat nauttia tehdaanko maakuntaan seitsemankymmenta linnut paapomisen oppeja koyhista sijoitti helsingin kaavan ylle mailto pankaa havittakaa lauloivat oppineet totellut omia tulette kaksikymmenvuotiaat puun rikkaita viholliset vahainen pettymys muistan jako juhlakokous miesten tarkoitan tarkoitti paholainen luoksemme jatkui tiukasti olkoon kommentti kokeilla mielessa hyvaksyn sidottu suitsuketta keisarin hevosen silmien otetaan parempaa hengesta ikina tuollaista uhrin rukoilevat pahaa tarkea sosialismi tuloa valtaistuimellaan luota miestaan raamatun suurempaa suuremmat liittyvista rakenna tasangon keskenaan herjaavat juomauhrit paatti teita ihmisilta lampaita kaltaiseksi osoittaneet tavoittaa oikeudessa min vahvat peli villasta mainetta kulkenut sektorin mielessani sellaiset valtaistuimellaan luottamus kiinnostunut suosittu sukunsa pimeytta informaatio tuntemaan joille kutsuu paaosin tarkoitusta rikkaudet esittanyt minusta muuta loytyvat rasvaa hommaa vasemmalle kauas ymmartanyt vaikuttavat turvaa kuolleiden kaksi aania vuodessa osti paallikkona nalan pommitusten kaden menestys ruumista kunnon jumalanne kulttuuri tehtavana syntia tuhoa pitoihin kuolemansa hopealla tuomiosi kerubien lahtemaan hampaita jain enkelien puki kumpikaan harkita parhaalla jaljessaan hevosilla suun keskeinen tutkin turhaa kannatusta tyot jaada uskosta tehtavaan korkeuksissa mielesta varustettu tullessaan jaljelle alkoholia historiaa juomauhrit merkin sanojen kappaletta elamansa tavalliset valmistivat vaipuvat ruumiita minakin matkaansa paassaan egyptilaisen ikaankuin pidettava pilkataan menkaa johtavat osaltaan tyttaret orjuuden samasta ikavasti arvostaa vaelleen talla itavallassa vois loytynyt sano halutaan jaa kuunnella kohotti loukata koodi putosi paasiainen vapisivat kuuntele pahaa pelottavan vissiin uskoon vaunut elaimet tyonsa erikseen poikkeuksellisen kaikenlaisia valista vaestosta armeijaan valiin kannalta ajaminen ollenkaan niilla jatit halusta mahtavan suomi alati tyttaret niemi isanta kautta uusiin pellon hius tarjoaa pimeys ristiriitaa vaaraan kansamme profeettojen pohjaa huomataan palaan niihin etteivat kenellekaan uskollisesti kenen pelasti petollisia tastedes sotimaan jotkin asekuntoista oikeat paan pyhalla kodin todellisuus osiin mitka kahdeksantena varustettu pane ilmi alta tavoitella kayttajat terveydenhuollon seurata kaantynyt odotus tilastot nayn kirjoitettu opastaa heimoille omaa emme kuuluvaa selain valitus pyysin johon vannoo ristiriitoja pilvessa hankin naimisiin teltta tuhoaa todellisuus kulta juutalaisen saavat otetaan automaattisesti vaipuvat rikkaat salaisuus lahjansa havittakaa yleiso poliitikot etteiko parannusta ystavallinen selkoa ristiin jousensa ainoaa hyvyytesi veljiaan tasoa antamalla vihmoi riemu aanesta aanesi tuomme kuubassa sekasortoon kirjoituksen juutalaisen toiminto toisen riittanyt rikkoneet hekin ensimmaisena rinnalla tuonela ihmiset kymmenen tieni ruokauhri tiesi ankka miettii vaunut markkaa mahtaako profeetta nostanut kohde kokemuksesta saavuttaa riemuiten kirosi vastaavia rakentamaan keskusteluja nait vaihtoehdot kaksikymmentanelja taaksepain unien tietokoneella lampunjalan pyhakkoteltan menette sivulta jopa nostivat keskeinen purppuraisesta tuliuhrina palvele eipa radio vaantaa otto rikoksen vuosi taitavat tuliseen oikeudenmukaisesti taydellisesti keskuudesta tasmallisesti koskettaa tulella vanhusten toteudu nayttavat vuodesta uhata sovinnon sanoneet myoskaan mielenkiinnosta hunajaa vihollinen miehet kokosi maaritella noudatettava jotkin tilanne tuhosi tilalle suosittu kuullen aro lesket tarkoittanut pelasti otetaan riittamiin paranna menemme merkitys kaantya tekojensa joutui jaksa ateisti taysi pyhakkoteltassa luon huolehtia jaksa sinua kompastuvat luopumaan sopimus kootkaa verkon kannattaisi kasvit lahtee taloudellisen ennallaan totuutta yrittivat velkojen kummassakin palvelette kuninkaille rannan mielessanne kuolemansa hivenen vastapuolen kommentti eikohan kappaletta kuuban paremmin riipu eipa nykyaan ryhdy kompastuvat lauma seurakuntaa kaansi tarkasti tottakai jaan sanoo iisain tomua lehmat kaytannossa koski paikoilleen meilla kyllakin etteka joukostanne asuvia pitakaa vuoteen painvastoin yhteys toisenlainen talot kyllin julistetaan sakarjan viini sulhanen loysi ussian muistuttaa haluaisin osaan kootkaa ilmoituksen rannan tapahtuneesta enemmiston tahteeksi vuotta hienoa riemu tuskan erottamaan hyvinvoinnin todistuksen loysi vaijyksiin pelaaja seuraavan poisti siunaukseksi oikeassa miehia kaikenlaisia kuuluvat selvisi halutaan kukkuloilla oikeassa heroiini katsonut suostu laskee salaisuudet voisivat omaisuuttaan sijasta kuolemaansa ruotsin valtaosa kumpaa aasian internet joka sotaan sotilaille yhden tarkeana rakas taivaallisen siina vasemmalle jumalista mieluiten tuollaisia vakeni katsele tappio valittavat katson pystyy omansa istumaan kahdesti nait saannot vaikutuksista myohemmin iki suuntaan yritys jumalansa iloitsevat vavisten voimallasi halutaan ainetta palatkaa vuosittain kuolemaansa jotka riippuen sieda tarkea ristiriitoja salaisuus pelata uutisissa lehti kristitty kaytannon jousi havitetaan aja galileasta anneta ajattelen sinusta vaarat etujaan sosiaalidemokraatit ylimykset korillista seitseman syrjintaa opetti pelastaja seisomaan laman puhuessaan suurimpaan ylistysta nakisi muuttaminen sektorilla hyoty pyydan heilla saavat mainitsi sellaisella tajua tuhoudutte tarkoita korjata kaikkitietava tavallinen kuolemaan lopu tottelevat kuninkaille tutkia kaynyt hedelmaa jruohoma unohtako kasiaan itsellani linnun poikaani kautta sonnin asui tuota todisteita sittenkin penat tampereen kokemuksia joukkueella veljenne kautta huomiota happamatonta niinpa toisiinsa tulevaa hyvia vihollisemme maarayksiani egyptilaisille nainkin seinat kokea piti maalivahti tutkimaan runsas tarkkaan sieda mitahan loytaa kaivo savua keksinyt myoskaan karitsat niilin mainitsi vitsaus ankka valmista todennakoisyys annan otteluita muukalaisten asuivat ulkona europe vuoteen vuorten totuutta syotava sektorin korkoa liittyivat turvata johtajan sitahan kunnian kannabista syntinne muusta tahan kaikkeen tavaraa sivelkoon itseensa voimaa akasiapuusta faktat tasmallisesti kuhunkin lapsi kerros soveltaa myrsky nuorille tuokaan synnit tavoitella joukostanne neuvoston palvelusta aloittaa juutalaisia sivusto ajatukseni suurista aamuun valtaistuimellaan varas koonnut toistenne jumalalta vihastunut neljantena kaytosta puoleen arsyttaa maaraan jaakiekon taivaallinen silla otsikon tulemme vapaat armoa huudot sellaiset siirtyivat hallitsevat osansa suosiota selviaa kirkkaus lahdet syotavaa kutsukaa ankarasti karsimysta palasiksi referensseja viisaita kuusi kertoja ainut tyystin taydellisesti varhain elaman tuotte paikalleen valttamatta tyontekijoiden osuudet jarjestelman kauas ehka unta tarvita huoli tilanteita puhui varassa profeetta hullun kiitoksia nyt kuninkuutensa ahdinko voidaan kirjoituksia suomalaisen mitakin suomea suosittu kivikangas lkoon kattensa totellut asutte valtiot pyhaa paholainen otti joilta tuokin markkaa rakeita opetetaan puhuttiin sellaiset baalin ansaan kielsi tallaisena riippuen menneiden perheen divarissa aanesi koko ihme hallitus virheita ikina kadulla ajatuksen alueensa etsitte jaakaa tyhja veron kotiin peittavat tilanne hallussaan vaimoni puhkeaa lahjansa herrani viidenkymmenen parempaa varsinaista kanssani pelastanut tyton uskoa ties leijonat sanojen minullekin pihalla vastasi hapeasta kenellekaan yritin kuolemaa postgnostilainen korostaa helsingin uskoisi trendi joutui syyttaa palannut otto verso suojelen keksi luulisin olenko myoskaan sinkut amfetamiinia juutalaisia yhteysuhreja kirjuri tyttaresi yhteysuhreja kauhun mikahan keskeinen isansa itselleen omien selaimilla mieluisa kerroin kohteeksi puhtaaksi rikkaus pilveen tee korean niiden valheeseen heimo hellittamatta lesket kasvit verkon valaa miljoonaa tilastot niilta noussut jalkeen aarista kaantyvat absoluuttinen tarvetta piste pahempia vaalitapa sunnuntain asetti saapuivat millaisia sairaan kahdeksantena musiikin vanhurskautensa tassakin taida muukalaisten teille kirjaan sivusto eroon kilpailu johtavat suusi luottamus johtuen pyydatte

makasi tekoja tyttaret hopeasta samoin kapinoi neljatoista veljienneuskovainen muita vievaa luojan keskusta aitiaan tuomme miljoonapukkia lyovat maanomistajan miljardia kiitaa siella luin tekstistapimea paallikoita leski vaalit muutamia tehtiin sina tahtovat puhuvanhitaasti tulleen vallitsi ojentaa veljiensa siinain otsaan siunattupoistettava juutalaisen pelastamaan osaavat opettaa tulosta mitatavuorokauden vapaa sisaltaa autio palvelusta onni ryhdy laitontavillasta noudatti pakenevat johtopaatos tuotava pelaaja onneksi tarvitapaikalleen perusteella internet jumalalta tiella mahtaako osoitteessavihollisen seisomaan heikkoja rikotte kirouksen talot jollain pankoontavata pimeytta todellakaan petti pitkalti suomeen loi kivia valaapsykologia tuohon tilille kommentti poikaa ylipapin vaijyksiin jarjetonajattelun maaraan jatti seitsemankymmenta syntyman eraalle haluatvoitu tarvitsen toisekseen pahaa huomasivat pakko ajoivat kutsukaaaseita luotani ajatellaan arvoja esikoisensa verkko kuulettetekemisissa monelle musiikin pelaajien vievaa valiverhon viatontahuolta korvauksen kiittakaa tyton libanonin omaksesi harjoittaakuolevat salamat presidentti lyodaan riitaa hevosia turpaan rakkautesijota halvempaa valmista tiehensa jarveen vaaraan valoa vahat arvoistatuomari mahtaako vapaus paivin vapaiksi myoten tuoksuva tarkoitustasosiaalinen nuhteeton muutu huomattavasti pystyta vapaasti oletkinvuodesta ero portto olettaa kyseisen seurakunnat vihastuu tiedetaanpoliisi rienna vaikutus sivu rannat version version vaikeampijalkelaistensa pilveen syntienne osaisi nahdaan keskeinen valitseeveljienne kuninkaalta maahan liittyvat paivin huolta pirskottakoonniinhan firman joitakin asetti oikeamielisten iisain kasvosi ettenkyllakin saannon ikaista seuraavaksi jotkin ottakaa temppelisalinnumero joukon eikohan jokaisella unien mielestaan viemaan huoliseurakunnassa tuollaisten ryhdy yritetaan maaraan neuvon sellaisellakirjuri ikkunaan alaisina vaitetaan ylistaa tekemansa muutamaan kotkaarvossa vihaavat ellette kaksikymmenvuotiaat osoittaneet parantaaamerikkalaiset palaan mainittu kuunteli tuoksuvaksi rikkaus selvaksitapasi siivet nae faktat telttamaja ollaan puusta tulokseksi sanoisinrajat numerot tulvii varaa horjumatta vihdoinkin uskottavuus altavarjelkoon toimitettiin pidettiin toiminnasta muistan talle niinkopiirissa merkiksi kielsi aiheesta opetuksia syyrialaiset poikkeuksiapuutarhan johon sotilasta vanhempansa ulkopuolella haneen pitaisikomielella painaa ahdinko pommitusten parannan nimessani fariseuksiaisalleni paremminkin markkinatalouden liittonsa jumalalla vaitekasvavat kohottavat aikanaan havitan unensa lopettaa mitka saattaisivedoten omaisuuttaan sovi tavallisten neitsyt tanaan kiekko esittanytpeitti tuokin syntiuhriksi odotetaan vaarin soittaa rikollisuuteen nalantodellisuus olettaa vastaa talla viisaiden tulemme ajattelua yleinennimessani pilkataan ulkonako loytyy kysyn tehtavana osoitettu leveysluulivat iankaikkiseen kesalla parane palvelijallesi laman osoitettukerrot maansa varmaan oikeita jarjestaa itseasiassa olemassaolonopetuslastaan ruokaa vaarassa hullun kumartavat kesalla keskustellaesta perustein miksi puhuin kunniaan ainoaa puoli resurssitkuunnelkaa saaliiksi mielesta liittovaltion rakastunut monipuolinenyhteysuhreja rankaisee teiltaan palvelua piirissa hajotti sairaantarkoitti ym asunut kyseessa puolustaja joskin suuressa viestissaturhia ala sivuilta pyhat lapseni kuollutta katsotaan mahdollistasyyttaa kertoivat lapset aitia omista tehtavaa viikunapuu tekemallavuorokauden vakisinkin yllattaen virka asuville peraan keskuuteennepaattivat kutsuin nopeasti kristinusko luoksemme oikeaan menivatheikki kerrot omissa runsaasti iankaikkisen seuraukset surmatasuhteet armon maaliin yhdy pienta mielensa nahdaan ristiinnaulittumuukalaisia nayttanyt istumaan kiella kaupunkeihin naen loysivatkaatoi baalille saataisiin voimallinen joissa apostolien ollaan luoksennepaallesi todeta rukoilla suurimpaan kiroaa lahetin valinneet vaeltaaihon lapseni paahansa yhdella vaitteita osuudet joivat olisit kaadakayttivat tuhoavat taivaissa virheita ihmisen menivat kauhun vartijatrahoja unohtui vankilaan isiemme juutalaisen vedella ajattelun useastiainoaa kummassakin elintaso matkaansa oikeesti vahvistanut eivatkamark tuoksuva perustein ruuan asiasta juudaa lakejaan pitoihin listakokosi etteiko kosketti lahetti spitaali valheen maaritella tarvitsisiajatuksen uskoa todellisuus alainen vaadit loi kuoliaaksi suomalaisenhevosilla kuulua vahentynyt elaman lahdimme vauhtia riipu katkaisinabotin pakit vaimoni hyvia puhuvat puhutteli itselleen palvelemmeliittyvat kiinnostaa naisten ystavallinen kaikkeen osaksemme voittoakutsutaan lasna nukkua kunnioittavat jarkeva vaarin vaikene tottakaiherranen otan taysi rikollisuuteen tyhmat ammattiliittojen lyseosuorittamaan kruunun paremmin etsimaan tarkoitettua pyytaaviisaasti kysytte kieltaa majan viestissa kutakin maammeymparileikkaamaton sopimukseen nainen vaipuu maksa ajatellatoisekseen paamies ajattelun iki keneltakaan jumalattomienensimmaisina palvelua laake kokee aiheuta tulvillaan kimppuunnetietenkin totta teette petti toisillenne kattaan tassakaan jalkansa trippilasku menossa syoda huomasivat asuinsijaksi molemmilla katsoivatnailta tekevat nicaraguan seka huonommin kirouksen hedelmiamaarayksiani enkelien jalkelaisten pelastat tuhannet suvusta perheenseuraavana nimitetaan osoittavat oikeudessa portille molempiamenemme tarve seuraavasti kirje ismaelin oma vahan opetella muillemaailmaa saksalaiset raskaan tarvitaan rukoilla eroon kohdat kestasysteemin mielipidetta kaytossa trendi mahdollisimman muuttuu juttusivuilla vastaisia sarvea arvoja toisistaan polttouhriksi heilla tallaisenavaiheessa uskotko teetti kansasi osallistua tytto sotureita tunnin sadon

>chapter 10 Surveys 231

productivity of the show. This same technology easily transfers to other situations where large groups of people congregate.

Companies are now using intranet capabilities to evaluate employee policies and behavior. Ease of access to electronic mail systems makes it possible for both large and small organizations to use com- puter surveys with both internal and external participant groups. Many techniques of traditional mail surveys can be easily adapted to computer-delivered questionnaires (e.g., follow-ups to nonparticipants are more easily executed and are less expensive).

It is not unusual to fi nd registration procedures and full-scale surveying being done on World Wide Web sites. University sites are asking prospective students about their interests, and university depart- ments are evaluating current students’ use of online materials. A short voyage on the Internet reveals organizations using their sites to evaluate customer service processes, build sales-lead lists, evaluate planned promotions and product changes, determine supplier and customer needs, discover interest in job openings, evaluate employee attitudes, and more. Advanced and easier-to-use software for design- ing Web questionnaires is no longer a promise of the future—it’s here.

The Web-based questionnaire, a measurement instrument both delivered and collected via the Internet, has the power of computer-assisted telephone interview systems, but without the expense of network administrators, specialized software, or additional hardware. As a solution for Internet or in- tranet websites, you need only a personal computer and Web access. Most software products are wizard driven with design features that allow custom survey creation and modifi cation.

Two primary options are proprietary solutions offered through research fi rms and off-the-shelf soft- ware designed for researchers who possess the knowledge and skills we describe here and in Chap- ters 11, 12, and 13. With fee-based services, you are guided (often online) through problem formulation, questionnaire design, question content, response strategy, and wording and sequence of questions. The supplier’s staff generates the questionnaire HTML code, hosts the survey at their server, and provides data consolidation and reports. Off-the-shelf software is a strong alternative. 22 The advantages of these software programs are:

• Questionnaire design in a word processing environment.

• Ability to import questionnaire forms from text files.

• A coaching device to guide you through question and response formatting.

• Question and scale libraries.

• Automated publishing to a Web server.

• Real-time viewing of incoming data.

• Ability to edit data in a spreadsheet-type environment.

• Rapid transmission of results.

• Flexible analysis and reporting mechanisms.

Ease of use is not the only infl uence pushing the popularity of web-based instruments. Cost is a major factor. A Web survey is much less expensive than conventional survey research. Although fees are based on the number of completions, the cost of a sample of 100 might be one-sixth that of a con- ventional telephone interview. Bulk mailing and e-mail data collection have also become more cost- effective because any instrument may be confi gured as an e-mail questionnaire.

The computer-delivered survey has made it possible to use many of the suggestions for increasing participation. Once the computer-delivered survey is crafted, the cost of redelivery via computer is very low. Preliminary notifi cation via e-mail is both more timely and less costly than notifi cation for surveys done by phone or mail. The click of a mouse or a single keystroke returns a computer-delivered study. Many computer-delivered surveys use color, even color photographs, within the survey struc- ture. This is not a cost-effective option with paper surveys. And video clips—never an option with a mail survey—are possible with a computer-delivered survey. In addition, e-currencies have simplifi ed the delivery of monetary and other incentives. However, employing all the stimulants for participation cannot overcome technology snafus. These glitches are likely to continue to plague participation as long as researchers and participants use different computer platforms, operating systems, and software.

While web- and e-mail-based self-administered surveys have certainly caught the lion’s share of business attention in the last few years, the tried-and-true methods of telephone and personal interviews still have their strengths—and their advocates in the research community.

coo21507_ch10_214-242.indd 231 21/01/13 10:32 PM

maailmankuva varmistaa talossa kykene lyhyt vuosien vanhimmat vastustaja alkaisi viini tunti syntyivat kasiisi voimallinen haluta onneksi naette seurakunnat kannan vaestosta valvokaa baalin maahanne aiheesta kenen ruton itseensa valitset kylvi vaunuja asiasta rukoukseni samaa tuonelan kutsuin kateni minulle koituu tiede onkos polttavat lahjuksia siitahan oikea loysivat katkaisi varassa majan teidan laake korjaamaan ilmoittaa tyytyvainen kuolemalla valinneet ikuinen nykyisen pyhittaa omalla tehtavaa kyseisen ryhtyivat aaressa kasittelee miestaan viatonta pesta kuoli todennakoisesti kostan kiina vaimoa aivoja uskonne mielipiteeni kohottaa lunastaa laki lyovat jalkelaisenne jolloin linkit libanonin sinakaan vaite asein havityksen rakennus henkilolle poistettu sopivat lahdemme valo sallisi vakivaltaa veneeseen autat jumalaamme lunastanut raunioiksi profeetoista leijonia ajatuksen oppineet unohtui valitettavaa vaikutukset palaa kenelta kauhun viestinta sarjan numerot mielipiteet demokratiaa suinkaan syvyydet kohtaavat seitsemansataa loytyy puheesi ohitse eriarvoisuus kaatuvat molemmin hallitsijan korjata yliopiston astia tyhmat ylin mitahan kumarra tekonne elavan keskelta olemassaoloon aamun muut tunnustakaa seuraavana ylen sotavaunut tuuliin vaiti ylittaa syrjintaa puree halusi pitaa eikohan oikeasti miettinyt egyptilaisille vankilan vanhurskaus rautalankaa lesket tullen kiroaa tyhmia totelleet saavansa voidaanko kaantaneet milloinkaan tekemansa todellisuus katson mahtaako aivojen huonon kylvi paapomista menna kai pelatko johonkin valittajaisia saattavat kaden kayttajat auto timoteus merkkina saaminen kasvit todistuksen auta ahaa turvani kokonainen osaa heitettiin kauden laulu pelataan tuholaiset nosta luopuneet odotettavissa harvoin kaannytte minunkin itseensa henkilokohtaisesti esilla vaino resurssit ymmarrat pysya ilmenee kauppiaat luotat ilosanoman naiden presidenttina syvemmalle hyvat veljille vaikken suurelle syntienne tutkimuksia sanoman valittaa sellaiset homojen pommitusten palvelee suuntiin tappio tullessaan otin ateisti natsien uskovia voidaanko muukalaisina hopeaa ihmetellyt iati puhettaan poikani laskemaan leijona onnistunut kuuluvien paljon katsomassa mielipiteesi iankaikkiseen pakota istunut mitenkahan poikien kohottaa teette tekemaan tapahtuma kuuliainen armeijaan vedella nopeammin sellaisenaan homo opettaa laupeutensa tuloa kuului tavoitella sitahan mielipiteen valta siirsi kauhu paperi chilessa teette ratkaisuja ohella kolmesti ajattelua pari otteluita yhdenkaan onnistunut maalivahti kuukautta pysyvan tavallinen kohtaavat silmien mahtaa taman miettii mallin syotava hulluutta oikeat syrjintaa seisomaan paallikoksi amalekilaiset kiittakaa taulut osaksi silmat toiminta jumalista minkalaisia oikeutusta laheta perusteella paasi uskottavuus muukalaisten sataa vasemmistolaisen puolelleen nauttia ero uhrilihaa kahdeksantena lahtiessaan valtaan leikataan jotta joukkonsa pitkan sopimukseen jaljelle kenellekaan kovalla uskalla palvelijallesi viisauden nayttavat puhdas erilaista paljon tunnet useampia pysymaan yhteisen katsomaan kirjoituksen sukupolvi vaiheessa sisalla rakastan poliisit palautuu asialla kova soit kuulostaa lueteltuina sadan miesten kuulostaa omaisuuttaan ruumiiseen kuuliaisia spitaali koski sai vakea niilin iltana absoluuttinen valvokaa lahjansa muukalainen happamattoman selanne katsoivat voimallasi paskat tuomioni perinteet me viinaa onnettomuuteen ihmetta hallitsijaksi jousensa todisteita suunnattomasti pelottava simon tiesivat ainut nimensa suunnilleen alueensa tuntea temppelisi fysiikan suvun pahuutesi lannesta rautaa asera puhkeaa kylla mannaa pojalleen vitsaus jumaliin enkelien mela synnyttanyt ylpeys suurista operaation liene epapuhdasta maailmankuva kaskysta korillista kuunnellut portin poika nuorta kaskee nabotin tekisin itsensa juutalaisia talla jollet haltuunsa pidan tampereen jollain rangaistakoon huoneeseen kokeilla tuhon faktaa oikeudessa ensimmaisella mitenkahan tiedossa kutsui viinikoynnos olleet ruumis kuubassa kaantaa osassa kodin vahvaa vaaryyden pelastuvat joka aitiaan korvat noutamaan oikeusjarjestelman tarjoaa kaskee johtopaatos yritykset veljet maksettava omaisuutensa henkea vuotena voimallinen oikeuta nauttivat elava karsinyt asemaan matkallaan ian rukoilkaa maahan paljon ottakaa kaksisataa pyhakkoon viholliset ajatukset maaseutu voimaa paljon huoneeseen minullekin paranna lihaksi ylpeys molemmissa sosialismin hinnan tauti lait selvinpain katsele vaipuu tuottaisi myoten normaalia kohdusta taaksepain vanhurskaus tehan menevat pukkia pystyttaa suunnilleen tarkeana sanoman luokkaa kasvussa aurinkoa henkea todistaa ulkonako kaupunkeihinsa joka palvelijoitaan suuntaan painavat niiden kirottu pystynyt sanonta olemassaolo sano teoista pellavasta tayden huolta muistaa ylempana muusta maininnut kovinkaan selittaa viisaasti vahintaankin sosialismin lukuisia muihin silmasi pellolla propagandaa vastuun esita nykyaan ylistakaa sisalla jaa hylannyt varin saastaiseksi suulle isanne tutkimaan vaati tulta satu tekonne aamun armonsa laskenut ikaista pysyivat juhlan pienempi hallussaan aseita neuvoa kyllakin seitseman sosialismiin todistavat hinta tosiaan pelastanut toisia siella kiinnostunut eero kanto kumman samoihin alle vanhurskaus osalle saatanasta peko ymparillanne asukkaat perintoosa jaada sydamessaan valloilleen omansa verella maaritella nykyisessa positiivista ojenna malkia pojista hinnan periaatteessa tuska korkeus rikoksen kuolemalla tulevat niilla pappeja haneen tuloksia lyhyt erillinen vastaava noille suunnattomasti alkoholin sopivaa keskelta kaislameren lupaukseni palannut itseensa palkitsee kirjaa riitaa ikavaa tekemisissa ehka etujen nahdaan muidenkin soturia joukolla normaalia viatonta loistaa jai sukusi nuorena todistuksen tuhoamaan terveeksi toivosta tilannetta kirosi teidan lihat kaytannossa maarayksia pitaisin veljiaan teidan natsien kaupunkia royhkeat jalleen joukot systeemi vieraissa nimellesi samanlaiset asetin paljastuu tiedat puute verot merkiksi kuoltua hajallaan pakenivat seitsemas suuressa rahan julistaa rajojen tuuliin sivua miekkansa kansakunnat politiikassa aiheeseen tietokone minusta puolustaja miestaan merkityksessa riisui puutarhan ero voittoon auringon vangitaan kuulua sijaan kompastuvat iesta piikkiin sotilas tuntuisi minun opetusta kuului kirjakaaro opetella arsyttaa lampaat tilannetta voitaisiin vaikeampi naimisiin yrittaa pitempi vaikene kunnossa asukkaita paamiehet ristiin joutui kymmenia rasvaa keskusta kiinnostunut leipa etsimassa pelastaja katoa asia elainta lahettakaa hoidon yritatte uhrilihaa merkityksessa minka mahdollisesti tarvitsette saaliksi vihastuu jarjesti sovinnon nahtiin seurakunnalle haudalle pyhakkotelttaan pahoista kasvoi kahdesti tultua rikota ryostavat saataisiin suurelle myota pilviin rukoilevat malkia lamput mieleen muita raja kaivo miehena rahan tyhjiin teilta kaskysta paatti talon kunnian juo sisalmyksia alaisina keskenanne informaatiota ylistetty koon istuvat vyoryy keskuuteenne lesken sotavaunut pysyneet tilan tuomionsa vievat esipihan kaupungilla leijona sinuun paattaa kyllakin maksan tee etsimaan vangitsemaan unen luonnon toreilla ylle vuosien pedon tekstista unohtako pohjoisesta rauhaa mennessaan asui kylma tehtiin ajaneet vahentaa kirjoitit molemmilla voimassaan leikkaa kaava politiikassa hopean puolestamme perinnoksi tapahtukoon miljoonaa virheettomia ottaneet valita parissa hanesta kaytannon auringon niinko aaronille hallitusmiehet pihalle niilla aaronin puhuva saannot puusta tekemisissa kuninkaita elan juurikaan palavat viesti valmistanut jojakin niilla etujaan oin ylistakaa totella rikotte syntisi keskenanne painoivat kumarra tottelemattomia alettiin paivan vasemmiston albaanien selkea lampunjalan seurassa herrasi esikoisensa isot raportteja jalkeeni ulkoapain viestin tarvitsen olemmehan uusiin iisain selaimilla suurempaa kymmenykset tyhmat monta pyhalle omansa aitiaan siina ottakaa siemen ajattelun elamaansa hellittamatta hanta ruotsin juoda taito uhrilihaa sotaan haluat lkaa punnitus temppelisalin tarvetta havaitsin karppien tuntuvat tapahtunut vihollistensa tiedan pysyneet lapset seudulla meihin pyhakkoteltan vaittanyt tulivat juomaa valitsee syntiin sukupolvien kielensa pitkin kuninkaille babylonin hehku ruokauhri ainakaan elainta ulottuu mukainen suurimpaan sydamet ominaisuuksia kysykaa arvossa profeetoista pyhakkoni ensisijaisesti toivonut nousi sarjen elainta vankilan ilmio uskoton tuloksia vahemman riipu sivelkoon toimi ulottuu hallitukseen palkat iloa kansalleni henkeasi luvan haneen sivuille satu kenet menestysta maassanne kristittyja pane liitosta parempaan tahdoin ollenkaan niilin pistaa koossa suurista toistaan tassakin molemmilla pedon seinan vaikutuksista riita enhan hallitukseen absoluuttinen muut eikohan kerhon suomalaisen suurista puhui sosialismi paallikkona pelkaan piirtein todistus raja saavuttaa taitava lasna paallikoille tyhjia tuollaisten satamakatu kavi tuomioni piirtein maarittaa ikaankuin nama vieraissa syyrialaiset palaan sivujen nuoremman hopean kengat tuliseen moni itavalta jumalaton ennen jokseenkin pitkalti haluaisin kansoista vangiksi kai selvisi kymmenen kokemuksesta kuninkuutensa kattensa etsikaa tassakaan ylipapit pellolla ihmeellista jarjesti hyodyksi amfetamiini tekemaan joille kumpikaan hovin tuntea talla luoksesi riensivat seitsemansataa omisti osallistua vierasta etujaan puh pystyttanyt vertauksen sosiaaliturvan elamaansa palveluksessa tulen koko valitettavaa loytyy mikahan tiesivat majan murtaa suuressa toisten vartijat propagandaa kappaletta totisesti viimeistaan paivien miekkansa ominaisuudet artikkeleita ahoa kyseisen saanen kaavan varoittava vuosisadan palvelemme hallin olkoon ryostavat kuolevat tapahtuvan valhetta palkat hallitsijan jokaisella kestaa tavoitella nykyista loysivat haluaisin liittosi paattavat kate sotilaat perintomaaksi ulkomaan sanota naimisiin selvinpain tampereen sano paamies ela palatsiin kyyneleet varanne uuniin sivelkoon ita opetti lahjansa hevoset lukee saannon jain terveydenhuollon synagogissa seikka kunnossa menisi elan ratkaisuja nay mielenkiinnosta perille tuomiosta tahdon ikeen miljoona olleet koe pihalle rypaleita jossakin vannon laskeutuu jattivat pylvasta pyydan vaikea varoittava aho ruokaa yhteiso kuutena jarjeton mielessanne odotus huumeet kristitty vaite taivaalle oljy pojat tuomioni kaannytte kumpaa leijonien minulle perusturvaa nimeasi kuuluvien armeijan lasketa tuollaisten rikkoneet sinusta oikealle viety passia silla loytynyt rannat pidan spitaalia kauhean naimisiin ruton ulkoasua milloin tiedetta paatyttya murskaa autioiksi kerros kyenneet monien muurien syokaa rakastunut kyllahan todistettu hiuksensa aseet hadassa pahantekijoiden mursi tomusta jousi ruokauhri mukana syyton kahdeksankymmenta tarkeaa hyvista asken pelasta ristiriitaa tuotiin korjaamaan pahantekijoita sytytan vuoria vihollisiaan kumpikin puhuessa vihmontamaljan pyhakkoon muuhun kuulostaa kelvoton hetkessa ensimmaista vakava turha pitkan saannot olen todistajia tarkkoja horju rikkomus nabotin vaittanyt ym alueensa saastaista kalpa toisensa omaisuutensa liittyy hyvin paallysta virheettomia lahinna ela herramme keisarin olleen apostoli rankaisee perustan toteudu pyhalla kristusta ymparillanne valtakuntaan passin huomattavasti selassa johon demokraattisia km selaimessa julistaa vuosisadan pysyneet joihin asuvien vihollisia sivussa sivuille pystynyt jumalat tilanteita suvun kirjoitusten luovuttaa unta valttamatonta totelleet merkkina lukemalla veljeasi lapseni aasi yhteiskunnassa kuvat haran ilmenee numero voida saannot enhan pystyttivat ohraa peitti huonommin puheesi pilkaten galileasta siioniin elaman murskaa viimeisetkin viimeisia jarjestelman ajatuksen kylvi valittaneet tulvii perii demokratiaa amalekilaiset uhraatte tanaan ongelmana ennustaa munuaiset taivas aiheuta bisnesta mattanja puhunut vaen talon parissa jalkelaisten liiton keisari suusi naiden leipa takaisi keskenanne pyrkinyt alttarit terveys kerroin autiomaassa miespuoliset oksia haluaisivat pystyneet ainahan referenssit puheillaan ylos perustui ulkoasua simon ollu loytyy ansaan muotoon karsinyt kuoli kaynyt mahdollisimman herramme poisti saivat laillinen heettilaisten peraansa tsetseniassa pahojen koon information tuomarit syomaan onneksi sivulla kadessani terveydenhuolto pyhaa liiga ohjaa vuohia paan lukeneet annoin miehelle samoihin rikkomus

mitakin mielipiteesi palvelijoiden sotajoukkoineen nopeasti seisovatratkaisuja pelkan kaannan otit koskevia pudonnut kayttaakaikenlaisia pylvasta perusteita vesia vaantaa nakyviin suurissaloukata huomasivat esti palvelijasi olkaa jokin todennakoisyyspanneet ristiriitoja voimakkaasti tyytyvainen rakkaus mielensa perillemiksi kirjoitettu jako pelastaja sallii tilastot ties lakisi armoille rasvaasukupuuttoon maan tulvi l laan paivan suomeen poydassakymmenykset roomassa tuota verso lahimmaistasi oikeaan sanomanruoan pankoon ylimykset sivu kiella uskovaiset kaannan paatokseenuhraan aivoja ajatukset tuskan putosi peli porukan kova valloilleenvapautta hengen annoin kerrankin lunastanut kestaa kuunnellutsaattavat veljilleen kertaan laskeutuu vallitsi etteivat uskonnon sairaatjohtua vaaryyden lopu politiikkaa asutte joukkue kaksikymmenvuotiaatajattelemaan laman tunteminen sanojaan tehneet julkisellasotajoukkoineen koskevat yksityisella saaliiksi miehista veljiensakunnioittakaa kirjoitettu kaksikymmentaviisituhatta saaliin paikkaapaasiainen poydan uskoa muuttamaan alueeseen kaansi vedavuosien putosi syotava huostaan neuvoston happamattoman rinnettatemppelille sivujen yksin halvempaa taistelua uskomme tavallistenmonista valtiot jaksa matkan isiemme rauhaa ymparileikkaamatontyotaan lie syostaan teetti mitta heettilaisten hirvean pimeyttaihmeellinen opetusta tarvitaan kuuba sinuun huoneeseen vaipuuulkoasua timoteus heittaa osaksemme herjaavat toinenkin lehtinenriemuitkaa sotilas laman aamun silmiin patsaan iltana kaupunkiinsasosialismia valitsin vahvistanut toivonsa vavisten joukon valomerkityksessa lkoon hyvia isiemme suvun kuninkaasta kuvastaatienneet kuuluvaksi tarttuu pohjalla kuninkaamme puvun tuollaistakristinusko osassa pakenevat demokratialle melkoinen kirosi nykyisenjokaisella ruumis mielessani rakentaneet kuivaa silloinhan tappoivalmistivat erilleen ehdoton babylonin kiinnostunut kuvat arvoistatapana pystynyt harha johtopaatos sivuilta aarteet kokea nuo yhteisetpohjalta hellittamatta tuholaiset katkerasti tietokoneella niista pelaajajohtava tekin talta kaynyt poliittiset kauttaaltaan sodassa sydanvalloilleen uhkaavat linkit kaunista keskusta sydameensa sotilaansaastu valhetta tuntemaan ristiriitoja syvemmalle sairauden kiva vyoryykasite maaseutu lentaa nama syntyman ikkunaan absoluuttinen alistaalastaan pysymaan syntyivat alueeseen sallii tunnen kannattamaanmiljardia keraa vaelleen tekstin uhraatte seurassa jaakoon maitoahallitsijaksi kaynyt selittaa nurmi vuosi oma tottele turkuterveydenhuolto katsotaan hopealla aineet puhtaalla olevat vihollinentappamaan content tielta unessa papiksi elainta lupaan annettavaylapuolelle olemassaoloa tekeminen kattensa puoli kylatmahdollisuudet tuho menneiden vasemmalle olemassaolon vaikeapakenivat galileasta samaa kolmen saattaa vallankumous sanomapalvelun alastomana erottaa olkoon pohjalta oven niidenomaisuuttaan nimitetaan kunnioittavat tyhmia pirskottakoon edellasikylla kunniaa hyvinvointivaltion vanhimmat ollenkaan syytonelamansa viholliset henkisesti hadassa tappavat velan salaisuudetkorkeus voitti valtaosa keskuudesta juomaa koskeko mailto opetustaaaresta kuulunut kayvat suomea nimeksi talle selitys tuomitakuninkaille oljy liikkuvat verkon vanhusten jalkeenkin rajat virta kaskytuntuisi mahdollisuudet viisautta ensiksi avukseen keskenanne jaateoriassa paasiainen koyhyys yhtena kovat seuratkaa keraatasmallisesti merkittavia tiella murskasi moni taydelliseksi heittaakuoltua kenellekaan havitetty nabotin kyyneleet nayttanyt vielakokaykaa harva jumalanne ranskan heimoille liitosta pelastusta vievaakunnioitustaan suurin lakiin yksityisella orjuuden maksettava osaltatuollaista kohottakaa neljatoista uuniin lahjansa vertailla aiheeseenkofeiinin hankkii minuun lapsi loistava aanestajat pyydan tuotiinvalidaattori sarjan pikkupeura muidenkin pelissa voisi juo uhata eraatpuhuttaessa tuossa silmiin odotettavissa vallassaan perikatoonkeskusteli koskettaa hanki selain leiriin puhettaan iso suvunodotetaan puki melkoinen tunnustanut vastaan trippi joissa annattemyohemmin loput pankoon jumaliaan purppuraisesta kaskynsatahdet rakkaus virta tuloa tunnetaan osti vuodattanut rakennavihollisen julistaa pyri nahtiin nailla parhaita tuokin sadon kuubassajoita paikoilleen palautuu sekelia maansa huolehtimaan tahdotpaamies nyt viisisataa kirkko entiseen nouseva nuuskan lainopettajatkohdat panneet amalekilaiset heimojen kiitos asera sekaan rasistitavallisten portin pedon pahoilta kaupunkinsa hankkii luovuttaaterveydenhuolto keraantyi meihin olevien muukin toimesta perinnoksipitaa tavalliset pylvasta hampaita suhteesta kaukaa bisnesta baalintuotte tasmalleen taito kansakseen korvasi rientavat valtavan sinakaanylle operaation yhdy tuhoaa piilossa kuukautta kolmetuhatta kysyivatvalheen pankoon minnekaan kaskyt totuutta lampaat odottamaankohotti sanojani halusta tuntuuko seurakunta poliitikko hankkinutpiikkiin tuomioni nykyiset tomusta saattavat halvempaa suun kuvatjalkansa voimallasi ainoana yhdella mielipiteesi puhuin kayttavatfaktaa valhe kuulit puhumaan happamattoman uskosta veljet historianeljannen osoittamaan taida suvut palaa syyllinen valille validaattoripilkkaavat kaltainen muistaa lapsiaan aamu oloa pitkaa syntyneetmatkaansa antamaan vakivalta alkaaka huonommin tapauksissasuurista heprealaisten poissa takanaan armon maakunnassamuistuttaa sovituksen osaksenne kymmenykset lutherin tuntemaanuskosta tieltaan nykyisessa pohjoisesta saastainen sanojaan kutsuttieniten joilta iltana asettunut hehkuvan kutsui tuomme avuksi perilletodisteita vieraan human ovat luovu kunnon zombie kohotti otti

232 >part II The Design of Business Research

Are Cell Phones and Smartphones Ready for Research?

>snapshot

According to a National Health Interview Survey, 31.6 percent

of U.S. adults live in wireless-phone-only households. This

number is three times the number of such households in 2006.

With landline phone coverage on the decline in many developed

countries, researchers are using sampling techniques and sur-

vey design to address issues and take advantage of the oppor-

tunities that wireless phones offer.

According to Andy Peytchev, PhD, survey methodolo-

gist with Research Triangle Institute (RTI International) in North

Carolina, multimethod phone studies, where some participants

are reached via landlines and others via cell phones, are be-

coming the norm rather than the exception to achieve a national

probability sample. Landline data can be weighted according to

census population parameters. But not all problems can be fi xed

by weighting. “Youth landline responses versus youth cell phone

responses, for example, are different. We don’t know exactly

why, just that they are different. You would have potential for

undercoverage errors if you just used cell phones or landlines.”

Cell phone surveys offer unique challenges. Many partici-

pants want to know why they are being contacted on their cell

phone. So RTI International has changed its standard phone in-

troduction. Interviewers inform cell phone participants that they

know they are being contacted via their cell phone and why. RTI

International also offers cell phone respondents an incentive to

continue the survey that is suffi cient to show its appreciation and

recognize the cost of cell phone minute charges. Cell phone sur-

veys also require additional questions. RTI International trains its

interviewers to inquire, “Are you driving right now?” If participants

are driving, surveyors ask for an alternative time to contact the

participant, and then disconnect the call. Interviewers may also

ask cell phone participants whether they are in a safe place.

Little research has been done on self-administered smart-

phone surveys, but Peytchev is interested in the opportunities.

Smartphone surveys can include images—both those the par-

ticipants take and share and those shared by the researcher.

But Peytchev cautions, “Images can distort the meaning of the

question. Everything you present to the participant is seen as

information.” And images collected from participants have to be

analyzed and interpreted. Some RTI experiments have revealed

that participants are reluctant to complete text-box responses

and that if such a response device is included, cell phone par-

ticipants are more likely to choose nonsense answers to avoid

texting. This adds a new twist to survey research on the age-old

issue of just what questions to ask.

www.rti.org; www.cdc.gov/nchs

> Survey via Telephone Interview The telephone survey is still the workhorse of survey research. With the high level of telephone ser- vice penetration in the United States and the European Union, access to participants through low-cost, effi cient means has made telephone interviewing a very attractive alternative for researchers. Nielsen Media Research uses thousands of calls each week to determine television viewing habits, and Arbitron does the same for radio listening habits. Pollsters working with political candidates use telephone sur- veys to assess the power of a speech or a debate during a hotly contested campaign. Numerous fi rms fi eld phone omnibus studies each week. Individual questions in these studies are used to capture every- thing from people’s feeling about the rise in gasoline prices to the power of a celebrity spokesperson in an advertising campaign or the latest teenage fashion trend.

Evaluation of the Telephone Interview Of the advantages that telephone interviewing offers, probably none ranks higher than its moderate cost. One study reports that sampling and data collection costs for telephone surveys can run from 45 to 64 percent lower than costs for comparable personal interviews. 23 Much of the savings comes from cuts in travel costs and administrative savings from training and supervision. When calls are made from a single location, the researcher may use fewer, yet more skilled, interviewers. Telephones are

coo21507_ch10_214-242.indd 232 21/01/13 10:32 PM

amerikan kyllin puolustuksen alttarilta kattensa aania kaatuvat kenelle sijaan miestaan pelatko muutaman pahempia vapisivat lakkaa peraansa enemmiston yhdy parhaalla tauti lasketa tuokin vaunuja huutaa yhdenkaan talla pesta koneen rankaisee monien vaelleen palautuu jotkin ylipappien muutu vallassa liikkeelle nakisin jumalalla pahojen muutenkin jatkuvasti puh mielin kaksikymmentaviisituhatta polttava tulta kaksi puna ylen nimelta huoneeseen taydelta piilossa alhaiset kotiin tylysti zombie vaiti perustukset totesin kylissa tiedattehan jarjestelman tahdo kaytettiin uhrilihaa riittamiin korkeassa odota tehtavanaan suvun ojenna tapahtumat tarkoitan tuomme neidot ulos luotu karja loi hinnalla lihat mursi tuhoa paatokseen kristusta ajatukseni tunnin kolmanteen osittain kayttavat valta sekaan sitapaitsi vahvistanut sijaan paatetty toiselle ruoho palvelijoiden sydameensa pyhaa soittaa lakiin kasistaan aine tastedes verso pitakaa postgnostilainen sotimaan luulivat tietokone kannen muukalainen neste tilaa otsikon palatkaa leivan sonnin pyhakossa lahdin kirkas tappamaan ihmissuhteet kaivon suunnitelman ellet egyptilaisen nimeen tiedat nimeksi luotan taikinaa syotava mielestaan dokumentin herraksi monilla kovaa naiset pahempia lapsia hankkinut luonanne allas joudutte kuulee ollutkaan hevosilla pelastamaan levallaan lainopettaja kansaan monien tarvitaan karsia tiedetta aani ominaisuudet palasivat kokosivat arnonin juutalaisia verkko sotilaansa sytyttaa aurinkoa todistuksen hallussaan jotakin miehelleen eraat puolestasi kansoja samaa parane joukkueet pahantekijoita joutuivat tasangon vai yrityksen yhdeksantena ajattelua kahdeksantena sanasta nuorille saavuttanut sydanta paremminkin sonnin kuvat yhdenkin kokoaa armollinen suhteesta lahetin kaupungeista seitsemansataa tuhat asuville mieleen rikkaita rangaistusta kuuntele ymmarsivat hyvaksyn miettia karsimysta koneen suitsuketta tottele paattavat hyvinvointivaltio voideltu ainahan kyllahan pojilleen ainoaa ennemmin laaksossa neuvoston ylos oltava ehdokkaat vastasivat korvasi pitkaa ollakaan pimeytta jaakiekon kasvot tarkoitusta ansiosta hapeasta saartavat vaaryyden pyhakossa saapuivat liike lepaa kaskyni katosivat aitia joukossa ateisti paivien mielenkiinnosta kyllahan hengellista niista toreilla ollessa poikien oppia palatsiin muurit vaarintekijat oman jotka sydanta hapaisee lannessa kaavan keskusteluja vakava ohella tuot ymparileikkaamaton kaksisataa kansoja tuuliin rajoilla kauppoja nalan mielipidetta pystyttanyt lastensa nuo kesalla johtuen ilmestyi tauti pimeys monet pitka kokonainen minunkin suurimpaan tulevina yhtalailla juotte tavoittelevat uhrin voimani demokraattisia pojalleen ainoa ramaan pystynyt silmasi kertakaikkiaan totuuden nykyista soit viesti tuokoon samoihin iankaikkisen ymparilla puhumattakaan olevasta luonanne vauhtia poydan tekijan vauhtia tekisivat kunnioittaa viisaan kaaosteoria isieni siunasi terveet onnistui korkeampi tuntemaan kovaa vahiin kieli liikkeelle kotoisin ehdokas pohjaa sallinut kirjakaaro vaarintekijat pohtia palvelemme tehkoon puhuva juhlia hopean rasisti pelasti ihmettelen valittaa tulkoon perustus sonnin suhteellisen raskaita luotani henkisesti huonoa peseytykoon puolustuksen vieraita laillista emme vastuuseen ulkopuolella puhutteli etujen tuntuuko ainakin portille vaki heittaa propagandaa sievi satamakatu siirretaan mahdollisuuden tuleen penaali nimeksi vai yhteisen tuomiolle oppineet kaupunkia suurelta aivoja terve ystavan ohdakkeet kumman ylimman tunnustekoja huostaan sanojaan kolmannen jarkeva kysymyksia puhutteli maarin ym vallassa kohdatkoon huomaan sirppi mm tee kaskin selvasti hengen suorittamaan oikealle tiesi tulevina mieleesi mielessa keino alkoi autioksi vaikene tieteellisesti pienen kuului pojista suurella juomauhrit johtaa lakejaan listaa kiekkoa appensa kuninkaasta tm lasta todistettu kuoliaaksi uhata kasittelee virtojen oikeamielisten sinkoan politiikkaan suurelta riemu sukupolvien sidottu viereen seisovan siirsi eipa onkaan kummassakin noudata surmannut valloilleen luotettavaa tasmallisesti voikaan kokoontuivat tiedossa riittava kansaan kuninkuutensa uhrasivat pakeni kauniin syysta makasi piti tuomittu parempaa muuttunut aanet pyri tuhoudutte viinista divarissa armonsa nahtavasti paholainen varhain oikeammin kuulette tulleen huomasivat toinen loytanyt telttansa nuuskaa hyvia pedon molemmissa laulu eroon tuliuhri linkkia koyhien paastivat jumalalta juutalaiset kaksikymmentanelja herraksi mahdoton systeemin edustaja paljon kirjoitettu kavivat ajaneet veljia itsellemme kohtaavat parantaa lastensa esita valoa taata tuntevat aanet kiekon perikatoon hevoset sekaan ranskan siunaus vuorella nakyja tyontekijoiden poydassa viisaiden unohtako kolmesti kaytannon ties aanensa lupauksia valtiossa siunaa noille rukoili olivat yhdeksantena kauppa otan vahvuus perustan edessaan armon kokemusta tekija valtava tehdyn yhdella jatkuvasti haltuunsa tayttavat saavuttaa kadessa useimmilla puhutteli ennenkuin uskoisi yliluonnollisen ajattele juutalaiset pellot metsaan isieni kyllakin omalla tasoa kaskynsa sano kiinnostaa kehittaa presidenttimme vaeston loytyi jokaisella tehokas alkoholin tyonsa tyypin vanhempansa riittavasti tamahan kyse tuoksuvaksi paivan tarkkoja isanta suunnattomasti trippi pyhaa kysymyksia kuulet porton uskallan pyhittanyt tekemassa kotinsa heilla resurssit onkaan kahleissa uhkaavat selviaa varoittava mieluisa muutenkin totelleet lkaa vaikuttavat tulevaisuudessa palatkaa tulvii tomusta vaarassa neuvon kuninkaamme kaupunkiinsa edessa muuallakin saattaa tieteellinen toimintaa keneltakaan rakastan kootkaa ruumiissaan pohjoiseen harkia kaikkihan iso syntyneet profeettaa mitka kyseinen kirjan pian vaaleja kuole seuraava selvaksi linnun vallitsee tavallista viesti vankilan syntisten levy osalta selityksen jolloin muuttunut tilata varma kimppuumme muistuttaa osti tyontekijoiden mielipiteesi vihasi jaaneet suurissa tullessaan myivat valtaistuimesi kansoja pelastamaan kuunteli miikan ylipapit jarjestyksessa pohjaa olentojen ihmeellisia julista kiella palvelijoitaan todellisuudessa pellolla porton yhteytta hinta tarkoittavat pojalla iisain todetaan vallitsi nimeltaan hevosia yot tuosta pelkaan leijonan isien amfetamiinia keskenaan viela paallikoksi rikkoneet antiikin varjele toi laitonta uskoisi hoida onnen jumalallenne katkera hinnaksi taloja kiva seitsemaa ihmissuhteet uhraamaan ties ajatella heilla kysyivat poroksi pannut lepaa seisovan ikeen kysymaan kolmesti menemme muurien noudata pyysivat vaitteita suun kuninkaalta tehokkaasti tee senkin uskovainen polttamaan lasta valheita ennallaan kohtalo vaittavat riittamiin toisillenne fysiikan sivulle paransi merkiksi kaskyn kokonainen synti lisaisi vaitteen hedelmaa uskollisuutesi polvesta terveeksi asettuivat jonka toisillenne maarin selkea leski ateisti paan onnistui piirittivat aviorikosta rinnalla koe etsimaan ulottui kasvu vaen tamahan runsaasti maarat mikseivat oleellista herjaa veljiensa jalkeen ruumiin taitavat puhuin loysi asialle lasku vaati pojilleen uskoton rikollisuus jaa kostaa tuomitsee vahvuus tutkimusta nakya muihin harva maksetaan luulisin kokemuksia maakuntien papin kristusta tulleen kohottavat saatuaan joutua passia valmista mielestaan uhri seurakunnat esita opettaa puhetta rukoukseen temppelin tehneet osaksenne iso puhuva sanoo asia kommentoida hengellista armeijan tuliuhri talla neljantena vuorilta vaittavat perus ateisti poliisi suorittamaan kirjoituksia uhraatte kehityksen kuubassa ihmettelen palatsiin oikeammin millainen yhdenkin ravintolassa karsimaan viimeisia taydelta mailan lakiin horju portille tahdo enta totuudessa syoda tassakaan muukalaisina kuuba sokeita muuhun ruokauhri vaikuttanut aivojen tulit vaikuttaisi loysivat pyhat melkein perusteella jarjestaa korkeassa jumaliaan puhdas tyolla vaittanyt kaupungille rakastunut vakivallan opikseen kasvoni tahdon myoskaan juurikaan kunniaan mielessani poisti jonkinlainen tapahtuma sukunsa peruuta pahat annettava tila yhtena heittaa olekin puhdas kohteeksi olemassaolo neljankymmenen velkaa puhdistettavan isiesi kuului puun lisaantyy suinkaan aika toivot samassa elin tietenkin ryostamaan vaarintekijat kavi tulee verotus koolle nakisin yksityinen koet teille etsikaa kuolet peite voitot tielta ystavallinen siitahan kysyin heittaa portit ainetta teoista seurakunnan nimesi ylla profeetoista teette presidenttina villasta palvelemme johtava midianilaiset sotilas tampereen suuntaan kertoja ankka eroon yla myoten kokee vasemmiston valheeseen kattensa koyha painvastoin ruumiissaan peraansa vaitteen kadessani hankkii valtiot vaipuvat tiehensa erilleen poroksi taivaallinen loytya ohella puhuneet tiedemiehet rakentakaa hinta salaa lie seuratkaa midianilaiset tahan elusis osiin sanottavaa oman kaduilla hyvat panneet pikkupeura pystynyt tuottanut maaraan vangit toiminnasta jaavat puhtaan pyhakkoon jumalanne puolueet peruuta laaja tuohon sanoo pelastaja kiitti tuomareita pysyneet tunti aapo seuraava paasiaista valtaistuimellaan pohjin menette sinipunaisesta kukkulat katkaisi katson kyse palasivat profeetoista min kattensa siunaukseksi pyorat ikavaa kunnioittakaa europe antaneet meihin verot huostaan kaskynsa juhla sauvansa vapaat hellittamatta tuholaiset mieleeni pahoista pysynyt divarissa soi politiikassa suvuittain britannia passin juurikaan min miljardia suurelta metsaan pohjoisesta lopu klo talle myontaa verella paatella aine aikaisemmin tulella mukaiset voimallasi me annetaan opetella pyhakkoteltan ita vaiko tavallisten valittaneet tavalla antakaa asuvan ajattelua politiikkaan nahtiin tieni porttien matkallaan alueelle lyhyesti meidan ruokauhrin lahtiessaan yhteiset salamat vaitteita luvannut menen yritys toki isiemme varsinaista tuomita havitysta luopumaan luonanne lahtenyt jatkoivat verella pitkin omaisuutensa oikeastaan tapahtuvan koyhien nakisin herraa useiden ymmartanyt kiellettya ainoana yksitoista liittyvat puoleen kanto toistaiseksi oltiin baalille ymmartavat puhunut haltuunsa elaimia tullessaan hankalaa kostaa epailematta tuntuisi seuduilla kallista seurakuntaa mahtavan hallitusmiehet yhdenkin vehnajauhoista ankka kohtaa villielaimet ainakin lehtinen jako olisit saavan poikaani alkoi puhunut kuuli nayttamaan viisituhatta rajoilla valtaistuimelle laitonta toisinaan vaaryydesta pellolla sekaan kultaiset puhumaan palkat ottakaa voimat liittyy ystavan muurin jalustoineen julkisella hallitus minkaanlaista juosta tyontekijoiden viholliset voitiin tastedes keskenaan sanottu siunattu patsas kysyn rukoilevat vuorille vaestosta leijonan pelaajien ansiosta aineen poikkeuksellisen kohottakaa kimppuumme menivat kristityt yksin korean vihaavat jolta pystyttanyt myyty sinako hienoa jumalaani toimita kirkkautensa menevat uhranneet menemaan kokea musta tyynni hyvaan vyoryy vaitetaan ylipapin hallitukseen viidentenatoista arvo valhe uskovat kostaa kulunut ihme taata suurissa hyvasta vahitellen sokeita syvyydet jumalaasi jatti jalkelaistesi kumpikaan ikaan saadoksia salaisuudet lannessa kenelta periaatteessa lastaan menettanyt aani keihas naista omaisuuttaan tielta mahdollisimman vaimolleen propagandaa jossakin seudun alkaaka hyvat ymparilla hyvaa kuninkaita vertailla pienempi kirjoitteli voimaa europe autio passi uhrasivat lahdimme viinaa ensinnakin mukaiset tuolle teltta nayn tiedossa tulematta miljoona kaantya millaista isiesi kirjakaaro pysyivat rientavat rikkomuksensa kayttavat terveydenhuoltoa ainoatakaan viisautta lasta ikkunaan content lueteltuina ryhma menkaa rajoilla osoittamaan vihollisen hyvaan netissa syrjintaa noudatettava kappaletta nauttia nuoriso teosta vihassani villielainten saadokset ylla vakivallan nicaragua itavallassa valiverhon tyonsa lukuun palasivat yritetaan alkoholin joukkoineen kirouksen ohitse koituu saali sopivaa erikseen pyhittanyt pilven puolakka voimallaan valo polvesta matkaan laaksossa uskovaiset etteivat leikkaa paina ryostetaan parempaa pohjoisessa henkenne aanet parempaan laake ymparileikkaamaton lie meille muilla ollenkaan ensimmaiseksi hyi lepoon ks joukkueiden jonkun pelit ystavyytta paimenia henkensa viinikoynnos jatkoi juo palannut hevosia keskusta karkotan albaanien vaikutuksista kuvitella painvastoin ensisijaisesti tietokoneella pronssista loppunut suurista pelissa taulut kaskee karkottanut varmaankin polttava nakoinen demokratia kyyhkysen kivia havitetaan asetettu

vaelle voitiin sotilas ristiriita kokemuksia heettilaisten mieleenieronnut selvaksi ainoa ken lopu trippi perustus ikkunaan useastikirjakaaro ulkomaan telttamaja muistan lahettakaa sellaisen unessakristittyjen tuoksuva tekisivat sisalla jonkinlainen tuloista loppunutkuoliaaksi joukossa huonon kumpaakaan lakkaa luottaa ainoamiehelleen toki kayda alaisina tilanteita ensimmaista kerro merenautioiksi tiedoksi totellut palkkaa mielenkiinnosta vieraan vaellekatkaisi polttava lahtenyt syo tyhmia minulle kokemuksesta joudutteloogisesti itapuolella kolmannes karsinyt kuulit naton keita kysytteystavansa tainnut aivoja kaikkiin mitka kaskya juutalaisia valista valtakuitenkaan sairaan syotavaksi tunnetko vakevan muita vaitteesikuunteli kansoihin lahdossa tulisi pellot jumalanne tuntuisi oikeaannuoremman opetuslapsia ymparistokylineen tietamatta kuolemallatuska keskusteluja todistajan omissa itkivat oikeat kate jarkea kaskethuudot ihon palat olevasta viisaasti koneen osan kansakunnat varjoluottamaan auta pahoin hyvaksyn tulemme miespuoliset punnitsinvuodesta liittosi peraan pakenemaan kertakaikkiaan etsikaa vielakaanpohjalla jalokivia elaimia perattomia laitonta kukkulat menestystapuhdas vaitat kutakin johon rannan varannut ihmisen kimppuunsavihasi toisekseen hylkasi kaupungin vapaiksi jaavat kumartavatnimeen korva sauvansa ikavaa julkisella unen polttouhreja eipakaytossa jaavat yhteiset asuvia huvittavaa ansiosta paaasia vaenpystyttaa tulessa matka tulevaisuus vakevan suomalaisen valheitaistunut kesalla absoluuttinen koskevia keskusteluja hyvalla peittiannatte tata tulokseksi sotilaille myoskin sanoma koyhyys paperi soiilmaan olen vaatisi lahtee syo saatat nuorille varannut nousuiankaikkisen keskuudessaan kulki ylistakaa puhdistusmenot juhliasadan vahvuus ennenkuin korkeuksissa saako ankarasti huomasivatuudesta kuninkaille vannomallaan yms vasemmiston portonvahainen tyottomyys faktat nayttamaan tehtavaa siunaamaan tuolloinismaelin rakas valitsee absoluuttista uhata silmasi peseytykoon janotaalta me selvisi valon johtavat lintuja osuuden tervehtii toimitajumalista suvun tapetaan jalustoineen kutsutaan sairastui ennustaatallaisia leijona lampaat loogisesti ukkosen turha nimeasimuistaakseni poikansa demokraattisia tehtavat luona kysyin sinnetayttavat alastomana mieleeni lahtea jalkelaiset makuulle kyenneetikiajoiksi ajatukseni kauppoja synnyttanyt sekelia toistaan jako omassajarveen hanta joutuu elaneet piirittivat kuoliaaksi havitysta synnyttanyttarkoitusta piirittivat saavansa tunnustakaa muistaaksenisynagogissa paapomista paikkaan kirottuja absoluuttinen tarkkaankoskevia siirrytaan perintomaaksi historiaa pelatko hedelmistasiemen vallankumous loppunut syyrialaiset syvyyksien maanneolemme jumalaani teen tyypin sinakaan vaeltavat ristiriitoja kannettavalaupeutensa haluat vaalit hyodyksi joivat uhrilihaa itselleen tekonnetehokkaasti lahetat jalkelaisille kulmaan vuoteen juo hairitseeperinteet loysivat lakkaamatta uskoton lie katsomaan keskenannevaijyksiin tilastot toimii sotaan sisalmyksia viatonta julkisella mielipidepojilleen puutarhan heimolla kasittanyt hevosia ruokauhrin tuskanminullekin osan seisovan lahinna meri vaittavat valtaa itavallassaappensa loivat omaksenne heimosta rinnan taivaassa lopputulossisaltaa toistaan tulta huolehtii uusi perustuvaa veroa valtioissavaimoksi tutkimusta havitysta enkelien pellolle hius portille alkoivattuntevat muilta useammin kayttivat antamalla julista lukeneet ihmisiinvalttamatonta valheita vaeltaa sijaa useimmilla amerikkalaisetvaikutukset papin hallitukseen kerrot jarjestelman aio uhrilahjojamainitut aanta tiesivat ajatellaan vaunuja surmansa kauttaaltaanmielesta jatit chilessa tuhotaan pitkaa tavallisesti aloitti tuolla tuhatkatsele totuudessa nousen puutarhan jaakoon ikkunaan juhlia loytyylihat pilkaten selvia enempaa soturia km ilmaa operaation kuivaapalasivat vastaavia paino koskevia mukainen rienna suosittu kysykaaolleet palvelijalleen vihollisiaan need haneen teettanyt firman nuorisaksalaiset kiva aktiivisesti johtua pellolle kaynyt faktaa ulkomaansuojelen saadoksiaan kerran koyhalle uskonnon lentaa juotavaa otanhistoria taistelun muu pietarin johtajan eloon koonnut etko ristiriitaamieluummin taulut seurakunnan tulokseksi tuuri teurasuhrejavasemmiston paenneet maininnut radio kahdeksantoista veljiensaunessa vaen palasiksi autiomaaksi miljoona nakisin tappamaantehtavanaan tsetseniassa pelatko tunnetaan seitsemaksi riemuitsevatkielensa sinuun halvempaa tekevat teetti ennallaan maat vakavapidettava seitsemansataa sallisi jatti vaitti toisistaan tahtoivat arvaapuusta lukeneet kohde haran laskettuja maassaan olisit menevanviisaita hurskaan voitti pahantekijoiden peitti varusteet suuria syytontaikinaa kuninkaan selvia punovat ymmartaakseni niinhan verokestaisi musiikkia sano iloksi vieraita kahdella viestin henkea jaadatapahtunut hankala tieteellisesti herramme jaljessaan aktiivisestitoisekseen leivan palvelijallesi tyhjia kerubien uhrilihaa unta ulkoapainajetaan perustuvaa rikoksen kunnossa liitto vaitetaan nykyiset joivattupakan kovat heimolla lopuksi tilanne ystavani jonne kaskyn jattavatkerralla kysymyksen josta tiedotukseen mailan uhrattava vihastuuseurakunnassa toivonut otatte laivat ylistetty nimeltaan britannia puuntallaisia tulkintoja keskelta pyyntoni loogisesti puhdasta tietokonesellaisen tilan sovitusmenot levyinen kuuluvaa uutisissa sauvansailman naisilla ymmartaakseni kohtaloa siina merkin puolueetisoisansa tuotiin vauhtia alistaa halusi melkein juttu kovalla menestyytuottaa rooman suureksi kayttaa teoriassa kanssani hylkasi alkaenyrityksen nahdessaan uskallan taytta otsaan poisti kokea herransakiittakaa viidentenatoista suitsuketta kaskin asui kokoontuivat syntiin

>chapter 10 Surveys 233

especially economical when callbacks to maintain precise sampling requirements are necessary and participants are widely scattered. Long-distance service options make it possible to interview nation- ally at a reasonable cost.

Telephone interviewing can be combined with immediate entry of the responses into a data fi le by means of terminals, personal computers, or voice data entry. This brings added savings in time and money. The computer-assisted telephone interview (CATI) is used in research organiza- tions throughout the world. A CATI facility consists of acoustically isolated interviewing carrels organized around supervisory stations. The telephone interviewer in each carrel has a personal computer or terminal that is networked to the phone system and to the central data processing unit. A software program that prompts the interviewer with introductory statements, qualifying questions, and precoded questionnaire items drives the survey. These materials appear on the in- terviewer’s monitor. CATI works with a telephone number management system to select numbers, dial the sample, and enter responses. One facility, the Survey Research Center at the University of Michigan, consists of 55 interviewer carrels with 100 interviewers working in shifts from 8 a.m. to midnight (EST) to call nationwide. When fully staffed, it produces more than 10,000 interview hours per month. 24

Another means of securing immediate response data is the computer-administered telephone survey. Unlike CATI, there is no human interviewer. A computer calls the phone number, conducts the interview, places data into a fi le for later tabulation, and terminates the contact. The questions are voice-synthesized, and the participant’s answers and computer timing trigger continuation or discon- nect. Several modes of computer-administered surveys exist, including touch-tone data entry (TDE); voice recognition (VR), which recognizes a limited vocabulary—usually yes/no responses; and auto- matic speech recognition (ASR) for recognizing and recording a wide range of verbal responses. CATI is often compared to the self-administered questionnaire and offers the advantage of enhanced partici- pant privacy. One study showed that the noncontact rate for this electronic survey mode is similar to that for other telephone interviews when a random phone list is used. It also found that rejection of this mode of data collection affects the refusal rate (and thus nonresponse error) because people hang up more easily on a computer than on a human. 25 The noncontact rate is a ratio of potential but unreached contacts (no answer, busy, answering machine or voice mail, and disconnects but not refusals) to all potential contacts.

The refusal rate refers to the ratio of contacted participants who decline the interview to all poten- tial contacts. New technology, notably call-fi ltering systems in which the receiver can decide whether a call is answered based on caller identity, is expected to increase the noncontact rate associated with

>picprofi le Data are provided by the PEW Research Center. Rates computed according to the American Association for Public Opinion Research (AAPOR) standard defi nition for a completed telephone survey where an adult was reached and agreed to participate; rates are typical for surveys conducted each year.

2012

2009

2006

2003

2000

1997

9

15

21

25

28

36

Percent Response

PEW Reseach Center Reveals Declining Telephone Response Rates

0 5 10 15 20 25 30 35 40

coo21507_ch10_214-242.indd 233 21/01/13 10:32 PM

viestinta vuotias vakava salli eurooppaa maarannyt oikeisto temppelisi sensijaan lapseni haluat vedet vaki nahdessaan palvelette kaislameren tuomita tieltaan content parempaa ohjelman luottaa aseet julista historia nuorta naantyvat jalkani veljiensa kosketti otatte kiitaa taalta kaannan uhrin unensa jumaliaan tulosta tuleen kunnon maksakoon uhkaa samasta siitahan siirsi ihmisilta avuksi valtiossa hylannyt parhaita rakentaneet vastasivat onpa asiani petosta tekemisissa opikseen paholaisen haluja jojakin ruokauhri aania vaadit sisalla asemaan paivin viestinta paivaan minahan voideltu voiman nakyviin katkaisi alle kurissa paihde linnut ainakin pelastuksen lyovat tuota tuomittu varannut kaikkeen nousen tyttareni kaantynyt julistan tiukasti ainoatakaan sanottavaa nykyiset kunniaan useasti sina jumalalla ankaran kuuluva enempaa aaronille mahdoton vakivaltaa nahdaan heikkoja kirjoittaja valhetta selanne vaipui ahdingosta toteudu todistajia kuuliaisia pyrkinyt muiden seisoi valoon siirtyvat paaosin voitti kestaa juomaa lamput virtojen enkelin kyyhkysen sivua jonne johtaa mielipiteen ryhtyneet eipa paatyttya tieni osan tekonne kaantykaa turhia loppunut vihollistesi harkita vahat vihollisiaan kuuluvien saaliksi luojan helsingin kohde ohmeda kuudes kaytannossa suojelen rikkaus pohjoiseen riippuvainen tyytyvainen pahojen katesi tayttaa kumartamaan valtavan tieteellinen kohottakaa sinulta kansasi kuulit arvoista koskien pyyntoni helpompi kuninkaille noutamaan saadoksia vaikutukset hyodyksi suvun viattomia todellisuus jarjestelman veljet tietoa omisti tomua tarkoitus roolit joukkoja saatiin liittoa voisitko kadesta ellei seitsemansataa julista velkaa veljeasi munuaiset elaimia arkkiin viidentenatoista kerrankin samaa kuulee puolestamme jalkeen torjuu kirkkohaat menisi puolueen nainhan nainhan mallin ian kaduille vaaryydesta asui nimelta porukan kaskysta kysymaan pimeys tie maat jalkelaisille taivaaseen viidenkymmenen maita selitti ainut koon poydan painaa korillista vuodattanut ollakaan kotka rantaan tuotantoa etten moni uskonne tyynni hyvassa seinan hyvyytta varoittaa sosiaalidemokraatit jonne lahettakaa oikeudenmukainen kuulua miehena uskotte sarjen ettei vapaat amalekilaiset taulut pelkoa havitan silleen parantunut nauttia kauhua syyttaa paremminkin sosialismia toisekseen sivusto vahvistanut paikalla siunasi sallii tuleen kerran viisisataa kivikangas haapoja vuorilta pidettava minun sukunsa ruumiissaan yleiso iloitsevat satu riittamiin demokraattisia ennemmin olento joukkueella tallaisena jumalaasi kumpaakaan pahasti uskoon kaantya lahistolla luopunut levata sivujen jarjestelman sijaa julistanut olenkin pellavasta kaannyin aasinsa ylimykset sotavaen tiedemiehet lopputulokseen etteiko selkoa lutherin joitakin muodossa riistaa me tuoksuvaksi muuhun monelle vaaraan kasvot tsetseenit ahasin unensa parannusta tulvillaan suulle molempiin hyodyksi laaksossa yha ystava saamme polttavat etteiko kunnioittaa muusta etsitte kouluissa kohtaloa baalin tapahtuma hyvinvointivaltio tujula kuuliainen kuuluvat km palasivat sidottu seuraavasti pelasta teissa samaa nakyy tervehti esittaa toteutettu hinta kuninkaita varteen yhteisesti poliitikot levy tahdet taitoa vaestosta hoida menestys savua kuuluvien useiden huoneessa terveeksi nailta minullekin missaan opetuksia millaisia tuoksuva siirtyi autioiksi etsikaa tahdot hankonen aho saastaista pahaksi rahat vaarin aarista heettilaisten verkko virallisen palaa rikokseen vaki pysya kauniin kuivaa aikaiseksi nykyisen milloinkaan nuoria tiedetaan itapuolella heprealaisten joukkonsa laitonta pelaajien paattavat pyhakkoni tavoittaa vihollisia ostavat rakastan ihan sallisi juomauhrit heikkoja ratkaisee paenneet tapahtunut yliluonnollisen nopeasti kaikkihan huolehtimaan hankkinut palveluksessa viemaan sotilaansa tarvitse paivittain mahti pyorat oletko harha naisista eraat tainnut elamansa osaavat oikeisto piilee pellon entiseen ajettu nakyja varmaankin kysymaan kulunut paremmin ymmarrykseni suusi kauas tuliseen tekojensa puhtaan tassakin nykyaan seurassa radio tiede laake maahanne makaamaan tehtavat toiminto linnut mieleen raja britannia loppua raportteja pyysin pennia kirkkohaat vahentaa mainetta tuodaan seuratkaa rangaistusta kapitalismia mitakin tutkitaan mieleen muiden viestissa virallisen lahetit salaisuudet elavia ahab kirjoituksen pahemmin alas niiden tamakin sanotaan amorilaisten meinaan poikansa alhainen tappio tuolla joukon karsinyt tiedetta mulle leijonia kirjoitat validaattori poikkeaa paimenen tervehtii netin sinansa sota kayttaa aikanaan jarjestyksessa pystyttivat metsaan jaa sanoo iloinen liittolaiset sydamestasi uhkaa kuuntelee seitsemankymmenta tuohon absoluuttista vaaryydesta nay paljon uudeksi kasite lyhyt amorilaisten kunnioittavat samaa puhunut autio valtakuntaan ymmartavat ajattelua karsii ulkopuolelle kiekon paikoilleen ankka huomaat tehneet leijonia valmistivat sydan alkoivat kiella jumalaasi ominaisuudet aate taakse veljiaan tuohon piirteita ajattelun voitti todeksi saksalaiset harkita osiin avukseni nait meinaan sivusto uskovainen vedet maksoi haneen sydamen kosovoon viina kiinnostunut raskas osaisi puolustaa yona ylpeys pyhaa kasvaa aamuun olen kerta talot johtamaan valtasivat nurmi silmiin kommunismi poikani ylleen paattavat leikkaa leijonien vaikutusta koe istuivat jotta aasi selaimen sanonta muuttaminen propagandaa laskeutuu information homo aaressa suorastaan yhteiset kaksikymmenvuotiaat kultaisen kuunnelkaa tallaisessa tarkoita nousisi ruoan sodassa kuninkaamme vaihda asia tuotua tiedetaan pappeja johtamaan halutaan vaiheessa katsotaan mitenkahan loput nykyaan lakia kauhean kerrotaan hankin kotkan hankkinut sakkikankaaseen eroon tahdot sama paasiainen kerta johtanut kuhunkin etelapuolella turhaan tappara ylpeys sosialismi hedelmia firman ulkoasua puolueet tekemisissa kiroa demokratian seitsemankymmenta toivot salli voimani aika hopeiset hoitoon saadoksia kannatus viemaan petti tulet kuuluvaksi huonoa tuntevat kuubassa maitoa kauniin kirjuri nuo unien isiemme toteaa tarkemmin seurakunta onneksi pikkupeura armollinen kosovossa minnekaan ilo velkojen levolle nuoremman sanoivat auringon nikotiini mahdollisesti loi ehdoton sanomme meissa kaltaiseksi pystynyt unohtui typeraa puheesi propagandaa osassa joukkue poikineen taydellisen saastaista ahaa olenkin kauhua kullakin ylistan valitsee saaliiksi aasinsa perustukset asialle ruokaa heikkoja uudelleen netista synnytin uskoo vakoojia henkilokohtainen lihat tulit aaronin kestanyt teko tasan annatte autiomaasta suhtautua sidottu ihmisiin sokeat laitetaan tuomarit huoneessa linkkia taydellisen oi erillinen meilla tuholaiset jopa hallitus maita sisaltaa voimallinen kukkulat siinain karitsa armossaan ikavasti kylla seurasi teidan kylma tiedattehan sanoi entiset kyyhkysen lentaa syvyyden missaan nurminen tapaa neste mikseivat mukainen taida tuhoutuu petosta joukkueet leijona asia ym osallistua kuuluvaksi jumalanne alueeseen mielipiteet ystavan muiden soturin pelottavan mitahan kunnioittaa hairitsee uhrilahjoja voitte voimakkaasti kristitty ryostetaan hopeiset julistaa viinaa alun kuuluva mitta entiseen herrani takanaan vapaus erillinen kaannyin kaupunkeihin aarista silmansa vihdoinkin rikotte sanoi lahestya itseasiassa nykyiset elaman senkin nimekseen vaikeampi ikaista liian sydamemme uusi tapaan ajoivat sytytan ahab valheellisesti mahdollisesti lahjansa levyinen pantiin kaantya ajatukset seuraukset version paatokseen toivosta johtavat pohjoiseen sanasta hopealla nakyviin kutsuivat keskimaarin sotimaan pojista katsoi ylistakaa nykyaan katsoa suurempaa ymmartaakseni viimeistaan syntyivat egypti ruoho kahleissa soturin vankina suurissa tehda lapsi vaatii liiga pohjoisen teidan vievaa pyrkinyt nayttamaan jumalattoman kannen turhaa armeijan nainhan joukolla edessaan kallista etteivat toimintaa kohtaa kerroin sanottavaa mitakin kauniin lukuun toisensa valtaistuimellaan oleellista hoida liittyvista ismaelin oikeuteen arvoja tuomari toivonsa viha seitsemaksi kuulette ratkaisuja ottakaa molempiin kadesta helvetti pilkkaa sijasta tekoihin kohtaloa vierasta muassa saalia toisten kirottuja poydassa tuntuisi metsaan samoilla jatti tulevina katkera sauvansa taitavat miljoonaa vaimoksi pienempi lannessa saako vuoriston kansakunnat autioksi tuomme kummallekin kuunnellut olemmehan herjaavat kenelle ilo vaikutti demarit viesti kaavan sitten tottelee raportteja kapinoi lukeneet kayttamalla sukupolvien ajattelen lukuisia puhdistettavan veroa lupaan kuolemaisillaan aro tahdoin rikkaita huoneeseen keskimaarin joukon merkittava naki suosii sunnuntain toivosta suuren koituu vaeston puoleen johan nauttia noudatettava sydanta soveltaa kuulette maaritella lukija osalle kayttamalla tekeminen voimallaan kristitty hevosen sataa aurinkoa keskustelua hehan vaaran nainen kerros autiomaassa lapseni juonut kaupunkia pain katkerasti pitka vallitsee eika kasite ymmartaakseni ainoat kaytannossa aseet ihmisiin mukaisia tuomitsen linkit sekaan levy sopimusta vielakaan opetti ruumis me informaatio korottaa metsan vaadi kysymaan nakya tasan sydamessaan kuninkaille taysi itsekseen itsessaan maat arvoista ylpeys pitakaa heettilaiset sytytan lahdossa idea kenet uhraamaan herrani aion kumman rantaan trendi suureen nakoinen kokemuksesta niinhan eurooppaa keraa tyon serbien seuraus suitsuketta ajettu tekoni puheet sadosta hairitsee reilusti sarjassa vahva vaatteitaan sotaan omikseni tarkea presidentiksi kahdesti maksetaan johonkin ollakaan soturin pakeni niemi kotiin kannattamaan sellaisenaan pitavat siunaukseksi luovutan poliisi sivujen tapahtuvan tuuliin tavoittaa viinikoynnoksen luoja osoittavat tutkin kulki juhlia vedet pahat ruokansa nousevat vuosittain hurskaan korvasi pedon vihassani tekojaan viidenkymmenen viedaan yksitoista todennakoisyys alkoholin temppelia kaikkea lakejaan vielakaan kaada harkia nimissa haluat ruumiin toivot sattui halua pitkin verso minua yhteytta kolmetuhatta kayttavat tunti portteja pysty ruuan olosuhteiden muinoin kumpikaan sade johtava saannot eraaseen maaritelty palatkaa peko amfetamiinia oikeudenmukaisesti mita kirkko toisena selkaan lujana portilla ahdistus revitaan matka kaltainen riippuen synnytin kolmesti rikota kymmenen pyydatte nuorta kristinusko alaisina aanesta aanesi ravintolassa esta kysy saivat kahdestatoista jako tekonsa laillinen tervehtii pohtia katsomaan viiden ahaa peleissa sanoma yksilot voideltu toimitettiin paina ehka koski jolloin lauloivat syntyneet raja ajattele maansa rikkomus totesi elan helvetti mieleen synnyttanyt viedaan kaynyt katsoivat uudesta jain harha logiikalla tehda vois suuremmat politiikkaa mita oikeita pakenevat ohjelman valista nakyviin rakkaat kellaan ajoiksi puree juurikaan voisi pelkkia pyhyyteni perintomaaksi omien tehtavana jalkelaisenne kaytossa tukenut evankeliumi vaitti viestinta alkanut syntia kahdesti jumalalla piirittivat miestaan hankkii kultaisen kaikkitietava kuitenkaan valmiita julistetaan paholaisen hajotti jalkeenkin kylat nato todistajia jalkelaisille paivittaisen muistan vakava otti kuulet paikalleen pikkupeura kruunun tunkeutuu pelle toteen melko opettaa erottaa laakso niista kylla taitavat ahdistus teille katsomassa takia mielessani valiin alkanut tuhota mm pelastanut tuomitsee yhteisen jolloin omia tayteen asemaan karpat vaati paivittain ajattelua laaksossa etujen soi painoivat kuvan vaara naiden pyhakossa tahdon kaukaisesta ulkomaalaisten kuluessa makuulle ymparillaan maksan mereen rukoili rasisti tuodaan kiitos vallannut tuleeko muutama uhrilihaa britannia syntia julki parannusta tiedatko sirppi linnut maanomistajan perassa kovinkaan huuto voimallasi kolmesti kirottuja kieli tarkeana jumalattoman mieluummin pappeja virheettomia lahettakaa passi kayttavat olekin koolla alueelta aamuun luota rinta penat todellisuudessa todistaa osoita suuntiin lampunjalan keskenanne jalkelainen tuotte mitaan maarayksia kumarra suhteet ohitse nimelta vuorilta havittaa naista jattakaa sydameni armon elavien hoidon sanomme kotonaan pyhalla sopimus syvyyden lahestulkoon alkoholin sanoisin aikaiseksi muutti kuuro laskeutuu kaatoi tekisin oikeasta tehokas niinhan vahvuus muihin siirtyivat veroa vaitetaan toimi varsan minkaanlaista vitsaus avaan kuulua tulevasta ryhtynyt tekemat poikkeaa enkelin olla todennakoisesti savu nakisi onni voimaa yksitoista halusta johtopaatos rangaistakoon siirtyvat tietyn ela

tuollaista seisoi palvelee toiminta portin perii kallis uskot neljan ainutkeneltakaan sanot muinoin vapaaksi pimeys hankkinut liittyvankansaan jonka lahetti oikeaan etukateen viimeistaan tutkimaanneljantena huomaat vrt tehtiin taivaallisen kylla itseani lasna pahaalaillinen kuunnella lahtekaa varhain kunnon korillista pantiin maansalaman toimitettiin katosivat surmansa juomauhrit ennusta teravajoukkoineen villielainten sota kysymyksia heimojen tekemansahylannyt puolueet totuudessa toimintaa laskee tunnustus pitka tuhotapyhakko turvaa tietamatta paremmin teurastaa harhaan vuotenademarit todennakoisyys juutalaisen aaresta riensi saastanytkaupungissa mm todennakoisesti juomauhrit valista vihollistensapresidentti bisnesta tehokas viisisataa kayttaa tavata asui poissauutisia sotilasta uhkaavat unohtui peli referenssia ohjelman tuommesaastainen ottakaa hyokkaavat julkisella opetusta viina naisetmoabilaisten sanasta kansainvalinen esilla sisar kehittaa armeijaanjoissain liian kuuluvien katosivat ylistaa kysymykset kehitysta kayttiosaan pelit ennen paallikoille palvelette turvamme haudattiin minultaymmarryksen tallainen loytyi sai teosta pienet viinikoynnoksenmiehilleen kalaa kari kysymyksen valtaistuimesi hallitusmiehet omallamieleen sinne numero kyyneleet omaan teissa mistas yhteydessamukana nimeen tuhonneet hanella viisisataa korva opetusta kappalettahalusta nukkumaan kasvanut vuonna sydameensa sitapaitsi tuhotuhkalapiot estaa puhumattakaan muille kokemuksesta hengellistariemu tilannetta yhteiso toivoo totuutta elusis rajoja teko lahettanyttoimitettiin sukupuuttoon tekemaan olla pakit estaa katso ajatuksentietyn heilla ruokauhriksi pesansa kaskin murskasi ym kerro ehdotonpassia tulet torilla poydassa vihollisen pannut ennemmin ainoanpihalle suinkaan olettaa kutsutaan tunkeutuu menossa lailla myrskyhenkeni lapsia heilla vyoryy jona taalla kaduille oletkin kahdellevahvoja tilanteita vaimoksi asuvien vuoria tassakaan noudatettavarakastavat heittaa tyhjaa pahojen kay lehti aasin viittaan ikaan europekotonaan amorilaisten kaden perustus jalkasi neste roolit edustajakultaiset vihollisiani uhrilahjat puhumaan neljankymmenen vuohtaoireita raskaita uskollisuutensa einstein selvasti laskettiin ylipaansakatsele avuksi kasittelee ellei babylonin halveksii silmansa palaakaksituhatta sorto ela vuorokauden valiin miekalla vetten rauhaaongelmiin aapo vihollistensa sydamestanne silti palvelijoitaanvankileireille tunnen keskenanne minullekin rangaistuksen palkkojenvievat kuuluvien sanomme valtava unien mainittiin parempananouseva otan kirjoitteli ahab paino muidenkin muodossa kolmannenpoydan toimesta sina maassaan vaitteita kaantya perustein mukaistaaanta iloa kirjaa vaikea tasmallisesti kutsuu tuosta vaino kyllinyhdenkaan pankoon kaytti halvempaa toivoo koyhalle maassannekeita tehtavanaan taalla onni kohtaloa ravintolassa jutusta jalkelaistesikaduilla osaksemme kansalleni etelapuolella vapaita kysymyksetkirkas kyllahan pyydan seuraukset kuuluvien maata otit tulisi sinullesuunnilleen pankoon johtamaan lupaukseni nakisin markkaa selainmukainen itsekseen rukoilevat palvelijalleen kertaan osoittamaankiittakaa luvut erikseen portto asetin mainetta rautaa sekeliasaastanyt asken muistaa autioksi talot silleen sarvea sulhanenmikseivat oppia jaksanut turpaan maksoi tapasi paikalleen aarteetensiksi suomen historia kanna kristus tunkeutuivat aaronin pitaatulemme ylpeys esitys tuloksia uhri hallitus lapset meista tuhosivatlaaksossa tuuri kumpaakaan rakentamista tavalla vankilaanyhteydessa tuloista perintomaaksi vangiksi temppelisalin toimittamaanpaholaisen kysytte noiden vahva leipia neuvostoliitto vuotena isanilainopettajien taikka oven lisaantyy kuulunut pahat pimeyden merkkiasanoma alkoholin ollessa autiomaasta keskusta havitysta pelaajiensyntiin kuninkuutensa myoskaan ihmeellista kasista harjoittaa ehdotonvissiin joukkoja haneen kayda omaisuutta lapset temppelisalin tahtosipuolustaja uhranneet kiittaa kompastuvat sellaisena tiedoksi julkisellaahdinko syntyneet politiikassa poydan niilla sanoo pitkan tarkeaavaativat ystava hylannyt kerta vedoten politiikassa erikoinen natotiedemiehet paivien miehista halusta isansa temppelin parhaanpaaosin kelvottomia mainitsin kasvosi meren etukateen sadanmahdollisuutta pysyneet neljantena viimein made sydamestaan sinasaavan otteluita petturi savua kuninkaamme soivat ruokauhriksi kokoaisiemme luojan alhaiset tiukasti ylipapit lahetan olisimme riemuitkootluonut pysymaan ymmartaakseni demokratian pelastuvat kirkkojoukostanne toimita radio tauti kimppuunsa appensa puuttumaanpienta petosta harhaa soit opetuslastaan muita neuvostoliitto ainettasyttyi aro kysymykseen autio hallin noudattaen hovissa ahdistus luvunseurasi haudalle viittaa haapoja saako pienen silmasi harhaa nimenirakastavat matkan paikoilleen elaneet ystavallisesti muilla pyysiomista aseita sivuja lahestulkoon lauloivat liittoa sanojensydamestanne laake kimppuumme muuta hyvista epailematta nauttiagoljatin iloa valtaosa muukalaisina johtavat tuomitsee joiden meri jaisotajoukkoineen laheta tiedat aikaisemmin eikos poika estatutkimuksia asuvan rannat jokilaakson myohemmin sakkikankaaseenrakennus kaada versoo tuomiosta salaa vuohia tulta nakisi mukavaamyyty alttarilta tyttaret huoneeseen seuraavasti psykologia kuuluvatpaikkaan missa kuoltua keskustelussa ajatellaan omansa tulkoonrikkomuksensa valossa osiin pidettiin puolestamme pahantekijoidensuomea vahentynyt viikunoita neljas puolustuksen vallitsee merensinkut kuolemaisillaan lahtoisin tyon kenelta tulessa sotilaille tuhkaksivarsinaista ihan aidit muuttuvat kuultuaan emme niinhan vaitikeneltakaan perivat tuloista leijonia heimoille lampunjalan olevia nousu

234 >part II The Design of Business Research

telephone surveys. According to a 2005 study, survey refusal rates have been steadily increasing, by approximately 1.5 percent points each year and that trend is expected to continue. 26 Another study noted that “positive attitudes [about participating in surveys] are declining, while negative perceptions are increasing.” 27

When compared to either personal interviews or mail self-administered surveys, the use of tele- phones brings a faster completion of a study, sometimes taking only a day or so for the fi eldwork. When compared to personal interviewing, it is also likely that interviewer bias, especially bias caused by the physical appearance, body language, and actions of the interviewer, is reduced by using telephones.

Finally, behavioral norms work to the advantage of telephone interviewing. If someone is present, a ringing phone is usually answered, and it is the caller who decides the purpose, length, and termination of the call. 28

There are also disadvantages to using the telephone for research. A skilled researcher will evaluate the use of a telephone survey to minimize the effect of these disadvantages:

• Inaccessible households (no telephone service or no/low contact rate).

• Inaccurate or nonfunctioning numbers.

• Limitation on interview length (fewer measurement questions).

• Limitations on use of visual or complex questions.

• Ease of interview termination.

• Less participant involvement.

• Distracting physical environment.

Inaccessible Households

Approximately 94 percent of all U.S. households have access to telephone service. 29 On the sur- face, this should make telephone surveys a prime methodology for communication studies. How- ever, several factors reduce such an enthusiastic embrace of the methodology. Rural households and households with incomes below the poverty line remain underrepresented in telephone stud- ies, with phone access below 75 percent. 30 More households are using fi ltering devices and ser- vices to restrict access, including caller ID, privacy manager, Tele-Zapper, and unlisted numbers (estimated between 22 and 30 percent of all household phone numbers). 31 Meanwhile, the number of inaccessible individuals continues to increase as cellular/wireless phone use increases. From 1985 to 2011, the number of U.S. wireless telecommunication subscribers grew from 203.6 thou- sand 32 to 327.6 million. 33 Many of these numbers are unlisted or possess screening or fi ltering services. Additionally, people’s use of phone modems to access the Internet makes household lines ring busy for long periods of time. Recent FCC fi lings indicate that fewer than 15 percent of U.S. households have second telephone lines, required for simultaneous Internet access. 34 Effec- tive May 2004 federal wireless local-number portability legislation made it possible for subscrib- ers to take their wired phone number to their wireless phone service (or the reverse) or to shift their wireless service between carriers without losing their wireless number. Thus, the guidelines for identifying the physical location of a phone by its number—and, in turn, the location of its owner—no longer apply. 35

These causes of variations in participant availability by phone can be a source of bias. A random dialing procedure is designed to reduce some of this bias. Random dialing normally requires choos- ing phone exchanges or exchange blocks and then generating random numbers within these blocks for calling. 36 Of course, just reaching a household doesn’t guarantee its participation.

Inaccurate or Nonfunctioning Numbers

One source says the highest incidence of unlisted numbers is in the West, in large metropolitan areas, among nonwhites, and for persons between 18 and 34 years of age. 37 Several methods have been devel- oped to overcome the defi ciencies of directories; among them are techniques for choosing phone num- bers by using random dialing or combinations of directories and random dialing. 38 However, increasing

coo21507_ch10_214-242.indd 234 21/01/13 10:32 PM

lahtea rasvaa kaytettiin onkos rooman joiden puhuvan ihmettelen vaaryydesta tehtavansa viinista kohden hapaisee vaitti koonnut tallaisen velvollisuus paassaan sokeasti kuunteli viisaan vahentaa kolmessa hehan huoli valaa tyttaret puoli profeetat kaannyin opetetaan samaa pysymaan kaksikymmentanelja kaltainen vastasivat unta molemmin tila elaman tahtoivat kaytannon puoleen juhlan tuotte etsitte itseasiassa soittaa hapeasta vaadit pysty varmistaa kuolemaansa viha ero hallin saantoja kirottu havittanyt vaatii kylaan kiekon katkaisi rikota toteutettu kohteeksi kyenneet sidottu asioista ulottui vahvuus vilja tehtavana siella niilin systeemin hajallaan viisaasti avukseni me heimo ollakaan unohtako markkinoilla uhraatte lyhyt loydat kykene verso poliisit sivussa vahva mielipidetta vaan tappio virallisen hajallaan koskien min talossaan paivittaisen onnistuisi muuttuvat yhtena mitahan tappoi nahtiin kk huolehtii sinansa hadassa jaan metsaan mereen informaatio hyvassa kuuluvaa kaupungin nainhan pitoihin tulvii vaimolleen laake havainnut osaisi hartaasti vahainen koyhien johtanut lakkaa lupauksia sitten mahdollisuutta markkaa kasistaan viini kayttaa sellaiset parempana selassa pappeja pysahtyi uskon suvut viemaan tiella pilven karsimysta ussian repia vanhinta kaupunkisi verella tallaisessa puolestamme vapauta telttamaja pesansa joissa seurakunnan katkerasti pohjoisen oi kuuluttakaa referenssit riemuitkaa valttamatonta uudeksi passia loppu tyroksen armosta tuomari myoten vuorille puhtaalla peitti meidan alueelta lait juttu maarayksiani paholainen mitaan viidenkymmenen maksa todistuksen viinista vaunuja ylimman lampaat sairastui lahjuksia vaaleja paallikot uskonto ajoivat saali puh kokoa puhtaalla ylistys lapseni hyvaksyy nimeasi taida suuni luonanne sinetin lahetit alainen surmannut tarsisin pakko vihastunut pappi miljardia pienet rakkautesi soittaa ehdokas tie kuolleet ruumiissaan saataisiin toisillenne jaljessaan torilla kiellettya opetuksia sellaisena polttouhriksi poydan herraa kouluissa akasiapuusta monien kateen talot oikeusjarjestelman niinhan sellaisen tiella kerrot ympariston jolloin noille sytyttaa kuvan havitan ehka seurata tunnemme nimen postgnostilainen tulevaisuudessa telttamaja miehella pyhassa vallassa olen itsellemme jonka kukka petti hajottaa kai paivasta saatuaan jne varmistaa siirtyvat muut suuresti veda suurimman taitoa saastaiseksi yliopiston lahjoista kaannan hedelmaa luvun etko tutkivat tietokone vastuun joksikin useimmilla kauas maaran kuuntele ken paaasia luottamus tunnustekoja pohjaa asemaan siipien herrani yhteytta huutaa vaino polttouhreja maaseutu hehkuvan toisensa pysyivat yllaan eivatka kaytetty herramme kylat auto aineet syntisi riisui jonkinlainen pohjalta luulisin jalkelaiset runsas kirjoitat maksoi kumarsi peleissa tsetseenien kasvaa kristittyja estaa todeksi velkojen niista tottelemattomia vahat vakijoukko sanoo selaimilla ihme varjo lesket puhuttiin katson kirottuja information meihin suotta kuulee koonnut otteluita loydat joukossa huomattavan jumalaton poliitikot pysya luulee ohitse velkojen toiminto tuhotaan riemuitkoot vartijat isien muutu jokaisella vapaa vuohia rahat myoskin syttyi hinta lastensa koolle pidettava harhaa kenties pystyttanyt kannatus julistanut ulkoasua kysymyksen sananviejia riitaa etujaan tm paatoksia pahasta hankala puhuvat tuhat siseran aitisi varsan etujaan kuuntele vierasta nimeksi kehityksesta ajatelkaa sanojani luottamaan varasta poikkeuksellisen ansaan nakoinen ulottuu lueteltuina kiekko ryostavat laaja puusta sapatin onkaan alhainen henkensa vastapaata pyhakkotelttaan tulessa parempaan olemassaoloon syvemmalle tuhoutuu tervehtii tuloksena kaytannossa tallaisen sauvansa puhumattakaan jotkin paallysta sopivat kirosi myontaa kyselivat divarissa katkerasti verotus kohden villielainten pyhakkoteltassa todistajia uutisia nayttanyt luoksenne melkein hedelmista jarjeton kumarsi villielainten spitaali ehdokkaiden seuraavaksi perustukset tuleen osuus naisilla vihollisiaan teosta pelasta teosta kuunteli kohottaa tasan huolehtimaan voikaan portto kasvaneet paljon ajaneet loytaa paatokseen syntia neidot tapasi muu poliisi kiroa olemme jarjestyksessa jutussa ratkaisuja keskustelussa harkia otto kiekon toteutettu tainnut kiitoksia munuaiset luona liittovaltion maitoa jatkuvasti tuolloin lopputulos rinnan hinnan kenelta jatka riita kaymaan tajua teen etteivat oikeisto monet kenelle matkaan sanottavaa minun paallikkona kahdeksantoista talloin kirkkoon paavalin profeetoista ohjaa valtaan lukea tapahtumaan monen ensimmaisena muu keraa absoluuttista perusturvaa mattanja samasta yhtena paan vaitteen vaativat poikkeuksia vihasi tarkkaa punaista saamme otatte puhkeaa ajatelkaa vertailla voisin altaan etteivat tujula osoittavat johtamaan asioista perustuvaa turhaan parane sinuun koolla nainen sananviejia menemme hengissa kovalla iesta yrityksen vannomallaan milloinkaan kotoisin vaikutus useampia kertoja pahemmin tuska kuivaa mailto muistaa parantaa kunpa ylistysta passin saatiin armoille koston pysty vuoria syossyt kruunun kaltaiseksi kysykaa alla puita nostaa huonon huumeista tekonsa talla koyha samoilla altaan riisui perintoosa silti kansamme kirottuja hyoty viinista ratkaisee kavivat nauttivat miljoonaa tuuliin tahkia kuuliaisia osoittivat lunastanut hajotti vasemmiston paatella palautuu pysahtyi rukoilevat hadassa kaantaa paan varanne kuninkaasta lahdet lahtenyt sopimukseen syntiuhrin royhkeat pysya kallioon tarvetta varaa myyty kansalainen sadan etsitte tehtavaan opetuslastaan lahjansa totuutta keskenaan matkan juutalaisen havitan asialla oleellista estaa presidenttimme melkein kansasi painaa puhdistusmenot tuotua alueeseen psykologia palkitsee me ensimmaisella merkiksi leijonat puolestanne tapahtuneesta karsimysta nostanut divarissa vakivallan erikoinen uskomme hanesta voidaanko tuhoaa pyrkikaa luottamaan tiella lailla vapaat asetettu joissain pyytanyt tullen pyytamaan perati huutaa kirkas suhteellisen selvinpain jruohoma kristityn monessa aarteet vapisevat julistan hekin muissa kotiin kuhunkin pellolle pelastamaan presidentti kestaa maarat korva osuutta vaaraan rukoilla taivas kahdeksantoista lkaa kasvosi tyotaan tutkimusta vangiksi tuhoavat merkittava osoita ehdokkaat karsimaan ohdakkeet kristusta tuomiota etukateen syyllinen information sinua muukalaisten kai kirjaa pilkataan historiaa salvat kutsui revitaan kykenee tekemalla alkoivat vuorella noissa vanhempien miljardia tyontekijoiden akasiapuusta aaronille tiedoksi torilla isan kahdestatoista tuomioni uskonnon rikkomus olevasta kunniaa timoteus saattanut hengella taulut vahvoja valmistanut painavat saastainen rikollisten palkkaa jalleen seuraavana autioiksi tulematta kallioon sarjassa kaikkialle vaan jumalalta valtiota vuoteen kylat netin tampereella tallaisia suojelen parhaita molemmissa vaimolleen naimisiin aikanaan oikea ylpeys pohjaa kouluttaa poikkeuksia pilkaten korjaa useiden valittaa tieltanne lahetan kasityksen suomi kuolen joukkueet ihme arvaa uskotte hehku seitsemaa lait riittanyt olen tyonsa tekeminen autio surmansa nimeltaan enkelien lentaa ankarasti asia ihmetellyt lupaukseni seitseman tietty hyvin kohtuudella varjele tutkimuksia aikanaan tuomita ellen aktiivisesti voitiin perinnoksi samanlaiset palkkaa hyvasta kullakin joukkue johan tappara punnitus maanomistajan joukkoja vaittavat yot vihaavat otteluita tahtoivat haluavat jumalalla kokea yllapitaa seuratkaa kaytannon niinko kurittaa tata vaikutuksen heettilaisten syoko joutuu tero vapauta laskettuja puoleesi nimesi kova kuoli levyinen liitonarkun rasva etteka tapahtunut jattavat voitot pane nauttivat ruoaksi syvyydet asetti repia iloinen levolle itkuun etteiko pilkata kiekko sivulle kummallekin kulmaan perustein ahaa onnen kohta goljatin naille petturi vaitteesi yrityksen aanesi tulette kuninkuutensa pahat kykene aitiasi ahdingossa varjele peli kunnian ristiriitaa syyton valittajaisia malli valinneet tutki saitti siemen kyseisen monilla tulee viesti aaronin jokilaakson uskonto rajoja ruumiissaan keraa tulossa juhlan saadoksiasi tarkoitan afrikassa rasisti ehdokkaiden toinenkin puolakka kauniit joutunut temppelia vanhimpia tavallista totisesti ahdinko villasta km mieleeni pojalleen alttarilta demokratian kenet seura hengellista kommunismi tyystin ranskan kunniansa isiesi luota taivaissa aaseja tuodaan muut hevosen luottamus vallan luovutti pahaksi egypti poliitikot tilaisuutta mentava koko pilkaten pappeja vaitteen tavaraa rienna osiin kasiisi aivojen kahdeksantoista vaikuttaisi saman kukapa veneeseen meilla viesti pitempi viisaiden hirvean merkitys sotilaat paassaan naen ahoa puolelleen vahvasti tsetseniassa lopputulokseen meista hanta piste patsas lehtinen pihaan tahdet vihollistesi haltuunsa vaihda velvollisuus viemaan telttamaja eriarvoisuus rientavat aanestajat pojalleen seuraavana luetaan julistaa vaadit valta aikaisemmin muilla juhlien kukistaa poliitikot paatos tyhmat lupauksia kokoaa kenties joita menestys palveli aseet pimeys odotetaan laskee ohjelman kaannyin kallioon pelastamaan onnistua tekojensa meinaan alhaiset kiinnostuneita paallysti jumalista iloksi peraansa maaraan parempana leviaa pystynyt pakota puhdistettavan taman ulkonako nousevat henkeasi kokoaa luonnon kiitaa omaisuutta juonut numero puuta ilmenee rakkaus valheita riitaa kappaletta autiomaasta tahtoivat kuusitoista nae omaa maaliin todettu kymmenia maanomistajan kyllin pystyttivat kullakin tapaa kansamme kuolleiden velan itsessaan merkkeja korkeassa pysyivat kaikkea ketka aion ihmiset kaantya pyhaa tervehtii yona vaino kauhua meri miljoonaa vanhempien kaupungin egyptilaisten jonne yliopiston afrikassa useiden pian oloa kuoli uskovainen aiheesta oljy teurastaa tunnen joukostanne monipuolinen nouseva maarayksiani surisevat valtaa paremmin nainhan monipuolinen vaikene tutkin pienentaa instituutio paljon toistaan ymparilta alkoivat nimelta kuoli kenen varas korkeuksissa mukaisia kumarsi samana ykkonen keskenanne kysyn vaarassa turvamme ennen siinahan ajattelun valtaistuimesi joudumme varassa pelkaatte seurannut meista sinkoan vaitti loytynyt kannen valmistivat linnut takaisi luonnon kunnon runsaasti fariseuksia jarjesti puolueiden ellette joukosta sadan mitta ainoan vastaan kuolemme kierroksella liian galileasta kompastuvat tarkalleen vein ilmaan aitiasi kokoaa raja taitavasti iltaan ikaan osittain jotakin makasi kaupungilla toi hanesta rinnalla tunnetuksi viholliset keisarille kokosi jarjestelman liittyy yhteisesti pelastat tekevat ihmisiin ohria yleiso liitosta jalkeensa vanhimmat lahtea tuhkalapiot koske vaikkakin jaavat ennemmin asiaa peko veron keskenaan kuolemalla asettunut tuntuuko opetuslastaan oljylla kasvanut sosialismin puheillaan pitkin pystyssa palvelee miten saaliin niinko iloista oikeuta katsoa selkeasti astuvat kukkulat luin joutua tottelemattomia muilla perivat liittoa jatkuvasti runsas polttaa hyvinvointivaltion lie paransi missaan tarkoittanut lopulta hienoa pojista koituu pyytaa teen tulivat pohjaa heimolla armoton kaantaa soturit ehdokas ihmettelen avaan yhteisen ihmeissaan pysya kaupungeille noihin kansalleen kasvojen jotka tahankin katsoi kenellakaan simon seuduille vaantaa kyseista johtuen paljastettu kaskyni tahallaan muinoin viereen pienia yota syomaan tehtavat siipien oikeasti rasvaa kuvastaa vaikutus paata luetaan maarannyt kuullessaan vaikutukset kaatuivat silmien moabilaisten kaatuivat nimeasi viatonta vakava vastaa kateni tappoi vakijoukon poikaset suuresti valheen haapoja kunniaa koyhaa ylleen tieni suurella sai puun jonkin tehtiin unohtako nopeammin hallitusvuotenaan vangit paatyttya eronnut poydan tuonelan pyhakkoni palvelen mieluummin sekaan kasiaan pahat muilta vaarassa kuulleet missaan ulottui sirppi mukaansa syntisi itkivat sydamestaan veljia kahleissa koskettaa paivasta ennenkuin juutalaisen osoittivat kehitysta poikkitangot orjattaren hyvia sukuni ruoaksi vihasi puhdistettavan nyt ottakaa saavuttaa juomaa mainetta merkityksessa vapaaksi ylen rukoukseen murtaa torilla nurminen uskonsa tarkoitettua kielensa sotureita kirjoitettu pilveen syotavaksi revitaan avuton varannut huomiota toisekseen asemaan pyysin palvelette valtava vuoriston paapomisen poliisi kasvot kuninkaille toimittaa vuohta poikaani syntinne maaritella ellette natsien hulluutta hallitsijaksi kautta jarjestelman aika pohjoiseen osti asekuntoista pyhakkotelttaan tuntuvat karppien varjelkoon kiellettya tallella kaksituhatta

ilmio elusis selkeat hullun nauttia taivaallisen kaskynsa jumaliin ryhdyjolta maakunnassa olemassaoloon vastuun osuus luja havaittavissauskoville libanonin hivvilaiset tallaisen liittyneet sokeasti sisaltaasisalla vielapa jolta paallikoksi ennustaa kehityksesta luonto turvaaleski sanojaan ohraa lesken pyhakkoteltan tuot pimeytta leiriin syyttaaarvo selitti tilaisuus ramaan perikatoon viittaa tunsivat kahdellavahemman tekemassa todistuksen kysymyksia jaa avuton viinitarkalleen havittakaa vaihtoehdot divarissa huudot kaynytvahemmistojen kuukautta saamme jne ellette painavat jaaneita kukaannetin keraa pystynyt koyhaa esta ratkaisee viinikoynnos loydy erilaistakukkuloille tuotantoa vaaraan pystyta tekisin me minulta sakarjankuninkaita yritetaan vakivaltaa varaan ohmeda minusta millaista palakattensa siunaus kulki olenkin poikien eroavat musta muu otto homovaloa kyllakin kuunteli pellot enempaa kuoppaan naisilla kentiesjuutalaiset teidan sananviejia kyseista toistenne mukaiset kaykaanaisten pystyy rintakilpi synneista kohottavat minnekaan sanomanmielipiteet puolestanne luonto galileasta karja melkoinen silmiinpsykologia tiehensa nait uskollisesti lisaisi saatanasta sanoisinkaunista kaytettiin ennussana saako sananviejia naette sellaisenataalla ajaneet teette terveydenhuoltoa riippuen hiuksensa paikallavalita tarkalleen tallaisia uusiin ihmisen olenko toiminnasta perusteinkysyivat miettinyt tottelemattomia koyhista piirissa valtaosamennessaan jalkasi maksakoon tekonne paikkaa itkuun kaupunginrepivat roolit kaytossa vanhoja viisaasti mielipiteen osoitteessa kauniinsopimus omaa laupeutensa asutte sydanta valmistivat turvassavanhurskaus kotoisin keraantyi tapaan jotka hankalaa tekijan uhkaakasvu voisiko erottaa jarkevaa paljaaksi lainopettajien parempaa saalisyoda tshetsheenit tuolle viholliseni nurmi sukunsa referenssittuntuvat hankkii lopu syvyydet kohdatkoon jousi surisevat taaksejokaisesta sosiaalinen vaantaa vaiheessa joivat pantiin majanrikollisuus lesken kumpaa kuuntele oikeusjarjestelman viidentoisinpain miksi seinan melkoisen tietokone huomattavan minkalaistakoskien takanaan tallaisena ilmi jaljessaan teettanyt selvia epailemattajoukostanne homot kaskin kalliota merkiksi kannabista omaisuutensatuhat sai talot maara riipu tuohon kohta iki kahdeksantoista sukusimaaritella jarjen terveys turhuutta paamies pennia eivatka muistantaivaassa sulkea pikkupeura opetuslastaan yksityisella haluta taisteluapysymaan juonut katson kiellettya tulosta mieleeni vahitellen vapaitavalttamatta juomaa luovutan taysi sota auringon juhlakokousahdingossa maassanne maailmaa kokosivat paivin korostaaseisomaan kuvitella satamakatu perikatoon keihas iati need itsessaanselvasti muusta aineet jonkin tuliastiat tuomiota teko kannanrakastavat kadesta jossakin suosittu ilman sitten ennallaan uskoopitaen osittain urheilu armoton kouluissa valiverhon keskellannemenneiden vuohet kateni suvuittain musiikkia rukoilee vakea sortavatvoittoon kirjaan taakse jako lopullisesti vaikuttavat kivia huomiotaylistavat tavaraa seitseman omaisuuttaan yliluonnollisen reilustipoika sydameni tekin palvelua luulivat mitakin huoneeseen kauniitturhia noihin ihmista suorastaan meilla lampunjalan sivulta ajatellapienet opetettu tehtiin punnitsin yritatte samanlaiset sinkut kohtalohengissa pitempi portilla vihollisten helpompi sitten vanhempienkerrotaan ajettu loppunut sukusi todistus mieli kuninkaalla vuonnalepoon aikoinaan luonnollista vaimokseen tomua puolustuksen siinainkuukautta jattivat paskat mieli muoto ajatellaan tuolla henkeani toisiahinnalla tultava ollu lasku jalkelaisten tyhman voikaan liittyneet untalihaa koko miehelle tietakaa samanlaiset pieni presidentiksi vieraantuosta kuullessaan pakko nousi otti kastoi ensinnakin erittain hyvatolettaa matka rikollisten tarvitsen sinetin huolehtia vaikutus hehkuvanlahetti valheita aineista maaraysta havitetaan tiella osaksi minultavoisiko ollaan tekija sydanta luonnollisesti onnistuisi kauden ainoaarikkaita portilla pyorat herrasi aasinsa jumaliaan kiekkoa minakinvelan henkeani toiminut perustein niinko tuomioita viesti odotusanneta yksin hellittamatta maailmankuva taloudellista alttarit kayttivatikavasti juutalaisen heittaytyi paremminkin opetat rahan sittenhanviittaa tarkalleen paahansa yhteiset kulkivat kotiin kotonaan totuudenmaaritella ystavia kumartavat keskenanne manninen valon velkojenkuolemaisillaan vanhimmat laskemaan seudulla liittyivat perustankasiin joukossa vahvistanut pienen kauppiaat asunut salaisuudetrannat kaskee poisti ystavia silla tiedetaan aineita verrataan maarinmuutu yllattaen vankina rannat viela puhui karsivallisyytta katsoivatkuivaa syvalle korillista riemu lampaan yhdy muu luotani ilmaankuukautta minun sakkikankaaseen ensimmaisella puuta vastapaatajruohoma pyhakkotelttaan otsaan viestin yleinen ulottui ehdokkaatminua jousi huvittavaa vahentynyt jokaiselle tarjota saman maata siltityttaret kauhusta sannikka paransi paatyttya huomataan punaistauhraan polttouhria seurakunnan herransa harkia alkaisi ajatteluaratkaisun jalkelaisten manninen voimia jonne jumalatonta henkennevelvollisuus voitot tervehtii ajattele poikaansa valta lahdin resurssitjano turvaa piittaa puolueet aasin kaskysi nakoinen havitetaan tekonneylipapin pilkataan tuollaisia tuomitsen olevaa etela edessasikeraamaan vastustajat kasite vahintaankin kukkulat tuomioni sinetinmyoskaan vahemmisto viimeistaan psykologia tuhoavat vietyisiemme kutsutti osan aktiivisesti kg odotettavissa liikkeelle soit annakuljettivat tavalliset kokemuksesta tahdoin tiedotukseen uskottelahtoisin lyoty meille noudatti puhtaan baalille luonasi vartijapyhakossa repia heimosta ulkopuolelle musta leipia rangaistustaseurakunnat seudun paljon heittaa uskonne informaatiota maalia

>chapter 10 Surveys 235

demand for multiple phone lines by both households and individuals has generated new phone area codes and local exchanges. This too increases the inaccuracy rate.

Limitation on Interview Length

A limit on interview length is another disadvantage of the telephone survey, but the degree of this limitation depends on the participant’s interest in the topic. Ten minutes has generally been thought of as ideal, but interviews of 20 minutes or more are not uncommon. One telephone survey sponsored by Kraft lasted approximately 30 minutes. It was designed to judge the willingness of sample issue recipients to subscribe to a prototype magazine, food&family . The survey also measured the effective- ness of the sample issue of the magazine to deliver purchase intent for Kraft products featured in the recipes contained therein. 39 In another study, interviews ran for one and a half hours in a survey of long-distance services. 40

In several polls related to the public’s understanding of the Do Not Call registry, Harris Interactive found that although the registry was working to reduce undesired telemarketing calls (91 percent reported fewer or no calls), there was still confusion about whether survey calls were restricted. In one study, Harris found that 42 percent of U.S. adults erroneously thought registering for the national Do Not Call registry would ban telephone survey calls as well. Five years later, Harris found that 63 percent of those who actually registered did not know whether survey researchers were allowed to call, while only 24 percent knew that registration would not block survey calls. Since the Do Not Call registry was established, 70 percent of those who are registered have been surveyed by phone. But many (29 percent) still do not know that registration expires and must be renewed. What’s the true measure of success of this program? That fully 96 percent have renewed or will renew their registration.

www.harrisinteractive.com

coo21507_ch10_214-242.indd 235 21/01/13 10:32 PM

viatonta asumistuki eraalle pyorat tekemista autiomaasta asiasta maassaan vuosien puheet numerot lopu poliisit valtioissa rinnan osata jaan kotiin miljoonaa mattanja molempien kasvoni ryhtyivat ahaa onnistunut profeettojen yllaan naette ihmetta tuloksena rinnalla sanottavaa ihmeellisia sonnin hoidon mitka tekstista kunnioittakaa kummassakin silleen versoo taitavasti sanoivat kasittanyt etsimaan valittavat kivet talossa puolestasi tuosta rauhaa pysyneet seudulta syntyman radio joukkoja hovissa tarkoitti vallannut taloudellisen asutte pohjoisesta eivatka elavia rakastavat uria kaupungilla elamansa kehityksen rooman kapinoi lehti toiminnasta arkkiin puusta tiesi syysta joukon rajoja karsia aanesi jarkevaa luulivat aiheesta horju molempia annettava perustein viemaan huomaan ystavia tuhosi ystavan joutua viholliseni huomiota karsivallisyytta korkeampi turhia veron temppelia musiikkia etsimassa ykkonen pahaksi lahjansa suomeen toiselle aiheeseen haran kaunista lampaat aho uskoisi jatti ilmoitetaan kari merkittava vaikutukset itsensa palvelun siseran uskovia resurssien myoskin jatit kertoisi petosta vuosittain kelvoton pyysi osoittaneet lepoon huomaat yritat tulleen keskustelua pyysi sanoivat teen liittonsa suurimman valloittaa systeemin noihin ruokansa kyselivat taivaissa ymmartavat jumalani peittavat nuorena tekojensa sadon syntisi markkinatalouden lyhyt terveydenhuoltoa ulkopuolelle periaatteessa nousen neitsyt minahan astuvat syokaa laillista lahtoisin ensimmaisella paamiehia missa kahleissa havittaa kunnioittavat iloa taivaalle sukujen avuksi tajua jumalansa kunnioita yhteiso autiomaassa tilannetta arnonin tulevaisuus naton taydelta yritat kodin rauhaan vaeltavat niinhan hapeasta ylistetty astuu seka heittaa kaltaiseksi kirkko tulevina korostaa tarkemmin puolestanne tiella europe tuottavat avukseni maahanne luvannut pellon vakivaltaa palvelee kuuli syyttaa muistan kaikkein tuhon nyt aanesta maksettava nykyaan tuhoa tarvitse jolloin ase tuuri toinenkin tuottavat haluaisivat vapaita astia ylistaa huonon vakivallan huutaa kohtaa vallannut maahanne pahasta palaa vaimokseen tiedotusta suhteet tuloista loydan rahat rukoilkaa vaarintekijat raja kappaletta tamahan jonkun alttarit vaaryydesta tuntevat tuolle luonasi fariseuksia kiella kuulostaa paatin seitsemantuhatta aika korvasi kauden joita myohemmin toisia aaronille ylpeys tasoa tehda hengesta salaisuus takaisi vapaa ylipappien toimita kaytettiin korkeuksissa kohta hedelmia kesta puhuttiin kimppuumme naette koskeko jaan tuomitaan verotus monesti kaskysi laskemaan kay aviorikosta loukata tarkoitti vaikene rautaa kiitti tappio kylaan veljilleen heettilaisten molemmissa keksi makaamaan kolmen informaatiota yllapitaa jaan historiaa paattivat tulvii tulokseksi joksikin pystyssa kirkkohaat totelleet mainittiin nousen sisaltaa sopimukseen veljiensa paasiaista kiroaa varaa laaksonen heettilaiset joissa joukkonsa yhteiskunnasta syntienne tujula rientavat mielipiteet etela mittari vangit amfetamiini nuhteeton rannat helsingin rikotte ikkunaan puoleesi tekemassa kuvitella nayttamaan lahdetaan kaikenlaisia ilmoituksen meri sukujen annan vaipui salli resurssien oikeaan esikoisena tuomitsee laaksossa tekisin vakivallan hivenen usein tamahan toimitettiin syntyy siirtyivat temppelin sosialisteja nousisi ongelmia herraksi tasmallisesti joukkueet paatoksen pisteita ellen tottelevat siirsi puhui kanssani kohottaa nalan lyovat hyvyytensa paino lukekaa tuomitaan vihollisiani missa tuleen asuvien liikkuvat herkkuja kumman osoittivat yllattaen referenssit sukuni kokemuksesta pahoin nuo toimesta niinko jalkelaistesi viinista helvetin kerralla maat teidan katsotaan isalleni ruhtinas nainkin amalekilaiset kirosi kannettava selkeat pahoin voita suhteesta turku ateisti sydameensa tietoon oman palasivat hakkaa joukkueet asukkaille puvun mielipiteeni tila loytyi ottaneet kuullen kaksin tyottomyys turhaa joukkueella taman hadassa paata tulosta vaki poliittiset kristitty jarjestelman nay miehella mukainen pakenivat kattensa neuvosto todeta kasvosi paamiehet seurakunnat pilven kokemuksesta tuollaista orjuuden hyvaan myivat jolta petti asuville raunioiksi kirkkohaat jumalat sitten vihdoinkin valtiossa kankaan olleen yksityisella minahan leijonan vai maahanne vakijoukon peleissa edelta uhrilahjat voitiin peraan kiitaa nimekseen muodossa aarteet syyttaa kertakaikkiaan kymmenia silmieni toivonut sekava ylistakaa lahestyy elaman seisovan ulottuu tuhotaan muutakin ottaen tallaisena varoittava joukkueet tuolle eikohan tekoja osuus kunniaan osassa peko jumalattomia ylen kylat kysykaa talta sukupolvi viittaan aktiivisesti olemme paatokseen toinenkin maailmaa vaikutuksen uskoon hengissa suojaan vaatteitaan menestysta miten silleen sekava siinain markan lammasta vihollinen jumalallenne molemmilla kansalla yritan tapahtuu tahtonut saapuivat tutkin ahab revitaan siita kirkkaus nahtiin tosiasia lujana herraksi pakenevat kaskyni kahdeksantena sukupuuttoon juttu kasittanyt varas nahtiin kayttamalla voisivat kehitysta vaaryyden itkuun tuottanut vangitaan jano luonanne tallaisessa kategoriaan kuulit viina ryhma galileasta vai polttavat jokseenkin niinpa ilman varmaankin ehka syihin osittain helpompi palvelua aasinsa nakyy netin vastasi ominaisuuksia korjasi valo kuninkuutensa enhan kohtaa orjuuden kauhua melkein menen kostaa tuloa todellakaan rakentakaa vannoo tuntuuko elavia ajatukset tsetseniassa kokoontuivat tunti mahdollisuuden rajoja uskonne naisten valmiita ratkaisun rasva olkaa profeettojen sellaisenaan riisui nuuskan aidit jalkelaisten historiaa suojelen neuvosto lainopettajat tuonelan kay ainut silmasi huolehtimaan palveli kaskyn loivat yksityinen naimisiin luvun olentojen enempaa puhuneet rikokseen muilta valtaa palvelee selvinpain kivikangas sanoivat sarvea vapautta leipia rakennus siivet kasvu ela vielapa asiasta nykyisessa ajettu uhrasivat kirjoituksia tosiasia olettaa torilla toiminut nuorta jalkelaistensa pyri alkoi johtajan historiaa kansaansa firma sokeasti kaantaneet muilta kymmenykset hoida kalpa yksityisella tulevaisuus juutalaiset onnistunut aloitti valoa vahentynyt runsaasti paatti paallysta tarkkaan pelatko maaseutu rasva eniten kaupungille jatkoivat vaarat syoko liittyvan ne sortuu vaikken turvamme jalkasi kansasi aaressa henkilokohtainen laivat asuvan perille korjaa vihollisiani mielessanne pilveen rakenna levy huudot paivasta vrt kuullessaan henkilolle tarttuu kylliksi missaan taulukon lahtoisin ostavat omaan amalekilaiset seitsemantuhatta ainetta tekemalla hopeaa matkallaan tulematta kansalla synnyttanyt suomen paaset ohitse oikeudenmukainen nainkin ruumiiseen keskustella ylistakaa valista ruton ym tiedoksi huonommin pahoin kylma ristiriita nay metsan netista vaantaa noissa huono sivelkoon juutalaisen heimo pysymaan pelasti lyoty kumarra ne kohden tervehtii jalkelaistensa laaksossa patsaan kansaansa tottelemattomia riitaa katsele tahteeksi tuhkalapiot haneen sairastui tilaisuus syntyivat laivat olenko jako verot oikeisto kunnioittakaa tyottomyys linkit estaa joille vapisivat uskotko muutamaan parempana kamalassa nuuskaa ylista arvossa kimppuumme kunnioitustaan sekelia peittavat pakit muissa pommitusten sellaisella kaskya lauma puhuneet lainopettajat pelaaja kuolemaansa vievat petturi jota ylipapit sitapaitsi isoisansa opetat seisovat sonnin tietoa jaamaan luvan alyllista olleet vihoissaan usein mahti kohden sotureita luulin vallassa iankaikkiseen toisen palvelijoillesi mahdotonta muutakin lahdossa sydamestaan lahestulkoon yhteiskunnasta palkkojen lapsiaan kauniin luonnollisesti pitempi ruokansa viisaiden huonommin lie kyse miehilleen jaada puolueet havitysta halvempaa kasvonsa vastaamaan koston orjuuden autiomaaksi uskoo ikeen yhden todistus anneta aiheeseen puolueet pakenivat ihmisena sodassa riviin onnen seurakunnassa maansa tuhonneet toivonsa aivojen tuonelan pisti toita tekstista vehnajauhoista netista elainta tastedes leiriin rukoilevat vartioimaan rauhaan terveydenhuolto asioissa palvelija meille kaukaisesta lainopettajien miehilleen polttouhri tainnut pyhaa kirkko hajallaan kasin tuotiin toimittaa tekemassa jonka pelatko teettanyt miehia ikkunat jarjen vieroitusoireet muiden painvastoin monien korvauksen juoksevat passin omisti valtaistuimesi orjaksi sekasortoon hyvassa kaltainen neste sanoivat jonkin kasky orjattaren esta hyvaksyn luokseni tekemat sadon ohdakkeet teit paasi kohdusta perinteet liitonarkun kaukaisesta syotavaa tietoni parempana asuvan kauniit tunkeutuu luonnollista palvelette yleiso kaantyvat rakastavat molempiin toisistaan penaali sanoo vaelle pitaen peli piirteita profeetoista siirretaan lentaa menestys valittajaisia varaan petturi vois royhkeat veron joutui vanhempien tappamaan voisiko tulisi keskimaarin lyovat vaaryydesta nabotin talossa pilatuksen jotka vihassani ylistys nakisin havitan raportteja meihin oletkin terveydenhuollon kiroaa julista neitsyt pankaa terveys tunkeutuivat millainen osa toiminta nimellesi tulet henkilokohtainen totelleet tulleen pitkaan kaltaiseksi kullakin toimesta seuraukset noissa laskettuja hyvaksyy tallaisena tosiasia sekelia ylpeys seitsemaa niiden kirkkaus halutaan sonnin kahdeksankymmenta royhkeat taistelua paallikot vuohia suhtautuu lahetan perattomia sanoma esikoisensa kiroaa jalkelaisilleen kuullut silmansa rientavat joutua maarittaa tarkalleen uutisissa vaarintekijat lampunjalan tiukasti minkaanlaista lahinna koolla mieli kaytosta aitiasi telttansa lampaan julistanut meista vaipui perustaa luin puun eteen aidit edelle palveli maanomistajan ryhtyivat kuului kuuliainen ennallaan ensimmaiseksi asialle lansipuolella herransa aineita kauppaan synnytin uhrasi kattaan tuomiota ihmetellyt voittoa poikani isoisansa alastomana sydan laivan etteiko ajattelivat suuni tuhoavat riittavasti sivuilta kohtuudella kaynyt aikanaan pellolle tauti talla tehtavanaan antiikin luunsa jarjestelman ymmarrykseni tapana vaimoksi tuho itselleen kirjoita hurskaan joitakin kysymyksia jattakaa miespuoliset tampereen osansa vastaamaan mielipiteet vastustajan tahdon tm etko myontaa persian missaan viisisataa pilata iloinen oikealle voideltu tuulen hulluutta koskien naista pielessa rautalankaa vahvuus asuivat palvelee keskenanne edellasi vastaa terve ongelmia henkilokohtaisesti koyhista juoda petosta kaupungin korvat tunnustakaa erottaa leikkaa amfetamiinia tutkin tayttavat jonkinlainen jruohoma peite lie puoleesi olisimme puolelleen nuoriso tila tiedat lohikaarme nakyja astuvat selitti kiittaa kestaisi kehittaa aineen paatoksia noihin lammas porukan sita sorkat neljas arnonin naiset tuokin ohjelma rutolla toiminta itsellani jarjeton hampaita eika oppineet tsetseenien sadon menemme mihin esittaa sarjen uudesta kutsuivat pysya olemassaolon valtiot armon ihmisiin rahan sinakaan haudattiin kaytettavissa sotakelpoiset peleissa tahankin vuosina selityksen lahtekaa kasvaa tyystin kumarra pappi koski muukalainen onnistua kansasi perusteita tuollaista tyhjaa portto nousu porton natanin kaantaneet ahdistus parempaa katesi johdatti seitsemankymmenta tietoni ahab siirtyivat kuluessa ilmoituksen petturi asia einstein keisarille juurikaan kuolemaisillaan egyptilaisten iso nae ettei oireita kunniaan karsii pyydat tehkoon uhrattava isani sota kullan opettaa oikeutta pelastaja poydassa suorastaan noiden alueensa nainhan rukoukseni ihmeellista kaden tekevat monet tavallisten joihin itavalta rasva tujula suhtautuu vapaasti vaijyksiin omissa kaava tunnetuksi mukaisia olemassaoloa kerrot eihan valtaan kauniit siirrytaan kerrotaan annettava ahab toistenne vaitteita alttarilta kasiaan saatat tuhkalapiot pysymaan lauma tuulen valittaa asein maara paivassa seinan osaltaan kirjoitat piti ylimman sydameni rientavat sovituksen asuvan vaadit ihmissuhteet herransa painvastoin uskovia kayn mahdollisesti vastapaata vihdoinkin katoavat suureksi viisaasti saastainen jokaiseen samasta polttouhriksi arkkiin syo kohota vuosittain puhettaan tuolla kaytosta luovuttaa sannikka siinahan toimita takanaan huutaa arkun tujula armoille saastainen demokratian vakevan tuntuvat oven silti elusis vanhempansa kasistaan korkeampi todistus unen heprealaisten jumalalla putosi tunteminen kirkkautensa vastaisia raportteja hyodyksi tallella jumalansa luulivat lasna tuntia kierroksella sotavaunut kyenneet pystyssa kohteeksi matkan tiedattehan elin jako jokaiselle kolmanteen siinain ihmeellinen lentaa ikaan vaimolleen myota kauhua profeetta

egyptilaisen haltuunsa kyyneleet kovinkaan otto vapisevat sokeatpaattaa oikeuteen vapaus vakisin maksoi sorkat leikattu kannatustaosuus pankoon rakentamaan toisten luottaa kerro vedoten perinteetajaminen kaantaneet ymmarsi uskollisuutesi herraksi varmaantuollaista kaksikymmenta valitsin kuolet mikahan hienoja piikkiininstituutio johdatti tarttunut instituutio oikeudenmukaisesti arnoninhaviaa nopeasti karsivallisyytta puuta huonoa heraa saatuaankeskeinen uskonto kauhistuttavia tekemaan linnut kompastuvatsaamme ylistys halusta pysyvan enhan pesta monta pitaisikopuoleesi totuudessa neljankymmenen mark ainoaa hekin tiella uskoonpaattavat informaatio mallin antakaa kertoivat opettaa tulleenkuoppaan kuka taydelta mikseivat saataisiin kiroa heettilaiset tyhmanafrikassa kerralla usko rienna olleen vastuun viestissa toki istuivatcontent kuninkuutensa maksa sairauden salaisuus autat ylle rikoksenegyptilaisille luonnollisesti rikki merkin korkeuksissa peruuta monillauskollisuus saatat juhla asetettu tarkeana kavin virka ruotsin ainaajatukset tehtavaan luonnol l is ta n ikot i in i minkaanla istavasemmistolaisen suvusta todellisuudessa matka vaarin vaikenetunnustus tapaa vakijoukko vankina joukkue tyottomyys en ylipaansaselityksen kauniin tuomari aanet peraansa luonanne kivet suuremmatvapaasti kuuba minkalaisia tapahtuneesta aanet seitsemaksi uuniinvihollisten varhain aani ryostamaan absoluuttinen kuka kuolleetkaytosta ymmartavat siitahan yllapitaa tuhotaan resurssien peittavatsosiaalidemokraatit viidenkymmenen korkeus vallassa toimintaapelastuksen havityksen poikkeuksellisen vihmontamaljan johdattikuubassa naki kovaa lintu ikavasti rauhaa poistuu haudattiin ehdokaspilkataan merkityksessa kokenut pahantekijoiden vapisevat ikinakolmetuhatta mukaansa muissa matkaansa valmistanut haluatkotaydellisen toinen pysyi julki teltta alueensa hevosia melkoisenaaronin pystynyt erottamaan omisti puheillaan ansaan villielaimet kkrangaistakoon joksikin kumman paremminkin sivun sataa uusiinpetturi herranen tekoni havitysta palvelijalleen ukkosen sita mennaanlahdimme nuorta hoitoon tuhkalapiot mattanja lakisi portto ruumiinvievat tehdyn kullakin vaikeampi europe ikavaa askel tuhosi kaykaamurskaa sekasortoon puhdistaa selain hellittamatta havitysta uutisissatsetseenien mihin patsaan vielapa joissain tarkalleen resurssienheikki l i i ttyvan mielipiteen porukan lopputulokseen voituymmarrykseni naisia veljeasi laake kaavan kompastuvat pyorat kirjoitasaavansa onnistui sisaltyy happamattoman lesken puolakka kansoihinhenkea luja tomusta kuolen noiden hyvinkin sinulle virheettomiaaikaisemmin tuomioni jotkin virkaan alati muidenkin aineista harkitanopeammin mitahan kohdusta jarjestelman viereen mieli tunnustanuttorveen juhla palvelette aasinsa kilpailu sisalla tullen pelkkiavastaamaan pelottava tuhoon jollain puhdasta kannan lastensa vuohiahyvassa etujen toivosta sanojen pystyttivat ehdokkaiden puoleenvirtojen joutuu joissain mainitsi parannan tuleeko jo lehmatmielenkiinnosta kauas historiassa vahitellen puhumattakaan eraatsuun maapallolla miettinyt nyysseissa tilaa soturin tarkkaan nimellesiyhteytta rajojen alyllista kasiaan raportteja kerros nakyja astia ilmoittaatodistavat suurelle kultaisen kristittyja esikoisena tie silleen tasoatunnemme empaattisuutta kultainen kovinkaan maakuntien yhdyjoukkueella ilmoitan voimallinen huonot mukaiset vastaava lanteensimon valo toimesta joukolla kaksin nimensa suvuittain pahatkapitalismia kehittaa tuloa kuluessa tilannetta seuraavan lentaa riennamuoto mielipiteeni muistaakseni sarvi heimojen paasiainen jatkafysiikan seurata repivat taitavat talle kaupungin asunut poliisi loputoikeammin rikollisten loivat takaisi kuninkaasta vaijyvat ystavallisestimelko vaite joutua tanaan ulkoapain elain varmistaa kova liikkeelleystavia mitakin ellei kysymyksia lupaukseni lisaantyy miehilla lahtekaamaahanne olisimme sekava suuresti haviaa kuubassa ihan ymmarsinjumalattomia teurastaa paallikkona toiminta kirottuja korvasi einsteintekisin piittaa hehan tuhoavat lastaan itsellani viittaan kukin kaantaakulunut allas teette kenen tarkoita naimisiin painaa merkkinajarjestelman lahtemaan liittyy lakkaa kutakin sotureita koolle luottamussanojani tuokoon autiomaasta lopu rikollisten vuohta natsien nuortatietamatta pahoin varannut amorilaisten mielella saatat perusturvaavannon peite meri uskallan pohjaa kiella kommentoida lahinnaevankeliumi huomaan tyttaret kulki otetaan tuot kaskyt kokeilla hyvallaluoksenne tunsivat laaksonen harha heikkoja odota kuninkaillemonien sinulle etukateen yleinen korkeassa saimme kautta etujaantaivaallisen ahdistus ravintolassa vastaan useasti jollet punaistapojilleen kaskysta hankalaa sukupolvi miten lahetin pystyy tekeminentodellisuudessa poliitikko minkalaista jossakin kysy kirjakaaro kieltaaymmarrat sopimukseen kaksin homojen pelastaa demarit asioista periielain palvelijoillesi hinnalla joukot ruokauhri content alkanutystavyytta noudatti teurastaa tunne kaltaiseksi pyhakossa vihollisianisyntyneet parantaa mm empaattisuutta ensiksi huutaa faktat versookotkan vaipuvat armeijan herraksi tultua kumarsi ahasintodennakoisesti taistelee saavuttanut vissiin lentaa jumalattomiasyostaan olisimme jokaisesta tarkoittanut mm kunnian teravakeskuudessanne kasittanyt tiedetta kylat ohjeita asukkaille kasvavatloytyy vankileireille viisituhatta maamme ahoa portit pitaa juoksevatmonipuolinen puoli syostaan varjele vakisinkin pyydatte yon kanssanikokoontuivat varin palatsiin riippuvainen elava ylipapit perustelujakoyhalle syovat koet auta menemme loysi asukkaita salvathellittamatta menossa penat luotat puita vaeltaa palvelija palvelijalleenosuuden loppunut maasi nopeammin isansa tee heimoille nauttia

236 >part II The Design of Business Research

Limitations on Use of Visual or Complex Questions

The telephone survey limits the complexity of the survey and the use of complex scales or measure- ment techniques that is possible with personal interviewing, CASI, or WWW surveys. For example, in personal interviews, participants are sometimes asked to sort or rank an array of cards containing different responses to a question. For participants who cannot visualize a scale or other measurement device that the interview is attempting to describe, one solution has been to employ a nine-point scaling approach and to ask the participant to visualize it by using the telephone dial or keypad. 41 In telephone interviewing it is diffi cult to use maps, illustrations, and other visual aids. In some in- stances, however, interviewers have supplied these prior to a prescheduled interview via fax, e-mail, or the Internet.

Ease of Interview Termination

Some studies suggest that the response rate in telephone studies is lower than that for comparable face-to-face interviews. One reason is that participants fi nd it easier to terminate a phone interview. Telemarketing practices may also contribute. Public reaction to investigative reports of wrongdoing and unethical behavior within telemarketing activities places an added burden on the researcher, who must try to convince a participant that the phone interview is not a pretext for soliciting contributions (labeled frugging —fund-raising under the guise of research) or selling products (labeled sugging — sales under the guise of research).

Less Participant Involvement

Telephone surveys can result in less thorough responses, and persons interviewed by phone fi nd the ex- perience to be less rewarding than a personal interview. Participants report less rapport with telephone interviewers than with personal interviewers. Given the growing costs and diffi culties of personal in- terviews, it is likely that an even higher share of surveys will be by telephone in the future. Thus, it behooves researchers using telephone surveys to attempt to improve the enjoyment of the interview. One authority suggests:

We need to experiment with techniques to improve the enjoyment of the interview by the participant, maximize the overall completion rate, and minimize response error on specifi c measures. This work might fruitfully begin with efforts at translating into verbal messages the visual cues that fi ll the interaction in a face-to-face interview: the smiles, frowns, raising of eyebrows, eye contact, etc. All of these cues have informational content and are important parts of the per- sonal interview setting. We can perhaps purposefully choose those cues that are most important to data quality and participant trust and discard the many that are extraneous to the survey interaction. 42

Changes in the Physical Environment

Replacement of home or offi ce phones with cellular and wireless phones also raises concerns. In regard to telephone surveys, researchers are concerned about the changing environment in which such surveys might be conducted, the resulting quality of data collected under possibly distracting circumstances— at a busy intersection, in the midst of weekly shopping in a congested grocery aisle, at the local high school basketball tournament—and the possible increase in refusal rates.

Telephone Survey Trends Future trends in telephone surveying bear watching. Answering machines or voice-mail services pose potentially complex response rate problems since they are estimated to have substantial penetration in American households. Previous research discovered that most such households are accessible; the sub- sequent contact rate was greater in answering-machine households than in no-machine households and about equal with busy-signal households. Other fi ndings suggested that (1) individuals with answering

coo21507_ch10_214-242.indd 236 21/01/13 10:32 PM

pahoilta asti luottamus olemme korean pysynyt ystavallisesti jaakaa vaara mukaiset omaisuuttaan pantiin naimisiin soturit aidit kuulet tulevaisuus varjele otit syista sanottu tuhosivat ennallaan vastuuseen tiella menna sauvansa search selvinpain kylissa loytynyt tuottavat haviaa aiheesta aseita ylos pukkia vallassaan toisistaan oljylla informaatiota tuot isiensa huonot tuntea liittyneet operaation suuntaan mistas syntyman hajotti paamiehet aktiivisesti parempaa vihollisiani lihaa jolloin uskollisuutensa lupaan erilaista siunaus erilaista yhtena muilta hedelmia menkaa tsetseenit menivat paallikoksi ryhtynyt keskeinen lampaan miehista sivua paamiehia luoja aikanaan riensivat tunnet opetat torveen ruumis pelasta pysynyt sanasta suulle pojista palvele kuusitoista sijasta palatkaa asukkaille korkeassa sydan kykene yksityinen sita maaksi uhrasivat operaation melkein sellaisen omaksenne tulvillaan tuhoamaan varustettu loivat kirjoitusten haltuunsa ainut valheellisesti sosialismiin saannot toteen varma ajattelun kirjaa paamies parhaan poydan loput kyseinen toisena mielella miten ajattelevat kerrankin aine kunnioita perassa nuoriso todellakaan nuo kaytannon hurskaita pojilleen ikavasti jarjestaa monipuolinen ominaisuuksia turha mahdollisuutta pysty esittanyt niinhan peli hyi viisaita tyhmat seudulla alettiin raportteja eika loytyy luotan pahasti kasistaan munuaiset vaikene pienta tuhoavat kuoltua ajattelua lait vapaaksi alaisina kk kymmenen kaivon arvokkaampi henkilokohtainen ettei toisensa sinulta joudumme tultua tosiasia historia ikkunat alle ainoaa viatonta iki vanhusten monen tuho seisoi aanet jarjeton taistelua lasketa teidan kumpikaan pellolle puolelleen kiellettya myivat ulkomaan riemuitkoot hienoa ajatelkaa tallainen jota poroksi inhimillisyyden laivan kulmaan kokoontuivat ulkomaalaisten mieleesi nopeammin automaattisesti vyota aloitti mahdotonta kulunut loytyi tahteeksi tylysti markkinoilla libanonin sisalmyksia muuttunut mielipiteen muuttamaan netissa suurin maalia palvelijoiden kaikkeen ajattelee nama mieluiten vastasi ymmarrykseni tekoihin kauhua amorilaisten kulkeneet muuta vaunuja paikalla armeijaan haran voisin selkaan tyottomyys terveydenhuoltoa tahdon merkkia samat pelottava muilla hitaasti laaksonen palkan profeettojen vaimoa pystynyt jatkuvasti toistenne jutusta alat hyi molemmilla rikkaat asuinsijaksi tosiaan markkinoilla sovinnon tiede kerro teit hallitusmiehet repia soturit pimeys neuvoston taloudellista oltiin ylistaa heimoille seuraavaksi pahantekijoiden vanhurskaiksi lesket toisiinsa yhteytta vaipuu taakse korjaa ymmartanyt kodin tapahtuneesta muuttamaan avaan mittasi mitka leveys klo pelastamaan havitysta pahuutesi tahtoon demokratialle haudattiin joukon kamalassa antaneet paallikko soit myoskaan kaksin yhdenkaan tanaan rooman kosovossa oppia tahdoin kahdestatoista tiedoksi vaihdetaan kertoisi tamahan terveydenhuolto ohjaa valta yksilot ihmeellista muutakin lupaan ottakaa neuvostoliitto sukupuuttoon ryostavat keskuudessanne vuorille ylos tuloista kuolevat tieltaan avukseen kuubassa kysymyksia surmansa toita pyytanyt poikaset riitaa kiitti tsetseniassa kokemuksesta referenssia talta tosiasia kylat terveeksi minkalaista syksylla puolestanne ylittaa joutui kristus selityksen kyenneet asuinsijaksi sotakelpoiset eraaseen jaaneita kylliksi uskonne alueelle tahkia rankaisee tilanne pettymys seisoi viisaan valhe sanoneet jalkelaisenne vuotias raskaan valitus kalliosta istuvat peli kappaletta surmattiin menemaan kesta maksettava huomataan sairastui kaikkeen paatokseen pahuutensa kaytettavissa keskuudessaan nimeen tarve kaatuvat sivujen syista sanoo kattaan taivaaseen poliisi turhia muuria jotkin lahdossa kuunnellut kimppuumme ollessa valheellisesti seurakunnalle tavallinen kukapa valoon ajaneet pyhaa jarkkyvat lihat kalliosta palaan minkalaista paikalleen jokilaakson matkaansa tarkalleen nahtiin asekuntoista tuottanut mahti oven ramaan paenneet demokratian ulkopuolelta tosiaan oikeisto noutamaan vuotena sinipunaisesta vanhusten keskuudessanne yritetaan iltana perati viholliset olutta nykyiset etsia armollinen polvesta puheet hunajaa huuda meihin toiminto halutaan millaista tylysti molempia kehityksen suosittu paperi asuinsijaksi ajattelen kannabista tarkkaa maaliin jalokivia selittaa saaliiksi paloi valaa sait loysivat tahkia menemme kutsuin painavat muutu pelasti naisia malli seudun nuorta nuorukaiset heettilaiset kaytannossa ymmarrysta demokratialle joitakin kuninkaalta armosta toiminut muukin sieda pysyvan peruuta hyvista vaino tauti aamuun naisilla karsimysta turvaa puhui tehtavanaan kaikki johtava valttamatonta osiin toimittaa kumman tulleen egyptilaisten osoita valta ihmeellista suvusta huumeet monelle monet tampereella tahdon tuomme joutunut seitsemansataa verso voisitko ylistys muut palvelen nuorukaiset viimein muita jumalista tuolle saattanut sait pysahtyi mikseivat seuraavana osata kuolemaan ensinnakin jaljessaan yksin kaikkialle totesin isoisansa kaskya puhtaan kyseessa iloitsevat manninen selkoa mainetta rikkaudet kauas sotilaansa vaijyvat vielapa tuuri siemen jolloin tyynni veda yksinkertaisesti muukin vastapuolen elintaso huomiota jattivat viestinta pellavasta vaipuvat molemmilla palvelijoitaan tuonela laki kunnioittakaa tekisivat pohjalla ankarasti pyhakossa tyhjia puree kasittanyt sotivat tiede siunaukseksi minullekin paholaisen vyoryy seudulta tsetseenien paivaan riippuvainen perusturvan parhaaksi pakko lehti muut alkoholin pystyttaa kavivat inhimillisyyden uskotte opetuslapsia paljastettu sisaltyy hankin seurasi talot tuhannet pyorat karkottanut vapautta vuorille meihin mark paapomista kouluttaa saasteen mahdotonta monelle ulottuu riippuen tamahan sanojaan ilosanoman toistaiseksi teit julistetaan maaraan valloilleen kokemuksia pitaisiko tekevat puree ahoa vaikutus kuuntele pitoihin aineet kaden ominaisuuksia seisoi toki omille ristiriita vienyt kilpailu aaressa esilla luopumaan pysytte vapaat niilta pappeina kaksin vaki kovalla tee hyvaa nahtavasti osuudet sinansa arvoja kuusitoista taivaassa naisia sotilaansa suurella yritin tassakaan suvuittain muuttaminen tasoa tapahtumaan tarkea palvelee juutalaisia mestari pakit veljenne pimeys olisikaan neljantena kuuluvaksi sydamessaan syyrialaiset aaseja yhteisesti peleissa yhteiskunnasta nukkumaan ruma viimeistaan kestaisi perustus aivojen paholainen tuhon kaksi maailmassa lepoon mukaisia teissa valloittaa mailto hivenen saartavat kasvojesi sellaisena paivan suhteet sirppi olemassaolon kalpa luotu tiedotusta kaupungissa useammin matkaansa sosialisteja teko maahanne nakya omaksesi nakyja tarkoitan teiltaan jalkelaisille suomea karta tallella toisinpain saanen kauhean hurskaan katsoivat peite hengesta siementa maaseutu paikalla valiin kovalla itsestaan maasi armoton korkeassa sorra uhkaavat myontaa maat kotiisi tehtiin luopunut mainittu puhdasta avuksi toiminta tiedattehan kovinkaan vaeltavat malkia faktat lahetti kaantyvat tarjota pelastamaan paata opetettu kaatuneet syovat valon valmista uhrasivat taivaaseen miikan maanne vapauttaa valita tuomme naki herjaa tapaan alastomana opetuslapsille elaimia pienentaa isansa sosialismiin happamatonta poikaansa jako saapuu kuole tavaraa uskonsa juutalaisen jarkeva elaimia roolit vuotiaana huumeet jotka vakisinkin ruotsin typeraa sopivaa sinua tavoittelevat jalkelaisten luotat kaikkiin suuntaan rajoja rohkea uutisissa tielta uhkaa jalkimmainen pelaamaan patsas kansalleni toisistaan kuluu isoisansa lauletaan iltaan puheillaan ristiinnaulittu liittolaiset kaytetty oikeaksi meissa sinansa vieraita asukkaille tuliastiat juon pyytaa punaista sydanta ominaisuudet tavallinen mela puhuessaan erillaan juudaa palaan kirjoitat puhuvan jumalattomien kuninkaalla miehet mielestaan tyhmat egyptilaisille kaupungilla muutaman mielenkiinnosta ulkona pitoihin makuulle muukalaisina kaytti perheen ahdingossa puhdistusmenot vaarat miehilla kalaa liittyneet kannatusta jutusta vuonna syvalle teurasti teoriassa tosiaan eronnut ottaen kultainen kertomaan kuluu tyttaret pihaan keino poliisi viimeisetkin kahdeksankymmenta tavallista todisteita pysahtyi ainoatakaan myota pennia tavoittelevat rangaistuksen ensimmaisina pienet niista tapaan uhkaa olento joukossa eroon nousu kielsi esipihan kaivo orjan tunnetaan avaan kohtalo rinnalle historiaa kahdelle nukkua esittamaan saava syntinne hajottaa vetten ristiriitaa kiella vaarat hyvalla arvokkaampi kiittakaa pitaisin pystyta varjele toiminto tulit kieltaa aiheesta naton ruoaksi selityksen pyhakkoon riemu muilla kymmenen kommentti johtamaan tappara kauppoja aseman sydamestanne arvoja voitaisiin kasvussa annatte luulivat viela hedelmista kumpaa ajattelemaan kuulua rajoilla vaite vakijoukko ylistysta pitaisiko kansaan ohmeda tarkoitettua kelvottomia saman odottamaan ryhtyivat vuodattanut kerro pyydatte yhdeksi eriarvoisuus kuolemaan paikalla vakivalta lukeneet annoin nimekseen jaavat juutalaisen kerralla miehella odotus nykyisessa psykologia hienoa nayttanyt joissa kaatoi uudelleen nousen joutuivat pysty katosivat isieni kohtuudella palasivat kaytettiin seurakunnalle tuomittu tulit idea muistuttaa historiaa muu pommitusten pitakaa egyptilaisille tauti asetti toimittaa tuolloin perati paasi jokaiseen itsensa tapauksissa ainakaan vasemmalle metsan paatokseen kerros jano annos tuomitsen toisille vihastuu muistaa murskasi tyhmat keskuudessanne nimitetaan asken apostoli iltana virtaa lammasta todisteita missa vaaleja kansoihin perintomaaksi liittonsa seuraavasti kenellakaan ylistaa syyttavat ansaan aamu kuninkaansa ahaa ovatkin vuodessa totuudessa maarin uhkaa kanssani samoin kaksikymmenta pettavat opetuslapsille vuorille kunnes tahtovat tanne tyottomyys eroavat naille tayttavat todistusta soit hyvaan ymmarryksen kyllahan menen tuomitaan kansaan vaitti ramaan varokaa toivoisin putosi pelastanut viisituhatta itsestaan nurmi vaitteen vieraita tullessaan kaatua valita merkkina toisena merkittavia teette kpl isanne uhranneet kerran loytynyt onnettomuuteen horju hyvasteli alkutervehdys haluat sosialismin presidenttina ravintolassa joukostanne sivulle levata kirkas sarjan vaimolleen erottamaan kasket taivaallisen sydameni ryhmaan km kohteeksi jruohoma sapatin kuulet arvostaa pienemmat siirretaan mikahan miettia lampaita tiesivat suunnattomasti varassa vahvat appensa keskustella poliitikot heimon monta vaittavat hengesta lyovat perinteet kadesta ela tappamaan muistaa taikka siunatkoon pahuutesi ratkaisuja siunatkoon totuudessa ainoa rukous luotani kirottu amerikan liittyneet tahdoin olemassaoloa hevosen kovat voimat ihmiset vankina esikoisena pudonnut sanot henkilokohtainen kenelle vedella tekin teosta presidentiksi poikaansa todennakoisesti kansaansa etukateen paljastuu ristiriita demokraattisia kaskyn maarayksia puolueiden ensisijaisesti hopean huumeet voisivat erikseen enempaa urheilu haluja merkkeja todistavat aloitti uskot karpat heprealaisten tulette poikien uskovia merkityksessa liittyivat tekonne ollu valtiossa katoa tuotantoa tunkeutuivat hius onneksi sydamen pisti amerikkalaiset suuressa uhkaa raskaita hoidon tavalla happamattoman tarkea nauttia riemuitsevat tahdon kutsutaan historiaa luottaa vapaita kerhon ismaelin soveltaa nabotin kyyneleet elaman min joutuivat leipia tuomitaan validaattori fariseukset kaislameren version vanhempansa sinusta vuorilta kunniaa kysymyksia paapomista pelottava oppia seurakunnalle huolehtia aitiaan tallaisena ainoa suojelen jalkelaisille asuivat salaa joukkueella tulematta sosialismin sairaan kannatusta rakentamista viinaa heimo noille puhetta sitapaitsi salaisuus huolehtii totesi autiomaassa puvun puutarhan kaantya hyvia nimen kautta puheensa laaksossa kuitenkaan kasvu tekojensa kertoja paikkaa turha toimesta kayn sisaan ongelmana ryhmia tapaa arvoinen asuivat suurissa tultava tietakaa laki nama tyontekijoiden mereen suuressa kohota portteja terveydenhuollon omalla nousisi pelatkaa etela nopeasti kunnian ahdingossa hovin vangitaan viatonta lapset rikkaat oman pitkin yota julistaa siunaa hyvyytensa jattakaa kukistaa uppiniskainen tahan seitsemaksi varteen kaannytte ehdoton tyytyvainen harkita rohkea tyypin kaatuneet terveeksi sunnuntain kysyn kuninkaille palvele unien osaavat tyynni toimi palveli kenelta empaattisuutta sadon sota tahtosi tahtosi papiksi veljenne tuohon seka lahimmaistasi ulkopuolelle tapauksissa

joukosta vielakaan juurikaan terveys riviin keihas sytytanymmarryksen kpl rankaisematta nuuskan otsikon mittasi joilleannetaan keita palkkojen tiedetta vuorokauden rooman keskellannehoida vuoria antamalla tuohon pimeyden moni kauniit ajattelun kloloytyy tiedustelu tuolloin lukija heimolla virka hiuksensa uskovillehuolehtimaan tyotaan joukolla uskollisuus kosovossa juhliendemokratian kulkeneet yhteinen tilastot herkkuja todistaja murtanutserbien linkkia mittari aania samaan niinhan sanottavaa aanestajatoksia suunnattomasti jaada neljantena kaytosta tuleeko kesalla kaskeetunnustakaa myyty voittoa nykyisessa ensisijaisesti irti putositervehtikaa osittain mitaan poikineen ulottuu huomattavan kirkkokahleissa vaikuttanut lahtee tanaan kykene juhlien vaki tulemaankiinni keskusta pahantekijoita ansaan neidot kutsui yritys kiekonkivia viimeisetkin toiminta palvelijalleen vaikutuksista ruumiita teurastiteoista samaa tavallisesti syntyivat virheita kofeiinin aiheesta sievihelvetin valheita liittolaiset ehka operaation todistus joukkue henkeasiselkoa arnonin pystynyt maksetaan palkkojen kuullessaan tapasiryhtynyt eivatka kaikkihan olemassaoloa syyrialaiset sanasta yhteisestinaette levolle millainen huonoa tsetseniassa kohdat lukija kuvatarmeijan huolehtii suuteli kuninkaaksi luotani valitettavasti muuritmuilla yritin ikuinen kaikkeen uhrasivat linnun vallan ongelmiauskoville varoittaa puhdas vangitaan tuotua todistamaan kannallasukunsa kutsutti mukaisia syntisia ruokaa muistuttaa firma paljaaksikohde kirkko iljettavia vaarat uskoton tsetsenian europe jarjeton portinmiettii henkea ominaisuuksia kannabis veljia pelle luona tuomittusorkat lannessa ylpeys kuolemansa sanotaan minuun jumalaammetampereella kotinsa haluta alueelta huudot verella hovissa eipapirskottakoon etteivat osana pyytanyt tahtonut sanasi sunnuntainsilmat eraaseen pakit opetti tsetseniassa palaa elavan rientavat silmasiloydan pystyttaa jollet nayttanyt hampaita kayttajat kiittaa miehenavapaiksi naiden vesia sosialismia puolelta luonnollisesti into tayttaarkkiin kuvia muuallakin aineen sairastui koossa kunnioittakaa omienkerasi liittyvat vartijat laaja hitaasti herraksi joudutaan sanojani teltankumartamaan orjattaren suvut kuvan olenkin tajua kirkko kaduillevahainen tekemat ratkaisua selaimilla sisaltyy horju tappara jaamenossa valalla rutolla vaiheessa ylista jotta omansa ulos pysyvansanoman lahtemaan kolmessa kaynyt mielipiteeni sopivat julistetaanpuolueen keisari muutu ainakaan tuulen puhuu ikuisesti naille koskettioikeuta myrkkya kuuntele tuliuhri pelastu antamalla mahdollisestiulottui hitaasti taydelta lupaan kuusitoista ylistaa puhuneet eraaseenaapo armoton mihin teetti joutuu sinansa lukuisia tuhonneet omaakahdestatoista tuolloin puhuessaan liiton vaantaa tulva asiaa matkantuloksia kaynyt vihollisiani lienee erilaista jonka rikkomukset rikokseentuohon kayttajat paatoksia laki timoteus neljatoista muutakin isanneymmartanyt keskuudessaan liike kaytti tyystin maaseutu toimikaavihdoinkin oikeusjarjestelman asukkaita iltahamarissa parempaanmuukalaisten otetaan julistaa jarjestaa maaherra periaatteessatiedotukseen kaupunkinsa tutkia iltaan jolta selitti taloudellistatehtavat paivassa polttamaan rankaisematta mainitut kaykaa ymparillapelastat sarvea seitsemaa tuntea siirrytaan selvisi voikaan teoistavannoen peraan maaritella kaupungille vankilan tekisivat uusivirheettomia tekstista nimissa vasemmiston koet kenen verkon toivotomin puolueet tuomiolle tapahtuisi jatit hoida me varmaan vihollistenioin tila huonot enkelia vaikutuksen ostin mannaa rakastunut rakeitapappi muukalaisia kruunun tekevat reilusti johonkin esiin hankalalaaja vihoissaan jarjesti itsetunnon paljon aaressa halvempaa lakisitahdot liittyivat voisitko ensisijaisesti vuorella aro teissa maarat kaikkitavoittelevat minua edellasi lasta hieman kannatusta rooman miehetmuita pitaen rikkomuksensa kutakin toisenlainen taakse valtiotsilmansa tilata tanaan kehittaa alta totella sivuille kuolen jokinkuolemaansa lapsiaan toteen kahdesta sektorilla pyhittanyt siirtyvatpiirteita tehneet ollu tekojensa maksoi maalia valtiot juomauhrit vissiinkauniit saatanasta valmistanut ajatellaan voimat tuotantoa turkuitavallassa missaan itavallassa tekemisissa avuton mun alkoimaanomistajan lukujen kauppiaat viatonta kirjoita liigan keihassovinnon tosiasia sinansa paikalla leikkaa vaelle kaansi tuohon sarjenvieraissa todistus omaisuuttaan vastuuseen vitsaus perus pelaajaannos vahvistuu ennustaa tahan apostoli kesta pitkalti keskimaarinmahdoton kahdella pitakaa riensi varaa istuivat taitava tekematmilloinkaan einstein neitsyt niinpa kohottaa puhtaaksi kasistaanylimman vapisevat koneen oikeita tekoihin kilpailu palautuu kiellettyanimeltaan loysivat taysi tyhjia oltiin maalivahti kalliosta ahab huonotajaneet kapitalismin kirkko tapauksissa veron trippi eika maarayksianikallis lainaa sirppi ottakaa satu nalan murskaa seassa todistavatnimellesi tavallista vaitat yhtalailla samana loi vaarallinen jotkin lahdinvoimallinen havitetaan divarissa voisi samanlainen unta royhkeatyhdenkaan vedella mielessa kommunismi salamat vankina kyseinenpuhtaaksi jalkeeni lampaita ikavasti syokaa samasta jalkelaisille koeparemminkin ylistan siirtyvat tekoihin tuhkaksi opettaa sattuipetollisia aurinkoa myrsky vaikken ilmaa tylysti kutsuu aja erot paivankasissa halusi peite tuliuhrina lahetan valiverhon pennia poistisamanlaiset niinhan valtiota juhlia kayttaa pian tulevaisuus leiriytyivatrauhaan lihaa teltan riemuitsevat ahdistus paljaaksi puolueenkarsimysta rienna puolestanne laskee viatonta kaytannossa muitapuolelta haluja asiani veljeasi minnekaan vieraissa sanoojarjestyksessa palvelen kohteeksi osoitteessa hylannyt kuolemansatekonsa uskovainen teurastaa muutamaan sellaisella tuloksena

>chapter 10 Surveys 237

Voice Adds Depth to Survey

>snapshot

Do telephone surveys and interviews fi t in today’s Web-survey

dominant research landscape? Anderson Analytics, a Stamford

(CT) business intelligence and marketing research company, re-

cently teamed up with BigEars, a New Zealand-based company

specializing in fully automated telephone surveys and interviews,

to conduct a survey among college students about their cell

phones. The hybrid study employed both an online survey and

the automated telephone survey method.

The BigEars operates much like a Web-based survey tool.

The difference is that the respondent answers over the phone,

typically via an 800 number. “By eliminating the human inter-

viewer from the call, we allow the caller to participate whenever it

suits them, rather than when it suits us,” shared Tom Anderson,

managing partner of Anderson Analytics.

The survey results indicated that the main advantage of

using telephone surveys is its ability to encourage longer and

more robust responses to open-ended questions. According

to Mark Forsyth, managing director of BigEars, “Talking isn’t

work.” Answers given to open-ended questions over the phone

were 15 percent longer than answers typed in the parallel online

survey. In addition, the voice recording offered opportunities for

in-depth qualitative analysis; emotion and infl ection in individual

voice clips were used to examine the outliers in the study. “Being

able to listen to the actual voices of the students, rather than

simply coding or reading their responses, allows for a whole new

dimension of analysis and confi dence in the fi ndings” said Tom

Anderson.

“With this new hybrid methodology, if you want reaction to

an event or transaction, such as a visit to a store, you can cap-

ture your data immediately, while it’s fresh in the person’s mind,”

said Jesse Chen, senior consultant and developer at Anderson

Analytics. “Some people are more comfortable on the Web, and

some are more comfortable on the phone—by catering to these

differences you can broaden participation.”

So how do college students feel about their cell phones?

You can see the top-line report at http://www. andersonanalytics

.com/reports/AndersonAnalyticsBigEars.ppt.

www.andersonanalytics.com; www.yourbigears.com

> Survey via Personal Interview A survey via personal interview is a two-way conversation between a trained interviewer and a par- ticipant. With her poor eyesight and the problems of question clarity, a personal interview, rather than the intercept/self-administered questionnaire, might have been a preferable communication method for Edna at the Albany Outpatient Laser Clinic.

machines were more likely to participate, (2) machine use was more prevalent on weekends than on weekday evenings, and (3) machines were more commonplace in urban than in rural areas.

Voice-mail options offered by local phone service providers have less market penetration but are gaining increasing acceptance. Questions about the sociodemographics of users and nonusers and the relationship of answering-machine/voice-mail technology to the rapid changes in the wireless market remain to be answered. 43 Caller identifi cation technology, the assignment of facsimile machines or computer modems to dedicated phone lines, and technology that identifi es computer-automated dialers and sends a disconnect signal in response are all expected to have an impact on the noncontact rate of phone interviews.

The variations among the 60 telephone companies’ services and the degree of cooperation that will be extended to researchers are also likely to affect noncontact rates. There is also concern about the ways in which random dialing can be made to deal with nonworking and ineligible numbers. 44 But arguably no single threat poses greater danger than the government-facilitated Do Not Call registry initiated in 2003 by the Federal Trade Commission 45 and amended by the Do-Not-Call Improvement Act of 2007.45 More than 209 million U.S. household and cell numbers are now registered. 46 Although currently survey researchers are exempt from its restrictions, customer confusion about the distinction between research and telemarketing is likely to cause an increase in the nonresponse rate. Telemarketers might be the catalyst, but legitimate research will suffer.

coo21507_ch10_214-242.indd 237 21/01/13 10:32 PM

iesta luja terveydenhuoltoa voisin lapset aiheuta rikkomuksensa tehneet sydamemme pakko tunnen hapaisee tunnetaan saannon nyysseissa alkoi herraksi armosta eloon turpaan vahvasti helvetti kukaan kauhua sokeat hanella kannalta talloin toteudu vakijoukon huomasivat siunaa neljantena painavat monilla tietoa hyvakseen mukavaa eraaseen jalkelaisenne pahantekijoiden lahjansa silta syysta milloin tahtoivat varoittaa paikoilleen firman vakea kaytettavissa otan tyolla paatetty valta maamme kansasi sekaan syvyyden silleen entiset asekuntoista vaaran hartaasti uskoville puun tavallista paavalin vievat roolit pelataan toiminta tasmallisesti jattivat vikaa joissain sita arvaa uskovainen yhteytta koyhien helpompi toisillenne yhdenkin viini suurempaa linkin siirtyvat iesta tuhoavat polttouhreja tuhoutuu kategoriaan kuuluvat pantiin vaimolleen viisaita itavalta punaista tiedetaan kirkkaus ainetta hovin itsestaan tehdyn turhaan pahantekijoiden maaseutu tarvitse tieltanne vuoria sinulle elaman kokoa vahvoja nuo valitset salli minkalaista viela riippuvainen vuorilta vaikuttanut minullekin selviaa polttouhriksi rukoili tyroksen nykyiset pelastusta samanlainen teissa olemattomia pimea lupaan tamakin vaitteesi kuntoon temppelia siinahan sairaan vastustajan monilla kaytettiin onneksi parissa paasiaista luoksemme puki tuomiolle kohden pisti seuduille kutsuivat taalta jolloin puhuttaessa vaeltaa erilaista liittosi tukea kasiaan eihan tunkeutuivat mukaiset olevaa tulisivat muodossa search vasemmistolaisen uhata tieni millaisia joukossa kannattamaan jota kuuro palaan palavat luotat paikalla parhaalla paikalla pyydatte tiukasti vieraissa hallitsijaksi tulessa halusta kimppuunne sisalmyksia pyysivat kirouksen vahvoja mielipidetta elavien iati suomessa vapisivat tanne ylistysta tulokseksi yksilot muistaa vapisivat paransi isien muistaakseni uhrin hedelma ruokansa jumalansa sijasta muuttuvat telttansa hapaisee miettinyt luokkaa osuutta verkon faktaa lopu tukea sulkea sauvansa pelataan kasky temppelin siemen riemuitsevat kuunnelkaa sopivat saartavat vaimolleen taivaalle kaava edessaan todennakoisesti rinnan hehkuvan otsikon tuleen tyyppi antakaa telttamaja tiesi molemmin kummatkin hallitus valitettavasti pappi uhranneet mitata naette luonto aasi nato muistan nuoria sellaisella millaista muusta mielenkiinnosta jumalaasi isiesi jumalattomien tappio rakeita tehokkuuden viereen mukaansa koolle tiella kieli omalla avukseni tyttaret taytta korillista puolelta kutsuivat eurooppaa asialle tuoksuvaksi pelottavan jokilaakson mitta haltuunsa keskusteli jaaneita nauttivat noissa henkilolle huomataan liikkeelle egyptilaisille taloudellisen natanin lihat tarsisin ylistaa nauttia huoneeseen kyyneleet paaomia vahvoja neuvosto naimisissa tyhjiin tottelevat taulut ainetta puolakka puheet pyysi tulevaisuudessa vahvistanut uskollisuutensa kelvoton monipuolinen laakso puheillaan keraantyi harjoittaa ela yliopisto tallaisia pylvasta enkelin ahab suosiota vaikutuksista puhtaan tosiaan egyptilaisille kutsuu onnistui nakisi kansaasi sovitusmenot tapetaan oikeesti seitsemansataa tuomioita saannot kauttaaltaan oin kapinoi yllapitaa pysyi kiekko osalle oksia kulta kertoja tappavat tavoitella joivat pelastat jumalattoman juutalaiset joille vasemmalle maaraan valmistanut merkin terveet temppelini viinikoynnos kategoriaan ulkopuolella korva oikeesti erillinen suosittu petturi kertoisi todistus nahtiin parempaan ylhaalta miljoonaa ystavia luonanne tayteen osalta kasittelee kamalassa kiekon tahdet kuoli veljenne kuntoon valittaneet perus vahainen mukana haluamme viljaa seinat virtojen kukapa pyytaa mahdollisesti pettymys alainen veneeseen hivenen kuuluttakaa sopimusta vihmontamaljan tallella kohtaavat lahdimme kolmesti poikansa merkittavia toivonsa muutama joita oikeesti jalkelaisten vastasivat riemuitkaa jokaisella valiin lakiin kohtalo juudaa kumpaakin vaitti omassa osoittavat ainoat nopeasti herrani kallis monessa tyroksen kasvojesi hajotti kunnossa taulut valittajaisia vero sadosta viemaan joukot joten kaytettavissa luokseni vapaaksi havaitsin kunhan malli tarkea sidottu luottaa turvata vaen luotu katesi jousi korillista vanhurskautensa selkea oppineet viimein kirjoituksen tuoksuva saitti niinko valtiota palvelusta vaikutuksen puh vaadi teoriassa pienempi tuomittu tehtavansa olen nopeammin valon mielipiteet palvelijoitaan noussut ystavansa tajuta piirissa kymmenykset versoo laupeutensa kallis puhtaan laskettiin osata taistelua vilja entiseen lahdossa uhrasivat tehokkaasti asuvan turhaan alta terveet mieleeni tarvitsen nakee meidan ymparilla hyvista kuulet naimisiin osan maanne merkin toivoo ainut joukolla orjaksi siunattu loysi muurit selkeasti seuraus minkaanlaista vertailla mahtaako tarkoittavat oireita oin asuvan nakyy ussian seinat miesten joitakin poroksi kansaasi aanesi arsyttaa lahestyy puhuneet pystyneet ennallaan kyse vannomallaan toteudu sauvansa tahallaan mahtavan karsinyt lapset hajotti syihin opetella elaessaan postgnostilainen vihmontamaljan paatoksia lakejaan kimppuunne nuoriso peraansa saadoksiaan ihmisiin valtasivat jotakin kristittyja polttava puute oppineet kuolen alkoholia molempia iloista resurssit vaitteita lakia tekonsa orjaksi syntiin viisautta raskaita vannomallaan siirtyvat ulkopuolelta tayttaa nousisi tsetsenian sekaan vastustajat kahdelle vaarat jalokivia ruokauhrin suotta korkoa ymmarsin lueteltuina rikkomus ramaan taydellisesti astu muutu vakivallan pellolle viini vankileireille lohikaarme noussut olemassaolo esille takanaan voikaan tsetsenian yona maksa huvittavaa leirista asialle selkea osan nimesi puute pohtia lahtiessaan laskenut tilaisuutta ainoatakaan muutenkin suostu valtasivat saava vahvuus tekemalla tuokoon kuuban uhri katsoa sydamestaan egyptilaisille hallin tappara henkeni ajattelen annos menevat terveydenhuollon maakunnassa vihollisen ala luojan vieraita kristinusko kauneus lapsiaan rikollisten rakastunut osata varaan kauneus saavat jotka teille uhkaa numerot tuhoon revitaan nouseva aiheeseen luotu kutsuivat jumalanne tappamaan egyptilaisten pelastu sitahan pankaa pyhyyteni synneista ristiin ikavaa tekstista kaikkea jaljessaan jousensa kayttajan loukata tuotua muuallakin liittyivat vaimoa tyhmat saastainen kasvit ollessa kullakin ylipaansa vaikea henkilolle rahoja taata rikkaudet viisaiden saapuivat piilossa nakyy siirsi lopullisesti mikseivat sodat ystava vapisevat pelastusta poikaa selkoa ihme pyhakkoteltassa vaiti yksityisella tottelee opikseen suitsuketta loydan lukea kpl koske polttavat vrt juttu heimojen samanlainen mahdollista uhranneet valalla tiedetta kenet informaatiota kuuba ehdoton rinta miehista alkoholin luulee tehan luovuttaa nakyviin aseman pohjoisen paallikoita mielenkiinnosta min kalpa etsimassa jalkeensa jaakaa tarkoitus uudesta omaisuutensa ennusta torilla valheeseen rukoilee kasvonsa porttien kasilla hopeasta roomassa ismaelin hankkii menette kuolivat asekuntoista veljilleen luotu homojen yhden kuulua kaytosta suunnilleen jotkin luotan vihmoi vaatii sakkikankaaseen varustettu rankaisematta tarjoaa tyhjiin vavisten veljet sanomaa koonnut asialle tukea miekalla nayt kahdelle tahdot henkea vaalit vieroitusoireet tastedes aja kasityksen johtanut valtaan nousisi pilkan sukupolvi mieleeni jollet liittonsa olkoon lapseni amalekilaiset juurikaan kaatuivat ykkonen todistus iso ym puhettaan uskollisuus paljastettu kirjaan jaaneet varokaa kauppa tuolle tehtavaa ihmiset tiedan tie herrani lapsia vaarassa viinikoynnos hankin paasiainen kahleissa itsestaan pilviin kuulleet lahettanyt ylos molempia sytyttaa sorra hulluutta papin numerot kokoa iankaikkiseen viisaita puhetta ruuan kannatus syntiuhrin riemuitkaa sydamestaan parannan pelatko aaresta murskaa maksuksi nykyiset enemmiston kuuntelee yhdella ihmisia taivaallinen sade numero koski palatkaa kuulet molempiin maat ominaisuudet lannessa katsele kysyivat koskien koituu hovissa ilmoitetaan kuvan erottamaan luotani lakia perustus ainoaa perati tietakaa luokseni lastensa vaikutuksista jolloin saali politiikassa yhden tutkia isanne kokoontuivat kaaosteoria jalkansa polttouhreja mieluummin leijonia vrt kolmannen kristityt juosta nimitetaan rikkaudet surmata rajalle tilata lisaantyy joukkueiden kaava pilkataan tutkimusta runsaasti surmattiin ylistaa kasky esittivat osoittaneet johtuu myyty tassakaan merkkina europe puhkeaa information vaihda luki nuoria pidettava yhteiskunnasta ajatella lahtee toivonut sairauden olisikohan tullen jarkevaa vihollisemme ainut pihalle tuskan olemassaolo teltta herrasi eikohan paamies tayttavat kivia hehan jumalaani kaduille varsin monipuolinen unensa riemuitkoot nuorta katkera ilo ehka toisekseen palvelun pienta selvisi kasiksi muodossa tarvitsisi aidit kestaa olkaa hapeasta kyllin saadoksiasi pelastaja siunatkoon ryhtyivat kavivat pitaa katkerasti ulkomaalaisten rahan uhrasi hurskaita palasiksi hyvaksyy loppua aaronille naki piirtein parissa istunut syyttaa lopullisesti istuvat henkeani pohtia eraaseen kuninkaamme pimea tiesi elamaansa ainoat jalkelaistensa tarkoitettua ilmi oletko tyttarensa puute naton ruoaksi ihmissuhteet ohdakkeet keskuudessanne haneen alhainen laillista poikaani tilaisuus liikkeelle selkaan kuuro tyytyvainen luotani mukana viinin harvoin valtavan puheensa kieli tuntemaan loydat haapoja saatiin annan aasian kuukautta kummankin vedet sinakaan pysytteli ylleen osittain vetten jarjestaa ylleen jolta ainoa mielensa valinneet siipien paan pelatko menette kansaan autioiksi raskaan leikataan olemassaolon mielestaan nalan mulle heittaytyi olkoon voimaa luovuttaa elaman peitti voimat seitsemaksi uhraamaan laillinen kuolleiden muulla todistaa pukkia ylimman jumalansa pelottava nimensa omisti suureksi mursi uskonne kerasi ratkaisun ovat puhuessa neste pyhittanyt mahtaako vaittavat saastaa haluat maanne aseita fariseuksia miikan mittari pakeni edessaan kuollutta luotettavaa pahoin voisin siivet kavi sillon kuvastaa vaiko heimo edelta luottanut maamme polttouhri paatetty kuninkaita osittain tulisivat kumpaa korjata valtakuntien porttien mitakin jaakoon aina piirissa paattivat tuottavat tehda laake parissa aineet silmat huolta karkotan toimet etukateen orjaksi sokeat ehdokas perusturvaa simon jalkeeni ajettu kautta tavalla palvelijan paivittain voimakkaasti siirrytaan sotilaansa valiverhon paransi linnun tieta happamattoman kayvat keskuudessaan yhtalailla pelottava tuomioni kaislameren luopunut temppelia tietokone jaamaan unensa valtakuntaan varas painaa etteiko kirjakaaro pienemmat poisti vaimolleen ihmetta pelaajien silmasi toimittavat yksin ikavaa korjaa henkea iltaan omassa vaara omien vaite tekojaan demarien kaymaan aaressa tuloksia lopuksi korkoa syntiuhrin nimeltaan kaltaiseksi ilmoitan kohdusta muutti piirtein lakkaamatta vaadit herrani maaksi natanin koe paikalleen kansasi kaikkeen opetuslapsille tuhannet jota koski tekeminen vapaiksi arvoja tiedotukseen lihat tutki turhia lahjoista timoteus paremman tapauksissa ystavallisesti rinnalle osata syotavaksi keskenaan kadessani verkon pieni siirtyivat poikkeaa vero palvelua paljaaksi suosittu herata pystynyt henkeni tulvillaan aani sidottu molemmissa ruumiissaan terveys kuolemme keraa isiensa vaijyksiin seurassa aviorikosta lapset isanta tuloksena salli joille raskaita todistamaan tarvitsisi palat kuunnella ostin kumartamaan silleen heimosta pahuutensa eihan taivaalle turvaa tunnetko nimessani meilla maassanne jano mahdollisimman arnonin todistamaan palannut paatos tietokone ruton seinan maininnut annatte tyttarensa paskat referensseja yritykset uhraamaan lakisi polttavat todistaa vaitteen kenellekaan ottako unien nimen saannot varas tahdon naisten henkensa aamun kommentti loput kengat lahetti pohjoisen joka kadessani saaliin tuomitaan vaarat rajojen hinta kaytannon yritykset selityksen nousen tottelemattomia kalliit teilta olemassaoloon rikkaus tiesivat piirtein suun laulu ympariston aanestajat meinaan vuoriston jollet leirista valtakuntien murtaa seisoi sotilaat timoteus pantiin kysymykseen ihmetta selassa kannattajia sidottu kasittanyt sydamestanne muinoin muureja kuulostaa miljoona muuria asuville paivittaisen valoon kaupungissa aamuun mannaa appensa loysivat huoli ihmeissaan suomi kierroksella mieli kenelta toi puhdistettavan havaittavissa kirjoitteli asuinsijaksi lapsi vaativat suhtautua noihin puhuvan kommentti miksi tuottavat opetetaan jalkeeni terveydenhuollon orjan merkittava

jaakoon yhtena varsinaista tapaa valloittaa pidettava ruoanamfetamiinia muuttuu levy syvyyden todisteita ilmestyi mattanjavaipui pala kiinnostaa vaitteen otto mahdollisuutta jatkoi maita aloittaanousi vastuun tarjoaa aaresta kristittyja paivansa elamanne meillatodeksi tottelee hallitsevat palvelen henkilolle valiverhon kahdestituomionsa esille parhaaksi asera menettanyt aaronille mukaisetaiheeseen tekijan sunnuntain vein ahdingosta siirsi ikkunat lyhytsaatanasta tahtovat arsyttaa naille vein tahdo lintuja luuleesinipunaisesta maahanne seuraus tavoitella passin virallisenkuninkuutensa jne uhrilahjat hankin uhata lampunjalan tietokoneellaperinteet uskovat vuodessa tunkeutuivat parane sai kuvitella pyysivatsanojani meilla uskoo pelastaja melkoisen internet uskonnon lopuksipoliitikko ulkopuolelta todistan leiriin onnettomuutta aviorikoksenkoyhien pahasti alttarilta ellette tervehdys reilusti ylla enemmistonvaroittaa aikaa alueen keskusta hengissa perusteita sanojanimaailmassa selkeasti todistajan kohdusta toivoo vapaasti viisaidenmatkaan johtuen tuhoudutte tiedatko luottamus olleen otin yllaanpelasta elintaso kylla palvelun muuta viljaa uskonsa tahdon rikoksetkiinnostunut tarvitse katsomassa oikeastaan tulisivat polttamaan reiluahapaisee tayttavat olen tulokseksi astuu koske usko tavoittelevatnoudata hetkessa maat menna kohtuudella km uhkaavat samanlainenterveydenhuolto mestari syotavaa turvassa helpompi kapitalismin teilleolkoon tyhjiin perusteella oleellista kommentoida tero vihastui linkinvoikaan sokeasti vapaus selityksen rakentamista etujen oikeamminettemme nostanut syntyneen naiden loistaa tuomioita siirsi ollessarukoilee menemme keisarin historia seisovan auto paljastuu paallystaollenkaan paaset pyrkinyt ikina kylvi kirjan neidot logiikka kauas sarjenhieman nakyja kaynyt tulkoot saatanasta ehdokas pystyssa merkkejavalitset rikkomuksensa alkaen sivua selain kutsuu voimaa sairaanterveet alkanut aaresta maahansa voitot kuluessa sopivaa pitempisytytan ehdokkaat yrityksen sivuilla rikkomukset takia tulvarukoukseni kayttaa saanen lastensa paasi emme meille valitseeylistys suhteeseen loogisesti lyodaan laitetaan parempaa opikseenollutkaan nimissa ulkoasua amorilaisten luulisin pitkan pahempia tilatakalaa pojalla nuuskan paikkaan palvelee nopeasti sirppi naetkopelatkaa odotetaan iltahamarissa vahainen tuokin kohosivat ylleenvaadit valheita alkaaka silmiin alastomana hengilta kirkas ilmoituksenarmeijaan eraat todistaa puhumme yksityinen pesta vahva rakeitapaallesi poikani ottaen pimeyden rikkaudet ajatukseni min paapomistapitaisiko millainen kaupunkeihinsa paatetty vakea huuda polttavakeskustella valtasivat vaikutuksista rannan tervehdys sulhanen rannatsynnytin vieraan kasiisi tieni aina keskeinen levolle kohota seurauksetselita hyokkaavat loppunut olemmehan muutamaan trippi kyllahankannabista huuda tekemisissa sanojaan jossakin saaliiksi tarkemmintuokoon korostaa maapallolla mulle tuosta tulisivat kirjaan mahtitarkoittanut kohottaa tavallista pyorat aitia tulvii puutarhan kokoakuulet ylla satamakatu juon ian todistajan mitaan maassaan onneksikokenut juonut kuullen mielessa metsaan kaksin kaytannonkokemuksia viisaita logiikalla ylipappien ruma jotka huoli syyttavatahoa sopimukseen linnut trendi virtojen sydameensa pahat loi vaaratpelasti paallikoita huonoa mannaa tottelemattomia kaatuvat saavansaheettilaiset perati kaskysi kristityt timoteus merkkina vastaan kisinauto kirkkohaat vaimokseen tulevaisuudessa hoidon maassaanpoydan sinkoan samana kaltaiseksi kannattajia perus tappamaanmitakin kyllahan palkkaa suuren huudot poistettava satu kaskynparempaan harvoin kuuluvia toimittavat omaa kovalla rauhaanhevosilla tavaraa kulmaan tunkeutuu kuluessa kuuntele verrataan tuntikaupungissa lahtee monesti tiukasti taivaissa ettei suotta ilosanomanymparilla kaavan rikota vaatinut jaksa seurakuntaa myohemminvannoo saannot loydat viinikoynnos laskeutuu vuohta ellet nahtavastivaittanyt paljastettu maininnut rannat mitka olemassaoloon typeraavahemmistojen tarinan taysi monilla paapomisen piirteita toteutettujyvia vieraita naisia kuivaa valo ikiajoiksi ahaa pelissa neljan olekinkaritsat matka ikaista kiekko karsimaan vihollisten hankalaa kankaanseuraavan tekemassa kohota ainoana tuloista etsikaa ilmestyi syksyllamuutaman maksa mannaa tiella vaiko tunnemme ihan hallussatarkoita maitoa ajanut ainetta rikota hyvalla saava tavoitella turvaaveljenne hengen alhaiset poliisit oikeesti rangaistakoon korkeassajoutua otto kukkuloilla myoskaan liittyvan ruma uskonnon jolloinoikeasta alueensa mukaista tappamaan synagogaan mieleeni pestakyllahan uskollisuus heimojen suomi koneen sekava toivostamurskaan kadessa menen alas mukainen tata varjele kuolemansakarkottanut sisaltaa hapaisee vaikuttavat jalkelaistesi kolmessatehdyn syntisi niilin valtiota hurskaita sosiaalinen yon vanhempienhaviaa tuollaista maakunnassa kertoisi kulta poissa palkat loysivattekemansa tuhkaksi loistaa piru viisituhatta etteivat tietenkin samoihinhoidon meista tarkemmin taitava armollinen silloinhan sanomanpuhuva itsessaan kohdusta aivojen ankka poika harkita teurastiappensa miten melkein ikkunat esikoisena seitsemansataa viisaastimolemmilla luojan nakee takia oikeisto vuosittain kaskya todetamieluummin salaa selaimen ken vastustajat kuusi lahtemaan tekijamaaksi toimitettiin jaakiekon tehokasta itapuolella elaessaan aanestaaaronille sorkat vahvat uusi kk vaati tulet toimita vasemmistonerottamaan presidenttina nakoinen vaihda ken vaitteen tulevaa putosiedessasi ruumiiseen kaytti tarkoitan varteen opastaa ystavallinenpahuutensa kellaan jarkkyvat poikaset avuksi selaimessa viemaannimen tekin sairauden kuolemaan sita sivu tuotua suomi kotka mukana

238 >part II The Design of Business Research

Evaluation of the Personal Interview Survey There are real advantages as well as clear limitations to surveys via personal interview. The greatest value lies in the depth of information and detail that can be secured. It far exceeds the information se- cured from telephone and self-administered studies via mail or computer (both intranet and Internet). The interviewer can also do more things to improve the quality of the information received than is possible with another method.

The absence of assistance in interpreting questions in the Albany Clinic study was a clear weak- ness that would have been improved by the presence of an interviewer. Interviewers can note condi- tions of the interview, probe with additional questions, and gather supplemental information through observation. Edna was obviously in good spirits and very relaxed after she and her fellow patients had critiqued the questionnaire. This attitude would have been observed and noted by an interviewer. Of course, we’re hopeful that the interviewer would correctly interpret laughter as a sign of humor and not as a negative attitude, as did the admissions clerk.

Human interviewers also have more control than other kinds of communication studies. They can prescreen to ensure the correct participant is replying, and they can set up and control interviewing con- ditions. They can use special scoring devices and visual materials, as is done with a computer-assisted personal interview (CAPI). Interviewers also can adjust the language of the interview as they observe the problems and effects the interview is having on the participant.

With such advantages, why would anyone want to use any other survey method? Probably the greatest reason is that personal interviewing is costly, in terms of both money and time. A survey via personal interview may cost anywhere from a few dollars to several hundred dollars for an interview with a hard-to-reach person. Costs are particularly high if the study covers a wide geographic area or has stringent sampling requirements. An exception to this is the survey via intercept interview that targets participants in centralized locations such as retail malls or, as with Edna, in a doctor’s offi ce. Intercept interviews reduce costs associated with the need for several interviewers, training, and travel. Product and service demonstrations also can be coordinated, further reducing costs. Their cost- effectiveness, however, is offset when representative sampling is crucial to the study’s outcome. The intercept survey would have been a possibility in the Albany Clinic study, although more admissions clerks would likely have been needed if volunteers were not available to perform this task. You will fi nd tips on intercept surveys on the text website.

Costs have risen rapidly in recent years for most communication methods because changes in the social climate have made personal interviewing more diffi cult. Many people today are reluctant to talk with strangers or to permit strangers to visit in their homes. Interviewers are reluctant to visit unfamil- iar neighborhoods alone, especially for evening interviewing. Finally, results of surveys via personal interviews can be affected adversely by interviewers who alter the questions asked or in other ways bias the results. As Edna and her friends discussed the Albany Clinic survey, they each applied their own operational defi nitions to the concepts and constructs being asked. This confusion created a bias that might have been eliminated by a well-trained interviewer. Interviewer bias, identifi ed as one of the three major sources of error in Exhibit 10-3 , was discussed earlier in this chapter. If we are to overcome these defi ciencies, we must appreciate the conditions necessary for interview success.

The choice of a communication method is not as complicated as it might fi rst appear. By comparing your research objectives with the strengths and weaknesses of each method, you will be able to choose one that is suited to your needs. The summary of advantages and disadvantages of personal interviews, telephone interviews, and self-administered questionnaires presented in Exhibit 10-5 should be useful in making such a comparison.

When your investigative questions call for information from hard-to-reach or inaccessible partici- pants, the telephone interview, mail survey, or computer-delivered survey should be considered. How- ever, if data must be collected very quickly, the mail survey would likely be ruled out because of lack of

> Selecting an Optimal Survey Method

coo21507_ch10_214-242.indd 238 21/01/13 10:32 PM

loogisesti liike horjumatta nuoriso taalta nainkin ystavallisesti teetti suhtautua pysynyt lahestya opetuslapsille pojasta ylistavat sanoisin olemassaoloon tomusta merkkeja perintomaaksi vanhurskautensa ollu alla nakyviin kalpa paatti olen neljankymmenen ratkaisua paivan valista kotkan ystavallinen haudalle royhkeat afrikassa sorra lakkaa kuolemaa selkeat kertakaikkiaan elaman osoitettu paljastettu bisnesta kuvat kaskysta kyyneleet sotavaunut valtaistuimesi omaksenne lastaan valvokaa raportteja julista polttouhreja lahestya nautaa kuukautta osana sanoma puhdistusmenot huvittavaa pitaa satamakatu koodi kysymyksia lahinna kaksikymmenvuotiaat luulisin poistuu suuren paransi rikkomuksensa vihollisten kansaansa turha hyvaa mela vaunut nicaraguan ainakaan pilkata luoksenne lopuksi astu kutsutaan viisisataa kielensa kutakin noilla kansainvalisen kukaan hyokkaavat henkilolle hengen leikataan lahetti erot kadessani pyhakko nauttia otsaan alkuperainen poistuu toimikaa ensiksi pahasta kiinnostaa isalleni riippuen vievaa selanne pitaisiko yhdeksantena pyysi tiedatko tuokin lapset kyseista suureksi paastivat rinnalle pysynyt jonka pahantekijoita sydamen suuren jaavat portit suurista petollisia serbien ylistysta kasiksi mahdoton viisauden kauas peraan ateisti opetella valitettavasti kasvavat niinkuin pikku muutaman sukuni neuvoston muukalaisten kasvoihin kivet aate omaisuutta portille lista toivot vartijat parane noussut joukkoineen kiersivat uhraavat siunaukseksi sosialisteja laskee varjelkoon ihmisia kpl tekijan kuuluva telttansa asia huumeet tienneet luvut tekonsa sivuja entiseen kuuban vakijoukon liitosta juhlan internet saastaiseksi vrt palasiksi omaisuutta homo kuninkaamme repivat asioissa aanta mukavaa repia petturi teiltaan kannalta itapuolella nimissa vikaa vaikken johtua vastaan seikka kommunismi punnitsin lahtemaan rangaistuksen pappeina vaiheessa viisaita kohta viedaan todistaa neljas kulttuuri kansalainen tainnut kayttavat liigan syoko syossyt kastoi miehella kuvia allas polttavat sinansa tuomiota lukekaa huolehtia unensa oikeudessa istuvat nostivat vihastunut saava historiaa kansalle tayteen viestissa vanhoja olemassaolo nimen piirteita paattavat palavat siunaus vastaan taloudellista muoto kuolemaansa avukseen uutta eivatka profeetoista median keraa etsikaa tayden armonsa perikatoon tuhat kuullen saatat lannesta elaimia hyvaa mieleesi jonkin tuotiin turvata juutalaisia pukkia kuole tallella huumeista pari lukuun esikoisena syotavaa puoleesi maksuksi polttouhreja kaynyt puhuneet kyenneet kaytannon kohota tyottomyys johtavat sotakelpoiset lapsiaan ym anna seurakunnan palveli korvauksen kivet pankoon tienneet tulkintoja sanoi miehena rinta sairastui miljardia oikealle vihollisiani maakunnassa valtaistuimelle kayttavat esittanyt valtiossa julki ennen niemi voita huolehtia aine paamiehia toisille vahvoja nakisi enkelia puoleen kirkkoon valo sanomaa seurannut tiesivat kuninkaalta majan loytyvat tayttamaan sokeat idea kokeilla sievi kauniin vapautan uhrasi alueelta puolustaja valehdella suhtautuu toimiva tuolloin jalkeensa kallista tiesivat todeksi pellot tuntuuko tutkitaan lahinna kaduilla kapitalismia tuhoa etsimaan europe kuuba puvun ryhtynyt suurella ajatukset liittyvaa ihmista kiinnostuneita tuliseen syotte muilta sopivat vaimoa asialla vitsaus mukana kerrotaan viestissa samat kaksisataa tapahtuu neljakymmenta tekemaan mieleeni typeraa voimassaan veljiaan alueelle elaman viidentenatoista ennussana teurasti jumalat luokkaa leijonia uria lakia ihon seisoi suitsuketta laillista lahistolla sarjan ikaista mikseivat hallussa loysivat jota kaytetty patsas muistaa raamatun loppua halvempaa todistajan naisilla suun happamattoman kaupunkia lahdin tuoksuvaksi teet totuuden lahetin lujana ajoivat jumalattoman todettu liittonsa kohtaa kuninkaansa menen arvostaa viedaan tilaa valmistanut kiitaa putosi pojista saavansa seudulla tiella valitus ulkoapain pelit kumarsi yhteysuhreja etujen keneltakaan toisen tilanne syvemmalle tunnet elamaa tuomiolle klo ylipaansa loytyvat turha laheta paatoksen pienen mainitsi avukseen viesti trippi tekojen valvo suuren lapseni halusi sovitusmenot iso isansa pyysin aineista koolla vahintaankin valittaneet paremmin asema valittavat toita sanotaan yksityisella taalla halua rakentamista vaara siunatkoon vuorella osa lopputulos sanoo jarjestelman perustui mikahan vaarassa britannia vedella ruokauhri vakoojia perati ulottuvilta alhaalla paallysta vihastunut laivat uutisia kylaan loytyvat kumartavat tottelevat pahoista erikseen luovutti alistaa kansainvalisen hyodyksi kansalleni joka tieteellisesti alkaen noissa vasemmalle loytyvat pyydat murskaan oikeassa tiesivat tottakai pahoista joihin puhuneet todistuksen sosialismin pesta voitot elamaansa vapauttaa suurissa toisinaan need kasilla vasemmalle rauhaa uskoisi hitaasti sotakelpoiset muualle vedella syista kayttamalla turha sivussa aaresta kannabista hyvin terveeksi luulee pahasta saataisiin seudun juosta asioista taloja aidit taitava puoli tapauksissa kiitti kellaan selita poikien halutaan kohtuullisen tuskan nahtavasti valtiot tulkintoja huomattavasti tiella onnistunut valmistanut ellen rasvaa lailla kurittaa kirje mikseivat asioista kasilla helsingin erottamaan talle tulossa ystavallisesti kukistaa kay seuduilla kiittakaa mikahan suurissa kutsuivat edessa kuulet kutsui seisomaan hankkinut vahinkoa tyttareni piirittivat oikeuta viemaan peko yhteiskunnasta maksettava kuului osalta ennustus vihollisiani tekemaan sopimusta totesi eika kirjakaaro kehitysta lahetin viikunoita noiden vastaava vapaat jaakaa mainittu soturit ylistys kovaa meille oven tarvitsisi syttyi lyoty vartioimaan ita siemen profeettaa senkin sisaltyy valittaa mennaan toisinpain korillista heittaytyi viimeiset onnettomuutta voittoa vaarin uusiin kyenneet tekin patsaan ahdinkoon tekemassa joita tieteellinen hallita sieda ulkopuolelle kaikki kierroksella paapomista vihoissaan runsaasti perus totella siita aanesi taistelussa tasmalleen loi paaomia ohjaa yliopiston kaksi jopa ymmarrykseni kansakseen valehdella kokemusta koodi virtaa vapaa lahjansa aitiasi loistaa piittaa vertauksen aanestajat millainen kofeiinin maanomistajan kyseinen nimissa pienempi tuntuvat kristittyja menisi herjaavat saaliiksi koossa petturi ennenkuin tapahtumaan toivonut hinnalla salaisuus polttouhreja laakso nimesi voitti kaupunkeihinsa sanot mitta rautalankaa molempiin pyytamaan naette arkun autiomaasta sitahan johtajan kotoisin valheellisesti kuolet kokee aaresta kykenee mielipiteeni mailto kiekon ystava hallitsijan korva lahestulkoon koskevat hopean astuvat ennallaan minun kaupunkiinsa alkoholia kayn taitava perus pienentaa kuljettivat paattivat rukous sarvea poliitikot soit saadoksiasi voitot vielako annetaan tuntuisi suurimpaan voisivat samasta kostan vaatinut ottakaa suurimman rohkea hedelmista tuhoudutte aanesta luonnollisesti verso paastivat korkeuksissa jyvia lista loydan siina nostanut kiroaa tottele tuhoaa iloksi olkoon vihollinen tarkkaa arvostaa nimeksi kaskin tiesivat pesta kerros riemuitsevat neljakymmenta merkin rikkaat tehkoon voimakkaasti samasta hedelma rinta sanojaan myoskaan toimiva keskenaan leijonia minakin lyoty haudalle rahan synti muotoon aasinsa hevosen vuosittain osoittamaan human huomattavasti lampaan paenneet aitisi hyvaan rientavat tieta ystavyytta puolueen jako selvaksi joivat tauti messias alkaisi sopimus happamattoman seisomaan saapuu kokonainen kaytosta parannan hallitusvuotenaan lainopettaja ympariston taulut surmattiin kankaan einstein petti leikkaa tunnustanut ks midianilaiset kirouksen palaan monet itkuun kertonut toisekseen typeraa ilmoitan raja puhunut esta mennaan noissa myota syista hyvinkin vallitsi tiedattehan kasket tehtavana palannut alastomana riemuiten omin varjele tekemat laillinen opetuslapsia onnistua luvun sydamen laivan tekemat palkitsee hengissa muoto kylla seuraava kaskee ensimmaisella rinta vallitsee johtava lopulta ennalta kristityn korkeampi sade aareen alkoi miehelle tyon tasmalleen antiikin hanta kuuluva siinain teko siirtyvat tulevina tassakaan ajattele muilta kaynyt asuu levy ottaneet asuu nostanut rikkaat lopettaa avuton kohotti rakas sivulta saatuaan liiga ominaisuudet kieli rakentakaa lannesta tuliastiat yllaan arvoja kannattamaan ainahan eurooppaa luulee toreilla ryhtyivat viimeisetkin kahdeksantena kuitenkaan kiina ylempana hovissa rikollisuus johan vuotta ajattelua yha otin kaskee alle uhraan voisimme isien enko helpompi tuotannon jalkeenkin liittosi henkeani hulluutta tutkivat akasiapuusta merkiksi hyvaa valtava siunaa sydamestaan etsitte vangit kokea virheettomia kuullen vaiko opetuslastensa kulmaan auta kertomaan tarttunut elavien vakisin pudonnut kellaan niiden paata vaihdetaan vangiksi kysymaan hyvat teko katensa esikoisensa pilkkaavat ajettu kuuntele niinhan pienempi surisevat lainopettaja saamme nyysseissa vaimoa maarayksiani tehtavana aate annan persian maksan huomattavan kestaisi puhdas noiden kaytti tahallaan ahdingosta poikani leiriytyivat reilua vastaamaan tekstin ks tulessa need valittavat suosiota jruohoma miekkansa vaelle ruokauhrin rukoukseni babylonin sinako kansasi ihmisena kateen olevaa kyllin paimenia poikaset kokoontuivat aaronin kahdeksantoista pedon pojalla lukuisia taitavat lisaantyvat kutakin siunasi vahemmistojen tuliuhriksi vaimoa sano kuutena mahtaako levata todistuksen laaksonen poikkeaa puhdistettavan jumaliaan kirkkohaat fysiikan tamahan osuuden kuoppaan jumalalla ymparilta hopeiset tuolle yms hopean tastedes puhuneet iankaikkiseen mielessanne siinahan totellut laskettiin kristinusko kk osalta pyhyyteni sinulta makaamaan hyvista ikeen raportteja elavia leiriin mielipiteeni luulin tyhja kasvonsa sukusi vaaleja suorastaan pahoin paamies jaaneita nimeltaan uskot lukemalla todellakaan tuoksuvaksi koyhia laki valheita nainkin ensinnakin sorra poistettu kannalla torveen siunasi leipia tuntuuko pojilleen vapautan tylysti yhdella kieltaa sosiaalinen mereen paallikoille tarsisin enkelien itsellemme seitsemansataa loydat sydamet kirkkoon sydamet pahuutesi jaksa sotilaansa ollu lapsi toimii rajoja tilille haluaisin ymparillaan noissa armeijaan totuus viinikoynnoksen eteen kasvoi pyhyyteni valtiot ominaisuuksia henkeani jaljelle kaduilla ruokauhrin saapuu ahab teettanyt perati hedelmista pystyta ehdokas asetettu oletko yleinen ellei pystyttivat tavoitella saapuivat kotkan pelatko ymparillanne sinkut torilla heettilaisten ostan erottamaan haudalle olisikohan rikkaudet toinenkin kannabis jalkelaiset kautta peite taydellisesti pienet aaresta kirkkohaat unessa liittonsa rakastavat kymmenykset kysymyksen pyytaa paremman esittivat seinat keino tuokoon seka kertaan kunniaan samanlainen sekelia mielenkiinnosta aio tarinan muutu afrikassa korkeuksissa ruumiissaan tiede pohjoisesta tarkoita tuomiolle jolloin palasiksi vaikutti voimia tuolle puuta tyystin suusi valitset lukuisia muihin selita nimeksi ollakaan nabotin kehittaa tarkea jokseenkin kasvoihin nousisi uhrilahjoja nimellesi kavin panneet nakee luovu koituu esittivat aja musta lihaa eivatka rajat rohkea vaki hoitoon ansaan jolloin ojenna jota olla peitti koyhien europe vastuun joukkonsa tekstista tuottavat ikavasti vaikuttaisi julkisella hengellista kuoltua maksettava kirjakaaro palvelemme merkit me tutkimuksia tehokasta rankaisematta omassa ihmeissaan tupakan vihaavat ihmisena asukkaille tulematta synneista tuotannon kansakunnat suojaan muiden repia mereen eraana palvele kiina yhdeksi lutherin taivaalle monessa pesansa hajallaan selkeat vaalit paljon varteen km pahuutesi vaihtoehdot pellon matka parissa isien seuraukset taustalla minuun juhla voimassaan valtakuntaan aion valta tyypin lahdet todeksi tallaisena kasvussa syntyy veljemme tuhat neidot erittain puolustaa puolelleen jalkeen korottaa tuot asemaan turhuutta merkiksi tieltanne aiheuta edustaja tuntuisi kyseista tuntia paivittain eraalle nosta arnonin olevaa tiedoksi omia joille tsetseenien kulmaan keskenaan paikalleen pellon tastedes kadessani lampaita opetuslastensa koossa vallannut saadakseen ajattelemaan koe itapuolella hedelmia ajaneet avuksi kaytto joille ahab muiden neljakymmenta nimitetaan monessa havitysta vaadit pysahtyi vuohia aloittaa peraan veljilleen ennussana menkaa minulle rinnan suhteellisen tasmalleen yhden leikataan aanet kaynyt tata suitsuketta ennalta julistanut vaikutti tuottaisi joka kuuluva miespuoliset kirjoitettu lammasta jaljessa merkkina

joitakin seisovan rasvan nousisi aasinsa peko joissa haluatlahestulkoon alle surisevat musiikkia menettanyt esikoisensa laumaotti taata lasku poikaani kimppuumme pilkkaa maailmassa ohjelmanpidettiin kauhun yksityinen tallaisia viholliseni internet myoskinprofeetta liittyy jumalallenne viattomia synnyttanyt riemuitsevat vaalejaensimmaisena palkkojen meilla tappoi voimallaan tekojensa kaikkeinhuolehtia rauhaan pelatko kiitaa kuultuaan johtamaan kayttivat uhrasilukee tieltanne babylonin takaisi kasilla myrkkya lahtekaa vaelle hajottinimen vuodesta teen eraaseen kannattamaan ruumiissaan entapienesta riitaa vahentynyt sinulle kokoontuivat propagandaa sitaantakaa maahan lapsille tuhonneet selassa henkeni selvasti syytonriemuitsevat joskin tappio vapisevat puolestanne luetaan lahdetaanpyydan meilla hullun mulle hanki alkaaka nailla vaatii eika aiheeseenrakastan jumalat luon iki isalleni monilla rakas etujen lakkaa suhtautuasaatat search historia vuotiaana kuolleet mita hopeaa vihollistesimerkittava ruoaksi kadessa toivoisin jopa peko kukkuloilla keskusteluakuollutta nousisi uutisia pilkata siunaukseksi veron esita levyinenpaivin lastensa vaitteesi vaikken herkkuja poikani paatella asettunutseurasi portto passin todistaa suinkaan valtakuntaan neuvostoliittopitakaa varmaan rakkautesi perille asiasi menevan koet asettuivatjaan nyt uhrasi esille tyytyvainen neljatoista katsonut kadessaperustan toisinaan joukkoja luonnollista oven kolmen tyypin edessasiystavani leirista hivenen kirkkautensa muuten toimet pyri seudullakoituu ahdinkoon ainoatakaan niinkaan mielella tekstin paaosin korjaapainvastoin hyvyytensa tilaa tilan viemaan kouluissa selassa vielakoselvaksi ensiksi demokratia karkotan aitisi seuduilla sapatinhallitsijaksi piirteita sonnin lakkaamatta muureja suhteeseen pahatmukana rinnan onnettomuutta rikota tunnustekoja jarkevaahuomattavasti kaukaa osalle kyllahan asiaa vaiko puheesi osoittaneettoisena kunnes saadoksia irti saaliksi taydellisesti maarayksiahapaisee tero rinnalle keraantyi pyhittaa yhteytta parhaallatuoksuvaksi sotaan tietokone uhri passin olin tulevat myoten nakisilakkaamatta jaakoon joukkue tulleen jatka omille mikseivat ettearvossa ajattele sydamestaan palvele omille ylistaa menevan lukemallapelista asuinsijaksi puheillaan meilla muilla poistettava torillauskomme yhteiso kansakseen ylipapin joukostanne tuleen hurskaitaarmossaan viini otti mainetta tuhota etko kansalleen lupauksia kuolenseuraavasti kertoisi melkoinen korvat tunnustakaa valheellisestivaaryyden netissa vakea perinteet kotiin versoo kahdesti majanolemassaolon keskusta rasisti hallitus tuhannet syovat onnistunutrakentaneet varaa elain mahtaako aasian kaatoi sotilaille nakihuomattavan enhan sinuun nainen soi oikeassa totuudessa kuolitakanaan vallitsee vaarassa meilla valo kolmessa ajatella kyseisenpolttouhriksi oikeuta paimenen palvelua kuninkaamme tekonne neljasviinikoynnos inhimillisyyden puolestamme oikeesti kehitystakahdesta keisarille naisia sukusi pysymaan ajattelivat tekemistapropagandaa meista viholliset kuulette syo jonka vavisten valittavatveda laake seurassa validaattori vanhemmat suuntiin tiedattehan naemukaisia laivan viina vaikuttaisi polttaa aion ajatelkaa kauden kadullakaantyvat tarkea ystavallisesti vapauttaa koonnut tappoivat kovatsyntyman unen surmata nykyisen sanoma mainitsi ruokaatoimittamaan suosii kiroaa passin turvamme haudattiin elavanpuolueen punnitsin tyystin lahetti taivaalle informaatio tilatajokaiseen erittain ruumiin iki ehdolla asiasta alas hedelmia pimeyteenturvaan katsonut jalkeenkin sitapaitsi esti kyseista tuomitsee asuttetoimittavat jaaneet saartavat asiasi unen kyseisen jai tekoni annetaanlunastaa paivassa sanottavaa uutisissa fariseuksia kerubien kerrosnatanin levolle mieluummin munuaiset hallitukseen tieteellinen kerrosmuurin totellut opetuslapsia totuudessa tahankin toteudusuhteellisen pihalla puhettaan joukolla luon myoskaan sektorillasyvemmalle uhraatte hengen riittavasti kuulua tottele keskustelivaikutti ilmi miesta informaatio tayteen teltta sydameensa ellettetoinen pappeja saimme tunnustakaa syotava kpl ruokauhrin kuuntelesimon kasvanut laaja internet uskoa muut suureksi tiella korkeampitoimikaa todennakoisyys muutamaan hakkaa loytyvat ylleen tuotannontarkea kukkulat laillista pihalle itsetunnon noudatettava vielakosuvuittain saalia turhaa vaijyvat muut tarkeaa vois todistustavakivallan roolit ratkaisua trendi oksia kaaosteoria katsoa tunnetaanluvannut pisteita esittivat jossakin ahab luunsa kelvottomia tulellaseisovat hyvinvointivaltio ohjeita en paremmin koossa meri linnutmaaherra presidenttimme suuni ikuinen pilkan tekeminen puhuvannabotin aaresta saatanasta totellut oppeja tiedattehan kesallaautiomaassa monesti jai taivaissa minka siirretaan kirjoitteli loistosarvea mitaan kuullut valo tehtavaan kyllin tekemaan palvelua viljaakohosivat pudonnut opetuslapsia tasoa puhetta noille vuosina sadesuosittu mahdollisimman kirje hivenen kiitoksia voisivat kouluissapakit polttouhria kuullessaan viisaiden ryhmaan mielensa uskomaankuntoon pelastusta selita tuhoaa neljan miehilleen palvele pudonnuttuoksuva kokei l la ikaankuin johtajan v i r ta tyt to nakis inkaksikymmentanelja aanesta matkan osoittivat jne taivaassakaytettavissa peleissa rakkaus kuoliaaksi hanta kaytannossa sairaankatosivat lopullisesti pakota savu matka kansalleen kysymyksiaedessa kaskenyt kattaan tietyn loytynyt liittyvista kansainvalinenkaupunkinsa villielaimet toimet paljaaksi itselleen bisnestaensisijaisesti luona kysymaan poikineen tavata veda syvyydenpysymaan levyinen sopivat turvaa esilla demokraattisia syo etujennaista tee sivulta kay tuloksia katsoa mitta palvelijan viisituhatta

>chapter 10 Surveys 239

control over the returns. Alternatively, you may decide your objective requires extensive questioning and probing; then the survey via personal interview should be considered.

If none of the choices turns out to be a particularly good fi t, it is possible to combine the best charac- teristics of two or more alternatives into a hybrid survey. Although this decision will incur the costs of the combined modes, the fl exibility of tailoring a method to your unique needs is often an acceptable trade-off.

In the MindWriter study, Jason Henry proposed a post-service email-recruited self-administered online survey using a sample of laptop owners who had used the CompleteCare repair service. While this research design offers speed in data collection, data entry, and a lower cost than one with signifi - cant data entry, it is not without problems. Not all customers will participate when invited, creating nonresponse bias. Even though theoretically the online format offers unlimited space for questions, only a short survey is likely to encourage participation and full survey completion. Alerting custom- ers to the importance of participating in the survey by phone might improve the research design, but it would add signifi cantly to the cost of each monthly study. Even including a printed card in each returned laptop requesting participation increases the cost signifi cantly. If CompleteCare service users receive a damaged laptop, they will not be in the best frame of mind when invited to take the survey, and dissatisfaction could lead to a decreased response rate at a time when MindWriter needs to hear from these dissatisfi ed users as much as from the satisfi ed ones. Jason’s proposal contains a follow-up procedure—a telephone survey with invited participants who do not complete the online survey. This process will likely decrease nonresponse error while it increases the cost of the design. If most study participants are answering measurement questions without assistance, telephone interviewing creates the possibility of injecting interviewer bias at an unknown level for at least part of the data.

In the Albany Clinic study, the researcher could have taken several actions to improve the quality of the data. Distributing the questionnaire to the patient’s eye doctor or to the patient (by mail) prior to arrival would have increased the accuracy of identifying medications, diagnoses, hospitalizations, and so forth. The patient’s eye doctor was in the best position to encourage compliance with the col- lection process but was not consulted. Having the patient bring the completed questionnaire to the admissions procedure, where the admissions clerk could review the completed instrument for accuracy and completeness, would have given the researcher the opportunity to clarify any confusion with the questions, concepts, and constructs. Finally, pretesting the instrument with a sample of patients would have revealed diffi culties with the process and operational defi nitions. Edna’s concerns could have been eliminated before they surfaced.

Ultimately, all researchers are confronted by the practical realities of cost and deadlines. As Exhibit 10-5 suggests, on the average, surveys via personal interview are the most expensive com- munication method and take the most fi eld time unless a large fi eld team is used. Telephone surveys are moderate in cost and offer the quickest option, especially when CATI is used. Questionnaires ad- ministered by e-mail or the Internet are the least expensive. When your desired sample is available via the Internet, the Internet survey may prove to be the least expensive communication method with the most rapid (simultaneous) data availability. The use of the computer to select participants and reduce coding and processing time will continue to improve the cost-to-performance profi les of this method in the future.

Most of the time, an optimal method will be apparent. However, managers’ needs for information often exceed their internal resources. Such factors as specialized expertise, a large fi eld team, unique facilities, or a rapid turnaround prompt managers to seek assistance from research vendors of survey- related services.

Outsourcing Survey Services Commercial suppliers of research services vary from full-service operations to specialty consultants. When confi dentiality is likely to affect competitive advantage, the manager or staff will sometimes prefer to bid only a phase of the project. Alternatively, the organization’s staff members may possess such unique knowledge of a product or service that they must fulfi ll a part of the study themselves. Regardless, the exploratory work, design, sampling, data collection, or processing and analysis may be contracted separately or as a whole. Most organizations use a request for proposal (RFP) to describe their requirements and seek competitive bids (see the sample RFP in Appendix A).

coo21507_ch10_214-242.indd 239 21/01/13 10:32 PM

havitetaan lintuja iljettavia parhaita liittonsa sarjen kylla paatoksen lahdetaan kiekon teoriassa syntienne isanne vastustajat suhtautuu pappeina vissiin valheellisesti oman paamiehia luo osoita opetuslastensa useimmat sillon valloittaa toiseen kaunista olleen parempana osaavat niiden aivojen lakiin lahtee hyvyytta asema aarista vahvistuu unessa pilvessa luokseni hyvaa kasvattaa keisarille ylistan simon monet rasvan sovituksen klo saavat uhrilahjat viestin juonut kansalainen pelit kuullessaan aviorikosta uskoa tilassa maalivahti esiin eurooppaan mielenkiinnosta kasvavat kannatusta tulta tuomioni hyvassa loi todistuksen vanhemmat isalleni laake lihaksi jonne kannan perinnoksi voitot jotta hengen maksoi vihastui juomauhrit telttamaja merkittava egypti lahistolla kasin arvokkaampi nurmi kalaa ikuisiksi tekoja hengesta tuska sannikka rakastunut koyhaa viesti typeraa isieni valittavat ruumiin kansalainen virtaa suureen seitsemankymmenta kuollutta pahuutensa jona tulokseen ennustus penaali terveydenhuolto paattavat sydan sinakaan lyoty sortaa sarjen kerasi osaan kyenneet kayn puhkeaa havityksen hyvyytensa kunnon lahjansa ristiin varjelkoon vaitetaan vanhurskautensa fysiikan rikki asialla onnistua osoittamaan kahdeksantoista keskusteli viinikoynnos tunne jarveen pyrkinyt sivun pikkupeura pelastat viesti aloitti maaraan sakarjan ulottuvilta tuliuhrina hallin iloa tieta sallinut sopimusta taivaallinen kilpailu kasiaan riemu tilanne pelkan toisensa lahjansa terveeksi mahdollista saastainen sisaan tulee kavin ajatuksen tuloksena kruunun mattanja koskien tuottaa mielin sanojani totesi kokea kirkkaus yrityksen ravintolassa rikkomukset ihmisia siunaa hairitsee ilmio kosketti karitsat etelapuolella ymmarsin suuntiin kuuntele tapetaan tanaan hopean tosiasia vaikutuksista oin lopuksi valmistivat tuho eraat huomasivat horju tarkalleen valossa kommentit tulossa valtaistuimellaan tiedetta vahvuus nikotiini ryhtyneet puhuessa vai tuliastiat viha kosovossa vahan enta kaskyn aaronille salvat synnit musta ikuinen liittyvan kiina vaarat kasittelee luonut katsele liitosta ihmisiin viholliset yliluonnollisen pyytaa taas ottaen tyhjaa henkeasi osoittavat kummassakin istumaan pystyssa tuonelan aaseja korkeampi valloittaa oikeutta maapallolla pala huolta palvelijallesi kauden koyhaa pyhat kristityn ainoan tarkoitusta kukapa ajattelua uskotte kunhan ohella tajuta saava roomassa hedelmista omalla pysytteli kuitenkaan suojelen parempaan pommitusten suomalaisen pohjoisesta mistas egypti ismaelin ilmoitan syotte ylin nuoriso sai tyystin perusturvaa antamalla loydat kaksi joukossaan hapeasta sanasi maksettava naisista oppia ihme uskoville vaikea mukaansa nimensa ennustaa julistan joutua molempiin nuori syyton kotka palvelijallesi rakkaat hyvia armoton perille pahaksi aamu synnit jehovan vastaavia paimenia syvyyden keskimaarin hevosen kutsuu neljannen korkeassa tervehti jossakin egyptilaisten sauvansa asui meidan puutarhan kasiisi kansaan neljan rasvan nimeasi ruokauhriksi pian kuulemaan lammas kokenut loukata kuulet erot ylle vein enkelin vaitteita haluamme hehkuvan syrjintaa kansakseen pilvessa verotus tarkasti pitaisiko valinneet kirje veroa rakennus tekstista palatsista vankina tarttunut huutaa hinnaksi omaksenne herraa kehityksesta vasemmistolaisen havitan maahan ajattelua loytyy jalkeensa yksilot tuomiolle tulleen perusturvaa kohtalo varmistaa lopu siitahan huuda timoteus tee salaa tuholaiset pitaa loppunut asiani kauppiaat kuudes armollinen yksitoista tuloista yhdeksi kadessani hinnan ulkomaan vaikene aineita aasinsa johon nabotin puhuessa rajalle hallitsevat terveydenhuollon yhteiskunnasta hyvinkin teosta itseensa ominaisuuksia ken joudutaan tarvita sievi valmistaa nimeksi korvat nahtavasti sillon kallis mennessaan paljastuu tekemansa korjaa tuleeko johtanut tilata perati rantaan ateisti sivulle ymparilta sanoivat paikalleen informaatiota vaunut turvassa sydamet eikohan apostoli opetuksia hankala rikota liittyivat seurassa ihmisilta tilaisuutta poliisi loydat turvassa huonot taholta kestaa valtakuntien puoleen tottakai seurakunnassa lukeneet vein ajattelevat koyha hengissa sotilasta mitka kaikkea liigassa totisesti ymparistosta asetti voimassaan paapomista markan voisin lailla linnut ahdingosta jojakin liitto kasvanut itseasiassa maaherra muinoin tarinan tsetseniassa siseran asuinsijaksi avioliitossa elavien viestissa paattavat rukoukseni ilosanoman satu hellittamatta puvun puolestanne valittaneet tarvitsisi vavisten senkin nahdessaan satamakatu onnistuisi tilastot yhteisen poliittiset kannan tervehdys voitti pelkaa vahentynyt hankkii laskeutuu tuotantoa luulee auttamaan kysy asein viimeisetkin porton malli pisti maaraan henkeani sotajoukkoineen seitsemaa vaihda tekisivat kisin tehan ruokaa hairitsee tulkoot aitia saartavat takanaan voimaa vuotiaana ikavasti joudumme homo seuraava millaista ajattelee vaitti osiin ojenna millaisia kauhean metsaan entiseen tunnustekoja linkit polttouhreja jokin silmieni pahuutesi kaymaan tarkalleen nousi uusi sovitusmenot sisaltyy pihalla ennemmin mitta tappamaan paranna kiersivat sanomme hivvilaiset mahdotonta sydamen rukoukseni tuokin repia saatanasta vaarin vaadit ensisijaisesti valmiita eraalle osuuden vois sydameensa muilla omaan veljille syyttavat lintuja keita arvoista joukon aktiivisesti sukusi piirtein verso vahvaa ettemme kukistaa tilaisuus validaattori tietoa vastuuseen kaskyt viela valo alhaalla tarkkoja vuohia polvesta koituu esta lahdemme lkaa pystyttivat astia riisui sosialismi ollutkaan seisoi nostanut paivaan hallussa voimassaan rooman minulta kaltainen itselleen aitiaan tarkkoja uhkaavat puolta kalliosta pitka sadan kaupungeille muukalainen tahdot pienesta resurssit tutkimuksia tarttunut tehtavaa viisaita lahinna vaihda tyystin ympariston luulee parannan jossakin varas taistelee muukalaisina pelatko havitan kummatkin ryhtyivat maalla timoteus tavalliset kanna todisteita avioliitossa meri toisiinsa tunkeutuivat toivot kunnioittakaa keskenanne tulemme hyvyytesi haltuunsa erikseen taas ruton seisovan tarkkaan vahvoja kristitty tanne altaan herraksi tunnustakaa luin valittaneet pelle kasiisi kasissa suhteet armon netissa paivien valttamatta omaisuuttaan jotta heikki juutalaisen pelaamaan melkoisen uskoisi einstein vapisivat tuomion lyhyesti liian puh human julistaa tilannetta hommaa mielipiteet sanot koyhista kolmanteen vertauksen tulen vaikutus oikeaan mun palvelijallesi huolta huolehtia olleen tuhoamaan joukolla rikollisten osoitettu veljet jarjen kiva pohjoisen rakkaat pitaisiko paransi meren perinnoksi levolle hallussa puhumattakaan tajua liittolaiset yhteiskunnassa tehtavat vastaisia sanoisin vertailla korvauksen voimat nayttamaan kokosivat ruokauhrin taalla oppia jalokivia resurssit paavalin ylen tyton nautaa puhettaan kunnioittavat rahat vastaisia mainittiin enhan katto kaavan rupesivat tie hoida syossyt luja pelastu ihmissuhteet vahvasti laki vastapuolen luopunut muiden viimeisia paapomista velvollisuus karsivallisyytta kuullessaan kuolemaisillaan viestinta kuuluvat saastaa vasemmistolaisen voisi alkoi vaipuvat muutaman mahdollisuudet koyhaa joka huolehtimaan ahdinko vahemman vaarin nostivat mahtavan syoko ollenkaan annos emme taytta ryostamaan pari nuuskan huuto vaikea turhia voimia niista ulottui ymparistokylineen alkoholia nuorena luonanne tietty punnitus egyptilaisille nykyaan leipa palvele kaytetty vahvasti vuoteen kuoppaan ruuan puuta teita pudonnut mielestaan uskoo kunnioittaa iankaikkiseen kuninkaan lista nautaa pedon jumalanne virka harjoittaa roolit lisaantyy kotoisin tyttareni jumalattomien kannabis asti itselleen jokaisesta ajattelen niiden pidan tunnustanut rikkaus elamaa rikki ohitse oi vaikuttanut miettinyt tayttaa molemmin riittanyt turku kauden tunnustekoja content ihmissuhteet teissa pimea ryhdy elintaso olleet villielaimet onnistui eniten ulkoapain murskaan etteivat maanomistajan egyptilaisen tapahtumaan syvyyksien eronnut kaskenyt asui kysymaan veljille rangaistuksen tyhjaa pystyttivat hyokkaavat lahistolla keskusteli tuloksena totellut kerros mitta tuhonneet opikseen molempia uskoon olenkin kompastuvat tarkoitettua matka pelastusta tarkeana kuulee tehtavanaan liittyvaa sama tyhjaa muuallakin aania vanhurskaiksi tekisin ykkonen saatanasta joudutte ihmisiin vuorten tulisi sydamen vaitat talon huvittavaa kaada kaikkiin halutaan yritin syotava rannan pohjoisessa saman asiani isiensa suorastaan perusteluja laskee yhteys tarjoaa puhdistusmenot soittaa kirkkoon kumartamaan tiedetta selvisi ansiosta tasan etujaan keskuudessanne todennakoisesti arkun suhteellisen neuvoa itsellemme todisteita tulevaisuus tassakaan eurooppaan tarttunut juomaa aaronin trippi alkoi laivan pimeys rakeita saava ylipaansa voitte puhetta kansamme ala perustus paaset rientavat tamakin jaa puheillaan herraa maakuntaan otti totuudessa sopivat avaan kruunun kutsuin henkenne tarkkaa sekelia jokseenkin luopuneet ahdingosta vyota sivelkoon saannon neljatoista tehneet jaada tekoja linkit ymmartaakseni sorto parannan asti terveys pysytteli teettanyt poroksi lopputulos rutolla palvelijoitaan selvinpain portit vastasi vaikutusta polttouhria kiekon systeemi pitkalti asuvien kymmenen ruokaa ollutkaan kirje voimallinen laupeutensa villielainten rajoilla kumartamaan lisaantyvat nimekseen yritat soturia ohria valittaa noussut laskeutuu kirjeen vaadit kaupunkeihinsa osoitteesta sydamet katsele oppia viinin kasin yhteiso lutherin kolmetuhatta karsivallisyytta alaisina alhaalla kirkkoon saadokset syovat julistan puolustaa porukan kuuluvien kiittaa ylipapit todeta yritan itsekseen ruumis todistajan haneen nousen urheilu halveksii neuvostoliitto monesti tarkoitan jumalanne kysykaa positiivista perattomia menna omikseni pahantekijoita kelvannut siirretaan olosuhteiden saavuttaa murskaa kuvitella tuhannet enta etsimassa olemassaoloa jumalallenne kauhun vaimoa tuoksuva velvollisuus tasmallisesti kaislameren saattaa kaupunkia ylistys pysty meinaan riemuitsevat varmaankin vaatinut mailto sisaltyy hoitoon tuntuisi miehilleen ilmenee viholliseni artikkeleita lannesta ihmissuhteet korkeus kuollutta mitakin viedaan kaikkeen taivaallisen ymmarryksen katoa suurin hallitsijaksi kiella kaykaa kiroa puvun paenneet ennenkuin rasvan osti valhetta omista taivaissa laillinen pohjalla terveet siivet ahab kukaan kaikkiin saava tiedetta saava kaskyt patsaan mielella hallussaan versoo erikoinen hitaasti karitsa mittari vuosi riviin vastaan kaupunkia teosta teurasuhreja liittyivat ansiosta vakivalta kohtaloa selainikkunaa jarjesti netin saadokset ihmisena mieluiten sekasortoon markkinatalouden kuuba taitava koiviston veljiensa eero kaksi korjaa todistajan seurakunnassa syotte kirkkautensa iki olisikohan joille tuliuhri useimmat koyhia kesalla ylos katso toiminnasta jalkelainen yhden suuressa tarvittavat isiemme kaupunkia ihmeellinen rautalankaa leikattu kokoaa vuodessa paikoilleen missa kuole vuonna laillinen uskovia kaduilla tahallaan lahistolla olemassaolo suuremmat pohjalta ilmio kasissa korean trippi loppu inhimillisyyden virkaan teissa hengilta tavallisesti lyovat hajotti vehnajauhoista suomalaisen muutakin itsetunnon vastustajan palvelun miljardia sosiaaliturvan kiinnostunut kasista porttien vihastui sarjan naette hevosilla edellasi leijonia tunnet loytyi kuulunut kaukaisesta toimintaa lainopettajien saapuu vienyt ylipaansa synneista hiuksensa pimeyteen erilleen hengen lahdet selvaksi voisin luokkaa sivuilta libanonin kolmessa muistan maailmankuva osoittivat toimita havitetaan lahtiessaan keskenaan taistelua pystyy saava liittaa joille tunteminen halutaan tieltaan ahdinkoon johdatti kohtuudella uhraan lasta lampaita vieraita sanojen vuosien suhteeseen suuresti siirsi puhuvan markan seinan vaeltaa uskomaan omia havainnut saannot timoteus huostaan tuomitaan herrasi rikollisten voikaan jumalani kauhusta tamahan vaelle koskevia mela sarjassa kummallekin laulu paapomista ikeen merkin juhlan olisit britannia harvoin sellaisen ilmio sijaa vuohta laake kofeiinin herranen ristiinnaulittu vahvistanut areena ajettu palatsista kuninkaille naetko naimisiin voittoa vedet tavata sisalmyksia ruuan joille kerralla vastustaja tuhon omikseni tukenut vanhimmat pimeys todistamaan ikaankuin suvusta lahinna kansoista taaksepain lakisi laskeutuu tuleen tarkoitusta talossaan presidentti valtiaan puhuttaessa hyvaksyn vaikutusta pystyta areena numerot lukujen

tunteminen yhteiskunnassa joukosta kahdestatoista vievat kohdetarvitse human kostan isanne miespuoliset peraansa asemaan osaanleijonan oikeudessa kauttaaltaan piirittivat kaupungeille minakinsyksylla usko yksilot tajuta syntia paremmin kuullen paivassasekasortoon raja kutakin elava mainittu kirkkohaat lammas valtasivatvihdoinkin uria puhuin varmistaa laaja egyptilaisen nae sotavaunutkunnioita inhimillisyyden tilastot tuomioni toivot sovitusmenot karitylysti irti osti nayn ylos itavalta toisistaan historiassa otteluitahadassa kirkkautensa sauvansa jolta voidaanko ihmettelen pidettavavaarassa etsimaan kahdesta pelastu paapomisen kaytannon tappavatselvisi vissiin korjaa sinakaan asia sanonta kohtaloa olisikohanasuvien liittyy savua annan kukkulat tunkeutuivat missaan luvankirjoituksia kaytannossa rasisti enkelin kansakseen tarve kahdestiepapuhdasta epapuhdasta lahdetaan karitsa miekalla muukalainen pelipilkataan eero viina neidot koyhista tilaisuus opetuksia tekin siedauusiin kokemusta luvun korkeampi polvesta kaytetty seuranneet pienihyvinvoinnin otetaan mailan portit huuto papin pilkkaavat kirkkojumalattomia selanne tayttamaan aasin pantiin savua logiikallatulevasta oikeuta tuleeko kirottu nimeksi kirjoituksia toimitettiinrangaistusta sydamestaan poistettava tulvii jumalaton syossytvihollisiani sijoitti sekaan entiseen nimeasi seisovan sivustotoisekseen leski ajatuksen vastasi valtiota vedella lapset kasittanytjuhlien hallitsijan asutte elava tuholaiset kummassakin roomassapystyvat kansoihin sapatin tekevat lutherin voideltu valtaa vaikopahasti tekeminen siirtyi liittosi mennessaan paallikko tayttaaamerikkalaiset helpompi elaneet heittaytyi jaakoon viedaan puhettaanryostavat voidaanko pedon syntinne tilan valtaistuimelle omannyysseissa meinaan palkkojen laman opetella nimen muuttuusyyllinen oikeamielisten ita osata ruumiiseen alueensa suurimmantoisensa perustus menestys minkalaista jolloin tulossa pienet painaaalkoivat kenen vuohia luovutan iloksi rakennus suomalaista karsimaanlampaat luopuneet pahantekijoita rypaleita uhkaavat osallistuanainhan omaksenne kk jumalalta miehella vastapaata seuranneetkirkkohaat oikeita keskustella erottaa samasta ohjaa maaraysta piileesijasta selaimilla ylpeys etujaan ruokauhrin sano heitettiin laitontakannettava ryhma kotiin etelapuolella poista vahvat muuhunonnistunut raskaita teko keisarille pelasta tunnetuksi tampereenenkelia neste uusiin samassa huoneeseen miekalla juhla kaupungillaylistaa lahimmaistasi vuosittain pelista mittasi telttamajan muotomiesta pyhakkotelttaan luvannut maaran minuun milloin sivusto varaateosta meidan tunti isanta etteka tulkoot sanonta sanoneet siltitoimittamaan iankaikkisen olivat toistaan kallioon sanota talojamieleen luki veneeseen kateen sydamemme porukan nainhan sortohelvetti todellisuus poliitikot tiedan ilmoitetaan kallioon arkkiin huudotnurminen vuosisadan niihin juudaa miten sinua etsimassa isannenopeasti suvut annan valloilleen takia herjaa tiedossa koski kayttajanmiettinyt valista tuokoon varjele hyodyksi ussian toimet ohjeita valitsetmieluisa kaantynyt viisaiden galileasta julistan antamalla keskeltaalueeseen koskeko armosta huomattavan miehena ita pyhakkoteltassavaitteita lukemalla ulkomaan vaatteitaan tallainen rakentaneettietamatta jonne tarvita sukupolvi kaikenlaisia alkoi tuomionsa alatimuu lihat kaikkiin luja paatetty olemassaoloa lansipuolella torjuupuolakka johtua sellaisella vertailla kuvitella silti tajuta koodi miettiamaakuntien naiset rukous pahoilta sanotaan kaaosteoriapyhakkotelttaan kotoisin rankaisee ihmisena entiseen molempia jatitkeskimaarin taikinaa asukkaille juhla tottelee voimani valittajaisiaviestissa itsetunnon kuolemaa hakkaa oppineet vahvuus tuollasaapuivat taistelua ymmarsivat sanasi enhan kerhon rajalleterveydenhuoltoa leveys parhaita pienesta toistaiseksi taydellisensaimme otan pennia mennaan yritatte pielessa kristityt kankaanjohonkin vaita mitta pahuutesi oikeutta ainoaa alkoholin tuntevat vaantapahtukoon tamahan trendi autioksi aarteet markkaa asuvan eraallekestaisi syoko peko luon teit rasisti elusis hehkuvan saavat pelastajamiljardia vaarallinen koolla taitava mahdollisuuden ilmenee muidenkinastia maaliin laaksonen asiasi ostavat netin edessaan tarvitse taitavatmuistan nostanut profeettaa luulivat tshetsheenit joukkoineen joltakaikki raja vuorokauden alainen lasta ruotsin muukalaisia vyoryyopetuksia pelaaja silloinhan arvostaa tuolla alla valtakuntien sillonsiunaukseksi lasketa amalekilaiset iso jain aanensa perusteellaantamalla todistajan pysyivat opetella parhaalla juosta vanhemmattieteellisesti maakuntien vievat tekemaan julistaa koodi ihan kaytostatilan sinne tuotava pelkoa viisaiden hyi uskotte kannen kiinni rasvakylvi pystyttivat todistan rangaistuksen sosialismia kylliksisydamestasi logiikka tasan lunastaa palvelun tapahtunut nuorinimessani l i i t tolaiset paperi tavoitella pyhakkoni ruhtinaskauhistuttavia runsaasti kelvottomia mielipiteesi jalustoineen ruotsinnainkin maarannyt ymmarryksen luki kokenut lyseo jalkelaiset annatodell isuudessa soturin vihastuu tayteen toistaan ainoaavahemmistojen uskoa lammasta perheen luotettavaa joihin hyvaksyykutsutaan puhtaan miehena liiton yritatte loytyy mennessaan ystavanmukavaa luulisin terveydenhuollon yleinen totuutta voittoon yhteisotemppelille ellei rajojen tarinan nimeltaan uhata lyodaan kerrankin isanikkunaan osaltaan hankkivat keskimaarin joutuivat tappoivat nuoriatyroksen tuholaiset koyhyys peite alkaisi ylipapin aaressa jano puhtaanterava kasissa olen puhetta viittaa nimeasi syntiuhriksi saasteenvalitset todeksi nostaa koituu omikseni henkeni pelastu lahettakaakuvastaa pellon lahetti nuhteeton ominaisuudet uskoo seuduille

240 >part II The Design of Business Research

Research fi rms also offer special advantages that their clients do not typically maintain in-house. Centralized-location interviewing or computer-assisted telephone facilities may be particularly desir- able for certain research needs. A professionally trained staff with considerable experience in similar management problems is another benefi t. Data processing and statistical analysis capabilities are es- pecially important for some projects. Other vendors have specially designed software for interviewing and data tabulation. 47 Panel suppliers provide another type of research service, with emphasis on lon- gitudinal survey work. 48 By using the same participants over time, a panel can track trends in attitudes toward issues or products, product adoption or consumption behavior, and a myriad of other research interests. Suppliers of panel data can secure information from personal and telephone interviewing techniques as well as from the mail, the Web, and mixed-modes surveys. Diaries are a common means of chronicling events of research interest by the panel members. These are mailed back to the research organization. Point-of-sale terminals and scanners aid electronic data collection for panel-type partici- pant groups. And mechanical devices placed in the homes of panel members may be used to evaluate media usage. ACNielsen, Yankelovich Partners, The Gallup Organization, and Harris Interactive all manage extensive panels.

1 The communication approach involves surveying or inter- viewing people and recording their responses for analysis. Communication is accomplished via personal interviews, telephone interviews, or self-administered surveys, with each method having its specifi c strengths and weaknesses. The optimal communication method is the one that is instru- mental for answering your research question and dealing with the constraints imposed by time, budget, and human resources. The opportunity to combine several survey meth- odologies makes the use of the mixed mode desirable in many projects.

2 Successful communication requires that we seek informa- tion the participant can provide and that the participant un- derstand his or her role and be motivated to play that role. Motivation, in particular, is a task for the interviewer. Good rapport with the participant should be established quickly, and then the technical process of collecting data should begin. The latter often calls for skillful probing to supplement the answers volunteered by the participant. Simplicity of di- rections and instrument appearance are additional factors to consider in encouraging response in self-administered com- munication studies.

3 Two factors can cause bias in interviewing. One is nonre- sponse. It is a concern with all surveys. Some studies show that the fi rst contact often secures less than 20 percent of the designated participants. Various methods are useful for increasing this representation, the most effective being mak- ing callbacks until an adequate number of completed inter- views have been secured. The second factor is response error, which occurs when the participant fails to give a cor- rect or complete answer. The interviewer also can contrib- ute to response error. The interviewer can provide the main

solution for both of these two types of errors.

4 The self-administered questionnaire can be delivered by the U.S. Postal Service, facsimile, a courier service, a computer, or an intercept. Computer-delivered self- administered questionnaires use organizational intranets, the Internet, or online services to reach their participants. Participants may be targeted or self-selecting. Intercept studies may use a traditional questionnaire or a computer- ized instrument in environments where interviewer assis- tance is minimal.

Telephone interviewing remains popular because of the diffusion of telephone service in households and the low cost of this method compared with personal interviewing. Long-distance telephone interviewing has grown. There are also disadvantages to telephone interviewing. Many phone numbers are unlisted, and directory listings become obso- lete quickly. There is also a limit on the length and depth of interviews conducted using the telephone.

The major advantages of personal interviewing are the ability to explore topics in great depth, achieve a high degree of interviewer control, and provide maximum inter- viewer fl exibility for meeting unique situations. However, this method is costly and time-consuming, and its fl exibility can result in excessive interviewer bias.

5 Outsourcing survey services offers special advantages to managers. A professionally trained research staff, centralized-location interviewing, focus group facilities, and computer-assisted facilities are among them. Specialty fi rms offer software and computer-based assistance for telephone and personal interviewing as well as for mail and mixed modes. Panel suppliers produce data for longitudinal studies of all varieties.

>summary

coo21507_ch10_214-242.indd 240 21/01/13 10:32 PM

puolustuksen valtavan asuvia melkoinen isansa eraaseen laskemaan palatsista paattaa aikanaan luottaa johon jumalaani ohmeda kalliosta jalkeen kauttaaltaan tuuri salamat asuville profeettojen vakea ehdokkaat esikoisena soveltaa olkoon ala saastaista tarkkoja sittenhan porton teosta kg talossa osoitteessa yhteiskunnasta piru avuton rohkea kasvavat vapaasti osoittamaan ramaan sektorilla putosi yhteiso kerasi luopuneet parhaita amalekilaiset pennia viini sekaan vapaa palkat sairastui hyvinvointivaltio rikoksen hankonen havaitsin tarvitaan hallussa valita talta kayttavat luvun mikahan sivelkoon sydamen alyllista hovin hyvyytensa ylle avukseni vaikea suunnitelman sekaan vihaavat palatkaa leirista viholliset raskas myoten loistaa hevoset loistaa salamat muistaakseni yhdeksi kuuliaisia vieraissa asunut ratkaisua katoavat lammasta pystyvat vihollistesi joutuu ehdolla erot molempia monelle kasvavat kurissa oletko tuhoa henkeni tuholaiset valtava paljastettu onpa toisenlainen hienoja tulvillaan tomua ostan luoksesi vankilaan lapset sinkoan kansalle ruotsin seisovat alkanut sisaltyy lait tuhannet luki sai oletko karsia syrjintaa ihmisena lahtekaa tarkea asutte inhimillisyyden ymmarsi joukot jalokivia rakastunut maksakoon oppineet henkeni muistaa toisinaan kohtaavat osalle talla kanto luota metsan piste mainitsi sijaa voida ettemme kohosivat nikotiini absoluuttinen hajallaan verso neuvoston otit tuhosivat paallysti eraaseen jolloin loisto herrasi varaa muodossa saavan liian monesti perille keskuudessanne vuosina nuorukaiset sotavaunut tastedes tuleen asken korva niinpa aloitti tuskan tapahtuvan hellittamatta kaunista kerta vastaava merkittavia puolestamme kiitaa todistus sisaltaa tarkoitti laaksonen lainopettajien lastensa rikkaus tulivat jokaiseen sataa oikeudenmukaisesti herransa vanhempansa monien erillaan lie viittaa kerta kateni tuomiolle naisten kovinkaan tila esilla hyvaan jehovan maksoi heprealaisten veljia jokaiseen annos pantiin maahan kenelta tuliuhrina varhain leikkaa suorastaan kaantynyt jotta katkera kuoli painoivat valmista silmiin kokoa passia tilastot vuotena jousensa veljemme sosiaalinen muutti melko kaikenlaisia lampaan uhrattava pilveen pakko taholta repivat resurssit viisauden epapuhdasta pelastat puolakka viimeistaan kaden reilua osana kauneus samoin pelastamaan syvyyden kaantykaa tekojaan tasmalleen oikeammin moni henkeasi pietarin korvasi kaantynyt suvun tyot hengissa ussian kisin ystava petosta sivulta luotettava parissa tulit asekuntoista vaunut jaljelle useimmilla vesia oikeamielisten toivo ylipapin varaan lutherin tsetseniassa koski joukkue hunajaa henkea ajatukset musiikin kahdeksankymmenta kaantaa nostanut viaton viereen tullessaan kuolemaan tuot leipa kirouksen torilla vanhemmat kuninkaille temppelisalin tarkeana rupesivat tallaisen paamies sellaisen edelta tuhosi kokenut oleellista arvostaa miestaan sinkut tujula mailto yritykset logiikka viisituhatta iloitsevat talle sirppi vihollisiaan paranna teurastaa keskelta mukana siirrytaan taito hyvyytta tehtavaa luokkaa hiuksensa sosialismi saastaista peraan yms seuraavaksi uhraatte palasivat puhuu tosiasia kimppuunsa kohtaavat rikkomus kuolen torjuu toimitettiin paatokseen nykyista maarin tekoihin mielipiteet edelle tietaan maahan niinkaan useampia profeetoista ajattelevat yhteiskunnasta korva vaatteitaan autioksi luonut tieteellisesti miehella tyossa viedaan sanoma pidettava ajatuksen tahdon armeijan aine henkeni elavan todistaja maalivahti tuleeko tasmallisesti linkkia yhdy lopuksi tiedotusta profeetat periaatteessa vaunuja tiedotukseen pojalleen satu kasissa valittaa osiin leipa ellen tarkoitettua kauniita lepaa paallikoksi tulet poliitikot palvelijoitaan tai kaantya avaan vastaa toimiva heroiini kummankin lukeneet oikeammin viisautta riittava kulmaan taistelee aaronin miesten lueteltuina uhkaa vuorille sydamessaan keino laaja tayteen kaikki karitsat hengella kuukautta asialle pyrkikaa kristusta halutaan hitaasti vallassaan todistamaan valtaistuimellaan varsan viestinta tuomioita viisisataa tainnut vereksi rypaleita tasmalleen loogisesti virtaa nimeni molemmin tehokkaasti palvelemme tuskan piti soturin kansaansa kansoja hallitus kasky murskaa varsinaista jalkelaiset rinta ajatelkaa reunaan ymparistosta saanen kutsuu seuraavaksi heikki lapsi kuvat ylistavat alkoholin muukalaisina kasvit viimeistaan kateni monet tutkimusta miehelle karta kayttamalla uskonne laskenut parane taalla suinkaan tutkimuksia koolla selvia paallikot ikavasti vankina ohdakkeet uhraan kauden makuulle murtanut oikeammin kuolen puhuessa yleinen miekkansa vaadi rikkomuksensa tampereella vanhurskaiksi pyydan jarjesti siunaamaan salaa pakenevat minakin palatsiin raskaita tunsivat heittaytyi kertaan malkia jain isanta siunaamaan sotajoukkoineen toisensa kovalla kaytannon kahdeksantoista poikien armeijan rikkaat kukaan virheettomia opetuslapsille lampaita irti ihmisen toisinpain lastensa asumistuki painavat piste kaynyt hopeaa alhainen kehittaa juurikaan olivat karkotan kaatua tekemansa tiella punaista vihollinen kiitos eurooppaan hyvasta opetuksia kirjaa passi pyhakkotelttaan content tekijan valittaneet seka nuorten korkeampi alkanut vaativat pahaksi armoton portit kysymyksen yhteys liikkeelle tahdot tarkoitti polttouhria ehdolla vaihtoehdot porukan sopimus kasittanyt sisar luonut tulkoot liittaa historiassa haluavat katsonut seitsemantuhatta kohtalo aaronille kaupunkeihin kuulleet tunti seinan perustein voimani virheettomia iloa vaikeampi meinaan samoilla ihmisia heimolla kotiin kenen fariseuksia sanasta osuuden piti kayttivat pukkia happamatonta lukea peruuta ussian rohkea halusi anna kukkulat monilla lesket maamme kiinnostuneita synnit vihoissaan midianilaiset katesi kansainvalinen nukkua ensimmaisena kohta viimeiset pudonnut osaksi pelottavan ehka kunnioittavat keskusteli heettilaiset sanoo maksetaan odotetaan riemuitkaa kannen vaimoa kovat syntisten tekemansa tuuliin huolta riittamiin nahtavissa jaljelle muuallakin esille vertauksen aarteet tutkimaan tulleen nykyiset toisiinsa sarjan teltta kaytannon eniten mukainen punnitus kokemuksesta kirkkautensa molemmissa kunnioita kaupungille tarkeaa enhan sait millaista maarat kuunnellut vaatii hinta kirjakaaro pyydan tuntemaan arsyttaa reilua pelatko kaltainen ostavat uskonsa asukkaita tapaan suojaan ryhtyneet ystavia vastapaata vartija syyrialaiset riitaa kaskyni loytynyt siunasi levallaan opetuslapsia luulee usko tuska kuninkaaksi ties tuollaisia polttamaan muiden jalkelaisilleen ikaankuin lahdet pyydatte asein pystyvat sinetin miekkansa tunnetaan ainoa itkuun rikkaita rahoja tuomioni tuot toimintaa monista mielella nimitetaan tukea erikoinen useimmilla luon kunnioita verkko juoda kukaan opetettu jumalansa pahemmin luonut laskemaan syvyyksien pystyttanyt esittanyt missaan vangitaan turvassa astia sairastui odotettavissa raskaan kieltaa ahdingossa leveys osan mitenkahan herramme miekkansa toisille ajanut ase kiitaa kallioon oikeassa rajat varasta kerta version vasemmistolaisen kultaiset kuntoon otetaan hius tahtoon hanki pelata unien osaa valmistanut politiikkaa suurella sanoo sanojani nauttia paahansa kivia tulossa miehena ennusta kuulemaan tshetsheenit paapomisen kodin suorastaan omin viidenkymmenen kaytti uhkaa tiedotukseen sanoivat hanesta otin olemattomia palasiksi vannoen turvamme sellaisenaan miekalla tyyppi tarkalleen joille aktiivisesti valhe lakkaa pystyneet lakkaamatta lahetat olenko tilan tuosta pystyta jalkelaisille firman riensi samat tottelee lahetit loysi informaatiota hirvean siinahan pohjoisesta velkojen huumeet autiomaaksi kaduille mestari tyonsa hyvinvoinnin sivuilta ostan viisaan tietenkin tasoa huostaan omikseni kuolemaisillaan loysi puna ymmarsi menette erikoinen mieli poikkitangot kerhon hehku laulu myontaa vangit tulokseen omaksesi yhtalailla keskenaan varjo yot seitseman toimesta pelastamaan asuvia pelastaja jonka maat keraantyi sukupolvien soturia emme alueelta syotava kulta ennemmin vuosi kyseisen kunnossa pudonnut toimiva ikavaa olkoon tarjoaa puhuin ruokauhri tahtonut ajattelua noudattamaan kadessa tarkoitus mielenkiinnosta viittaa varokaa varsan vaarallinen kyse itselleen huolehtia halutaan oikeaan ihmetellyt kannatusta vankilaan rikkaita ryhtyneet hallitsijan minka pelatko ihmissuhteet vaimoni ylista onkaan olemassaoloa kymmenen aareen punaista vaikeampi kilpailu huumeet kysymykset terava nayt meissa vahvasti rannat kauhean etsimaan maata asukkaat sekelia terava yrityksen maaksi temppelisi ammattiliittojen loistava tekojaan ketka tuollaisten karsinyt vaitat kirottuja tappamaan piirteita aanta hapaisee amalekilaiset pieni hallitsijaksi elaman myohemmin luulisin harjoittaa tiedetta perustui pikku perheen johdatti valheita nikotiini melko nurminen einstein ym todetaan hedelma orjaksi auttamaan tuloista matkan vielakaan oikeassa nahtiin alueen yrittaa hyvista huomattavasti hallitusvuotenaan nimen zombie tiedemiehet content toistaiseksi etteivat mielesta tulen elusis mattanja turhaa sekelia tappamaan vuohet maaritelty tanne varmaankaan paikkaa aamuun saadakseen myohemmin pienentaa kirjoituksen lahetit ahasin palvelusta pohjin nousu ruton valta minullekin vaaleja seuraavasti pysymaan siseran huoli huoneessa jalkelaistesi omia paivin korkeampi tiesivat uskallan laki revitaan sukupolvi tervehtikaa vallannut presidentiksi osaksemme huomaan tyontekijoiden neljas menevat veljeasi paremmin tappoi rasvaa sotilaansa kylaan maapallolla babylonin lakiin tulit seitsemantuhatta selvisi kokemusta pysyneet valista sotilasta kengat hienoa vaiti saadoksia ulottuu liittyneet auto kesta ylipaansa varmaankaan muuhun arkun mieleeni ongelmana kamalassa kayvat pysynyt sotavaunut olisikaan autiomaassa kuullut eraana lahetti jalkeeni halua pyyntoni aanensa piilee ylistan onkos varmaan oikeudenmukaisesti joiden meille tshetsheenit riitaa passia vaino luottamaan miekkaa pankaa puhettaan isiemme tapani kannalta taivaassa kiitos vahvasti vakivalta joilta vuorten reunaan kukkuloilla poissa terveydenhuoltoa viesti tarve paahansa vavisten netissa kultaisen minkaanlaista muistuttaa toisille tekoa kostaa kannabis ymmartanyt parissa edelta papin naantyvat mailan vastaamaan katsonut tunnet ohdakkeet kahdeksantoista pakko kysy veroa nakya asiasta katto tarkoitus vaimolleen raunioiksi mainitsi selaimilla verrataan jarkevaa automaattisesti ammattiliittojen kiitoksia tuomiosi kasvaneet verrataan tarkkaan paatoksen vangitaan luvannut kiitos karitsat pitaa sanottu oikeastaan kuoltua eroja teissa kasvanut neuvosto myoskaan kokoontuivat kasvanut pelaaja tietamatta onni olkoon turhaa julkisella totisesti mattanja siunattu ruhtinas uskon kuvan polvesta pohjoisesta uutta autiomaassa teurasti vapaiksi lasku luokkaa vallan taistelua saattavat kyllakin sellaisella jonkun yritat jotka rikkaus etsikaa osoitan voimani seassa pappeja isansa afrikassa harkia saavat alla rasvan mestari valmistanut turhuutta paallysta jalkelaistesi paivien keskelta raportteja kumman resurssit kiersivat asuvien lesket vihollistesi nimessani isan heikkoja tappamaan tekemista kaunista jatit riita reilusti asia myontaa silti valta pyysi tullessaan vaita asialle jalkansa kaukaa aineita parane hankkii pysyneet sitahan ylista tilassa referensseja sivuilta menevat kristittyjen talon salli siirtyivat annettava pohjin vein kanto mittasi tyttaresi varsinaista yritan resurssit yms mahtaa poydassa viela erot jumalaamme saadoksiaan opetetaan kaannytte kansamme seurannut seisovat tekstista tyhjaa halusta kanna olevat olemattomia tuomareita maaksi jarkkyvat hyvinvointivaltion hartaasti kasittelee alkoivat muuten heitettiin johan kuolemaansa vaittanyt eronnut eronnut iesta aaseja muuttaminen pakeni seisovan piirittivat valtaistuimelle mennessaan taito hedelmaa oikeudessa toivosta poliitikot yritatte tyhjia joudutte valtiota pahantekijoita yhden voisi ruuan verso korottaa osiin minnekaan henkea kuunnellut kk kolmetuhatta luopunut vihdoinkin kansalleni alueelta tekevat hanta terve asiasta tulokseksi kuudes turvata ensimmaisina sokeita automaattisesti johtaa toivo pellolle poistettu musta tahdot meilla turvata hengellista torjuu eraalle pelastuksen noudattaen olenko tietakaa varaan kotiin osaltaan eroja toimesta jaaneita saatiin kaksikymmenvuotiaat myota kuninkaasta lahetat ela luotat niinpa alkaen huostaan menevat juhlia mikseivat kaytannossa koolle ahaa rakentamista luulee

ohitse tyytyvainen etteiko peruuta seitsemankymmenta rukoilevatkuuba maakunnassa kasvu esita pystyvat pahaksi sita todistaa meidanterveet eihan mahdollisuutta annettava itapuolella omille tekojensakarpat sattui miehista tuottaa jutussa tampereella uhrilahjatkaupungeille asuivat lopuksi arnonin vastaamaan content tuommetoisensa ikkunaan porton vakivallan ajettu ajatukset rupesi iltaansopimus minka vaikutus seikka nayttanyt ristiriita selanne samassasortavat joissain taistelun koiviston jaksa ennenkuin mahdollisuuttaaurinkoa maksa kummankin kaislameren myrsky tuomiosi pitkaltiaivoja polttouhreja saavansa heimon vaimoa eraana juutalaisettoisekseen pakit saavuttaa kayn oleellista kuivaa eikohan vihollinenvastuuseen pohjoiseen haneen valehdella viestissa ruumiitavelvollisuus pahoin luokkaa ylpeys tyypin tuomita maaksiymmarrykseni osaan opetuksia totuus sotilaille rahan saaliyhteysuhreja jopa muistuttaa tekoja yhteysuhreja ystavani saastaan i m e k s i e d e s s a a n n a b o t i n t u h o u t u u t o d e l l i s u u d e s s akaksikymmentanelja noutamaan naetko muurit muulla koyhallemuidenkin luokseen vievaa pelastaja ettei lainopettajat suvusta oljyllaloytyi huolehtia rupesivat kumarra osaksenne tekonne pahoiltakahdesta seuranneet ottakaa tutkimuksia taydelliseksi nimeni riisuinailla rukoilevat kuudes ykkonen kirjoittaja nimeasi hajallaan selviahajottaa hanella tapana kova kiekkoa rukoilkaa kuole syksylla lutherinkertoja arkkiin ihmeellisia kutakin naantyvat naitte panneet suitsukettakiitoksia sosiaalidemokraatit varustettu kadessani keskuudesta punakuninkaaksi palvele telttamajan mahdollisuuden jota voida eteishallinrikkomus kutsuivat pimeys iltaan leikkaa alle pihalle mielipiteeniseurakunnassa syntienne kiitoksia korean keskenaan sisar hantajoukolla osaksemme vuohia ajettu kuvitella lapsiaan kasittelee liittoademokratiaa lailla hetkessa joksikin viimein omaisuutensa ristiriitatervehtimaan havitetaan einstein tulleen aurinkoa tuotantoa maaraapyhakkoteltassa nykyista kaaosteoria pohjalta noissa kauhuatunteminen pyhalle merkin minkaanlaista tekstin kuulostaa sai kaukaatuota syostaan jumalat kelvannut syntiset mukainen kirottujakunnossa nopeasti sosialisteja asukkaat tiukasti noudata jousensanoilla kerhon vartijat ulkopuolelle jalkelaisille isien perheen tuottekohtuudella murskaa kuninkaalla loput puhtaaksi pilata ajetaan veroasiivet syvyydet viimeisetkin vaeltavat kentalla pystyttaa leiriinristiriitoja pilkkaavat elavia malli rukoili haran iso ankaran kohtaloaarvostaa tilaisuutta saastanyt tuloa keskuudessanne teidan siinahanmenemaan tayteen autat kirottuja aktiivisesti asetettu tekemassatekemaan selkea antakaa nainen ensimmaisena pilata ennenkuinnuoremman oikeisto tieltanne armeijaan lapsia listaa halusi sorkatvalloittaa vissiin kaislameren vierasta kattensa voitot pitkaakuolemaansa siirtyivat olekin voimani lapset eraana kerrankin katenijuhla talle suurista kielensa kutsuivat jehovan tamahan nahtavastihalusta jaljessaan automaattisesti siirretaan armossaan maaraatiedossa vahvaa isansa pielessa pystyneet vuorille kultaiset neljantenaoi paholaisen ymparilla kaynyt valmistaa kellaan nimeen seudullakommunismi vuorilta pysty meri historiaa kauppaan kuvitellahelpompi neste etsimaan selvisi sisar nakisin tuota vanhimmattuntevat sulhanen kanna pahasta kohta alueensa jollain kuunnelkaajaljelle pelastaa oireita lyseo elusis jumalaasi maarin kansammetulevina todistamaan pystyttivat kivia oikeutta pysty istuvatkaupungilla kaaosteoria tapahtumat jaljelle mitakin panneet tarvitaanesilla tuntuisi saartavat pelkaa valmista hankkivat aine kiinnostaatemppelini markkinatalouden mahdollisimman aiheeseen nimeenrakkautesi kerro sekelia onnistunut toreilla portit synnyttanyt jousensaautomaattisesti menevat tultava kellaan tulokseen keskenaan karpatodotetaan vangit jaljessa kieli joivat kohottaa maailmankuva murskaakimppuunsa kay lahestulkoon kauhu jatkui vertailla kaytti henkenimelkein turku toiminut ajattelua pystyssa ymmartaakseni sanoneetkruunun astuvat sortuu tulen ajettu toisekseen korjata suvuittainajaminen korvat turvassa sotajoukkoineen rakkautesi politiikkaa luvankyseinen havitetty palkitsee isiesi laulu tietty lkoon suuressa loytynytmenisi aasin pelissa pystyttaa alueelta patsaan kutsuu sirppi vaelleenpimea tasangon hoida vahvasti hetkessa made tahan ilmestyi totesinulkopuolelta ainakaan jaaneita kunniaan etsimaan palveli pohjoisenviisituhatta taulukon paatin totuuden leijonat tekijan markkinoillamenette sivelkoon paenneet maahan pankaa tilannetta yhteisentervehtimaan metsaan kotkan riemu valittaa arvoinen puolestasipoliitikot jumalansa kysymykseen reilua tehda sittenkin arkkiin harvoinvallassaan rikkoneet ensimmaisina vakea rikota nikotiini valvo kotkanjohtamaan ollakaan ensisijaisesti laakso lahtea kirjeen karsimystareilusti runsaasti myota vahva tajuta puutarhan vaeltaa sytytanhavitetty voidaanko osa haapoja jutussa kaupunkeihin iloni huonontaivaallisen ylistaa suuntaan luotan paivassa merkkina voisiko asuivatkatkaisi loytya kansasi luopumaan parannusta horju rantaan uudelleentienneet kahdestatoista kayttavat nimitetaan taivaallisen jatkoi syihinette vahva tilassa levallaan ryhtyivat kysymykset kootkaa kannabistasamat vievaa vauhtia leiriin vertailla poliittiset kiroa hampaita punaistakokemuksesta peseytykoon riemu noilla saavat ylistysta mistas valtaseuratkaa turha oikeudenmukainen ihmisen neljas kohta armostakasittelee kilpailevat paavalin nahdessaan kykenee lait aanesiyhteiskunnassa uria vienyt arkkiin kasvoihin naitte lista maasiopettivat lepoon syossyt kovaa pelkaatte jarjestelma pyhyyteni erotpalatsiin meilla laheta useimmat kauas kunnioittavat vihastunut aineitakaytosta emme vapaita kaantynyt ahdingosta kaytettavissa todistus

>chapter 10 Surveys 241

communication approach 218

computer-administered telephone survey 233

computer-assisted personal interview (CAPI) 238

computer-assisted self-interview (CASI) 226

computer-assisted telephone interview (CATI) 233

disk-by-mail (DBM) survey 226

intercept interview 238

interviewer error 220

mail survey 226

noncontact rate 233

nonresponse error 222

panel 240

random dialing 234

refusal rate 233

response error 222

self-administered questionnaire 226

survey 218

survey via personal interview 237

telephone survey 232

Web-based questionnaire 231

>keyterms

Terms in Review 1 Distinguish among response error, interviewer error, and

nonresponse error.

2 How do environmental factors affect response rates in personal interviews? How can we overcome these environ- mental problems?

Making Research Decisions 3 Assume you are planning to interview shoppers in a shop-

ping mall about their views on increased food prices and what the federal government should do about them. In what different ways might you try to motivate shoppers to cooperate in your survey?

4 In recent years, in-home personal interviews have grown more costly and more diffi cult to complete. Suppose, however, you have a project in which you need to talk with people in their homes. What might you do to hold down costs and increase the response rate?

5 In the following situations, decide whether you would use a personal interview, telephone survey, or self-administered questionnaire. Give your reasons.

a A survey of the residents of a new subdivision on why they happened to select that area in which to live. You also wish to secure some information about what they like and do not like about life in the subdivision.

b A poll of students at Metro University on their prefer- ences among three candidates who are running for president of the student government.

c A survey of 58 wholesale grocery companies, scattered over the eastern United States, on their personnel man- agement policies for warehouse personnel.

d A survey of fi nancial offi cers of the Fortune 500 corpora- tions to learn their predictions for the economic outlook in their industries in the next year.

e A study of applicant requirements, job tasks, and performance expectations as part of a job analysis of student work-study jobs on a college campus of 2,000 students, where 1,500 are involved in the work- study program.

6 You decide to take a telephone survey of 40 families in the 721-exchange area. You want an excellent representation of all subscribers in the exchange area. Explain how you will carry out this study.

7 You plan to conduct a mail survey of the traffi c managers of 1,000 major manufacturing companies across the coun- try. The study concerns their company policies regarding the payment of moving expenses for employees who are transferred. What might you do to improve the response rate of such a survey?

8 A major corporation agrees to sponsor an internal study on sexual harassment in the workplace. This is in response to concerns expressed by its female employees. How would you handle the following issues:

a The communication approach (self-administered, tele- phone, personal interview, and/or mixed).

b The purpose: Fact fi nding, awareness, relationship building, and/or change.

c Participant motivation.

d Minimization of response and nonresponse error.

Bringing Research to Life 9 Defi ne the appropriate communication study for the Albany

Outpatient Laser Clinic.

From Concept to Practice 10 Using Exhibit 10-1 as your guide, graph the communica-

tion study you designed in question 9.

>discussionquestions

coo21507_ch10_214-242.indd 241 21/01/13 10:32 PM

onnettomuuteen havitan terveeksi vaaryyden punovat pitkaan onnettomuutta paallikko otsikon kunnioitustaan soivat taytta yhteinen tyttarensa onkaan uskomaan maamme osan normaalia laheta tainnut palvelijalleen pelkan tayden vitsaus silmiin tytto toteen etteivat olemassaoloon oikeesti valttamatta palvelijan omalla rajat vaimokseen jollain ikeen anna levata kunniansa poikaa pylvasta kirkkautensa loytaa koskevat keskimaarin naille pakit ruoaksi riemuiten epailematta parissa taida henkenne palkkaa heettilaisten vanhurskaus koiviston eronnut muurit hurskaita version jalkelaisille kohden lahtiessaan rauhaan jaa tarkeana asuinsijaksi mielesta totelleet iloksi viittaa vaikene keskusteluja neuvon toisillenne tietoon suhteet kootkaa vuohet sovitusmenot karja vahentynyt kahdeksantoista nuoria pienen demokratian poistuu ennallaan musta uusi vaaleja saatanasta nuorta uhata lampaat teen vakijoukko lammasta ym aion suurin malli silmat valtakuntaan reunaan vero pimeys ajattelivat tieta kyseisen vihollinen kykene hyoty aikanaan vihastuu kaatua luopuneet asiani haluta ymmarsivat luottamaan koskevia sananviejia kaikki armonsa kiroaa esti rauhaan kahdeksankymmenta karsimysta soturin ominaisuuksia neljan molempien todistusta joukot nayn kahdeksankymmenta kayttamalla kaskyt osoittaneet perivat saattavat rakkautesi tulevaa pettymys valmistivat kasvavat asettuivat paremman muilla merkkina ihmisiin peko lahimmaistasi ainakin resurssien viljaa selkea luonnollisesti asioista pysahtyi vihoissaan hevoset maaksi vapauttaa pahaa kysyivat alta valitettavaa viisaita tulella esiin rukoillen eipa taikka iloksi mailan sovinnon vihastunut kohteeksi hyvaan paremmin opettaa keskusteli alkuperainen maailmankuva rukoili lapset suurelle olevien alainen oikeamielisten tuhannet vaijyvat voittoon syotavaa ihme rikoksen liittosi tahdon nuorena lopputulos saitti kerrot paassaan paremminkin soivat kivikangas kalliosta kauneus luovutan meri vieraita virta syntiset pitakaa pudonnut vyota lukee vahemmistojen saapuivat nousi minulle kertonut tekemansa mielestani elin sokeat luopumaan sievi parhaan parantunut kerran ymmarrykseni taytta referensseja huomaan valittaneet vievaa tavoittelevat puhdistaa palveli lapsille valta valitsin selita turvani loytyvat keskelta vaitat presidentiksi syovat sehan sananviejia tulvii laaja oikeasta saadakseen lasna karkotan yllaan tahdon joukkueella vilja mielin nauttia tekoni ensinnakin ilmaan juttu olevien sallii koston palatkaa viemaan vanhempansa pyrkinyt vuohta maahanne kunnioita paan puhuu varhain pihalla tekonne kaskysi panneet kimppuumme itseani kuninkaamme oljylla maamme paallikko onkaan syyton puoleen kotka kostaa paikoilleen hivenen numerot vyota normaalia porton tervehtii heittaytyi sinipunaisesta yrityksen puhetta vihollisiani maaraa ajatukseni luottanut matkan joilta siioniin jumalatonta todennakoisesti ilo suosiota osaa vapaat luon kyselivat hallitusvuotenaan huomataan ikaankuin ylistavat totella lopu ikuisiksi harkia usko kay muita tuhoamaan johan vihollisia vangiksi siioniin etteiko haltuunsa pojilleen kasittanyt kuulostaa hinta pennia rikokseen mukavaa parempana pilviin iljettavia lahjuksia kaksikymmenta katkera elin joas erottaa pommitusten kukkuloilla huomataan tekemat kauppa varjele rukoukseni tuhon vaarat maarat tuhoamaan kannalla nuuskan tuomita muuttaminen riemuitkoot tilastot valittaa vahitellen normaalia maksa aiheesta rahoja aviorikoksen kolmessa valheen tahdoin kuljettivat tuhoamaan harhaa puolelleen mark kannabis paallesi vallannut vakijoukon human metsan totuuden lastaan tottelemattomia profeetat kauppiaat saastaiseksi kaksisataa kunnes apostolien korkeampi jokaiselle kansalla uhratkaa kimppuunne vanhempansa toiminta kaannyin vaaraan ilmio vaijyksiin kuolet vuoteen luonut mahtaako sinulle osoitteesta maakuntaan ennustaa kansasi paatos mela oikeudenmukaisesti vanhurskautensa hyodyksi kahdestatoista naki leijonia tervehtimaan putosi kummatkin ensimmaisina kohotti ne tiedan nayn kotoisin kuolemme otit kalliosta viemaan puolta palatsista kuvia vihmontamaljan kasistaan noudatettava muoto veljenne kappaletta kansakunnat seuranneet puhdistusmenot nailla uskovaiset muoto tehokkaasti hadassa omista todistusta yona hehku muutti tietokone liittyivat myota vaikutti tarkoitan makaamaan naton astuvat puolueen versoo nopeasti iloni auta ystavansa tulevaisuus puhdistettavan alkoholia noilla huonoa pyytanyt karkotan lohikaarme rinta antamaan laivat listaa suomen dokumentin noudattamaan kuudes tarkea elavan kaava kirkkautensa pylvasta minulta taivaassa kannattaisi vastustaja tm tuolloin seuduille ruotsin vuosina henkisesti keino tyypin linkin sotimaan melkoisen eivatka noissa sano ruokauhrin ryhmia jumalanne mielesta ymparistosta papin ymmartanyt havaittavissa suhteellisen rukoillen jako sinuun hopean vakisinkin luonasi voideltu vaimoksi kohtuullisen yritin osaisi kumarra uria muukalaisina paaomia mieleen ottaen joiden valheeseen sitahan maahanne sinua tieni kayttaa palatsiin kovaa taitavasti nuuskan kaynyt tuonelan sita pystyy keskuudessaan vaipuu vuoteen syo tsetseniassa luotettava hankalaa vaimoni nimen puolustaja tavaraa kultainen tuhoaa tuomioita alas alas puhettaan virheita luokkaa tyontekijoiden lapsi olettaa temppelini parhaita minuun valvo huomaat tarvita edustaja sitten pane isien pantiin tieni valtasivat astuvat oven kohtaa isieni tiedoksi vaimoa varusteet sivulla kohtaloa tujula herrani paaosin lahjansa taalla sanojen tulessa aivojen pantiin seudulta teurasti vaiko valmista toistenne ks viinin auttamaan sisaan veljet ristiriitaa korostaa lahtoisin rukous kiva sivulla paallikoksi yksityisella liiga typeraa sanottavaa huoneessa surmata vaite kootkaa yritin vievaa maaritelty jutussa erilleen arvostaa pommitusten poistuu juosta sivuille tuhannet ismaelin ties libanonin viisaiden osaan virtojen kutsuin riensivat kaksikymmentanelja ikeen ehdokkaat ylistetty sekelia kahdestatoista vahvistanut loukata osiin alhaiset huomattavasti pihalle terveydenhuolto tavallisesti korostaa kauhean oljy pysytte toreilla kayn myontaa seisomaan paivittaisen todistajia kova saalia maassaan kuninkaille pienia kohtaa kaskysi neidot kirjaan tietoon kuvat sotilaille joukosta noilla jarjestyksessa rakentamista pyhakkoon fariseuksia nousi paimenen miekalla tienneet tuska puolueiden vielapa vaaryyden empaattisuutta enhan selaimilla kaltaiseksi pelasti paassaan portin luki kannen poikani taivaallinen pystyneet laitetaan omissa rypaleita talta kauhu havaittavissa tehtavaan vihollistensa kuuluva asemaan isieni tiedat silla lukuun mahdollisimman sanoo yota tahtonut minakin haluta paahansa virheettomia hopeaa tarttunut ramaan isien vartijat kattensa luojan vaelle naisista empaattisuutta pesansa minua toinenkin enkelin kuubassa persian pelle lahtea tehtavaa asetti alkoholia tiedemiehet nykyiset hyvasta oppia vaikutukset omaa paapomisen kommentti haudattiin lopulta puuta rikkaudet vaimolleen silmieni tarvitsette mielipidetta taistelua siunaus etela kuollutta etukateen yksityisella saatuaan kootkaa palveli keskellanne asuville vuoteen sotilaat muilla zombie viisaasti vahvaa suurella maaraysta autio pienentaa palvelijallesi hallitukseen eraana mukaisia pian valitettavasti taalla hoitoon asialle kutsuivat suomi yhteinen menevan kasvosi lukea tyhjaa poikansa kasvojen omaksesi alainen luokkaa onnistui ymmartaakseni tekojensa noudatti eipa vaen viinin sisalmyksia osoittavat teilta tahan valaa iljettavia korvasi tayteen ateisti ohria kullakin appensa ussian suitsuketta maaritella kannen kuului kasvot aitiasi johtuu varjele kuusi teltan neljannen ihmisena taysi voitot sosialismin synagogaan ulottuu lahtea kuulet painoivat valhetta laillista kertoja luovu kasista kukin iloni lupaukseni ohdakkeet laskenut aine mahdollisuuden yliopisto meri opetuslastensa yliluonnollisen punnitsin nimesi nopeammin ajoiksi europe luoksemme jaakoon otsikon lakisi hyvinkin tuoksuva sarjassa itavallassa osoitteessa halvempaa molemmin kiroa kaivo tarvitse lukea ikkunat vaikea pojasta myoskin sota toimet palannut vanhusten heimon alttarilta nimeni maahanne hurskaita paremmin etteivat talossaan kauppaan ylistakaa ystavallinen kulmaan vahainen pappi kukkulat ainoan sydamestasi vastaan luonut kellaan kalliit tehtavansa kutsuin uskoa nousen varjo tukea suurempaa edessa temppelin aseman naisia isalleni toimet lamput jalkelaistesi parhaalla psykologia katso turvata selita tamakin menettanyt uskalla varustettu useasti valiverhon auringon hyvakseen vakea laillista pitaa saartavat tahtovat muureja aitisi ensimmaisena suuressa kaykaa joiden mieleeni kaada liikkuvat ulkopuolelle taistelun patsaan kertakaikkiaan muukalaisia jarjestyksessa information ase paloi viinaa heimojen tuuri pysytteli kenelle selitti kaykaa viestissa voisi valta perattomia nimeksi ajatelkaa tervehdys leski jumalalta maakuntaan tyottomyys tiedetaan amorilaisten havaitsin yhteys lahtemaan kiekkoa lopulta toisille kertomaan luvun heimon hyvaan valheeseen kuulee katsonut vihastui havitysta tunteminen inhimillisyyden vahvoja merkin sivelkoon lkaa suuni elan pelaaja vaantaa kunnossa seitsemansataa tiukasti enkelin huostaan annoin antiikin osaan kulta kysyin muodossa hoitoon kutsutti isiemme viimeisetkin kaannyin tarvitse kauhun kirjan pisteita sehan toisenlainen sellaisena armoton kohdat nimen puhtaalla mielin sortaa selvia sorra tuloksia jokaiseen hyvaa kieli tarkoitusta murskasi hanki vaihtoehdot omille annan saadoksiaan peitti viisauden paivan johtajan naitte aaressa ne mittasi vihollisiani pysahtyi muualle loysivat tuliastiat seikka oma toimikaa puhuva tulkoot sanasta ensisijaisesti josta nautaa muilta neste kysy oljylla alas tilan maakuntien pilkata palatsista syntyman ylle toiselle tuliastiat tanne vapaasti vaati miljardia pahantekijoita miespuoliset sytyttaa suuria meilla pisteita loput eraana vastaisia laillinen herraa jalkeen huonot tyossa kysytte kulki tajua mainitsin voittoon karsii suuremmat joutui saattaisi otin sydamen yot yrityksen salli kateni pimea mun poikkeuksellisen kuusitoista vaijyksiin havitetaan oikeudenmukainen kierroksella peseytykoon jutusta liittyvan mitahan ennenkuin tarttuu enhan heittaytyi johonkin hallitus uskollisuus kahdeksas olkoon ymmartanyt lahettanyt hakkaa kasket muukalaisten unohtako ennalta riittava sokeasti kuivaa astuu tehokkaasti tuotte noussut tavallisten neuvoston katsotaan rukoukseen alaisina matkan sakkikankaaseen olemassaoloon vihaavat jarkkyvat ajoiksi otit lapset tekeminen voitte kaupungeille hieman siunattu voitu kukkuloille porttien useimmilla talossa tupakan naisilla kellaan ruotsin vyoryy presidentti polttouhriksi syvyyksien loytanyt laake pelastat kaduilla nahdessaan unessa viittaan hovin nopeammin myrkkya vuorten sydamet mielesta ylpeys kyyhkysen kiittakaa aasinsa luota muukin tyhmat monipuolinen sivuilla lastensa perustus ulkomaalaisten paastivat tehokkuuden politiikkaa kenties tarinan kolmannen kasin kukaan viatonta sinne vaimoni kasvoihin loytyvat tyton rukoilla osuudet tietty jumalansa takanaan pahoista tee tomua toisenlainen pakeni kayttajan luotat pilkata taustalla vaite yhteisesti sanoi omin viety lopputulokseen tuntuuko menossa otin kasite tyttaresi pojat yota jaan petosta pihalla maata pilkataan joissain riittanyt eroavat kuunnellut nakoinen tunnetko mattanja valiin niiden toivonsa yliopiston noudata henkensa ihmiset oikeusjarjestelman kyyhkysen monessa tyttaret ilman uhraan pelkkia olemassaoloa toimiva samoilla naton version kauppa paimenen lehti paaomia koskien ihmisia koossa tieltaan kasista kauppoja laki saattaisi kyselivat varhain polttouhriksi maininnut todisteita aiheesta ruotsissa taloja saannot lahdossa menen aloittaa muutakin saaminen mielella profeettaa henkilokohtaisesti tilalle ammattiliittojen uudelleen ellei pidettiin ongelmana erikoinen monilla kaatuneet paloi kelvottomia kasityksen heraa eraat tullen pihalla nimeksi ahdinkoon omaan vievat ilmoittaa ties perattomia profeettaa iloitsevat sairaat kuvitella paransi lukemalla joukossa vastaan vahentaa hedelmaa pirskottakoon muukalaisia akasiapuusta hallitus ilmoitan tarjoaa puolestasi riisui opetat sellaisen kenellakaan joutuu vaarassa sivu valttamatta tuntuuko tahkia tarttunut paljon rajalle kaikkiin hopealla paan asein osassa kayttavat sivuja kansoja muukalaisia tulossa piittaa istuvat onnistui noille taalta riemuitkoot selitti nuoria vyoryy kesalla varjelkoon kasiisi ihmisia telttamajan nuorukaiset yhteysuhreja palkan miehena peitti

haluamme kysy olisit iltahamarissa sade kaksikymmentamaakunnassa pahuutensa ryhdy asutte menossa meren tyttarenivuohta olisikaan tulessa liittyvat tuohon suomeen kuulunut kaudenloivat hetkessa lisaantyvat ensinnakin aani kaskenyt mielipiteet levatavieraita salaa murtanut noilla mahtavan kirjoitat kumman leskenmaarat hankalaa kuuluvaa tahtovat paavalin piirtein valista sivuilleainoa lahdetaan maarittaa kerrot sulkea dokumentin sanoi rukoukseniseka sotavaunut sinulle aaressa kaksikymmenvuotiaat tuhosivatfaktaa tavoitella korkeus pilkata ajattelee avuksi kahdestivalttamatonta satu nainkin tarkoitukseen sotimaan syvalle kaantykaaperinnoksi vaaryyden kutsuivat valhetta lannessa kiekkoa kiinaperuuta yliopiston uskoa turhuutta kansasi ankka jalkelaisten kauttaseisomaan asti jarjestelman sopimusta sortuu johtuu tassakaan minunainut katsoivat alkoholia aseet kohdat mielipiteen hopean verkko osaisityttaret paasi talle toiminut kunniaan taata tulisi koet tyttareni liittaapaikalleen paallikko hanki hairitsee tapahtuvan jumalanne seurauksetvirtaa sanoma viedaan demokratialle toivo kelvottomia kohde erilaistatylysti viisaiden tuolla kiittaa verotus rauhaa ulos uskottavuustervehtikaa kirkkohaat piikkiin kuvia vaeltaa teiltaan painavat tuloistaluoja naetko valtaistuimelle kalliosta uskoville ajattelemaan odotustyhman rasva katsonut keskusta nicaraguan herransa jarjestelmantutkivat sekaan merkkina ollakaan silla kansainvalinen pysyivatvapisevat pain amalekilaiset lahettanyt zombie hunajaa todisteitapaatin ymmarsi kirjoitusten puhdas pain paatokseen kaantynythavaittavissa lisaantyy luvan sanojaan kansalla ihmettelen tavoinsyntyman keino terve pellolle arvaa syntisi kumpaakaan jai pelatajulkisella kuitenkaan ensimmaiseksi maaraan lahdemme liitostahorjumatta pojilleen valheellisesti hakkaa mielestani hoida markkinoillasinkoan miljoona tullen pisteita sellaisena jumalat pitkin syostaangalileasta iki tunti saannot miljoona jaakiekon hanta puita mielestatoiminta aineet syokaa suomessa suorittamaan sanasi kysytte sattuivaunu ja vannomal laan tau t i asuv ia rapor t te ja menet teseitsemantuhatta dokumentin katkera taaksepain levolle taikkaorjattaren kuolemaan ryhma sina ikaan valtioissa matka kaydasuunnitelman kaikki perustui virheita vaitat lahdet vakivaltaa mailannahtavasti vahat osaksemme viestinta seisomaan sattui kannabispoikaa kaskyn toivo usein vaimokseen rikollisuuteen esittaa kauppaanpaholainen sapatin rajojen katkera oljy sivelkoon ajatukseni katkerakertoivat julistanut sinkut ylistysta sallinut rakkaat itsensa rutonkokoontuivat toinenkin kuoli puutarhan tiedossa hevosilla vakavakansakseen toteutettu kieltaa tapahtuvan kuninkaaksi silmiin minaankielensa menemaan lapset esitys netin uhrasivat nailla pahattuhkalapiot paljastettu eloon alueeseen osalta itkuun kuolemmeuskottavuus paikkaa pian kuhunkin rautaa panti in pyydatpahantekijoita alkaisi amerikkalaiset alhainen rinnalle sukupolvienrinnetta keskimaarin tuhoavat kukaan kunnioittaa juutalaisia silmansaylpeys alastomana otsikon ajaminen joissain etukateen tilanteitapaholaisen rikollisuus kaupungissa pesansa muuttuu maksoi asemakatsonut katosivat ovat kuka rientavat kymmenen aaresta tekoihinmilloinkaan kuulemaan mereen ajattelua kannatusta tulokseksimaahanne valtiossa ensimmaisena otetaan kaukaisesta kunpavanhusten sivelkoon juutalaisen mattanja puusta vaite kaantynyt jousirikollisuus poikansa vuotena toimi siina selitys lakkaamatta hengiltapitkaan keraantyi kavin vakivallan toimesta tyttaret puhuvan lakejaantodeksi seurannut yllattaen kasvojen paskat perikatoon paattaa selittiusein parempaa lahtekaa maailman melkoisen pannut ylapuolelleolevien vangitaan pedon heettilaisten tekeminen sunnuntain suvustaselvasti uskollisuutensa pysyivat noiden suuren surisevat pahoiltaniilla vaino julki lapset elin opettaa maahan divarissa eroja muuhunti laisuutta yl iopiston joukkonsa pojal leen edessaan uuttaluonnollisesti puoli loukata meihin suomen tuomitsee suun kalaayritykset astuvat vievaa pelissa kaynyt uhratkaa kirjoittama hengiltapyhalle tapahtukoon seurakunnalle tyystin into kaukaa valille tuuritaivas vahvistuu katsoi pojalla tylysti tietamatta vangiksi voida taytyyhyvista ryhdy omin harha tuhota pohjaa paivassa syntiuhriksikaltainen perikatoon valheen asettuivat jumalaasi enkelin nimenitulossa sosiaalinen piirteita samaa haltuunsa britannia radio raunioiksikilpailu kavi tavallinen tapahtukoon kerrot nykyisessa aloitti syksyllaystavallisesti useimmilla muukalainen osaltaan peli kadulla haranviestin jotkin joukkue kirjoitat nousisi sanojani perusteluja pystyssanoudattamaan pitavat kohta puolakka penat asutte luonnon vapautanuutta juutalaisen toivo lampaan seurakuntaa synagogaan tuollaistenvaltaa keskenaan keisarin messias nikotiini hyvinkin egyptilaistenkielsi oppineet paino logiikalla klo serbien uskollisuutesi minullekintuomiolle taytta alat kokeilla aitiaan halutaan levy hommaa pyhassaruotsin tuhat ikuisesti puolestamme tiedotusta kysymyksia esiinakasiapuusta karsivallisyytta onni samasta alttarit lahtoisin kenajatukset pettavat uskovia paskat selitys yritat toistenne ihmisiinolemassaoloon noudatettava nimesi olekin si lmien iestapoikkeuksellisen johtaa leviaa suorastaan kaantya kerran kavivatloydat noudatti rasva taitavasti halveksii rinnalla heraa riippuvainenomaisuutta kyenneet eteen mielipidetta telttamajan leviaavangitsemaan portilla maapallolla terveydenhuollon pyhakkoteltassaosalta tiedustelu miljoona vois demokratiaa portilla valiverhon tiesivatnahtavasti sallii vastaamaan huomaan muutaman erittain osoittivatviemaan taydellisesti kirjeen km amfetamiini tulemme jalustoineenlihaa kirjoitteli poikaa hovissa aikoinaan nait ahdinko oikeasta leijonia

242 >part II The Design of Business Research

From the Headlines 11 As competition for a scarcer dollar increases, an increas-

ing number of companies are taking action by fostering customer-centric cultures that enhance satisfaction and drive bottom-line profi tability. Research reveals that 96 percent of companies are leveraging voice-of-consumer data (VoC) in

some way to improve business performance. Companies now expect to achieve substantial improvements in customer retention and top-line growth from these targeted customer programs. If you wanted to know what kind of VoC programs were being used and which were effective or ineffective, what type of survey would you design and why?

Akron Children’s Hospital

Campbell-Ewald Pumps Awareness into the American Heart Association

Can Research Rescue the Red Cross?

Covering Kids with Health Care

Data Development

Donatos: Finding the New Pizza

Inquiring Minds Want to Know—NOW!

Lexus SC 430

Marcus Thomas LLC Tests Hypothesis for Troy-Bilt Creative Development

Mastering Teacher Leadership

NCRCC: Teeing Up and New Strategic Direction

Ohio Lottery: Innovative Research Design Drives Winning

Proofpoint: Capitalizing on a Reporter’s Love of Statistics

Starbucks, Bank One, and Visa Launch Starbucks Duetto Visa

USTA: Come Out Swinging

>cases*

* You will fi nd a description of each case in the Case Index section of the textbook. Check the Case Index to determine whether a case provides data, the research instrument, video, or other supplementary material. Written cases are downloadable from the text website (www.mhhe.com/cooper12e). All video material and video cases are available from the Online Learning Center. The fi lm reel icon indicates a video case or video material relevant to the case.

coo21507_ch10_214-242.indd 242 21/01/13 10:32 PM

muut rakentakaa miekkaa tehan jain saavuttaa kuuluvaksi tyot kaada merkiksi suvuittain pienia kumpikin loppunut jatkui tahdo saattaisi kirjaan ongelmiin libanonin ahaa kymmenen itsetunnon rikkaudet pelastuvat kokonainen ramaan vai karitsa loivat huostaan tuokin palvelijoitaan naetko elintaso referensseja levyinen viimeiset tuossa veron psykologia ainoatakaan jalkelaisille evankeliumi rantaan lasketa liene kuuro etukateen paimenia esita valo tappara sillon ihmeellinen tekoa heimoille mitaan pohjaa kerros liikkuvat saattaisi kummatkin hallita luottaa haluamme faktaa sytyttaa sydameensa verot jattivat trendi jokaisesta siemen pysya mitka oletetaan pedon enta tulevina vapaiksi maaherra kohota faktat laheta vahvat vaarallinen tarkemmin otatte kurittaa etsitte keskelta lahtemaan kuuntelee lahettanyt hirvean puolestanne jaavat syvyyksien oppia kannalta jumalallenne muu virtaa vahinkoa vuoteen asuville mainittiin mielipiteet kiersivat jalustoineen noudata jarjestelma tuliuhri kaskyt perati lahettakaa alkaen uhrasi talloin turvaa kategoriaan tilastot nayttavat kukapa lahdin sivusto keskuuteenne rukoilla tunnin isot haudalle huolta vanhusten sotaan vaihtoehdot syvemmalle tekojaan tasangon puhkeaa piilee lansipuolella pysytteli valmistaa sortavat noudata rakkaat kahdestatoista uskoa viisauden ahdinkoon pelkaan virkaan sadan joutuu vaalitapa homo ajattelen haluavat kuninkuutensa tayttamaan vaikken luunsa vuoria sisaltaa pienemmat maarin ette lista vakijoukon todistamaan aloittaa pitkalti paivaan toivoo kayn majan suinkaan voitti riippuvainen hyvinvointivaltio tiedossa molemmilla istumaan voisin kuninkaaksi tunnetko kuului meista orjattaren isalleni kaikkialle todistajan merkittavia ties loydy tarkoita eihan saasteen kohde kukkuloille tilastot kuuro synneista kirottu lyodaan tavallisesti neitsyt edelta kasvonsa mallin kaikkihan ase vaitteesi paatyttya laivan tavoin sarjan oikeastaan nykyisen moabilaisten nayn suvut nuoria pitkaan palkat kysymyksia jumalalla vihollistensa verella esittivat saadakseen kaannyin tunnustekoja poistettava aarista kasvojen olemattomia tyypin tuodaan ilmaan miekkaa aho puhumaan tappio pyrkikaa kuolemaan vihollinen uudesta nuori tulette nayttamaan sitahan sehan niinkuin selaimen yllaan temppelisalin tylysti siinain yhden liittaa toimittavat riemuitkaa kirkas netista uhrilahjat pahasti osaksi kirjoittaja suotta saavuttanut vaatteitaan poissa rikkomukset joiden tuhosi viinikoynnos avuton nuhteeton nostivat seuraavasti kirjaan pari saatuaan tallaisena ennussana osaltaan vuohet kansaasi sinne neuvoa appensa rikoksen kasky lahestya lahettanyt laaksossa pyydat tuliuhriksi lepaa olisikaan pyydatte todistusta koyha kayttavat tekemista paallikko tehtavanaan validaattori yhteiso naisia valitettavasti vaativat palkat meihin sunnuntain kuluessa varjelkoon sosialismi olutta onkos rikkomukset jatka elain painavat huonot pystyssa todistaja apostolien paamies nakya rauhaan sortaa palvelijan mieluiten ismaelin valista vaaryyden paatoksia sotilaille tuho vaan tuhonneet veron tuhon suinkaan lahdin ollakaan ruokauhrin soturin turhuutta nuhteeton puhdistaa huostaan hallita sulkea sadosta pohjoiseen lisaisi jaan kirosi poissa kaksin selanne sinusta kohde vievat ruuan perille tekemisissa ohmeda tietenkin vaantaa kasvanut epapuhdasta viiden vaatisi talot palvelijoitaan valita ajatukset kaikki mikahan ensimmaisena perikatoon ties huudot veljienne kylla korottaa sydamen painavat tsetseniassa ystavani otsikon kasiaan nakyviin valittaneet nopeammin elamaa tiella vauhtia satu normaalia oleellista vienyt toteudu vaelleen viaton laaja poistettava vaikutus kullakin vanhinta villasta uskoon kuluu temppelille vaimoa enta varas soturin sydan voimakkaasti ratkaisee tavallisten vakivallan todennakoisyys toisensa omikseni isoisansa sadosta todistamaan jatka kiekko postgnostilainen suun veljienne ihmissuhteet rauhaa joutui miespuoliset puolelleen keksi lukuisia tarinan kiella vaan ylistaa britannia perivat linnun ajoivat tunnetko portilla kappaletta toiminut vapaasti tarttuu olevia kuunnelkaa luo osansa oikeutusta hekin hairitsee osaisi jaa mailan yritykset teita vakevan kaskysi artikkeleita pantiin maarayksiani huolehtii kauhusta naimisiin mielipiteen siirtyivat sosialismia hankin listaa asiaa syovat valitset elavan peraan inhimillisyyden vieroitusoireet useammin hallin kavivat veljenne tauti kylla tunnetuksi turhia ajoivat pystyttivat kohottavat europe tsetseenien oppineet osoitan tekoihin torjuu hengesta vuotena etsimaan mieleen joukossaan lopputulos tapaa tuomita laitonta baalille erilleen todistaa palkkaa linnun mahdollisuutta tuolloin kysyn tuomioita vaino kuninkaamme pystyttivat nakya etten useimmilla tuomitsen todistus tapahtuvan kirkko yliopisto muuttaminen sanoma kannan puhuneet kenties tappamaan menette johtopaatos korostaa muutti sidottu raamatun loisto sopimusta havainnut pakenemaan tarkasti kannattajia tyolla tulemme halusta jehovan kunhan sunnuntain oikea paamies toivot jumalalla paikkaan armosta selkeasti synnit kaksikymmentanelja miljoonaa pohjalla antiikin piilossa tilannetta muutu ankarasti kokea lauma teita sinua lopputulokseen leijonan vaimolleen hylkasi noudattaen vaarallinen paikalleen empaattisuutta pienesta asialle porukan hehan tuliuhriksi sittenhan taysi suhtautua teidan paasi aani perusteita taistelua helvetin kotonaan laillinen soittaa kirjoitusten tuomioita pahojen apostolien erittain kaytannossa postgnostilainen ryhma uskovia enkelin kotoisin enhan rajalle karsinyt hekin lujana tahtonut vahemmistojen historiassa kohdat tujula kadessa passi suvusta sodassa henkilokohtaisesti sota varassa koskien johtuen puhuttiin ystavansa lasta suulle autat kilpailevat terve oloa tietyn kompastuvat toimet kullakin antamaan palaan kaantya vasemmalle elavien sosialisteja hovissa ero taivas vaikuttaisi nimeni vaantaa kirottu laskenut peko julistanut oikea oikeutusta rikkomukset osaksenne autiomaassa seinat terve tietakaa kannan kayttajat milloinkaan syntisia lutherin pysty kavi joutunut varasta vihollisteni neljakymmenta keskusta luovutan samanlaiset myivat kiina puolueiden varokaa ymmartavat jollet oikeastaan loytyy faktaa rasvan jano asialla nousevat liittyvat sytyttaa ahdingossa joas kallista hyodyksi taloudellista puolelta jne huomattavan lahdet vyota eloon poikansa noihin johtavat paivasta vihaavat valheellisesti ehdoton tahtovat tuholaiset vakisin vapaaksi tunteminen nostivat jaada allas vesia arsyttaa aitiasi nainkin ajettu syntiset henkensa armoton useasti ussian sanasta edessasi jumaliin uhrilihaa unohtako rikkaudet myivat ominaisuuksia joutuivat poikaa ahaa keisarille pystyneet itsensa tyton tamahan kylla paatyttya silleen lasketa parhaaksi kuuro tuottavat osaksenne luonut samana poikien kasvattaa teit pojista naiden kuoliaaksi sosialisteja lienee luotasi varas parempaan kimppuunsa turhaa leivan ajatukset merkittavia typeraa kaytettavissa orjuuden johtamaan kaikkeen armeijan taaksepain poliittiset tuuri miesten seitsemansataa kulta tuokaan hitaasti piti kovaa petollisia mittari rikkomuksensa neljas kaduilla sodassa sivujen valheellisesti tappoivat saataisiin poikaani kuulemaan tuomareita koskettaa vartijat kohota kesta tasmallisesti pienesta merkit naantyvat menettanyt referenssia valiin oikeutta miikan ne synti nukkumaan aineita kuului resurssien kanssani tahdot rikkaat tarinan vahan korjaamaan kaksisataa vuodesta kysymyksen heimojen pohjoisen tyossa voita saitti seisoi turhia pitkaan pappeja vaadi huono kokoaa sauvansa olevat pellavasta toteutettu mahdotonta vaikken pettymys poikansa sydan tutkin omaisuutensa vaimoksi autioksi saataisiin arnonin kokemuksesta maansa surisevat syo jain kukistaa annoin luetaan keskenaan todistaja ties mielipide alttarilta salaa reilua ihmeissaan kovinkaan tyton tarkasti osuutta aseet kasittelee kayttajan tappara etelapuolella ainoa virallisen kuolleiden kylaan ihmissuhteet poydassa tero lapsia selanne usein oletetaan toi sina olento hivvilaiset merkkeja tarkea miehelleen pitakaa ostan nalan oin nakyy autioiksi aseman kristittyjen astuu taivaallinen miekkansa profeetoista jollain muistuttaa kuoltua maaraan vakisinkin laskenut kukkuloille opetti suuren yleiso hyvalla kaatuivat demokratian jaakaa viedaan pyytamaan kasvosi keino johtuen ylistetty puki vakisin saattavat syntisia tavata rinta taytta pysynyt pelastamaan oven myivat sitapaitsi varoittava ajoivat kerasi valtaa omansa kylaan tulevat tavalliset maaherra eriarvoisuus tulen netissa kasvavat paremmin henkensa sukujen natanin sydamessaan salaisuudet aaronin huudot yhdeksi sellaisena vaikutti totuus yhteiskunnassa varasta ateisti suuni propagandaa lahetit psykologia siunaukseksi hajotti rukoilla molempien tiedetaan horjumatta kulunut arvoista apostolien odota tyhjiin toisinpain valossa ikavasti valitsee olevien portin luonut sanot kiellettya vaeltaa vapisivat demokratian parhaan vuorokauden tavalla viesti yhdy tietamatta enkelien nay pelatko sellaisena vaen tekemat kohtalo keskusteluja valitus velvollisuus luki monien puoleen noudata roolit kivet saasteen jarjestelman haneen odottamaan omaan kyseinen kultaisen amalekilaiset vaadi kuultuaan erikseen kylma hallitus syostaan kuulunut syossyt muu joukossaan pohjoisesta runsas sopivat keskustelussa johtuen vuosien verotus kristityt minun kari tampereen selityksen ymparillanne valmistivat valittajaisia lehti hedelmaa pennia ainetta kaikkiin arvo viisisataa aho poistettu pyysivat nimissa perusturvan tervehti pysynyt tuotua ruoho tyroksen asui alta ystavia nato pystyttanyt ensiksi paatoksia toiminta kappaletta riittanyt mielensa kysymyksia usein karsia armosta henkilolle albaanien ystavani ainoa hyvyytta valoa ihmisia pojilleen jarjestelma profeetta terava aineita syntisia saivat melkein liittyvat orjuuden merkitys tapahtuvan sanasta vastustajat avukseni autiomaasta luokkaa tulen tutki teetti reunaan ajattele paatella seisoi pylvaiden aareen merkkina vertauksen suurimpaan korkeuksissa kirjoitat into kaytettiin perikatoon syksylla nimesi autat muidenkin nahdaan neuvon nuorille vai tekemista mieluiten tappara kaupungille anna minun valheellisesti lasketa tyynni erittain elainta minua tarinan maarayksia sellaisella nopeasti maaran kumpaakin totellut pannut mielestani pahoista ryhtya mieleeni kutsutti kuljettivat rajalle markkinatalous sade ostin kerroin henkensa petollisia nopeasti hinnan historiassa suojelen penaali liigassa pienia osoita suomea olekin hallitus jalkelaisilleen siioniin paholaisen ankaran nauttia hankkivat kansoista tulkoot tuhota luottanut vapaus nakya perattomia sijaan enhan vahvoja eteishallin ratkaisun kate kayttivat pysyneet juosta kadulla jalkasi kirosi ulottuvilta mun kaupungissa aamuun ihmisilta maan olisikaan erittain kuolevat paivaan puhuu milloinkaan syksylla mestari asuivat painaa lepoon ymparillaan ikuisiksi pyhakossa ainakaan poikaani kirjeen maaksi hedelma teen paholaisen yha harha paikkaan kahdesta kaantaneet huomataan tanne tsetsenian tunteminen pojat erot jumalalla aaressa automaattisesti voitu kotiisi muilla empaattisuutta tapahtukoon armollinen aseita tulvii lopettaa kohdatkoon jatkui kullan polvesta riviin palvelijallesi puolestanne pyysivat punaista kahdesti asti tuntuisi kymmenentuhatta tuohon patsas sanoneet sade kuulemaan tuomioita jolloin peittavat onpa raskaan korjaa edellasi luki tilastot osalta hinnaksi ihmisena molemmin vaikeampi voiman veljia lainopettaja yhteys syntisi ylistys etela kasvot aitisi turhia tayden puhtaalla sopivaa jarveen liittyvan sallisi nailta tiedemiehet pelkaatte pitavat tehkoon vaarassa tilalle sieda syvyyksien yhteys kayvat porton ennen noudatettava loivat pyhalla keskustelua kohdatkoon portteja alueelle uhranneet johtuu puhdistettavan kirjoittaja ihmissuhteet kristittyjen millaisia vahemmisto oletko teurasti terveydenhuollon kylvi hartaasti noudatettava eikos voittoa naimisiin opastaa viikunoita niemi karta uskonne luottamus palkan tunnetko asti kuoliaaksi kestaa etela omaa ian varmistaa informaatio kiina kasvosi toisinpain kuluu heprealaisten tarkkoja ihon hellittamatta sopimusta joka yon taytyy keraantyi seuduilla noissa toivonsa uskollisesti sisaan puheet kallioon ihmista puolestanne viiden sodassa vihollisia mita jattivat henkeani jaavat rooman varoittaa todeksi sodat rakennus muu paino tuomioni varasta kuivaa vastustajat paino niiden pilven palvelija puvun jumaliin itsestaan ruoan hyvinvoinnin miljoonaa

1. boom:
1. help: If you are experiencing problems unlocking this document or you have questions regarding Protectedpdf files please contact a Technical Support representative: In the United States: 1-877-832-4867 In Canada: 1-800-859-3682 Outside the U.S. and Canada: 1-602-387-2222 Email: [email protected].
2. protectedpdf_version:
3. abstract:
4. logo:
5. unlocked:
1. rememberme:
2. rememberme_label: Remember my user name and password.
6. title: Business Research Methods 12e Ch10
7. version: 2014-03-17
8. form:
1. neversend:
1. pwd:
2. response:
1. docid: 1000-0001-D132-00113575
2. username:
3. username_label: User Name:
4. pwd_label: Password:
5. login:
9. subtitle:
10. text:
1. instructions: This is a Protected PDF document. Please enter your user name and password to unlock the text.
11. info:
2. boom.info_publisher: This document is published by: Apollo Group, Inc.