Kako doći do pravih ispitanika za anketu

Kako doći do pravih ispitanika za anketu kada nemate panel istraživačke agencije? Zapišite ko ispunjava uslove, ponudite anketu tamo gde su ti ljudi i na početku proverite uslove obaveznim filter pitanjem, povezanim sa logikom ankete, da bi oni koji uslove ne ispunjavaju izašli bez zastoja i bili ispravno prebrojani. Mala pilot anketa zatim pokaže koliko pozvanih počne anketu, koliko ispunjava uslove i koliko stigne do kraja, a iz ta tri broja izračunavate koliko ljudi treba pozvati. Vodič je za svakoga ko ispitanike traži među svojim kupcima, članovima ili roditeljima učenika: za malu firmu, školu, HR službu ili studenta koji piše diplomski rad.

Ukratko

• Zapišite ko ispunjava uslove pre nego što bilo šta pošaljete.
• Uslove proverite jednim neutralnim, obaveznim pitanjem tipa „Samo jedan odgovor“, koje je jedino pitanje na prvoj stranici.
• Odgovorima koji ne ispunjavaju uslove dajte pravilo „Podnesi anketu“, a isključene prikažite odvojeno.
• Za mejl listu: pozivi = potrebni dovršeni odgovori ÷ (stopa započinjanja × udeo onih koji ispunjavaju uslove × stopa dovršavanja), sa stopama iz pilota. Za otvoren link poziva nema.
• Za link koji se deli marginu greške ne možete smisleno da izračunate, pa je ne navodite.

Odredite ko ispunjava uslove pre nego što tražite ispitanike

Počnite pisanim pravilom o tome ko ispunjava uslove, jer od njega zavise filter pitanje, logika i svaki broj u izveštaju. Opišite ciljnu grupu kriterijumima koje osoba može sama da potvrdi, uz vremenski okvir: „kupio kod nas bar jednom u poslednjih 12 meseci“, „roditelj učenika od prvog do četvrtog razreda u našoj školi“. I Standard Definitions AAPOR-a, američkog udruženja za istraživanje javnog mnjenja, traže da istraživač pre anketiranja odredi šta je dovršena anketa, a ko se isključuje.

Pretpostavka o kanalu („naši pratioci na Instagramu su uglavnom žene od tridesetak godina“) govori vam gde da tražite, ali ne i ko ispunjava uslove. To potvrđuje jedino pitanje o samom kriterijumu, demografsko (starosna grupa, mesto) ili o ponašanju (kupovina u poslednjih godinu dana).

Procenite koliko je česta grupa koju tražite

Pre izbora kanala procenite da li je grupa česta ili retka, jer za retku grupu treba mnogo više poziva.

• Vaši podaci su obično najbolja procena: na primer udeo kupaca koji su kupovali prošle godine.
• Ranija istraživanja iste grupe, koja su radili fakulteti ili agencije za istraživanje, pokazuju kako su drugi došli do nje.
• Zvanična statistika Republičkog zavoda za statistiku (RZS) i Eurostata, koji obuhvata i Srbiju, pomaže samo za široke grupe, kao što je starosna grupa ili region. Broj navedite samo iz tabele koju ste sami otvorili.

Kanali kojima dolazite do pravih ispitanika

Vaš spisak kontakata je najjači kanal za grupu koju već poznajete. Otvoren link dopire do više ljudi, ali gubite kontrolu nad tim ko odgovara.

Vaša lista: pozivi elektronskom poštom

Na kartici „Pošaljite putem email pošte“ praćenje odgovora je podrazumevano isključeno; da bi se odgovor vezao za primaoca, označite „Uključite praćenje odgovora“. Tada svaki primalac dobija lični link, listu „Email primaoci“ filtrirate po „U potpunosti ispunjena anketa“, „Sve bez odgovora“ ili „Svi odgovorili delimično“, a novi mejl možete da pošaljete samo onima koji nisu otvorili svoj link: pod „Pošaljite email primaocima koji“ izaberite „Na email pozivnicu nije odgovoreno“. Taj podsetnik šaljete sami, jer automatskih podsetnika nema, a ne dobijaju ga oni koji su link otvorili, pa odustali.

Bez praćenja nijedan odgovor nije vezan za primaoca: „Sve bez odgovora“ prikazuje celu listu, druga dva filtera nikoga, a novi mejl stiže svima, i onima koji su odgovorili. Uz praćenje vidite ko je odgovorio, a pozivnica to kaže primaocima, pa anketu ne nazivajte anonimnom, nego recite da se rezultati prikazuju samo zbirno. Pogledajte i kako da napišete i pošaljete poziv.

Link do ankete, sajt i Viber grupe

Kartica „Link do ankete“ daje jedan link za sve. Anketu možete i da ugradite na sajt („Web sajt integracija“), da je podelite dugmadima za Facebook, X i LinkedIn ili da link nalepite u bilten ili u Viber grupu. Za plakat ili račun napravite QR kod od linka: na planu Biznis u „Pošaljite“ > „Link do ankete“, na ostalim planovima bilo kojim generatorom QR kodova.

Deljenje linka donosi više odgovora, ne i prave ispitanike

Svako deljenje dodaje odgovore ljudi koji su sami izabrali da učestvuju: to je uzorak samoizabranih ispitanika. Pristrasnost samoselekcije može da bude velika, a niko ne zna kolika je verovatnoća da pojedinac uđe u uzorak, kako je 2013. zaključila radna grupa AAPOR-a za neprobabilističke uzorke. Zato se margina greške za takav uzorak ne može smisleno izračunati: ona opisuje samo slučajna odstupanja pri slučajnom izboru (Pew Research Center, 2016).

Ako zamolite ispitanike da link proslede dalje (metod snežne grudve), možete doći i do retke grupe, ali ćete naći ljude nalik onima koji su prvi odgovorili. Zato zadržite filter pitanje i uzorak ne nazivajte reprezentativnim. Pogledajte i kako da dobijete više odgovora.

Filter pitanje koje ne odaje „tačan“ odgovor

Filter pitanje je pitanje na početku ankete koje utvrđuje da li osoba ispunjava uslove. Ponuđeni odgovori neka budu neutralni, tako da nijedan ne izgleda kao onaj koji želite da čujete. U pozivnici navedite temu, a ne odgovor koji vodi dalje: napišite uvod koji otkriva temu, a ne traženi odgovor i nikome ne objašnjavajte zašto je isključen.

Izaberite tip „Samo jedan odgovor“ (ili „Padajući meni“) i uključite „Obavezan odgovor“. Pravilo logike na takvom pitanju može da navede više ponuđenih odgovora i deluje ako je izabran bilo koji od njih. Obaveznost je važna jer „Sledeće“ prvo proverava stranicu, pa onda primenjuje pravila, a uslov „jednako je“ ne prepoznaje prazan odgovor: ko preskoči neobavezno filter pitanje, ulazi pravo u glavni deo ankete. Izbegavajte „Više odgovora“, gde pravilo prepoznaje samo tačno isti skup označenih opcija.

Koliko puta ste u poslednjih 12 meseci kupovali u [vašoj prodavnici]?
Nijednom / Jednom / 2–5 puta / Više od 5 puta

Uslove ispunjava svaki odgovor osim „Nijednom“, dok pitanje „Da li ste kupac [vaše prodavnice]? Da / Ne“ ljudima govori šta želite da čujete.

Nagrada podiže ulog. Chandler i Paolacci (2017) utvrdili su da plaćeni učesnici online platformi, kada sami prijavljuju da li ispunjavaju očigledne uslove, ponekad netačno odgovaraju da bi ušli u istraživanje, naročito kada se traži retka grupa. Ako nudite nagradu, filter pitanje stavite među dva ili tri slična pitanja, sa više uverljivih odgovora koji ne ispunjavaju uslove, na primer pitajte o dve ili tri prodavnice. Skrivanje teme nije rešenje: tako trošite pozive na ljude koji uslove ne mogu da ispune. Isključena osoba može i da pokuša ponovo, a drugi odgovor iste osobe sa drugog uređaja ili pregledača Anketa.rs ne prepoznaje: uz odgovor se beleži zemlja, a ne IP adresa (sa istog pregledača se, uz podrazumevano „Dozvoljen je samo jedan odgovor na anketu po uređaju“, otvara već dati odgovor).

Logika ankete: kako da se anketa završi za one koji ne ispunjavaju uslove

Obavezno filter pitanje stavite na prvu stranicu, kao jedino pitanje na njoj, i dajte mu pravilo „Podnesi anketu“ za odgovore koji ne ispunjavaju uslove. To je podrazumevani izlaz; kratka stranica za isključene je zamena kada želite da im postavite pitanje ili dva.

Pravila podešavate na kartici „Logika ankete“ (kako radi logika ankete objašnjava osnove). Za filter pitanje važne su tri pojedinosti:

• „Preskoči do stranice“, „Pošalji na URL“ i „Podnesi anketu“ deluju tek na „Sledeće“, pa filter pitanje mora da ima svoju stranicu, i to ne poslednju, na kojoj umesto „Sledeće“ stoji „Podnesi“.
• Preskakanje vodi na stranicu, nikada na pitanje.
• Svako pravilo ima jedan cilj, a pitanje može da ima više pravila.

„Podnesi anketu“ završava anketu bez provere preostalih pitanja. Anketa ima jednu završnu stranicu („Šablonska 'hvala' stranica“, „Sopstvena 'hvala' stranica“, „Automatski povedi na URL“ ili „Opcija za prosleđivanje prijateljima“), pa je sročite tako da odgovara obema grupama.

Stranica za isključene ide na kraj i traži više pravila: za odgovore koji ne ispunjavaju uslove „Preskoči do stranice“ do nje i po jedno pravilo „Sakrij stranicu“ za svaku glavnu stranicu, a za odgovore koji ispunjavaju uslove „Sakrij stranicu“ za stranicu isključenih. „Podnesi“ naime proverava svaku stranicu koju logika nije sakrila, pa i preskočene: bez tih pravila obavezno pitanje bez odgovora vratilo bi isključenu osobu na glavnu stranicu, na pitanja koja nisu za nju.

„Pošalji na URL“ ne podnosi anketu, pa osoba nedostaje i u rezultatima i u broju odgovora; njeni dotadašnji odgovori mogu da se pojave samo uz „Prikaži nedovršene odgovore“, ako ih je pregledač poslao. Ovaj izlaz koristite samo ako isključene ne želite u rezultatima.

Izlaze ne proveravajte preko „Pregled“: on izvršava pravila, ali ne proverava obavezna pitanja. Aktivirajte anketu i prođite je dva puta preko pravog linka, sa odgovorom koji ispunjava uslove i bez njega, svaki put u novom privatnom prozoru, jer na istom uređaju anketa podrazumevano otvara prethodni odgovor za izmenu. Probni odgovori su pravi završeni odgovori i računaju se u ograničenje; iz stopa pilota ih izostavite.

Kako da prebrojite isključene ispitanike

Isključen ispitanik se ne računa kao dovršena anketa. Standard Definitions AAPOR-a osobu za koju se utvrdi da ne ispunjava uslove svrstavaju među isključene na filter pitanju, a to je ishod „ne ispunjava uslove“. U izveštaju zato napišite „120 ispitanika ispunjava uslove, 212 je isključeno“, a ne jedan zbir. Uz podrazumevani izlaz ili stranicu za isključene ti ljudi su među završenim odgovorima; samu grupu koja ispunjava uslove vidite kada rezultate filtrirate opcijom „Prikaži samo odgovore gde“.

Kod mejl pozivnica sa uključenim praćenjem isključeni se u listi „Email primaoci“ vode kao „U potpunosti ispunjena anketa“ i ulaze u stopu ispunjavanja na ekranu „Email statistika“, pa nijedan od ta dva broja nije udeo onih koji ispunjavaju uslove.

Ako organizujete izvlačenje nagrade, neka u njemu učestvuje svako ko odgovori na filter pitanje, ispunjavao uslove ili ne, i to recite u pozivu: nagrada samo za one koji ispunjavaju uslove podstiče ljude da se predstave kao da ih ispunjavaju. Anketa.rs nema ugrađeno izvlačenje, a pravila za nagradne igre razlikuju se od mesta do mesta, pa proverite ona koja važe za vas.

Anketa.rs nema ni kvote po grupi: ako vam treba 60 novih i 60 stalnih kupaca, proveravajte brojeve u filtriranim rezultatima i prestanite da pozivate grupu koja se popunila.

Pilot anketa: izmerite koliko ljudi ispunjava uslove

Pre glavnog slanja pozovite malu grupu istim kanalom. Pilot meri tri stope: stopu započinjanja (udeo pozvanih koji odgovore na filter pitanje), udeo onih koji ispunjavaju uslove (među onima koji su na njega odgovorili) i stopu dovršavanja (udeo onih koji ispunjavaju uslove i stignu do „Podnesi“).

Preporuke dobre prakse AAPOR-a savetuju pretest sa ljudima nalik vašim ispitanicima i probu svakog postupka, a Presser i saradnici (2004) primetili su da se pretest mnogo češće preporučuje nego što se radi. U pilotu proverite poziv, kanal i svaku putanju logike.

Opšteprihvaćena najmanja veličina pilota ne postoji: neka uslove ispuni dovoljno ljudi da se udeo jasno vidi. Filter „Prikaži nedovršene odgovore“ pokazuje dokle su ljudi stigli, a kod mejl pozivnica sa praćenjem „Svi odgovorili delimično“ pokazuje ko je odustao. Stope iz pilota su grube, pa glavne pozive pošaljite u dva ili tri talasa i posle prvog ponovo računajte.

Koliko poziva treba poslati?

Ova računica važi samo za kanale u kojima znate broj poziva: za mejl listu, zatvorenu grupu ili kod odštampan na poznatom broju računa. Za otvoren link pozive ne možete da planirate; proveravajte u rezultatima koliko je dovršenih anketa onih koji ispunjavaju uslove i zatvorite anketu kada ih bude dovoljno.

Pozivi = potrebni dovršeni odgovori ÷ (stopa započinjanja × udeo onih koji ispunjavaju uslove × stopa dovršavanja)

Potreban broj dovršenih odgovora određuje analiza koju planirate, pre svega najmanja grupa o kojoj želite da izvestite.

Primer, a ne merilo: treba vam 120 dovršenih anketa onih koji ispunjavaju uslove, a pilot je pokazao da 20% pozvanih odgovori na filter pitanje, da 40% njih ispunjava uslove i da 85% njih dovrši anketu. 120 ÷ (0,20 × 0,40 × 0,85) ≈ 1.765 poziva, zaokruženo naviše.

Česta prečica deli cilj samo udelom onih koji ispunjavaju uslove (500 odgovora uz 50% daje 1.000), ali to je broj ljudi koji moraju da odgovore na filter pitanje. Pozivi moraju da pokriju i one koji nikad ne počnu i one koji ispunjavaju uslove, a odustanu.

Na besplatnom planu anketa prima do 500 odgovora (pogledajte ograničenja besplatnog plana). U taj broj ulaze oni koji izađu preko „Podnesi anketu“ ili stranice za isključene, a ne ulaze oni koje je „Pošalji na URL“ poslalo dalje ni oni koji ispunjavaju uslove, a odustanu. U primeru se računa oko 332 završena odgovora (212 isključenih i 120 koji ispunjavaju uslove).

Svaki plan uključuje i mesečni broj mejl pozivnica, naveden na istoj stranici, a ekran „Pošaljite putem email pošte“ pokazuje koliko ih još možete da pošaljete ovog meseca. Broj važi za ceo nalog i obnavlja se svakog meseca; primaoci preko tog broja ne dobijaju mejl, pa veća lista odlazi u talasima tokom više meseci ili na većem planu. U stopi započinjanja računajte samo pozive koji su otišli: na ekranu „Email statistika“ broj „Email poslat“ obuhvata i zadržane primaoce, a „Dostavljeno“ ne.

Proverite anketu na telefonu pre slanja

Veliki deo ljudi ankete otvara na telefonu, u komercijalnim online uzorcima često i većina, pa anketu proverite na telefonu i neka bude kratka. Oni koji odgovaraju samo sa telefona obično su mlađi i liče na grupe do kojih se teško dolazi, a veća greška merenja kod onih koji odgovaraju sa telefona i tableta potiče od toga ko te uređaje koristi, a ne od ekrana (Lugtig, Toepoel i Amin, 2016; Lugtig i Toepoel, 2016).

Izbegavajte široke tabele, kao što je pitanje „Matrica“ sa mnogo kolona. „Pregled“ u editoru otvara se samo vama i članovima vašeg tima, pa jedan probni prolaz preko pravog linka uradite na telefonu.

Od pravila do poziva: ukratko

Zapišite pravilo, izaberite kanale na kojima su ljudi koje tražite, proverite uslove obaveznim pitanjem sa pravilom „Podnesi anketu“, uradite pilot i izračunajte pozive za svaki kanal u kome ih brojite. Isključene prikažite odvojeno, a link koji se deli donosi više odgovora, ne reprezentativniji uzorak.

Krenite od šablona upitnika za istraživanje tržišta ispod: dodajte filter pitanje na novu prvu stranicu i dajte mu pravilo „Podnesi anketu“.

Pročitajte još

• Anketa prilagođena mobilnim uređajima: šta pokazuju istraživanja
• Gejmifikacija ankete: kada pomaže, a kada šteti podacima
• Greška uzorka i pristrasnost: razlika i kako da ih smanjite