NNGroup: Sintetički korisnici vs. stvarni ispitanici — isti zaključak, manje varijacija
Rachel Banawa iz Nielsen Norman Group objavila je ovu studiju 16. oktobra 2026. godine, upoređujući AI generisane sintetičke ispitanike sa stvarnim učesnicima ankete na istom otvorenom pitanju. Pitanje je glasilo: koja profesionalna oblast najbolje opisuje posao pretvaranja uvida korisnika u preporuke za proizvod? Zadatak je relevantan za istraživače, dizajnere i ljude koji razvijaju proizvode. Uzorak stvarnih ispitanika dovoljno je velik (604 profesionalca iz tehnološke i dizajnerske industrije) da pokaže kako izgleda stvarna varijacija.
Sintetička grupa sastojala se od 120 ispitanika generisanih na platformi Synthetic Users. Opšti zaključak se poklopio: obe grupe imendale su UX kao dominantnu oblast. Ali na nivou varijacije, rezultati postaju poučni. Stvarni ispitanici su koristili više od 50 različitih oznaka — uključujući retke, specijalizovane i vezane za konkretna radna mesta — koje su odražavale stvarnu profesionalnu raznolikost. Sintetički ispitanici su se sveli na otprilike 12 oznaka, potpuno ispuštajući sve manje uobičajene termine. Banawa ovaj efekat naziva „kolaps moda” — AI gravitira ka statistički najreprezentativnijem odgovoru i nedovoljno predstavlja dugi rep.
Demografski nagib pojačava problem. Samo 20% sintetičkih ispitanika bilo je definisano kao UX profesionalci, a ipak je 84% njihovih odgovora imenddalo UX kao relevantnu oblast. Među 604 stvarna ispitanika — od kojih je 67% zaista bili UX profesionalci — taj broj je bio 70%. Drugim rečima, AI model bio je UX-centrovaniji od stvarnih UX profesionalaca koje je trebalo da simulira.
Efekti uloge u sintetičkim podacima su bili prisutni, ali prigušeni. Sintetički PM-ovi pripisivali su ovaj posao UX-u u 93% slučajeva; stvarni PM-ovi to su činili u 44% slučajeva. To znači da sintetički podaci mogu pokazati da razlike između podgrupa postoje, ali ne i koliko su one zapravo velike. Članak beleži i metodološku komplikaciju: platforma Synthetic Users sprovodi simulirane intervjue, a ne direktne ankete, što znači da su ispitanici odgovarali u okviru dužeg razgovora, a ne na jedno pitanje.
Praktična preporuka iz studije je konkretna. Sintetički korisnici korisni su za generisanje hipoteza, proveru da li opšti obrazac funkcioniše, ili za odabir pravaca vrednih istraživanja sa stvarnim učesnicima. Nisu pouzdani za merenje razlika između podgrupa, hvatanje manjinskih ili specijalizovanih perspektiva, ili dobijanje prirodne varijacije koja otkriva rubne slučajeve u dizajnu.