Verasight: AI-интервью дают больше глубины, но теряют репрезентативность
Компания Verasight, некоммерческая социологическая организация, опубликовала результаты рандомизированного эксперимента, который напрямую сравнивает AI-модерированные интервью с традиционными открытыми вопросами в анкетах. Исследование называется «Глубина ценой репрезентативности: рандомизированное сравнение AI-модерированных интервью и открытых вопросов в анкетах» (Depth at a Cost: A Randomized Comparison of AI-Moderated Interviews and Written Survey Open-Ends).
Что изучали
В эксперименте участвовали 3160 взрослых жителей США, которых случайным образом распределили на две группы. Первая группа отвечала на вопросы через традиционные открытые текстовые поля в анкете. Вторая группа проходила интервью с AI-модератором в видео- или аудиоформате, где AI задавал адаптивные уточняющие вопросы. Обе группы отвечали на одни и те же четыре темы, что позволило напрямую сравнить глубину ответов, уровень завершения и репрезентативность выборки.
Ключевые результаты
AI-модерированные интервью сгенерировали в 4,8 раза больше слов по сравнению с письменными открытыми вопросами. Участники интервью приводили более конкретные примеры, раскрывали личный контекст и объясняли причины своих взглядов. Около 80% этого преимущества в глубине обеспечивали адаптивные уточняющие вопросы AI-модератора.
Вместе с тем уровень завершения в группе AI-интервью составил лишь 40,5%, тогда как в группе письменных вопросов анкету завершили 99,4% участников. Большинство отсеивалось на этапе перехода с платформы Verasight на внешнюю платформу для проведения интервью.
Критически важно, что выбывание происходило не случайно. Те, кто всё же завершил AI-интервью, с большей вероятностью регулярно используют AI-технологии, доверяют AI-компаниям в вопросах конфиденциальности и склонны давать более развёрнутые ответы. Это привело к систематическому смещению выборки.
Проблема репрезентативности
Среди завершивших AI-интервью уровень оптимизма по отношению к AI оказался на 7,4 процентных пункта выше, чем среди всей группы, изначально назначенной на AI-интервью. Этот разрыв не устранялся полностью даже после взвешивания данных — сохранялись демографические и политические различия.
Исследователи привели конкретный пример: готовность согласиться с тем, что AI улучшит повседневную жизнь, среди завершивших AI-интервью оказалась на 12,5 процентных пункта выше, чем среди тех, кто отказался его проходить. Группа завершивших превысила результаты всей AI-группы по уровню AI-оптимизма на 7,4 пункта. Исследователь, опиравшийся бы только на транскрипты AI-интервью, сделал бы вывод о более высоком общественном доверии к AI, чем оно есть в действительности.
«AI-модерированные интервью явно способны побудить людей говорить больше и давать исследователям значительно большую глубину, однако наше исследование показывает, что эта глубина достигается ценой серьёзных компромиссов. Когда почти шесть из десяти участников, назначенных на AI-интервью, не завершают его, а те, кто остаётся, систематически отличаются от ушедших, исследователям следует быть осторожными и не воспринимать эти ответы как репрезентативные для более широкой популяции», — сказал Бен Лефф, генеральный директор и сооснователь Verasight.
Мнение участников
При всех ограничениях те, кто завершил AI-интервью, в целом оценили опыт положительно: 86% поставили оценку 4 или 5 из 5, 91% сказали, что им было легко его пройти. Примечательно, что 34% участников отметили: с AI-модератором они были честнее, чем ответили бы в стандартной анкете.
Что это значит для исследователей
По заключению исследования, AI-модерированные интервью наиболее подходят для задач, где важны глубина, поисковый характер и понимание мотивов. Для исследований, требующих широкого охвата и репрезентативных оценок на уровне популяции, традиционные письменные опросы или смешанные подходы остаются более надёжным выбором.
Исследование проводилось с 22 по 31 мая 2026 года. Verasight — некоммерческая исследовательская компания, поставляющая данные для академических исследований, государственных структур и ведущих медиаорганизаций, в том числе ABC News, CBS News, CNN, FOX News и NBC News.
Полный отчёт доступен на сайте verasight.io.