Pew Research Center: ИИ не способен заменить людей в опросах общественного мнения
Авторы: Athena Chapekis, Arnold Lau, Samuel Bestvater, Sono Shah, Andrew Mercer и Aaron Smith — 30 сентября 2026 года
Об исследовании
В этом докладе Pew Research Center изучает, способны ли сгенерированные ИИ данные опросов точно воспроизвести результаты высококачественных опросов общественного мнения.
Мы провели этот методологический эксперимент, чтобы лучше понять новый метод, распространяющийся в области survey research. Центр убеждён, что прямое общение с общественностью незаменимо при измерении общественного мнения, и не имеет ни текущих, ни перспективных планов использовать ИИ для генерации результатов опросов.
В рамках исследования мы попросили ИИ-модель взять на себя роль реальных участников нашей панели American Trends Panel (ATP) и ответить на те же опросы, которые проходили живые участники. Опросы охватывали широкий спектр форматов вопросов и касались самых разных тем, установок и поведения.
Зачем мы это делали
Центр регулярно изучает и оценивает новые разработки и тенденции в опросной отрасли. По мере того как ИИ-опросы становятся всё более распространёнными, мы захотели понять, какие данные производят «синтетические выборки» и как они соотносятся с результатами высококачественных опросов реальных людей по темам, представляющим широкий общественный интерес.
Как мы это делали
Для исследования мы применили подход «цифровых двойников»: попросили ИИ-модель принять личности реальных людей из ATP. Модели была предоставлена подробная информация о каждом участнике панели, включая демографические данные и ответы на вопросы нашего политического типологического опроса 2025 года. Затем мы показывали модели вопросы из трёх разных волн ATP, проводившихся в первой половине 2026 года, и просили отвечать на них от лица назначенной персоны. Модель получала вопросы последовательно, с теми же инструкциями и той же программой опроса, что и живые участники.
Мы тестировали несколько моделей, однако все синтетические результаты, если не указано иное, получены с использованием Claude Opus 4.6 от Anthropic. На момент проведения исследования Opus 4.6 был наиболее актуальной коммерческой моделью Anthropic и показал наилучшие результаты среди нескольких оценённых вариантов.
Что показало исследование
Результаты ИИ-опросов систематически расходятся с человеческими
По почти 300 отдельным вопросам опросов оценки, полученные от ИИ-респондентов, отличались от человеческих в среднем на 12 процентных пунктов. Средняя разница превышала 15 пунктов примерно на 28% вопросов. Нередко расхождения достигали 20, 30 и даже более 40 процентных пунктов по отдельным вариантам ответов на некоторые вопросы.
| Группа | Волна 185 | Волна 190 | Волна 192 | Среднее по волнам |
|---|---|---|---|---|
| Все участники | 11,3 | 14,7 | 11,2 | 12,4 |
| Республиканцы / склоняющиеся к Республиканской партии | 15,1 | 16,6 | 16,4 | 16,1 |
| Демократы / склоняющиеся к Демократической партии | 12,2 | 16,7 | 11,9 | 13,6 |
| Белые | 11,7 | 14,1 | 11,6 | 12,5 |
| Испаноязычные | 12,7 | 16,8 | 12,3 | 13,9 |
| Чёрные | 14,1 | 18,5 | 12,7 | 15,1 |
| Азиаты | 12,5 | 16,1 | 11,9 | 13,5 |
Крупные промахи по «злободневным» политическим темам
ИИ-опрос допустил серьёзные ошибки в ряде вопросов о текущих событиях начала 2026 года. В частности:
- Он завысил долю американцев, одобряющих работу президента Дональда Трампа, несмотря на наличие длительных трендовых данных.
- Он значительно занизил долю республиканцев, считающих допустимым ношение масок сотрудниками иммиграционной службы, что привело к большой суммарной ошибке.
- Он существенно промахнулся в ряде вопросов о центрах обработки данных — от общей осведомлённости до оценки их влияния.
| Утверждение | Реальные жители США | Синтетические респонденты | Ошибка |
|---|---|---|---|
| Сотрудники иммиграционной службы могут носить маски | 38% | 17% | −21 пп |
| Одобряют работу Дональда Трампа в качестве президента | 34% | 46% | +12 пп |
| Много слышали о центрах обработки данных | 25% | 3% | −22 пп |
Нередко такие промахи были непредсказуемы. Применительно к стоимости жизни модель несколько завысила долю американцев, обеспокоенных ценами на медицину и потребительские товары, и при этом резко занизила долю тех, кого беспокоит стоимость электроэнергии.
ИИ избегает крайних ответов и стягивает оценки к середине
Взгляды людей крайне разнообразны, однако ИИ-респонденты нередко полностью отказывались от определённых вариантов ответа. Почти в половине заданных вопросов хотя бы один вариант ответа не был выбран ни одним ИИ-респондентом.
Эти ошибки искажают реальное общественное мнение. Например, модель в целом верно оценила, что большинство американцев поддерживает легальность абортов. Однако она систематически занижала как долю сторонников легальности во всех случаях (реально 23%, у ИИ 13%), так и долю противников во всех случаях (реально 11%, у ИИ 0%).
ИИ воспроизводит стереотипы о расовых и партийных группах
Во многих случаях ИИ-опрос брал убеждения или установки, достаточно распространённые в конкретной подгруппе, и представлял их как почти всеобщие. Например:
- 97% испаноязычных американцев, по данным ИИ, хотя бы в какой-то мере следят за чемпионатом мира по футболу — в действительности так считают 43%.
- 95% республиканцев и склоняющихся к Республиканской партии относятся к Израилю очень или несколько благоприятно — реально это 58%.
- 86% демократов и склоняющихся к Демократической партии считают, что миллиардеры — это плохо для страны — реально 45%.
ИИ считает, что люди знают больше, чем на самом деле
Меньше шести из десяти американцев могут правильно ответить на вопрос о том, какое право защищает Первая поправка к Конституции США, или о том, в чём состоит ключевая задача НАТО. Наш ИИ-опрос, напротив, оценил, что почти каждый американец знает правильный ответ.
| Вопрос | Реальные жители США | Синтетические респонденты | Ошибка |
|---|---|---|---|
| Какое право гарантирует Первая поправка? | 52% | 98% | +46 пп |
| Какова главная задача НАТО? | 56% | 99% | +43 пп |
| Территорией какой страны является Гренландия? | 63% | 82% | +19 пп |
Более того, ИИ-респонденты не склонны признавать неопределённость. По всем вопросам трёх волн, где предлагался вариант «не знаю», живые участники выбирали его примерно в четыре раза чаще, чем ИИ-модель.
Результаты зависят от выбора модели
Мы обнаружили, что разные ИИ-модели могут рисовать принципиально разную картину общественного мнения — даже когда всё остальное в опросе идентично. В тесте, где GPT-5.1 от OpenAI сравнивался с Claude Opus 4.6 от Anthropic на подмножестве вопросов, оценки GPT описывали американское общество как более склонное к крайним взглядам, чем в действительности, а оценки Opus — как более умеренное, чем реально. Читатель любого из этих результатов оказался бы введён в заблуждение, но в разных направлениях.
Итог
Главный вывод этого исследования: ИИ-опросы не заменяют строгую работу с реальными людьми. Дело не только в том, что результаты ИИ отличаются от человеческих — хотя это, безусловно, так. Главная проблема в том, что эти отличия часто непредсказуемы и в значительной мере зависят от таких факторов, как непредвиденные события в реальном мире или выбор конкретной модели. Опросный процесс лучше оставить людям.