Интенсив 21–22.11 · БесплатноБесплатный 2-дневный интенсив по вайбкодингу 21–22 ноября в 16:00 МСК (Сб–Вс) · Живой Поток 3 стартует 23.11Записаться бесплатно →Поток 3 (23.11)
РазборРазбор · На радарHabr AI→ оригинал

Чат-боты переспорили чемпионов мира: 13–15 фактов за разговор против 5–8 у людей

Нейросети выигрывают споры за счёт плотности аргументов: за один разговор бот приводит 13–15 проверяемых фактов, человек — 5–8. Учёные из Оксфорда и Стэнфорда свели более 2000 участников с ботами и 56 элитными дебатёрами, включая чемпионов мира, и боты убеждали лучше. Когда фактов в ответах модели урезали до человеческих 5–8, преимущество исчезло. Поэтому плотный и спокойный ответ в чате ещё не доказывает правоту собеседника.

AI-обработка оригинала Habr AI; редакция Hamidun News
Чат-боты переспорили чемпионов мира: 13–15 фактов за разговор против 5–8 у людей
Источник: Habr AI. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникHabr AI ↗
Главный редактор
Ключевой факт #1Участники оценивали убедительность собеседника по шкале 0–100
Ключевой факт #2ChatGPT ранее снизил веру в теории заговора в среднем на 17 пунктов из 100
Ключевой факт #3Чем убедительнее бот, тем ниже точность фактов в ответах бота

Представьте спор о запрете соцсетей для подростков. Ваш оппонент-человек за несколько реплик приводит 5–8 проверяемых фактов: цифры, примеры, ссылки на исследования. Бот за тот же разговор выдаёт 13–15 таких фактов, спокойно, без эмоций и на несколько абзацев. Новое британское исследование показывает: именно из-за этой разницы нейросеть убеждает людей сильнее, чем элитные дебатёры, включая чемпионов мира. Для тех, кто делает чат-ботов и читает дискуссии в Telegram и на Хабре, это важный сигнал: гладкая аргументация больше не признак живого и компетентного собеседника.

Что проверяли и кто победил

Учёные из Оксфорда, Стэнфорда, Лондонской школы экономики и UK AI Security Institute собрали более 2000 участников. Каждый обсуждал острые политические темы с чат-ботом или с человеком: запрет соцсетей до 16 лет, эвтаназию, повышение пенсионного возраста, возврат исторических ценностей вроде Парфенонского мрамора и Бенинской бронзы. Участники защищали заданную позицию, а в конце оценивали по шкале от 0 до 100, насколько собеседнику удалось их убедить.

Впервые в таких опытах моделям противопоставили не обычных людей, а 56 элитных дебатёров, среди которых есть чемпионы мира. Им помогали: сделали тренажёр, показывали записи прошлых дебатов, четырём лучшим пообещали денежный бонус. Это не помогло. Claude Opus 4.1 и 4.6, GPT-4o, GPT-5.4, Grok 4.20 и Gemini 2.5 Pro показали результат выше экспертов. Препринт опубликован в июне 2026 года (arXiv:2606.16475).

Отдельно смотрели, какие приёмы работают лучше. Преимущество ИИ над человеком измеряли в процентных пунктах по семи механизмам убеждения. Лидируют планы «если случится X, то сделаю Y» (+15,0 п. п.) и постепенное втягивание в обязательства (+12,6 п. п.). Дальше идут подача информации о том, насколько мера эффективна (+10,3), и объяснение сути проблемы (+9,8), затем ожидаемое сожаление (+8,4), навешивание ярлыка идентичности (+6,0) и эмоциональная активация (+5,2). Участникам предлагали пожертвовать часть бонуса в £1 в пользу Save the Children, так что эффект проверяли и на реальных деньгах.

Почему побеждает машина

Авторы проверили простую гипотезу: дело в плотности фактов. Они взяли ограниченную версию модели и принудительно сократили число фактов с «машинных» 13–15 до человеческих 5–8. Убедительность сразу упала до уровня элитного дебатёра. Выходит, секрета в риторике нет. Модель быстрее «соображает» и «говорит», поэтому успевает вложить в разговор больше проверяемых аргументов, а у мозга пропускная способность ниже.

Это согласуется с прежними работами. В 2023 году тексты, сгенерированные моделью, воспринимались как более рациональные и опирающиеся на доказательства. Позже ChatGPT в живых диалогах снизил уверенность сторонников теорий заговора в среднем почти на 17 пунктов по 100-балльной шкале. Участники объясняли это тем, что получили факты и логику.

Обратная сторона и ограничения

Чем убедительнее бот, тем хуже с точностью. По данным работы, факторы, усиливающие убеждение, обычно снижают достоверность фактов. Чем больше модель, тем лучше она понимает, какие аргументы действуют на людей, и тем охотнее заполняет разговор сомнительными или ложными утверждениями в том же стиле.

Есть и скептики. Они считают, что бот не доказывает правоту, а просто заваливает собеседника объёмом текста. Само исследование этому не противоречит: оно показывает, что решает количество фактов. К тому же спорили на политические темы в контролируемых условиях, поэтому переносить цифры на любые реальные ситуации нужно осторожно.

Что с этим делать практикам

Первое: если вы строите продукт с диалоговым ИИ (поддержка, продажи, рекомендации, образование), считайте убедительность отдельным риском. Модель может подвести пользователя к решению, даже когда часть её фактов неверна. Логируйте и выборочно проверяйте утверждения, которые бот приводит в момент принятия решения.

Второе: для обычного пользователя защита проста. Плотный, спокойный и аргументированный ответ не означает, что собеседник прав. Замедлите разговор и сами проверьте два-три ключевых факта.

Третье: тема ограничений на этапе разработки уже обсуждается. Специалисты спорят, насколько этично заранее урезать способность моделей к убеждению. Другие рассчитывают на плюрализм, когда много ботов отстаивают разные позиции и уравновешивают друг друга. Ни один из подходов пока не доказал эффективность, а сами модели продолжают улучшаться.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: что проверяли и кто победил?

Учёные из Оксфорда, Стэнфорда, Лондонской школы экономики и UK AI Security Institute собрали более 2000 участников. Каждый обсуждал острые политические темы с чат-ботом или с человеком: запрет соцсетей до 16 лет, эвтаназию, повышение пенсионного возраста, возврат исторических ценностей вроде Парфенонского мрамора и Бенинской бронзы. Участники защищали заданную позицию, а в конце оценивали по шкале от 0 до 100, насколько собеседнику удалось их убедить.

Что известно по теме: почему побеждает машина?

Авторы проверили простую гипотезу: дело в плотности фактов. Они взяли ограниченную версию модели и принудительно сократили число фактов с «машинных» 13–15 до человеческих 5–8. Убедительность сразу упала до уровня элитного дебатёра. Выходит, секрета в риторике нет. Модель быстрее «соображает» и «говорит», поэтому успевает вложить в разговор больше проверяемых аргументов, а у мозга пропускная способность ниже. Это согласуется с прежними работами.

Что известно по теме: обратная сторона и ограничения?

Чем убедительнее бот, тем хуже с точностью. По данным работы, факторы, усиливающие убеждение, обычно снижают достоверность фактов. Чем больше модель, тем лучше она понимает, какие аргументы действуют на людей, и тем охотнее заполняет разговор сомнительными или ложными утверждениями в том же стиле. Есть и скептики. Они считают, что бот не доказывает правоту, а просто заваливает собеседника объёмом текста. Само исследование этому не противоречит: оно показывает, что решает количество фактов.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Единое AI-пространство · Nomad

Протестируйте новые LLM и мультимодальные модели в одном окне

Платформа Nomad AI (nomadnet.ai) даёт прямой доступ к Claude Opus 5.5, GPT-6, Gemini 3.1, DeepSeek и автономным агентам без VPN, зарубежных карт и зоопарка подписок.

Открыть Nomad AI →Автономный Nomad Agent
Что вы думаете?
Загружаем комментарии…