Тональное смещение пересказа: как нейросети искажают тон отзывов

Нейросети пересказывают отзывы всё чаще: ассистенты отвечают на вопрос «что говорят о компании», а площадки показывают автоматические сводки над списком отзывов. Пользователю удобно — не нужно читать сотню мнений. Но сводка не всегда передаёт реальное соотношение. Расхождение между тоном отзывов и тоном пересказа мы в SERM Service называем тональным смещением пересказа. Это рабочее понятие агентства, а не отраслевой стандарт.

Откуда берётся смещение

Первая причина — негативная предвзятость: плохие события и мнения сильнее влияют на восприятие, чем хорошие той же силы. Этот эффект хорошо описан в психологии — см. пересказы работ Баумайстера и соавторов и Розина и Ройзмана. Тексты, на которых учатся модели, написаны людьми с той же предвзятостью.

Вторая причина — устройство отзывов. Жалобы обычно длиннее, подробнее и эмоциональнее. Бергер и Милкман показали, что Трепет, гнев, тревога ↑ — Контент, вызывающий эмоции высокого возбуждения, — позитивные (трепет) и негативные (гнев, тревога) — распространяется сильнее. [Berger, Milkman, 2012] Похвала часто ограничивается словами «всё отлично», а в жалобе — подробности, которые хорошо подходят под вопрос пользователя.

Третья — выборка. Ассистент берёт не все отзывы, а несколько найденных фрагментов. Если среди них два подробных негативных и три коротких положительных, вывод сместится к негативу.

Почему это важно

Пользователи доверяют пересказу. Анализ тональности — оценка эмоциональной окраски текстов — для пользователя уже сделан ассистентом, и проверять его никто не станет. Склонность принимать уверенный ответ без проверки мы называем ответной слепотой. В эксперименте Бинка и соавторов неверный блок ответа над выдачей резко снижал долю правильных решений: 62,5% → 32,3% [Bink и др., 2022].

Как измерить смещение

1. Посчитайте реальное соотношение. Возьмите отзывы за последние 3–6 месяцев на основных площадках: доля положительных, нейтральных и отрицательных.
2. Выпишите основные темы. Какие достоинства и недостатки упоминаются и как часто.
3. Спросите ассистентов. «Что говорят о компании N?», «Какие отзывы о N?», «Какие минусы у N?».
4. Сравните. Совпадает ли общий тон, какие темы названы первыми, как часто они встречаются на деле.

Если первая названная тема упоминается меньше чем в десятой части отзывов, а частые темы не названы, смещение есть.

Пример: ветеринарная клиника

Условная ветеринарная клиника имела рейтинг 4,8 и 300 отзывов. Ассистент на вопрос «что говорят о клинике» отвечал: «Клиенты отмечают профессионализм врачей, но жалуются на долгое ожидание и высокую стоимость услуг». Ожидание упоминалось в 17 отзывах, стоимость — в 9.

Разбор показал: жалобы на ожидание были длинными, с подробностями, а благодарности — в основном в одну строку. Ассистент ссылался на два подробных негативных отзыва из трёх найденных.

Что сделали:

• стали после приёма просить владельцев описать, с чем пришли и чем помогли, — отзывная глубина положительных отзывов выросла;
• на все отзывы об ожидании дали содержательные ответы: ввели электронную очередь и запись на точное время;
• опубликовали на сайте страницу о записи и о том, как устроена очередь в выходные.

Через три месяца ассистент стал упоминать электронную запись, а ожидание переместилось из главного недостатка в «некоторые клиенты раньше отмечали».

Связь с отзывной глубиной

Отзывная глубина — доля отзывов с описанием ситуации, действий компании и результата. Чем больше подробных положительных отзывов, тем больше у ассистента материала для сбалансированного пересказа. Короткие пятёрки повышают рейтинг, но не попадают в сводку как содержательные фрагменты.

Что не поможет

• Просить только положительные отзывы. Это нарушает правила площадок и ведёт к перекосу в другую сторону.
• Удалять негатив. Удалить можно только отзывы, нарушающие правила, через официальную жалобу.
• Спорить с ассистентом в чате. Следующий пользователь получит тот же ответ.

Где появляются пересказы отзывов

Сводки на площадках обычно строятся по всем отзывам карточки, а ответы ассистентов — по найденным фрагментам. Поэтому смещение в сводке площадки чаще отражает реальные темы, а смещение в ответе ассистента — случайную выборку.

Как часто проверять

Раз в месяц достаточно для большинства компаний. Чаще — после волны негатива или крупных изменений: сводки и ответы ассистентов реагируют на свежие отзывы, и смещение может появиться за несколько недель. Сохраняйте полный текст ответа и дату — через полгода по этим записям видно, как меняется пересказ.

Отдельно стоит помнить, что тональное смещение пересказа — рабочее понятие SERM Service, а не отраслевой стандарт. Мы используем его, чтобы отделить реальную проблему сервиса от искажения при пересказе: первая решается изменениями в работе компании, второе — работой с отзывами и ответами. Путать их опасно: можно потратить квартал на отзывы, не заметив реальной проблемы, или менять сервис из-за перекоса в сводке.

Смещение усиливается при крайностном перекосе: если отзывы пишут в основном очень довольные и очень недовольные, ассистенту не из чего собрать типичную картину. Поэтому работа с перекосом и со смещением пересказа обычно идёт одним планом.

Что сообщать руководству

В отчёте достаточно трёх строк: реальная доля положительных отзывов, первая тема в пересказе ассистентов и её реальная частота. Например: «88% отзывов положительные; ассистенты первым называют долгое ожидание; о нём пишут в 6% отзывов». Такая формулировка сразу показывает масштаб смещения и не требует объяснять устройство моделей.

Если смещение есть, план обычно состоит из трёх пунктов: содержательные ответы на типовую жалобу, сбор подробных положительных отзывов и проверка через месяц. Если смещения нет, но пересказ называет реальную частую проблему, — это не задача репутации, а задача сервиса.

Чек-лист

• Посчитано реальное соотношение отзывов за 3–6 месяцев
• Выписаны основные темы с частотой упоминания
• Ассистентам заданы три вопроса об отзывах
• Сравнены тон и порядок тем в отзывах и пересказе
• Определены отзывы, на которые ссылается ассистент
• На типовые жалобы даны содержательные ответы
• Запущен сбор подробных отзывов от всех клиентов

Как ловить ошибки нейросетей о компании, разобрано в статье Ответная слепота: какие ошибки нейросетей о компании опасны и как их ловить. Как отзывы Google попадают в ИИ-обзоры, — в материале Отзывы Google в AI-обзорах и Gemini. На медицинских площадках сводки по отзывам о врачах тоже становятся привычными — например, в сервисе Яндекс Здоровье.

Первоисточники: Bad Is Stronger Than Good, What Makes Online Content Viral? и Featured Snippets and their Influence on Users' Credibility Judgements.