Безопасно размещаем отзывы и Работаем с репутацией!
Парафразное покрытие
Коротко
Наличие ключевых фактов о компании в разных формулировках и в разных независимых источниках, при условии что сами факты везде совпадают.
Парафразное покрытие — метод и метрика LLMO. Модели надёжнее извлекают факт, если в данных он встречается в разных пересказах, а не одной фразой на одном сайте.
На чём основано
Аллен-Чжу и Ли показали на синтетических биографиях: без разнообразия формулировок знание может быть запомнено, но не извлекаться вовсе, а перефразирование и перестановка предложений делают его извлекаемым.
Как оценить
Для каждого ключевого факта (что делает компания, где работает, чем отличается, кто основатель) посчитать:
- в скольких независимых источниках он есть;
- в скольких разных формулировках;
- совпадают ли значения — даты, адреса, названия.
Как повысить
- описывать компанию по-разному в разных форматах: справочник, интервью, кейс, статья, карточка;
- не копировать один и тот же абзац «о компании» на все площадки;
- следить, чтобы разнообразие касалось формулировок, а не фактов.
Главный риск
Разные формулировки полезны, разные факты — вредны. Расхождения в датах или адресах создают фактовый конфликт, и модель может выбрать неверный вариант.
Подробно, с примером и чек-листом, — в статье Описание компании для языковых моделей: двунаправленные факты и перефразы.