ARENA PULSE Все новости

Выпущен фреймворк для оценки метанормов в LLM

Рейтинги

Представлен фреймворк и датасет NormReact для оценки метанормов в LLM. Шесть протестированных моделей переоценивают негативные санкции по сравнению с человеческими оценками.

Разработан фреймворк для оценки метанормов в больших языковых моделях по двум измерениям: эмоциональная оценка и поведенческая реакция. Выпущен датасет NormReact, содержащий 450 сценариев нарушений норм, с аннотациями эмоций и реакций.

Шесть протестированных LLM переоценивают негативные санкции по сравнению с человеческими оценками.

Источник: arxiv.org

Открыть в ArenaPulse