ARENA PULSE Все новости

Новый бенчмарк AgentMask-RU для оценки маскировки ПДн в LLM-агентах

Рейтинги

Бенчмарк AgentMask-RU содержит 272 диалога, 680 персональных значений и 624 негатива. Результаты тестирования шести систем показали, что Pseudex маскирует 94,7% данных и восстанавливает 96,9%.

Бенчмарк предназначен для оценки работы шлюзов, которые должны маскировать данные перед отправкой в LLM и восстанавливать их для вызова инструментов.

Источник: habr.com

Открыть в ArenaPulse