ARENA PULSE Все новости

HyperWorld сравнивает методы сериализации состояний в текстовых моделях

Рейтинги

Исследование сравнивает четыре метода сериализации состояний для текстовых моделей мира. Гиперграфическая сериализация показывает лучшие результаты для моделей 0.5B-1.5B и при сдвиге распределения.

HyperWorld представляет контролируемое исследование сериализации состояний для текстовых моделей мира. Сравнение включает сырые наблюдения и три символьные сериализации: независимые предложения, парные тройки и гиперграфические единицы, группирующие факты вокруг сущностей и отношений. Гиперграфическая сериализация обеспечивает наибольший прирост для моделей 0.5B-1.5B и при сдвиге распределения данных.

В тестах на соответствие в распределении парные тройки могут сопоставить или незначительно превзойти гиперграфы, но гиперграфы достигают наивысшего F1 для фактов вне распределения и лучшего баланса между обнаружением выполнимости и предсказанием эффектов на малых и средних масштабах.

Источник: arxiv.org

Открыть в ArenaPulse