TypeSafe Jev сыграл в шахматы — и оказался рядом с моделями рассуждения

Разработчик Максим Саплин интегрировал модель Jev от TypeSafe в свою таблицу лидеров LLM Chess, чтобы протестировать её производительность в сравнении с традиционными чат-ботами. В отличие от стандартных моделей, генерирующих свободный текст, Jev — это модель типа «System One», предназначенная для структурированных задач классификации, где она выбирает из заданного набора вариантов. Рассматривая шахматные ходы как задачу классификации, Саплин успешно позволил Jev играть полноценные партии. Результаты оказались впечатляющими: Jev достиг рейтинга Elo, сопоставимого с моделями среднего уровня рассуждения, будучи при этом значительно быстрее и дешевле (стоимость игры составила всего $0.0015). Хотя Jev испытывает трудности с генеративными задачами, его эффективность в принятии решений делает его мощным инструментом для структурированных агентных систем. Эксперимент доказывает, что специализированные модели могут конкурировать с более крупными системами, предлагая высокую производительность для автоматизированных процессов принятия решений.