Clef: Модели принятия решений с открытым исходным кодом и новая платформа для RL-тюнинга

Cloudflare представила Clef, инициативу с открытым исходным кодом, направленную на улучшение моделей принятия решений в системах искусственного интеллекта. Проект предоставляет разработчикам прозрачные и воспроизводимые инструменты для дообучения больших языковых моделей (LLM) с использованием обучения с подкреплением (RL). Решая проблемы согласования и поведения моделей, Clef упрощает процесс обучения ИИ следованию инструкциям при соблюдении стандартов безопасности. Платформа позволяет более детально контролировать оценку результатов, что критически важно для корпоративных приложений. Шаг Cloudflare отражает общеотраслевой тренд на открытие инфраструктуры для настройки ИИ, уходя от непрозрачных проприетарных методов. Этот релиз дает инженерам необходимые инструменты для эффективной итерации поведения моделей, потенциально снижая вычислительные затраты и технические барьеры, обычно связанные с рабочими процессами RL в производственных средах.