Локальный ассистент для Zoom: интеграция Nemotron от NVIDIA для улучшения диаризации

Автор проекта «Чароит», локального ассистента для обработки видеозвонков, внедрил нейросеть Nemotron от NVIDIA для решения проблемы диаризации — точного определения того, кто именно произносит реплики в ходе беседы. Ранее ошибки в идентификации спикеров приводили к неверному распределению задач в протоколах встреч. NVIDIA представила специализированную модель для этой задачи 23 сентября, и уже через пять дней она была успешно интегрирована в рабочую цепочку ассистента. Теперь система обрабатывает оба аудиоканала звонка, а также записи очных встреч и потоковую речь. Использование Nemotron позволило значительно повысить точность формирования стенограмм и графов встреч, минимизировав человеческий фактор при анализе диалогов. Это обновление стало важным шагом в развитии локальных инструментов для автоматизации офисной работы, обеспечивая высокую приватность и качество обработки данных без необходимости отправки информации на внешние серверы.