Эксперт сравнил стоимость рабочей станции AMD Radeon AI PRO R9700 с облачными AI-сервисами

Недавний анализ Puget Systems оценивает экономическую эффективность локального запуска ИИ-инференса с использованием рабочей станции с двумя GPU AMD Radeon AI PRO R9700 по сравнению с облачными моделями подписки. Система стоимостью $18 775 с общим объемом видеопамяти 64 ГБ показала, что интенсивное использование ИИ может значительно сократить операционные расходы. Благодаря технологии Multi-Token Prediction система достигла пропускной способности 320,2 токена в секунду, что позволило ей превзойти по стоимости такие дорогие облачные сервисы, как GPT-5.6 Sol, всего после 3,5 часов использования в неделю. Однако исследование отмечает, что локальное оборудование менее эффективно для легких нагрузок или более дешевых моделей, таких как GPT-5.6 Luna. Хотя локальные установки предлагают существенную экономию для активных пользователей, они могут уступать в качестве логических рассуждений топовым облачным моделям. Результаты показывают, что компаниям необходимо балансировать инвестиции в инфраструктуру с требованиями к производительности, чтобы определить, дает ли локальное ИИ-оборудование реальное финансовое преимущество.
This is a summary. Read the full article at the original source:
TechRadarПохожие
Компания OpenAI официально начала развертывание своей новейшей модели искусственного интеллекта GPT-6 Astra для широкого круга пользователей. Этот рел…
Fable 5.1 расшифровал «Cyphral Distich», 370-летнюю криптограмму
Последняя версия Fable 5.1 успешно расшифровала «Cyphral Distich» — сложную криптографическую загадку, остававшуюся неразгаданной на протяжении 370 ле…
В этой статье автор исследует проблему неспособности ИИ-агентов учиться на своих ошибках, из-за чего они часто попадают в циклы неудачных вызовов инст…



