Компания Nvidia анонсировала на Computex 2024 открытие широкого доступа к своим микросервисам ACE (Avatar Cloud Engine) на базе генеративного искусственного интеллекта, которые ускорят создание реалистичных виртуальных персонажей для игр, приложений VR и обслуживания клиентов в сфере медицины и не только.
Генеральный директор Nvidia Дженсен Хуанг (Jensen Huang) заявил, что цифровые люди кардинально изменят многие отрасли. По его словам, технологии компании, такие как мультимодальные большие языковые модели и нейронная графика, приближают нас к эре «вычислений, управляемых намерениями». В этом будущем взаимодействие с компьютерами будет таким же естественным, как и общение между людьми.
Изначально сервисы ACE предоставлялись только для разработчиков в дата-центрах. Теперь же Nvidia адаптировала их для использования на персональных компьютерах и ноутбуках. В частности, компания представила языковую модель Nemotron-3 4.5B, а также модели Audio2Face и Riva ASR, которые скоро станут доступны. Для упрощения развёртывания ACE на ПК, Nvidia разработала специальный инструмент AI Inference Manager. Он автоматически настраивает все необходимые компоненты и модели ИИ, координируя их работу как локально на устройстве, так и в облаке.
Также на Computex 2024 была продемонстрирована обновленная версия технологии Covert Protocol, созданная совместно с компанией Inworld AI. Технология позволяет игрокам с помощью голоса взаимодействовать с цифровыми персонажами, используя модели Audio2Face и Riva ASR, работающие на ПК с видеокартами GeForce RTX.
Как отмечается на сайте Nvidia, Avatar Cloud Engine уже применяют такие компании, как Aww, Dell, Gumption, Hippocratic AI, Inventec, OurPalm, Perfect World Games, Reallusion, ServiceNow, Soulbotix, SoulShell и UneeQ. Они используют ACE для создания виртуальных помощников, персонажей в играх и приложениях VR.
Например, японская компания Aww, специализирующаяся на виртуальных «людях», теперь будет использовать Audio2Face для анимации своих персонажей в реальном времени. А разработчик игр Perfect World Games интегрировал ACE в демоверсию Legends для создания интерактивного ИИ-персонажа, который может общаться на английском и китайском языках.
Благодаря доступности этих мощных сервисов генеративного ИИ от Nvidia теперь ещё больше компаний смогут создавать реалистичных виртуальных агентов для сферы обслуживания, маркетинга, образования, медицины и других областей, что открывает новые перспективы для развития цифровых аватаров и вычислений, управляемых естественным языком (NLP).