Oct 01, 2023
Новое облако NVIDIA Maxine
Последняя версия NVIDIA Maxine открывает путь для аудио- и видеосвязи в реальном времени. Будь то видеоконференция, звонок в центр обслуживания клиентов или прямая трансляция, Максин
Последняя версия NVIDIA Maxine открывает путь для аудио- и видеосвязи в реальном времени. Будь то видеоконференция, звонок в центр обслуживания клиентов или прямая трансляция, Maxine обеспечивает четкую связь для улучшения виртуального взаимодействия.
NVIDIA Maxine — это набор наборов средств разработки программного обеспечения (SDK) для искусственного интеллекта с графическим ускорением и облачных микросервисов для развертывания оптимизированных и ускоренных функций искусственного интеллекта, которые улучшают аудио, видео и эффекты дополненной реальности (AR) в реальном времени.
А благодаря современным моделям Maxine конечным пользователям не нужно дорогостоящее оборудование для улучшения звука и видео. Используя технологию NVIDIA AI, эти высококачественные эффекты могут быть достигнуты с помощью стандартных микрофонов и фотоаппаратуры.
На GTC компания NVIDIA объявила о реархитектуре Maxine для облачных микросервисов, выпустив ранний доступ к микросервису аудиоэффектов Maxine. Кроме того, были представлены новые функции Maxine SDK, включая фокусировку говорящего и оценку выражения лица, а также общедоступную функцию зрительного контакта. NVIDIA Maxine теперь также включает расширенные версии существующих функций SDK.
Облачные микросервисы Maxine позволяют разработчикам создавать приложения искусственного интеллекта в реальном времени. Микросервисами можно независимо управлять и легко развертывать в облаке, что ускоряет сроки разработки.
Микросервис Audio Effects, доступный в раннем доступе, содержит четыре современные звуковые функции:
Pexip, ведущий поставщик корпоративных решений для видеоконференций и совместной работы, использует технологии NVIDIA AI, чтобы вывести виртуальные встречи на новый уровень с расширенными функциями для современных сотрудников.
«С переходом Maxine на облачные микросервисы будет еще проще объединить передовые технологии искусственного интеллекта NVIDIA с нашей собственной уникальной серверной архитектурой», — сказал Эдди Клифтон, старший вице-президент по стратегическим альянсам в Pexip. «Это позволяет нашим командам Pexip предоставлять улучшенные возможности для виртуальных встреч».
Зарегистрируйтесь для раннего доступа.
Maxine предлагает три SDK с графическим ускорением, которые заново изобретают связь в реальном времени с искусственным интеллектом: аудио, видео и эффекты AR.
SDK звуковых эффектов обеспечивает мультиэффектные алгоритмы улучшения качества звука на основе искусственного интеллекта с малой задержкой. «Фокус динамика», доступный в раннем доступе, — это новая функция, которая разделяет звуковые дорожки динамиков на переднем и заднем плане, делая каждый голос более разборчивым. Кроме того, функция Audio Super Resolution SDK была обновлена и теперь имеет повышенное качество.
SDK видеоэффектов создает видеоэффекты на основе искусственного интеллекта со стандартным входом веб-камеры. Функция «Виртуальный фон», которая сегментирует профиль человека и применяет удаление, замену или размытие фона с помощью искусственного интеллекта, была обновлена и теперь обеспечивает повышенную временную стабильность.
А AR SDK обеспечивает 3D-отслеживание лица на базе искусственного интеллекта в реальном времени и оценку позы тела на основе стандартной записи с веб-камеры. Последние функции включают в себя:
Были обновлены следующие функции AR:
Попробуйте Maxine SDK. Чтобы напрямую ощутить эффекты Максин, загрузите приложение NVIDIA Broadcast.
Maxine SDK и микросервисы предоставляют набор эффектов искусственного интеллекта с малой задержкой, которые можно интегрировать в существующие инфраструктуры клиентов. Разработчики могут воспользоваться передовыми возможностями искусственного интеллекта с помощью Maxine, поскольку эта технология построена на платформе NVIDIA AI и имеет предварительно обученные модели мирового класса, позволяющие пользователям создавать, настраивать и развертывать функции аудио- и видеопремиального качества.
Maxine также является частью NVIDIA Omniverse Avatar Cloud Engine, коллекции облачных моделей искусственного интеллекта и сервисов, позволяющих разработчикам создавать, настраивать и развертывать интерактивные аватары. Настраиваемые облачные микросервисы Maxine позволяют независимо развертывать их в конвейерах эффектов искусственного интеллекта. Maxine можно развернуть локально, в облаке или на периферии.
Узнайте больше о NVIDIA Maxine и других технологических прорывах, посмотрев программный доклад GTC основателя и генерального директора NVIDIA Дженсена Хуанга: