Блог

Oct 01, 2023

Новое облако NVIDIA Maxine

Последняя версия NVIDIA Maxine открывает путь для аудио- и видеосвязи в реальном времени. Будь то видеоконференция, звонок в центр обслуживания клиентов или прямая трансляция, Максин

Последняя версия NVIDIA Maxine открывает путь для аудио- и видеосвязи в реальном времени. Будь то видеоконференция, звонок в центр обслуживания клиентов или прямая трансляция, Maxine обеспечивает четкую связь для улучшения виртуального взаимодействия.

NVIDIA Maxine — это набор наборов средств разработки программного обеспечения (SDK) для искусственного интеллекта с графическим ускорением и облачных микросервисов для развертывания оптимизированных и ускоренных функций искусственного интеллекта, которые улучшают аудио, видео и эффекты дополненной реальности (AR) в реальном времени.

А благодаря современным моделям Maxine конечным пользователям не нужно дорогостоящее оборудование для улучшения звука и видео. Используя технологию NVIDIA AI, эти высококачественные эффекты могут быть достигнуты с помощью стандартных микрофонов и фотоаппаратуры.

На GTC компания NVIDIA объявила о реархитектуре Maxine для облачных микросервисов, выпустив ранний доступ к микросервису аудиоэффектов Maxine. Кроме того, были представлены новые функции Maxine SDK, включая фокусировку говорящего и оценку выражения лица, а также общедоступную функцию зрительного контакта. NVIDIA Maxine теперь также включает расширенные версии существующих функций SDK.

Облачные микросервисы Maxine позволяют разработчикам создавать приложения искусственного интеллекта в реальном времени. Микросервисами можно независимо управлять и легко развертывать в облаке, что ускоряет сроки разработки.

Микросервис Audio Effects, доступный в раннем доступе, содержит четыре современные звуковые функции:

Pexip, ведущий поставщик корпоративных решений для видеоконференций и совместной работы, использует технологии NVIDIA AI, чтобы вывести виртуальные встречи на новый уровень с расширенными функциями для современных сотрудников.

«С переходом Maxine на облачные микросервисы будет еще проще объединить передовые технологии искусственного интеллекта NVIDIA с нашей собственной уникальной серверной архитектурой», — сказал Эдди Клифтон, старший вице-президент по стратегическим альянсам в Pexip. «Это позволяет нашим командам Pexip предоставлять улучшенные возможности для виртуальных встреч».

Зарегистрируйтесь для раннего доступа.

Maxine предлагает три SDK с графическим ускорением, которые заново изобретают связь в реальном времени с искусственным интеллектом: аудио, видео и эффекты AR.

SDK звуковых эффектов обеспечивает мультиэффектные алгоритмы улучшения качества звука на основе искусственного интеллекта с малой задержкой. «Фокус динамика», доступный в раннем доступе, — это новая функция, которая разделяет звуковые дорожки динамиков на переднем и заднем плане, делая каждый голос более разборчивым. Кроме того, функция Audio Super Resolution SDK была обновлена ​​и теперь имеет повышенное качество.

SDK видеоэффектов создает видеоэффекты на основе искусственного интеллекта со стандартным входом веб-камеры. Функция «Виртуальный фон», которая сегментирует профиль человека и применяет удаление, замену или размытие фона с помощью искусственного интеллекта, была обновлена ​​и теперь обеспечивает повышенную временную стабильность.

А AR SDK обеспечивает 3D-отслеживание лица на базе искусственного интеллекта в реальном времени и оценку позы тела на основе стандартной записи с веб-камеры. Последние функции включают в себя:

Были обновлены следующие функции AR:

Попробуйте Maxine SDK. Чтобы напрямую ощутить эффекты Максин, загрузите приложение NVIDIA Broadcast.

Maxine SDK и микросервисы предоставляют набор эффектов искусственного интеллекта с малой задержкой, которые можно интегрировать в существующие инфраструктуры клиентов. Разработчики могут воспользоваться передовыми возможностями искусственного интеллекта с помощью Maxine, поскольку эта технология построена на платформе NVIDIA AI и имеет предварительно обученные модели мирового класса, позволяющие пользователям создавать, настраивать и развертывать функции аудио- и видеопремиального качества.

Maxine также является частью NVIDIA Omniverse Avatar Cloud Engine, коллекции облачных моделей искусственного интеллекта и сервисов, позволяющих разработчикам создавать, настраивать и развертывать интерактивные аватары. Настраиваемые облачные микросервисы Maxine позволяют независимо развертывать их в конвейерах эффектов искусственного интеллекта. Maxine можно развернуть локально, в облаке или на периферии.

Узнайте больше о NVIDIA Maxine и других технологических прорывах, посмотрев программный доклад GTC основателя и генерального директора NVIDIA Дженсена Хуанга: