NVIDIA simplifica a implantação de Meta-Humanos baseados em IA com novos plug-ins ACE e microsserviços

NVIDIA simplifica a implantação de Meta-Humanos baseados em IA com novos plug-ins ACE e microsserviços

via TheoGames

O Unreal Fest Seattle 2024 começa hoje (1), e a NVIDIA anunciou o lançamento de novos plug-ins da sua inovadora tecnologia NVIDIA ACE na Unreal Engine 5, simplificando a criação e implantação de personagens Meta-Humanos com tecnologia baseada em IA em PCs Windows.

Principais destaques:
Novos plugins NVIDIA ACE na Unreal Engine 5:

  • Audio2Face-3D: habilita sincronização labial e animação facial com IA diretamente na Unreal Engine 5.
  • Nemotron-Mini 4B Instruct: fornece geração de resposta para diálogos interativos de personagens.
  • Retrieval Augmented Generation (RAG): fornece informações contextuais para aprimorar as interações dos personagens.

Audio2Face-3D para Autodesk Maya:

  • Facilita animações faciais de alta qualidade orientadas via áudio no Maya.
  • Inclui código-fonte para personalização e integração com outras ferramentas de criação de conteúdo digital.
  • Simplifica o fluxo de trabalho entre o Maya e a Unreal Engine 5.

Microserviço de renderização Unreal Engine 5 com streaming de pixel:

  • Aproveita a tecnologia Unreal Pixel Streaming da Epic.
  • Oferece suporte ao microsserviço NVIDIA ACE Animation Graph e ao sistema operacional Linux em acesso antecipado.
  • Permite que os desenvolvedores utilizem personagens Meta-Humanos de alta fidelidade para qualquer dispositivo via Web Real-Time Communication (WebRTC).

Benefícios para os desenvolvedores:

  • Simplifica a integração de humanos digitais com tecnologia de IA em jogos e aplicações.
  • Otimiza microsserviços para baixa latência e uso mínimo de memória em PCs Windows.
  • Aprimora a escalabilidade para implantação em nuvem de humanos digitais.
  • Fornece ferramentas personalizáveis ​​e código-fonte para desenvolvimentos personalizados.

Os desenvolvedores poderão solicitar acesso antecipado para baixar o Unreal Engine 5 renderer microservice com suporte para o Animation Graph e Linux OS. O plugin Maya ACE está disponível para download no GitHub.