Geliştirilmiş Oyun Karakteri Rol Yapma Oyunu için İlk Cihaz Üzerindeki Küçük Dil Modelini Dağıtın

4


Gamescom 2024’te NVIDIA, oyun karakterlerinin konuşma yeteneklerini geliştirmek için ilk cihaz içi küçük dil modelimizi (SLM) duyurdu. Ayrıca NVIDIA ACE ve dijital insan teknolojilerini sergileyen ilk oyunun Amazing Seasun Games’ olduğunu duyurduk. Mecha BREAKKarakterlerini canlandırarak daha dinamik ve sürükleyici bir oyun deneyimi sunuyor NVIDIA GeForce RTX AI Bilgisayarları.

NVIDIA ACE, rol yapma oyunları için özel olarak tasarlanmış bir SLM sunuyor

NVIDIA ACE, üretken yapay zeka tarafından desteklenen konuşma, zeka ve animasyon sağlayan bir dizi dijital insan teknolojisidir. Artık ilk NVIDIA SLM olan Nemotron-4 4B Instruct’ı içerir. Bu yeni model, oyun geliştiricileri tarafından bulut ve cihazda dağıtım için bir NVIDIA NIM olarak mevcuttur. NVIDIA NIM, herhangi bir bulut veya veri merkezinde temel modellerin dağıtımını hızlandıran kullanımı kolay bir dizi mikro hizmettir.

İş akışı, NVIDIA ACE NIM mikro hizmetleri Riva ASR, Nemotron-4 4B Instruct, Riva TTS ve Audio2Face-3D'nin kullanımını gösterir. Çıktı, optimize edilmiş NPC'yi üretmek için Unreal Engine 5, Omniverse RTS ve özel bir işleyici kullanır.
Şekil 1. Artırılmış Rol Yapma Yeteneklerine Sahip Oyun Karakterleri için NVIDIA ACE İş Akışı.

Nemotron-4 4B Instruct, hız ve cihaz içi çıkarım için damıtma, budama ve INT4 kantizasyonu yoluyla optimize edilmiştir. VRAM kullanımı yaklaşık 2 GB’a düşürülmüştür ve büyük dil modellerine (LLM’ler) kıyasla önemli ölçüde daha hızlı bir ilk belirteç süresi sağlar.

  • Damıtma daha küçük bir modelin (öğrenci olarak adlandırılır) daha büyük bir modelin (öğretmen olarak adlandırılır) çıktılarını taklit etmesi için eğitilmesi sürecidir.
  • Budama Öğrenci modelinin kritik olmayan çıktılarının kaldırılması sürecidir.
  • niceleme Bir modelin ağırlıklarının ve aktivasyonlarının hassasiyetini azaltma sürecidir.

Nemotron-4 4B Instruct, Nemotron-4 15B LLM’den damıtıldı ve talimat ayarlaması ile özel olarak oluşturuldu, bu, belirli görevleri daha iyi gerçekleştirmek için talimat istemlerinde modelleri ince ayarlama tekniğidir. Bu model daha iyi rol yapma, geri alma artırılmış nesil (RAG) ve fonksiyon çağırma yetenekleri, oyun karakterlerinin oyuncu talimatlarını daha sezgisel bir şekilde anlamasını, oyunculara yanıt vermesini ve daha doğru ve alakalı eylemler gerçekleştirmesini sağlar.

Nemotron-4 4B Instruct NIM’i bulut aracılığıyla dijital insan teknolojisi hattınızda kullanabilir veya cihaz içi çıkarım için 100 milyondan fazla NVIDIA GeForce RTX destekli PC ve dizüstü bilgisayardan faydalanabilirsiniz.

Nemotron-4 4B Instruct NIM’i kullanmanızı kolaylaştırmak için Unreal Engine 5 ACE örnek uygulaması cihaz içi eklenti desteği ile güncellendi.

NVIDIA ACE NIM ile ilk oyun prömiyeri

Video 1. NVIDIA ACE cihaz üstü modelleri, mekaniğin bir oyuncunun talimatlarına yanıt vermesini sağlar

Mecha BREAKKingsoft Corporation’ın oyun iştiraki Amazing Seasun Games tarafından geliştirilen ACE destekli etkileşimlerin bir oyunda ilk kez sergilendiği cihazda NVIDIA Nemotron-4 4B Instruct NIM çalışıyor.

NVIDIA Audio2Face-3D NIM ve OpenAI’nin otomatik konuşma tanıma modeli olan Whisper, cihaz üzerinde çalışan yüz animasyonu ve konuşma tanıma özelliği sağlıyor. Onbir laboratuvar Karakterin sesini bulut aracılığıyla sağlar.

Bu tanıtım demosunda, NVIDIA ACE ve dijital insan teknolojileri, oyuncuların çeşitli mekalar arasından seçim yapmalarına, oyun tarzlarını veya takım ihtiyaçlarını tamamlamalarına, görünüm özelleştirmelerine yardımcı olmalarına ve devasa savaş makinelerini savaşa en iyi şekilde nasıl hazırlayacaklarına dair tavsiyeler vermelerine yardımcı olabilecek bir mekanikle etkileşim kurmalarını sağlıyor.

Oyun geliştiricileri en son dijital insan teknolojilerini keşfediyor

NVIDIA ACE ve dijital insan teknolojileri oyun sektöründeki varlığını genişletmeye devam ediyor.

Video 2. NVIDIA ACE ve ChatGPT-4o yeni bir düzeyde sürükleyicilik ve erişilebilirlik sağlıyor

Küresel oyun yayıncısı ve geliştiricisi Perfect World Games, NVIDIA ACE ve dijital insan teknolojisi demosu Legends’ı yeni yapay zeka destekli görüş yetenekleriyle ilerletiyor. Demoda, Yun Ni karakteri oyuncuları görebiliyor ve ChatGPT-4o tarafından desteklenen bilgisayarın kamerasını kullanarak gerçek dünyadaki insanları ve nesneleri tanımlayabiliyor ve oyun deneyimine artırılmış gerçeklik katmanı ekliyor.

Bu yetenekler, PC oyunları için yeni bir düzeyde daldırma ve erişilebilirlik sunar. Daha fazla bilgi için NVIDIA ACE’ye bakın ve üretken AI tarafından desteklenen oyun karakterleri oluşturmaya başlamak için NIM’i indirin.

Kaynak: Nvidia

Doğrudan cihazınızda gerçek zamanlı güncellemeleri alın, şimdi abone olun.

Yorumlar