NVIDIA、初のデジタル ヒューマン テクノロジ オンデバイス小規模言語モデルを発表、ゲーム キャラクターの対話を改善

投稿者: Jason Paul

Gamescom にて新しい Nemotron-4 4B NIM が初のゲームとして Amazing Seasun Games の『Mecha BREAK』で披露

NVIDIA 初のデジタル ヒューマン テクノロジの小規模言語モデルは、Amazing Seasun Games が開発した新しいマルチプレイヤー メカ ゲームである『Mecha BREAK』で実演され、GeForce RTX AI PC 上でキャラクターに命を吹き込み、よりダイナミックで没入感のあるゲームプレイ体験をもたらします。

Nemotron-4 4B Instruct と呼ばれる新しいオンデバイス モデルは、ゲーム キャラクターの対話能力を向上させ、より直感的にプレイヤーを理解し、自然な応答ができるようになります。

NVIDIA は、ACE テクノロジを GeForce RTX AI PC やノート PC で直接実行できるように最適化しました。これにより、『Mecha BREAK』のような次世代ゲームに最先端のデジタル ヒューマン テクノロジを展開する開発者の能力が大幅に向上します。

ロールプレイングのために作られた小規模言語モデル

NVIDIA Nemotron-4 4B Instruct は、より優れたロールプレイ、Retrieval-Augmented Generation、および関数呼び出し機能を提供し、ゲーム キャラクターがプレイヤーの指示をより直感的に理解し、ゲーマーに反応し、より正確で適切なアクションを実行できるようにします。

このモデルは NVIDIA NIM マイクロサービスとして利用可能であり、生成 AI 搭載アプリケーションの開発と展開のための合理化されたパスを提供します。NIM は低メモリ使用量に最適化されており、より高速な応答時間を提供し、開発者に 1 億台以上の GeForce RTX 搭載 PC とノート PC を活用する方法を提供します。

Nemotron-4 4B Instruct は、生成 AI によってスピーチ、インテリジェンス、アニメーションを提供するデジタル ヒューマン テクノロジのスイートである NVIDIA ACE の一部です。これは、ゲーム開発者がクラウドやオンデバイスで展開するための NIM として利用可能です。

初めてゲームで ACE NIM マイクロサービスを披露

Kingsoft Corporation のゲーム子会社である Amazing Seasun Games が開発した『Mecha BREAK』は、ACE を搭載したゲーム インタラクションの初となる展示として、デバイス上で動作する NVIDIA Nemotron-4 4B Instruct NIM を紹介しています。NVIDIA Audio2Face-3D NIM と OpenAI の自動音声認識モデルである Whisper が、デバイス上で動作するフェイシャル アニメーションと音声認識を提供します。ElevenLabs は、クラウドを通じてキャラクターの音声を提供します。

世界最大級のゲーム展示会である Gamescom で初公開されたこのデモでは、NVIDIA ACE とデジタル ヒューマン テクノロジにより、プレイヤーはメカニックのノン プレイアブル キャラクター (NPC) と対話することができます。NPC は、プレイスタイルやチームのニーズに合わせて、多様な機械化されたロボット (メック) を選ぶ支援や、外観のカスタマイズの支援、巨大な戦闘マシンを戦いに備えて最適な準備をする方法についてのアドバイスの提供をします。

Amazing Seasun Games の CEO である Kris Kwok 氏は次のように述べています。「Audio2Face と Nemotron-4 4B Instruct を使用して、ゲーム内の没入感を飛躍的に高める ACE NIM マイクロサービスのパワーと可能性を『Mecha BREAK』披露できることを嬉しく思います」

Perfect World Games 、最新のデジタル ヒューマン テクノロジを探求

NVIDIA ACE とデジタル ヒューマン テクノロジは、ゲーム業界においてその足跡を拡大し続けています。

世界的なゲーム パブリッシャーであり開発者である Perfect World Games は、NVIDIA ACE とデジタル ヒューマン テクノロジのデモである「Legends」を進化させるために、新しい AI 搭載ビジョン機能を追加しました。このデモでは、ChatGPT-4o を搭載したコンピューターのカメラを使って、Yun Ni というキャラクターがゲーマーを見たり、現実世界の人や物を識別したりすることができ、ゲームプレイ体験に拡張現実のレイヤーを追加しています。これらの機能により、PC ゲームに新たなレベルの没入感とアクセシビリティがもたらされます。

NVIDIA ACE の詳細を知り、NIM をダウンロードして、生成 AI を搭載したゲームキャラクターの構築を始めましょう。