Nvidia は、自らを「メタバース」のハードウェア支配者とみなしており、漫画上の自分たちが働き、遊び、交流できる並行 3D 宇宙の運用についていくつかのヒントを披露しました。
半導体企業は、Omniverseに新たな機能を追加しました。Omniverseは、仮想コミュニティを別の3D宇宙に融合させる惑星コアとして機能する、基盤となるハードウェアとソフトウェアのエンジンです。Omniverseは、自動車、病院、ロボットなどにおける現実世界の体験を向上させるアバターの作成にも活用されています。
「私たちは人々に、彼らがやっていることを置き換えるよう言っているのではなく、彼らがやっていることを強化しているのです」とオムニバース・プラットフォームの副社長リチャード・ケリス氏は記者会見で語った。
Omniverseに関する発表は、今週開催された同社のGPUテクノロジーカンファレンスで行われました。NVIDIAのCEO、ジェンスン・フアン氏は火曜日に、これらの発表の多くについて講演する予定です。
これまでに見たことのないジェンセン。出典：Nvidia。クリックして拡大
そうした発表の 1 つが Omniverse Avatar です。これは、食事をする人が食べ物を注文するのを手伝ったり、運転手が自分で駐車したり、道路をより適切にナビゲートするのを手伝ったりするなど、インタラクティブでインテリジェントな AI アバターを生成できます。
Nvidiaは、レストランのウェイターに代わる会話型アバターの例を示した。料理を注文する際、画面上のアバターで表されるAIシステムが音声認識と自然知能技術を用いてリアルタイムで会話し、コンピュータービジョンを用いて人の気分を読み取り、知識ベースに基づいて料理を推奨する。
そのためには、アバターは音声認識、画像認識、コンテキスト認識など、複数のAIモデルを同時に実行する必要があり、これは困難な課題となる可能性があります。同社はAIをマイクロサービスとしてモデル化するUnified Compute Frameworkを開発し、アプリを単一システムまたはハイブリッドシステムで実行できるようにしました。
NVIDIAは既に、Microsoftと共同開発したモノリシックな変換言語であるMegatron-Turing自然言語生成モデルなどのAI基盤システムを有しています。このシステムは今後、DGX AIハードウェア上で提供される予定です。
Omniverse Avatarは、車載AIアシスタント「Drive Concierge」の基盤技術でもあると、組み込みおよびエッジコンピューティング担当副社長兼ゼネラルマネージャーのディープ・タラ氏は語る。「このアシスタントは、いつでも呼び出しに応じてくれる車内のパーソナルコンシェルジュです。」
インタラクティブなキャラクターで表現された車載AIシステムは、ドライバーや車内の乗員の習慣、音声、インタラクションを通して理解することができます。これにより、AIシステムは電話をかけたり、近くの飲食店を勧めたりすることが可能になります。
カメラやその他のセンサーを活用し、ドライバーの居眠りを検知したり、車内に忘れ物をした場合に警告したりすることも可能です。AIシステムのメッセージは、インタラクティブなキャラクターや画面上のインターフェースを通じて表示されます。
老犬、新しい芸
メタバースのコンセプトは新しいものではありません。リンデンラボの「セカンドライフ」や「ザ・シムズ」のようなゲームを通して存在してきました。NVIDIAは、独占的な壁を打ち破り、統一されたメタバースを構築することで、ユーザーが理論的には異なる企業が作成したユニバース間を行き来できるようにしたいと考えています。
ブリーフィング中、Nvidia は、Meta へのブランド変更の中心となるメタバースを中心とした未来のビジョンを Facebook が実現できるよう支援することについては言及しなかった。
しかし、NVIDIAは、ソフトウェアコネクタを通じて他社の3D作品をOmniverseプラットフォームに取り込むよう働きかけています。そのリストには、都市環境を3Dで作成できるEsriのArcGIS cityEngineや、アニメキャラクターのリアルな音声をシミュレートできるReplica StudioのAI音声エンジンなどが含まれています。
「これらすべてを可能にしているのが、USD（Universal Scene Description）の基盤です。USDは3DのHTMLであり、あらゆるソフトウェア製品が私たちが話している仮想世界を活用できるようにする重要な要素です」とケリス氏は述べた。USDはピクサーが3Dアセットを共同で共有するために開発された。
NVIDIAは、Omniverse Enterpriseも発表しました。これは、企業がOmniverseプラットフォームに接続できる3Dワークフローを構築するためのソフトウェアスタックを含むサブスクリプションサービスです。年間9,000ドルのこのサービスは、エンジニアリングやエンターテインメントなどの業界をターゲットとしており、Dell、Lenovo、PNY、Supermicroなどの販売代理店を通じて販売されます。
- AMDは、ハイエンドアクセラレータや3D L3キャッシュ搭載のEpycチップなどを予告して、Nvidiaの週を台無しにしようとしている
- チップメーカーはまだメタバースハードウェアに全力を注いでいない。我々はそれを知っているはずだ。彼らに尋ねてみた。
- 欧州委員会、エヌビディアとアームの合併計画に「徹底的な」独占禁止法調査を実施
- サンフランシスコから出荷されるトラックに積まれたGPUが盗難に遭う
同社はまた、Omniverseプラットフォームを利用して、「デジタルツイン」、つまり現実世界の物体の仮想シミュレーションを訓練するための合成データも生成しています。ISAAC SIMは、現実世界と仮想世界の情報に基づく合成データを用いてロボットを訓練することができます。SIMでは、新しい物体、カメラビュー、照明を導入することで、ロボットを訓練するためのカスタムデータセットを作成できます。
自動車分野ではDrive SIMがこれに相当します。これは、自動運転用のカメラをシミュレートすることで、リアルなシーンを再現できます。このSIMは、実世界のデータを取り入れて自動運転AIモデルの学習を行います。カメラレンズモデルはシミュレートされ、モーションブラー、ローリングシャッター、LEDフリッカーといった現実世界の現象を取り込み、自動運転のAIモデルを学習します。
NVIDIAは、Drive SIMデータを正確に再現するためにセンサーメーカーと緊密に連携しています。NVIDIAの自動車担当副社長であるダニー・シャピロ氏によると、カメラ、レーダー、ライダー、超音波センサーモデルはすべて、RTXグラフィックス技術を使用してパストレーシングされています。
同社は、Omniverse 全体の物語の中にいくつかのハードウェアの発表を織り交ぜました。
新しい世代に加わろう
次世代Jetson AGX Orin開発ボードは、来年第1四半期にメーカー向けに提供開始予定です。Arm Cortex-A78設計に基づく12個のCPUコアと32GBのLPDDR5 RAMを搭載し、200TOPS（テラオペレーション/秒）の性能を発揮します。
Drive Hyperion 8は、デュアルDrive Orin SoCを搭載し、最大500TOPSの性能を発揮する車載コンピューティングプラットフォームです。このプラットフォームは、12台のカメラ、9台のレーダー、1台のLIDAR、12台の超音波センサーを搭載しています。2024年以降に生産される車両に搭載される予定で、モジュール設計を採用しているため、自動車メーカーは必要な機能のみを利用できます。旧型のNVIDIAコンピューターを搭載した車両も、Drive Hyperion 8にアップグレード可能です。
NVIDIAはまた、570億個のトランジスタを搭載し、台湾セミコンダクター・マニュファクチャリング（TSMC）の7nmプロセスで製造されるQuantum-2 InfiniBandスイッチも発表しました。毎秒665億パケットの処理能力を持ち、400Gビット/秒のデータ転送速度に対応するポートを64個、または200Gビット/秒のデータ転送速度に対応するポートを128個備えているとのことです。
同社はまた、今年初めに発表したAIフレームワーク「Morpheus」についても言及した。これは、サイバーセキュリティベンダーがネットワークやデータセンターにおける異常な行動を特定し、企業に警告を発することを可能にするものだ。このフレームワークは、アプリケーション、ユーザー、またはネットワークトラフィックの微妙な変化を捉え、異常や疑わしい行動を特定する。
Morpheus は、Nvidia の BlueField SmartNIC/データ処理ユニットから必要なデータを取得します。これらのユニットは、CUDA が Nvidia の GPU に対して行っているのと同じように、Bluefield DPU に対して行っている DOCA SDK のアップグレードによって新たなパワーを備えています。
DOCAアップグレード（バージョン1.2）では、「リソースアクセスを制御し、各アプリケーションとユーザーを検証し、潜在的に侵害されたマシンを隔離する、従量制クラウドサービスを構築できます」。DOCA 1.2では、Bluefieldデバイスによるソフトウェア認証とハードウェア認証、ラインレートデータ暗号化の適用、SmartNIC上で動作する分散ファイアウォールのサポートも可能になります。NVIDIAはThe Registerに対し、Palo AltoではSmartNIC上でツールを分散モードで実行することで、ファイアウォールのパフォーマンスが5倍向上したと述べています。
AIに関して言えば、GPU大手のNVIDIAはLaunchpadプログラムも拡大し、米国、欧州、日本、シンガポールのEquinixデータセンターを通じてAIハードウェアとソフトウェアへの短期アクセスを提供する予定です。シンガポールはLaunchpadが米国以外で初めて展開する拠点であり、AIへの入り口としての機能がより広く普及することを期待しています。
もう一つの新製品は、会話型AIツール「RIVA」の最新版です。わずか30分のサンプル音声から、わずか1日で人間のようなカスタム音声を作成できると言われています。NVIDIAは、カスタム音声インターフェースを提供したい組織にとって、まさに理想的なソリューションだと考えています。®
