NvidiaのRTXブロードキャストエンジンはGeForce AIコアを活用してゲームストリームを盛り上げます

RTX ブロードキャストエンジンのキービジュアル

画像: Nvidia

火曜日のTwitchConで、NVIDIAはRTX Broadcast Engineを発表しました。これは、AIを活用したリアルタイムのバーチャルグリーンスクリーン、拡張現実（AR）効果、そして開発者がストリーミングソフトウェアに追加できるスタイルフィルターを提供するSDKコレクションです。NVIDIAは、ゲームにおける最先端のリアルタイムレイトレーシングを加速するために、GeForce RTX 20シリーズグラフィックスカードに専用のRTコアとTensorコアを搭載してきましたが、今回、これらのTensorコアの機械学習能力を、動画クリエイターにとってより実用的な用途に活用するようになりました。

RTX Greenscreenは、Logitech C922やRazer Stargazerウェブカメラに搭載されているバーチャルグリーンスクリーン機能と同様のパフォーマンスを発揮しますが、より安定した結果が得られることを期待しています。ウェブカメラの映像から背景をインテリジェントに除去し、あなたの体と顔だけを映し出し、背後にあるゲーム映像を表示します。

Nvidiaが提供する画像は鮮明で綺麗ですが、前述のウェブカメラを見れば、その真価は実際に試してみないと分かりません。もしこの技術がうまく機能すれば、LogitechやRazerの特別な機能は不要になり、高価なグリーンスクリーンを購入する必要さえなくなるかもしれません。どうなるか楽しみです。OBSにも近日中に搭載される予定です。

Greenscreenと同様に、RTX ARはユーザーの顔を、個々の特徴の動きに至るまで正確に検出します。「開発者はこれを利用して、顔に3Dコンテンツを重ねたり、顔で3Dキャラクターを操作したりするなど、楽しく魅力的なARエフェクトを作成できます」とNvidiaは述べています。

RTXスタイルフィルターは、ウェブカメラのフィードの見た目を変換し、参照画像のスタイルを模倣することができます。上記のNVIDIAの例では、配信者自身を含むフィードに、ゴッホの象徴的な絵画「星月夜」のような雰囲気を与えています。同社のAnsel「スーパースクリーンショット」画像フィルターは、ゲームで同様の効果を実現できますが、AnselはTensorコアを必要とせず、その魔法を発揮します。

これらの新機能は、開発者が自社のストリーミングソフトウェアに追加する必要があるため、どの程度普及するかを見守る必要があります。世界で最も人気のあるTwitchストリーミングプログラムの一つであるOBSにRTXグリーンスクリーンが追加されたことは、素晴らしいスタートです。StreamLabsとXSplitの幹部は、NVIDIA RTX Broadcast Engineの機能を自社のソフトウェアに統合できることへの期待を表明するコメントを発表しました。

RTX GPUに組み込まれたTensorコアを活用してこのようなエフェクトを実現することは、特に優れたRTXエンコーダーと組み合わせることで、ストリーマーにとってGeForceをより魅力的なものにする非常にスマートな方法です。ここ1ヶ月で、Twitch Studio、Elgato、Discordといった企業が、Nvidia Fast Codec SDKのサポートを活用した機能を導入しました。

TwitchCon に参加している場合は、ブース 1823 で OBS で動作する RTX Greenscreen をご覧いただけます。PC ゲームに最適なグラフィックカードに関する弊社のガイドは、どの GeForce GPU が適しているかを判断するのに役立ちます。また、これがアップグレードのきっかけになった場合、Twitch ストリーミングの初心者向けガイドが、ストリーミングでスターダムにのし上がるための第一歩を踏み出すのに役立ちます。