Nvidia Background TOPは、AIによる画像分割を行い、与えられた画像の背景から人物を分離します。RGBキーTOPやクロマキーTOPとは異なり、背景TOPはAIを使用して画像の前景部分と背景部分を識別するため、背景色のベタ塗りは不要です。本ノードの出力は、白画素が前景の人物、黒画素が背景を表すモノクロのキー画像です。一般に、このキー画像は、Matte TOPや他の合成ノードを使って、元画像の背景を置き換えるために使われます。
注意:このTOPは、Nvidia Maxine Video EffectsエンジンのAI Green Screeningモジュールを使用しており、動作にはWindowsオペレーティングシステムとNvidia RTXカードが必要です。
AIモデルの実行に時間がかかるため、ビデオ入力を処理する場合、Background TOPの出力はオリジナル画像より複数フレーム遅れて表示されます。正確な合成のためには、出力されたキー画像を、それを生成するために使用された元のフレームと一致させたいと思うことでしょう。これを行う簡単な方法は、出力インデックスを負の数のフレームに設定したキャッシュトップを使用することです。ソースビデオとコンポジター入力の間に置かれると、これはキー画像と同期するようにソース画像を遅らせます。
ヒント:AIモデルは、ウェブカメラの前に座っている一人の人物を想定して調整されています。全身画像、複数の人物、間接的なカメラアングルを含む動画は、うまく実行できない場合があります。
ヒント: Modeパラメータを使用してパフォーマンスを選択するだけでなく、入力画像の解像度を下げることでGPU負荷を軽減することができます。また、Blur TOP と Level TOP は、合成前に出力キー画像を洗練させるのに有効な場合があります。
画像の分離を行うために使用されるAIモデルファイルの場所です。デフォルトでは、これらのファイルはTouchDesignerのインストールフォルダ内のConfig/Modelsフォルダに含まれています。このパラメータを使用して、互換性のあるモデルファイルのある別のフォルダを指定することができます。
AIモデルを実行するGPUデバイスを選択します。GPUはNvidia RTX対応カードである必要があります。
- Default / default
ドライバは、AIモデルを実行するために、システム内の最適なGPUを自動的に選択します。
AIモデルをどのようなモードで動作させるかを選択します。
- Quality / quality
高品質画像セグメンテーションモデルを実行します。このモデルは実行速度が遅くなりますが、より質の高いキー画像を生成することができます。
- Performance / performance
高性能AIモデルを実行します。このモデルは、より速く実行されますが、低品質のキー画像を生成する可能性があります。
- Input 0 –
Nvidia Background TOPのExtra Informationは、Info CHOPでアクセスできます。
Info Chop チャンネルの章を参照
Info Chop チャンネルの章を参照