FasterLivePortrait
肖像をリアルタイムで動画化!onnx/TensorRTに対応
プレミアム新製品ビデオリアルタイム肖像アニメーション深層学習
FasterLivePortraitは、深層学習に基づいたリアルタイム肖像動画化プロジェクトです。TensorRTを使用することで、RTX 3090 GPU上で30FPS以上のリアルタイム処理を実現しています(前処理、後処理を含む)。これは、単なるモデル推論速度だけでなく、全体的な処理速度を示しています。本プロジェクトでは、LivePortraitモデルをONNXモデルに変換し、RTX 3090上でonnxruntime-gpuを用いて約70ms/フレームの推論速度を実現しており、クロスプラットフォーム展開をサポートしています。さらに、ネイティブのgradioアプリに対応し、速度が数倍向上し、複数の人物の同時推論も可能です。コード構造は再構築されており、PyTorchへの依存関係は解消され、すべてのモデルはonnxまたはTensorRTを用いて推論を行います。
FasterLivePortrait 最新のトラフィック状況
月間総訪問数
474564576
直帰率
36.20%
平均ページ/訪問
6.1
平均訪問時間
00:06:34