ゼロショットアバターモデリング – 1つの画像からアバターを作成する

ゼロショットアバターモデリングはどのように機能しますか？

注目すべき方法：

• AvatarCLIP: 自然言語プロンプトを使用して3Dアバターを生成およびアニメーション化します。形状VAEとCLIPベースの監視を組み合わせて、テキストからすべてのジオメトリ、テクスチャ、動きを彫刻します。特定のデータは必要ありません。

• AvatarFusion: ラテントディフュージョンを使用して、体と服を別々にモデル化するゼロショットテキストからアバターへのフレームワークです。ピクセルセマンティックサンプリングを使用して、交換可能なアウトフィットレイヤーを備えたリアルなアバターを生成します。

• ZeroAvatar: パラメトリックボディプライヤーとスコア蒸留を組み合わせることで、一つの画像を一貫した3Dアバターに変換します。ジオメトリとUVテクスチャの忠実度を維持します。画像から3Dアバターへのパイプラインに最適です。

• GAIA: 静的なポートレートを自然なリップシンクと頭の動きでアニメーション化するトーキングアバターシステムです。新しいアイデンティティに対してさえゼロショットで機能します。動きから外観を切り離して一般化をうまく行います。