2023年6月18日から22日までバンクーバーで開催されているCVPRカンファレンスで読み込んだ二次元の動画で人物アバターと背景を別々に作成して再度モデル化して合成する論文Vid2Avatarが公開されました。
従来の方法だと人物と背景にマスクを使用していた為、ズレが生じる事がありましたが、難しい特徴のある服や複雑な環境でも人物と背景を別々の作ったものを使用するので綺麗に表示する事が可能です。この技術を使う事で動画から作成した3Dアバターを使用して別のアニメーション付けをさせてゲームや映画に応用する事も可能になります。
Some of you may have seen this already 😀 I’m still very excited about Vid2Avatar which we will present at #CVPR2023 this week. We propose a method to reconstruct detailed 3D avatars from monocular in the wild videos via self-supervised scene decomposition.
🧵👇
— Otmar Hilliges (@OHilliges) June 19, 2023
