腾讯和上交大出的,具有置信度感知姿势指导的高质量人体运动视频生成,MimicMotion可以生成任意长度、具有任何动作指导的高质量视频生成框架。MimicMotion官网入口网址
标签:ai工具箱 Ai开源项目 KEYWORDSSHOULDBEPLACEDHERE Mimi MimicMotion motionMimicMotion官网
腾讯和上交大出的,具有置信度感知姿势指导的高质量人体运动视频生成,MimicMotion可以生成任意长度、具有任何动作指导的高质量视频生成框架。
网站提供:Ai工具箱,Ai开源项目,MimicMotion,Motion,Mimi,KEYWORDSSHOULDBEPLACEDHERE。
MimicMotion简介
DESCRIPTION META TAG
腾讯和上交大出的,MimicMotion可以生成任意长度、具有任何动作指导的高质量视频生成框架,可以生成细节丰富、逼真的人类动作视频,可以生成任意长度的视频内容,可以对视频内容进行精确控制,包括动作、姿势和视频风格等。
近年来,生成式人工智能在图像生成领域取得了重大进展,催生了多种应用。然而,视频生成在可控性、视频长度、细节丰富度等各方面仍面临相当大的挑战,阻碍了该技术的应用和普及。在这项工作中,我们提出了一种可控视频生成框架,称为 MimicMotion,它可以在任何运动指导下生成任意长度的高质量视频。与以前的方法相比,我们的方法有几个亮点。
首先,通过置信感知姿势指导,可以实现时间平滑性,从而可以通过大规模训练数据增强模型的鲁棒性。
其次,基于姿态置信度的区域损失放大显着减轻了图像的失真。
最后,为了生成流畅的长视频,提出了一种渐进式潜在融合策略。通过这种方式,可以以可接受的资源消耗生成任意长度的视频。
通过大量的实验和用户研究,MimicMotion 在多个方面比以前的方法有了显着的改进。
MimicMotion代码:https://github.com/Tencent/MimicMotion
MimicMotion官网入口网址
https://tencent.github.io/MimicMotion/
86aigc小编发现MimicMotion网站非常受用户欢迎,请访问MimicMotion网址入口试用。