标签:腾讯混元团队

库里杜兰特“合舞”科目三,腾讯混元团队全新图生视频模型来了

腾讯混元团队携手中山大学和香港科技大学推出创新视频生成模型——Follow-Your-Pose-v2,使得多人视频动作生成成为可能。此模型不仅在推理速度上有所提升,还能处理复杂的多人场景,如多人跳舞。它具有优秀的泛化能力,能应对不同年龄、服装、人种和背景的挑战。此外,Follow-Your-Pose-v2可以利用日常照片和视频进行训练,无需高质量素材,甚至能解决人物遮挡的问题,确保多人动作的连贯性。 为了验证模型效果,团队创建了一个包含约4000帧的Multi-Character基准,并在TikTok和TED演讲数据集上进行测试,结果表明模型性能超...