Vimi 是商汤科技推出的全球首个可控人物视频生成大模型。它可以通过动作视频、动画、声音和文字等多种驱动元素来生成与目标动作一致的人物类视频。与常规图片表情控制技术不同,Vimi不仅可以控制人物表情,还可以控制肢体动作,并生成合理的头发、服饰、背景,甚至支持光影变化。这使得它成为了全球首个稳定的可控人物视频生成产品。
Vimi功能
- 可控人物:Vimi能够生成高一致性的人物表情和肢体动作视频,用户可以精确控制视频中人物的表情和动作
- 多种控制方式:支持通过人物视频、动画参数、语音和文字等多种输入方式驱动视频生成。
- 分钟级单镜头生成:Vimi可以稳定生成长达分钟级别的单镜头人物视频,允许制作更长时间和更连贯的视频内容。
- 生成合理的视频场景:不仅能生成人物,还能补全合理的头发、服饰和背景,并支持光影变化,使生成的视频场景更加真实和完整。
适用场景
影视制作:Vimi可以生成高质量的人物 视频,适用于电影和电视剧的特效制作。
动画制作:通过控制人物的表情和动作,Vimi可以帮助动画师快速生成逼真的动画片段。
游戏开发:Vimi可以用于生成游戏中的角色动画,提升游戏的视觉效果和互动性。
虚拟偶像:Vimi能够生成虚拟偶像的视频内容,适用于直播、演唱会等场景。
在线教育:在教育视频中,Vimi可以生成教师或虚拟角色的讲解视频,增强学习体验。
广告营销:Vimi可以用于制作广告视频,生成具有吸引力的人物形象和场景。
官网链接:https://vimi.sensetime.com/