MuseV 是基于扩散模型的虚拟人视频生成框架,具有以下特点:
1.支持使用新颖的视觉条件并行去噪方案进行无限长度生成,不会再有误差累计的问题,尤其适用于固定相机位的场景。
2.提供了基于人物类型数据集训练的虚拟人视频生成预训练模型。
3.支持图像到视频、文本到图像到视频、视频到视频的生成。
4.兼容 Stable Diffusion 文图生成生态系统,包括 base_model、lora、controlnet 等。
5.支持多参考图像技术,包括 IPAdapter、ReferenceOnly、ReferenceNet、IPAdapterFaceID。
重要更新
musev_referencenet_pose: unet, ip_adapter 的模型名字指定错误,请使用 musev_referencenet_pose而不是musev_referencenet,请使用最新的main分支。
下面是图片转视频的效果:
1:下载压缩包
首先,您需要从下载一键整合包:
下载链接:【网盘下载】密码: glut
2:启动程序
下载完成后,解压压缩包,点击”启动程序”
3:最后在浏览器上打开链接 :http://127.0.0.1:7680
就可以通过界面使用工具
系统硬件要求:
显卡:至少12GB显存的NVIDIA显卡
操作系统:Windows 10/11 64位
THE END