MMAudio - AI视频配音，输入视频或文本可自动给视频配音效 本地一键整合包下载

无言***

MMAudio - AI视频配音，输入视频或文本可自动给视频配音效 本地一键整合包下载 ... ... ... ... ... ... ...

MMAudio 是由伊利诺伊大学厄巴纳 - 香槟分校、Sony AI 及 Sony 集团公司的研究团队推出了一项新技术，该技术旨在通过多模态联合训练，实现高质量的视频到音频合成。MMAudio 的核心创新在于能够利用视频和文本输入生成同步的音频，从而拓展了音频生成的应用场景，支持输入视频或文本，生成符合视频内容的音效。

MMAudio 在生成音频时仍存在一些局限性，比如偶尔会产生不清晰的语音或背景音乐，同时对某些陌生概念的处理也不够理想。研究团队认为，增加高质量的训练数据能够帮助解决这些问题。随着研究的不断推进，MMAudio 有望在未来进一步优化其性能。


MMAudio 类似之前分享的 FoleyCrafter区别是，MMAudio 不仅可以为AI生成视频配上完美的音效，还能根据提示词生成你想要的音效。它能智能识别视频场景，自动给视频配上匹配的音效，还能根据你的提示词，自定义生成与之匹配的音效。短视频及自媒体领域必不可少的辅助工具。


使用教程：（建议N卡，显存8G起）
上传一段需要配音的视频，可以直接提交，MMAudio 会自动根据视频内容配音。也可以输入提示词，告诉MMAudio 你需要配置的音效。
还支持文本生成音频音效，输入提示词生成你想要的音效。


下载地址：
迅雷云盘：https://pan.xunlei.com/s/VOE7hJ3-G4caZu00v_1stzsBA1?pwd=cwjw
夸克网盘：

游客，上上宾会员可免费下载该资源，点此开通上上宾 免费下载全站99%的付费资源。或单独支付 10碎银 下载该资源立即购买

百度网盘：

游客，上上宾会员可免费下载该资源，点此开通上上宾 免费下载全站99%的付费资源。或单独支付 66碎银 下载该资源立即购买

ns***

这个AI不错。下载试试先，谢谢分享

ffg***

需要多少显存

无言***

ffgyooo 发表于 2024-12-15 15:01
需要多少显存

官方说6G可以实现推理，测试下来得8G

lg***

666666666666666