MMAudio - AI视频配音，输入视频或文本可自动给视频配音效 本地一键整合包下载
MMAudio 是由伊利诺伊大学厄巴纳 - 香槟分校、Sony AI 及 Sony 集团公司的研究团队推出了一项新技术，该技术旨在通过多模态联合训练，实现高质量的视频到音频合成。MMAudio 的核心创新在于能够利用视频和文本输入生成同步的音频，从而拓展了音频生成的应用场景，支持输入视频或文本，生成符合视频内容的音效。
MMAudio 在生成音频时仍存在一些局限性，比如偶尔会产生不清晰的语音或背景音乐，同时对某些陌生概念的处理也不够理想。研究团队认为，增加高质量的训练数据能够帮助解决这些问题。随着研究的不断推进，MMAudio 有望在未来进一步优化其性能。
MMAudio 类似之前分享的 FoleyCrafter区别是，MMAudio 不仅可以为AI生成视频配上完美的音效，还能根据提示词生成你想要的音效。它能智能识别视频场景，自动给视频配上匹配的音效，还能根据你的提示词，自定义生成与之匹配的音效。短视频及自媒体领域必不可少的辅助工具。
使用教程：（建议N卡，显存8G起）
上传一段需要配音的视频，可以直接提交，MMAudio 会自动根据视频内容配音。也可以输入提示词，告诉MMAudio 你需要配置的音效。
还支持文本生成音频音效，输入提示词生成你想要的音效。
下载地址：
迅雷云盘：https://pan.xunlei.com/s/VOE7hJ3-G4caZu00v_1stzsBA1?pwd=cwjw
夸克网盘：
**** 本内容需购买 ****
百度网盘：
**** 本内容需购买 ****
这个AI不错。下载试试先，谢谢分享 需要多少显存 ffgyooo 发表于 2024-12-15 15:01
需要多少显存
官方说6G可以实现推理，测试下来得8G 666666666666666
页:
[1]