VidMuse - 一键生成视频背景音乐框架、AI视频配乐、视频配音 本地一键整合包下载
VidMuse 是一个基于视频生成音乐的框架，由香港科技大学和微软亚洲研究院共同提出，它利用长短期记忆模型（Long-Short-Term Modeling）来实现视频与音乐的同步生成。
VidMuse 的主要功能是生成与视频内容相匹配的音乐，通过分析视频中的视觉特征和情感内容，生成与之协调的音乐旋律和节奏。和之前发布的 MMAudio 类似，但区别是，MMAduio主要是生成视频场景对应的音效，而VidMuse 则是根据视频场景，生成与之匹配的背景音乐。
VidMuse 通过大规模数据集（包含190K个视频-音乐对）来训练模型，从而生成与视频内容高度匹配的音乐。这种方法不仅适用于电影预告片、广告和纪录片等多种视频类型，还通过其简单框架实现了高效的音乐生成。
VidMuse 应用场景：
VidMuse的应用场景非常广泛，可以用于电影、广告、纪录片等多种媒体内容的制作。
通过生成与视频内容相匹配的音乐，可以增强内容的情感表达和整体效果。例如，在电影预告片中，VidMuse可以帮助制作团队快速生成与画面相协调的背景音乐，提升预告片的吸引力和观看体验。
VidMuse 同样可以用于近些年视频生成的领域，默认的文生视频和图生视频都是没有音效的，VidMuse配合MMAduio可以为生成的短视频配上音效和背景音乐，大大提升短视频生成的工作效率。
使用教程：(建议N卡，显存8G起，基于CUDA12.1)
上传需要配乐的视频，提交即可。
默认会自动生成配乐后的视频和单独的配乐音频，方便二次编辑。
下载地址：
迅雷云盘：https://pan.xunlei.com/s/VOKi4MHeW6wXHNiyyfDo2tkcA1?pwd=pf6s
夸克网盘：**** 本内容需购买 ****
百度云盘：**** 本内容需购买 ****
解压密码：https://deepface.cc/ 复制这个完整的网址即是解压密码，不要有空格，复制粘贴即可。
页:
[1]