无言以对 发表于 2024-7-23 13:09:23

FoleyCrafter - AI视频自动配音黑科技,让无声视频瞬间拥有逼真配音 本地一键整合包下载


FoleyCrafter 是一个开源基于文本的视频到音频生成框架,可以自动为无声视频生成清晰、逼真的声音效果,而且声音与视频内容完全匹配。它能够理解视频的语义内容,自动匹配适合的声音,比如视频里有狗,FoleyCrafter就会生成狗叫声,而且确保声音和视频是同步的。FoleyCrafter确保声音与视频的同步性门被关上的瞬间,那“砰”的一声也在同一时刻响起。这种精确的同步,让视听体验更加沉浸和真实。
使用FoleyCrafter非常简单。你只需要提供一段视频和一些简单的文字描述,它就能自动生成你需要的声音效果。甚至,你可以通过文字描述来指定想要的声音,比如输入“海浪声”,它就能为你生成海浪拍打岸边的声音。

FoleyCrafter不挑视频类型。无论是电影、动画还是游戏视频,它都能游刃有余,为不同类型的视频内容提供定制化的声音效果。
核心功能:高质量音频生成:基于预训练的文本到音频模型,FoleyCrafter能够生成高质量的音频,让无声视频焕发新生。语义对齐:通过语义适配器,FoleyCrafter确保生成的声音与视频内容在语义上高度相关。时间同步:时间控制器负责精确的音视频同步,让每一个声音都出现在它应该出现的时刻。文本提示控制:FoleyCrafter支持使用文本描述来控制音频生成,实现用户意图的可控和多样化的视频到音频生成。
案例演示 (登陆可播放)



使用教程1、下载一键包,解压并双击运行一键启动;
2、上传需要配音的视频,可以根据需要输入提示词和反向提示词,比如“laughter(笑声)”,如下图





3、可以根据需要调整高级参数,参数用途右侧有解释说明





4、所有参数设置完成后,点击下方的“生成”按钮,等待自动完成即可。


温馨提示:运行此软件需要N卡,显存12G起。请自行对比硬件是否符合要求。

下载地址:**** 本内容需购买 ****

lyf1991 发表于 2024-7-27 22:23:06

大哥,训练模型出现Error: 2 root error(s) found这个要怎么解决

无言以对 发表于 2024-7-27 22:48:16

lyf1991 发表于 2024-7-27 22:23
大哥,训练模型出现Error: 2 root error(s) found这个要怎么解决

训练什么模型?

lyf1991 发表于 2024-7-27 23:04:01

训练的大幂幂的模型,你这里买的

无言以对 发表于 2024-7-27 23:14:24

lyf1991 发表于 2024-7-27 23:04
训练的大幂幂的模型,你这里买的
请到对应的帖子下回复,别乱回复好吗?
还有,大幂幂那个是万能模型,万能模型是直接合成用的,不是让你训练的。
之前回复过你,基础的操作要会,你什么都不会,就跳着乱搞,能不出问题吗?

lyf1991 发表于 2024-7-27 23:22:09

无言以对 发表于 2024-7-27 23:14
请到对应的帖子下回复,别乱回复好吗?
还有,大幂幂那个是万能模型,万能模型是直接合成用的,不是让你训 ...

换出来的视频大致还是像的,就是其中一部份有闪烁

无言以对 发表于 2024-7-27 23:24:39

lyf1991 发表于 2024-7-27 23:22
换出来的视频大致还是像的,就是其中一部份有闪烁

老老实实从软件操作开始学习。
软件操作、素材筛选、遮罩、合成
否则你这么乱搞也只是浪费时间
模型是给老司机用的,不是任何新手都适合上来就用模型。有个过程,明白吗?

lyf1991 发表于 2024-7-27 23:26:02

无言以对 发表于 2024-7-27 23:24
老老实实从软件操作开始学习。
软件操作、素材筛选、遮罩、合成
否则你这么乱搞也只是浪费时间


明白了,我现在应该是遮罩的问题

无言以对 发表于 2024-7-27 23:27:01

lyf1991 发表于 2024-7-27 23:26
明白了,我现在应该是遮罩的问题

素材的问题。。。
素材没筛选,上次都跟你说了。
我这里有适合新手操作的整套教程,你要有兴趣,有时间,可以加我Q,有偿。
很多问题不是三言两语能说清的,都是前后关联的。
页: [1]
查看完整版本: FoleyCrafter - AI视频自动配音黑科技,让无声视频瞬间拥有逼真配音 本地一键整合包下载