AI视频换衣真的来了，腾讯联合北大推出Revideo

无言***

这个Revideo，初步看到项目的演示，跟近期的产品很相似，比如Wonder Studio和把视频中的人物换成机器人等等，但是这个Revideo更强调的是视频control，既能支持视频部分编辑，又能支持视频换衣，既然Sora迟迟不来，那么别怪国内猛追了哦，正式版如果开源，再加上算力的支持，能够做到1分钟长可控，那可玩性依旧很高，大大降低了视频剪辑水平吧。项目现在还未开源，估计也快了。

尽管在利用扩散模型生成和编辑视频方面取得了重大进展，但实现精确的本地化视频编辑仍是一项巨大挑战。此外，现有的大多数视频编辑方法主要集中在改变视觉内容上，对动作编辑的研究十分有限。

在这项研究中，来自北京大学和腾讯的研究团队及其合作者，提出了一种新颖的“重塑视频”（ReVideo）尝试，通过指定内容和动作，在特定区域进行精确的视频编辑。内容编辑通过修改第一帧来实现，而基于轨迹的动作控制则提供了直观的用户交互体验。ReVideo 解决了内容和动作控制之间的耦合和训练不平衡问题。为了解决这个问题，他们开发了一种三阶段训练策略，从粗到细逐步解耦这两个方面。此外，他们还提出了一个时空自适应融合模块，以整合不同采样步骤和空间位置的内容和动作控制。

广泛的实验证明，ReVideo 在几种精确的视频编辑应用中具有良好的性能，即：1）局部改变视频内容，同时保持动作不变；2）保持内容不变，同时定制新的动作轨迹；3）同时修改内容和动作轨迹。该方法还可以无缝地将这些应用扩展到多区域编辑，而无需特定的训练，这证明了它的灵活性和鲁棒性。

主要特点：

更改内容和自定义运动轨迹

更改内容并保持运动轨迹

保留内容并自定义运动轨迹

多区域编辑

项目地址：https://github.com/MC-E/ReVideo

song***

厉害了

broo***

这个挺好的

sha***

感谢分享！

jie***

感谢分享！

cx***

感谢分享！