视频生成视频的AI模型CoDeF，可在线使用，效果好，稳定不跳帧

蚂蚁集团、香港科技大学、浙江大学发布的视频生成视频的AI模型CoDeF，可在线使用，效果好，稳定不跳帧。

项目地址：

https://qiuyu96.github.io/CoDeF/

这篇内容介绍了一种新型的视频表示方法，称为内容变形场（CoDeF）。它由一个聚合整个视频中静态内容的规范内容场和一个记录从规范图像到每个单独帧的变形场组成。通过精心设计的渲染流程，这两个场可以联合优化以重建目标视频。CoDeF的设计使得它能够自然地支持将图像算法应用于视频处理，并通过时间变形场轻松传播结果到整个视频。实验证明，CoDeF能够将图像到图像的转换扩展到视频到视频的转换，并且能够在没有任何训练的情况下将关键点检测扩展到关键点跟踪。与现有的视频到视频转换方法相比，由于我们的扩展策略只在一个图像上部署算法，因此我们在处理后的视频中实现了更好的跨帧一致性，甚至能够跟踪水和烟雾等非刚性物体。