首尾帧过渡视频整合包Framer
配置要求：6G以上显卡可用
GitHub开源地址：https://github.com/aim-uofa/Framer
我们提出了Framer，一种更可控和交互式的帧插值方法，允许用户通过自定义选定关键点的轨迹，增强控制和处理具有挑战性的情况下，在两个图像之间产生平滑过渡的帧。
主权利要求
所提出的方法，成帧器，提供交互式帧插值，允许用户定制过渡定制的轨迹选定的关键点。这种方法减轻了图像变换的模糊性，使得能够对局部运动进行更精细的控制，并提高了模型处理具有挑战性的情况（例如，具有不同形状和风格的对象）。Framer还包括一个“自动驾驶”模式，可以自动估计关键点并优化轨迹，简化过程并实现运动自然和时间连贯的结果。
方法
这项工作利用大规模的预训练图像到视频扩散模型（稳定视频扩散）作为基础模型。它引入了额外的结束帧调节，以促进视频插值，并结合了一个点轨迹控制分支的用户交互。
关键成果
Framer在视觉质量和自然运动方面优于现有的帧插值方法，特别是在涉及复杂运动和显著外观变化的情况下。使用FVD（Fréchet视频距离）的定量评估与其他方法相比表现出上级的性能。用户研究显示出对Framer输出的强烈偏好，突出了其在产生逼真和视觉吸引力结果方面的有效性。
资源失效请添加番茄资源网v：jay2005007或者(番茄资源网永久地址发布页www.fanq.site，收藏我回家不迷路
资源获取:
通过网盘分享的文件获取【更多资源www.fanq.site】
