腾讯发布了 ToonCrafter，是一种新型的卡通动画生成技术，可以通过生成插值方法生成自然、连贯的卡通动画中间帧。该技术超越了传统基于对应关系的卡通视频插值方法，能够处理复杂的非线性运动和遮挡问题，使动画过渡更加平滑自然。
从演示来看效果很好，过渡很顺滑，而且没有明显问题。ToonCrafter 利用预训练的图像到视频模型，可以插值两幅卡通图像，并根据参考图像对动画草图自动上色。它支持生成最多16帧的视频，每帧分辨率为512x320。通过减少DDIM步骤，可以降低推理时间。
还设计了一个灵活的草图编码器，使用户能够对插值结果进行互动控制。
项目地址：ToonCrafter
