在AI时代，动画不再是专业人士的专属领域。
现在，只需几个点击，您就能够将两个图片，变为动画片段！这就是今天要介绍的工具：ToonCrafter
它是由腾讯AI实验室、香港中文大学和香港城市大学的研究人员开源的卡通动画视频中间帧生成工具。
与传统的基于对应关系的插值方法不同，ToonCrafter采用了生成式插值框架，能够更好地处理卡通动画中常见的非线性大运动和遮挡问题。
传统方法通常假设运动是线性的，并且没有复杂现象如遮挡消失，这导致在卡通动画中的插值结果往往不够真实或甚至失败。仅需两张关键帧图片，即可自动生成中间动态帧！
ToonCrafter的创新点
ToonCrafter通过以下几个创新点克服了这些限制：
卡通矫正学习策略：它能够无缝地将真人动作视频的先验知识适配到卡通领域，解决了领域差异和内容泄露的问题。
双参考3D解码器：由于高度压缩的潜在先验空间可能导致细节丢失，这个解码器能够补偿这些丢失的细节，确保插值结果中细节的保留。
灵活的草图编码器：它允许用户通过交互式控制来影响插值结果。
实验结果表明，ToonCrafter不仅能够生成视觉上令人信服且动态更自然的插值结果，而且还能有效处理遮挡消失的问题。比较评估也显示了ToonCrafter相比现有方法的显著优势。
简而言之，ToonCrafter是一个创新的工具，它通过生成式技术改进了卡通视频的插值质量，使动画看起来更加流畅和自然。也会提高了动画制作的效率，减少了动画师的工作量，缩短了制作时间。
项目地址：
https://github.com/ToonCrafter/ToonCrafter