Fairy：Meta开发的用语言指令进行视频编辑的AI工具

Fairy是什么？

Fairy由Meta GenAI开发的用文本语言进行视频编辑的AI工具，你可以用简单的文字描述就对能视频进行风格转换（如将视频转换为梵高、漫画风格）、物体或角色变换（将视频中的物体或角色转换成其他形式）等编辑。

Fairy可以做什么？

• 物体或角色变换：Fairy可以将视频中的特定物体或角色转换成其他形式，例如将人物转换成木雕或金属骑士雕塑。这种编辑涉及到复杂的形状和纹理变化。
• 视频风格转换：Fairy能够将视频中的图像风格转换为不同的艺术风格，例如梵高或毕加索风格。这种转换不仅改变颜色和纹理，还保持视频的原始内容和结构。
• 长视频处理：由于Fairy的高效性和内存管理优势，它能够处理相对较长的视频，而不会遇到内存问题。
• 保留视频细节：在进行风格转换或物体变换时，Fairy能够保留视频中的重要细节，确保编辑后的视频仍然保持高质量和真实感。
• 时间连贯性：Fairy特别注重在编辑过程中保持视频的时间连贯性，确保从一帧到下一帧的过渡自然和流畅。
• 处理高效：Fairy不仅解决了以前模型的内存和处理速度限制，还通过独特的数据增强策略改善了时间一致性。Fairy能够在14秒内生成120帧的512×384视频（4秒时长，30 FPS），比之前的工作快至少44倍。

如何使用Fairy？

• 项目地址：https://fairy-video2video.github.io
• 论文地址：https://arxiv.org/pdf/2312.13834.pdf