FlipSketch：让手绘画动起来

FlipSketch 利用经过特定训练的文本到视频（T2V）模型，用户可以输入草图和文本描述，FlipSketch 将根据二者生成对应的动画。

其核心在于对 T2V 模型进行微调，使其能够生成符合输入草图特征的动画。通过将输入草图的参考噪声与模型的注意力机制相结合，FlipSketch 实现了从静态图像到动态视频的转换。

开源地址：github.com/hmrishavbandy/FlipSketch

快速开始要开始使用 FlipSketch，用户需按照以下步骤操作：① 安装 conda 环境：

conda env create -f flipsketch.yml

② 下载 T2V LoRA 模型：使用 Git LFS 克隆模型仓库：git lfs install，然后：

git clone https://huggingface.co/Hmrishav/t2v_sketch-lora

③ 移动 LoRA 检查点：将下载的检查点移动到根目录：

mv t2v_sketch-lora/checkpoint-2500 ./checkpoint-2500/

④ 运行应用程序：执行 python app.py 启动应用。