StableVideo-文本驱动的一致性感知扩散视频编辑Sep 23, 2023前言 本文简单记录介绍一下StableVideo。 StableVideo是一个基于文本驱动的一致性感知扩散视频编辑工具。 正文一、什么是StableVideo可以在修改视频中的对象的同时能随着时间的推移保持其外观一致性。 二、StableVideo功能将时间依赖性引入现有文本驱动的扩散模型来解决此问题,这使得模型能够为编辑的对象生成时间一致的外观 三、StableVideo使用 下载并安装项目依赖 1234git clone https://github.com/rese1f/StableVideo.gitconda create -n stablevideo python=3.11pip install -r requirements.txt(optional) pip install xformers 项目还提供了CPU only版本。 下载预训练模型 下载示例数据 开始测试:python app.py 四、总结使用SD直接修改视频会出现每帧都有一些差别,时间上不一致,这个项目通过增加时间依赖性模块,可以减轻时间不一致的副作用,值得尝试。 最后参考文章: 官方项目 声明本文仅作为个人学习记录。本文永久记录于区块链博客xlog。