[CVPR 2024] X-Adapter: 为升级的扩散模型添加通用插件兼容性
此仓库是 X-Adapter 的官方实现。 X-Adapter: 为升级的扩散模型添加通用插件兼容性 [冉灵敏], 小东村, 刘佳伟, 赵睿, 宋子杰 王新涛, Jussi Keppo, X-Adapter 使在旧版本(例如 SD1.5)上预先训练的插件可直接与升级的模型(例如 SDXL)一起使用,无需再次进行训练。 //: # ( ) //: # ( ) //: # ( ) //: # (给定视频-文本对作为输入,我们的方法 Tune-A-Video 会对预先训练的文本到图像扩散模型进行微调,从而实现文本到视频生成。)
conda create -n xadapter python=3.10
conda activate xadapter
pip install torch==1.13.1+cu116 torchvision==0.14.1+cu116 --extra-index-url https://download.pytorch.org/whl/cu116
pip install -r requirements.txt对于高效率和低 GPU 成本,强烈建议安装 xformers。
[Stable Diffusion] Stable Diffusion 是一种隐性的文本到图像扩散模型,能够根据任何文本输入生成逼真的图像。预训练的 Stable Diffusion 模型可从 Hugging Face 下载(例如, Stable Diffusion v1-5)。您还可以使用在不同风格(例如, Anything V4.0, Redshift 等)上训练的微调的 Stable Diffusion 模型。
暂无开放 Issues,或尚未同步最近议题。