您现在的位置: 首页>> 资讯 >> 正文

环球资讯:【AI绘画】把任何模型变为局部重绘(inpainting)模型的方法

来源: 哔哩哔哩

你一共需要 ABC 三个模型

A是 Stable Diffusion 1.5 inpainting 模型 https://huggingface.co/runwayml/stable-diffusion-inpainting/tree/main


(资料图)

B是你需要进行转化的模型,比如NovelAI, Anything

C是 Stable Diffusion 1.5 的普通模型 https://huggingface.co/runwayml/stable-diffusion-v1-5/tree/main

进入WebUI的Checkpoint Merger界面,把ABC分别填进去

下面的Custome Name,给模型起个名字,你自己能找到就好

Multiplier系数,拉到最右边,1。

Interpolation Method选择第三个 Add difference。

格式选safetensors就行,如果你想顺便把vae烤进去,就在bake in vae中选B模型用的vae。

其他的不用动,点Merge就行了。

这样融合过的模型,在进行局部重绘时,融入原画面的能力会大大增强。

原理:Add difference 的公式是 A + (B - C) * M。

当M=1时,相当于 A - C + B。

A - C 就是重绘模型和普通模型的差,也就是重绘模型独特的部分。把它加给B,你自己的模型也就有了重绘能力。

来源:https://www.reddit.com/r/sdforall/comments/zyieht/how_to_turn_any_model_into_an_inpainting_model/

相关新闻
小沧畲族乡:湖光山色里的绿色振兴

福建省福州市连江县小沧畲族乡位于山仔水库之畔,周围山青水碧,湖光山色中自然与人文美景相映成趣。多年来,小沧畲族乡坚持生态与水源保护优

纪伯伦:沙与沫(一)

文 纪伯伦著黄少政译【1】我永远行走在沙滩上,脚下溅起缕缕细沙,泡沫不时扑上脚面。潮水抹去了我的脚印,风则把泡沫一一吹散。唯一不变,直

秃尾巴老李是山东哪里人 环球头条

秃尾巴老李是山东哪里人,秃尾巴老李是山东日照市莒县寨里河镇龙尾村人。秃尾巴老李是山东地区的民间传说故事,讲述了黑龙出世并与白龙搏斗的