AI作图的最大魅力就在于很多人会开源各种ComfyUI工作流。
但是如果觉得简单下载别人的工作流,就可以在自己的电脑上完全运行的话,那就Too Naive了,一个工作流或许可以搞几个小时才能运营——有些可能还不幸,最终只能放弃。
在网上看到一个把照片转换为日式漫画的工作流,我觉得还是很有意思,于是想要尝试!
成品是下图这样的。
但工作流呢?
经过我的整理后,是长这样的,看上去是不是很复杂?
其实我并没有花时间尝试去搞明白这是怎么搭建的,目前作为新手的我,只是想把能产生不错成果的工作流,能成功地运行出来。先从结果里获得成就感,然后再慢慢研究,这是怎么回事。
这个工作流来源是:https://openart.ai/workflows/norsizu/photos-to-manga-style/3CTEJ480CyJ6QNruEcvy
当我们新下载一个工作流后,我们首先要看的,是不是缺少自定义节点。如果缺少,那就通过管理器下载就行。一般情况下不难,但是今天下午有一个节点让我搞了半天,幸好最后能搞定,就是InstantID有关的节点,这个之后再说。
只是下载自定义节点,工作流里面不再有“红色”警告,也不代表我们就能运行,因为我们很可能还缺少checkpoint模型、Lora,以及controlnet。
Checkpoint模型,是工作流的起点,所以一般工作流上传作者都会讲自己是基于什么模型来做的,或者我们可以在打开工作流后,看一下Checkpoint的名字。如果这个模型我们没有,那么就根据这个名字去搜索。比如这个显示的是:animagine-xl-3.1...,虽然我不知道后面完整的是什么,但是只要输入前面这几个关键字,一般就能找到模型下载页面。
原来,这个模型就叫做:animagine-xl-3.1
“Huggingface”的模型下载页面:https://huggingface.co/cagliostrolab/animagine-xl-3.1
随后,一般工作流作者也会介绍Lora模型用的是什么,比如这个工作流,就有这样一段说明:
漫画风格使用了自训练的 Lora 模型:残照金 SDXL - Hoko Manga Style,可以在 civitai 下载( https://civitai.com/models/647408/zanshou-kin-sdxl-hoko-manga-style )
最后,别忘记再看一下controlnet里面的模型。我第一次运行这个工作流报错,问题就出在这个加载器的模型上。我原以为用一个名字近似的做代替,最后理所当然不行。
于是,我就搜索工作流里这个模型的名字:diffusers_xl_depth_full。
在Huggingface上也找到这个controlnet模型的下载页面:
https://huggingface.co/lllyasviel/sd_control_collection/blob/d1b278d0d1103a3a7c4f7c2c327d236b082a75b1/diffusers_xl_depth_full.safetensors
下载完毕,把模型都放入到该放的位置,重启ComfyUI,顺利运行!yeah!
虽然我还不明白这些Lora,Controlnet的细节到底怎么回事,不过不妨碍我已经可以为朋友们制作一些创意照片。这过程就好像以前学中学物理时做实验,看到实验有趣的结果,背后的理论也能更容易搞懂。我觉得学习任何一项技能,其实都是如此。因为我们需要不断地拿到正反馈,才能激励自己继续钻研下去。
文章评论