来源:互联网 更新时间:2025-07-16 11:26
本项目基于ComfyUI探索爽文小说文生图,灵感源于高热度的爽文AI绘图视频。项目先介绍图生图基础操作,即通过拼接两个文生图工作流,将生成图片传入新K采样器实现再生成。还讲解进阶的传统模型和Latent模型高清放大方法,包括所需组件及构建流程。同时提及在线体验方式,且建议无基础者先学习相关精品项目。
本项目基于ComfyUI,以文生图为目标,通过对绘画流的组合,生成高质量的图片;同时,通过添加高清放大的相应教程,以此来提升生成图片的效果。
最近刷视频的时候,常常刷到爽文小说通过AI绘图生成图片后剪辑而成的视频,而且这些视频很能吸引住自己,并且也有不错的点赞量和播放量,刚好自己最近在学习comfyUI,想通过ComfyUI进行爽文小说文生图的尝试
下载和使用基础的AI绘画流在我的上一个精品项目中有进行讲解,其通过制作手机屏保这一主题,来对模型和软件的详细下载方法,基础的绘画流和其组件功能进行了详细的介绍。
在后续的教程中,我们需要小伙伴们有一定的ConfyUI使用基础,如果有本节课感兴趣但之前没有尝试过ComfyUI的小伙伴们,可以先去上面这个精品项目中学习一下哦
首先,我们先再次了解一下基础文生图的工作流,其由以下6个组件组成,每个组件各有其功能,具体的在上面的项目中有进行详细的解释
那如何将生成的图片进行再生成呢?其实很简单,只需要将生成的图片,再放入到新的一个K采样器中,即可进行图片的再生成,那么我们可以来看看下面这个基础的图生图工作流
大家对比以下基础的文生图流程后会发现,这个图生图其实是由两个文生图的工作流拼接而成的,但为什么后面那个是图生图而不是文生图呢?差别就在于,上面的图片是通过Empty Latent Image组件,将一个空的图片传到K采样器上进行生成,而下面的则是通过将生成的图片传到K采样器中,进行进一步的生成,因此可以达到图生图的效果。
如果你按照上面的工作流制作出了相应的AI绘画,那么恭喜你,成功实现了基础的图生图。
在做完上面的基础的图生图后,有些同学会觉得基础的图生图好像还是不能满足自己的需求,有些时候生成的两张照片长得基本一样,甚至有些时候会出现图片变花的情况,那么基于此,我们来通过传统模型放大和Latent放大,来实现图片的高清放大。
下面我们教大家如何实现传统模型高清放大。
首先,我们在基础绘画流的基础上,添加一个Upscale Latent组件,通过:右击空白位置——》Add Node——》Latent——》Upscale Latent来创建。在此基础上,我们再创建基础绘画流的后半部分,即K采样器(Ksampler),解码器(VAE Decade),以及保存图像的Save Image。
创建完后,大家只需要选好自己想要的模型,写好提示词,然后点击右边的添加提示词队列(Queue Prompt),即可进行AI绘画了。
在小伙伴们的尝试中,可能会出现生成图片多了很多不想要的细节,以及人物多指等情况。那如何避免呢?接下来,我们来进行Latent放大的学习。
首先,大家可以参考基础的绘画流和上面的传统放大,其思路都是一样的,都是在基础的绘画流的K采样器的输出后面进行修改和添加,从而实现图生图的效果。
在添加的组件中,主要由一个解码器,一个由放大模型加载器和使用放大模型的节点组成的放大部分,一个常规图像放大(Upscale Image)中进行模型的放大,以及最后由VAE编码器、K采样器、解码器和图像保存组成的基础绘画流的后半部分组成。
那其是怎样一个绘画流程呢?首先,将第一次采样的结果分成两路,一路直接传到解码器中解码并保存图像,另一个则是现进行解码,然后传入到模型放大部分,先由放大模型加载器中选择放大的模型,然后再将大模型和解码后的数据传入到放大模型节点中生成一个草图数据,然后将数据进行编码传到Upscale中来选择生成图像的参数,最后和传统流相似,通过一个采样器再进行一次采样,将输出的值进行解码,然后保存成图像进行呈现。
以下是组件的构建方式:
Load Upscale Modlel:Add Node——》loaders——》Load Upscale Model
Upscale Image(using model):Add Node——》Image——》Upscaling——》Upscale Image(using model)
Upscale Image:Add Node——》Image——》Upscaling——》Upscale Image
VAR Encode:Add Node——》_for_testing——》VAR Encode
VAE Decode、KSamler、Save Image:可以看上面的另一个精品项目
放大模型下载的提取码:https://pan.baidu.com/s/1JYb3n2eWSNOlrr2Qxpv4cw?pwd=iti8
大家可以在AI Studio主页的应用里点击ComfyUI,然后在里面启动实例进行体验,但小伙伴们要注意了,在线体验需要A币,需要进行充值哈,同时,项目启动的时间会比较长,注意耐心等待哈。
ComfyUI在线体验网址:https://aistudio.baidu.com/community/app/106043/selectedCourses?source=appCenter
如果想体验该项目中的绘画流,那需要在启动项目后,将里面的组件清空,在按照上面的流程添加连接后,即可体验图生图的绘画流。
当然,小伙伴们如果感兴趣,也可以体验以下官方的图生图绘画流,只需要在启动实例的时候选择图生图的实例进行启动即可,里面可以将导入的图片通过模型进行绘画。
豆包AI安装需要哪些运行时库 豆包AI系统依赖项完整清单
2025迷你世界雨薇免费激活码
2025崩坏星穹铁道7月3日兑换码
Perplexity AI比Google好吗 与传统搜索引擎对比
ChatGPT如何生成产品原型 ChatGPT产品设计辅助功能
哔哩哔哩教程哪里找
悟空浏览器网页版:免费畅游网络世界的极速入口
光遇6.19大蜡烛在哪里
《怪物乐土》哥布林猎手光暗选择技能加点
小米在全球范围推送澎湃OS 2.2 这几款机型现可升级
iPhone15pro怎么拍动态照片?
2025原神7月2日兑换码分享
如何轻松在iPhone上安装DeepSeek
光遇7.8免费魔法是什么
蚂蚁庄园今日最新答案7.10
剪映人像虚化怎么使用 剪映人像虚化使用方法
iPhone15 Pro Max屏幕一直亮着是什么原因
Edge浏览器怎么关闭某个进程
qq音乐怎么免费听歌?qq音乐免费听歌教程
铁路12306怎么改签?铁路12306改签教程
手机号码测吉凶
本站所有软件,都由网友上传,如有侵犯你的版权,请发邮件haolingcc@hotmail.com 联系删除。 版权所有 Copyright@2012-2013 haoling.cc