1327522.jpg

Ridley

GF  2024-04-10 05:58
(空的)

关于真一键AI去衣(全自动局部重绘)的一些尝试


最近玩comfyui突发奇想尝试搭建了一个通过算法全自动AI去衣的工作流,避免过程中有人工干预,只要上传图片就能直接出成果图。


先来回顾一下传统AI去衣的大致流程(经过AI画图社区一年多以来的沉淀,所谓“AI去衣”的局部重绘方法并没有太多改变,想必很多人都已经比较熟悉了):

首先对上传的图像进行蒙版绘制,对要重绘的人体部位用与肤色相近的蒙版覆盖,对延伸到躯干外的服饰用其他颜色(或者纯噪声)的蒙版覆盖;调整提示词,然后用真人模型和controlnet对图像进行重绘与修复。

(如果你只想知道A1111的webui里怎么实现AI去衣,那么这里就是全部了)


这一流程看似挺简单,但要完全靠算法实现也不是件很容易的事,尤其是自动绘制蒙版的部分,如何对不同区域进行不同颜色的蒙版覆盖,如何吸取人物肤色等等,这里也不是教程帖,就不详细展开说了


下面看看初步的工作流成果中间为输入图像,左侧为自动蒙版预览,右边是最终成果):







来上点难度,试试复杂构图或场景(真人就不跑去衣了)







如果不想用自动蒙版也可以尝试随便乱画一个蒙版,会自动优化成需要的蒙版




说是全自动,但在面对比较复杂的图像时还是有很多模型和参数可以调节以提高成图率的,当然比较简单的图像基本上可以做到一次性生成理想结果。


教程帖:https://www.snow-plus.net/read.php?tid-2160293.html


最后老规矩,欢迎各位来讨论分享下工作流与经验

1327522.jpg

Ridley

B1F  2024-04-10 18:02
(空的)

回 6楼(a59e5c62) 的帖子

原理都一样,没什么不可以的

1327522.jpg

Ridley

B2F  2024-04-10 21:56
(空的)

回 10楼(youzi233) 的帖子

大模型我用下来最好用的其实是fantasticmix,当然这只是经验之谈,理论上所有模型都可以,看你用法;至于lora,除非要生成一些奇怪的东西,不然不需要任何lora

1327522.jpg

Ridley

B3F  2024-04-11 18:51
(空的)

回 12楼(a373a277) 的帖子

目前的重绘方案不太可能做视频,尤其是重绘幅度过高肯定会破坏连贯性

1327522.jpg

Ridley

B4F  2024-04-12 19:15
(空的)

回 16楼(高氙酸) 的帖子

有些东西想写出来还是挺麻烦的,可能分个几期