前言
目录
-
- 引言
- 操作过程
-
- 图片准备
- 创建蒙版
- 图生图优化
- 设置参数
- 细节调整
- 总结
引言
在深入体验了 Stable Diffusion 图生图的无限魅力之后,我们不禁为其强大的图像修复
和细节丰富能力所折服。然而,在实际应用中,许多用户发现难以精准掌控最终效果的丰富度和细节层次,以达到心中理想的艺术效果。为此,本期内容将带领大家一探 Stable Diffusion 的涂鸦幻变——稳态扩散下的艺术重生,揭示如何在保持图像原有风格的同时,注入新的创意与活力。
Stable Diffusion 的涂鸦幻变技术,巧妙地将用户的涂鸦草图转化为栩栩如生的艺术作品。这一过程不仅保留了原图的精髓,还巧妙地融合了新的元素,使得图像在稳态扩散的过程中焕发出新的生命。通过对模型细致入微的调整和优化,我们能够更好地引导扩散过程,实现从简单线条到复杂纹理的完美过渡,让每一幅作品都独一无二,充满艺术气息。
所有的AI设计工具,模型和插件,都已经整理好了,👇获取~
我们可以先生成一个图像,为后续做准备
例如:
正向词:
(masterpiece:1.3),ultra-detailed,Best quality,A small yellow duck wearing a hat and a small white duck wearing a bow on his neck chat face to face,cartoon cute,cream tone,HD,Two cute little ducks,Cute little duck,laughing happily. A few little butterflies stopped by her side. There is a willow tree and bushes outside the window. cartoon illustration,
反向词:
(worst quality, low quality:1.4),(depth of field, blurry:1.2),(greyscale, monochrome:1.1),3D face,cropped,lowres,text,(nsfw:1.3),(worst quality:2),(low quality:2),(normal quality:2),normal quality,((grayscale)),skin spots,acnes,skin blemishes,age spot,(ugly:1.331),(duplicate:1.331),(morbid:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5),blurry,(bad anatomy:1.21),(bad proportions:1.331),extra limbs,(disfigured:1.331),(missing arms:1.331),(extra legs:1.331),(fused fingers:1.61051),(too many fingers:1.61051),(unclear eyes:1.331),lowers,bad hands,missing fingers,extra digit,bad hands,missing fingers,(((extra arms and legs))),
我们和可以很快地得到一张:
首先呢我们可以选择手的位置进行一下重绘;
这样的话整体就正常了不少了,我们这里可以了解一些参数:
- 蒙版边缘模糊度(Mask Edge Blurring):
- 这个参数控制蒙版边缘的过渡区域,使蒙版边缘与图像的其他部分更平滑地融合。
- 在 Stable Diffusion 中,增加蒙版边缘模糊度可以减少修复区域与原始图像之间的锐利边缘,从而产生更自然的过渡效果。
- 如果设置为较低的值,修复的边缘会显得更清晰;如果设置为较高的值,边缘会更加柔和。
- 蒙版模式(Mask Mode):
- 这个选项决定了模型是应该修复蒙版覆盖的区域还是蒙版外的区域。
- “重绘蒙版内容” 表示模型将会生成新的内容来填充蒙版覆盖的区域。
- “重绘非蒙版内容” 则表示模型会重新生成除了蒙版覆盖区域以外的所有内容。
- 蒙版区域内处理(Mask Area Processing):
- 在 Stable Diffusion 的图生图(inpainting)功能中,蒙版区域内处理(Mask Area Processing)的选项对于最终生成图像的质量和真实感有着重要影响。以下是各个选项的详细解释和拓展:
-
填充(Fill):
-
当选择 “填充” 时,模型会根据蒙版区域外的图像内容来生成新的像素填充到蒙版区域内。
-
这通常用于去除图像中的不想要的对象或瑕疵,并替换为与周围环境相匹配的内容。
-
用户可能需要多次尝试,调整其他参数来获得最佳的填充效果,确保新生成的内容与原图的纹理、颜色和光照相匹配。
-
-
原版(Original):
- 选择 “原版” 意味着蒙版区域内的原始图像内容将被保留,不会进行任何修改。
- 这个选项在用户只想对蒙版外的区域进行编辑时非常有用,比如在保持原始对象不变的情况下,改变背景或环境。
-
潜空间噪声(Latent Space Noise):
- “潜空间噪声” 选项在蒙版区域内添加随机噪声,这种噪声是在模型学习到的图像潜在表示空间中添加的。
- 添加潜空间噪声可以帮助模型在修复区域时产生更自然的纹理和细节,因为它为模型提供了更多的信息来 “引导” 生成过程。
- 这种方法对于修复那些需要与周围图像保持一致纹理的较小区域特别有效。
-
空白潜空间(Blank Latent Space):
- 选择 “空白潜空间” 会将蒙版区域内的内容设置为空白,即没有任何信息。
- 这相当于告诉模型该区域完全没有任何内容,需要从头开始生成。
- 这种方法在蒙版区域较大或需要完全替换原有内容时比较有用,但可能需要更精确的蒙版和更细致的参数调整来避免生成内容与原图不匹配的情况。
-
重绘区域(Redraw Area):
- 这个选项允许用户选择是整个图像都要重新生成,还是只生成蒙版覆盖的区域。
- “整张图片”:整个图像都将被重新生成,考虑蒙版区域的变化。
- “仅蒙版区域”:只有蒙版覆盖的区域会被重新生成,其他部分保持不变。
-
仅蒙版区域下边缘预留像素(Edge Padding for Mask Area):
- 当选择 “仅蒙版区域” 进行重绘时,这个参数可以在蒙版边缘添加额外的像素区域,以帮助模型更好地理解上下文。
- 这样可以减少在蒙版边缘可能出现的伪影,使生成的图像与原始图像更自然地融合。
-
Soft Inpainting:
- 这是一个复选框,启用后可以使得修复过程更加平滑和自然。
- 它通常用于减少在蒙版边缘的硬边和伪影,使得修复后的区域与原始图像更加无缝对接。
我们感觉重新画的手部,有点突兀,我们也可以删掉,例如:
我们只需要稍加提示词即可,
(white fluff:1.2),
我想要小鸭子头上顶一朵小黄花和女孩对应
效果也非常不错
再给女孩带一个金黄色的项链
我们总结上述的一写操作其实我们可以把涂鸦重绘可以归纳为这么几步
图片准备
在涂鸦重绘流程的初始阶段,图片准备至关重要。这包括:
-
选择或创作涂鸦:根据需求选择一幅现有的涂鸦作品,或者自己创作一幅新的涂鸦。
-
图像格式与大小调整:确保图像格式兼容,并对图像大小进行调整,以适应模型的输入要求。
-
清洁与预处理:去除图像上的污点、杂点等,确保涂鸦线条清晰,便于后续处理。
我们可以多生成几张图片我们选择一张最优质的
创建蒙版
蒙版是涂鸦重绘中的关键工具,用于指定需要重绘的区域。
-
蒙版设计:使用图像编辑软件绘制蒙版,精确标记出需要模型重绘的区域。
-
蒙版优化:调整蒙版边缘,使其与涂鸦内容自然过渡,避免生硬的边缘。
图生图优化
在正式进行重绘之前,对图生图过程进行优化是必要的。
-
分析原图风格:理解涂鸦的风格特点,以便在重绘时保持一致性。
-
预测试:进行小范围的测试,以评估模型对涂鸦的理解和重绘效果。
设置参数
参数设置直接影响着重绘的效果,需要细心调整。
-
模型参数:根据涂鸦的特点和用户需求,设置模型参数,如蒙版模式、重绘区域等。
-
风格参数:调整风格相关的参数,确保重绘内容与原图风格匹配。
涂鸦重绘丰富内容
这一步是涂鸦重绘的核心,涉及模型的实际运行。
-
运行模型:将涂鸦和蒙版输入模型,启动重绘过程。
-
监控生成:实时监控生成过程,捕捉模型对涂鸦内容的理解和转换。
细节调整
重绘完成后,细节调整是提升作品质量的关键。
- 颜色校正:调整颜色平衡,使重绘区域与原图颜色协调。
- 纹理与细节增强:对重绘区域进行纹理和细节上的增强,使其更加逼真。
- 对比度与亮度调整:优化图像的对比度和亮度,使整体视觉效果更加和谐。
- 去除伪影:检查并去除可能出现的伪影或异常,确保图像的自然流畅。
总结
通过以上的操作流程,我们不仅见证了涂鸦重绘技术的强大力量,也深切体会到了它在艺术创作中的独特优势。涂鸦重绘不仅能够将简单的线条和草图转化为栩栩如生的艺术作品,还能够保持原有作品的风格和韵味,同时注入新的创意和细节,使得每一幅作品都焕发出新的生命力和艺术魅力。
[好易智算平台]在这一过程中扮演了不可或缺的角色。它不仅提供了稳定高效的计算支持,使得复杂的图像处理任务变得轻松可行,还以其人性化的操作界面和专业服务团队,极大地降低了技术门槛,让更多用户能够轻松掌握并应用这一先进技术。好易智算平台的 399 包月活动,更是将高端计算资源带入寻常百姓家,让每一位创意工作者和科技爱好者都能以亲民的价格,享受到顶级算力带来的高效与便捷。
涂鸦重绘技术的出现,不仅丰富了艺术创作的表现形式,也为我们提供了无限的可能性。而好易智算平台,作为这一技术的强大支撑,无疑为我们的创意之旅插上了翅膀,让我们在艺术创作的天空中自由翱翔。未来,随着技术的不断进步和平台的不断完善,我们有理由相信,更多的艺术奇迹将在[好易智算平台]上诞生,为我们带来更多的惊喜和感动。
这里直接将该软件分享出来给大家吧~
1.stable diffusion安装包
随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。
最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本。
2.stable diffusion视频合集
我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才能更方便的学习下去。
3.stable diffusion模型下载
stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。
4.stable diffusion提示词
提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。
5.SD从0到落地实战演练
如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名SD大神的正确特征了。
这份完整版的stable diffusion资料我已经打包好,需要的点击下方插件,即可前往免费领取!