玩转 ControlNet:Stable Diffusion 制作艺术二维码

简介: 本文将详细讲解基于函数计算部署 Stable Diffusion 做一个艺术二维码,

image.png

image.png

用 Stable Diffusion 制作艺术二维码,本文将详细讲解基于函数计算部署 Stable Diffusion 做一个艺术二维码,艺术化的二维码不是单纯的艺术作品,具备可识别的功能性非常重要,因此在生成过程中,需要对参数和二维码进行多次调整以达到最佳状态,希望这篇文章能够帮助您提供一些生成方法,观看文章需要5分钟,看完即会赶紧尝试!


资源准备


部署云端 Stable Diffusion

1.选择“AI数字绘画 stable-diffusion 自定义模版“,点击立即创建,开始创建 Stable Diffusion

https://fcnext.console.aliyun.com/applications/create

image.png

2.创建 Stable Diffusion 需要开通函数计算FC和文件存储NAS,新用户一定领取试用额度

image.png

3.创建 Stable Diffusion WebUI

选择地域 —》选择“绘图类型”(后续可自己换)—》首次部署需要RAM角色 APN授权

其他地方如无特殊要求可以直接默认

image.png

4.确认知晓使用SD过程中产生的函数计算费用及重要提醒,等待Stable Diffusion WebUI部署成功

image.png

5.更换及管理模型需要进行“初始化模型管理”,注意存储模型开始用到文件存储 NAS产品

image.png

6.确认了解使用NAS的费用和注意事项,确认开始创建模型管理工具——选择“自动配置”——确认

image.png

7.访问admin开头的域名,进入模型管理平台

image.png

准备大模型

您可以选择喜欢的模型用以生成二维码的风格,本教程推荐模型库中下载 majicMix realistic模型,模型将会被下载至您的 文件管理(NAS) 中,这会产生一定的文件存储费用请务必注意。下载好后重启 Stable Diffusion 即可使用。

模型库功能由阿里云 OSS 提供,模型/数据集/文件均来源于第三方,不保证合规性,请您在使用前慎重考虑。

image.png


准备制作艺术二维码需要的模型

部署的Stable Diffusion 已经内置了 Controlnet 和常用ControlNet 插件。

本教程仅仅需要下载需要的 ControlNet 插件即可。


1.前置准备:调整出多个 ControlNet Unit, 方便多个ControlNet 叠加使用

image.png

2.调整出多个 ControlNet Unit, 方便多个ControlNet 叠加使用

image.png

3.此时可以看到您的页面上已经有了 ControlNet 配置项

image.png

4.下载 qrcode moster 模型

下载地址:https://huggingface.co/monster-labs/control_v1p_sd15_qrcode_monster/tree/main

image.png

5.下载brightness 模型

下载地址:https://huggingface.co/ioclab/control_v1p_sd15_brightness

image.png

6.上传下载模型后上传在文件夹中 /mnt/auto/sd/models/ControlNet,重新加载 Stable Diffusion 备用

image.png

以上步骤如果遇到任何问题可以查看详细文档

https://developer.aliyun.com/adc/scenario/b2cc0e1c3a6244e0bd9fc0f37acd5a0e

制作艺术二维码

1.准备二维码,可以选择草料网 https://cli.im/,免费生成二维码,可以根据自己的需要选择二维码美化,让二维码更适合生成图画

image.png

2.进一步美化二维码,可以修改颜色,码点形状,码眼形状,因为二维码不是单纯的图片,具备很强的功能性,制作成艺术二维码需要能够方便识别,建议前期二维码美化使用比较大块的码点形状。

image.png

3.添加提示词设置

正向提示词:(((1boy))),((masterpiece)),((best quality)),8k,high detailed,((chinese clothes)),((hanfu)),Fisheyes,masterpiece,top quality,best quality,animation, long hair

反向提示词:(worst quality, low quality:2),NSFW,monochrome,zombie,overexposure,watermark,text,bad anatomy,bad hand,extra hands,extra fingers,too many fingers,fused fingers,bad arm,distorted arm,extra arms,fused arms,extra legs,missing leg,disembodied leg,extra nipples,detached arm,liquid hand,inverted hand,disembodied limb,oversized head,extra body,extra navel,EasyNegative,(hair between eyes)


  1. 选择喜欢的模型,我这里选择的是 AWPainting 模型

4.二维码图片放入 ControlNet 1

启用—All—预处理:None——模型:qrcode monster

以下参数经过测试,您可以根据需要自行调节

Control Weight: 1以上,二维码生成需要精确度,控制比重要比较强

Starting Control Step:0~0.3

Endting Control Step: 0.7~0.8


image.png

5.二维码图片放入 ControlNet 2

  • 启用—All—预处理:None——模型:brightness
  • 以下参数经过测试,您可以根据需要自行调节
  • Control Weight: 0.6左右
  • Starting Control Step:0~0.3
  • Endting Control Step: 0.4~0.7

image.png

5.点击生成,可以看到生成的图像面部有问题

image.png

6.点击局部绘制,进行脸部修饰,小面积修饰不会影响识别

image.png

如果你的二维码无法识别……

Control Weight 和 Endting Control Step 这两个参数在生成二维码时非常重要。如果你的二维码无法被扫描,那么你需要调整这两个参数。当 Control Weight 越高时,二维码会更加明显,但是如果 Control Weight 太低,可能会导致扫描不出来。Endting Control Step 代表着 AI 在渲染过程中停止的时间,如果你的图层渲染有10层,那么当你选择0.8的终止时机时,代表着围绕二维码的渲染在第8层结束,剩下的2层AI会自由发挥。这就是为什么有些艺术二维码生成出来并不像二维码的原因。

每个人的二维码都是不同的,调整一个兼顾好看和实用的艺术二维码其实是一个细致活儿,希望大家都能做出好看的二维码!


“阿里云 X 森马 AIGC T恤设计大赛“邀你参加


阿里云携手国民服装品牌森马推出 AIGC T 恤设计大赛,无论您是开发者、设计师、还是AI绘画爱好者,都可以使用阿里云函数计算快速部署 Stable Diffusion,以“宇宙漫游”为主题,进行AI 创作并投递作品即可参赛。所有作品均有机会被森马选中并购买版权成为下一季服装图案主题。


立即参赛:https://developer.aliyun.com/adc/series/activity/aigc_design

可获得奖品: Apple Airpods、作品定制阿里云X森马联名T恤、森马定制旅行箱、森马无门槛代金券等丰厚奖励

活动时间:2023年8月21日-2023年9月21日



相关实践学习
【AI破次元壁合照】少年白马醉春风,函数计算一键部署AI绘画平台
本次实验基于阿里云函数计算产品能力开发AI绘画平台,可让您实现“破次元壁”与角色合照,为角色换背景效果,用AI绘图技术绘出属于自己的少年江湖。
从 0 入门函数计算
在函数计算的架构中,开发者只需要编写业务代码,并监控业务运行情况就可以了。这将开发者从繁重的运维工作中解放出来,将精力投入到更有意义的开发任务上。
目录
相关文章
|
消息中间件 Java Spring
RocketMQ-JAVA客户端不同版本接入方式
RocketMQ4.0 RocketMQ5.0 JAVA接入 spring springboot
RocketMQ-JAVA客户端不同版本接入方式
|
Web App开发 移动开发 小程序
扫普通链接二维码打开小程序的踩坑过程...
扫普通链接二维码打开小程序的踩坑过程...
4297 0
扫普通链接二维码打开小程序的踩坑过程...
|
6月前
|
人工智能 供应链 安全
未来电商趋势:API技术在智能供应链中的应用
随着电商蓬勃发展,供应链管理正借助API技术实现智能化升级。本文解析API作为电商生态“粘合剂”的作用,探讨其在库存管理、物流协同和风险预测中的关键应用,以及对AI融合、区块链安全和实时生态的推动。API不仅提升效率与用户体验,更重塑电商未来格局,成为企业竞争的核心优势。拥抱API集成,将是应对市场复杂性的关键策略。
185 4
|
6月前
|
存储 监控 安全
电商API接口安全防护全流程详解:认证加密筑牢安全防线
本文深入解析电商API接口安全防护,涵盖认证、授权、数据加密及其他安全措施,探讨如何构建全方位的安全体系,保障电商平台数据与业务安全。
|
10月前
|
机器学习/深度学习 人工智能 数据安全/隐私保护
2025年NVIDIA RTX 4090服务器租赁价格与选型详解
随着AI训练、深度学习与图形渲染需求激增,NVIDIA RTX 4090显卡成为算力租赁市场的热门选择。本文从价格体系、配置适配、成本优化三方面解析4090服务器租赁策略,涵盖短租长租价格差异、主流平台对比、硬件配置建议及成本优化方案,助您精准匹配业务需求。此外,还介绍了阿里云高性能GPU实例作为替代方案,提供稳定性和生态集成优势。
|
人工智能 Serverless API
AI 绘画平台难开发,难变现?试试 Stable Diffusion API Serverless 版解决方案
AI 绘画平台难开发,难变现?试试 Stable Diffusion API Serverless 版解决方案
12080 132
|
存储 安全 Android开发
F-Droid:尊重自由与隐私的安卓应用商店
F-Droid 是安卓平台上的自由开源应用商店,专为关注隐私和数据安全的用户设计。本文详细介绍了 F-Droid 的特点,包括其对自由和隐私的重视、无广告和无追踪代码的承诺、强大的应用搜索与管理功能,以及对开源社区的支持。用户可以通过 F-Droid 安全地浏览、安装和管理应用程序,并且开发者也可以发布开源应用。未来,F-Droid 将继续提升用户体验,鼓励更多的开发者与用户参与其中,推动自由开源软件的发展。
1309 1
|
存储 人工智能 Serverless
玩转 ControlNet:Stable Diffusion 制作光影文字效果
基于函数计算部署Stable Diffusion, 制作光影文字可以作为进阶 Stable Diffusion 的必备一课
1945 3
阿里云域名注册流程和备案流程(详细图文教程)
阿里云域名注册指南:访问[阿里云域名注册入口,查询并注册心仪域名,如.com/.cn,加入清单后结算。价格因后缀而异,如.com首年78元。创建信息模板进行实名认证,首次需上传资料。获取域名优惠口令并使用,详细步骤见文档。备案流程参照阿里云ICP备案系统。
17778 2
|
开发工具 Python
【python】如何通过python来发送短信
【python】如何通过python来发送短信
1530 1

热门文章

最新文章