玩转 ControlNet:Stable Diffusion 制作光影文字效果

简介: 基于函数计算部署Stable Diffusion, 制作光影文字可以作为进阶 Stable Diffusion 的必备一课

image.png

image.png

大家对于最近 Stable Diffusion 不断出新的视觉“整活”印象都很深刻,很多人对最近比较流行的制作光影文字很感兴趣,制作光影文字可以作为进阶 Stable Diffusion 的必备一课,本文将详细讲解基于函数计算部署Stable Diffusion  实现光影文字效果,观看文章需要5分钟,看完即会赶紧尝试!


资源准备


部署云端 Stable Diffusion

1.选择“AI数字绘画 stable-diffusion 自定义模版“,点击立即创建,开始创建 Stable Diffusion

https://fcnext.console.aliyun.com/applications/create

image.png

2.创建 Stable Diffusion 需要开通函数计算FC和文件存储NAS,新用户一定领取试用额度

image.png

3.创建 Stable Diffusion WebUI

选择地域 —》选择“绘图类型”(后续可自己换)—》首次部署需要RAM角色 APN授权

其他地方如无特殊要求可以直接默认

image.png

4.确认知晓使用SD过程中产生的函数计算费用及重要提醒,等待Stable Diffusion WebUI部署成功

image.png

5.更换及管理模型需要进行“初始化模型管理”,注意存储模型开始用到文件存储 NAS产品

image.png

6.确认了解使用NAS的费用和注意事项,确认开始创建模型管理工具——选择“自动配置”——确认

image.png

7.访问admin开头的域名,进入模型管理平台

image.png

准备大模型

您可以选择喜欢的模型用以生成二维码的风格,本教程推荐模型库中下载 majicMix realistic模型,模型将会被下载至您的 文件管理(NAS) 中,这会产生一定的文件存储费用请务必注意。下载好后重启 Stable Diffusion 即可使用。


模型库功能由阿里云 OSS 提供,模型/数据集/文件均来源于第三方,不保证合规性,请您在使用前慎重考虑。

image.png


准备光影文字需要的模型

部署的Stable Diffusion 已经内置了 Controlnet 和常用ControlNet 插件。

本教程仅仅需要下载需要的 ControlNet 插件即可。


1.下载制作光影文字需要的模型

下载地址:https://huggingface.co/ioclab/control_v1p_sd15_brightness

image.png

6.上传下载模型后上传在文件夹中 /mnt/auto/sd/models/ControlNet,重新加载 Stable Diffusion 备用

image.png

以上步骤如果遇到任何问题可以查看详细文档

https://developer.aliyun.com/adc/scenario/b2cc0e1c3a6244e0bd9fc0f37acd5a0e


制作光影文字

1.准备文字图,您可以使用 PPT 或者PS制作黑底白字的图(字要大)

image.png

2.添加提示词设置采样步数,以城市夜景为例

正向提示词:chengshi,city,Building,tall building,Neon Light

反向提示词:EasyNegative,(worst quality:2),(low quality:2),(normal quality:2),lowres

过多采样步数会导致文字不清晰,我设置 20,您可以自行调节

3.文字图放入 ControlNet

启用—All—预处理:None——模型:brightness

以下参数经过测试,您可以根据需要自行调节

Control Weight: 0.4左右

Starting Control Step:0~0.2

Endting Control Step: 0.5~0.7

image.png


image.png

  1. image.png



“阿里云 X 森马 AIGC T恤设计大赛“邀你参加


阿里云携手国民服装品牌森马推出 AIGC T 恤设计大赛,无论您是开发者、设计师、还是AI绘画爱好者,都可以使用阿里云函数计算快速部署 Stable Diffusion,以“宇宙漫游”为主题,进行AI 创作并投递作品即可参赛。所有作品均有机会被森马选中并购买版权成为下一季服装图案主题。


立即参赛:https://developer.aliyun.com/adc/series/activity/aigc_design

可获得奖品: Apple Airpods、作品定制阿里云X森马联名T恤、森马定制旅行箱、森马无门槛代金券等丰厚奖励

活动时间:2023年8月21日-2023年9月21日

相关实践学习
函数计算部署PuLID for FLUX人像写真实现智能换颜效果
只需一张图片,生成程序员专属写真!本次实验在函数计算中内置PuLID for FLUX,您可以通过函数计算+Serverless应用中心一键部署Flux模型,快速体验超写实图像生成的魅力。
从 0 入门函数计算
在函数计算的架构中,开发者只需要编写业务代码,并监控业务运行情况就可以了。这将开发者从繁重的运维工作中解放出来,将精力投入到更有意义的开发任务上。
目录
相关文章
|
人工智能 编解码
AI 绘画Stable Diffusion 研究(二)sd模型ControlNet1.1 介绍与安装(2)
AI 绘画Stable Diffusion 研究(二)sd模型ControlNet1.1 介绍与安装
1062 0
|
3月前
|
人工智能 关系型数据库 分布式数据库
不止于云原生:阿里云PolarDB全面内化AI能力,构建AI就绪的下一代数据库架构
2026阿里云 PolarDB 开发者大会上,PolarDB 发布 AI 数据湖库(Lakebase)等全新能力,推出“AI 就绪的云原生数据库”四大支柱,推动数据库从“外挂式”集成 AI 到“内生智能”的进化,赋能 Agent 应用开发,助力企业实现智能决策与业务跃迁。
|
5月前
|
搜索推荐 JavaScript 关系型数据库
基于用户评论分析挖掘的旅游景点推荐系统
本研究基于用户评论分析,构建个性化旅游景点推荐系统。融合自然语言处理与情感分析技术,挖掘游客真实偏好,结合Django、Vue.js与MySQL等技术实现系统开发,提升旅游决策效率与体验质量,推动旅游产业智能化发展。
|
存储 物联网 Serverless
玩转 AI 绘图,基于函数计算部署 Stable Diffusion可自定义模型
本文主要将带大家通过使用阿里云产品函数计算 FC 和文件存储 NAS ,快速使用 Stable Diffusion 实现更高质量的图像生成,本方案内置模型库+常用插件+ControlNet ,用户可根据自己的需要更换需要的模型、Lora、增加插件。
69479 27
玩转 AI 绘图,基于函数计算部署 Stable Diffusion可自定义模型
|
存储 Java
Java设计一个简单的计算器程序
Java设计一个简单的计算器程序
|
人工智能 编解码 数据可视化
Stable Diffusion基础:精准控制之ControlNet
在AI绘画中精确控制图片的生成是一件比较困难的事情,炼丹师们经常需要大量抽卡才能得到一张满意的图片,不过随着 ControlNet 的诞生,这一问题得到了很大的缓解。 ControlNet 提供了十几种控制网络模型,有的可以控制画面的结构,有的可以控制人物的姿势,还有的可以控制图片的画风,这对于提高绘画质量、提升生图速度特别有用;基于 ControlNet 的能力,炼丹师们还可以将AI绘画拓展到更多的应用场景,比如艺术二维码、光影文字、线稿上色、老照片修复、图片风格转绘等等。
1773 0
Stable Diffusion基础:精准控制之ControlNet
|
存储 机器学习/深度学习 人工智能
Stable Diffusion中的embedding
**在Stable Diffusion中,嵌入(Embedding)是一种文本反转技术,用于控制图像样式。通过关联文本描述与图像特征,模型能学习新样式,尤其在样本有限时提高适应性。文本反转涉及收集样本、创建文本描述、训练嵌入模型和应用嵌入。这种方法支持快速原型设计、个性化定制和处理数据稀缺情况。用户可以从Civitai下载嵌入文件,将其放入Stable Diffusion webUI的embeddings文件夹,然后在Textual Inversion中使用。此外,可以调整嵌入强度,甚至使用负向嵌入。文本反转与Dreambooth、超网络等方法不同,各有优劣,适用于不同场景。**
Stable Diffusion中的embedding
|
JSON 自然语言处理 网络协议
基于QT实现的词典(附源码)
主要用到的技术:JSON字符串,堆栈窗体(方便以后加新功能),QTcpSocket,LcdNumber,时间戳的转换。 通信用的是TCP通信,将TCP封在了一个头文件中,哪个文件想去通过TCP链接发送消息就可以使用头文件 QT端写的是客户端,服务器还是在我笔记上次的Linux系统下写的服务器,做了一些小修改
399 1
|
人工智能 文件存储 对象存储
Stable Diffusion 模型库,AIGC 画风任你选
Stable Diffusion(简称 SD)模型库包含写实、国漫、科技等几十种风格。可以让用户一键转存到自己的存储空间,而后直接挂载到 PAl 或 FC 下进行推理和训练。无需复杂漫长的下载和上传步骤,即可获得多种模型的使用体验,实现云上 AIGC 的快速搭建。
52883 22
Stable Diffusion 模型库,AIGC 画风任你选