AIGC 文生图 -阿里云帮助中心

实验分为三个主要部分：AI生成产品设计：通过简单的关键词、大模型和Lora模型生成基本符合需求的工业产品；AI生成产品设计草稿：通过Lora模型控制产品设计草稿生成，给与设计师一定的设计思路；线稿转效果图以及产品效果图生成：利用controlnet将草稿转化为渲染图，缩减了建模和渲染的过程，同时也可利用该方式修改产品原先的效果图表现。跟随我们一起学习如何运用AI简化你的设计流程吧！#paiartlab #设计新纪元 #创意无限 #工业产品设计未来设计趋势

实验室资源方式简介

进入实操前，请确保阿里云账号满足以下条件：

个人账号资源
- 使用您个人的云资源进行操作，资源归属于个人。
- 平台仅提供手册参考，不会对资源做任何操作。
确保已完成云工开物300元代金券领取。
已通过实名认证且账户余额≥0元。
本实验，预计产生费用：约0.012元（以仅用SDWebUI（共享版）生成一张512*512最简单的图（393kb，1.66sec）为例估算）

如果您调整了资源规格、使用时长，或执行了本方案以外的操作，可能导致费用发生变化，请以控制台显示的实际价格和最终账单为准。

平台开通及授权

在开始实验之前，请先点击右侧屏幕的“进入实操”再进行后续操作

第一步：本次实验需要您通过领取阿里云云工开物学生专属300元抵扣券兑换本次实操的云资源，如未领取请先点击领取。（若已领取请跳过）

重要

实验产生的费用优先使用优惠券，优惠券使用完毕后需您自行承担。

学生认证

第二步：进入并开通PAI ArtLab并授权

点击访问PAI ArtLab平台
初次进入平台，依次点击两步，完成PAI ArtLab平台开通与授权
完成PAI ArtLab平台开通与授权，进入到首页

实验一：生成居家电器

一、拉起SD共享版服务
在工具箱页面，选择SD共享版工具（初次拉起需要一些时间请耐心等待）
二、选择生图模式
先选择文生图模式，再选择一个Stable Diffusion模型（模型推荐：majicmixRealistic_v7，可在模型广场中找到，添加到“我的模型”后，点击添加到SD共享版即可使用）
三、在图上标注位置输入提示词
- 正向提示词：（产品描述）
  可直接复制：grey background,masterpiece,best quality,gold line on surface,side view,(white plastic:1.3),blurry background,depth of field,shiny,realistic,wide angle,top view,screen,glowing,top down view,round buttons,
- 负向提示词：
  可直接复制：((blurred)), ((disorderly)), ((bad art)), ((morbid)), ((Luminous)), out of frame, not clear, overexposure, lens flare, bokeh, jpeg artifacts, glowing light, (low quality:2.0),((black color)), shadowlowers, bad anatomy, ((bad hands)), (worst quality:2), (low quality:2), (normal quality:2), lowres, bad anatomy, text, error
四、选择LORA模型
- 点击Lora
- 选择Lora模型：IDmodernstyle
- 在正向提示中会出现相对应的lora模型关键词以及权重，及 <lora模型:1>，并将Lora后的权重改为0.7
五、选择迭代步数和图片尺寸
- 迭代部署：选择30（Lora：IDmodernstyle）
  说明
  注意：根据选择的大模型和Lora模型而定，下图为通过xyz测试得出的该模型合适的步数为22-35，权重适合在0.7-0.8如果选择其他的模型请根据模型简介提示或者使用xyz测试进行步数测试
  图片尺寸：采用512*768，生图后可通过高清修复进行尺寸扩展。
- 打开高清修复，放大算法选择4x-UltraSharp，高分迭代步数15（是迭代步数的一半最佳），重绘幅度0.4
- 填写图片放大尺寸，根据需求放大
- 填写提示词：
  - 正向提示词：（所需产品描述）
    masterpiece,(((on a white background))),dynamic,best quality,product design,Product photography,industrial design,layered design techniques,White Highlight Material,highres,absurdres,incredibly absurdres,huge filesize,4k,(computer rendering),keyshot render,realistic,Photograph,UE 5,Advertisementgraphic,studio light,Neutral Color Scheme,wide_shot,Oblique Perspective View
  - 反向提示词：
    ((blurred)),((disorderly)),((bad art)),((morbid)),((Luminous)),out of frame,not clear,overexposure,lens flare,bokeh,jpeg artifacts,glowing light,(low quality:2),((black color)),shadowlowers,bad anatomy,((bad hands)),(worst quality:2),(low quality:2),(normal quality:2),lowres,bad anatomy,text,error,
六、图片生成
在确认完上述内容后，可通过改变单次数量增加生图的数量。
点击生成
七、效果展示

实验二：生成产品手绘

一、选择生图模式
先选择一个Stable Diffusion模型（大模型推荐：Anything V5/Ink），再选择文生图
二、在图上标注位置输入提示词
- 正向提示词：（产品描述）
  可直接复制：HRD, HUD, 8K,masterpiece, best quality,highly detailed,product design,no humans,white background,traditional media,simple background,monochrome,sketch,english text,greyscale,still life,artist name,pencil,pen,arrow symbol,graphite medium,signature,motor vehicle,
- 负向提示词：
  可直接复制：((blurred)), ((disorderly)), ((bad art)), ((morbid)), ((Luminous)), out of frame, not clear, overexposure, lens flare, bokeh, jpeg artifacts, glowing light, (low quality:2.0),((black color)), shadowlowers, bad anatomy, ((bad hands)), (worst quality:2), (low quality:2), (normal quality:2), lowres, bad anatomy, text, error
三、选择LORA模型
- 点击Lora
- 选择安装的Lora模型：IDmultiangledraft
- 在正向提示中会出现相对应的lora模型关键词以及权重，及 <lora模型:1>
四、选择迭代步数和图片尺寸
- 迭代部署：选择22
  说明
  注意：根据选择的大模型和Lora模型而定，下图为通过xyz测试得出的该模型合适的步数为22，如果选择其他的模型请根据模型简介提示或者使用xyz测试进行步数测试
  图片尺寸：采用512*768，生图后可通过高清修复进行尺寸扩展。
- 打开高清修复，放大算法选择4x-UltraSharp，高分迭代步数14（是迭代步数的一般最佳），重绘幅度0.4
- 填写扩大倍数，根据放大需求进行调整
- 填写提示词，参考5.2
五、图片生成
在确认完上述内容后，可通过改变单次数量增加生图的数量。
点击生成
六、效果展示

实验三：线稿转效果图以及产品效果图生成

一、选择生图模式
先选择一个Stable Diffusion模型（模型推荐：majicMIX realistic），再选择文生图
二、在图上标注位置输入提示词
- 正向提示词：（产品描述）
  可直接复制：((HRD, HUD, 8K)),((masterpiece, best quality)),highly detailed,product design,
- 负向提示词：
  可直接复制：((blurred)), ((disorderly)), ((bad art)), ((morbid)), ((Luminous)), out of frame, not clear, overexposure, lens flare, bokeh, jpeg artifacts, glowing light, (low quality:2.0),((black color)), shadowlowers, bad anatomy, ((bad hands)), (worst quality:2), (low quality:2), (normal quality:2), lowres, bad anatomy, text, error
三、打开controlnet
- 勾选启用、完美像素模式、允许预览
- 上传准备好的白底黑边线稿和产品图（如下图）
- 控制类型选择Lineart或者canny，其中Lineart的效果较为干净；canny更有创造力，可根据需求进行选择，以下是不同步数下两者的对比
- 点击爆炸图标即可预览线稿处理效果
四、选择LORA模型
- 点击Lora
- 选择想要产出风格的Lora模型，这边作者使用的模型分别为：IDmodernstyle、产品摄影、product design
- 在正向提示中会出现相对应的lora模型关键词以及权重，及 <lora模型:1>
- 修改Lora模型，同时注意相关Lora模型有着特定的触发关键词，需将其填入关键词框中：
  - 产品摄影的触发关键词：
    Outdoor, bottle, water, without humans, still life, blurry, bubble, scenery, water drop, ocean, day, sky, blue sky, cloud, blurry background, depth of field, reflection, solo, rock, motion blur, mountain, white flowers, cherry blossoms, branch, ice
  - product design的触发关键词：
    (masterpiece, top quality, best quality, official art, beautiful and aesthetic:1.2),(8k, best quality, masterpiece:1.2),CGproduct bsw,no humans,sky,outdoors,scenery,cloud,day,blue sky,nature,water,bottle,grass,blurry,lake,cloudy sky,tree,
  - IDmodernstyle的触发关键词：
    CGproduct bsw, no humans, scenery, outdoors, nature, sunlight, blurry, day, water, english text, tree, hat, depth of field, light rays, forest, grass, rock， flower, sky, cloud, blue sky, bottle, grass, leaf, plant, sunflower，still life, reflection, leaf
五、选择迭代步数和图片尺寸
- 迭代步数：选择22（Lora：IDmodernstyle）、24（产品摄影）、24（product design）
  说明
  注意：根据选择的大模型和Lora模型而定，下图为通过xyz测试得出的该模型合适的步数为30，24，如果选择其他的模型请根据模型简介提示或者使用xyz测试进行步数测试
  - IDmodernstyle的相关测试：
  - 产品摄影的相关测试：
  - product design
  图片尺寸：采用512*768，生图后可通过高清修复进行尺寸扩展。
- 打开高清修复，放大算法选择4x-UltraSharp，高分迭代步数14（是迭代步数的一般最佳），重绘幅度0.4
- 填写准备好的白底黑边线稿的图片尺寸，尺寸如果大于1024，需要等比缩小填写
- 填写提示词（参考实验一的第三步）
六、图片生成
在确认完上述内容后，可通过改变单次数量增加生图的数量。
点击生成
七、效果展示
线稿生成效果图
产品效果图生成（可根据网上收集的多种风格Lora进行生成，与前者同理）

清理资源

如果无需继续使用工具，您可以按照以下操作步骤停止或删除工具。
- 在PAI ArtLab控制台中，关闭Stable Diffusion（共享版）页签，EAS模型服务将会停止，不会继续收费。
前往PAI ArtLab控制台
在页面左上方，选择模型所在地域，本实验EAS实例所在地域为华东2（上海）
在左侧导航栏单击工作空间列表，在工作空间列表页面中单击默认工作空间名称，进入对应工作空间内。
在工作空间页面的左侧导航栏中单击模型在线服务（EAS）。在模型在线服务（EAS）页面，找到目标服务。单击其右侧操作列下的删除
如果需要继续使用Stable Diffusion（共享版），请随时关注账号扣费情况，避免模型会因欠费而被自动停止。

场景简介

探索AI如何助力工业产品设计，让创意无限飞翔！本实验旨在探索利用AI工具辅助设计师快速生成高质量工业与产品设计的可能性，通过将AI技术融入设计流程来提高效率、激发创意并提供新的视角！
在本实验场景中，将使用阿里云一站式 AIGC 设计平台 PAI ArtLab，云端一键启动 Stable Diffusion WebUI（共享版）工具，零代码无需部署即可体验 Stable Diffusion 文生图模型。本实验依赖两款云产品，分别是对象存储 OSS 和模型在线服务 PAI-EAS，对象存储 OSS 支持模型、图像、文本等文件的存储、预览及下载等能力。模型在线服务 PAI-EAS 支持利用云上 GPU 进行模型在线推理生图。
本实验场景无需深奥的AI背景知识，只需启动生图工具，依据实验教程文档，在生图工具界面输入图像生成的提示词，即可轻松完成本实验获取AI生成图像，感受AIGC的魅力。
在使用平台工具过程中，如有任何疑问和建议，您可以加入钉钉群（群号：88010006410）反馈，并获取技术支持。

背景知识

智能设计（PAI ArtLab）
- PAI ArtLab是由阿里云人工智能平台PAI联合阿里云智能设计部共同打造的平台产品，面向设计场景，旨在为设计师提供自动化设计工具的一站式AIGC设计平台。平台打通了数据集管理与模型训练、AI绘图与在线推理的全场景链路，集成了主流的文生图类型的AIGC大模型工具及文生图模型开箱即用。设计师无需编程功底也可利用AI技术进行批量自动化图片生产，有效降低文生图大模型的使用学习成本和技术门槛，为设计想象力和设计生产力加速。帮助您在设计、艺术、创意行业快速应用AIGC能力。
PAI ArtLab平台依赖以下两款云产品：
1. 对象存储OSS：模型、图像、文本等文件的存储、预览及下载会消耗此产品资源；
2. 模型在线服务PAI-EAS：利用云上GPU进行模型在线推理会消耗此产品资源;
  (在您使用平台、用代金券进行资源抵扣及付费购买的过程中，会感知到以上2款阿里云产
  品。

关闭实验

在完成实验后，点击 结束实操
点击取消回到实验页面，点击确定跳转实验评分
请为本次实验评分，并给出您的建议，点击确认，结束本次实验

实验室资源方式简介

平台开通及授权

实验一：生成居家电器

一、拉起SD共享版服务

二、选择生图模式

三、在图上标注位置输入提示词

正向提示词：（产品描述）

负向提示词：

四、选择LORA模型

五、选择迭代步数和图片尺寸

正向提示词：（所需产品描述）

反向提示词：

六、图片生成

七、效果展示

实验二：生成产品手绘

一、选择生图模式

二、在图上标注位置输入提示词

正向提示词：（产品描述）

负向提示词：

三、选择LORA模型

四、选择迭代步数和图片尺寸

五、图片生成

六、效果展示

实验三：线稿转效果图以及产品效果图生成

一、选择生图模式

二、在图上标注位置输入提示词

正向提示词：（产品描述）

负向提示词：

三、打开controlnet

四、选择LORA模型

产品摄影的触发关键词：

product design的触发关键词：

IDmodernstyle的触发关键词：

五、选择迭代步数和图片尺寸

六、图片生成

七、效果展示

清理资源

场景简介

背景知识

关闭实验