AI效果图生成-局部精准生成

实验室资源方式简介

进入实操前，请确保阿里云账号满足以下条件：

• 个人账号资源

  • 使用您个人的云资源进行操作，资源归属于个人。

  • 平台仅提供手册参考，不会对资源做任何操作。

• 确保已完成云工开物300元代金券领取。

• 已通过实名认证且账户余额≥100元。

本实验，预计产生费用：约4.6元——启动工具不计费，仅生图时，按照生图实际消耗的GPU时间计费(0.46元/分钟)。

如果您调整了资源规格、使用时长，或执行了本方案以外的操作，可能导致费用发生变化，请以控制台显示的实际价格和最终账单为准。

平台开通及授权

在开始实验之前，请先点击右侧屏幕的“进入实操”再进行后续操作

第一步：本次实验需要您通过领取阿里云云工开物学生专属300元抵扣券兑换本次实操的云资源，如未领取请先点击领取。（若已领取请跳过）

第二步：进入并开通PAI ArtLab并授权

• 点击访问PAI ArtLab平台

• 初次进入平台，依次点击两步，完成PAI ArtLab平台开通与授权

  

• 完成PAI ArtLab平台开通与授权，进入到首页

  

实验一：建筑换背景

• 一、拉起SD共享版服务

  1、在工具箱页面，单击StableDiffusion（共享版）。

  2、在费用提示对话框中，单击确定。

  

  3、请您耐心等待服务启动，首次启动服务大约需要5~10分钟，非首次启动服务大约需要2~3分钟。

  

  4、服务启动后，点击Stable Diffusion模型，选择laowang_ARCH_MIX_V0.5.safetensors。

  

• 二、选择图生图模式

  1、生图模式选择图生图模式。

  

  2、再图生图的Generation里选择上传重绘蒙版。

  

• 三、上传图片

  1、素材需要经过ps处理才能使用，这里是要改背景，所以将建筑框选。

  

  2、上传原图素材和蒙版素材。

  

  3、参数方面，迭代步数选择30，单批数量选择4。

  

  4、图片尺寸记得要更改到和原图尺寸大小一致，点击三角尺的图标，自动更改尺寸。

  

• 四、填写正向和反向提示词，提示词参考。

  • 正向提示词：

    Noon sunshine,sun,blue sky,cloud,(masterpiece), (high quality), best quality, real,(realistic), super detailed, (full detail),(4k),8k,scenery, outdoors,day,

  • 反向提示词：

    lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit,fewer digits, cropped, worst quality, low quality,normal quality, jpeg artifacts, signature,watermark, username, blurry,(worst quality:1.4),(low quality:1.4), (monochrome:1.1), Eagetive,

• 五、点击生成

  1、点击生成提示词完成，点击生成。

  

  2、点击生成后请您耐心等待，大约需要0.5~2分钟。

  

  3、最后获得蓝天白云的背景。

  

  4、接下来在做一个雪山的背景，填写提示词，提示词分享。

  • 正向提示词：

    snow,sky,scenery,mountain,outdoors,(masterpiece), (high quality), best quality, real,(realistic), super detailed, (full detail),(4k),8k,scenery, outdoors,day,

  • 反向提示词：

    lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit,fewer digits, cropped, worst quality, low quality,normal quality, jpeg artifacts, signature,watermark, username, blurry,(worst quality:1.4),(low quality:1.4), (monochrome:1.1), Eagetive,

  5、填写完后，需要用到一个Lora，点击Lora

  

  6、选择名称是snowview的Lora模型。

  

  7、提示词完成，点击生成。

  

  8、点击生成后请您耐心等待，大约需要0.5~2分钟。

  

  9、最后获得雪山背景建筑图片。

  

实验二：室内家具换装秀

• 一、拉起SD共享版服务

  1、在工具箱页面，单击StableDiffusion（共享版）。

  2、在费用提示对话框中，单击确定。

  

  3、请您耐心等待服务启动，首次启动服务大约需要5~10分钟，非首次启动服务大约需要2~3分钟。

  

  4、服务启动后，点击Stable Diffusion模型，选择laowang_ARCH_MIX_V0.5.safetensors。

  

• 二、选择图生图模式

  1、生图模式选择图生图模式。

  

  2、在图生图的Generation里选择局部重绘。

  

• 三、上传图片

  1、上传原图素材。

  

  2、将需要更改的部分进行蒙版绘制才能使用，这里是要改右下角沙发，所以将沙发涂抹，白色是蒙版部分。

  

  3、参数方面，迭代步数选择30，单批数量选择4。

  

  4、图片尺寸记得要更改到和原图尺寸大小一致，点击三角尺的图标，自动更改尺寸。

  

• 四、输入正向和反向提示词，提示词参考。

  • 正向提示词：

    ((best quality)),((masterpiece)),((realistic)),leather sofa, limited palette background,from below

  • 反向提示词：

    3d, cartoon, lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped,unrealisticdream,baddream,worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, artist name, young, loli, elf, 3d, illustration

• 五、点击生成

  1、点击生成提示词完成，点击生成。

  

  2、点击生成后请您耐心等待，大约需要0.5~2分钟。

  

  3、最后获得不同样式的沙发。

  

  4、如果有意向风格的家具，可以使用ControlNet。

  

  5、将启用、低显存模式、完美像素模式、Upload independent control image和允许预览全部点击。

  

  6、上传意向素材。

  

  7、ControlNet的控制类型选择点击IP-adapter，预处理器选择ip-adapter_clip_h。

  

  8、模型选择ip-adapter-plus_sd15 [137e273c]，控制权重选择0.3。

  

  9、点击生成后请您耐心等待，大约需要0.5~2分钟。

  

  10、最后获得意向沙发图片。

  

  11、想要更精准的控制，可以在图生图的Generation里选择上传重绘蒙版。

  

  12、素材需要经过ps处理才能使用，这里是要改家具，所以将除了家具的其它框选。

  

  13、上传原图素材和蒙版素材。

  

  14、再使用一个ControlNet，将启用、低显存模式、完美像素模式、Upload independent control image和允许预览全部点击。

  

  15、ControlNet的控制类型选择Lineart (线稿)。

  

  16、提示不变

  • 正向提示词：

    ((best quality)),((masterpiece)),((realistic)),leather sofa, limited palette background,from below

  • 反向提示词：

    3d,cartoon, lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped,unrealisticdream,baddream,worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, artist name, young, loli, elf, 3d, illustration

  17、点击生成提示词完成，点击生成

  

  18、获得意向沙发图片

  

清理资源

• 如果无需继续使用工具，您可以按照以下操作步骤停止或删除工具。

  • 在PAI ArtLab控制台中，关闭Stable Diffusion（共享版）页签，EAS模型服务将会停止，不会继续收费。

    

• 前往PAI ArtLab控制台

• 在页面左上方，选择模型所在地域，本实验EAS实例所在地域为华东2（上海）

• 在左侧导航栏单击工作空间列表，在工作空间列表页面中单击默认工作空间名称，进入对应工作空间内。

• 在工作空间页面的左侧导航栏中单击模型在线服务（EAS）。在模型在线服务（EAS）页面，找到目标服务。单击其右侧操作列下的删除

  • 

• 如果需要继续使用Stable Diffusion（共享版），请随时关注账号扣费情况，避免模型会因欠费而被自动停止。

场景简介

• 在这里，每一张图片都能激发无限创意，每一次转换都能成为你的创意杰作！上传你的图片，选择变换，即刻可以拥有一张风格迥异的图像，不管是背景、家具还是你的个性化创意，统统都能变成一场视觉盛宴！

• 在本实验场景中，将使用阿里云一站式 AIGC 设计平台 PAI ArtLab，云端一键启动 Stable Diffusion WebUI（共享版）工具，零代码无需部署即可体验 Stable Diffusion 文生图模型。本实验依赖两款云产品，分别是对象存储 OSS 和模型在线服务 PAI-EAS，对象存储 OSS 支持模型、图像、文本等文件的存储、预览及下载等能力。模型在线服务 PAI-EAS 支持利用云上 GPU 进行模型在线推理生图。

• 本实验场景无需深奥的AI背景知识，只需启动生图工具，依据实验教程文档，在生图工具界面输入图像生成的提示词，即可轻松完成本实验获取AI生成图像，感受AIGC的魅力。

• 在使用平台工具过程中，如有任何疑问和建议，您可以加入钉钉群（群号：88010006410）反馈，并获取技术支持。

背景知识

1. 智能设计（PAI ArtLab）

   • PAI ArtLab是由阿里云人工智能平台PAI联合阿里云智能设计部共同打造的平台产品，面向设计场景，旨在为设计师提供自动化设计工具的一站式AIGC设计平台。平台打通了数据集管理与模型训练、AI绘图与在线推理的全场景链路，集成了主流的文生图类型的AIGC大模型工具及文生图模型开箱即用。设计师无需编程功底也可利用AI技术进行批量自动化图片生产，有效降低文生图大模型的使用学习成本和技术门槛，为设计想象力和设计生产力加速。帮助您在设计、艺术、创意行业快速应用AIGC能力。

2. PAI ArtLab平台依赖以下两款云产品：

   1. 对象存储OSS：模型、图像、文本等文件的存储、预览及下载会消耗此产品资源；

   2. 模型在线服务PAI-EAS：利用云上GPU进行模型在线推理会消耗此产品资源;

      (在您使用平台、用代金券进行资源抵扣及付费购买的过程中，会感知到以上2款阿里云产

      品。

关闭实验

• 在完成实验后，点击 结束实操

  

• 点击 取消 回到实验页面，点击 确定 跳转实验评分

  

• 请为本次实验评分，并给出您的建议，点击 确认，结束本次实验