动漫网站开发,网站后台如何添加代码,网站建设公司找哪家,宁波南部商务区网站建设活动地址#xff1a; https://developer.aliyun.com/topic/aigc_pai/newyear 教程简述
生成式AI技术批量产出真/像/美的个人写真应用非常受欢迎。近期上线的EasyPhoto 作为一款开源的 SD WebUI 插件#xff0c;提供更灵活、易用的开发方式#xff0c;受到大量开发者们的关注…活动地址 https://developer.aliyun.com/topic/aigc_pai/newyear 教程简述
生成式AI技术批量产出真/像/美的个人写真应用非常受欢迎。近期上线的EasyPhoto 作为一款开源的 SD WebUI 插件提供更灵活、易用的开发方式受到大量开发者们的关注和好评用户可通过上传若干张同一人的照片即可快速训练 LoRA 模型并结合用户自定义的模板图片最终生成真、像、美的写真照片。
EasyPhoto 是一个Webui UI插件用于生成AI肖像画。基于StableDiffusion 人物定制Lora ControlNet 的方式实现支持低代码操作、自定义风格内置丰富模版让更多开发者可以灵活地开发自己的风格化的艺术照生成。 本次AIGC创作活动基于阿里云人工智能平台PAI低代码高效率启动EasyPhoto实现节日氛围美图的快速生成。
基于本教程可以体验
新用户可免费领取价值万元的人工智能平台PAI 试用资源
基于交互式建模PAI-DSW 训练个人专属的 LoRA 模型
节日AI写真新创作体验生成圣诞/新年等节日氛围感满满的个性化 AI 写真
提交作品Redmi Watch3、小米手环8等赢取精美好礼
使用PAI 快速启动 EasyPhoto
1. 准备工作
1.1 领取交互式建模PAI-DSW免费试用权益
前往本次「hi 2024AI新年写真大挑战」活动页面领取交互式建模PAI-DSW产品免费试用资源包 对于交互式建模 PAI-DSW 的新用户阿里云提供了5000CU*H 的免费试用资源可以在活动页面中直接领取试用规则请参照阿里云免费试用https://free.aliyun.com/或可以购买交互式建模 PAI-DSW 资源包参与活动购买链接PAI-DSW 100CU*H资源包价格 59 元起如不购买资源包PAI-DSW 会按量进行计费计费标准详见阿里云产品定价。
1.2 创建PAI-DSW实例
前往人工智能平台PAI控制台链接https://pai.console.aliyun.com/开通人工智能PAI并创建默认工作空间。请参见开通并创建默认工作空间。在人工智能平台PAI控制台内选择交互式建模PAI-DSW 4.点击创建实例如上图
5.自定义输入实例名称如“easyphoto” 6.选择实例机型GPU分类-ecs.gn6v-c8g1.2xlarge(支持资源包抵扣)或GPU分类-ecs.gn7i-c8g1.2xlarge
(支持资源包抵扣)。若这两个机型库存可更换地域尝试或选择其他付费机型不支持免费试用。 7.选择镜像stable-diffusion-webui-develop:1.0.0-pytorch2.01-gpu-py310-cu117-ubuntu22.04 8.点击“下一步” 9.确认【资源配置】及【镜像】如图所示点击创建实例 10.大约等到3-5分钟实例状态变为「运行中」实例创建完成 1.3 在PAI-DSW中打开EasyPhoto教程体验零代码完成AI开发
打开链接基于EasyPhoto的AI新年-圣诞写真大挑战 (WebUI版)点击右上角「在阿里云DSW打开」 2.选择先前创建好的实例点击实例名称 3.进入notebook开发界面逐步点击运行按钮依次运行 1.环境安装 节的单元格3个 定义函数-下载代码-下载模型可下载并安装预置的带有EasyPhoto插件的WebUI即所依赖的模型。 4.运行 2.启动WebUI 节的单元格可打开WebUI。
5.单击生成的链接进入WebUI 打开WebUI进入体验环节在WebUI里运行EasyPhoto
2. 开始体验
您可以使用本教程生成自己的节日写真/动图我们提供了如下的功能
人物写真Photo Inference 指定图片的人物写真 Photo2Photo指定文本的人物写真 Text2Photo人物动图Video Inference 指定文本的人物动图 Text2Video指定图片的人物动图 Image2Video指定视频的人物动图 Video2Video
大体上人物写真/动图的生成分为以下两个步骤
Step1: 训练属于人物的数字分身Step2: 基于数字分身进行图像/视频生成
生成图片请参考2.2板块生成视频请参考2.3板块。
2.1 数字分身训练
Step1: 点击EasyPhoto选项卡Step2: 点击Upload Photos 上传自己的训练图片 (5-20张清晰的人像最好为半身/正面)
若无10张个人清晰人像照片可选择蒙娜丽莎照片作为测试蒙娜丽莎照片下载链接https://pai-aigc-photog.oss-cn-hangzhou.aliyuncs.com/webui/mona.zip
Step3: 点击Start Training 在弹框中输入任意的user id (英文) 我们为您内置了写实/动漫风格的两种基模型供您选择您也可以根据喜好选择自己的基模型。 ⚠️请注意如在训练过程中出现如图所示的前端断连不用担心您可在notebook后台看见训练进度。待训练完成后刷新前端页面可以进行模型推理。
前端断连连接超时 确保后台在训练即可 训练完成提醒 SDWebUI 前端 notebook后端 2.2 图像推理 Photo Inference
您可使用Photo Inference 进行图像推理我们支持
指定图像的人物写真Photo2Photo指定文本的人物写真Text2Photo
2.2.1 指定图像的人物写真
Step 1: 切到Photo inference选项卡Step 2: 选择一种合适的图片上传方式 从模版中选择Template Gallery需在Gallery中选择一张图片自行上传单张Single Image Upload批量上传模版Batch Image Upload Step 3: 选择基模型和UserId对应的LoRA模型 可点击 刷新 图标 获得所有的UserID列表 使用Infer With IPA时 无需训练自己的数字分身直接在弹出的图片框中上传一张图进行生成。 Step 4: 可在Advanced Option选项卡中设置相关的参数 可打开background restore并调整重绘幅度对模版图片进行重绘来达到不同的生成效果。 Step 5: 点击Start Generation 进行模型推理生成专属于您的AI写真 稍等约1-2分钟后图片生成完成可下载存储图片 Step6: 您可进一步选择生成图片单击Text Options选择一个合适的模版添加艺术字效果生成的结果将出现在Results 的右侧。 将图片提交至活动页参与评奖活动
⚠️ 若出现如下提示请设置ControlNet 数目4。在控制台退出并重启WebUI进行设置。
Step1: 选择 设置 菜单Step2: 在左侧菜单栏中找到ControlNetStep3: 将Multi-ControlNet数目设置4Step4: 点击保存设置Step5: 回到notebook页面停止并重新启动SDWebUI 2.2.2 指定文本的人物写真
Step 1: 切到Text2Photo选项卡Step 2: 选择一种合适的场景Step 3: 修改相关的文本描述 Step4: 设置生成图像分辨率Step5: 进一步选择/上传 控制图像姿态控制 OpenPose Step6: 与图生图一致的设置 基模型/User_id 及其他参数进行图像生成并在生成完成后自行添加艺术字效果。 * 您可以参考这里的使用方式来进一步训练自己的节日场景多样化的生成人像写真
2.3 视频推理 (Video Inference)
您可使用Video Inference 进行视频推理我们支持
指定文本的人物动图Text2Video指定图像的人物动图Image2Video指定视频的人物动图Video2Video
2.3.1 指定文本的人物动图
Step 1: 切到Video inference选项卡Step 2: 选择一个合适的场景并修改相应的prompy与 指定文本的人物写真 操作相同Step 3: 设置图像大小或上传一个用于控制的视频并选择合适的控制方式。 Step 4: 设置基模型、user_id 以及相关的参数。
⚠️ 我们默认打开了lcm 用于视频生成的加速您可关闭该选项用更多的生成步数来生成更细节的视频结果。 Step 5: 点击 Start Generation 来生成视频 如前端错误后台显示生成完成您可单击 List Recent Conversion Results 来下载/查看 生成的历史视频。(无需刷新) Step 6: 点击 Text Option 来对生成视频添加艺术字效果。您可以选择某一帧或将艺术字效果应用于整段视频。 2.3.2 指定图像的人物动图
Step1: 上传一张 人物图 可通过 按钮 将生成的人物写真发送至此/ 上传首、尾图 Step2: 设置基模型、user_id 及相关参数。点击Start Generation 可进行视频的生成。并使用Text Options进行艺术字的添加。 2.3.3 指定视频的人物动图
Step1: 上传一段人物视频Step2: 设置基模型、user_id 及相关参数。点击Start Generation 可进行视频的生成。并使用Text Options进行艺术字的添加。
3. 资源清理及后续
3.1 清理
在实验完成后可前往对应产品控制台停止或删除实例两个操作均可避免实例持续处于运行中在超出免费试用额度后带来额外的扣费 后续仍考虑使用该实例停止后续不再使用该实例删除成功停止后即停止资源消耗。
3.2 后续
在试用有效期期间您还可以继续使用DSW实例进行模型训练和推理验证。
附
欢迎共建 EasyPhoto Github地址https://github.com/aigc-apps/sd-webui-EasyPhoto
原文链接
本文为阿里云原创内容未经允许不得转载。
