在AI绘画中,有时候我们需要主角(人物或动物)摆出特定的姿势,该怎么做呢?下面我们将介绍两种方法。
首先打开StableDiffusion界面,点击imag2img下面出现一个”dropimagehereorclicktoupload”的方框,从网上找一张你希望呈现的姿势图片,比如一个老鹰,姿势:双眼盯着远方。把这张图片拖拽到方框,或者从本地电脑上传。然后在提示词框里输入提示词,比如:adragon,然后点击generate生成图像。
但是这样生成的图像,姿势不好控制,有些会比较像,有些差很远。
ControlNet是一个很强大的stableDiffusion插件,可以精准的控制AI绘画中人物或动物的姿势,从而生成很多好玩有创意的图片。
在使用ControlNet之前,需要先下载ControlNet模型。现在大部分stableDiffusion的colab包都自带ControlNet,如果你使用的版本里没有,可以打开extensions,在安装时勾选ControlNet下载ControlNet模型那一栏,选择通用的姿势控制模型ControlNet_openpose(也可以都选)。
现在,打开stableDiffusion,可以在提示词框下面看到controlnet的按钮有一个Enable的方框,勾选,就启用controlnet了。
我们来测试下controlnet的效果。先不启用controlnet,输入提示词,生成如下图片,可以看到图片中人物的姿势各异。然后我们上传一张瑜伽动作姿势的图片到controlnet,然后勾选enable,Preprocessor选择openpose,Model选择openpose-sd21-safe[2be3125b]再次点击generate按钮,这时候生成的图片基本保持了和上传图像中的瑜伽动作但是,这个动作和源照片中的瑜伽动作差距有些大,生成效果不是很理想。
Controlnet的Preprocessor有很多种模型可选:canny、depth、depth_leres、hed、mlsd、normal_map、openpose、openposehand、clip_vision、color、pidinet、scribble、fake_scribble、segmentation、binary。这些都是不同的模型采用的不同方法来控制姿势,并没有谁更好谁更差,而是需要根据需要和图像特征来选择对应的合适模型。
通常来说,对于人像,HED模型可以最精准的复制人物动作。Canny、depth、normal也不错,但是有时可能会有一些变形。从上面图像来看,不仅复制了动作,还复制了、发型和衣服,效果不是很理想。OpenPose在复制动作的同时,则没有死板的去复制衣服和发型,而是精准的生成提示词中的内容,可以说是形神兼备,效果最佳。mLSD则完全不适合人像,复制效果非常差。
关键词
AI快速写作工具
AI内容生成和写作助手
Notion推出的AI内容创作助手
AI改写、纠错、润色辅助工具
彩云科技推出的智能AI故事写作工具
AI英/德语写作润色和改进工具
三个国外专业免费的调色网站
分类标签调色网站免费
04-1816:42
电影制作中的纹理技术
纹理在电影制作中的重要性纹理是指将详细的表面特征应用于3D模型或视觉效果元素,使其看起来更逼真。纹理对于创建视觉上引人入胜且可信的电影场景至关重要,尤其是涉及CGI、动画或特效的场景。纹理还支持叙事和讲故事,可以通过纹理设置年龄大小等属性,为故事奠定基础。纹理技术的发展历程自胶片问世以来,电影制作人
分类标签纹理电影制作CGI视觉效果微缩模型UV映射
UnrealSynth虚幻合成数据生成器-NSDT
UnrealSynth虚幻合成数据生成器-NSDTUnrealSynth基于UE5虚幻引擎开发,可用于生成合成数据集,包括图像和标注数据。可用于各种行业细分场景中目标识别任务的实施效率提高。UnrealSynth合成数据工具包内容UnrealSynth基于UE5虚幻引擎开发,目前支持YOLO系列模型
分类标签UnrealSynth虚幻引擎数据合成YOLO模型深度学习训练数据
人工智能与音乐:谷歌的ProjectMagenta
谷歌的ProjectMagenta利用人工智能技术生成音乐和其他艺术形式,如素描、视频和笑话。该项目的目标是为人们创造新的交流方式。本文介绍了该项目的背景、发展历程和应用。在上世纪90年代中期,谷歌研究院的DouglasEck就开始了他的人生目标:融合人工智能与音乐。二十年后,他与一支谷歌研究团
分类标签人工智能音乐谷歌
如何做好SEO优化?
分类标签SEO优化关键词定位网站架构布局
12-1108:19
万兴科技:营收实现稳健增长,拥抱AIGC新机遇
万兴科技:营收实现稳健增长,拥抱AIGC新机遇国元证券股份有限公司耿军军近期对万兴科技进行研究并发布了研究报告《2022年年度报告点评:营收实现稳健增长,拥抱AIGC新机遇》,本报告对万兴科技给出买入评级,当前股价为75.24元。万兴科技(300624)事件:公司于2023年4月7日收盘后发布《20
分类标签万兴科技营收增长AIGC
12-1102:11
AI分身市场潜力巨大,万兴科技、京东等已率先布局
“AI孙燕姿”和“CarynAI”引爆市场最近,“AI孙燕姿”和“CarynAI”以以假乱真的程度引爆市场,都是通过采集本人的语音、文字、图像等素材,并通过开源的生成式训练模型进行训练而成。其中,“CarynAI”成功地借助AI技术,打造了自己的AI分身,通过付费的方式,跟AI版的自己进行交往,预计
分类标签AI孙燕姿CarynAIAI分身AIGC技术虚拟主播数字人
12-1102:10
万兴科技推出名师必备讲演神器“万兴智演”
万兴科技推出名师必备讲演神器“万兴智演”9月8日,万兴科技面向泛知识领域,推出名师必备讲演神器“万兴智演”。该款AI演示新品集成强大的AIGC能力、精美的行业课程模板以及动画特效素材,大大简化课件制作过程。同时,产品内置强大的录制、直播功能,通过真人实拍与演示内容相结合的形式,实现人景融合的实时演示