在我们的controlnet中,手部识别一直使用的是openpose预处理器,但是有些情况下,复杂的手势是无法识别的。
比如,川建国同志的这张图。
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-27231649d139faae44a7de3380b95965.png)
我们使用openpose-hand预处理器,检测出来的却没有手部。
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-a27b319f69482694fa8330cd9e746cf9.png)
今天给大家推荐一款controlnet最新的预处理器,它能完美解决AI对于手部的识别问题,它就是——dw openpose
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-23f7329ea0c91ef97838bb3d6742ce4f.png)
大家从我的云盘中下载这个文件,将它放入到SD的这个目录下:extensionssd-webui-controlnetannotatordownloadsopenpose ![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-2ae5e31899f25c4a602b25c59c4d43d7.png)
我们刷新一下,就可以看到这个预处理器了,中文叫二阶蒸馏-全身姿态估计。
可以看到手部被完美的识别了出来。
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-83582e879c14d2f60f2455c995ea0d4c.png)
我们再试试,使用战狼的经典形象,原先的预处理器无法识别。好像这种带透视的,手臂不完整的,都比较难以识别。 ![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-1bc2bf880509346a49c5038eaf810341.png)
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-33388520cee00f607ef46a314b9be689.png)
出一张图试试看,可以看出,图中基本上复现了战狼这个手部的动作,但是感觉又挺奇怪的。
需要说明一下的是,目前这个DW Pose只是更精确的openpose预处理器,并没有对ControlNet的openpose模型做任何改动,所以只能说AI的理解能力更强了,但是动手能力还有待提高。控制力度更强的ControlNet openpose模型需要我们等待后续的更新了。 接下来,我们找一张难度没有那么大的图片试一试吧。
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-2c7db8e1cbfb1533687700a6c9db45d0.png)
我们使用之前的预处理发现,这种手臂不完整的图片还是没办法很好地识别出手部的。
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-02a3c159750b3382b56fca51e7174924.png)
接下来,运用我们的dw-pose预处理,一键搞定!
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-e3e596dd8184bfdf9155330e39a5359c.png)
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-96d44bd2811b13b596f7f27ae563497a.png)
调整好之后,我们将骨骼图发送回controlnet。 ![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-67c3463be7e09d3b233450f5d62f8707.png)
正向提示词:1girl,solo,long hair,looking at viewer,jewelry,earrings,indoors,bangs,dress,blush,plant,multicolored hair,upper body,shelf,pink eyes,window,potted plant,flower,closed mouth,from side,wavy hair,bare shoulders,sleeveless,pink hair,kitchen,breasts,blue dress,white hair,
负向提示词:EasyNegative, badhandsv5-neg,Subtitles,word ![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-583614be45a31d1d7275b0cebe0ebf47.png)
一口气生成了八张图,选择一张合适的,然后使用差异随机种子进行一个细节微调。
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-6e2dbc3829d1ea5d2237784580bbc039.png)
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-d404dd4347541c7ecf9e01968d030074.png)
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-b70fc1ede79834a0bb827319ec665f07.png)
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-b297e940e8b317e9366803c83278d6c4.png)
![](//aicdn.uxlib.cn/wp-content/uploads/2023/09/frc-69fe84e51c8c3aaa6e2a30a46f2cce1c.png)
以上,就是关于controlnet新预处理器dw openpose的讲解,它可以识别出以往我们无法预览的骨骼图。想要的话,可以添加我的公众号【白马与少年】,回复【SD】即可。
链接已复制