回看之前的文章,小编曾经说过美颜SDK的发展历程是由“局部美颜”到“全身美颜“的历程。如今,美颜SDK已经应用到了各大场景之中,特别是直播、短视频场景,此类平台的侧重点为美颜与多元化的趣味视频拍摄方式,区别于传统的图文场景,短视频和直播美颜SDK大多数功能都是以“全身美颜”为主。那么,全身美颜依托于哪些技术实现呢?下文小编为大家讲解一下。
一、人体检测技术
如果读过小编之前的文章实际上不难发现,全身美颜和局部美颜有一定的相似性,人脸美颜依托的是人脸检测技术,而全身美颜是基于“人体检测技术”,大家可以把人体检测技术理解为“放大版”的人脸识别技术。此技术通过检测人体关键点之间的连线表述大部分肢体运动,此项技术的加入有效提升直播美颜SDK的玩法分支。目前,业内常用的解决方式是OpenPose,这个方案用来实现多线程的多人关键点实时检测,整体效果还算不错,能同时渲染接近20个关键点的身体和位姿,但是它有一个缺点,那就是“库”占用的内容过多。
二、人体检测技术在美颜SDK中的具体应用
人体检测技术可以实现美型功能和多种趣味功能,其中最为常见的就是瘦身效果,目前有些美颜SDK厂商已经实现了对单张图片或者视频进行四肢拉伸的效果,用iPhone的小伙伴应该比较清楚,相册中的矩阵拉伸便是这个原理,小编在这里就不过多介绍了,大家可以去测试一下。
总体而言,最主要的应用场景还是视频拍摄时追踪身体的关键点,精确定位身体的各大部位,如手臂、头部、腿部、躯干等,进阶的美颜SDK甚至可以定位躯干的详细信息,长度、大小等,基于这些信息便可以实现“长腿、美型、小头”等,这也是一些美颜APP中一些常用的图片美化功能。
美颜SDK接入直播和短视频平台后还拓展了更为高级的玩法,例如手势识别、依托于动作识别打造的互动小游戏等,目前此技术的实现难点主要体现在实时直播和复杂动作两个方面,因为涉及大量的算法,需要经过大量的深度学习提高准确度。
如果您对美颜SDK技术感兴趣,请关注我!后续小编会为大家更新更多美颜SDK相关知识。