☺ 致力于提供可立即上线运营的直播平台 ☺ 咨询电话:010-57019921  客服QQ:3004329713

APP直播系统中添加“萌颜”效果

    美颜滤镜的实现原理,已经能够体会到GPUImage 的强大。现在介绍的“萌颜”动态贴纸效果也是基于GPUImage实现的。

1.核心原理

       贴纸效果其实就是在人脸上贴一些图片,同时这些图片是跟随着人脸的位置改变的。如果我们不强调贴图的位置,这就是一个简单的水印需求。

    根据人脸检测的结果动态调整水印贴纸的位置即可实现简单的“萌颜”效果。

2.水印

       在GPUImage的官方demo中就已经有文字水印的实现。        

      要理解它的实现原理,需要搞懂GPUImageUIElement和GPUImageAlphaBlendFilter。GPUImageUIElement的作用是把一个视图的layer通过CALayer的renderInContext:方法把layer转化为image,然后作为OpenGL的纹理传给GPUImageAlphaBlendFilter。而GPUImageAlphaBlendFilter则是一个两输入的blend filter, 它的第一个输入是摄像头数据,第二个输入则是刚刚提到的GPUImageUIElement的数据,GPUImageAlphaBlendFilter将这两个输入做alpha blend,可以简单的理解为将第二个输入叠加到第一个的上面,更多关于alpha blend在维基百科上有介绍。下图是整个加水印的过程:

3.人脸检测

    利用CIDetector即可简单的实现人脸检测,首先是CIDetector的初始化。然后通过将摄像头数据CMSampleBufferRef转化为CIImage,对CIImage用CIDetector进行人脸检测。得到的features数组里的每个元素都是CIFaceFeature对象,根据它就能计算出人脸的具体位置,从而调整中水印图像的位置,达到图像跟随人脸动的效果。最后计算人脸位置faceBounds的方法,我们再根据faceBounds来更新水印图像的位置。


QQ在线咨询
咨询QQ
3004329713
咨询热线
010-57019921