利用OpenCV抠图技术实现影视中“隐身”特效
点击我爱计算机视觉标星，更快获取CVML新技术
在电影电视制作的过程中，经常需要用到虚拟演播室，想想天气预报画面中经常会看到主持人前一会儿还置身于祖国*的炙热大街，一挥手就来到了辽阔无际的西北戈壁滩，这是怎么实现的呢？
实际上这都来自于计算机视觉技术：抠图后画面合成。
先来看一段哈利波特隐身的视频：
这样的特效我们在影视作品里看的多了，技术上如何实现呢？不会是后期请设计师ps吧？
使用计算机视觉里按照颜色抠图再合成就可以了，这个在英文里专业名字叫“Chroma Key”，不清楚这个过程为什么叫Key，可能它就像一个魔法键，按下去魔法就出来了吧^_^
前天LearnOpenCV博主发表了一篇博文，使用OpenCV实现上述隐身特效，让我们一起来看看吧。
主要原理
首先保存一幅场景图片，再使用特定颜色幕布遮盖身体，按照像素颜色替换成刚开始保存的场景图片中的像素。
当然，使用这种方法整个过程中摄像机不能移动！不然合成后身后的像素会看起来怪怪的。
请各位读者回头看看前面哈利波特的视频，披风刚拿出来的时候遮盖身体但此时并没有隐身，当他穿披风的时候，是把披风反过来穿的，因为披风另一面就是特定颜色的幕布。
可能很多朋友听过绿幕抠图，为什么我这里说是特定颜色的幕布？难道也有使用其他颜色的吗？
是的，使用什么颜色是按照场景来的，使用绿幕时场景中就不能摆放绿色的东西，如果要摆放带有绿叶的花草可能会使用红幕布，有时候也会使用蓝幕，跟场景内的物体颜色差异越大越好。
作者这里使用的是红色幕布。
算法步骤
步骤就比较简单了：
1.开始拍摄视频并保存背景图；
2.使用颜色检测算法检测红色幕布；
3.通过生成蒙版将红色幕布分割出来；
4.将红色幕布的像素位置填充背景图对应的位置的像素。
算法效果
一起来看看吧！
当然，跟电影里哈利波特的隐身特效还是有差距，但基本过程是有了。
如何改进
要想抠像效果好，必须要选择一种好的颜色模型，这决定了在度量红色和非红色的时候背景和前景的数值差异程度。
其实我们常用的RGB颜色空间模型在进行颜色距离度量时其并不优秀。
原博文作者使用了HSV颜色模型，但我觉得也不够好。CV君之前工作中做过相关工作，我推荐LAB颜色模型，或者YCrCb，应该会获得更好的效果。
当然这个问题很复杂，各种颜色空间模型中也有很多经验值，这很难说哪一种是最优秀的。也许读者可以发明专门用于抠像的颜色空间模型，也不一定^_^
原博文地址：
https://www.learnopencv.com/invisibility-cloak-using-color-detection-and-segmentation-with-opencv/
作者使用Python和C++两种语言实现。
开源代码地址：
https://github.com/spmallick/learnopencv/tree/master/InvisibilityCloak
加群交流
关注计算机视觉与机器学习技术，欢迎加入52CV群，扫码添加52CV君拉你入群，
（请务必注明:52CV）
喜欢在QQ交流的童鞋，可以加52CV官方QQ群：928997753。
（不会时时在线，如果没能及时通过验证还请见谅）
更多CV技术干货请浏览：
喜欢CV君的分享，就请点个“好看”吧
长按关注我爱计算机视觉