BeanVR将运用人脸识别专利技术升级MR互动直播

2016-12-16 11:00 VR及其它 澎湃

人脸识别是计算机视觉(CV)技术的一项重要分支研究,人类试图让机器读懂人类面部特征,从而得到表情甚至眼神和深层次情感信息,帮助建立一个人工智能系统,其运用在现今兴起的VR/AR/MR的领域,尤其是虚拟线上社交领域的结合上,例如现今流行的各种AR变脸社交软件,让人们的照片和自拍瞬间变得有趣;以及虚拟Avatar的实时扫描建模,能够帮助用户快速构建自己的虚拟形象。用摄像头捕捉人脸,将其与另一个虚拟形象绑定合成放入VR系统中,就变成了另外一个自己;或是把真人从视频背景当中分离出来,将其传送到任何一个场景中。未来创造一个能够全方位读懂主人行为的虚拟人工智能助手也不是没有可能。

今年下半年,社交巨头Facebook收购了面部识别公司FacioMetrics,苹果不断申请VR/AR专利,也在不断收购AI、CV领域的科技公司,在去年收购Turi后,苹果又收购了印度机器学习公司Tuplejump。也有很多专注于人脸识别的小型公司将其API和SDK提供给其他公司,比如为很多互联网金融软件提供人脸识别安全验证方面的技术服务。

BeanVR将运用人脸识别专利技术升级MR互动直播 互动直播 MR 人脸识别 BeanVR VR及其它  第1张

人们分享交流的方式在不断变化,通过人脸识别等技术实现的类似面具的效果,让人们互动更加创意和有趣,更能激发用户交互的兴趣。VR社交系统研发商BeanVR正在申请专利的基于脸部识别的多维社交系统,在即将发布会的VR社交应用平台中,开设MR互动直播间,通过真人主播端和虚拟观众端双端跨屏功能,通过人脸识别算法,将主播端表现图像与虚拟人物模型特征点进行关联,实现真人主播表情实时同步其虚拟形象之上,进而在MR直播社交玩法基础上添加角色扮演的功能,吸引庞大的二次元爱好群体。

另外BeanVR对于CV技术的应用,可以将直播流视频流中的真人主播进行抠像并与虚拟场景融合,除了视觉效果更加逼真外,VR用户的参与感和跨屏式感官体验方式也将实现颠覆与突破。