【原创】揭秘火爆CES的展讯AR手机背后的黑科技

winniewei 提交于 周一, 01/15/2018
【原创】揭秘火爆CES的展讯AR手机背后的黑科技

作者:张国斌

每年的CES都是全球消费电子热点的风向标,今年,AR技术火爆CES除了Rokid-Glass(若琪智能AR眼镜)入选2018CES最佳产品外,ODM大厂伟创力、豪威科技推出AR参考设计方案,国内厂商小派科技、联想新视界、亮风台、创维酷开、Idealens、Nibiru等也展出多种个性化AR方案,而紫光旗下展讯通信与三维人机交互技术商uSens凌感共同发布的全球首款面向主流市场的增强现实AR手机更是火爆CES现场,激发消费者对AR应用的无限想象。

这是用户在现场体验展讯AR手机

12345

这是现场AR手机演示视频,是不是很酷啊,反正我儿子看到后很喜欢里面奔跑的小恐龙,也想玩玩这个手机。

该AR手机技术解决方案是双方基于展讯SC9853I芯片平台合力开发的成果,将预装在所有搭载展讯SC9853I平台的手机终端中,轻松实现稳定而流畅的AR拍照功能。方案中的AR核心技术(uSensAR)由uSens凌感自主研发,基于单目RGB摄像头实现Inside-out 6DOF位置追踪,精度可达1mm。该方案采用SLAM算法,并通过计算机视觉及深度学习算法特为移动端进行了优化,运行稳定。

据介绍,不同于目前市场上面向旗舰机型的AR技术解决方案(如苹果的ARKit以及谷歌的ARCore),展讯-uSens凌感 AR手机技术解决方案应用广泛,适配机型限制条件少,CPU占用极低(在测试情况下,仅为ARcore四分之一)。更为重要的是,该AR方案不仅可在高端手机上流畅运行,面向主流市场的普及型手机同样具有极强的适配性和稳定性。

实际上,AR经过2017年政策利好以及软硬件和内容的丰富,产业链进一步趋于成熟。随着大量资金注入AR项目及AR创业公司,尤其是谷歌、佳能、高通、微软等巨头的入场,第一批消费级AR产品已经出现。未来,随着实际商业利益的出现,AR增强现实产业未来将迎来爆发式的增长。据机构分析认为,AR市场在2020年将达到1200亿美元规模。

随着手机处理器性能的提升,相比VR技术,2018年AR极有可能利用收手机打开更广阔的市场,我们看到在教育、培训、医疗、工业等方面都有可以落地的场景需求。目前,AR功能都限于高端旗舰手机,而uSens凌感的方案可以让更多中低端手机变身AR手机,无疑可以大大提升手机粘性。

uSens凌感的黑科技

上述手机AR功能的实现主要是基于uSens凌感的SLAM技术,其实让uSens凌感科技出名的是其手势识别交互技术,作为成立四年的初创公司,uSens凌感科技被业界认为是手势识别领域全球顶尖的公司,为什么仅有70人团队的uSens凌感科技可以获得这么广泛的认同?

“其实就是专注,我们成立之初就把三维人机交互作为研究方向,而手势交互和SLAM(SimultaneousLocalization and Mapping,即时定位与地图构建)正是两个亟需突破的方向。”商务发展副总裁Peter Chen在接受采访时表示,“我们最早是从手势交互开始,这项技术被认为是未来最自然的交互方式,我们认为手势交互将是未来最自然的交互方式,人都有双手,在数字世界,就可以双手取代键盘和游戏手柄进行操作。其实手势识别原理不难,在这个领域里比拼的是对算法的累积研究。”

1

uSens和Leap Motion采用的是相似的原理,都是使用复数的红外相机来识别人手的运动。2016年8月uSens发布了自研的搭载红外相机的手势识别模组Fingo。目前经过优化,它可以支持毫米级的精度,灵活度相较以前有提升。就是他手里拿的东东。

2

“我们采用深度学习,算法不断优化,目前在双手交叉方面远超竞争对手。”Peter说。从演示看,uSens算法可以精确识别遮挡的手指以及双手的动作,即使双手合实,两只手依然可以被单独定位,但是从Leap Motion方案演示看,经常会把合起来的手指误判为一个手指。

123

这是现场视频演示的几个动图

SLAM--凌感科技的另一个核心技术

凌感科技的另一项核心技术就是其基于SLAM的位置追踪。SLAM(即时定位与地图构建)的应用领域非常广泛,微软的Hololens就是基于这种技术实现的空间定位。现在,机器人、VR\AR、人工智能等有需要这个技术。

4

这是一段凌感SLAM技术的look closure性能测试视频。虚拟场景的中间放置了一个热气球,然后测试人员拿着手机绕着热气球随机移动了50米,而回到原点之后,仍然能追踪到热气球在原地。

Peter表示他们注意到在2016年火爆的VR技术在2018年也将迎来一个发展小高潮,“一个新技术总有些波折,2016年VR技术很火爆,但是其生态系统没有构建好,加上硬件性能不够,所以消费者体验很差,到2017年遇冷,但是我们看到很多厂商在2018年都推出了VR一体机产品,而且支持六自由度,和我们是手势识别结合起来,用户的体验就会提升很多。”他指出,“例如在一款VR游戏里,你本来是赤手空拳,却要握个手柄是不是很怪异?如果用了我们的手势识别技术则可以将体验大大提升。”

“我们给客户提供的手势或SLAM方案,客户都很满意,手势用于交互,SLAM用于定位。”他表示。最新的信息显示,uSens手势交互技术与VIVE Wave整合。

1

注:本文为原创文章,转载请注明作者及来源

相关文章

Digi-Key