人脸识别、机器人、无人机、VR,万能的 RealSense 就差一个好产品了

RealSense 实感技术是英特尔 IDF 信息技术峰会上的常客,也随着技术发展的潮流攀附到了几乎所有的新产品之上,从体感游戏,人脸识别,到机器人,再到无人机,乃至现在风口上的虚拟现实(VR)。

虽然很多人对这项技术不会太了解,但提到上面这些应用领域,你可能或多或少有过体验。最简单的就是面部识别解锁,你可能在笔记本电脑里用过,或者上班打卡时用到过——这些应用的背后,很可能有 RealSense 的技术支持。

今年的 IDF 上,RealSense 是英特尔“万物数字化”理念下的主角之一。

Intel IDF PingWest Shenzhen Photo By Hao Ying-7

Ninebot 平衡机器人

英特尔全球副总裁兼中国区总裁杨旭宣布英特尔将推出 RealSense 跨平台 API,提供姿态识别、人脸跟踪、3D 扫描、场景感知,还有 SLAM(即时定位与地图构建,Simultaneous localization and mapping),为纵深相机提供开源的驱动程序,支持 LinuxAndroidOS X  Windows

同时,英特尔发布了售价 245 美金的机器人开发套件,这是继 Intel Inside 平板电脑之后的另外一个交钥匙项目,降低开发门槛,缩短研发周期,可以开发出类似于 Ninebot 在平衡车上嫁接而成的行走机器人。

另外,无人机开发套件 Aero 同样是基于 RealSense。2016 CES 上,英特尔 CEO 科再奇以 Yuneec 台风 H 无人机首次展示了这项技术在自动避障上的应用,PingWest 品玩后续也详细解读过它的技术细节和最新进展

上面的信息轰炸后,你会看到,RealSense 几乎是一项万能的技术,正变得无处不在。至少在英特尔看来是如此。要读懂它,需要再回归到 RealSense 本身。传感、理解、交互、学习,这是 RealSense 机器视觉的简单流程,也是它为什么如此万能的原因之一。

传感部分是通过摄像头捕捉现实世界,不同的是它是用双摄像头拍摄三维信息,包括色彩、深度、距离等。RealSense 模块的结构和组成见下图。

RealSense 模组

RealSense 模组

捕捉之后是理解,解读捕捉到的画面信息。包括上面说的深度、距离、加速度等等,识别物体,对应着的使用场景有动作识别:比如体感游戏,比如测量建筑物的高度,比如围绕人拍摄一圈后,生成 3D 图像,然后打印在透明的玻璃饰品中。

嫁接在大朋 VR 头盔上的 RealSense 模组

嫁接在大朋 VR 头盔上的 RealSense 模组

交互方面除了体感等显而易见的应用外,另外一个最新的应用是 VR、AR。

以 VR 为例,英特尔在现场展示了搭载 RealSense 模组的手机,放置在 VR 头盔中,配合着相应软件,可以捕捉现实中的三维信息,比如对你所处的房间实时 3D 建模,继而呈现在头盔中,这就不是简单的图像叠加了,你可以握住别人的手,可以拥抱你的朋友,可以推开门,可以拿起杯子喝水。另外,结合内部的陀螺仪等传感器,还可以实现空间定位。

HTC Vive 消费者版增加了一颗 VGA 摄像头,可以捕捉现实物品的轮廓,叠加到头盔中的影像之上,可以进行基本的交互,类似于躲避地面上的障碍,但整体的交互性相比 RealSense 方案还稍有欠缺。

想象再狂野一点,你完全可以长期带着 VR 头盔,它可以成为你的另外一双眼睛。谁又能确定我们现在到底是不是处在一个超大的虚拟现实空间里呢。

最后的机器学习部分则是更高阶更复杂的部分了,暂略去不表。

然而,对很多普通用户来讲,如此万能的 RealSense 技术还是有些遥远。

对此,英特尔公司新技术事业部副总裁兼感知计算事业部总经理鲍克勤博士(Dr. Achin Bhowmik)的回答是,拿最简单的 PC 来说,几乎所有主流的 OEM 品牌都推出过搭载 RealSense 模块的产品,出货量数以百万计,从平板电脑、笔记本、台式机到一体机均有覆盖,具体参见下图,可以用来面部识别解锁,简单的体感游戏。

Intel IDF PingWest Shenzhen Photo By Hao Ying-10

新技术从提出到大范围应用需要一段时间,可能是几个月,可能是几年,甚至更久。RealSense 也不例外。

这是英特尔内部一个超大型的项目,英特尔有信心这种技术能够帮助越来越多的开发者和企业。

对未来的前瞻让人兴奋,甚至狂喜,但在当下来讲,RealSense 还缺乏一款好的产品,触手可及,好看,好玩,而且好用。

它可能是英特尔展示过的 Ninebot 平衡车机器人,可能是一面智能镜子,可能藏身于智能手机中实时绘制和感知现实世界,可能是当下资本和创客们追逐的 VR 眼睛,也可能即将发掘于英特尔创客真人秀节目和万千的创客中。

订阅更多文章