专访uSens凌感CTO费越:手势交互如何革新VR与AR
文 / VR进化论 小羿
uSens凌感是一家主攻为VR/AR提供三维人机交互解决方案的公司,总部设在硅谷,大约有20多个人。据悉,其在国内有三个办公室,杭州办公室主打应用与Demo软件开发,北京办公室主打软件算法技术,而深圳办公室则主打供应链等。目前,uSens在全球的员工只有60人左右,大部分为技术人员。值得关注的是,本月初,uSens获得由复星昆仲资本领投的A轮2000万美元融资。
全自然手势交互对VR/AR意味着什么?
VR与AR行业虽然十分火热,但几乎所有的行业人士都必须承认的一点是,VR与AR还处在发展的早期阶段。这主要表现在定位技术、交互精度、分辨率、引擎支持等诸多方面都不完善。总体来看,当前的VR设计工具(软硬件)生态依然处于初级阶段。
从电脑初期的键盘交互到鼠标的出现,从手机的实体键盘交互到触摸交互,从游戏机的传统手柄到体感手柄,交互的方式随着硬件的更新而进化。业内人士认为,VR/AR是一个全新的交互平台,在未来有希望替代手机成为主流交互设备。那么,VR/AR领域势必需要一个新形态的交互方式。
随着资本的推动,VR与AR行业都在进行着技术的快速更新。VR因为是一个虚拟的空间,所以必然需要更加自然的交互方式才更符合用户的体验。在VR中类似手柄或者头盔触摸板的交互方式,有不同的用户群,各有其不同的定位。而对于大众消费群来说,尤其是孩子、年长的人群,他们不习惯用手柄等操控,最简单直接的就是用自己的手与虚拟环境进行交互。从未来趋势上看,全自然的手势交互或将成为主流。
或许,当全自然手势交互和操控在VR/AR中普及的时候,VR/AR技术才能真正走向成熟。
全自然手势交互在VR与AR中的应用
uSens凌感超低延迟全自然手势VR交互实拍
(来源:媒体)
在uSens凌感最新研发的手势交互技术中,已经达到了26*度高精准度的手势识别和交互操作。费越向科技解释到,人的每只手都有26个*度的活动范围,这个26个*度的不同组合让人能用手做出各种动作,操控各种设备。而uSens凌感能将人手的所有动作都识别出来,这就大大解放了人在虚拟空间中的交互限制。更重要的是,更重要的是,uSens目前的技术可以识别双手的真实三维形态,而且目前最新的技术可以识别出真手的骨骼,而非简单手势轮廓。
在采访现场,费越还向科技展现了VR与AR相结合的技术。通过佩戴手势交互头部位置追踪技术的VR头显Impression Pi印象湃,记者首先通过头盔看到了叠加在真实场景中的一辆汽车,通过手势点击,可以将汽车慢慢放大,当达到与真实汽车大小的时候,就进入了VR场景中,可以通过头部的旋转和位移查看汽车内部不同位置的各处细节。而用户在AR与VR中能够无缝切换的功能,将大大拓宽ARVR应用的可能性。
费越认为,未来的VR与AR会融合在一起,VR主打娱乐性,AR主打实用性。但从全自然手势交互与头部位置追踪的支持下,VR中的交互方式分为两种。一种是靠徒手即可操作的,比如随即拿起一件东西时,这是手势交互运用最好的。另一种是依靠工具进行交互,比如写字用的笔,修理用的螺丝刀,游戏中的体感枪等等。
费越称,uSens即将发布最新版的手势交互SDK未来会配置不同的硬件形态,比如模组、一体机等。
面向移动VR,针对VR/AR开发者输出技术方案
作为一家技术公司,费越表示uSens将专注在自身最有核心竞争力的方面。需要说明的是,uSens除了具备26*度的手势交互技术,还拥有6*度头部位置追踪技术,而且这两个技术可以整合到一个模块中。如此一来,VR/AR设备在裸手交互和头部位置追踪上的两大难点得以解决。
在具体方案上,费越称uSens凌感主要向AR/VR平台、硬件厂商、内容开发者等提供三种解决方案。一种是对于有技术整合实力的大公司来说,可以提供纯技术输出;第二种是针对VR/AR新硬件研发厂商,可以将手势交互与位置追踪的模块置入其中;第三种是直接卖模组硬件,现有的已经生产的VR头盔如HTC VIVE、三星Gear
VR等也可以通过外置模组硬件达到手势交互和头部位置追踪的效果。
目前,uSens的26*度手势交互识别精度高、延迟低,对于移动VR来说已经足够使用。费越称,目前Unity平台对于此项技术的支持很好,开发者可以在平台上生成带手势交互的各版本VR游戏。
虽然uSens凌感的手势模块支持很多设备使用,但是费越更注重的是移动VR。他认为,移动VR才是真正能被大众消费者接受的VR主流设备,而非自然的三维人机交互体验将是阻碍移动VR进入大众市场的最重要的因素。未来的VR头盔一旦解决了这个问题,就会变得更加简单便携好用,对于移动VR的普及会起到重要作用。