专访uSens凌感CTO费越:手势交互如何革新VR与AR
2022-10-08 23:40:08 来源:
文 /VR进化论 小羿
uSens凌感是一家主攻为VR/AR提供三维人机交互解决方案的公司,总部设在硅谷,大约有20多个人。据悉,其在国内有三个办公室,杭州办公室主打应用与Demo软件开发,北京办公室主打软件算法技术,而深圳办公室则主打供应链等。目前,uSens在全球的员工只有60人左右,大部分为技术人员。值得关注的是,本月初,uSens获得由复星昆仲资本领投的A轮2000万美元融资。
全自然手势交互对VR/AR意味着什么?
VR与AR行业虽然十分火热,但几乎所有的行业人士都必须承认的一点是,VR与AR还处在发展的早期阶段。这主要表现在定位技术、交互精度、分辨率、引擎支持等诸多方面都不完善。总体来看,当前的VR设计工具(软硬件)生态依然处于初级阶段。
从电脑初期的键盘交互到鼠标的出现,从手机的实体键盘交互到触摸交互,从游戏机的传统手柄到体感手柄,交互的方式随着硬件的更新而进化。业内人士认为,VR/AR是一个全新的交互平台,在未来有希望替代手机成为主流交互设备。那么,VR/AR领域势必需要一个新形态的交互方式。
随着资本的推动,VR与AR行业都在进行着技术的快速更新。VR因为是一个虚拟的空间,所以必然需要更加自然的交互方式才更符合用户的体验。在VR中类似手柄或者头盔触摸板的交互方式,有不同的用户群,各有其不同的定位。而对于大众消费群来说,尤其是孩子、年长的人群,他们不习惯用手柄等操控,最简单直接的就是用自己的手与虚拟环境进行交互。从未来趋势上看,全自然的手势交互或将成为主流。
或许,当全自然手势交互和操控在VR/AR中普及的时候,VR/AR技术才能真正走向成熟。
全自然手势交互在VR与AR中的应用
uSens凌感超低延迟全自然手势VR交互实拍 (来源:网易科技频道)
在uSens凌感最新研发的手势交互技术中,已经达到了26自由度高精准度的手势识别和交互操作。费越向网易科技解释到,人的每只手都有26个自由度的活动范围,这个26个自由度的不同组合让人能用手做出各种动作,操控各种设备。而uSens凌感能将人手的所有动作都识别出来,这就大大解放了人在虚拟空间中的交互限制。更重要的是,更重要的是,uSens目前的技术可以识别双手的真实三维形态,而且目前最新的技术可以识别出真手的骨骼,而非简单手势轮廓。
在采访现场,费越还向网易科技展现了VR与AR相结合的技术。通过佩戴手势交互头部位置追踪技术的VR头显Impression Pi印象湃,记者首先通过头盔看到了叠加在真实场景中的一辆汽车,通过手势点击,可以将汽车慢慢放大,当达到与真实汽车大小的时候,就进入了VR场景中,可以通过头部的旋转和位移查看汽车内部不同位置的各处细节。而用户在AR与VR中能够无缝切换的功能,将大大拓宽ARVR应用的可能性。
费越认为,未来的VR与AR会融合在一起,VR主打娱乐性,AR主打实用性。但从全自然手势交互与头部位置追踪的支持下,VR中的交互方式分为两种。一种是靠徒手即可操作的,比如随即拿起一件东西时,这是手势交互运用最好的。另一种是依靠工具进行交互,比如写字用的笔,修理用的螺丝刀,游戏中的体感枪等等。
费越称,uSens即将发布最新版的手势交互SDK未来会配置不同的硬件形态,比如模组、一体机等。
面向移动VR,针对VR/AR开发者输出技术方案
作为一家技术公司,费越表示uSens将专注在自身最有核心竞争力的方面。需要说明的是,uSens除了具备26自由度的手势交互技术,还拥有6自由度头部位置追踪技术,而且这两个技术可以整合到一个模块中。如此一来,VR/AR设备在裸手交互和头部位置追踪上的两大难点得以解决。
在具体方案上,费越称uSens凌感主要向AR/VR平台、硬件厂商、内容开发者等提供三种解决方案。一种是对于有技术整合实力的大公司来说,可以提供纯技术输出;第二种是针对VR/AR新硬件研发厂商,可以将手势交互与位置追踪的模块置入其中;第三种是直接卖模组硬件,现有的已经生产的VR头盔如HTC VIVE、三星Gear VR等也可以通过外置模组硬件达到手势交互和头部位置追踪的效果。
目前,uSens的26自由度手势交互识别精度高、延迟低,对于移动VR来说已经足够使用。费越称,目前Unity平台对于此项技术的支持很好,开发者可以在平台上生成带手势交互的各版本VR游戏。
虽然uSens凌感的手势模块支持很多设备使用,但是费越更注重的是移动VR。他认为,移动VR才是真正能被大众消费者接受的VR主流设备,而非自然的三维人机交互体验将是阻碍移动VR进入大众市场的最重要的因素。未来的VR头盔一旦解决了这个问题,就会变得更加简单便携好用,对于移动VR的普及会起到重要作用。
《2016未来科技峰会专题》
6月28日,第三届“网易未来科技峰会”将在北京国贸大酒店举行。
本次峰会主题为“原力。感知”(Force·Sense),探寻商业发展和技术发展的内在原动力,感知VR、AR、人工智能和智能出行等领域的未来。
本次峰会将邀请国内外最具有未来感和前瞻性的企业家、科学家、科幻作家、创业者、投资人、跨界明星、文化名人一起,大脑激荡,探寻通往未来的神秘力量,体验感知力的能量场。
尼康携Z系列微单家族即将亮相2020北京国际广播电影电视线上展
(原标题:尼康携Z系列微单家族 即将亮相2020北京国际广播电影电视线上展) 尼康映像仪器销售(中国)有限公司(以下简称尼康中国)宣
2022-10-08 22:35
开年破圈再启程纽西之谜geoskincareX超级红派对,让未来“未”我
(原标题:开年破圈再启程 纽西之谜geoskincare X超级红派对,让未来未我而来!) 继2020年末,总冠名2020抖in city未来盛典之后;2
2022-10-08 20:16
苹果发布会成网友吐槽大会:浴霸与原谅绿齐飞
(原标题:苹果新款iPhone发布,浴霸电磁炉摄像头遭吐槽) 更多精彩内容,请关注《苹果发布iPhone 11》专题报道 【文 观察者网
2022-10-08 12:21
清华大学去年年底已开始6G的试验
(原标题:清华大学去年年底已开始6G的试验) 财联社11月25日讯,今日,在世界5G大会5G与媒体业之变革变局高峰论坛中,清华大学新闻与
2022-10-08 07:19
Supermicro推出全新NVIDIAH100优化GPU系统,扩展NVIDIA认证服务器产品组合
(原标题:Supermicro推出全新NVIDIA H100优化GPU系统,扩展NVIDIA认证服务器产品组合) Super Micro Computer, Inc。 (SMCI)
2022-10-07 10:47