存眷微信公众号
创头条企服版APP
创头条快享版APP

您是小我用户,您可以认领企业号

为VR完成「手势辨认」须要霸占哪些难点

3979
搜狐财经 2019-10-10 00:44 抢发第一评

原标题:为VR完成「手势辨认」须要霸占哪些难点

来源:映维网 作者 广州客

先放一个视频,是搜会聚集的各类手部交互产品及VR游戏内容的剪辑。可以或许赞助懂得手部交互在VR中是多么关键的任务。

手部交互在VR中的感化

“手势辨认”平日依附更基本的“举措捕获”(追踪)。优胜靠得住的动捕可以或许随便马虎推导出精确的手势辨认成果,反之不成立。

李子琪将列席10月12日由映维网和IDG结合举办的广州2019小蛮腰科技AR/VR大年夜会,并将发表《VR将来硬件交互范式商量》主题演讲,迎接有兴趣的同伙报名参会商量、协作

一:四个基本条件

VR终究手部交互范式其实不是纯真的“手势辨认”,它要满足4个基本条件,这些条件同时也是须要霸占的难点:

1. 空间定位:幻想的空间定位才能,获得手部与人眼(头显)的精准相对地位关系,是精确衬着及交互的基本;

2. 手部追踪:一只正常人手大年夜概有二十多自在度,加上手段小臂总计约28个,追踪须要精准,靠得住,低延迟;

3. 触觉反应:给人以更明白加倍符合直觉的反应后果(基于视觉道理的裸手操作难以给人明白的反应);

4. 工业设计:(实体外设需简便以降低疲惫,同时不会影响手部本身活动等,和符合人体工程学佩带温馨等)

四个基本条件中的『1. 空间定位』与『2. 手部追踪』有时可作为一个全体评论辩论,统称为追踪定位才能,是手部交互的基石,也是平日学术界所看重的技巧难点。

手部追踪定位才能决定了人在虚拟世界可否像实际世界中一样自在应用灵活的双手。

低品德的追踪定位增长了用户疲惫度,降低了输入效力(要将手置于可辨认区域以增添追踪掉效,增大年夜举措幅度以弥补精度缺乏或自在度的缺掉),和带来不肯定性输入的困扰。

(可类比假想应用鼠标时,光标漂移,光标消掉,移动精度缺乏,和按键掉灵等成绩)。

同时追踪定位才能是『3. 触觉反应』的前置条件,决定了可否在精确的地位和时间触发产生反应后果。

一切VR手部追踪产品只需对比这四点基本条件停止断定。

二:计算机视觉筹划

由于视野和手部的自遮挡等缘由没法处理『2. 手部追踪』中的靠得住性成绩,手部需保持在摄像头视野中以招致疲惫。同时没法供给『3. 触觉反应』,激起用户困扰。

LeapMotion,微软HL2的手部追踪,OC6上Oculus Quest推出的手部追踪,代表了人类在以计算机视觉为基本的手部追踪的最高水准。曾经展示出了双手天然交互的魅力,并曾经在很多低交互需求的场景产生价值。但是照旧受道理机制的天花板所限制,低品德的追踪定位才能其实不克不及供给真正靠得住温馨的交互体验。

LeapMotion公司从融资近亿美金到终究3000万被收买,曾经充分辩清楚明了基于计算机视觉的手部交互技巧的局限性。

须要解释的是AR情况与VR有所差别,为了开放的外部实际情况,即使体验相对较差,AR也会优先采取裸手筹划。比拟VR情况已成为基本设备的6DoF手柄交互和专门设计优化的OculusTouch和Knuckles手部控制器,当今AR头显更多采取后果差能人意的3DoF遥控器和基于计算机视觉的裸手筹划。

延长浏览:Oculus Quest手部追踪体验手记

三:肌电控制筹划

该技巧本身对『1. 空间定位』、『2. 手部追踪』、『3. 触觉反应』三项技巧难点均没法处理至够好的程度。肌电旌旗灯号反应的是肌肉紧缩所产生的生物电,用户个别肌肉心思差别大年夜。肌电是肌肉紧缩(用力)的信息,与手指等地位的信息本质有所不合。和为了腻滑弗成靠的肌电旌旗灯号会引入较大年夜延迟。这些都是幻想交互筹划的大年夜忌。在可预感的将来中此类技巧敌手部的追踪与其他筹划比拟,不具有优势。

CTRL—Labs(收买了MYO肌电臂环的专利),现正与Facebook谈被收买事宜,拟5-10亿美金。是当今唯一融资额度巨大年夜,对外传播鼓吹想把此技巧应用于VR/AR交互控制的公司。(弥补:Facebook曾经地下宣布将来想把CTRL—Labs与手部追踪筹划(Oculus Quest上采取的基于视觉的手部追踪筹划)停止结合。)

自己对此筹划结合持困惑立场。这两种技巧并没有很好的互补才能,甚者会结合缩小年夜二者的缺点。

四:手柄筹划

经过近几年的行业生长,较好的VR头显均完成了6DoF的手柄空间定位,很好地完成了『 1.空间定位』这项基本而又重要的条件请求。

同时,VR手柄曾经从开真个棒状(HTC Vive及PSVR手柄)迭代退化,出现了Oculus Touch和Valve Index的Knuckles,渐渐向更优良的手部追踪及工程学迭代进步。『1. 空间定位』曾经符合预期,也确切向『2. 手部追踪』与『4. 工业设计』目标迈出了一大年夜步。而受制于手柄形状限制,没法将『2. 手部追踪』推向幻想水准,和对『3. 触觉反应』的支撑较为浅显。

五:数据手套筹划

数据手套是个一言难尽的话题。数据手套筹划给人直不雅的感到是: 『1-4』的请求都可以或许满足,只是价格较贵。很多人的成见是认为手套形状设备就会很“准”,同时也认为应用数据手套会降高温馨度。实际并不是如此,数据手套形状与“准”并没有因果关系,市情上充斥的是大年夜量低水准昂贵的鸡肋产品;而工业设计及传感筹划的短长决定终究温馨程度。

基于数据手套捕获人手姿势时重要应用的传感器类型(技巧道理),包含且不限于机械外骨骼传感器式、光纤传感器式,曲折传感器式,磁感应式,惯性传感器(普通为包含加3轴速度计、3轴陀螺仪和3轴磁力计的九轴IMU)式等。

每种种别情况要推敲的成绩均不雷同,但总的来讲,任何一种筹划想要做好绝非易事。这也是为甚么长久以来没有出生一种低本钱完成的靠得住精细手部举措捕获的技巧。

当今即使浅显商用版数据手套(5K-50K人平易近币每套),在『2. 手部追踪』方面实际都差能人意,是非常鸡肋的存在,有时用于一些低程度的影视举措捕获,须要复杂耗时的人工前期修改处理。若基本追踪定位才能都没法达标,在此基本上去寻求『3. 触觉反应』更是是本末颠倒的做法。

仅从举措捕获后果考量,当今纸面参数最好的数据手套,是顶配级其他光纤式数据手套,售价大年夜概在15-20W人平易近币每套,本钱约在数万人平易近币。其追踪后果大年夜概与清除靠得住性和视野成绩的顶级计算机视觉手部动捕筹划相当。

之前很长时间,计算机视觉有了长足的生长,人们总想把一切成绩都交由计算机(视觉)去处理。计算机今朝是一个相对低进入门槛却高产出门槛的行业,接收了大年夜量资本,也招致流向其它重要行业的资本非常无限。数据手套在看似无穷前景的计算机视觉行业的夹缝里艰苦进步,各类筹划层见叠出却未能出现真正好的大年夜一统式的产品变革。可以说当今的数据手套筹划与诸如Valve Knuckles和Oculus Touch如许的新型手柄比拟,并没有优势可言。

六:我们的筹划

然则!然则!然则!当今任务有了改不雅

源域科技 — MASTERY 手部交互

源域科技(我们),打造了革命性的数据手套筹划 MASTERY–掌控,以改革性的工程及算法筹划简直完全处理了上述所列的一切关键成绩。这无疑是铛铛代界最为接近幻想,且价格能被浅显花费市场接收的筹划,有望成为将来VR世界的交互范式,将全部VR行业的人机交互水准晋升到一个史无前例的新高度。

本钱2016年阁下跟风投了大年夜量渣滓VR项目,简直都掉败了,国际本钱简直不再存眷这个行业了,国际VR有关企业都只能艰苦生长。与国际立场截然相反的是,美国扔在持续赓续投资生长这个行业,VR行业有了长足的生长。

PS:假设您对本项目感兴趣,有协作及投资志愿的同伙与我们接洽(微信:licn2014)!前往搜狐,检查更多

义务编辑:

所属栏目: VR/AR
声明:该文章版权归原作者一切,转载目标在于传递更多信息,其实不代表本网赞成其不雅点和对其真实性担任。如触及作品内容、版权和其它成绩,请在30日内与本网接洽。
爱好这篇
评论一下
评论
登录后发表评论
×

Tel:18514777506

存眷微信公众号

创头条企服版APP

创头条快享版APP