七鑫易维副总裁徐筱:眼球追踪技术终将进入消费级市场

在VR行业,说到眼球追踪,没有人不知道七鑫易维。这家公司在2016年发布了全球首款VR眼球追踪配件aGlass,率先实现了注视点渲染、眼控交互和眼动数据分析三大“黑科技”,并且在最近HTC举办的VDC开发者峰会、抉择科技”怨灵”发布会中,我们也见到了七鑫易维的身影。

近日,笔者来到了七鑫易维,与其副总裁徐筱进行了深度交流。这家连续三年获得高通的风险投资的公司,不仅在VR领域驾轻就熟,在医疗、手机、汽车、商业调研等领域也有着诸多成功案例。经过这次专访才发现,”让世界读懂你的眼神”不仅仅是七鑫易维的口号,更是其坚持的信念。

产品体验:超乎想象

在专访开始之前,笔者先体验了七鑫易维的部分产品。据了解,七鑫易维目前主打的产品有aGlass眼球追踪配件、aSee Pro眼动分析设备和全能眼沟通辅具。

aGlass眼球追踪配件发布于去2016年年底,我们体验了使用aGlass配件的HTC Vive头显,体验的内容则是NVIDIA开发的《NVIDIA VR Funhouse》。

众所周知,《NVIDIA VR Funhouse》是一款比较“吃显卡”的VR内容,要达到高画质,需要使用2张GTX1080显卡。测试的电脑使用的GTX980显卡,在应用注视点渲染技术之后,中央凹视野内的画面能稳定在90帧,画面清晰流畅。而未开启注视点渲染时,仅能达到40帧左右,画面模糊且卡顿明显。由此可见,使用注视点渲染技术可以大幅降低VR内容对电脑硬件,尤其是显卡的需求。

而aSee Pro眼动分析设备则包含了桌面式眼动分析系统和VR眼动分析解决方案两种形式。桌面式眼动分析系统安装在普通的电脑显示器上,通过对用户眼球运动的追踪,可以快速、精确地获取用户的注视点路径、时长及热力图等数据。aSee Pro VR眼动分析解决方案类似aGlass,但主要面对专业的研究人员和科研机构,数据接口较为全面且帧率更高。

之后我们又体验了全能眼沟通辅具,这一系列产品已经帮助数万名渐冻人、丧失沟通能力的病患、残疾人等通过眼睛打字恢复了沟通能力。七鑫易维将其集成到了一台Windows平板电脑,在经过简单的校准之后,通过眼球的动作即可实现打字等基本操作,甚至还可以体验一些操作较为简单的游戏,比如《水果忍者》。

但七鑫易维的产品能做的不止于此,相比传统的手部交互,眼球的动作能够传递更加真实的信息,其应用场景也远远超出我们的想象。在接下来的交流中,徐筱向笔者介绍了眼球追踪技术的更多应用场景。

VR领域:解决三大行业痛点

作为HTC Vive X加速器第二批的成员团队之一,七鑫易维在2016年底发布了用于HTC Vive的aGlass DK I眼球追踪配件。之后,七鑫易维用了一年的时间,根据开发者和合作伙伴的反馈对产品进行完善,推出了aGlass DK II。

与上一代产品相比,aGlass DK II在软硬件方面都有所提升。比如支持双眼同时使用、自动检测主辅眼、提升使用舒适度、增加人工智能深度学习算法、优化校准流程、优化API接口等等。徐筱介绍,在为VR头显加入眼球追踪技术之后,可以为其增加多项基于眼球追踪技术开发的功能,包括注视点渲染、眼控交互、眼动数据分析,解决VR行业存在的硬件成本高、缺乏新的人机交互、无法真实高效收集分析数据的三大行业痛点。

在去年年底抉择科技的”怨灵”发布会上,抉择科技宣布与七鑫易维合作,在其产品中使用aGlass眼球追踪配件,并对内容进行了深度定制。比如在用户由于胆小而不看其中的恐怖场景时,剧情就无法继续,以此来进一步提升内容的恐怖感。

由此可见,除了上文提到的降低VR内容的硬件需求之外,眼球追踪技术在VR领域还有更多的应用空间。前段时间刚刚开启预售的HTC Vive Focus一体机,也会推出内置aGlass配件的高配版本。我们也期待着更多基于眼球追踪技术的优秀VR内容。

医疗领域:让特殊人群重获沟通能力

除了VR之外,医疗也是七鑫易维重点发展的领域之一。其打造的全能眼沟通辅具,主要适用于渐冻人、脑瘫、高位截瘫、中风失语等人群。单渐冻人群体 ,目前国内统计在内的有20多万,脑瘫患者有600多万,并以每年4-5万名的数量在增加。通过使用全能眼沟通辅具,这些病人可以通过眼球的动作来打字,重获沟通能力。

在2015年,国务院总理高度评价眼控沟通辅具并肯定了七鑫易维为残疾人做的贡献。并且,最近几年政府在沟通辅助器具领域的扶持力度越来越大,会有更多患者拥有沟通辅助设备。目前,七鑫易维已经与某专业残疾人辅具代理商签订代理协议,即将在医院等渠道进行产品的推广。

“七鑫易维也希望我们的全能眼沟通辅具可以帮助更多的人群,让他们重建与外界的联系,生活的越来越好。”徐筱说道。

商业调研:数据更加真实直观

兰亭数字COO庄继顺就曾提到,使用七鑫易维的眼球追踪技术进行的商业调研。通过收集用户的眼球追踪数据,可以判断用户对不同的产品外观的喜好。而最近七鑫易维与某服装行业巨头的合作,也是在使用这一技术。

“比如当我换了货架或者整个店面的布局,我会让分析师戴上AR眼镜,在里面走一圈看看,从分析师的眼动数据中可以看出新的店面布局有没有不合适的地方,或者判断消费者对哪些款式更感兴趣。”通过眼球追踪获取的眼球轨迹、停留时间和热力图,可以获取更加真实、直观的反馈。与之相比,常见的收集用户反馈的手段,比如问卷是很容易被商家或客户过滤掉的,且不如眼动数据直观。

总之,通过眼球追踪技术,可以实现对消费行为的分析,实时记录用户在消费过程中自然的视觉行为,通过眼动数据分析用户需求,开展精准营销、精确导购等应用场景。

汽车领域:交互更加自然高效

不久前,七鑫易维与极鱼科技合作,为奔驰S500EL车型推出了全新的车载娱乐系统,通过眼球追踪和手势识别技术,实现了更加自然高效的交互体验。除此之外,在汽车行业也可以使用眼球追踪技术来进行商业调研。

比如,一些汽车行业客户希望消费者在进入4S店之后,不需要太多销售去做无聊的介绍。这时可以使用加入了眼球追踪技术的AR眼镜,在消费者佩戴之后,走到车旁边可以看到所有的配置信息,同时在这一过程中,通过眼球追踪的数据,4S店也就知道了用户都关注了哪些地方,从而进一步改善产品,提升服务质量。

此外,七鑫易维的车载眼球追踪解决方案可以对驾驶员进行疲劳驾驶检测,降低交通事故的发生率。

智能手机:全新的解锁和交互方式

在指纹识别成为智能手机的标配之后,苹果、三星等手机厂商也已经开始探索新的解锁和交互方式。而面部识别、虹膜识别和眼球追踪则成了新的研究方向。徐筱介绍说,使用七鑫易维的技术,用户可以通过眼睛来控制手机实现快捷交互,比如进行眼神解锁、眼控对焦拍照、眼动浏览信息、眼控游戏等。

目前,七鑫易维正在与国内两家手机大厂合作,为其开发结合了眼球追踪和虹膜识别的解锁和交互方式。其解决方案即将在CES展会期间亮相。同时亮相的,还有其AR眼球追踪配件产品。

眼球追踪技术终将成为VR头显的标配

当笔者问及眼球追踪技术的前景时,徐筱信心满满地说道:“眼球追踪技术更加符合人类使用习惯,必然会成为未来重要的交互方式,从这一趋势来看,眼球追踪技术必定会成为VR头显的标配,也终将进入消费级市场。”

但同时他也提到,眼球追踪技术要进入消费级市场,还需要3个方面的配合:

首先,要提高眼球追踪技术的稳定性和适配性。目前,七鑫易维正在与NVIDIA开展深度合作,将人工智能和深度学习算法融入眼球追踪技术。

其次,要与VR头显厂商加强合作,先从B端开始,探索VR头显+眼球跟踪技术的应用场景,再将其推向更多的消费级VR头显。

此外,还需要内容厂商合作,接入更多应用眼球追踪技术的VR游戏、VR社交、VR旅游内容。

写在最后

当然了,全世界从事眼球追踪技术的公司不止有七鑫易维一家。苹果、谷歌、Facebook等行业巨头也在抓紧布局。徐筱表示,与SMI、Tobii、Eyefluence、The Eye Tribe等公司相比,七鑫易维具备“反应速度快,定制能力强,产品性价比高”等优势。

“七鑫易维团队里有70%以上都是研发人员,百分百自主专利中国就我们一家,我们也是全球最早成功应用人工智能和深度学习的眼球追踪技术公司”,并且其现有的千万级的眼动数据库可以为算法优化提供大数据的支撑,这也是其核心优势之一。

在产品方面,七鑫易维已经有量产的眼球追踪配件aGlass。徐筱表示,今后七鑫易维也会与更多的VR头显厂商和传统行业企业一起推动眼球追踪技术在VR领域的应用,推动眼球追踪技术的普及。

最初发布于2018年1月4日

发表回复