阿里巴巴与英特尔联手开发AI驱动的3D运动员跟踪技术

在CES展会上,阿里巴巴集团与英特尔共同宣布,将开发首个由人工智能驱动的3D运动追踪系统,计划应用于2020东京奥运会及之后的奥运会上。

该技术由英特尔开发,名为3D运动员跟踪(3D Athletes Tracking)技术,经优化能够在阿里云的基础架构上运行。

基于阿里巴巴的云计算能力及英特尔的硬件配套及深度学习算法,这套3D运动员追踪技术可以通过一般的摄录机,而不需要用专门的感应器,即可以创建出3D网格(3D mesh),让教练及培训员可以分析由运动员动作产生的错综复杂且即时的生物力学数据。

具体来说,该技术充分利用先进的姿态建模技术和其他人工智能算法,旨在对运动员的动作进行生物力学分析。运动员的表现由常规摄像机捕捉后,利用人工智能算法进行大量运算,并生成一个运动表现数字模型,该模型可以通过多种方法进行分析。

通过人工智能及高准确度的模型,教练员和培训员可以从中提取复杂的实时生物力学数据,对运动员的表现进行分析,并引入新的训练强化手段,为运动员改善动作及提升表现。

除了为运动员带来好处之外,这项技术也将提升观众的体验,让他们更深入了解世界级运动员的表现,比如在2020年东京奥运会上,直播机构将可使用该系统分析、剪接及查看精彩片段,并即时为观众提供精彩画面回放。

奥运项目是英特尔与阿里巴巴最新开展的一项合作。不久前,阿里巴巴部署了英特尔的最新处理器和内存技术,用以支持“双十一”全球购物狂欢节。

最初发布于2019年1月11日

英国军火商积极测试 未来军舰将通过AI/VR实现远程控制?

未来的海军或许可以使用新技术让舰员们远程操控。像是人工智能和虚拟现实这样的技术能够让一些舰员们在岸上工作,甚至是在千里之外控制军舰的关键功能。这种“半自治”的军舰,需要更少的船员,也就意味着会有更少的人身处战争的险境。

外媒报道,在未来,英国皇家海军可以使用AI和VR来减少船员的规模。类似于在千里之外控制着无人机的操作员,舰员们可以远程工作,比如控制军舰上的传感器或武器。当他们在陆上的基地工作时,可以远离前方的战火。甚至军舰的舰长也可以在岸上,在陆上的基地里指挥他的战舰。

英国军火商BAE系统公司一直在向英国皇家海军推广这项技术。“与军舰上那些坐满军官的控制室不同的是,为了防止军舰受到敌方攻击时控制室也被波及,在陆上的控制室中,军官们能够在其中自由走动,”BAE的一位代表向媒体表示。

飞机将会是首个被远程操控的武器系统。通常飞机都由一位或两位飞行员进行操控,这种短程的任务不需要额外的维护工作,并且相对而言是可支配的。而军舰就不同了,通常军舰都是需要数十人来处理数百项任务,有时会在海上航行数月时间,需要大量经过训练的舰员在离岸数百英里的军舰上进行维护工作,并且很容易就会耗费数十万美元甚至更多。可以说,操纵军舰的复杂性对于使用AI和VR的舰员或陆上的控制室来说是难度最高的任务。

在岸上工作的舰员还会遇到另一个问题:海军需要保证他们的战舰被敌方围堵,或者被迫不使用雷达和通讯信号来进行操控的情况下依然可控,因为敌军将会用这些信号来定位他们。同时,军舰也可能会被敌军攻击,或者受到其他损害,使军舰的动力或通信功能失效。在最坏的情况下,如果军舰和岸上指挥部的联系中断了,那些在岸上基地中远程执行的工作将无法完成。

同时,BAE系统公司还在测试增强现实技术,可以让负责军舰安全的值班人员即使在控制室之外也能够看到战术数据和其他重要的信息。“我们将会使用微软HoloLens在明年3月25日至4月11日的皇家海军Information Warrior 19演习期间首次展示。目前,我们还在使用Striker II飞行员头盔来为皇家海军开发这一系统。”

不过,要在军舰上使用这种增强现实设备,还需要面对强光照和复杂的海面状况等问题,BAE希望对Striker II头盔技术的应用能够帮助解决这一问题。目前的测试虽然进展顺利,但却不够高效,尤其是有大量来自军舰和陆上的各种传感器的数据需要呈现给操作员。

另外,BAE系统公司还在和电脑制造商戴尔合作,来开发更安全的WiFi技术,将舰桥与控制室更好地进行连接。

“虚拟现实、增强现实,触控、手势控制,语音控制…这些都是我们目前正在探索的技术。当然这些技术并不全都适合用在皇家海军的军舰控制室,但肯定有一些是合适的,” BAE系统公司的作战系统技术总监Frank Cotton说道。

最初发布于2018年11月29日

原文链接:https://www.popularmechanics.com/military/navy-ships/a25322684/remote-warships-ai-vr/

不止培训飞行员 美国空军计划将AI/VR融入各部门日常训练

美国空军训练部门的负责人在近日表示,他们希望人工智能可以成为首选的训练技术,帮助空军人员更快和更好地进行训练。

Steven Kwast中将是美国空军教育与训练指挥部的司令官,他表示,他希望预定于明年完成的测试结果,能够表明这些先进的工具,比如AI、虚拟现实和超级计算,能够提升人脑的速度和效率。

“目前已有的测试数据结果是非常积极的,我们能够强化人的大脑,以更快、更好地学习,并且我要说,记忆效果也更好,这就意味着你会更长久更更好地记住知识,”Kwast在美国空军协会空、天网络会议期间对记者们表示。

他以如何将人工智能用于飞行模拟器为例进行了讲解。

“我们来看一下,比如,一个飞行员必须进行一个翻转动作,在飞行员进行此动作时,人工智能会进行观察。并且,当你向后拉控制杆时,人工智能会分辨出你在做什么,它会告诉你‘嘿,你向后拉的幅度太大了,’或者‘嘿,你的鼻子有点向右歪了,你需要保持目光朝前,’”Kwast说道。“也就是说人工智能在看着你。它会向你学习,并且学习你是如何学习的,然后它会给出你建议,帮助你实时适应学习内容,这样一来你就不会出错。”

随着创建逼真的3D训练环境的成本变得越来越低,AI能够调整这一环境,使其适合人们学习的方式,他说道。“AI甚至还能给出建议,比如,‘你更加适合使用视觉内容进行训练,或者更加易于接受文字内容。你最好先阅读,然后再操作。或者你最好先观看,然后再操作。’这就是人工智能正在帮助我们做的事情。”

Kwast说,测试结果将会在明年夏天完成,并且将会应用在除飞行员训练以外的更多领域。

“这其中包含了空军所需要的所有技能,”他说到。“无论你是维护人员,还是网络专家,又或者是防空兵,或者飞行员,这些都可以应用AI。这是关于人类学习工作技能的一项技术。问题在于,你是否能够以新奇的、实用的方式来使用这项技术,强化训练的效果。”

美国空军官员指出,AI能够被用于补充教官资源的不足,并且让学生们能够在任何时候接触到训练内容,且不会学到教官的坏习惯。

“我们正在寻求去除训练和教育环节中的人为因素的方法,”Jim Sears准将说道。他是美国空军教育与训练指挥部旗下计划、程序和需求部门的负责人。“同时也在寻求简化训练过程,增强训练效果并且使训练变得更好的方法。”

最初发布于2018年11月20日

原文链接:https://www.military.com/daily-news/2018/09/18/air-force-wants-use-artificial-intelligence-train-pilots.html

美国国防情报局将人工智能融入情报分析工作

五角大楼的顶级情报专家在近期表示,他希望人工智能领域的发展能够防止国防分析人士在全球冲突一夜之间爆发时被吓到。

“我的核心任务是确保国防部长永远不会被吓到,”美国陆军Robert Ashley Jr.中将,同时也是美国国防情报局的主管,在战略与国际研究中心对观众们表示。

Ashley担任这一职位已经有一年时间了,当俄罗斯军队在2014年与乌克兰爆发冲突时,他还没有上任,而这一地区的不稳定事件,美国情报机构因未作出预测而备受指责。

对于间谍情报技术和国防分析人士所使用的其他技能来说,“AI和机器学习将会是巨大的助力”,能够帮助避免“外界所有信息中的杂音”,他说。

使用算法来整理海量的信息能够减少国防分析人士的负担,但其中也不是没有挑战,Ashley说。

“当一个分析员坐在高层领导面前时,他一般会说‘根据报告,根据来源,根据我所看到的,我有一个中等程度的自信’或者如果你看到一个评估文件,其中说‘我十分确信’,这种都可以追溯到来源和对间谍情报的分析,”他说道。

“你绝不会想站在这样的位置,对你的高层领导说‘电脑这样告诉我的,’”他继续说道。“我们目前遇到的部分挑战,并且我认为同时也会机会的是,算法、机器学习和人工智能会带给我们一定的自信。”

国防情报局将不得不测试这些算法“是否能够在实际上提高分析人员所作的工作的可信度”。

他的目标之一是确保这个机器辅助分析快速知识库系统(Machine-assisted Analytic Rapid-repository System),或者简称MARS,在他两年后离开这个岗位时,具备初步的操作能力。

“设置完成数据环境将可能是我们能为国防部做的最大的事情之一,”他说道。“在我接下来的两年任期里,我们将会为国防部长、参谋长联席会议、政策制定者甚至是每个士兵达成初始作战能力。这个系统可以给他们带来决策上的优势,让他们更快行动,更快地在工作环境中理解正在发生的事。我们的目标一直都是确保在出现状况时不会被吓到。”

人工智能只是帮助分析人员来分辨俄军是在“快速行动演练”还是“即将跨国国界,进行侵略行动”的工具之一,Ashley说道。

“这可不是将人工智能放到某个工作中,而是让人工智能能够对更多的信息进行取样分析,并减轻分析人员的负担,”他说道。“但是最终,还是要有人参与,根据训练、对情报的理解、对问题的的理解,来做出决定,并且向上级汇报‘我注意到了以下的信息,这是几个可行的行动方案。’”

最初发布于2018年10月18日

原文链接:https://www.military.com/defensetech/2018/09/17/militarys-top-spy-ai-may-enhance-tradecraft-prevent-geopolitical-surprises.html

美国空军中将的担忧:在人工智能上 美国已经落后于中国

近日美国空中一位中将表示,中国在人工智能技术领域的大量投入,将很快把美国甩在后面,使美国处于不利地位。

“在数字时代,速度是发展的根本,”VeraLinn “Dash” Jamieson中将说道。她是五角大楼空军参谋部负责智能、监控和侦查(ISR)的副参谋长。

她描绘了一幅可怕的画面:当俄罗斯有想要用AI作一些雄心勃勃的实验的想法时,中国已经有了这些手段。

比如,中国正在积极努力想要成为AI技术的全球领导者,比如以军民合作的形式创建数字化的人工智能城市,以了解AI技术能够如何被复制和应用。这些城市通过人工智能的面部识别软件跟踪人们的行动,监控着生活在其中的市民的每个举动。

“据我们估计,在2017年,中国在人工智能系统方面的投入总额达到了120亿美元。我们预计,到2020年,这一数字将会达到至少700亿美元,”Jamieson在空军协会的一次早餐上说道。

“你可以对比下我们的投入和中国的投入,”她补充道。

五角大楼中的每一个军事部门都在不同程度地推动着AI的发展,不过其投入规模仅有数十亿美元。

根据独立调研机构Govini的数据,五角大楼在2017财年在新兴技术研究上花费了大约740万美元,而AI在其中占比仅有大约33%,这些花费还包括量子计算和大数据分析,以及其他的信息技术研究。

因为美国空军在过去的二十年间一直都在大力投入反恐作战,“我们并没有纵观全局,来思考并且创建和开发一个高端的战略,我们只看到了我们今天正在面对的战争,”Jamieson说。“今天我们的[智能、监控和侦查]能力还不足以应对国防战略中提出的发展意图所带来的挑战。”

Jamieson正在推动着美国空军的智囊团以不同的方式来思考它该如何行使自治权。比如,他们正在从讨论一个单独的、先进的武器到更广泛地讨论要发展新兴技术,必须要网络先行。

她还重申了与去年相似的评论,Jamieson表示,她的目标在于使用AI从数百万的智能数据点和传感器整合数据点中筛选数据,比如可视或可听传感器的数据,给予空军需要实时做出的决策,这能在实际的战场或虚拟战场中帮助他们。

“我们的确需要我们的分析人员来协调这些数据,以获得更高质量且更快的决策,”她说道,并且还补充说“我们必须构建下一代的ISR(智能、监控和侦查)能力,使我们能够从冲突的全局高度占据决策上的优势。”

Jamieson还推动了一项文化的变革,在此之前美国空军一直在纠结于这一问题,即如何从人力密集型的处理方式调整到利用机器学习和人工智能的处理方式。处理过程将会由数据开始,到数据分析和机器智能,再到人机合作,她说。

“军工企业和空军将会被要求提升ISR的质量和数量,同时能够保持胜任各种军事行动。我们将会共同推进这些研究,”她说道。

Jamieson还说这项研究决不能仅仅将大数据收集作为一个信息来源。“数据就是武器,并且我们每个人都需要以这样的看法来对待数据。”

基于此,目前的空军和未来的空军都需要“被释放,”她补充道。

今天的美国空军要真正地理解真实世界和虚拟世界的融合,这对于应对下一场面对俄罗斯或中国的战争来说,是非常必要的,她说。

Jamieson说在最近几个月,她约见了一些能够通过编码技术整合来自各种不同平台的数据的空军官兵。

“来自第480 ISR联队的空军官兵们意识到,他们在最喜欢的游戏能够被用于培训,这款游戏可以支持大约55名用户之间的实时协作,以完成一项任务。”她说道。

这些空军官兵创建了一个低成本的军用版本,名为Sentinel Sim。Jamieson表示,如果是由空军来开发,或者外包开发的话,可能会花费数百万美元。

而在今天,这个游戏已经被用于实际任务训练场景。

美国空军、军工企业和五角大楼已经成为了一个整体,“现在这已经成为了一项团体运动,”Jamieson说。“并且我们必须这样看待它。”

最初发布于2018年9月3日

原文链接:https://www.military.com/defensetech/2018/07/30/china-leaving-us-behind-artificial-intelligence-air-force-general.html

美国精神病学会年会的新探讨:如何将VR/AR用于精神疾病领域

有自闭症的孩子们正在学习分辨母亲是生气还是伤心,受到心理创伤的老兵们正在想办法处理记忆的重现,病人们可以忘记那些难以应付的病痛。

所有这些都需要感谢虚拟现实和增强现实技术。

通过最先进的软件和图形技术,VR/AR已经在过去的几年间获得了长足进步。

在近日举行的美国精神病学会(APA)2017年会期间的Innovation Zone特别展示活动中,展示了一些行为和心理健康相关的研究进展。

VR是完全由电脑生成的环境,可以把病人们沉浸在虚拟世界中,而使用增强现实,设备或软件可以给真实世界添加虚拟元素。

“这些技术其实早已存在数十年,但是随着近年来成本的大幅下降,以及图像和技术组件的改进,商业领域应用VR/AR的兴趣正在逐渐增长。”哈佛医学院精神病学导师,同时也是神经技术公司Brain Power的首席医学官的医学博士Arshya Vahabzadeh这样告诉我们。

Brain Power和Affectiva达成了合作。Affectiva是一家在麻省理工学院媒体实验室成长起来的公司,正在与谷歌联手,为患有自闭症的孩子开发增强现实智能眼镜。通过使用“游戏化的APP”,孩子们可以学习辨别情绪,并且和家人和医师们互动。

有自闭症的孩子经常被理解他人的情绪,阅读他们的表情所困扰。“这款设备可以给他们反馈,监控他们的反应,并且收集数据,”Vahabzadeh博士说道。

“我们正在寻找方法,本质上是提供一个人工智能的‘教练’,帮助孩子分辨妈妈所呈现出的情绪。比如,她是高兴还是伤心?是害怕还是冷静?”

他将其比作使用辅助轮来学习骑自行车。“有些孩子在学习骑自行车时会遇到困难,而他们能够从辅助轮上获益。”

平复焦虑

另有一些研究者在使用VR来治疗大量的成年人精神健康问题。通常研究最多的领域是焦虑症,Vahabzadeh博士说道。

“如果你恐高,我们可以为你生成一个增强现实或虚拟现实的体验,在其中,你可能会感觉到焦虑或不适。接下来,在这个环境中,我们可以使用数字手段生成介入内容,可以让你感觉舒适,或帮助你处理惊恐发作症状。”

作为例证,他提到对于一些恐高的人,虚拟环境可能会是一部电梯。

这项技术同样被用来教给创伤后应激障碍一些技能,比如专注力和深呼吸,来处理记忆的重现。

在Innovation Zone的一个展区中,Brennan Spiegel医学博士,作为加州洛杉矶市西奈医学中心负责学术事务和临床转化方面的健康服务研发总监,向我们描述了这样的应用场景。比如,患有创伤后应激障碍的老兵可以被传送到阿富汗战场,体验一场虚拟的迫击炮攻击。“病患还可以在这个虚拟环境中走动和导航,”他说道。

“临床医生们可以使用控制面板,来调整体验中的时间,光照,声音效果,并且帮助调整暴露疗法的程度,”Spiegel博士说道。

虚拟暴露疗法的目的之一,是为了改善病患的注意力和记忆,以及在战场环境中改善其执行功能。

Dr Spiegel博士说,现在已经有了针对该方法有效性的大量研究。“即使是最坏的数据也表明,我们的治疗效果和那些基于证据的,采用自然暴露疗法的治疗效果是一致的,而最好的数据则表明,我们的方法远胜过传统方法。”

除了军队之外,该技术也被用在病患家中,来实施物理治疗法和治疗法。它可以是一个有趣且吸引人的体验,Spiegel博士说。他还补充道,病患们不会坚持采用传统的疗法,因为传统疗法“无聊,重复乏味并且令人沮丧。”

减少痛苦

他展示了一个特殊的电脑游戏,有一个患有大脑性麻痹的小女孩,只能抬起和放下一只胳膊,而在这个游戏中,她第一次体验到了游戏的快乐。

他还展示了虚拟现实能够如何对医院环境造成重大影响,他描述了两个被剧痛折磨的病人,一个老年的癌症女患者,以及一个患有镰状细胞贫血病的小男孩。

这两位患者都被传送到了虚拟世界中,在这个世界里他们可以专注于一些令人愉快的事物,忘记他们的病痛和所处的冰冷无助的环境。

有研究表明,根据临床结果,这些治疗方法的确是有效的。Spiegel引用了一项研究,该研究对比了50个病人的平均疼痛指数作为对照组,并且将使用VR手段的另外50个病人作为实验组。临床反馈表明,使用VR手段的实验组有65%的疼痛指数降低,而在对照组仅有40%有疼痛指数的降低。

他和他的同事在医院中发起了一项随机对照实验,使用了VR疗法,以确定这种疗法是否能够影响到阿片类药剂和抗焦虑药剂的使用,以及一些其他内容。

在今年早些时候发表于《临床神经科学》杂志的一篇元分析中,包含了11项关于VR的随机对照实验,其中将VR用于癌症病痛、肥胖和中风康复,乃至外伤性脑损伤等多种疾病。研究者发现,“VR在多数的研究中都有很明显的效果,并且看起来它还很容易被接受,”Spiegel博士说道。

“但是这些研究中也有一些限制,比如样本比较小,在方法论上有些多样化。我们需要更大样本的,更高质量的实验。”

Spiegel博士还指出,研究人员们还在通过创建“虚拟人”,将其用作教学工具,来进行诊所的接待工作。

另外,专业的生物制药学公司Shire PLC的研究人员还开发了一款专注于注意力缺陷/多动症(ADHD)研究的VR教学工具。该工具允许用户扮演ADHD患者,体验一天的虚拟生活,他们必须要处理在家中,工作中和社会场合中的注意力分散问题。

谁来买单

在Innovation Zone展示环节的末尾,一位代表问及谁为这些新技术买单。Spiegel博士说这还不清楚。“如果我们创建一个虚拟诊所,或者VR咨询服务的话,是不是需要申请一个ICD-10编号(国际疾病分类编码)?是不是要走这个程序?”

不过,已经有研究人员在探讨VR应用于医院环境中的健康生态了。

“我们已经做了一些价格低廉的建模,并且总结发现,如果VR能够减少即使只有10%的住院时间,即使是只有几个小时,那么它很快就能得到回报,整个VR咨询服务也是如此,”Spiegel博士说道。

“我们需要知道的是,VR是否能够减少住院时间,并且我们现在已经在临床试验中关注这一点。”

而该展示环节的另一位发言人,南加州大学创意技术学院的医学VR总监Skip Rizzo博士,同时也是南加州大学戴维斯老年病学院和南加州大学凯克医学院精神病学和行为科学学院的教授,则预测道,对VR技术应用的意识会逐步增长,其价格会持续下降。

“它会变得像烤面包机一样,每个家庭中都有一台。虽然不一定每天都会用,但每个人都会有一台。”

Vahabzadeh博士提到,iPhone和Facebook在几年前并不存在,虽然VR和AR技术还需要一些研究,并且没有在临床上广泛使用,但很快将会迎来改变。

而这在遇到“没有足够的人力”这一问题时尤其重要,他说道。

“争议在于,我们能够如何使用这项技术来增强医疗服务,或许是提升其强度,又或许是降低准入门槛?”

不过Vahabzadeh也警告,有些情况下VR和AR或许并不合适。比如,他说道,对于患有痉挛/癫痫的病人来说,要使用沉浸式或可感知的技术将会是很困难的。

另外,在Innovation Zone展示期间,专家们还探讨了机器学习,可穿戴技术,智能家居,以及人工智能技术如何帮助精神疾病患者。

位于新泽西州普林斯顿的Otsuka America制药公司的高级总监,中枢神经系统精神病学专家Tim Peters-Strickland博士讨论了如何使用Instagram来检测抑郁症。

“这还有很大的分歧,如果你能把社交媒体用作病患的早期筛查,这将会是非常令人神往的。”

最初发布于2017年6月5日

原文链接:http://www.medscape.com/viewarticle/880847

七鑫易维副总裁徐筱:眼球追踪技术终将进入消费级市场

在VR行业,说到眼球追踪,没有人不知道七鑫易维。这家公司在2016年发布了全球首款VR眼球追踪配件aGlass,率先实现了注视点渲染、眼控交互和眼动数据分析三大“黑科技”,并且在最近HTC举办的VDC开发者峰会、抉择科技”怨灵”发布会中,我们也见到了七鑫易维的身影。

近日,笔者来到了七鑫易维,与其副总裁徐筱进行了深度交流。这家连续三年获得高通的风险投资的公司,不仅在VR领域驾轻就熟,在医疗、手机、汽车、商业调研等领域也有着诸多成功案例。经过这次专访才发现,”让世界读懂你的眼神”不仅仅是七鑫易维的口号,更是其坚持的信念。

产品体验:超乎想象

在专访开始之前,笔者先体验了七鑫易维的部分产品。据了解,七鑫易维目前主打的产品有aGlass眼球追踪配件、aSee Pro眼动分析设备和全能眼沟通辅具。

aGlass眼球追踪配件发布于去2016年年底,我们体验了使用aGlass配件的HTC Vive头显,体验的内容则是NVIDIA开发的《NVIDIA VR Funhouse》。

众所周知,《NVIDIA VR Funhouse》是一款比较“吃显卡”的VR内容,要达到高画质,需要使用2张GTX1080显卡。测试的电脑使用的GTX980显卡,在应用注视点渲染技术之后,中央凹视野内的画面能稳定在90帧,画面清晰流畅。而未开启注视点渲染时,仅能达到40帧左右,画面模糊且卡顿明显。由此可见,使用注视点渲染技术可以大幅降低VR内容对电脑硬件,尤其是显卡的需求。

而aSee Pro眼动分析设备则包含了桌面式眼动分析系统和VR眼动分析解决方案两种形式。桌面式眼动分析系统安装在普通的电脑显示器上,通过对用户眼球运动的追踪,可以快速、精确地获取用户的注视点路径、时长及热力图等数据。aSee Pro VR眼动分析解决方案类似aGlass,但主要面对专业的研究人员和科研机构,数据接口较为全面且帧率更高。

之后我们又体验了全能眼沟通辅具,这一系列产品已经帮助数万名渐冻人、丧失沟通能力的病患、残疾人等通过眼睛打字恢复了沟通能力。七鑫易维将其集成到了一台Windows平板电脑,在经过简单的校准之后,通过眼球的动作即可实现打字等基本操作,甚至还可以体验一些操作较为简单的游戏,比如《水果忍者》。

但七鑫易维的产品能做的不止于此,相比传统的手部交互,眼球的动作能够传递更加真实的信息,其应用场景也远远超出我们的想象。在接下来的交流中,徐筱向笔者介绍了眼球追踪技术的更多应用场景。

VR领域:解决三大行业痛点

作为HTC Vive X加速器第二批的成员团队之一,七鑫易维在2016年底发布了用于HTC Vive的aGlass DK I眼球追踪配件。之后,七鑫易维用了一年的时间,根据开发者和合作伙伴的反馈对产品进行完善,推出了aGlass DK II。

与上一代产品相比,aGlass DK II在软硬件方面都有所提升。比如支持双眼同时使用、自动检测主辅眼、提升使用舒适度、增加人工智能深度学习算法、优化校准流程、优化API接口等等。徐筱介绍,在为VR头显加入眼球追踪技术之后,可以为其增加多项基于眼球追踪技术开发的功能,包括注视点渲染、眼控交互、眼动数据分析,解决VR行业存在的硬件成本高、缺乏新的人机交互、无法真实高效收集分析数据的三大行业痛点。

在去年年底抉择科技的”怨灵”发布会上,抉择科技宣布与七鑫易维合作,在其产品中使用aGlass眼球追踪配件,并对内容进行了深度定制。比如在用户由于胆小而不看其中的恐怖场景时,剧情就无法继续,以此来进一步提升内容的恐怖感。

由此可见,除了上文提到的降低VR内容的硬件需求之外,眼球追踪技术在VR领域还有更多的应用空间。前段时间刚刚开启预售的HTC Vive Focus一体机,也会推出内置aGlass配件的高配版本。我们也期待着更多基于眼球追踪技术的优秀VR内容。

医疗领域:让特殊人群重获沟通能力

除了VR之外,医疗也是七鑫易维重点发展的领域之一。其打造的全能眼沟通辅具,主要适用于渐冻人、脑瘫、高位截瘫、中风失语等人群。单渐冻人群体 ,目前国内统计在内的有20多万,脑瘫患者有600多万,并以每年4-5万名的数量在增加。通过使用全能眼沟通辅具,这些病人可以通过眼球的动作来打字,重获沟通能力。

在2015年,国务院总理高度评价眼控沟通辅具并肯定了七鑫易维为残疾人做的贡献。并且,最近几年政府在沟通辅助器具领域的扶持力度越来越大,会有更多患者拥有沟通辅助设备。目前,七鑫易维已经与某专业残疾人辅具代理商签订代理协议,即将在医院等渠道进行产品的推广。

“七鑫易维也希望我们的全能眼沟通辅具可以帮助更多的人群,让他们重建与外界的联系,生活的越来越好。”徐筱说道。

商业调研:数据更加真实直观

兰亭数字COO庄继顺就曾提到,使用七鑫易维的眼球追踪技术进行的商业调研。通过收集用户的眼球追踪数据,可以判断用户对不同的产品外观的喜好。而最近七鑫易维与某服装行业巨头的合作,也是在使用这一技术。

“比如当我换了货架或者整个店面的布局,我会让分析师戴上AR眼镜,在里面走一圈看看,从分析师的眼动数据中可以看出新的店面布局有没有不合适的地方,或者判断消费者对哪些款式更感兴趣。”通过眼球追踪获取的眼球轨迹、停留时间和热力图,可以获取更加真实、直观的反馈。与之相比,常见的收集用户反馈的手段,比如问卷是很容易被商家或客户过滤掉的,且不如眼动数据直观。

总之,通过眼球追踪技术,可以实现对消费行为的分析,实时记录用户在消费过程中自然的视觉行为,通过眼动数据分析用户需求,开展精准营销、精确导购等应用场景。

汽车领域:交互更加自然高效

不久前,七鑫易维与极鱼科技合作,为奔驰S500EL车型推出了全新的车载娱乐系统,通过眼球追踪和手势识别技术,实现了更加自然高效的交互体验。除此之外,在汽车行业也可以使用眼球追踪技术来进行商业调研。

比如,一些汽车行业客户希望消费者在进入4S店之后,不需要太多销售去做无聊的介绍。这时可以使用加入了眼球追踪技术的AR眼镜,在消费者佩戴之后,走到车旁边可以看到所有的配置信息,同时在这一过程中,通过眼球追踪的数据,4S店也就知道了用户都关注了哪些地方,从而进一步改善产品,提升服务质量。

此外,七鑫易维的车载眼球追踪解决方案可以对驾驶员进行疲劳驾驶检测,降低交通事故的发生率。

智能手机:全新的解锁和交互方式

在指纹识别成为智能手机的标配之后,苹果、三星等手机厂商也已经开始探索新的解锁和交互方式。而面部识别、虹膜识别和眼球追踪则成了新的研究方向。徐筱介绍说,使用七鑫易维的技术,用户可以通过眼睛来控制手机实现快捷交互,比如进行眼神解锁、眼控对焦拍照、眼动浏览信息、眼控游戏等。

目前,七鑫易维正在与国内两家手机大厂合作,为其开发结合了眼球追踪和虹膜识别的解锁和交互方式。其解决方案即将在CES展会期间亮相。同时亮相的,还有其AR眼球追踪配件产品。

眼球追踪技术终将成为VR头显的标配

当笔者问及眼球追踪技术的前景时,徐筱信心满满地说道:“眼球追踪技术更加符合人类使用习惯,必然会成为未来重要的交互方式,从这一趋势来看,眼球追踪技术必定会成为VR头显的标配,也终将进入消费级市场。”

但同时他也提到,眼球追踪技术要进入消费级市场,还需要3个方面的配合:

首先,要提高眼球追踪技术的稳定性和适配性。目前,七鑫易维正在与NVIDIA开展深度合作,将人工智能和深度学习算法融入眼球追踪技术。

其次,要与VR头显厂商加强合作,先从B端开始,探索VR头显+眼球跟踪技术的应用场景,再将其推向更多的消费级VR头显。

此外,还需要内容厂商合作,接入更多应用眼球追踪技术的VR游戏、VR社交、VR旅游内容。

写在最后

当然了,全世界从事眼球追踪技术的公司不止有七鑫易维一家。苹果、谷歌、Facebook等行业巨头也在抓紧布局。徐筱表示,与SMI、Tobii、Eyefluence、The Eye Tribe等公司相比,七鑫易维具备“反应速度快,定制能力强,产品性价比高”等优势。

“七鑫易维团队里有70%以上都是研发人员,百分百自主专利中国就我们一家,我们也是全球最早成功应用人工智能和深度学习的眼球追踪技术公司”,并且其现有的千万级的眼动数据库可以为算法优化提供大数据的支撑,这也是其核心优势之一。

在产品方面,七鑫易维已经有量产的眼球追踪配件aGlass。徐筱表示,今后七鑫易维也会与更多的VR头显厂商和传统行业企业一起推动眼球追踪技术在VR领域的应用,推动眼球追踪技术的普及。

最初发布于2018年1月4日

军事训练领域寻求一场变革 VR等技术显然还面临挑战

要让军队跟上新科技发展的步伐,一直都是充满挑战且价格昂贵的过程。当然,各国军事部门在寻求改变。根据研究机构的预测,到2022年,会有多达110亿美元的资金投入到虚拟现实、增强现实和混合现实培训系统中,而这些新技术正在成为军事培训领域创新的一个主要关注点。

在全球范围内,VR行业的规模一直在快速增长。预计到2021年,全球的VR市场规模将会达到750亿美元。单单是设备方面,到2021年,中国市场对VR设备的需求可能会超过8500万台,超过美国的6800万台的市场规模。随着消费者们驱动新的创意,并且在这一领域持续投入,像是英国、韩国和澳大利亚这样的国家,也开发了一些平台,来将VR战略融入到政府事务中,比如在军事领域。

在此之前,美国国防部一直依赖着现场式的培训,在一个所谓的“合成环境”中模拟真实的战场环境,用电脑控制的模拟器或者化身进行互动。单单是这个合成的数字培训系统,每年就要花费140亿美元。但是随着技术的进步,用于步兵的培训方式也在发生变化。

由于现在有了可以在移动设备上工作,并且还可以配合VR头显的培训课程和模拟器,以及基于云端的共享内容,士兵们现在可以在世界上的任何地方进行培训。这些模拟器可以模拟新的武器,新的军事策略,甚至可以让士兵们练习从飞机上进行高风险的高空跳伞。此外,老兵们还能够沉浸在治疗环境中,帮助他们处理战后的焦虑,或者创伤后应激障碍等心理创伤。

“美国国防部正在研发沉浸式技术,”三星的联邦政府销售事务副总裁Chris Balcik说道。这家电子技术公司也开发用于军事用途的技术和设备。“我们认为,虚拟现实、增强现实和混合现实在军事领域有着广阔的用武之地,目前已经用作一种补充手段,出现在了在军事训练中。”

毫无疑问,新技术是一场全球性的军事竞赛。根据2017年的一份关于人工智能在军事领域应用的报告,如果美国想要跟上其竞争对手,比如中国和俄罗斯,那么美国需要快速推进技术方面的创新。

“美国军队要么引领这场革命,要么屈服于已经落后的现状,” 位于弗吉尼亚州的数据科学和分析机构Govini在报告中说道。

该报告指出,美国是否能够成功地变身为军事新技术领域的领导者,将取决于美国国防部认识到AI和其他自动化系统的潜力的速度,以及需要多长时间才能全力投入这些相关的技术,比如VR/AR、人工神经网络、计算机视觉、自然语言处理、大数据、机器学习、无人系统和机器人,并且为这些技术在战场上找到对应的应用场景。

根据来自IDC的数据,美国仍然是在AI领域投入最高的国家,在2017年这一数字达到了差不多100亿美元的水平。报告人为,中国正在不断地投入这一领域,并且从军事领域的创新中获益。并且一个有趣的现象是,当美国政府还在犹豫时,中国已经开始向美国的创业团队投入资金了。

专家表示,虽然美国已经在将人工智能引入到国防战略中做了一些工作,但美国国防部并没有引领虚拟现实/增强现实/混合现实等技术在军事领域的发展。

“对于虚拟现实来说,基于消费者的业务是其发展的动力,”Booz Allen Hamilton的执行副总裁Young Bang说道,这是一家位于弗吉尼亚的管理和信息技术咨询机构。根据IDC提供的数据,2018年美国在VR领域的投入将会达到64亿美元,作为对比,亚太地区,包括日本在内,将会投入51亿美元,而欧洲、中东和非洲一共会有30亿美元。

虽然政府部门在虚拟现实领域的投入正在逐渐增加,专家表示在军队大规模采用VR之前,仍然有几个挑战需要克服。其中一个障碍是需要确保VR设备足够安全,以保证军事训练内容受到全程保护。政府和技术提供商一直在研究,需要具备多高的安全程度才能将其用在军事部门中。这就拖慢了VR等技术在军事培训领域的应用进度。

“比如你使用自己的声音来进行认证,并且已经输入了自己的PIN码,使用了你的生物识别手段如虹膜识别等等,这样你就使用了三四种认证手段,但这样足够了吗?”Balcik说道。

另一项挑战则是目前的VR设备存在的问题,比如会引发晕动症,会让用户感觉恶心等等。

“由于屏幕刷新率、分辨率等方面的问题,这些设备还有很大的优化空间,”Bang说道。“并且无线设备的电池寿命也是一个限制因素,不过很快就会被克服。”在刷新率方面,会随着新的图形处理芯片的推出得到改善,Bang说道。

开发可用的内容也是一个问题。目前已经可以采用的VR培训内容包括一些简单的任务,比如学习如何穿戴装备。而更复杂的用来模拟军事任务的VR内容开发起来就更难了,尤其是当这内容需要体现多人协同作战,或者模拟复杂的城镇作战环境时。

“现在每个人都在进入这一领域,无论是学术界、终端用户,还是军事部门,”Balcik说道。“这需要很多领域共同发力来驱动内容的进步。”

最初发布于2018年3月28日

原文链接:https://www.usnews.com/news/best-countries/articles/2018-03-20/the-us-military-wants-to-lead-the-innovation-game-in-vr