月度归档： 2019 年 2 月

微软全新Kinect传感器Azure Kinect DK上手

微软昨天在巴塞罗那举行的MWC 2019大会上举办的HoloLens 2新闻发布会期间宣布了全新的Kinect传感器，这家软件巨头推出的新Kinect是一款售价为399美元的PC外围设备，可以像开发人员使用Kinect for Windows甚至最初的Xbox 360 Kinect一样用作传感器。微软设计这款新的Kinect的主要用途在于Azure，这是该公司基于云的服务，用于计算机视觉和语音模型。

外媒记者在MWC大会上仔细研究了Azure Kinect DK，并惊讶于它与Kinect for Windows传感器相比要小得多，而且也更轻，Azure Kinect DK仅重440克，而Kinect for Windows则重达970克，并且由于一系列的硬件升级变得更加强大。与之前的Kinect中的4麦克风阵列相比，Azure Kinect DK内置7个麦克风阵列，以及能够支持3840*2160分辨率图像的经过升级的RGB相机。其中的深度传感器与HoloLens 2上的深度传感器相同，因而具有一致的分辨率和帧率。

微软计划为这款新的Azure Kinect DK发布一系列SDK，由于以前基于Kinect for Windows的应用程序无法直接用于这个新的Kinect，开发人员需要将现有的Kinect for Windows应用程序移植到这个新平台上。Azure Kinect DK有一个新的传感器SDK、身体跟踪SDK、视觉API和语音服务SDK。微软尚未发布所有这些SDK，但这款399美元的Kinect已经开始预定，预计将于6月底向开发者发货。

微软提供了一系列示例，来说明开发人员能够如何在零售、制造甚至医疗保健领域中使用Azure Kinect DK。比如在零售商店中，开发者可以使用这款新的Kinect来跟踪产品和管理库存，并且鉴于Azure Kinect DK具备对身体跟踪的支持，它甚至可以用于无人商店。与最初的Kinect非常相似，其用例将取决于创意开发人员如何使用它。

但这个新的Kinect传感器不会取代Kinect for Xbox，它不是为与Xbox一起使用而设计的，并且开发人员可以在有或没有Azure的情况下使用它。外媒记者在现场尝试了一下新Kinect的身体跟踪功能的简短演示，可以使用新的SDK来测量跳的多高，当这款设备在6月下旬出货时，身体跟踪SDK也将可以使用。它让我想起了很多早期的Kinect演示，但新的传感器外形更小，并且有了明确的用途。它不再是游戏外围设备，它是该公司用HoloLens构建的“第三个计算时代”的重要组成部分，同时也将助力微软的Azure云服务。

最初发布于2019年2月26日

原文链接：https://www.theverge.com/2019/2/25/18239860/microsoft-kinect-azure-dk-hands-on-mwc-2019

美国海军陆战队寻求用AI/AR等技术规划大规模军事演习

美国海军陆战队正在寻求大数据分析和潜在的类似IBM Watson的机器或软件，以帮助规划复杂的军事演习，并在沉浸式环境中规划未来的战争。

美国海军陆战队的军事演习能力项目经理Ross Monta上校最近对媒体表示，海军陆战队的一个最近的项目意在“将先进的分析技术、可视化、建模和模拟技术相结合，创造出一种可以让高级军官做出大量决策的环境。”

这包括了增强未来的军事能力，测试作战计划的方式，开发操作概念，以及为优化资源提供信息。

这该项目在四个技术领域的第二轮信息收集，其中包括建模和模拟、军事演习设计、数据服务和可视化。美国海军陆战队已经审查1月、2月、3月和7月间各厂商提交的白皮书，并在去年10月开始了测试。

早在2017年现代海上军事博览会期间，Monta上校就谈到了美国海军陆战队是如何为Quantico基地的军事演习中心制定一个三到五年的计划，该计划允许指挥人员每年进行20次军事演习，其中包括两次大规模的，有250人参与的演习。

他们当时所寻求的模拟系统将提供“对未来的行动环境的准确的表达，模拟友军和敌军的能力”，以及“对演习的衍生数据或见解进行快速，深入的分析”的能力。

时任海军陆战队系统司令部负责人的Joseph Shrader将军说，军事演习必须要超越“在地图上移动那些标记”。

Monta说，当时该中心每年能够进行11次军事演习。

他们正在寻求与先进的模拟能力合作，例如他们在fbo.gov上发布的那些需求，以及来自Ellis Group智库的专家们，都是为了更好地理解高层次的、长期的作战需求。

训练系统指挥部负责人Walt Yates上校对媒体表示，其目标是找到让人工智能运行多达1000次的模拟演习的方法。有了这些数字，指挥人员就可以了解胜利的概率，对伤亡值的期望和完成任务所需的后勤保障。

模拟能力将可以让指挥官针对未来的威胁来测试某种场景，以评估获取胜利所需的设备和战术。Yates说，这些因素将会影响所有的规划，从购买下一件战斗装备，到如何最好地部署部队。

大数据分析只是美国海军陆战队近年来一直在努力推进的一系列项目之一，意在将军事演习从小队规模推广至海军远征军规模，其中包括充分利用计算、数据分析、虚拟现实、增强现实和游戏方面的新进展。

从去年开始，美国海军陆战队第24步兵营开始测试战术决策套件(Tactical Decision Kits)，其中包括笔记本电脑、HoloLens头显和无人机，可以让小作战单位的领导映射战斗空间，然后在HoloLens中演示作战行动计划，对任务进行预演。

在去年早些时候，MARCORSYSCOM开始寻求在真实的培训中推广武器模拟器，以替代已经使用了几十年，至今仍在使用的古老的激光模拟射击训练。

美国海军陆战队需要能够更真实地复制子弹和炮弹的移动方式以及它们造成的伤害类型的射击系统。

该系统将能够模拟通常能在军营中看到的所有武器和车辆，至少应该包括：M4/M16、M9或其他手枪、M27自动步枪、手榴弹、火箭筒、轻型反坦克武器、60毫米迫击炮、81毫米迫击炮、Claymore反步兵地雷、Mk-19榴弹发射器、俄军的机枪、AK-47的变种系列、Javelin导弹和Carl Gustaf无后坐力步枪。

该系统还可以立即进行行动后的审查，以便训练员和指挥官能够看到他们的海军陆战队员瞄准的目标、射击目标消耗的弹药，以及他们对对手造成的伤害。

最初发布于2019年2月22日

原文链接：https://www.militarytimes.com/news/your-marine-corps/2018/12/18/marines-look-for-ibm-watson-like-artificial-intelligence-to-plan-large-scale-wargames/

助力医患沟通 医生用VR进行脑部手术的术前准备

五十九岁的Bonnie Haber发现自己正在经历着复杂的诊断和吓人的手术，就像成千上万的其他美国人一样。Haber的肿瘤并非癌变，但它靠近视神经的位置意味着医生们必须快速行动。

“这是脑肿瘤，这是脑膜瘤，这里的灰色区域是你的大脑。看到它是怎样存在于你脑中了吗?“Hackensack Meridian Health JFK神经科学研究所主席Thomas Steineke博士说。

“当他向我展示常规的核磁共振成像时，他说这是你的脑肿瘤，它必须被取出来。我还是不明白，为什么一定要取出来?如果我唯一的症状是时不时地感到头晕，我可以忍受这种情况，而不必让你打开我的头骨。我没有医学上的问题，我很健康。然后他向我展示了虚拟现实的内容，它帮助我理解了我的病情，“Haber说。

虚拟现实在医学界是一个前沿的概念。在进行手术之前，Hackensack Meridian Health JFK神经科学研究所的患者和外科医生们先用虚拟现实头显对大脑有了一些了解，对手术进行准备。

“它使我们能够更好地理解脑部结构并更好地规划操作。通常情况下，我会根据我在虚拟现实中看到的东西改变我的某些操作。它使我的操作更加精确，坦率地说，会更安全一点，“Steineke说。

JFK神经科学研究所是该州第一家也是唯一一家使用Precision VR Surgical Theatre的医院。Steineke说，自从一年前部署该系统到现在，它已成为复杂的神经外科手术的首选工具。到目前为止，他已经在82名患者身上使用过它。

“我能够用它来排练手术，移除我需要移除的骨头，这使我在手术过程中更有效率，坦率地说，我觉得它让手术更安全，因为我能够预测到在手术过程中我会遇到什么样的脑部结构，“斯泰尼克说。

Steineke可以操纵和旋转肺叶和组织，让患者们在进入手术室之前就能参与他们的护理计划。虽然这需要医院付出代价，比如每一套Precision VR Surgical Theatre需要医院支付高达10,000美元的费用。Haber说她很感激这个系统，因为该系统缓解了她的担忧。

“对我来说，核磁共振成像上的小白点(肿瘤的图像)与虚拟现实中那个大而且丑陋的肿块之间的区别，确实对我产生了影响，”Haber说。

医生们说虚拟现实和增强现实在医学上的未来是无限的。这意味着更好的培训，更少的侵入性手术，以及更快的恢复。

最初发布于2019年2月18日

原文链接：https://www.njtvonline.org/news/video/doctors-use-virtual-reality-program-to-prepare-for-brain-surgeries/

微软HoloLens中标美国陆军4.8亿美元”集成视觉增强系统”合同

根据美国陆军发布的消息，在去年11月，美国陆军与微软达成一项总值近4.8亿美元的合同，微软将会向美国陆军提供HoloLens增强现实系统原型，用于战斗任务和训练。

根据彭博社的消息，该合同最终可能导致军方购买超过10万台头显，并且旨在“通过提高在敌方之前侦查、决策和参与的能力来增强军队的杀伤力”，根据政府对该计划的描述，该系统被正式称为集成视觉增强系统(Integrated Visual Augmentation System，简称IVAS)。

“增强现实技术将为部队提供更多更好的信息来帮助做出决策。这项新工作将我们与国防部长期的、互信的关系扩展到这个新领域，“一位微软发言人在给彭博社的电子邮件声明中表示。

虚拟现实产生了一种由计算机生成的现实，用户可以与之交互(通常通过头显)，而增强现实会将数字信息带入用户的视野并叠加到现实世界，通常需要通过智能手机的摄像头或头显来实现 。

HoloLens是微软的AR平台，这家软件巨头称之为“混合现实”。该公司已经将HoloLens用于工业场景，他们认为这台头显可以“让技术人员在混合现实中远程协作，并在几分钟内解决问题，而不是几天。“并且微软表示用户可以充分利用3D模型“创建易于编辑的、生活规模的布局，让您和您的利益相关者可以在物理世界或虚拟现实中体验全息图。”

据MSPoweruser称，在2018年4月，微软透露已经向客户出货了50000台HoloLens设备。正如彭博社指出的那样，该合同使得美国陆军成为微软最重要的HoloLens客户之一。

美国陆军希望微软提供的头显在几个关键方面区别于消费级同类产品。

根据彭博社的报道：在与竞标该合同的公司分享的一份文件中，美国陆军表示，它希望该产品能结合夜视和热感应，测量像呼吸这样的生命特征和“准备就绪”，监测脑震荡并提供听力保护。

微软作为中标者，预计将在两年内交付2500台头显，并展示全面生产的能力。

美国陆军的合同旨在鼓励服务部门与不是典型国防承包商的公司开展业务。AR创业公司Magic Leap是另一个竞标者，据彭博社报道，2018年8月美国陆军与25家有兴趣以某种方式参与该项目的公司举行了会议，其中包括Booz Allen Hamilton控股公司，Lockheed Martin公司和Raytheon公司。

美国陆军并不是唯一对AR技术感兴趣的国防部门。美军特种作战司令部(SOCOM)也对 “ 视觉增强系统(Visual Augmentation Systems，简称VAS)”及相关辅助技术的改进和增强表示了兴趣。这包括用于抬头显示器的AR和虚拟现实解决方案，以及如何将不同数据源的信息融合进一个共同的视觉显示单元。

美军特种作战司令部正在寻求几个不同领域的创新技术和能力，包括AI/机器学习，具备增强的光学特性的显示器，多传感器数据融合与处理、通信等。

在这些领域内，美军特种作战司令部对非常具体的技术应用感兴趣。例如，在AR/VR和AI/机器学习领域中，美军特种作战司令部对任务前的演练和定位、全息显示，游戏技术，神经形态计算和工程，远程医疗以及综合训练和操作环境等技术很感兴趣。

最初发布于2019年2月15日

原文链接：https://fedtechmagazine.com/article/2019/01/army-teams-microsoft-ar

美国海军用HoloLens进行实弹射击训练 让模拟训练更逼真

模拟训练可以帮助士兵和水手学习如何安全地使用他们的武器，但模拟器有时可能无法营造出真正的战斗中的充满压力的环境。

这就是美国海军开发出一种在HoloLens上运行的更逼真的增强现实模拟器的原因。

该系统被称为武器增强现实评分系统(Weapons Augmented Reality Scoring System，简称WARSS)，通过用HoloLens在用户的视野中显示敌方部队的3D图像来模拟实弹演习。该系统还会显示一个记分牌，该记分牌可以根据射击次数与未命中次数的百分比来计算已开枪数，击中次数以及得分。

这样一来，士兵们可以向虚拟目标发射实弹，而不是向真实目标发射空包弹，以获得更真实的战场感觉。

“当你专注于模拟训练时，你对风险的评估是不同的。它可以帮助你学习如何使用武器，它可以帮助你思考环境，”美国海军的Steve Murray上校说，他是美国海军海上系统司令部水面舰艇部队的项目经理。“当你将所有的压力都加入时，你需要建立一个更逼真的环境，以确保你在实际战斗中获得你想要的结果。”

此外，WARSS还可以将士兵的视频流显示在传统显示器或笔记本电脑上，也可以通过远程网络连接来传输，让指挥人员可以远程观察训练过程。

近年来，HoloLens已经成为全球军事行动中备受欢迎的AR可穿戴设备，英国皇家海军和澳大利亚皇家空军都采用了这款来自微软的头显。

去年，微软甚至击败了Magic Leap，获得了一项4.8亿美元的合同，将向美国陆军提供AR头显。

但是，这种优势并不能永远保证，因为目前的部署仅限于指挥中心或训练演习，二者都远离战场。最终，军队的客户将寻求能够进入战场的AR硬件，在这种情况下，我们期望微软能够提供体积较小的HoloLens。

最初发布于2019年2月13日

原文链接：https://hololens.reality.news/news/us-navy-taps-microsofts-hololens-for-augmented-reality-war-games-system-0193389/

华为AR眼镜专利曝光 在AR眼镜上嵌入智能手表?

近日，外媒曝光了来自华为的一项增强现实(AR)眼镜专利，最大的特色是能够在上面嵌入智能手表，以便随时调用智能手表的屏幕和摄像头。

去年11月，华为消费者业务CEO余承东在接受CNBC采访时称，该公司正在研发与智能手机配合使用的AR眼镜，其有望在一两年内亮相。

智能眼镜通常笨重难用，如果能够变得更加轻盈，显然可以提升用户的自由度。这也是目前众多AR眼镜厂商努力的方向。比如有些厂商将AR眼镜的计算单元作为外置设备，通过线缆与眼镜连接。而一项新公布的专利显示，华为还研究了将AR眼镜与智能手表搭配使用的“奇特”方式。

2019年2月7日，华为的一项AR眼镜专利浮出水面。该专利描述了一种轻盈的、可拆分的、相对实惠的AR眼镜。

这款“超薄”的增强现实头戴式装置本身并未配备摄像头、显示屏或麦克风，而是需要通过配套的智能手表来实现(挂在镜腿上，用户头部右侧的太阳穴旁)。眼镜内嵌了适配器和反光镜，通过反光镜，手表屏幕上的内容可以直接反射到用户的眼睛里。

智能手表只能通过一种形式安装到眼镜上，屏幕向内，并且摄像头朝前。在专利中，华为描述了两款略有不同的框架(主要是镜腿部分)，可选用透明或半透明的元件。而智能手表的摄像头则可以记录用户的活动。

当然，专利可能只是一个占位符，不代表华为一定会很快推出类似的AR眼镜。而且目前，华为还没有发布带摄像头的智能手表。如果该公司想要将专利中的AR眼镜推向市场，那么该公司很可能会首先推出带摄像头的智能手表。

最初发布于2019年2月12日

原文链接：https://nl.letsgodigital.org/augmented-reality-ar/huawei-ar-bril/

VR/AR/5G齐上阵 2019央视春晚首次实现5G网络4K直播

1月31日，中央广播电视总台召开2019年春晚新闻发布会，介绍本届春晚节目亮点及多项技术创新应用，同时公布了春晚主持人阵容。

中央广播电视总台央视分党组成员姜文波在发布会上介绍：“2019年春晚技术团队一直在追求将最新的技术、最先进的设备应用到总台2019年春晚节目的制作中，为创作出更优秀的节目服务。”可以说，今年春晚的最大亮点之一就是全方位的科技驱动和技术创新。

今年的央视春晚主创团队在4K、5G、VR、AR、AI等多方面进行技术创新，真正带来一场艺术与科技完美结合的春晚。中央广播电视总台央视分党组成员、副总编辑朱彤表示：“这是技术革新与艺术创新在人类文化艺术长廊上的一次有力对接，也是春晚历史上的一次重要创新。”

据了解，今年央视春晚将首次实现春晚在4K超高清频道直播，并全程采用5.1环绕声。如果用户通过中央广播电视总台4K超高清频道(CCTV-4K)收看春晚节目，配置4K超高清图像+5.1环绕声，就能带来更高清晰度、更宽色域、更高动态范围视频和环绕声音频体验，在家就可以享受到影院的视听效果。

在移动通信最新最尖端的发展趋势5G网络高速发展的背景下，中央广播电视总台在2018年年末与中国电信、中国移动、中国联通、华为公司共同签署了5G新媒体平台合作建设框架协议，打造了我国首个国家级5G新媒体平台，此次5G网络也在春晚分会场的内容传输中得到了测试和应用。

1月13日，在春晚深圳分会场成功开展了5G网络4K电视传输测试，除夕夜中，两台基于5G网络的4K机位将纳入深圳分会场的制作系统，用于春晚的4K电视直播。1月28日，在长春分会场成功开展了5G网络VR实时传输。用户可在央视新闻的融媒体节目直播《我要看春晚》中看到通过5G网络下传输的超高清VR全景信号，这也是5G网络与VR制作技术首次结合应用在电视融媒体节目的直播中。这些创新成果都将为2019年春晚带来耳目一新、为之一振的视听体验。

此外，今年春晚的技术还实现了多项突破。春晚首次应用智能语音识别字幕制作技术;首次使用4K超高清AR在线包装技术;全面运用天鹰座和无人机等多个特种设备用于拍摄;在主会场一号演播大厅使用4K超高清主屏和大量冰屏，为春晚带来梦幻般的舞台效果。

最初发布于2019年2月1日

华为正式发布华为云5G Cloud VR服务 推出开发者扶持计划

近日，华为发布全球首款基于云的Cloud VR连接服务，包括底层开发者套件、华为云Cloud VR连接服务以及Cloud VR开发者社区。

要实现重度计算机渲染(CG)场景下的VR业务普适，首先要解决的是可获得性问题。在5G Cloud VR场景中，虚拟图像的生成从本地迁移到云端，使终端变得更简单，使用成本更低，这将促进VR走向千行万业。

此次发布的华为云5G Cloud VR服务包括3个模块：

Cloud VR开发套件，用于线下开发，开发者可先基于本地局域网络进行内容开发。

华为云Cloud VR连接服务，与运营商网络进行云端适配，并最终实现商用。华为云Cloud VR连接服务，既可以直接为行业用户提供商用服务，也可以被开发者二次开发和集成。

Cloud VR开发者社区，用于交流互动和经验分享。

随着移动产业的发展，人们对体验需求不断提高。5G超大带宽、超低时延的特性以及可保障的网络等，是实现云+新兴业务的基础。

通过智终端、宽管道、云应用的5G典型业务模式，Cloud VR将成为5G元年最重要的eMBB业务之一。

“5G和云是Cloud VR普及的双引擎，本次Cloud VR连接服务，正是培养Cloud VR业务的沃土。任何传统的VR开发者、运营者、以及新进入者，都可以基于这个黑土地，轻松拓展自身业务。”华为无线网络首席营销官周跃峰在发布会上表示，“在5G来临前夜，该服务可以培育出众多的Cloud VR应用，并因为上云的低成本及使用的低门槛，让VR无处不在。本次发布的华为云5G Cloud VR连接服务将是业界第一个5G eMBB百兆级价值业务。”

华为X Labs下属MBB实验室主任赵其勇在与开发者现场交流中提到：“我们基于业界先进的开源组件和API，研发了Cloud VR连接协议和软件，且针对华为云平台进行了核心代码重构和优化，并支持面向5G的广域IP传输网络及多类型VR头盔。我们把该协议和软件转化为华为云的一种服务，提供给广大开发者使用。通过5G和云，充分发挥云的算力和头盔的便携性，带来了一种全新的业务模式和边界突破。”

发布会上，华为AR/VR产品线副总裁赵学知、华为云文娱解决方案专家周钮冬表示，基于5G和云构筑的Cloud VR模式将有效推动产业迅速发展，更好地协同端管云;两位分别就终端、云业务支持上解答了VR开发者的许多问题，为产业生态构建指引方向扫清阴霾。

此外，华为提供Cloud VR开发者扶持计划，符合条件的开发者可获得华为云资源充值券，重点扶持教育、旅游、建筑、会展、娱乐等行业的VR应用上云，支持产业生态发展。

最初发布于2019年1月26日