2022年02月23日媒体报道，GE医疗与微软混合现实合作伙伴北京嘉讯广源科技合作开发了一套基于HoloLens 2的混合现实培训系统。

HoloLens是FDA批准的第一个医疗AR解决方案，已经有不少科技医疗公司基于HoloLens开发了自己的虚拟现实医疗应用，除了医学培训外，还可以用于手术导航、术前方案讲解、远程医疗等。

GE医疗认为，目前这只是混合现实潜力的冰山一角。公司表示：“这就是未来，这项技术将在广泛的行业中得到非常广泛的应用。”

由于疾病和人体结构的复杂性，平面的影像往往无法满足疾病诊疗所需的多种信息，同时医疗从业者需要依赖大量的现场观察实操演练，通过漫长的培训才能成长。

全息影像能够有效提升我们的空间感知力，提升手术中的判断力，加速医生的学习。对于风险大，成本高，具有高危险性的项目会有很大的帮助。

正如微软CEO Satya Nadella所说：“当你改变了看待世界的方式，你也改变了你所看到的世界”。

2月19日，中国首个“元宇宙医学联盟”（IAMM）在上海成立。根据复旦大学附属中山医院呼吸科教授、元宇宙医学创立大会主席白春学在Clinical eHealth杂志上发表的关于“元宇宙医学”最早的定义，“元宇宙医学是通过AR实践的物联网医学”。

此前，元宇宙已经与第三代半导体、6G通信、量子计算和新一代信息技术融合应用等，写入《上海市电子信息产业发展“十四五”规划》。

在这则新闻下不少读者还是把元宇宙当成新潮概念在看待，实际上在元宇宙的概念提出之前，其底层技术就已经在影响乃至改变医疗行业。行业大佬们都是如何采用这项技术？下面请看我们的详细介绍吧!

嘉讯广源和GE医疗重新想象了基于微软HoloLens 2进行培训的情景。相关的模拟培训模块将为工程师提供精确的分步指导，以及叠加到医疗设备的全息3D可视化，从而帮助他们理解极其复杂机器的信号流或关键维护程序。

在试点成功后，GE医疗开始推进两个用例：

第一是Voyager MRI系统机柜培训。在这里，培训系统将全息动画示意图叠加到真实的机柜。当学员站在真实系统机柜前时，HoloLens 2可以识别和定位机柜中的组件和端口。结合基于人工智能的语音叙述，这起到了虚拟1:1培训师的作用，从而加快相关的学习过程。

第二个用例用于更换Revolution CT扫描仪中的探测器模块。在HoloLens 2中呈现高保真全息模型后，培训不再局限于专用教室。工程师可以在任何地方观察和学习更换探测器模块的过程，无需担心损坏敏感部件的风险。

作为说明，每个Revolution CT扫描仪都包含52个用于接收衰减X射线的“探测器模块”。所述探测器模块是非常精密的部件，非常昂贵，如果没有经过良好的培训，维修人员在维修过程中很容易损坏部件。

Voyager MRI则具有一个复杂的有线系统机柜，类似于IT中心的服务器。即使在实际操作的环境中，维修人员都很难理解它们之间的联系。

而在培训中部署上述混合现实解决方案带来了巨大的好处：

在当前的两个用例中，每个学员平均可以节省四个小时的培训时间。通过缩短培训时间，学员可以有更多的实际实验室时间进行实操实践，这可以进一步加深他们对关键知识和服务程序的理解和应用。

GE医疗在中国的培训机构部署了价值超过2000万美元的医疗设备。随着更多混合现实和HoloLens 2解决方案用作实验室培训方法，意外设备损坏的风险可以大大降低。

GE医疗在中国有1000多名工程师，预计这项培训课程会帮助提升GE的维修服务。

在业务层面，微软与GE医疗也在全球范围内达成了基于微软智能云的合作：通过将海量图像数据迁移到微软Azure Blob Storage，微软为GE医疗提供了基于云计算技术的高性价比的存档数据存储服务，同时还能够满足GE医疗对于高性能系统的应用需求。

GE医疗虚拟ICU解决方案

在新冠疫情爆发后，GE医疗和微软携手推出了虚拟ICU平台，期望能缓解医护人员的压力。

GE医疗和微软合作推出的一款虚拟ICU，Mural virtual care solution软件，能直接部署在医院内。Mural virtual care solution可将来自多个系统和设备的数据集成到一个单一的窗格中，可以让医护人员同时远程护理多个ICU患者并及时提供医疗服务，还能减少医护人员暴露的风险。在最大化利用医院现有资源的情况下为患者提供了最优质的医疗服务。

在国内混合现实技术在医疗上的应用也在蓬勃发展，武汉协和医院率先在这一领域做了诸多探索。

2018 年 1 月，武汉协和医院指导新疆博州人民医院完成了三例病情复杂的骨折手术。患者罹患的股骨颈骨折、粗隆间骨折和腰椎骨折较为复杂，但负责指导的武汉协和医院医生没有亲自前往新疆，借助于微软HoloLens全息眼镜和维卓致远医疗科技开发的基于混合现实技术的远程会诊系统，武汉、美国弗吉尼亚州的骨科医生，同新疆实施手术的医生一道，完成对这名髋部骨折患者的远程会诊。

在手术中，两家医院的医生都戴着微软 Hololens，视野中都可以看到患者的医学透视影像。基于 Hololens 的混合现实性能，作为指导的武汉协和医院医生可以同时看到患者的透视图与博州人民医院医生的操作，同时在透视图上进行标注，博州医生也可以直接看到。

这种合作比过去基于平面显示器与摄像头的医疗协助更高效直接。这是微软在“Hololens 中国商用一周年”的新闻会上介绍的案例之一。

2018年5月25日，在医学混合现实云启动大会暨《医学混合现实》新书发布会上，武汉协和医院骨科医院主任医师叶哲伟，全球同步首次发布了混合现实技术在医学领域的第一部专著《医学混合现实》。

随着诸多应用的落地，国内资本也把目光投向了这一领域，今年1月国内混合现实医疗先驱锦瑟医疗接连获得了两轮融资。

锦瑟医疗成立于2017年，作为同时跨软组织和硬组织导航的混合现实手术平台的医学先驱企业，2019年取得国内第一张基于混合现实技术的产品注册证，其自主研发MR（混合现实技术）系列产品的应用场景覆盖外科医学教育、医学临床、远程协作及手术导航等不同方向。

锦瑟医疗也是微软MRPP认证合作伙伴（全球仅10余家）、微软Co－Sell合作伙伴，与骨科龙头上市企业威高骨科合作，并与浙大一附院、中南大学湘雅医院等数十家医院的临床科室达成了产学研一体化合作，且已实现在以长江流域为主的近50个医院落地。

2022年1月锦瑟医疗宣布接连完成数千万元人民币的A轮及A+轮融资。两轮融资相隔较短，A轮由唯麟资本领投，常创投、探针资本跟投；A+轮融资由尚元资本独家投资，探针资本担任独家财务顾问。本轮融资所得将用于锦瑟医疗加速骨科和肿瘤产品管线的研发和商业化，以及公司后续团队的扩充等方面。

作为本次融资独家财务顾问，探针资本合伙人杨丹宁表示：“公司创新的解决方案能够在未来同时覆盖软组织及硬组织的数十种术式，并且凭借极为显著的易用性与经济性成为中国外科手术的“新基建”。”

医疗成混合现实顶级行业

目前呈现患者病灶的影像数据一般都是通过 X 线、超声、CT、核磁共振等传统技术手段检查后所得，虽然获取的影像可以达到三维效果，但是一般都呈现在二维的平面上，有着很大局限性。而混合现实技术展示的则是三维影像，相当于赋予医生一双“慧眼”，在手术中具有更高的应用价值。

而相比给昂贵的CT、MR，全息眼镜相当经济，比如一台 Hololens售价 2 万余人民币，费用可以忽略不计，在成本方面可能只需考虑配套软件费用。

国内企业的加入还将进一步压缩这部分成本。2019年9月3日，影创科技自主研发生产的医疗行业定制版Action One Pro智能眼镜，通过蓝软智能医疗科技有限公司自主研发的MR混合现实手术导航系统，在5G网络环境下，于常州市第一人民医院成功应用，这也是江苏省首例在5G支持下远程应用MR混合现实手术导航系统辅助实施脊柱外科手术。

目前混合现实在医疗行业的应用正在快速推进。根据2020-2026年全球医疗保健市场混合现实报告，全球医疗保健市场预计将增长10倍，Grand View Research在其2021年2月的增强现实市场规模，份额和趋势分析报告中发现，医疗预计将成为增强现实增长的顶级行业。

不过这类新一代信息技术融合应用的发展也给医疗注册审批制度带来挑战，人工智能医用软件属于新兴的一类医疗器械，我国很多注册审批数据标准库尚未形成。上海市经信委方面表示，未来出台针对包括人工智能医用软件在内的特殊性医疗软件产品的管理规范，对于技术赋能医疗健康行业的发展非常有必要。