日前,武汉协和医院骨科医院成功为一位病人实施了世界上首例混合现实(MR)技术引导下的髋部骨折手术,实时共享的全息影像让医生做手术如看“透明人”。病人是15岁的少女,因摔伤致左髋部骨折,入院后诊断为左股骨颈骨折。如果处理不当,极易发生骨折不愈合、股骨头缺血性坏死等后遗症。
为此,协和医院骨科医院叶哲伟主任医师、吴星火副教授手术团队,决定采用了最新的混合现实技术——清晰呈现少女股骨颈骨折部位的全息影像。
6月25日,手术前,患者戴上VR眼镜,在医生解说下,360度全方位浏览自己骨折部位的3D数字“复制品”,对自己骨折的具体情况、手术方案有了直观的了解。
26日,主刀医生和助手医生在手术中借助全息影像信息,将患者虚拟的3D数字模型与患者病灶重叠在一起,医生从此拥有了全新的高维度“透视”手术区域的工具,做手术如看透明人。
叶哲伟解释,混合现实技术给外科手术带来了极大的便利,以前医生无法在手术中一边看人体组织的3D显示,一边将3D显示与病人真实的解剖部位进行对应。混合现实技术可以在外科医生不充分开口的情况下掌握病人的内部信息,并叠加显示在虚拟的物理空间上,实现精准的手术治疗方案制定。
更加神奇的是,将全息影像模型移到病患体位或者叠加在病患病灶结构上,虚实融合,保证了创伤最小基础上的病灶结构的最大化暴露,有透明组织器官的效果。手术的精确性和安全性均得以提升,提高了手术效率,有效缩短了手术时间。
吴星火介绍,此次武汉协和医院骨科医院在国内率先将星图全息影像系统用于骨科临床,在世界范围尚属首例。
据了解,目前,一套MR设备价值200多万元。除了骨科手术外,MR技术还在甲乳外科、神经外科、泌尿外科等领域有应用,国内已有数家大型医院开展。目前,哈佛医学院等全球最高端的医学院校也开始引进这套系统用于临床和医学教育。
——延伸阅读:
什么是混合现实技术(MR)?
混合现实(Mix reality,简称MR),既包括增强现实和增强虚拟,指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。它是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。
MR简介
混合现实技术(MR)是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。
相比VR和AR,混合现实可以说是三者当中最不为人所知的,但有意思的是,它可能是进入主流市场最容易的方式。
混合现实的关键词是灵活性,它试图把VR和AR的优点集于一身。从理论上讲,混合现实可让用户看到看到现实世界(类似AR),但同时又能呈现出可信的虚拟物体(类似VR)。随后,它会把虚拟物体固定在真实空间当中,从而给人以真实感。
比如,玩家在《精灵宝可梦Go》当中看到的角色并没有遵循混合现实的规则。当遭遇小精灵时,它的距离并不会随着玩家的移动而发生改变。更直接地讲,它是在真实世界之上的,而并不会让人觉得它实际存在于现实世界当中。
而在混合现实当中,体验者是可以感受到虚拟物体与现实世界之间的依存关系的。它也完全符合现实世界中的透视法则,走近看会变大,而离远之后会变小。这听上去的确很棒,但有关混合现实方面的应用研究目前还都处于闭门测试状态。就拿获得了谷歌和高通等巨头投资的Magic Leap举例,这家公司至今都没有公开展示过自己的技术,而我们对其相关的硬件产品更是一无所知。
MR特点
混合现实(MR)(既包括增强现实和增强虚拟)指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。系统通常采用三个主要特点:
1.它结合了虚拟和现实
2.在虚拟的三维(3D注册)
3.实时运行
混合现实(MR)的实现需要在一个能与现实世界各事物相互交互的环境中。如果一切事物都是虚拟的那就是VR的领域了。如果展现出来的虚拟信息只能简单叠加在现实事物上,那就是AR。MR的关键点就是与现实世界进行交互和信息的及时获取。
MR诞生
MR,既是“混合现实”(Mixed Reality),而是由“智能硬件之父”多伦多大学教授Steve Mann提出的介导现实,全称Mediated Reality。
在上世纪七八十年代,为了增强简单自身视觉效果,让眼睛在任何情境下都能够“看到”周围环境,Steve Mann设计出可穿戴智能硬件,这被看作是初步对MR技术的探索。
VR是纯虚拟数字画面,而AR虚拟数字画面加上裸眼现实,MR是数字化现实加上虚拟数字画面。从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。
MR技术结合了VR与AR的优势,能够更好地将AR技术体现出来。
根据Steve Mann的理论,智能硬件最后都会从AR技术逐步向MR技术过渡。“MR和AR的区别在于MR通过一个摄像头让你看到裸眼都看不到的现实,AR只管叠加虚拟环境而不管现实本身。”
MR应用
一般来说,虚拟现实的常见载体都是智能眼镜,如今,第一款融合了MR技术的智能眼镜正在开发阶段,离投入商用还需要一定时间。
从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。为了解决视角和清晰度问题,新型的MR技术将会投入在更丰富的载体中,除了眼镜、投影仪外,目前研发团队正在考虑用头盔、镜子、透明设备做载体的可能性。
MR前景
有研究机构预估到2020年,全球头戴虚拟现实设备年销量将达4000万台左右,市场规模约400亿元,加上内容服务和企业级应用,市场容量超过千亿元。国内一线科技企业已加入到VR设备及内容的研发中,而在内容创造方面,也已经有了超次元MR这样的作品,这必然推动VR更快向AR、MR技术过渡。
目前全球从事MR领域的企业和团队都比较少,很多都处于研究阶段。
来源:蟠桃会(微信号 iPanTaoHui)
为你推荐

《NPJ digital medicine》刊发李冬梅教授团队成果:AI赋能高效识别眼睑肿物
亚太眼整形外科学会主席、中华医学会眼科分会眼整形眼眶病学组副组长李冬梅教授团队携手爱尔数字眼科研究所,在《NPJ digital medicine》(影响因子:12 4)学术期刊发表团队...
文/李林 2025-04-02 10:27

默克全球执行副总裁周虹:合作与创新是默克未来五年战略的两大关键词
近日,德国默克医药健康全球执行副总裁、中国及国际市场负责人周虹带领医药健康中国及国际市场管理团队开启了2025年度首次“中国行”。
2025-04-01 17:11

首个且唯一,阿斯利康PD-L1单抗获FDA批准治疗肌层浸润性膀胱癌
度伐利尤单抗联合吉西他滨和顺铂作为新辅助治疗,随后度伐利尤单抗作为根治性膀胱切除术后的辅助单药治疗,用于治疗肌层浸润性膀胱癌成年患者。
2025-04-01 14:37

全国首个,湖北为脑机接口医疗服务定价
昨日(3月31日),据“湖北发布”消息,湖北省医保局发布全国首个脑机接口医疗服务价格,其中,侵入式脑机接口置入费6552元 次,侵入式脑机接口取出费3139元 次,非侵入式脑机...
2025-04-01 11:03

一款国产创新流感药,获批
近日,据国家药监局官网信息显示,青峰医药下属子公司江西科睿药自主研发的1类创新药玛舒拉沙韦片(商品名:伊速达)正式获批上市,用于既往健康的12岁及以上青少年和成人单纯性...
2025-04-01 10:22

26省联盟药品集采启动,聚焦妇科用药和造影剂
近日,山西省药械集中招标采购中心发布《关于做好二十六省联盟药品集中带量采购品种数据填报工作的通知》,开展相关采购数据填报工作。
2025-03-31 21:48

优时比罗泽利昔珠单抗注射液(优迪革)中国获批,全球首个且唯一双亚型创新药治疗全身型重症肌无力
作为唯一人源化、高亲和力且具备创新修饰结构的IgG4单抗,关键Ⅲ期MycarinG试验证实罗泽利昔珠单抗注射液(优迪革®)较安慰剂显著改善全身型重症肌无力患者的多个临床终点与结局。
2025-03-31 15:58

从手术麻醉到生命全周期护航,麻醉学科发展拓宽生命边界
3月26日,由中华医学会麻醉学分会、中国医师协会麻醉学医师分会等23家学协会共同举办的2025年中国麻醉周学术活动的启动仪式举办,该活动以“生命之重,大医精诚——守生命保驾护...
2025-03-31 15:30

欧狄沃联合逸沃成为中国目前唯一获批的肝细胞癌一线双免疫联合疗法
欧狄沃联合逸沃对比仑伐替尼或索拉非尼,可显著改善不可切除肝细胞癌一线患者的总生存期(OS),客观缓解率(ORR)可改善近3倍,中位缓解持续时间(mDOR)达30个月
2025-03-31 13:45

罗氏制药榜首 “现金牛” 产品罗可适(奥瑞利珠单抗)在华获批:开启多发性硬化症一年两次治疗新时代
罗氏制药今日(3月31日)宣布,其旗下创新药罗可适®(Ocrevus®,通用名:奥瑞利珠单抗注射液 ocrelizumab injection)正式获得中国国家药品监督管理局批准,每六个月静脉输...
2025-03-31 13:39

三生有幸,医者仁心:三生制药向全体医药工作者致敬!
3月30日是国际医师节,由三生制药公益支持的以“三生有幸,医者仁心”为主题的公益活动,携手20位医生代表,以寄语海报的形式,共同向全体医护人员表达诚挚的祝福与关爱。
2025-03-30 17:38

新版药典自2025年10月1日起实施
3月25日,国家药监局官网发布《国家药监局 国家卫生健康委关于颁布2025年版的公告(2025年第29号)》,2025年版《中国药典》自2025年10月1日起施行。
2025-03-30 17:07

向C端发力,华大集团首届健康同行合作伙伴大会圆满举行
3月29日,以“科技普惠,健康生活”为主题的华大集团首届健康同行合作伙伴大会在华大时空中心成功举办,通过报告演示、展台展示等方式,首次系统性地向外界展示运用生命科学前沿...
2025-03-30 10:38

广州试点创新药械“医保+商保”同步结算
本次试点依托国家医保信息平台,在22家试点医院实现医保+商保一站式同步结算,通过提供“商业保险创新药械结算清单”,商保理赔金额将一目了然,市民只需支付医保和商保报销后的...
2025-03-28 18:41