新乡医学院学报

医疗把脉需求是关键 

来源:新乡医学院学报 【在线投稿】 栏目:期刊导读 时间:2021-07-28

毋庸置疑,新科技推进了医学教学的进步。李泽森是一名医学院的学生。他无需再像十几年前的师兄们那样,在枕边放着一颗颅骨,以便随时复习。在课堂上,大家可以使用MR眼镜,更清晰地看到人体结构。

在医疗应用场景中,MR眼镜可以用于医学教学、手术观摩等。随着技术的成熟,MR在医疗、健康领域将有哪些新商机?

MR系统是人工智能的集大成者

MR(Mediated Reality)是指混合现实,即包括增强现实AR和增强虚拟VR,是合并现实和虚拟世界而产生的新的可视化环境。它结合了虚拟和现实,在虚拟的三维中实时运行。目前MR技术已有不少应用场景如购物、游戏、教育、医疗等。

MR技术聚集VR、AR技术两者的优势。但三者的核心是实时三维图形生成技术。大部分人容易把它跟三维重建技术搞混,但两者的技术原理不同。三维重建的技术难度更大,它是根据从二维图片的数据建立三维模型,算法非常复杂,应用更广泛。譬如,在临床上,它可以通过切片图还原真实病灶。

“MR系统是人工智能的集大成者。”360人工智能研究院院长颜水成进一步向《经济》记者解释,MR系统需要用到图像理解、语音识别、语音合成、自然语言理解、3D重建与定位、AI芯片等多个维度的人工智能技术。“未来AR和混合现实有很大的潜力,对人的生活将产生非常大的影响。我们经历了从PC时代到移动端时代,下一代最可能超越手机的设备很可能是MR眼镜。”

链接:MR的医疗应用案例

在国内外,MR医疗应用的案例逐年增多。

武汉协和医院骨科医院主任医师叶哲伟、吴星火、刘融手术团队,在2017年6月26日实施了全球首例混合现实引导下的髋部骨折手术。在2018年1月8日,该团队再次成功实施全球首例基于混合现实技术的多地远程手术会诊。

2017年11月,在西班牙医药科技公司Exovite的帮助下,位于西班牙首都马德里的Gregorio Mara?ón医院进行了一场特别的手术。外科医生佩戴定制版的微软HoloLens,能够查看CT扫描数据、超声波数据和其他手术过程中所需要的核心数据。这使得手术更快更顺利地进行。在使用微软HoloLens之后 Rubén Pérez Ma?anes教授表示:“这是我们第一次在手术室内使用Mixed Reality眼镜。”

2018年8月,英国最大的一个儿童医院——Alder Hey Hospital正在尝试使用微软HoloLens来帮助改善外科手术。外科医生和其他工作人员可以在操作过程中查看患者的治疗情况。Surface Hub将允许电子存储诸如图表、测试和医学图像之类的文件。“HoloLens使我能够在做手术时扫描病人手术图像。如果我可以利用新技术来获取这些信息,看到那些图像浮现在我面前,这将对手术有很大的帮助。”Alder Hey的心脏外科医生Rafael Guerrero这样说。

去年,法国的外科培训机构Revinax利用微软的hololens设备进行手术直播,成为MR医疗应用的又一案例。

“MR(医疗)眼镜可能更适合业务训练或教育场景。比如,实习医生或刚入行的新医生,帮助他们从技能学习向早期操刀实践进行过渡。而对于熟练的医生,它的作用可能较为有限。”颜水成这样推断。

对此,上海交通大学医学院附属新华医院影像中心主任汪登斌也赞同颜水成的观点。“原因在于,医学教学较为标准化,也许是更适合MR的应用场景。”不过目前国内医院在手术中使用MR眼镜的案例并不多见。目前人工智能在医学上的应用,大多仍是在医疗影像学方面。从实践来看,人工智能系统需要同质化、规范化、标准化的数据。但是现实是人的高矮胖瘦各不相同,很难进行标准化区分。而且同一种疾病,在不同人的身上表现不同,如何用人工智能准确判断疾病,是一件很难的事。

“MR另一个应用场景是临床手术辅助,如术前对患者的告知、医生术前模拟等。”健康有益创始人李宇欣这样告诉《经济》记者,在医疗可视化方面,在做手术前,可以提前对手术进行模拟、对不同方案进行评分,并找到最适合的手术方案,从而提高手术的成功率。当然医生也可以通过这类技术,为患者讲解治疗方案,让医患沟通更加顺畅。

颜水成指出,旅游、医疗、电梯维修、飞机维修等都是AR、MR常用的场景。“目前,微软Hololens和Magic Leap One的新闻较多,其实据我了解,不少大公司都有实力较强的AR、MR的研发团队,大家都在一边研发一边等待市场爆发。”

时机仍未到?

未来AR、MR眼镜能帮助人增强智能。比如,戴上它能提醒健忘的老人吃药,或告知与其握手的人叫什么名字,曾在何时何地见过等信息。不过,MR眼镜若要大规模普及,还要解决几个技术难题。一是,MR眼镜的视场可以叠加的虚拟信息与人眼还有较大差距。“MR眼镜的视场现在只有几十度,据说人眼的视场可达到170度。”颜水成说。二是,有一部分人佩戴会产生眩晕感。李宇欣指出,移动设备的GPU运算不够快,画面容易发生迟滞,使用者产生头晕的感觉。三是,它还需变得更轻便,电池和芯片的减重都是极大的考验。四是,安全性能还需提高。一旦眼镜出现高热或爆炸,人体无法承受这样的伤害。

上一篇:药物开发中的现状
下一篇:没有了