台大医院与台湾微软共同发表混合实境应用於创伤医学的突破成果。计画主持人智慧医疗中心??主任李建璋教授与微软团队运用 HoloLens 2以及 3D Slicer 等科技,历时 2 年,成功发展出一套可以迅速重组 3D 电脑断层影像、标注病灶、转换成全息影像物件(Stereoscopic hologram),并可浮空投影到元宇宙的解决方案。此方案除了适用於电脑断层影像,也可适用於核磁共振影像。研究团队使用台大医院历年创伤医学影像建立了全息影像教学物件资料库,不仅增加教学互动性,同时结合 Microsoft Teams 实现远距会诊,为创伤智慧医疗树立全新里程碑。
|
台大医院携手台湾微软,共创临床医疗教学与远距会诊新未来 |
3D 立体医学影像扮演临床医疗评估关键 HoloLens 2 活化 3D 影像应用
X 光、超音波、电脑断层等医学影像在创伤病患的评估与诊断扮演重要角色,其中电脑断层影像不受骨头、空气等物理性质的限制,能更全面地检视病患体内构造。然而受限於 2D 平面影像,对於多重创伤病灶的判读难免出现遗漏。透过 3D 立体影像能更快速、完善的评估所有的受伤部位以及严重程度,进行更完整的术前规划。透过 HoloLens 2、Microsoft Teams、以及 3D Slicer,医师可以在 3D 影像上标注骨折、内出血、气血胸,并与实际的伤患创伤部位进行虚实对照,有助於创伤教学、临床医疗诊断、以及远距会诊。
台大医院??院长赖逸儒表示:「此次与微软的合作不仅让台大医院完备的创伤电脑断层影像资料库能够利用先进的科技重组成虚拟 3D 物件投射到元宇宙,使用 HoloLens 2 混合实境装置,让医师间可透过直观的手势操作,更全面的了解病患创伤的病灶同时进行跨时空会诊,有效提升创伤诊断的效率与正确性,并增加临床教学互动,有效克服过往 2D 影像教学的困难。台大医院将扩大这项研究成果到各个医疗领域,并分享创伤资料库,加速实现智慧医疗愿景。」
微软全球助理法务长及台湾微软公共暨法律事务部总经理施立成指出:「微软物联网卓越中心与台大医院开启此项合作计画已有两年,利用 Microsoft Azure 全球市集里丰富的资源,引进德国合作夥伴 ApoQlar 所开发的 VSI HoloMedicine 解决方案,协助台大医院智慧医疗中心研究团队探索混合实境技术在医学与临床的应用。今年以来更进一步将台大医院领先全球的创伤资料库之电脑断层影像重组为立体影像後,汇入 HoloLens 2 头戴装置,以延伸实境、更为直觉的判读方式来观看创伤病人器官的立体影像,希??有助於提升影像诊断能力,同时优化医疗教学的流程,为医疗影像技术及远距会诊的临床实用性树立新的里程碑。」
远距医疗弭平偏乡医疗资源缺囗 HoloLens 2 结合 Microsoft Teams 远距会诊无缝接轨
在疫情冲击下,远距医疗已经是全球医疗的新趋势。要实现高品质的远距会诊,HoloLens 2 和 Microsoft Teams 是不可或缺的平台。HoloLens 2 是一款混合实境头戴式装置,可以让使用者看到 3D 影像和资讯,并透过手势和语音进行互动。Microsoft Teams 则让使用者进行视讯会议、即时通讯和文件共享。这两个平台的结合让远距会诊更加生动和高效。
台大医院云林分院院长马惠明强调:「远距医疗及远距会诊能有效弭平偏乡医疗资源短缺的问题,HoloLens 2 结合 Microsoft Teams 则是远距医疗及远距会诊直观有效的新处方,透过这项技术,云林分院可以即时与台北本院或其他分院进行视讯会诊,并同步看到 3D 影像与虚实对照,提升了会诊的品质与效率。」
微软智慧医疗云端解决方案提供专为医疗产业设计 高效安全的智慧云端平台
台湾微软首席营运长陈慧蓉表示:「提升医护同仁生产力、强化资料分析与应用、更好的民众就医体验是微软智慧医疗云端解决方案的三大目标,协助医疗院所数位转型。本次与台大医院的合作,透过 HoloLens 2 与 Microsoft Teams,实现台大医院与云林分院可针对多重创伤病患进行远距会诊,这是创伤医疗史上的重大里程碑。相信未来结合更多微软 AI 技术应用,将加深科技赋能,共同开创智慧医疗新未来。」
台大医院李建璋教授团队目前已经带领医学生孙维??、杨??凯建置完成创伤立体全息影像资料库,内容包括肋骨骨折、气胸、肺挫伤、颈部以及胸腰椎横凸骨折、髋骨骨折,脾脏损伤与肝脏损伤、创伤脑出血、颅颜骨折。此资料库的建立是世界首创、宝贵的教学资源,未来将於台大医院教学部使用。双方将持续携手合作,推动创伤医学的发展,造福人类与社会。