国防部军医局宣布在智慧医疗与精准医学研究迈入全新里程碑，同时揭示将中英文医疗专业语音及医疗专业影像自动生成文字报告的愿景，此外，未来也将透过医疗大数据的分析，协助医师执行医疗的决策，提升医疗品质与效率。其研究成果後续将由国防医学院三军总医院(以下简称三军总医院)医疗资讯技术团队推展到全国军医院的护理纪录、医师门诊、巡房及手术纪录等，加速推动智慧医疗与精准医学的发展，提升医疗决策与病患的照护品质。

三军总医院全方位提升国军医院医疗品质，以微软AI技术赋能医疗创新

COVID 19疫情不仅对於产业带来冲击，也加重第一线医疗及护理人员的工作量及心理压力。为了降低医护人员行政作业的负荷，军医局率领三军总医院与微软台湾研发中心於2023年7月启动「医疗大数据训练分析平台专案」，以专案阶段方式提升国军医疗资讯研发能量。此专案采用了微软的语音辨识、自然语言处理、电脑视觉等人工智慧技术，并在三军总医院与微软的合作下，提升了文字报告的正确辨识率，自动生成中英文护理纪录及英文专业影像报告，大幅节省护理人员撰写报告时间及提升放射科医师完成影像报告的时间。

利用微软的语音辨识和自然语言处理技术，能协助将护理人员在照护病人後所需记录的报告内容，以语音的方式转换成结构化的文字报告，并储存到资料库中，进而节省护理人员在每次手动输入纪录的时间和精力，而更专注於病人的需求。未来这个功能也会扩展到医师的门诊、查房和手术等场景，让医师可以更有效率地管理病历和治疗方案。再来是使用微软的电脑视觉和深度学习技术，将各种医疗影像资料，进行分析和评估，并生成相关的文字报告。这些报告不仅包含影像的描述和解释，还包含过去的医疗病历和数据的比对，以及对於影像中存在的病理徵兆和病程发展的预测和建议，不仅可以帮助放射科医师减少撰写报告的负担，也可以帮助主治医师快速地做出诊断和治疗决策，提高医疗品质和效率。

结合国军医院资源与微软技术 实现更进阶的医疗服务

「此专案是军医与微软的跨领域合作，结合了军医的医疗资源与微软的AI科技与研发资源，展现了国军医院在推动智慧医疗与精准医学方面的决心与能力。」三军总医院院长洪乙仁少将表示：「透过AI科技应用与微软先进技术资源，可以让医生及护理人员减少撰写报告的负担，更专注在医疗照护行为上，同时也可以提供更精准的影像分析及医疗诊断建议，帮助医师做出更好的治疗决策，进而提升国军及民众的健康福祉。」

微软台湾研发中心总经理张仁炯指出，微软的使命是运用科技赋能地球上每一个人以及每一个组织都能实现更多、成就非凡，加速医疗数位转型一直是微软努力的目标，此次与三军总医院的研究合作，是提升医师与护理人员行政效率非常重要的计画，现在透过人工产出的纪录与报告等繁琐作业，透过AI结合微软的大型语言模型及微软台湾研发中心的技术支援，将能够藉由AI自动生成，赋能医师及护理人员提升疗疗诊断与照护品质。微软台湾研发中心将持续与三军总医院合作，让此成果能够嘉惠更多的医院。

结合医疗大数据及微软Azure OpenAI提升三军总医院专业中英医疗影音辨识正确

三军总医院是国内最大的医学教学医院之一，每年接受超过200万人次的门诊及住院服务，医护人员的工作量非常大。三军总医院研究??院长叶???上校指出：「透过此研究专案，三军总医院未来可减少了护理人员撰写纪录的时间，减少放射科医师完成影像报告的时间，并提供更精准的诊断建议，让医护人员可以更专注在照护病人，让主治医师能够更有效地制定治疗方案，不仅提升了三军总医院的医疗品质，也提高了病人的满意度。」

三军总医院AIoT中心执行长方文辉表示此专案的技术难度非常高，因为中英文及医疗专业语音辨识的准确度要求很高，而且要考虑到不同的囗音、语速、背景杂音等因素。藉微软利用在大型语言模型、生成式AI、Azure OpenAI等方面的优势，以及与三军总医院的密切合作，才能克服这些挑战，期盼创造出令人惊艳的成果。

台湾微软公共业务事业群总经理陈守正则表示，微软一直致力於推动数位转型与创新，在医疗领域也有多项合作案例。此专案展现了台湾微软在智慧医疗领域的持续耕耘，以及与政府单位、学术机构、产业夥伴等不同领域合作的能力，台湾微软期待未来能够持续在智慧医疗与精确医学方面创造更多的价值与影响力。

此次与微软合作的专案中，三军总医院提供了专业的医疗场域与实务需求加上微软电脑科技与AI技术跟能力，未来将持续进行测试及验证效能。三总医疗资讯团队将其技术发展开发後扩展到医师查房、门诊及手术的纪录报告，医疗影像辨识生成报告及病兆预测诊断的研究成果也将分享给其馀的13家军医院，期??藉由科技赋能医疗产业，进一步提升医疗品质与效率，加速智慧医疗与精准医学发展。