CARES Copilot 1.0多模态手术大模型昨日举行发布会，左起为冯铭教授、刘宏斌教授、陈达明医生及康军教授在现场接受传媒采访。香港文汇报记者涂穴 摄

　　工智能（AI）技术的快速进步，同时亦扩大了在医疗健康领域的应用。中国科学院香港创新院 AI 中心昨发布“CARES Copilot 1.0 多模态手术大模型”，该系统能够与智能医疗设备高度集成，并可快速精确地提取手术教材、专家指南、医学论文等专业文档的信息，并保持高达95%的准确率，就像一个手术导航一样，为术者提供实时解剖定位信息，并辅助前线医护面对突发状况，督导、预警、防止手术步骤危险。而未来，更可指挥智能医疗机器人执行如肺癌等复杂手术。

　　香港中文大学外科学系神经外科组主任陈达明与北京协和医院神经外科主任医师、研究生导师冯铭昨在香港科学园现场演示了 CARES Copilot 1.0 系统，全方位展示了其功能和实用性。据介绍，CARES Copilot 系统是一款专为医疗领域设计的大型模型系统，能够与智能医疗设备高度集成，系统实现了图像、文本、语音、视频、MRI、CT、超声等多模态的手术数据理解。

　　检索数百万级数据 只需一秒钟

　　通过系统的深度检索功能，前线医护能快速精确地提取手术教材、专家指南、医学论文等专业文档的信息，并确保提供的答案具有高度的可信度和可追溯性。系统具备长达100K上下文的长窗口理解与分析能力，能够处理超过3,000页的复杂手术教材，对于年轻医生的培训和教学具有极高的实用价值。经测试，系统能在一秒钟内完成百万级数据的快速检索，并保持高达95%的准确率。

　　据介绍，该系统在医学多场景、多任务的理解与处理方面取得了显著的进展，可有效支持包括手术阶段识别、器械与解剖结构分割、器械检测与计数、MRI 高分辨率图像生成等功能。系统并已在多家医院的不同科室进行了实地内部测试和持续优化。

　　未来趋势 机器人执行复杂手术

　　AI技术与手术机器人技术相结合，无疑会给外科手术的发展带来巨大变革，包括手术方式、理念、器械、设备等各方面。中国科学院香港创新院 AI中心执行主任、中国科学院自动化研究所研究员、博士生导师刘宏斌表示，AI在医疗领域绝对是不可逆转的趋势，尽管可能存在一些政策上的问题，但实际上在许多医院的一些研究团队，都已经开始应用AI来处理多项工作。未来的发展方向是由机器人来执行复杂的手术，“例如肺癌手术，虽然目前仍存在一些挑战，但将目前的数据基础做好准备，以朝着这个方向前进。 ”

　　陈达明认为，开放式AI已经在改变全世界人类的生活，在医疗上肯定也会做出更大的改变。而专为神经科学研发的大模型，可以超越一般教学的要求，能够配合手术、影像导航及机器人的大模型应用在临床、手术室及研究院，直接辅助前线医护面对突发状况，督导、预警、防止手术步骤危险，推进神经科学的疆界。冯铭则指，手术大模型和手术导航结合起来，可以为术者提供实时的解剖定位信息，提高手术安全性。

　　港澳具国际视野 内地罕见病例多

　　中国科学院香港创新研究院是中国科学院在境外设立的首个国家级新型研发机构，展望未来，冯铭相信，内地与港澳地区的合作将持续深化，科技部和国家卫健委都有一些专门支持内地与港澳合作的课题。在技术和理念方面， 香港和澳门更具有国际视野，而内地则拥有更多病人以及经验，特别是在处理一些罕见疾病和疑难病例方面。 医院亦设有专门的罕见病诊疗服务，可与港澳的医疗资源实现良好互补。

　　多模态手术大模型

　　研发目标

　　◆开发前沿的手术领域多模态手术大模型，围绕手术实现多模态数据理解，以及多任务统一处理，显著降低初级外科医师学习曲线，增强手术流程监管，提高手术服务品质，并与智能医疗器械紧密集成。

　　六大核心技术

　　◆手术全模态感知

　　◆知识连续自主学习

　　◆可追溯可解释回答

　　◆多模态专家知识增强

　　◆超长输入窗口

　　◆多平台部署

　　近期成果

　　◆可信赖且可解释

　　◆旨在提高操作安全性和效率

　　◆在香港及大湾区多家医院进行测试

　　◆在JCAI-2023组织医学大模型研讨会

　　◆3月正式向香港神经外科医生发布