0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

全球最强医疗视频理解大模型发布并开源 邀请开发者共建创新生态

话说科技 来源:话说科技 作者:话说科技 2026-04-28 13:38 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

近日,联影智能在GitHub、Hugging face等国际知名开发者平台正式发布全球规模最大、性能最强的医疗视频理解大模型——元智医疗视频理解大模型(uAI-NEXUS-MedVLM ),同步首批开源由6245个视频-指令对构成的标准测试集和模型,并设立“医疗视频理解大模型榜单”,向全世界开发者发出打榜邀请,以期推动构建统一、可验证的技术评测体系。

当前,人工智能已在影像辅助诊断、智能问诊等场景实现落地应用,但在手术等复杂动态临床场景中仍面临显著技术瓶颈。相较于静态影像,医疗视频理解对空间精度、时序逻辑和临床语义提出了更高要求:既要精准识别毫米级器械位置与解剖结构,又要完整还原手术过程中的关键步骤与先后关系,还需以专业语言准确表述具体操作及其临床意义。在多重挑战叠加下,即便全球领先的通用大模型,也难以有效完成手术视频理解任务,长期以来都是医疗大模型研发的“技术深水区”。

元智医疗视频理解大模型汇聚53万余条视频-指令数据、整合8个专业医学数据集,覆盖内镜、腹腔镜、开放手术、机器人手术及护理操作等核心临床场景,模型参数达70亿规模。在视频摘要、关键安全视野评估、下一步操作预测等8项医疗视觉任务测试中,模型整体性能显著优于 GPT-5.4、Gemini-3.1 等通用大模型,多项指标实现数倍领先。同时,模型支持4B/7B参数规模灵活切换,可实现单卡部署,具备良好的临床应用潜力。相关研究成果已被人工智能领域最具影响力的顶级会议IEEE国际计算机视觉与模式识别会议(CVPR 2026)收录。

在具体任务表现上,元智医疗视频理解大模型在手术安全评估任务中准确率达到89.4%,显著高于 GPT-5.4(1.8%)和 Gemini-3.1(10.1%);在满分5分的视频报告生成任务中,评分达到4.2分,同样大幅领先于通用模型。此外,该模型不仅能够正确识别医疗器械与手术操作,还可进一步理解其空间位置及临床操作意图,可应用于手术引导、术中安全保障、手术记录、医学教学及具身智能手术设备研发等场景。

在开源方面,模型研发负责人吴子彦表示:“相较于‘闭门造车’式的单点创新,我们选择开源高质量数据集,就是希望能为手术视频分析、特定病种诊断等细分赛道提供一把 ‘公共标尺’,让全球研究者和开发者能在可复现、可验证的环境下开展协同创新。这不仅能持续驱动技术迭代与场景落地,也有望促进医疗视频理解领域从分散探索迈向体系化发展,推动形成一个开放、共享的全球创新生态,与全球开发者共同推动创造一个更智能化的医疗未来。




审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 大模型
    +关注

    关注

    2

    文章

    3787

    浏览量

    5273
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    2025开源鸿蒙开发者激励计划正式启动

    举办,2025开源鸿蒙开发者激励计划在分论坛上正式发布。该计划承载着开源社区对开发者群体的高度重视,旨在为广大
    的头像 发表于 11-27 14:44 837次阅读

    2025开放原子开发者大会AtomGit开源实践交流分论坛即将开启

    当前,全球开源生态正持续蓬勃发展,开发者协作模式与开源创新范式也随之经历深刻变革。在此趋势下,以
    的头像 发表于 11-17 16:32 1072次阅读

    华为发布全球最强算力超节点和集群

    在华为全联接大会2025(HUAWEI CONNECT 2025)上,华为发布最强算力超节点和集群,表示将发展生态作为公司核心战略,提升到前所未有的战略高度。在计算领域,鲲鹏昇腾坚持
    的头像 发表于 10-10 17:29 2457次阅读

    华为与全球开发者共赢昇腾生态

    在华为全联接大会2025期间,华为昇腾计算业务总裁张迪煊发表了“以开发者为中心,加速自主创新,共赢昇腾生态”的主题演讲,宣布CANN技术指导委员会正式成立,表示昇腾将持续聚焦
    的头像 发表于 09-20 15:57 2134次阅读

    2025 openKylin开发者大会圆满落幕

    近日,以“开源聚智·麒心行”为主题的“openKylin开发者大会2025”在京成功举办。作为openKylin社区的年度盛会,大会汇聚院士专家、企业代表及全球开发者,聚焦
    的头像 发表于 09-01 18:11 1573次阅读

    华为正式启动HarmonyOS 6开发者Beta

    在2025年华为开发者大会(HDC)上,华为正式启动HarmonyOS 6开发者Beta,全面展示一年多以来与合作伙伴共建鸿蒙生态
    的头像 发表于 06-24 15:42 1008次阅读

    从“开发者孤岛”到“生态星河”:开鸿Bot如何重构开源鸿蒙开发体验

    在中国操作系统发展史上,“开发者”似乎从来都是一个边缘角色。他们是开源社区中最活跃的群体,却也是最常被忽视的那群人。具体到开源鸿蒙社区,其生态构建初期,诸多
    的头像 发表于 06-10 17:12 1849次阅读
    从“<b class='flag-5'>开发者</b>孤岛”到“<b class='flag-5'>生态</b>星河”:开鸿Bot如何重构<b class='flag-5'>开源</b>鸿蒙<b class='flag-5'>开发</b>体验

    全志科技亮相OpenHarmony开发者大会2025

    AI Agent技术共建启动”等仪式,同时设立八大主题分论坛,邀请开源操作系统技术大咖、前沿实践专家、开发者生态伙伴代表等嘉宾到场,共同探
    的头像 发表于 06-04 09:16 2407次阅读
    全志科技亮相OpenHarmony<b class='flag-5'>开发者</b>大会2025

    润和软件旗下润开鸿亮相开源鸿蒙开发者大会2025

    近日,开源鸿蒙开发者大会2025(OHDC.2025)于深圳再启新篇,会上正式发布开源鸿蒙5.1 Release版本,并进行开源鸿蒙应用技
    的头像 发表于 06-03 16:22 1764次阅读

    迅龙软件应邀出席开源鸿蒙开发者大会2025,AI分论坛发表主旨演讲

    5月24日,开源鸿蒙开发者大会2025(OHDC.2025)在深圳隆重开幕。会上正式发布开源鸿蒙5.1Release版本,并进行开源鸿蒙应
    的头像 发表于 05-28 16:05 1094次阅读
    迅龙软件应邀出席<b class='flag-5'>开源</b>鸿蒙<b class='flag-5'>开发者</b>大会2025,AI分论坛发表主旨演讲

    开源鸿蒙开发者大会2025圆满闭幕,触觉智能Purple Pi OH荣获明星开发

    版本,并进行开源鸿蒙应用技术组件共建启动、开源鸿蒙AIAgent技术共建启动等重要仪式,同时设立八大主题分论坛,邀请业界专家、
    的头像 发表于 05-27 18:56 1098次阅读
    <b class='flag-5'>开源</b>鸿蒙<b class='flag-5'>开发者</b>大会2025圆满闭幕,触觉智能Purple Pi OH荣获明星<b class='flag-5'>开发</b>板

    2025开源鸿蒙开发者大会圆满落幕

    共建启动等仪式,同时设立八大主题分论坛,邀请开源操作系统技术大咖、前沿实践专家、开发者生态伙伴代表等嘉宾汇聚一堂,共同探讨
    的头像 发表于 05-26 17:03 1519次阅读

    深开鸿CEO王成录:开发者开源鸿蒙生态的原点

    发布会上表示:“操作系统的成功,取决于生态体系的竞争力。开源鸿蒙生态的建设,必须始于开发者。”他强调,
    的头像 发表于 05-26 12:06 1022次阅读
    深开鸿CEO王成录:<b class='flag-5'>开发者</b>是<b class='flag-5'>开源</b>鸿蒙<b class='flag-5'>生态</b>的原点

    诚迈科技携HongZOS亮相开源鸿蒙开发者大会,加速生态繁荣与产业跃迁

    5月24日,开源鸿蒙开发者大会2025在深圳隆重举行。作为开源鸿蒙生态的核心共建和A类捐赠人,
    的头像 发表于 05-26 11:59 1343次阅读
    诚迈科技携HongZOS亮相<b class='flag-5'>开源</b>鸿蒙<b class='flag-5'>开发者</b>大会,加速<b class='flag-5'>生态</b>繁荣与产业跃迁

    深开鸿CEO王成录:开发者开源鸿蒙生态的原点

    中心”理念的里程碑举措。 深开鸿CEO王成录在发布会上表示:“操作系统的成功,取决于生态体系的竞争力。开源鸿蒙生态的建设,必须始于开发者。”
    的头像 发表于 05-24 20:16 953次阅读
    深开鸿CEO王成录:<b class='flag-5'>开发者</b>是<b class='flag-5'>开源</b>鸿蒙<b class='flag-5'>生态</b>的原点