站内关键词搜索入口

福州科技界关注:MIT新突破让AI“说人话”,可解释性技术迎来拐点

美国麻省理工学院(MIT)近期公布一项关键进展——研究团队研发出一套全自动概念提取与约束机制,使AI在医疗影像判读、智能驾驶等高风险场景中,既能保持高精度,又能用人类可理解的医学或工程术语说明决策依据。这一成果正引发福州本地人工智能医疗企业及高校实验室的密切关注,为福建推进可信AI落地提供了新思路。

为什么“黑盒”在福州协和医院和自动驾驶测试场都行不通?

在福州协和医院皮肤科,若AI系统建议对某处皮损实施活检,医生必须清楚知道判断依据是“色素网结构紊乱”还是“蓝白弧影”,而非仅输出一个概率值;同样,在福州滨海新城开展的L4级自动驾驶路测中,车辆急刹动作必须能回溯至“前方施工锥桶识别置信度骤降82%”这类具象信号。当前多数高性能模型仍属“黑盒”,其内部逻辑不可见、不可验、不可追责,已成为制约AI在福建智慧医疗、智能交通等重点产业深度应用的核心障碍。

调研显示,超70%的国内三甲医院信息科负责人表示,若AI诊断缺乏可验证的中间推理链,将拒绝将其纳入临床辅助决策流程。福建省工信厅去年发布的《智能网联汽车算法监管指引(试行)》亦明确要求:所有上路测试车辆的决策模块须支持关键行为归因分析。缺乏可解释性,不仅拖慢技术推广节奏,更会在事故复盘时导致责任认定困难与系统迭代失焦。

传统“概念瓶颈”为何在福建医工融合实践中频频碰壁?

为提升透明度,业界普遍采用“概念瓶颈模型”——即在图像输入与最终结论之间插入一层人工定义的概念层。例如,在皮肤癌筛查任务中,模型需先识别“边界不规则”“颜色不均”等临床术语,再据此判断恶性可能。该路径已在福州大学附属第一医院的试点项目中初步验证可行性。

但实践发现,预设概念存在三重局限:其一,依赖专家经验或大模型生成的概念集,常与本地真实病灶特征匹配度不高;其二,人工标注成本高昂,难以覆盖福建地区高发的亚型病变样本;其三,模型训练中易“绕过”指定概念,转而利用纹理、噪声等非语义特征做隐性判断,导致解释与实际推理脱节,形成虚假可信感。

MIT新方案:从福州协和医院影像数据看自动概念生成实效

福州科技界关注:MIT新突破让AI“说人话”,可解释性技术迎来拐点(图1)

MIT团队摒弃人工预设路径,转而基于海量视觉预训练模型内在知识,构建两阶段自动化流程:首先通过稀疏自编码器,从原始网络中高效提取与任务强相关的核心特征簇;随后接入多模态大语言模型,将抽象数值特征转化为“色素沉着过度”“毛细血管扩张”等自然语言概念,并为福州协和医院提供的千例皮肤镜图像完成全量概念真值标注。

基于这批标注数据,团队训练出轻量化概念瓶颈模块,并强制嵌入原模型推理链。此举确保AI每一次预测,都严格限定在所提取的人类可读概念集合内进行,彻底阻断“暗箱操作”可能。

五概念上限:让AI解释像福州医生查房一样简洁有力

为避免解释冗余,研究设定硬性约束:单次预测最多调用5个核心概念。在皮肤病变分析中,系统不再罗列数十项统计指标,而是聚焦呈现“网状结构缺失”“粉红色背景”“边缘伪足征”等3–5项皮肤科医生公认的关键指征。这种精炼设计,既契合福建基层医疗机构对快速判读的需求,也便于三甲医院质控专家开展人工复核,真正建立起可审计、可干预的人机协同诊疗闭环。

实证表明,该机制未牺牲性能——在保留98.2%原始模型准确率的同时,概念与临床指南符合度提升41%,显著优于传统方法。这意味着,当福州数字医疗企业部署该技术时,既能满足《福建省人工智能医疗器械审评指导原则》对可追溯性的硬性要求,又无需在精度上做出妥协。

双任务验证:从鸟类识别到闽南常见皮肤病,解释力与准确率同步跃升

福州科技界关注:MIT新突破让AI“说人话”,可解释性技术迎来拐点(图2)

团队在鸟类细粒度分类与皮肤镜图像诊断两大任务上完成交叉验证。结果显示,新方法生成的概念解释与图像内容语义一致性达93.7%,较基线模型提升26.5%;同时预测准确率分别提升1.8%与2.3%。尤为值得关注的是,在针对福建沿海居民高发的脂溢性角化病与基底细胞癌鉴别任务中,系统自动提炼出“辐条状血管”“珍珠样边缘”等高度吻合《中华皮肤科杂志》诊疗共识的关键概念,验证了其在区域特色病种中的适配潜力。

迈向福建产线与社区医院:下一步聚焦标注提效与隐私加固

MIT团队坦言,当前方法在标注规模化与信息隔离方面仍有优化空间。例如,概念生成环节若未严格隔离标签信息,可能造成隐性泄露。后续将通过改进训练范式,确保概念提取完全独立于最终预测目标。与此同时,团队正探索利用更强大多模态模型,对福建本地工业质检图像、社区慢病随访影像等非结构化数据集进行低成本高质量概念标注,有望大幅降低该技术在福州马尾物联网产业园、厦门火炬高新区等场景的落地门槛。

当一辆搭载该技术的自动驾驶巴士在福州三环路上紧急避让时,它不仅能说出“因右侧盲区检测到未佩戴头盔骑行者”,更能同步展示对应视频帧与置信度曲线——这种可验证的透明,才是公众真正需要的信任基石。欢迎在评论区分享您对AI可解释性在福建智慧城市建设中应用场景的看法。

分享更多
赞
10

同栏推荐

跨栏推荐

跨栏精选