关闭广告

港科大突破:代码本技术提升AI医学图像分析稳定性

科技行者2026-01-29 00:00:017人阅读


这项由香港科技大学(广州)和香港科技大学联合开展的突破性研究发表于2025年的NeurIPS会议,有兴趣深入了解的读者可以通过论文编号arXiv:2601.10124v1查询完整论文。

医学图像分析就像医生看X光片一样,需要准确识别病灶位置。但现在的AI医生面临一个尴尬问题:训练数据太少。医院里标注好的图像就像教科书,数量有限且制作成本昂贵,需要专业医生花费大量时间仔细标记每个病灶。

为了解决这个问题,科学家们想出了一个聪明的办法,叫做半监督学习。这就像让学生既用教科书学习,又通过大量没有标准答案的练习题来提升能力。在这个过程中,有一种叫做"特征丢弃"的技术被广泛使用,它的工作原理类似于故意制造一些"噪音"来增强AI的抗干扰能力。

然而,这种传统的丢弃技术就像调音师调节音响设备一样,需要非常精确地控制"丢弃率"这个参数。如果丢弃得太少,就像音量开得太小,起不到锻炼效果;如果丢弃得太多,就像音量开得震耳欲聋,反而会损坏系统。研究团队通过大量实验发现,当丢弃率超过70%时,AI的表现会急剧下降,甚至产生完全无法使用的结果。

面对这个技术难题,香港科技大学的研究团队提出了一个革命性的解决方案:VQ-Seg。他们的核心创新是用"量化扰动模块"(QPM)来替代传统的丢弃技术。这个新方法就像是把连续的颜色调色板换成了一个有限颜色的调色盒。

具体来说,传统方法就像在一张彩色照片上随机涂黑一些像素点,这种做法虽然能增加难度,但控制不当就会让图片变得面目全非。而新方法则像是把照片先转换成马赛克风格(每个小块用一种代表颜色),然后通过巧妙地交换这些小块的位置来创造变化。这种方法的妙处在于,不管怎么交换,图片的基本信息都不会丢失,只是排列方式发生了变化。

研究团队还设计了一个巧妙的"双分支架构"。这就像让AI同时学习两门课程:一门是图像重建课(学会把马赛克图片还原成原始清晰图片),另一门是病灶识别课(学会在图片中找到病变区域)。通过同时学习这两门课程,AI不仅能保持对图像细节的敏感度,还能增强对病灶特征的识别能力。

更进一步,研究团队还引入了一个"语义对齐器"(PFA),它的作用就像给AI配备了一位经验丰富的老师。这位老师来自于预训练的视觉基础模型DINOv2,虽然它原本是在自然图像上训练的,但研究发现它在医学图像上也表现出色。通过这位老师的指导,AI能够更好地理解图像中的高级语义信息,弥补量化过程中可能丢失的细节。

为了验证新方法的有效性,研究团队收集了一个大规模的肺癌数据集,包含828个CT扫描样本,专门标注了中心型肺癌的位置。这个数据集的建立本身就是一项重要贡献,为肺癌AI诊断研究提供了宝贵资源。

实验结果令人印象深刻。在只使用5%标注数据的情况下,VQ-Seg的Dice得分达到了0.6643,显著超过了当前最好方法Unimatch的0.6493。这个提升虽然看似微小,但在医学图像分析领域,即使1%的提升都可能意味着更多生命的挽救。当使用10%标注数据时,VQ-Seg的优势更加明显,Dice得分提升到0.7852,相比MCNet的0.7555有了近3%的显著提升。

研究团队还进行了详细的消融实验,逐一验证了各个组件的贡献。结果显示,量化扰动模块将基础模型的Dice得分从0.7443提升到0.7701,双分支架构进一步提升到0.7784,而语义对齐器则贡献了额外的性能提升。当所有组件结合使用时,最终模型达到了最佳性能。

从理论角度来看,研究团队还提供了严格的数学证明。他们通过KL散度分析表明,传统的丢弃方法在高丢弃率下会导致特征分布的剧烈变化,而他们的量化扰动方法则能保持分布的稳定性。这就像传统方法是在暴风雨中航行,而新方法则是在微风中前进,虽然都有扰动,但后者更加可控和安全。

除了在自建的肺癌数据集上取得突破,VQ-Seg在公开的ACDC心脏图像数据集上也表现出色,进一步证明了方法的通用性。这种跨领域的成功表明,该方法不仅适用于肺癌诊断,还可能在其他医学图像分析任务中发挥重要作用。

研究团队还通过可视化分析展示了代码本的演化过程。初始阶段,只有3.4%的代码被激活使用,随着训练进行,使用率逐渐提升到67%,最终达到98%。这个过程就像一个图书馆逐渐被充分利用,从最初只有少数几本书被借阅,到最后几乎每本书都发挥了作用。

值得注意的是,VQ-Seg在不同标注数据比例下都保持了稳定的性能优势。即使在标注数据充足的情况下,它仍然能够超越传统的全监督方法,这说明该方法不仅在数据稀缺时有效,在数据丰富时也能带来额外收益。

当然,这项研究也存在一些局限性。当前的扰动操作只能在离散的量化空间中进行,难以直接扩展到连续特征表示。此外,引入基础模型虽然带来了语义信息的增强,但也增加了计算开销。

研究团队表示,未来的工作将聚焦于开发可在连续空间中工作的可控扰动机制,并探索更高效的基础模型集成方法。他们相信,随着这些技术的进一步完善,AI在医学图像分析领域的应用将变得更加准确和可靠。

说到底,这项研究就像为医学AI领域带来了一套全新的"工具箱"。传统的工具虽然有效,但使用起来需要小心翼翼,稍有不慎就可能出问题。而新工具不仅更加稳定可靠,还能在各种复杂情况下保持良好性能。这对于医生们来说意味着什么呢?未来他们将拥有更加智能和可靠的AI助手,能够在CT扫描中更准确地识别肺癌等疾病,从而为患者提供更及时有效的治疗。对于医学AI研究领域而言,这套新方法也为其他类似问题的解决提供了有价值的思路和工具。有兴趣深入了解技术细节的读者,可以通过前述论文编号查阅完整的研究报告。

Q&A

Q1:VQ-Seg和传统医学图像分析方法有什么不同?

A:VQ-Seg最大的不同在于用"量化扰动"替代了传统的"随机丢弃"技术。传统方法像在图片上随机涂黑像素,控制不当就会损坏图像信息。而VQ-Seg先把图像转换成离散的"代码本"形式,然后通过交换代码位置来创造变化,这样既能增加训练难度,又不会丢失关键信息,使AI训练更稳定可控。

Q2:为什么VQ-Seg在医学图像标注数据很少的情况下效果更好?

A:VQ-Seg采用了"双分支架构",让AI同时学习图像重建和病灶识别两个任务。这就像让学生既学理论又做实践,通过图像重建任务提供额外的自监督信号,即使标注数据少,AI也能从大量未标注图像中学到有用信息。再加上引入预训练模型作为"语义老师",进一步提升了学习效果。

Q3:VQ-Seg能应用到其他疾病的诊断吗?

A:研究结果显示VQ-Seg具有很好的通用性。除了在肺癌CT图像上表现出色,它在心脏MRI图像的ACDC数据集上也取得了最佳成果。这说明该方法不仅限于特定疾病,而是一个通用的医学图像分析框架,理论上可以应用到各种医学影像诊断任务中。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

8家银行火速响应,抓紧制定消费贷国补细则,有银行表示简化手续

湘财Plus 浏览 6101 08-13

王传君拿下东京电影节影帝!撕奖过程太精彩,连坑两位中国女星

萌神木木 浏览 47 11-06

外资公募绩优产品持仓曝光!

券商中国 浏览 45 11-03

苹果回应误发三星广告乌龙事件:正与微博沟通调查发生原因

快科技 浏览 776 07-31

阿斯:有合适报价马竞会出售利诺,给阿尔马达非欧盟球员名额

直播吧 浏览 1407 07-21

外媒:驻有美军的伊拉克空军基地遭无人机袭击

环球网资讯 浏览 7279 06-15

"世界第一美少年"去世 女儿未透露其具体死因

扬子晚报 浏览 59 10-28

棉密码卫生巾检出致癌物 辛选回应“合规合格”

红星新闻 浏览 3762 07-25

乔杉官宣妻子怀上三胎,携两女儿陪太太拍孕照

小咪侃娱圈 浏览 77 08-24

李开复推企业级Agent,誓要打造"超级员工"

态℃ 浏览 6012 07-23

她被骂“文盲”影后,如今搭档黄轩交出满意答卷

仙味少女心 浏览 49 10-24

德天空:阿森纳签因卡皮耶进入后期阶段,球员已准备好接受体检

懂球帝 浏览 62 08-30

影石Insta360两款新品无人机首曝,外观似穿越机、航拍无人机

IT之家 浏览 7394 07-21

新西兰称中国是对其进行外部干涉最活跃国家 中方回应

外交部网站 浏览 130 08-22

075型两栖攻击舰"湖北舰"官宣亮相

扬子晚报 浏览 4959 08-02

太强!萨巴伦卡今年抢七战绩18胜1负,创造单赛季抢7获胜次数纪录

直播吧 浏览 3294 08-12

夏天穿衣其实很简单,上衣越短裙子越长、多穿T恤,舒适日常

静儿时尚达人 浏览 3064 07-02

宁德时代重要矿山停产 有投资者光着膀子深夜上山蹲守

每日经济新闻 浏览 7796 08-12

奥迪的豪华,是一汽奥迪给的底气

网易汽车 浏览 3522 05-15

巨星传奇想摆脱“周杰伦依赖”

北京商报 浏览 43 11-05

多地突然取消!小地方,不配办马拉松了?

西部城市 浏览 49 10-28
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除沪ICP备20017958号-3