多模态知识蒸馏提升胃腺癌切片分类
热点事件持续更新
多模态知识蒸馏提升胃腺癌切片分类
1 篇报道1 个报道来源5 小时前更新
先了解这件事
AI 综述
Shrihari Dumbre 与 Bikash Santra 提出多模态知识蒸馏(MKD)框架,用于全切片图像(WSI)的胃腺癌亚型分类。方法在训练阶段用低秩多模态融合(LMF)结合预训练 WSI 图像编码器与临床文本编码器,让教师模型学习图像-文本融合表征,学生模型蒸馏后仅凭图像即可推理。 作者称,该方法在 PatchGastric 基准数据集上的平均准确率比当时最先进方法至少高 3.35%,且未使用基于 Transformer 的融合、多任务学习或大语言模型。源码已公开。上述为论文报告结果,尚待独立验证。
AI 根据报道生成 · 2 小时前更新
最新进展10月7日 12:00
多模态知识蒸馏实现胃腺癌全切片图像分类报道时间线
沿着报道,了解事件的不同侧面。
10月7日
- arXiv:cs.AI多模态知识蒸馏实现胃腺癌全切片图像分类
研究提出多模态知识蒸馏(MKD)框架,用低秩多模态融合(LMF)在训练中结合预训练 WSI 图像编码器与临床文本编码器,让教师模型学习图像-文本融合表征,学生模型蒸馏后仅凭图像即可推理。该方法在 PatchGastric 基准上平均准确率比 SOTA 至少高 3.35%,且不依赖 Transformer 融合、多任务学习或大语言模型。源码已公开。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。