买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:电子科技大学(深圳)高等研究院
摘要:本发明实施例公开了一种基于SAM模型的多模态医学图像分割方法及系统,所述方法包括:构建步骤:构建用于分割多模态医学图像的SAM模型,所述模型包括图像编码器、掩膜解码器、提示编码器、模态编码器和模态感知模块;训练步骤:使用交叉熵损失和Dice损失来训练所述SAM模型;分割步骤:所述SAM模型根据点击提示或者物体框提示输出对多模态医学图像中各个对象的分割结果。本发明通过引入轻量级的模态编码器和模态感知模块,实现了对SAM模型的多模态拓展,避免了对于每一种多模态任务都重新训练大模型的巨大计算开销,提升了医学图像的分割性能,从而实现了SAM在多模态医学图像分割任务中的高效应用,进而提高了诊断的准确性和可靠性。
主权项:1.一种基于SAM模型的多模态医学图像分割方法,其特征在于,包括:构建步骤:构建用于分割多模态医学图像的SAM模型,所述模型包括图像编码器、掩膜解码器、提示编码器、模态编码器和模态感知模块,其中,模态编码器对输入的非PET模态的医学图像进行编码,获取非PET模态的医学图像的非PET特征;模态感知模块根据获取的非PET特征与PET特征进行交互,完成非PET特征的增强并输入至图像编码器;训练步骤:使用交叉熵损失和Dice损失来训练所述SAM模型,得到训练好的SAM模型,其中,在训练过程中冻结图像编码器的参数,以提高训练效率和降低计算资源需求;分割步骤:识别并去除待分割的多个模态的医学图像中的噪声和伪影,得到处理后的多模态医学图像,将处理后的多模态医学图像输入训练好的SAM模型,所述SAM模型根据点击提示或者物体框提示输出对多模态医学图像中各个对象的分割结果。
全文数据:
权利要求:
百度查询: 电子科技大学(深圳)高等研究院 基于SAM模型的多模态医学图像分割方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。