买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:国科大杭州高等研究院
摘要:本发明公开了一种基于文本引导的多模态半监督多器官分割方法和装置,包括:采用文本编码器预先为每类器官基于文本描述生成类别特征嵌入编码,准备图像集;构建并行且初始参数不同的两个分割模型,图像集中的每张图像和每个器官的类别特征嵌入编码经过每个分割模型生成每个器官的分割权重,并利用分割权重计算得到每类器官的预测概率图;基于标签为每类器官的预测概率图构建监督损失,基于预测概率图生成伪标签,并基于伪标签构建两个分割模型之间的交叉半监督损失,并利用监督损失和交叉半监督损失优化两个分割模型参数;利用参数优化的一个分割模型进行多器官分割,这样能够增强模型对器官边界的识别能力,提升模型的鲁棒性和分割质量。
主权项:1.一种基于文本引导的多模态半监督多器官分割方法,其特征在于,包括以下步骤:准备包含有标签多器官图像和无标签多器官图像的图像集,采用文本编码器预先为每类器官基于医学提示文本描述生成作为文本引导的类别特征嵌入编码;构建并行且初始参数不同的两个分割模型,每个分割模型包含图像编码器、图像解码器、器官分割参数生成模块、以及分割头,图像集中的每张图像经过每个分割模型的图像编码器得到编码特征,编码特征再经过图像解码器得到解码特征,编码特征与每个器官的类别特征嵌入编码经过器官分割参数生成模块融合后生成每个器官的分割权重,并将分割权重赋值给分割头,分割头利用赋值的分割权重基于解码特征计算得到每类器官的预测概率图作为分割结果;基于标签为每类器官的预测概率图构建监督损失,基于预测概率图生成伪标签,并基于伪标签构建两个分割模型之间的交叉半监督损失,并利用监督损失和交叉半监督损失优化两个分割模型参数;利用参数优化的一个分割模型进行多器官分割。
全文数据:
权利要求:
百度查询: 国科大杭州高等研究院 基于文本引导的多模态半监督多器官分割方法和装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。