买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉哈尔滨工业大学申请的专利基于多模态大模型的土木工程结构表观损伤诊断方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119785098B 。

龙图腾网通过国家知识产权局官网在2025-09-05发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411901724.3，技术领域涉及：G06V10/764；该发明授权基于多模态大模型的土木工程结构表观损伤诊断方法是由黄永;张云开;魏世银;苏亚武;卢闪闪;王萌;李纯;胡宇飞;田子恒设计研发完成，并于2024-12-23向国家知识产权局提交的专利申请。

本基于多模态大模型的土木工程结构表观损伤诊断方法在说明书摘要公布了：本发明提出基于多模态大模型的土木工程结构表观损伤诊断方法。该方法包括结构表观损伤多模态数据统一表征与对齐融合，基于多模态思维链的结构损伤识别推理方法，多模态数据集构建与大模型微调，对土木工程结构损伤识别和特征描述。本发明使用多模态大模型完成对结构损伤图像的向量编码并与文本编码特征对齐，通过调用计算机视觉模型生成损伤语义分割图作为视觉思维链，并通过构造微调数据集形成语言思维链，由预训练大语言模型完成对多模态信息编码的推理和结构损伤诊断的生成。该方法使用多模态大模型为底座并融合多模态思维链推理方法，使得模型能够通过自然语言进行人机交互，高效诊断各类结构损伤，提高结构损伤诊断模型的泛化能力和准确性。

本发明授权基于多模态大模型的土木工程结构表观损伤诊断方法在权利要求书中公布了：1.基于多模态大模型的土木工程结构表观损伤诊断方法，其特征在于，所述方法包括以下步骤： 步骤一、整理各类结构的损伤图像并补充损伤特征的文本描述，采用预定义的提示词和回答标签来标准化训练样本，形成图像和文本描述相互匹配的土木工程结构损伤多模态数据集； 步骤二、设计土木工程结构损伤诊断多模态大模型架构；使用语义分割模型剔除背景环境信息，完成视觉思维链推理过程；使用图像编码器将结构损伤原始图像和语义分割图映射为同一向量空间的高维编码，并使用文本-图像特征编码对齐模块贯通语义，最后结合文本提示词使用大语言模型完成语言思维链推理和诊断生成； 步骤三、采用交叉熵损失来衡量多模态大模型预测概率分布和正确标签之间的差异，优化多模态大模型损伤描述文本的质量；使用基于低秩适配器的高效微调优化方法，在原始模型层上添加并行的可学习低秩矩阵，减少需要训练的参数量；使用多模态数据集迭代训练至多模态大模型收敛； 步骤四、使用完成微调训练的多模态大模型进行结构损伤诊断；将结构表观损伤图像输入多模态大模型，多模态大模型生成损伤区域与背景的语义分割图；输入用户对结构损伤状况的提问文本，多模态大模型根据提示词对损伤类别和损伤特征进行自然语言描述。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人哈尔滨工业大学，其通讯地址为：150001 黑龙江省哈尔滨市南岗区西大直街92号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。