买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京赛彼思智能科技有限公司

摘要：本申请提供了一种基于语言模型的命名实体识别方法及装置。该方法包括：获取待进行命名实体识别的文本，根据文本中的断句符号划分文本，得到第一语句集合；利用第一语言模型对第一语句集合中各条语句进行命名实体识别，得到预识别结果；根据预识别结果对第一语句集合进行筛选，得到第二语句集合；从第一语句集合中确定出第二语句集合中各条语句的局部句子集合和全局句子集合；基于第二语句集合中各条语句的局部句子集合和全局句子集合，利用第二语言模型对第二语句集合中各条语句进行命名实体识别，得到再识别结果。采用上述技术手段，解决现有技术中长文本命名实体识别效果差的问题。

主权项：1.一种基于语言模型的命名实体识别方法，其特征在于，包括：获取待进行命名实体识别的文本，根据所述文本中的断句符号划分所述文本，得到第一语句集合，其中，所述第一语句集合包含多条语句；利用第一语言模型对所述第一语句集合中各条语句进行所述命名实体识别，得到预识别结果；根据所述预识别结果对所述第一语句集合进行筛选，得到第二语句集合，其中，所述第二语句集合包含多条语句，所述第二语句集合中语句的数量少于等于所述第一语句集合中语句的数量；从所述第一语句集合中确定出所述第二语句集合中各条语句的局部句子集合和全局句子集合；基于所述第二语句集合中各条语句的局部句子集合和全局句子集合，利用第二语言模型对所述第二语句集合中各条语句进行所述命名实体识别，得到再识别结果，其中，所述第一语言模型的模型规模小于所述第二语言模型的模型规模；其中，从所述第一语句集合中确定出所述第二语句集合中各条语句的局部句子集合，包括：从所述第一语句集合中确定出所述第二语句集合中各条语句的前K条语句和后K条语句；将确定出的所述第二语句集合中各条语句的2K条语句作为该条语句的局部句子集合；其中，从所述第一语句集合中确定出所述第二语句集合中各条语句的全局句子集合，包括：所述预识别结果包含识别到的所述第一语句集合中各条语句中出现的命名实体；对于所述第一语句集合中的各条语句：基于该条语句中出现的命名实体，对所述第一语句集合进行全局搜索，确定出与该条语句中出现的命名实体的相似度最高的K条语句；基于该条语句，对所述第一语句集合进行全局搜索，确定出与该条语句的相似度最高的K条语句；将确定出的该条语句的2K条语句作为该条语句的全局句子集合。

全文数据：

权利要求：

百度查询： 北京赛彼思智能科技有限公司 基于语言模型的命名实体识别方法及装置