买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京城市网邻信息技术有限公司

摘要：本发明提供一种基于人工智能的网页信息检测方法和系统,涉及人工智能领域，所述方法包括：获取待检测网页的网页信息；根据页面链接，确定链接有效性检查结果和链接内容检查结果；根据链接有效性检查结果和链接内容检查结果，确定页面链接检测评分；根据文本内容，确定文本内容特征；通过已训练的文本内容检测模型，对文本内容特征进行处理，确定文本内容合规检测评分；根据文本内容合规检测评分和页面链接检测评分，确定网页信息检测评分；根据网页信息检测评分，生成网页信息检测报告。根据本发明，可基于页面链接检测和文本内容检测两方面，对网页信息进行全面检测，提高网页信息检测的全面性和准确性。

主权项：1.一种基于人工智能的网页信息检测方法，其特征在于，包括：获取待检测网页的网页信息，其中，所述网页信息包括：文本内容和页面链接；根据所述页面链接，确定链接有效性检查结果和链接内容检查结果；根据所述链接有效性检查结果和所述链接内容检查结果，确定页面链接检测评分；根据所述文本内容，确定文本内容特征，其中，文本内容特征包括：关键词、短语、关键词词频和短语词频；通过已训练的文本内容检测模型，对所述文本内容特征进行处理，确定文本内容合规检测评分；根据所述文本内容合规检测评分和所述页面链接检测评分，确定网页信息检测评分；根据所述网页信息检测评分，生成网页信息检测报告；根据所述页面链接，确定链接有效性检查结果和链接内容检查结果，包括：根据页面链接的HTTP请求和响应机制，确定链接有效性检查结果；根据所述页面链接，确定页面链接的返回内容；根据所述返回内容和预期内容，确定链接内容检查结果；根据所述链接有效性检查结果和所述链接内容检查结果，确定页面链接检测评分，包括：根据所述页面链接，确定页面链接指向的网站的网站特征，其中，所述网站特征包括：网站IP地址和网站域名；获取已知的恶意网站的恶意网站IP地址和恶意网站域名；根据所述网站IP地址和所述网站域名，确定网站信息向量；根据所述恶意网站IP地址和所述恶意网站域名，确定恶意网站信息向量；根据所述链接有效性检查结果、所述链接内容检查结果、所述网站信息向量和所述恶意网站信息向量，确定页面链接检测评分；根据所述链接有效性检查结果、所述链接内容检查结果、所述网站信息向量和所述恶意网站信息向量，确定页面链接检测评分，包括：根据公式 确定页面链接检测评分PLD，其中，if为条件函数，max为取最大值函数，ε为预设相似度阈值，IEk为待检测网页中的第k个页面链接的链接有效性检查结果，ICk为待检测网页中的第k个页面链接的链接内容检查结果，IPk为待检测网页中的第k个页面链接指向的网站的网站IP地址，DNk为待检测网页中的第k个页面链接指向的网站的网站域名，MIPi为第i个已知的恶意网站的恶意网站IP地址，MDNi为第i个已知的恶意网站的恶意网站域名，为待检测网页中的第k个页面链接指向的网站的网站信息向量，为第i个已知的恶意网站的恶意网站信息向量，为的转置向量，其中， K为待检测网页中的页面链接的数量，m为已知的恶意网站的数量，k≤K，i≤m，且k、K、i和m均为正整数。

全文数据：

权利要求：

百度查询： 北京城市网邻信息技术有限公司 基于人工智能的网页信息检测方法和系统