买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：华南理工大学

摘要：本发明公开了一种古籍文档顺序检测方法,包括：获取图像数据，基于图像数据进行各个字符的连接顺序标注以及整个文档的文本行顺序标注，获得训练数据集；基于训练数据集，通过空间几何关系构造图的邻接矩阵，构造图中各个结点的特征以及边特征，训练字符连接关系预测模型，得到将字符连接后的文本行；基于训练数据集，通过编码‑解码的序列模型，构建并训练文本行顺序预测模型，获得文本行顺序预测结果；根据图像数据，基于训练字符连接关系预测模型和训练文本行顺序预测模型，获得图像数据的符合阅读顺序的文档内容。本发明针对密集字符型的文档图片，基于字符检测结果进行顺序检测，提出包括单字连接关系预测模型以及文本行顺序预测模型。

主权项：1.一种古籍文档顺序检测方法，其特征在于，包括：获取图像数据，基于所述图像数据进行各个字符的连接顺序标注以及整个文档的文本行顺序标注，获得训练数据集；基于所述训练数据集，通过空间几何关系构造图的邻接矩阵，构造图中各个结点的特征以及边特征，训练字符连接关系预测模型，得到将字符连接后的文本行；基于所述训练数据集，通过编码-解码的序列模型，构建并训练文本行顺序预测模型，获得文本行顺序预测结果；根据所述图像数据，基于字符连接关系预测模型和文本行顺序预测模型，获得图像数据的符合阅读顺序的文档内容；构建字符连接关系预测模型包括：通过计算各个字符结点的L2距离，对于每个字符结点找到最近的8个字符结点，构造k阶子图网络，基于各个字符的几何结构，构造图的结点特征以及边特征，基于空间几何关系构造图的邻接矩阵，训练得到基于字符结点的连接关系图网络预测模型；构建字符连接关系预测模型还包括阈值，所述阈值用于判断所述图像数据能否进行训练；基于空间L2距离，构造每个结点的8邻域子图，计算节点数目的IoU，当IoU大于阈值则图像数据不进行训练，反之则进行训练；所述编码-解码的序列模型包括：基于文本行的版面坐标信息以及位置编号信息，通过Transformer模型得到编码后的特征序列，通过Decoder添加分类分支，预测各个时间步对应输入序列的索引，根据各个时间步的预测结果，基于交叉熵损失计算损失训练编码-解码的序列模型。

全文数据：

权利要求：

百度查询： 华南理工大学 一种古籍文档顺序检测方法