浪潮云信息技术股份公司方建勋获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉浪潮云信息技术股份公司申请的专利应用于数据同步的数据传输方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119493827B 。
龙图腾网通过国家知识产权局官网在2025-10-31发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411449254.1,技术领域涉及:G06F16/27;该发明授权应用于数据同步的数据传输方法及系统是由方建勋;邓光超;王阳;时云智设计研发完成,并于2024-10-17向国家知识产权局提交的专利申请。
本应用于数据同步的数据传输方法及系统在说明书摘要公布了:本发明公开了应用于数据同步的数据传输方法及系统,属于数据同步技术领域,要解决的技术问题为如何解决数据传输格式的通用性、降低对数据传输层的依赖以及对编程语言的绑定。包括:基于字段属性构建数据元组,基于数据元组中字段属性在目标数据库中创建库表;基于同步数据的结构类型、将同步数据填充到对应的数据区块中,如果当前数据区块的存储容量小于同步数据的大小,创建新的数据区块对同步数据进行跨区块存储,并按照数据区块的区块编号进行排列,通过消息队列将同步数据对应的数据区块发送至数据入库模块,通过数据入库模块对数据区块进行解析并将解析得到的同步数据存储至目标数据库对应的库表中。
本发明授权应用于数据同步的数据传输方法及系统在权利要求书中公布了:1.一种应用于数据同步的数据传输方法,其特征在于,应用于数据采集模块和数据入库模块之间,包括如下步骤: 数据区块设计:对于通过数据采集模块从源数据库的库表采集的同步数据,为每种结构类型的同步数据配置固定大小的数据区块,每个数据区块均配置有校验信息和唯一的区块编号; 数据值设计:对于通过数据采集模块从源数据库的库表采集的同步数据,为每种数据格式的同步数据配置数据存储格式,同步数据通过预配置的数据存储格式填充至数据区块中; 数据表构建:对于源数据库库表,通过数据采集模块解析源数据库库表中的字段、并基于字段属性构建数据元组,将数据元组发送至消息队列,通过消息队列将数据元组发送至数据入库模块,数据入库模块接收数据元组后,基于数据元组中字段属性在目标数据库中创建库表; 数据传输:对于源数据库库表,通过数据表构建在目标数据库中创建库表后,通过数据采集模块从源数据库表中采集要同步的同步数据,对同步数据进行解析,基于同步数据的结构类型、将同步数据填充到对应的数据区块中,如果当前数据区块的存储容量小于同步数据的大小,创建新的数据区块对同步数据进行跨区块存储,并按照数据区块的区块编号进行排列,通过消息队列将同步数据对应的数据区块发送至数据入库模块,通过数据入库模块对数据区块进行解析并将解析得到的同步数据存储至目标数据库对应的库表中; 其中,数据区块中内容包括校验信息、区块编号、头信息、Lower、Upper、数据行索引以及数据行内容; 其中,校验信息位于数据区块的首端,包括校验标识符和校验码,其中,校验标识符为0时,表示数据区块无需校验,校验码为空值,校验标识符为1时,表示需要校验,校验标识符后添加校验码; 区块编号位于校验信息的后端; 头信息位于区块编号的后端,头信息包括区块中添加同步数据类型标识和数据长度; Lower位于头信息的后端,指向下一个数据行的索引的头的位置; Upper位于Lower的后端,指向下一个数据行的数据的结束位置; 数据行索引位于Upper的后端,对于添加至数据区块的每一行同步数据,从Upper的尾端、按照由前至后的方式添加数据行索引; 数据行内容位于数据行索引的后端,对于添加至数据区块的每一行同步数据,从数据区块的尾端、按照由后至前的方式添加数据内容; 其中,同步数据的结构类型包括元数据、全量数据、增量数据、大数据块以及全量结束标识,元数据对应的类型标识为A,全量数据对应的类型标识为B、增量数据对应的类型标识为C,大数据块对应的类型标识为D,全量结束标识对应的类型标识为E; 数据存储格式包括值类型以及数据长度,通过数据采集模块从源数据库的库表中采集要同步的同步数据后,基于预配置的值类型和数据长度、将同步数据以指定的值类型填充到数据区块中,通过数据入库模块对数据区块进行解析、并按照同步数据在源数据库的库表中格式写入目标数据库的库表中; 其中,对于元数据,头信息包括类型标识、表唯一标识、模式名和表名,数据元组包括字段名、是否为主键、是否为空值、默认值以及备注; 对于全量数据,头信息包括类型标识和表唯一标识,数据元组包括源数据库库表中每一列的数据值; 对于增量数据,头信息包括类型标识、表唯一标识、时间戳和事务号,数据元组包括每一列的数据值以及各列After值; 对于全量结束标识,头信息包括类型标识,数据元组包括模式名和表名; 对于大数据块,数据元组包括块内数据长度、剩余数据长度以及剩余数据大数据区块位置; 其中,数据入库模块从消息队列接收到数据区块后,基于数据区块的校验信息和区块编号验证接受的同步数据是否存在缺失或重复数据。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人浪潮云信息技术股份公司,其通讯地址为:250100 山东省济南市高新区浪潮路1036号浪潮科技园S01号楼;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励