买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:深圳迅策科技有限公司
摘要:本发明涉及数据同步技术领域,本发明涉及一种基于Datax框架的数据同步方法。其包括以下步骤:在其中一个存储介质上接收发送端发出的数据文件,并汇总待同步的数据文件;识别待同步数据文件加密特征,并对数据文件进行输出;建立数据文件优先级规则,根据数据优先级规则对待同步数据文件进行优先级排序,将待同步数据文件依据优先级排序依次同步至另一个存储介质;预设同步阈值,使优先级排序满足同步阈值的所需数据直接同步到另一个存储介质,优先级排序不满足同步阈值的所需数据存储在云空间,本发明通过建立数据文件优先级规则,根据数据优先级规则对待同步数据文件进行优先级排序,对于重要数据文件进行优先同步,提高工作效率。
主权项:1.一种基于Datax框架的数据同步方法,其特征在于:包括以下步骤:S1、在其中一个存储介质上接收发送端发出的数据文件,并汇总待同步的数据文件;S2、识别待同步数据文件加密特征,并对数据文件进行输出;步骤S2包括S2.2、扫描数据文件,统计每个数据文件加密次数,确定数据文件的加密特征;S3、建立数据文件优先级规则,根据数据优先级规则对待同步数据文件进行优先级排序,将待同步数据文件依据优先级排序依次同步至另一个存储介质;步骤S3包括S3.1、根据加密次数多少依次确定数据文件优先级,为每个数据文件分配对应的优先级,加密元数据高的数据文件分配更高的优先级,加密元数据少的数据文件分配较低的优先级;S4、预设同步阈值,使优先级排序满足同步阈值的数据文件直接同步到另一个存储介质,优先级排序不满足同步阈值的所需数据存储在云空间;S5、在另一个存储介质上对所需数据进行压缩存储,并在查看时进行解压。
全文数据:
权利要求:
百度查询: 深圳迅策科技有限公司 一种基于Datax框架的数据同步方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。