买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:中国农业银行股份有限公司
摘要:本申请公开了一种减少数据湖更新数据写放大的方法、系统及设备,通过响应于用于表征数据湖的数据需要插入或修改的目标指令,根据分区键确定目标分区;基于各个文件组的主键和所述目标更新频率,确定所述目标数据隶属的目标文件组,所述目标文件组是基于更新频率的大小关系划分得到的,所述主键用于表征文件组与文件组的更新频率之间的对应关系;基于所述目标指令对所述目标文件组进行调整。本申请中的文件组是根据预设的更新频率来划分得到的,整个数据湖存储系统中要进行更新的文件组就会被压缩到几个更新频繁的文件组里,要进行更新的文件组的数目会大大降低,能够有效地提高数据湖的更新数据文件的效率。
主权项:1.一种减少数据湖更新数据写放大的方法,其特征在于,包括:响应于用于表征数据湖中的目标数据需要插入或修改的目标指令,确定所述目标数据的目标更新频率;基于各个文件组的主键和所述目标更新频率,确定所述目标数据隶属的目标文件组,所述目标文件组是基于更新频率的大小关系划分得到的,所述主键用于表征文件组与文件组的更新频率之间的对应关系;基于所述目标指令对所述目标文件组进行调整。
全文数据:
权利要求:
百度查询: 中国农业银行股份有限公司 一种减少数据湖更新数据写放大的方法、系统及设备
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。