买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：济南浪潮数据技术有限公司

摘要：本发明公开了计算机技术领域内的一种数据集归并方法、设备、介质、程序产品及检索系统。本发明通过对比当前节点的N次瞬时运行信息和多个数据集归并策略，来确定N次匹配的数据集归并策略是否是同一个，如果是，则将这N次匹配的目标数据集归并策略应用于当前节点，如此根据节点状态实现了节点级别的归并策略调整，既可保证归并速度，又可保证业务的正常运行，能够权衡系统业务的运行和归并操作的执行。

主权项：1.一种数据集归并方法，其特征在于，应用于分布式检索系统中的节点运行的数据集归并进程，包括：连续采集N次当前节点的瞬时运行信息，得到N个数组；将所述N个数组与预设的多个数据集归并策略进行匹配；其中，各个数据集归并策略中设定有相应的运行信息范围；所述多个数据集归并策略包括：归并优先策略、均衡归并策略、业务优先策略和自定义阈值策略；所述归并优先策略用于单节点运行读写任务稳定时，归入为高频归并状态；所述均衡归并策略用于使归并和业务均分节点资源；所述业务优先策略用于限制归并任务运行在最小资源消耗水平，以保证集群对外业务的平稳运行；所述自定义阈值模型用于根据集群实际业务特性，自定义归并和业务所优先占用的资源比值；若所述N个数组与所述多个数据集归并策略中的同一目标数据集归并策略匹配，则将所述目标数据集归并策略应用于当前节点；所述目标数据集归并策略为所述多个数据集归并策略中的任意一个；其中，将所述N个数组与预设的多个数据集归并策略进行匹配，包括：将所述N个数组与所述多个数据集归并策略两两不重复构成得到多个目标对；针对各目标对，检测当前目标对中的数组中的各信息是否均落入当前目标对中的数据集归并策略中设定的运行信息范围；若是，则确定当前目标对中的数组和当前目标对中的数据集归并策略相互匹配；否则，确定当前目标对中的数组和当前目标对中的数据集归并策略相互不匹配；在每次采集得到瞬时运行信息后，检测当前所采集瞬时运行信息是否符合异常运行条件；若是，则不对资源信息再次匹配，在所述多个数据集归并策略中选择用于应对异常的数据集归并策略，并直接强制将当前所选数据集归并策略应用于当前节点；其中，检测当前所采集瞬时运行信息是否符合异常运行条件，包括：检测当前所采集瞬时运行信息中是否存在至少两项超过相应的阈值；若是，则当前所采集瞬时运行信息符合异常运行条件；否则，当前所采集瞬时运行信息不符合异常运行条件；其中，连续采集N次当前节点的瞬时运行信息，得到N个数组，包括：按照预设间隔连续采集N次当前节点中各器件的瞬时运行信息以及检索任务运行信息；各器件包括：磁盘、内存、处理器和或网卡；使单一时刻采集的各信息构成一个数组，得到N个数组；其中，按照预设间隔连续采集N次当前节点中各器件的瞬时运行信息，包括：按照预设间隔连续采集N次当前节点中磁盘的瞬时读写速率、内存的瞬时容量占用信息、处理器的瞬时资源占用信息和或网卡的瞬时带宽占用信息，作为所述瞬时运行信息；其中，按照预设间隔连续采集N次当前节点中的检索任务运行信息，包括：按照预设间隔连续采集N次当前节点中的检索任务延迟信息和检索任务处理速率，作为所述检索任务运行信息；其中，在所述多个数据集归并策略中选择用于应对异常的数据集归并策略，包括：在所述多个数据集归并策略中选择业务优先策略；其中，将所述目标数据集归并策略应用于当前节点之后，还包括：按照所述目标数据集归并策略对当前节点的内存中的数据集和磁盘中的数据集进行归并。

全文数据：

权利要求：

百度查询： 济南浪潮数据技术有限公司 一种数据集归并方法、设备、介质、程序产品及检索系统