买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:国家超级计算天津中心
摘要:本公开实施例涉及一种基于分布式系统的IO栈构建方法、装置、设备及介质,其中该方法包括:获取待运行作业的作业描述信息,根据所述作业描述信息,确定所述待运行作业的IO类型数据;其中,所述作业描述信息包括:作业名称信息、作业路径信息、作业提交信息中的至少一个,所述作业名称信息包括:软件名称信息、软件版本信息、作业算例信息中的至少一个;根据所述IO类型数据确定对所述待运行作业进行处理的目标IO栈。本公开实施例,IO栈与作业的适配性较高,并且实现了系统级自动化构建IO栈,减少了人力资源的消耗,合理利用IO资源,提升了作业的IO性能。
主权项:1.一种基于分布式系统的IO栈构建方法,其特征在于,包括:获取待运行作业的作业描述信息,根据所述作业描述信息,确定所述待运行作业的IO类型数据;其中,所述作业描述信息包括:作业名称信息、作业路径信息、作业提交信息中的至少一个,所述作业名称信息包括:软件名称信息、软件版本信息、作业算例信息中的至少一个;根据所述IO类型数据确定对所述待运行作业进行处理的目标IO栈;其中,所述IO类型数据包括读写类型数据和占用资源类型数据,所述根据所述IO类型数据确定对所述待运行作业进行处理的目标IO栈,包括:若所述读写类型数据包括第一读写频率类型,且所述占用资源类型数据包括第一内存占用类型,则为预先设置的初始IO栈配置硬盘型的突发缓存,得到所述目标IO栈;其中,所述第一读写频率类型表征所述待运行作业的预测读写频率大于预设读写频率阈值,所述第一内存占用类型表征所述待运行作业的预测内存使用率大于预设内存使用率阈值;若所述读写类型数据包括第一读写频率类型,且所述占用资源类型数据包括第二内存占用类型,则为所述初始IO栈配置内存型的突发缓存,得到所述目标IO栈;其中,所述第二内存占用类型表征所述待运行作业的预测内存使用率小于或等于所述预设内存使用率阈值;或者,所述IO类型数据包括元数据类型数据,所述根据所述IO类型数据确定对所述待运行作业进行处理的目标IO栈,包括:若所述元数据类型数据包括第一处理次数类型,则将预先设置的初始IO栈中的元数据管理资源进行条带化处理,得到所述目标IO栈;其中,所述第一处理次数类型表征所述待运行作业的预测元数据处理次数大于预设元数据处理次数阈值;或者,所述IO类型数据包括文件类型数据,所述根据所述IO类型数据确定对所述待运行作业进行处理的目标IO栈,包括:若所述文件类型数据包括第一数量类型,则在预先设置的初始IO栈中划分用于存放第二空间类型的文件的元数据存储空间,得到所述目标IO栈;其中,所述第一数量类型表征所述待运行作业的第二空间类型的预测文件数量大于预设文件数量阈值,所述第二空间类型表征文件占用的预测存储空间小于或等于预设第二空间阈值;若所述文件类型数据包括第一空间类型,则对所述初始IO栈中的计算数据存储空间进行条带化处理,得到所述目标IO栈;其中,所述第一空间类型表征文件占用的预测存储空间大于预设第一空间阈值。
全文数据:
权利要求:
百度查询: 国家超级计算天津中心 基于分布式系统的I/O栈构建方法、装置、设备及介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。