龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：空气动力学国家重点实验室
摘要：本发明提供了一种百亿百GB量级网格数据文件的并行读入方法，针对多个物体产生的超大规模网格数据文件采用分组文件进行存储，每个分组包括多个文件，每个文件包含多个数据分区；读取时，采用多个文件进程进行文件读取，并发送至相应的非文件进程，进行数据负载均衡调配。采用本发明提出的方法，能够极大的提高网格文件IO效率，在读取同样的超大规模网格数据时，本发明技术方案耗时仅为现有技术耗时的150‑110。本发明可以极大节约网格数据读入时间，提高计算效率和经济效益。
主权项：1.一种百亿百GB量级网格数据文件的并行读入方法，其特征在于，针对多个物体产生的超大规模网格数据采用分组文件进行存储，每个分组包括多个文件，每个文件包含多个数据分区；读取时，采用多个文件进程进行文件读取，并发送至相应的非文件进程，进行数据负载均衡调配；具体读取方法：若进程数大于文件数，取文件进程数等于文件数，每个文件进程读取一个文件，读取之后将网格数据发送到非文件进程，实现负载均衡；若进程数小于文件数，当文件数是进程数的整数倍时，文件进程数取总进程数，所有进程均读取文件，且每个进程读取的文件数相同；当文件数不为进程数的整数倍时，在满足每个文件进程读取文件数相同的前提下，文件进程的数量不大于总进程数；若每个进程上分区数相同，则无需进行分区数据调配，若每个进程上分区数不同，则对各个进程中的分区数据进行负载均衡调配。
全文数据：
权利要求：
百度查询： 空气动力学国家重点实验室 一种百亿百GB量级网格数据文件的并行读入方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号