龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：天翼视联科技有限公司
摘要：本申请涉及一种分布式元数据管理方法、异地异构元数据管理系统及设备。所述方法包括：通过MySQL数据库，在客户端的文件预备写入Hadoop集群时，接收集群节点管理器发送的存储请求；根据存储请求，提取文件的元数据信息生成元数据宽表；根据元数据宽表和节点信息表，利用节点选举策略，获取文件在Hadoop集群上的适配存储节点。由集群节点管理器根据适配存储节点，向核心管理节点发送地址请求。核心管理节点根据地址请求获取数据存储地址，并将文件分裂为奇数份存入数据存储地址对应的位置。采用本申请能够实现独立于Hadoop生态之外产生节点选择策略，无需Hadoop集群具备高端性能，即可保证集群的可靠性和可拓展性。
主权项：1.一种分布式元数据管理方法，应用于异地异构元数据管理系统，其特征在于，所述异地异构元数据管理系统包括客户端、Hadoop集群以及MySQL数据库，所述Hadoop集群包括集群节点管理器、核心管理节点以及计算节点、存储节点；所述MySQL数据库存储有描述Hadoop集群各节点的节点信息表；当客户端的文件预备写入Hadoop集群时，所述方法包括：接收所述集群节点管理器发送的存储请求；根据所述存储请求，提取所述文件的元数据信息生成元数据宽表；获取所述元数据宽表的元组；所述元组为所述Hadoop集群的MapReduce组件将所述文件的实体处理为字节流并细分为多个split对象后，提取各split对象的特征值，与预设的Hadoop集群的各节点权重进行组合得到；所述元组包括各所述split对象的特征值以及数据化的文件；对所述元组按照各所述split对象的特征值进行分组，并使用所述节点信息表对分组后各所述split对象的特征值取余，生成所述文件对应的节点索引列表；利用节点选举策略对所述节点索引列表进行评估，获取所述文件在所述Hadoop集群上的适配存储节点；所述集群节点管理器根据所述适配存储节点，向所述核心管理节点发送地址请求；所述核心管理节点根据所述地址请求获取数据存储地址，并将所述文件分裂为奇数份，存入所述数据存储地址对应的位置。
全文数据：
权利要求：
百度查询： 天翼视联科技有限公司 分布式元数据管理方法、异地异构元数据管理系统及设备
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号