买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:天翼视联科技有限公司
摘要:本申请涉及一种分布式元数据管理方法、异地异构元数据管理系统及设备。所述方法包括:通过MySQL数据库,在客户端的文件预备写入Hadoop集群时,接收集群节点管理器发送的存储请求;根据存储请求,提取文件的元数据信息生成元数据宽表;根据元数据宽表和节点信息表,利用节点选举策略,获取文件在Hadoop集群上的适配存储节点。由集群节点管理器根据适配存储节点,向核心管理节点发送地址请求。核心管理节点根据地址请求获取数据存储地址,并将文件分裂为奇数份存入数据存储地址对应的位置。采用本申请能够实现独立于Hadoop生态之外产生节点选择策略,无需Hadoop集群具备高端性能,即可保证集群的可靠性和可拓展性。
主权项:1.一种分布式元数据管理方法,应用于异地异构元数据管理系统,其特征在于,所述异地异构元数据管理系统包括客户端、Hadoop集群以及MySQL数据库,所述Hadoop集群包括集群节点管理器、核心管理节点以及计算节点、存储节点;所述MySQL数据库存储有描述Hadoop集群各节点的节点信息表;当客户端的文件预备写入Hadoop集群时,所述方法包括:接收所述集群节点管理器发送的存储请求;根据所述存储请求,提取所述文件的元数据信息生成元数据宽表;根据所述元数据宽表和所述节点信息表,利用节点选举策略,获取所述文件在所述Hadoop集群上的适配存储节点;所述集群节点管理器根据所述适配存储节点,向所述核心管理节点发送地址请求;所述核心管理节点根据所述地址请求获取数据存储地址,并将所述文件分裂为奇数份,存入所述数据存储地址对应的位置。
全文数据:
权利要求:
百度查询: 天翼视联科技有限公司 分布式元数据管理方法、异地异构元数据管理系统及设备
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。