买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜内蒙古农业大学申请的专利一种hadoop参数优化模型的构建方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN115061978B 。

龙图腾网通过国家知识产权局官网在2025-03-21发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202210671845.8，技术领域涉及：G06F16/11；该发明授权一种hadoop参数优化模型的构建方法是由付学良;罗小玲;潘新设计研发完成，并于2022-06-15向国家知识产权局提交的专利申请。

本一种hadoop参数优化模型的构建方法在说明书摘要公布了：本发明涉及分布式处理技术领域，尤其涉及一种hadoop参数优化模型的构建方法，包含：利用服务器在一定时间内收集各数据源产生的数据量；分析单个所述数据源的特性，并根据其产生数据量的按比例赋予特征值，并利用服务器根据特征值预估待处理文件规模；服务器以一定时间为周期，收集各预备节点在常规运行状态下的资源存有量，并将其分组；服务器根据所述待处理文件规模，预估节点数量和处理时间；服务器依照服务器预估节点数量和处理时间，对hadoop的参数进行调整。通过分析数据源的特性，赋予特征值，根据特征值预估文件规模，将hadoop分布式节点进行分组，并依据文件规模和节点组对hadoop的参数进行调整，从而节约hadoop项目的资源。

本发明授权一种hadoop参数优化模型的构建方法在权利要求书中公布了：1.一种hadoop参数优化模型的构建方法，其特征在于，包含：步骤S1，利用服务器在一定时间内收集各数据源产生的数据量并分析单格数据源在预设时间内产生数据的最大值和最小值；步骤S2，根据经验分析单个所述数据源的特性并录入所述服务器，所述服务器根据各数据源产生的数据量的按比例赋予各数据源特征值，并根据特征值预估待处理文件规模；步骤S3，所述服务器以一定时间为周期，收集各预备节点在常规运行状态下各时段的资源存有量，并按照资源存有量的大小按时间将预备节点分组；步骤S4，所述服务器根据所述待处理文件规模，预估节点数量和处理时间；步骤S5，依照所述所述服务器预估的节点数量和处理时间，对hadoop的参数进行调整；所述数据源在预设周期内产生的数据量为D，D在预设时间T内呈规律性变化；对于第i个所述数据源在将预设时间T均匀分为j个时间段中产生的数据量Dij，存在一个最大值maxDij和一个最小值minDij，设定i＝1,2,3,…，N，j＝1,2,3，…，m；所述数据源在预设时间T内产生的最大数据量记为maxDT，预设时间T内产生的最小数据量记为minDT，设定maxDT＝maxDij×n×m，minDT＝minDij×n×m；将minDT作为标准文件规模，设定与minDT对应的hadoop标准参数A，并根据预备节点的运行状态以A为基准进行分组；对于单个所述预备节点，该预备节点的资源存有量R在预设时间T内存在一个最高值maxR，设定一个第一预设资源存有量R1，一个第二预设资源存有量R2，其中R1＝0.3maxR，R2＝0.7maxR，若R＜R1，所述服务器判定该所述预备节点资源存有量不足，并将该节点在该情况下的时段记为不可用时段；若R1≤R＜R2，所述服务器判定该所述预备节点资源存有量较低，并将该节点在该情况下的时段记为低效时段；若R≥R2，所述服务器判定该所述预备节点资源存有量较高，并将该节点在该情况下的时段记为高效时段；对于第k个所述预备节点，在第j个所述时间段内的状态Pkj赋值，其中k＝1,2,3，…，n，若所述时段被记为不可用时段，将Pkj赋值为0，若所述时段被记为低效时段，将Pkj赋值为1，若所述时段被记为高效时段，将Pkj赋值为2，利用所述标准参数A，以符合A的最优节点数量NA将所述预备节点进行分组，使该组节点在Pkj的状态下最优执行时间tA后完成数据量为minDT的项目。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人内蒙古农业大学，其通讯地址为：010010 内蒙古自治区呼和浩特市赛罕区昭乌达路306号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。