[00230673]Hadoop的配置参数的计算方法及系统
交易价格:
面议
类型:
发明专利
技术成熟度:
正在研发
专利所属地:中国
专利号:CN201511025710.0
交易方式:
完全转让
许可转让
技术入股
联系人:
中国科学院深圳先进技术研究院
所在地:广东深圳市
- 服务承诺
- 产权明晰
-
资料保密
对所交付的所有资料进行保密
- 如实描述
技术详细介绍
本发明提供了一种Hadoop的配置参数的计算方法及系统,所述方法包括如下步骤:对工业环境下的实际的生产数据采样获得工业环境的小数据集;随机产生Hadoop配置参数,并将工业环境的小数据集运行于Hadoop集群,输出为运行时间,以时间为类标,Hadoop配置参数的组合为输入,采用信息增益的方案,输出为Hadoop的重要配置参数;采用遗传算法对获取的重要性参数迭代搜索最优配置组合。本发明提供的技术方案具有计算量小的优点。