Hadoop的配置参数的计算方法及系统
- 专利权人:
- 中国科学院深圳先进技术研究院
- 发明人:
- 刘勇,喻之斌,须成忠
- 申请号：
- CN201511025710.0
- 公开号：
- CN105653355A
- 申请日:
- 2015.12.30
- 申请国别(地区):
- 中国
- 年份:
- 2016
- 代理人:
- 郝明琴
- 摘要：
- 本发明提供了一种Hadoop的配置参数的计算方法及系统，所述方法包括如下步骤：对工业环境下的实际的生产数据采样获得工业环境的小数据集；随机产生Hadoop配置参数，并将工业环境的小数据集运行于Hadoop集群，输出为运行时间，以时间为类标，Hadoop配置参数的组合为输入，采用信息增益的方案，输出为Hadoop的重要配置参数；采用遗传算法对获取的重要性参数迭代搜索最优配置组合。本发明提供的技术方案具有计算量小的优点。
- 来源网站：
- 中国工程科技知识中心
