首页
期刊大全
万向问答
期刊动态
学术会议
科研项目
帮助中心
免费注册
|
会员登录
文献检索:
文献标题
文献标题
关键词
摘要
作者
单位
搜索
您的当前位置:
首页
>>
期刊文献
>> 正文
基于改进均匀设计的Spark性能配置参数选择方法的研究
摘 要:
Spark分布式计算平台广泛地应用于大
数据
分析领域,有关Spark性能配置参数优化方法研究成了热点。Spark有100多个配置项以及丰富的配置参数值,配置项构建了庞大的配置空间,因此从这种多因素多水平的配置空间中选择出有效的配置项成为一个难题。针对这一问题,提出一种改进的均匀设计方法。该算法可以通过样本密度分析和模型梯度检测的方式,提高均匀实验设计的精度。最后,利用该方法测试出针对混合资源依赖应用选择出性能影响最大的配置项。
作 者:
张威
单 位:
湖北中医药大学
关键字:
参数特征;均匀设计;Spark性能;启发式算法;
页 码:
74-76
出 处:
自动化应用
-
2022年06期
您还没有登陆会员账号,请先登陆,在进行阅读或下载!