Hibench 完成 HDP-Spark 测试
Posted 一个假的软件测试工程师
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hibench 完成 HDP-Spark 测试相关的知识,希望对你有一定的参考价值。
1、编译,上个文章以及介绍了编译过程,直接跳到第二步
2、安装安装 bc 用于生成 report 信息
yum install bc -y
3、修改配置文件
a.修改spark.conf
hibench.spark.home:修改为对应的位置
hibench.spark.master:
b.修改hadoop.conf
c.修改hibench.conf
d.修改conf/workloads/micro/terasort.conf
4.准备数据
bin/workloads/micro/terasort/prepare/prepare.sh
5、开始运行
bin/workloads/micro/terasort/spark/run.sh
6、查看报告
以上是关于Hibench 完成 HDP-Spark 测试的主要内容,如果未能解决你的问题,请参考以下文章