大数据平台常用命令

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据平台常用命令相关的知识,希望对你有一定的参考价值。

启动spark
sbin/start-all.sh

停止spark
sbin/stop-all.sh



启动zookeeper bin/zookeeper-server-start.sh config/zookeeper.properties & 启动kafka bin/zkServer.sh start config/server.properties & 停止kafka bin/kafka-server-stop.sh 停止zookeeper bin/zkServer.sh stop

创建topic
bin/kafka-topics.sh --create --zookeeper master:2181 --replication-factor 1 --partitions 1 --topic test

展示topic
bin/kafka-topics.sh --list --zookeeper master:2181

描述topic
bin/kafka-topics.sh --describe --zookeeper master:2181 --topic my-replicated-topic

生产者:
bin/kafka-console-producer.sh --broker-list master:9092 --topic my-replicated-topic

消费者:
bin/kafka-console-consumer.sh --zookeeper master:2181 --topic test --from-beginnin















以上是关于大数据平台常用命令的主要内容,如果未能解决你的问题,请参考以下文章

大数据常用调度平台

大数据运维 大数据平台运维总结

常用的大数据工具都有哪些?

大数据技术之_18_大数据离线平台_04_数据分析 + Hive 之 hourly 分析 + 常用 Maven 仓库地址

大数据平台最常用的30款开源工具

ClouderaManager视频教程_ClouderaManager大数据平台视频教程