flume win10怎么运行

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了flume win10怎么运行相关的知识,希望对你有一定的参考价值。

参考技术A 方法/步骤dell网站下载dset系统日志收集工具。尽量使用最新版本的dset工具。

双击开始运行,下一步。这个不是安装程序哦。

点NEXT接受协议后,您可以看到如下的这个界面:1.第一项,可以创建日志信息文件,将这个文件发邮件给戴尔技术工程师,或者您自行分析,可以帮助了解机器的运行状态。2.第二个选项安装DSET软件。3.第三个选项获取日志并且清除原有记录日志,可以解决状态灯不正常但机器使用正常的情况。

选择next(只选择第一个选项,其它的SKIP的都不要选择,否则会无法抓取到日志)。

运行后会看到如下界面,大约几分钟至十几分钟的时间。

日志收集后产生的文件名和保存的路径如下图红色部分.也可以通过搜索dset*.zip查找。

获得机器的日志压缩文件,解压密码为“dell”将此文件解压后,可以看到详细的硬件、系统信息。

kafka怎么收集到flume的日志

参考技术A 采集层 主要可以使用Flume, Kafka两种技术。
Flume:Flume 是管道流方式,提供了很多的默认实现,让用户通过参数部署,及扩展API.
Kafka:Kafka是一个可持久化的分布式的消息队列。
Kafka 是一个非常通用的系统。你可以有许多生产者和很多的消费者共享多个主题Topics。相比之下,Flume是一个专用工具被设计为旨在往HDFS,HBase发送数据。它对HDFS有特殊的优化,并且集成了Hadoop的安全特性。所以,Cloudera 建议如果数据被多个系统消费的话,使用kafka;如果数据被设计给Hadoop使用,使用Flume。

正如你们所知Flume内置很多的source和sink组件。然而,Kafka明显有一个更小的生产消费者生态系统,并且Kafka的社区支持不好。希望将来这种情况会得到改善,但是目前:使用Kafka意味着你准备好了编写你自己的生产者和消费者代码。如果已经存在的Flume Sources和Sinks满足你的需求,并且你更喜欢不需要任何开发的系统,请使用Flume。

Flume可以使用拦截器实时处理数据。这些对数据屏蔽或者过量是很有用的。Kafka需要外部的流处理系统才能做到。

Kafka和Flume都是可靠的系统,通过适当的配置能保证零数据丢失。然而,Flume不支持副本事件。于是,如果Flume代理的一个节点奔溃了,即使使用了可靠的文件管道方式,你也将丢失这些事件直到你恢复这些磁盘。如果你需要一个高可靠行的管道,那么使用Kafka是个更好的选择。

Flume和Kafka可以很好地结合起来使用。如果你的设计需要从Kafka到Hadoop的流数据,使用Flume代理并配置Kafka的Source读取数据也是可行的:你没有必要实现自己的消费者。你可以直接利用Flume与HDFS及HBase的结合的所有好处。你可以使用Cloudera Manager对消费者的监控,并且你甚至可以添加拦截器进行一些流处理。
Flume和Kafka可以结合起来使用。通常会使用Flume + Kafka的方式。其实如果为了利用Flume已有的写HDFS功能,也可以使用Kafka + Flume的方式。

以上是关于flume win10怎么运行的主要内容,如果未能解决你的问题,请参考以下文章

为啥flume每次都是运行一会就停了

win10系统怎么用管理员身份运行

有的程序在win10运行不了怎么办

frp怎么远程win10电脑,并且自动运行?

怎么清除Win10运行中的使用记录,不记录win10的运行记录

win10怎么用防火墙禁止程序运行