如何禁用/关闭Storm的日志记录功能

Posted 2021-04-11

我想在从本地群集运行时关闭默认提供的日志记录功能。目前它在控制台上记录了很多信息。

以下是日志示例：

261 [main] INFO  backtype.storm.daemon.task  - Shut down task Getting-Started-Toplogie-1-1376388324:2
2261 [main] INFO  backtype.storm.daemon.task  - Shutting down task Getting-Started-Toplogie-1-1376388324:1
2262 [Thread-24] INFO  backtype.storm.util  - Async loop interrupted!
2276 [main] INFO  backtype.storm.daemon.task  - Shut down task Getting-Started-Toplogie-1-1376388324:1
2278 [main] INFO  backtype.storm.daemon.worker  - Terminating zmq context
2279 [main] INFO  backtype.storm.daemon.worker  - Disconnecting from storm cluster state context
2279 [main] INFO  backtype.storm.daemon.worker  - Waiting for heartbeat thread to die
2279 [Thread-27] INFO  backtype.storm.util  - Async loop interrupted!
2308 [main] INFO  backtype.storm.testing  - Shutting down in process zookeeper
2309 [main] INFO  backtype.storm.testing  - Done shutting down in process zookeeper
2309 [main] INFO  backtype.storm.testing  - Deleting temporary path /tmp/255fe7c8-1407-4f43-8771-2217905232ab

经过许多文档后，我最终得到了以下代码，我可以从课堂内关闭日志记录。

static Logger logger = Logger.getLogger(TopologyMain.class);

public static void main(String[] args) throws InterruptedException, AlreadyAliveException, InvalidTopologyException {        
      logger.setLevel((Level) Level.FATAL);
      logger.debug("Here is some DEBUG");
      logger.info("Here is some INFO");
      logger.warn("Here is some WARN");
      logger.error("Here is some ERROR");
      logger.fatal("Here is some FATAL");
 }
}

输出（正确）：0 [main] FATAL TopologyMain - Here is some FATAL

但我需要更改storm / zookeper的日志配置等。

有人可以帮忙吗？

---

Update: The following is the code I tried, but it does not work. I tried with version 0.7.1, 0.8.2 & 0.9.0-wip*

        //Configuration
        Config conf = new Config();
        conf.put(Config.TOPOLOGY_DEBUG, false);  //Tried this alone
        conf.setDebug(false);  //Tried this alone & tried both together as well.. No change :-(

答案

风暴真的很健谈并且讲述了很多信息，但是如果你想让它保持沉默，你可以将Config.TOPOLOGY_DEBUG设置为false。

当您将Config.TOPOLOGY_DEBUG设置为true时，每次从任何喷口或螺栓发出元组时，您都会告诉Storm记录消息。

另一答案

在log4j.xml中添加以下代码。它只会打印您想要的日志和控制台输出： -

<logger name="org.apache.zookeeper">
        <level value="warn"/>
    </logger>

    <logger name="backtype.storm">
        <level value="warn"/>
    </logger>

    <logger name="com.netflix">
        <level value="warn"/>
    </logger>

并在您的类中使用Logger.getLogger（Class）。

另一答案

这适用于我（风暴版本0.9.0.1）：

TopologyBuilder builder = new TopologyBuilder();
builder.setSpout(..);
builder.setBolt(..);
:

Config conf = new Config();
conf.put(Config.TOPOLOGY_DEBUG, false);

LocalCluster cluster = new LocalCluster();
cluster.submitTopology("topologyName", conf, builder.createTopology());

另一答案

在尝试使用本地测试环境评估Storm时，我发现了这个问题。我创建了一个项目取决于storm-core版本1.1.0，这是本文撰写时的最新稳定版本，所以我不知道这是否适用于其他任何人。

检查Maven依赖项，并扩展storm-core-1.1.0.jar的内容，发现库的log4j日志记录依赖项的配置文件名为log4j2.xml。通过认识到日志记录机制是log4j 2，我在这里查阅了文档：https://logging.apache.org/log4j/2.x/manual/index.html我在log4j2.xml下创建了一个新的src/main/resources文件（我的项目是Maven配置的，所以这是在类路径根目录下）。我开始复制现有文件的内容，并将指定记录器的日志级别更改为“OFF”：

<?xml version="1.0" encoding="UTF-8"?>
    <configuration monitorInterval="60">
      <Appenders>
        <Console name="Console" target="SYSTEM_OUT">
          <PatternLayout pattern="%-4r [%t] %-5p %c{1.} - %msg%n"/>
        </Console>
      </Appenders>
    <Loggers>
       <Logger name="org.apache.zookeeper" level="OFF"/>
         <Root level="OFF">
           <AppenderRef ref="Console"/>
         </Root>
    </Loggers>
</configuration>

运行一个“hello world”示例，无论conf.debug()的设置如何都表明 - 因为现在根本没有可以进行日志记录的机制 - 日志（最有用的是System.out）现在已经无声，除了调用我将System.out.println()放入我的测试喷口/螺栓中。这正是我想要的！希望这能帮助除我以外的人！

另一答案

有一个关于动态设置日志级别的很好的文档。它可以通过UI以及使用CLI完成。后者看起来对我好。启动拓扑后，您只需使用以下命令（从Storm的安装目录中）：

    ./bin/storm set_log_level [topology name] -l [logger name]=[LEVEL]:[TIMEOUT]

有关详细信息，请查看this link

另一答案

在src / main / resources（Maven项目）中创建文件“log4j2.xml”对我有用！

<Loggers>
    <Logger name="org.apache.storm" level="OFF"/>
    <Logger name="org.apache.zookeeper" level="OFF"/>
    <Root level="OFF">
        <AppenderRef ref="Console"/>
    </Root>
</Loggers>