微米高内存使用率

Posted 2023-02-15

【中文标题】微米高内存使用率

【英文标题】：Micro meter high memory usage

【发布时间】：2021-11-11 23:08:58

【问题描述】：

我们看到我们的一些服务（Java SpringBoot）出现 OOM。在检查堆转储时，我们发现 micrometer 库占用了 113MB（大约占总堆内存的 54%）。

io.micrometer.statsd.internal.LogbackMetricsSuppressingUnicastProcessor
Jar: io.micrometer:micrometer-core

我在网上做了一些研究，发现创建很多不同的标签会导致这个问题。但是，我们的服务并非如此。我们正在向数据狗推送大量指标，但一直在重复使用标签。

【问题讨论】：

您能否详细说明 OOM 发生需要多长时间？另外，您要发送多少指标？带有 2 个不同标签的 1 米大约需要 2 米。 （在内部它们是一样的）

【参考方案1】：

这样的内存问题通常是由使用高基数标签引起的。

这里的高基数意味着标签可以有大量的唯一值。例如，如果您想将用户的gender 附加到您的指标，则该标签可能具有较低的基数，因为您可能没有很多值可供选择。另一方面，userID 是高基数，因为每个用户都会有一个唯一的用户。

拥有高基数标签可能会产生大量计量表，因为每个唯一值都有计量表，这将导致高内存消耗，并且您的指标后端也会遇到类似问题。

（可能）高基数标签的示例：

资源ID，例如：userID 电子邮件地址（基本上是任何用户输入） 请求路径而不是模板（例如：它可以包含resourceID）

另请参阅 Micrometer 文档：https://micrometer.io/docs/concepts#_tag_values

你有高基数标签吗？如果是这样，您可以规范化或删除它们。