性能分析之用户登录TPS低以及CPU被打满问题分析

Posted zuozewei

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了性能分析之用户登录TPS低以及CPU被打满问题分析相关的知识,希望对你有一定的参考价值。

用户登录说起来只是一个很普通的功能,不过它的逻辑一点也不简单。因为登录过程要对个人的信息进行对比验证,验证过程中又要调用相应的加密算法,而加密算法是对性能要求很高的一种功能。复杂的加密算法安全性高,但性能就差;不复杂的加密算法性能好,但安全性高,这是一个取舍的问题。

按照测试方案的基准场景的设计步骤,先压测这个接口的基准场景。

● 问题现象

如上图所示,这现象老明显了。

压测结果中的 TPS 平均才 25平均响应时间达到了 993 ms。

● 分析过程

从性能分析逻辑上来说,针对响应时间长的问题,首先要做的就是拆分时间。由于这个系统已经部署了 SkyWalking,用它看看时间主要消耗在了哪里。

看图中,Tomcat 的 SelfDuration 是最多的,也就是说时间几乎消耗在服务本身。

● 全局监控

首先查看下应用服务器的资源水位情况:

可以看到4C的CPU资源已经被耗光。

这里部署的是容器,先看下各容器资源使用情况:

可以看到资源主要被服务容器消耗了。

● 服务定向分析

首先进入服务容器查看下资源消耗情况:

在 SkyWaking 中又看不到完整的调用栈,考虑直接连到服务 Java 进程中看方法的时间消耗。这里用 Arthas 来跟踪一下。

查看当前最忙的前N个线程并打印堆栈:

这里为程序的业务代码。

于是 trace attemptAuthentication 这个方法。

接着trace authenticate 这个方法。

一层层跟踪下去,最终来到了这里:

既然这个 crypt_raw 方法耗时比较长,那就反编译源代码看看这一段是什么东西。

可以看到这里是一个加密算法 BCrypt,那么结论就很明显了 BCrypt 加密算法虽然安全性高,但性能差。

● demo验证

这里使用 SpringBoot 实现 MD5 加密和 BCrypt 加密的实例。

JMeter 并发20 MD5 加密结果:

JMeter 并发20 BCrypt 加密结果:

● 建议优化方向

这里解释一下,Bcrypt在加密时,每一次HASH出来的值是不同的,所以特别慢!

具体什么是 Bcrypt 算法,可以参考这篇文章:https://www.jianshu.com/p/2b131bfc2f10

分析到这里,优化方案其实比较明确了,那就是用更快的加密方式,或者去掉这个加密算法。

以上是关于性能分析之用户登录TPS低以及CPU被打满问题分析的主要内容,如果未能解决你的问题,请参考以下文章

性能分析之用户登录TPS低以及CPU被打满问题分析

用户登录功能:说简单也困难

性能分析之公有云网络带宽导致 TPS 低 RT 高

记一次生产环境tomcat线程数打满情况分析

性能测试学习第十天-----性能案例分析之数据库性能问题

为什么一段看似正确的代码会导致DUBBO线程池被打满