性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

Posted 软件测试培训

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优相关的知识,希望对你有一定的参考价值。

https://item.jd.com/34295655089.html

https://item.jd.com/12082665.html

店铺二维码:

来源:https://www.testwo.com/


概述

随着近年来微信生态圈的发展,小游戏,小程序也随之爆火,同样伴随着的便是对于小游戏/小程序的用户体验的严格要求,微信团队也在自家的微信平台推荐使用PerfDog测试小游戏/小程序的性能。

1.评测指标

从小游戏的运行周期来看,开发者必须主要关注启动和运行两个阶段产生性能问题。

启动阶段:启动时长,该数据将显著影响用户打开留存率

运行阶段:内存峰值、Crash率、CPU占用、流畅度、网络等

兼容性问题:包括JS异常、黑屏等严重问题

android现网性能评测标准


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

Android现网性能评测标准


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

2.评测工具

1.PerfDog:

可以使用PerfDog完成性能数据获取

运行性能:完成游戏主流程对局5~10min, PerfDog记录性能数据并上传,取平均值,每种机型测试3组数据再取平均,内存峰值取最大值。

启动性能:采用录屏分帧方法获取,取10次测试平均值。

2.小游戏数据助手

也可以使用小游戏数据助手应用中的“数据-性能分析”获取现网玩家的性能采集数据。

小游戏数据助手:https://developers.weixin.qq.com/minigame/analysis/assistant.html

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优


3.PerfDog测试流程

1.运行性能数据获取:

首先我们用同一款手机测试3次小游戏的主流对局5~10min,取均值,微信是多线程运行的为了更准确的测试,我们可以用PerfDog对小游戏的线程进行测试。

注意:每次测试均要尽最大可能保证测试用例的一致性,记得区分游戏是否限制了帧率。我这里使用的是限帧30的小游戏。


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

我们可以使用对比功能查看详细的数据。


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

概览对比可以快速查看每组测试用例的数据。

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

基于以上的数据,我们算出3组测试用例的各项数据的均值如下。

FPS均值 CPU占用均值 内存峰值均值
23.63 25.2 387.2
我这里除了FPS有些不稳定,其他的性能数据还不错。

2.启动耗时

启动耗时微信推荐使用的是“采用录屏分帧方法获取,取10次测试平均值”,同样我们可以开启PerfDog的截图功能,轻松获取耗时。

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

我在00:06启动小游戏,由于在00:10的时候进度条还有一部分没加载完,所以加载完成算在00:11,本次的启动耗时就是:11-6=5(S)=5000(毫秒),需要注意是冷启动的耗时 !!!也就是把进程在后台彻底杀死再启动的耗时。

这是我第二次测试的耗时。

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

由于00:09时未完成算00:10,所以第二次耗时:10-5=5(秒)=5000(毫秒),我们需要共测试10次,然后算出均值。这里就不一一放出截图了,最后算出来的均值再去上面的表格找到自己的标准就可以确定小游戏的性能情况了。

4.补充

小程序和小游戏的测试测试流程一样的。PerfDog 同样也可以测试ios的性能,操作过程同样简单,感兴趣的可以自行测试哟!

围绕核心就是:

运行性能: 完成游戏主流程对局5~10min, PerfDog记录性能数据并上传,取平均值,每种机型测试3组数据再取平均,内存峰值取最大值。
启动性能:采用录屏分帧方法获取,取10次测试平均值。

附上IOS的标准:

iOS开发阶段性能评测标准:


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

iOS现网性能评测标准:


性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优

附上小游戏官方文档:

小游戏性能优化:https://developers.weixin.qq.com/minigame/dev/guide/performance/perf-overview.html


————————————————————

顾老师课程欢迎报名


软件安全测试

https://study.163.com/course/courseMain.htm?courseId=1209779852&share=2&shareId=480000002205486

接口自动化测试

https://study.163.com/course/courseMain.htm?courseId=1209794815&share=2&shareId=480000002205486

DevOps 和Jenkins之DevOps

https://study.163.com/course/courseMain.htm?courseId=1209817844&share=2&shareId=480000002205486

DevOps与Jenkins 2.0之Jenkins

https://study.163.com/course/courseMain.htm?courseId=1209819843&share=2&shareId=480000002205486

Selenium自动化测试

https://study.163.com/course/courseMain.htm?courseId=1209835807&share=2&shareId=480000002205486

性能测试第1季:性能测试基础知识

https://study.163.com/course/courseMain.htm?courseId=1209852815&share=2&shareId=480000002205486

性能测试第2季:LoadRunner12使用

https://study.163.com/course/courseMain.htm?courseId=1209980013&share=2&shareId=480000002205486

性能测试第3季:JMeter工具使用

https://study.163.com/course/courseMain.htm?courseId=1209903814&share=2&shareId=480000002205486

性能测试第4季:监控与调优

https://study.163.com/course/courseMain.htm?courseId=1209959801&share=2&shareId=480000002205486

Django入门

https://study.163.com/course/courseMain.htm?courseId=1210020806&share=2&shareId=480000002205486

啄木鸟顾老师漫谈软件测试

https://study.163.com/course/courseMain.htm?courseId=1209958326&share=2&shareId=480000002205486


以上是关于性能测试实践 | PerfDog 助力微信小游戏 / 小程序性能调优的主要内容,如果未能解决你的问题,请参考以下文章

移动全平台性能测试分析工具:PerfDog性能狗

移动端性能测试工具——PerfDog使用说明

云原生AIFluid + JindoFS 助力微博海量小文件模型训练速度提升 18 倍

洞穿性能测试痛点,PerfDog以提升应用和游戏的品质为使命

PerfDog性能狗移动端性能测试工具

PerfDog性能狗移动端性能测试工具