一. 基本介绍
当我们作为一位消费者购买电子产品时，我们获取第一手信息的方式大多是从各大视频平台的自媒体的首发测评。当我们拿到电子产品之后，如何对它的性能进行测试呢？
有的朋友首先会想到娱乐兔，HappyMatser等跑分软件。毕竟跑分很直观，高就是强，低就是弱。但是当跑分论成为大众的标准，厂商便会想出各种各样的方法来获取更高的跑分。例如前几天被曝光的Realme GT跑分作弊，还有各大厂商的跑分白名单（MIUI检测到跑分软件运行，会将CPU锁在最高频率）。这样的测试只能算是极限性能，可是真正的去游戏里测试，散热设计的不同，调度优化的不同便会产生巨大的差距。
很早之前我也对手里的电子产品进行测试，当时用的是GameBench，不过经常出问题，正版的价格更是无法接受。第二个使用的软件是快否，虽然偶尔会出现一些bug，但是使用体验还是很不错的。不过因为这软件最后一次更新时间是2019年6月，emmm，基本是凉凉了。
去年的时候，把手里的米9换成了米10，因为听说865的性能与功耗都平衡的很好，便产生了测试的想法。这一款由腾讯旗下WeTest开发的软件Perfdog吸引了我。支持Windows，Mac OS X两个PC平台，可以对安卓和iOS设备进行测试。
二. 软件测试环境
小米10 12G RAM MIUI12.5 21.3.12 官方包
iPad 2020 第八代 A12 iPad OS 14
Windows10 20H2
三. 软件基本安装操作
在Perfdog的官网下载对应平台的软件压缩包后，将压缩包解压到电脑的目录中。
在目录找到Perfdog.exe可执行文件，打开后显示登陆界面，这里可以注册账号或使用QQ扫码登陆。
登录界面登录后便会进入到软件的UI界面
软件UI此时便可以将你的测试设备与电脑进行链接。初始化之后，在左侧的两个选项中选择测试方式（无线or有线 无线可以测试电池相关内容，有线可以同步显示并记录手机画面）和测试应用（支持应用名称搜索）
选择模式和设备（Windows平台可以多开Perfdog并同时对多部设备测试）
右下角的加号是添加和减少测试项目。勾选左边的对号便是对此项目进行测试，点击右边的方框选择是否在软件中显示该项目的数据。
安卓设备与iOS设备的测试项目稍有出入
安卓设备
iOS设备选择好测试应用，调整好测试项目，拿起你的设备，准备开始吧。
3.1 软件数据解释与详细使用步骤
建议有能力的朋友前往官网去详细了解测试项目的具体作用。以下内容是我个人的解读，可能会有一些不准确的地方，还请多多指教。
3.2 概览
基本数据性能基本指标
- 平均帧率 - Avg(FPS)
这一个数据对应的是整个测试过程的平均帧率，可以粗略的反应游戏的流畅程度。 - 卡顿次数/每10分钟 - Jank(/10min)
- 严重卡顿次数/每10分钟 - BigJank(/10min)
这里放出perfdog官方给出的计算思路和计算方式
3.2.1 PerfDog Jank 计算思路：
考虑视觉惯性，假设以前三帧的平均帧耗时为参考，作为vsync时间间隔，连续两次vsync没有新渲染画面刷新，则认为是一次潜在卡顿，也就是说下一帧耗时大于前三帧平均帧耗时2倍，则认为一次潜在卡顿。同时单帧耗时满足大于两倍电影帧耗时1000ms/24x2(由于人眼低于24帧才能辨别画面不连续性)，则认为是一次真正卡顿。同时若单帧耗时大于3倍电影帧耗时，则认为是一次严重卡顿。
3.2.2 PerfDog Jank计算方法：
同时满足两条件，则认为是一次卡顿Jank.
①Display FrameTime>前三帧平均耗时2倍。
②Display FrameTime>两帧电影帧耗时 (1000ms/24x2≈83.33ms)。
同时满足两条件，则认为是一次严重卡顿BigJank.
①Display FrameTime >前三帧平均耗时2倍。
②Display FrameTime >三帧电影帧耗时(1000ms/24x3=125ms)。
其他内容
- 未规范化应用CPU利用率 - Avg(AppCPU)[%]
这里未规范化CPU利用率的计算方式 = CPU执行时间/CPU总时间。如果使用这一项利用率计算APP的性能消耗，会出现在低频运行时和高频运行时CPU利用率相同的情况。
所以Perfdog官方建议使用规范化CPU利用率。 - CPU平均温度 - Avg(CTemp)[°C]
- 规范化应用CPU利用率 - Avg(AppCPU)[%]Normalized
这种CPU利用率的计算方法将CPU的频率考虑进去。
CPU Usage(Normalized)= (CPU执行时间/CPU总时间) * (当前时刻所有CPU频率之和/所有CPU频率最大值之和)
这种计算方法可以更真实的反映出APP的性能消耗。 - 最大内存占用 - Peak(Memory)[MB]
- 平均上传速度 - Avg(Send)[KB/s]
- 平均下载速度 - Avg(Recv)[KB/s]
- 平均功耗 - Avg(Power)[mW]
3.3 FPS
FPS测试数据
帧率图表
Frame Time测试项目解释
平均帧率 - Avg(FPS)
这一个数据对应的是整个测试过程的平均帧率，可以粗略的反应游戏的流畅程度帧率方差 - Var(FPS)
这一个数据反映的是帧率的波动大小大于等于某一帧率的测试数据百分比 - FPS>=30[%] FPS>=45[%]
这一数据显示可以修改，在右下角，可以看数据的大致分布降帧次数 - Drop(FPS)[/h]
平均每小时两个相邻的FPS点相差大于8帧的次数，反映的是画面的流畅程度卡顿次数/每10分钟 - Jank(/10min)
严重卡顿次数/每10分钟 - BigJank(/10min)
卡顿率 - Stutter[%]
计算方式 卡顿率 = 卡顿时长 / 总时长平均单帧渲染时间 - Avg(FTime)[ms]
这一个数据可以结合第三张图 Frame Time分析
如果Frame Time时长在某一个点很大幅度超过平均单帧渲染时间，那么大概率是一次卡顿单帧渲染时间超过100ms - FTime>=100ms[%]
单帧渲染时间过长，很有可能导致屏幕没有内容可以刷新，所以画面不动，即为卡顿增量耗时 - Delta(FTime)>100ms[/h]
3.4 CPU
CPU测试数据
CPU总体使用率
CPU核心使用率
CPU时钟频率
CPU温度测试项目解释
- 未规范化应用CPU利用率 - Avg(AppCPU)[%]
这里未规范化CPU利用率的计算方式 = CPU执行时间/CPU总时间。如果使用这一项利用率计算APP的性能消耗，会出现在低频运行时和高频运行时CPU利用率相同的情况。
所以Perfdog官方建议使用规范化CPU利用率。
未规范化应用CPU利用率小于等于50%/70% - AppCPU<=50%[%] AppCPU<=70%[%]
未规范化总的CPU利用率 - Avg(TotalCPU)[%]
未规范化总的CPU利用率小于等于50%/70% - TotalCPU<=50%[%] TotalCPU<=70%[%]
CPU平均温度 - Avg(CTemp)[°C]
下面一排都是规范化的CPU指标，不多赘述CPU时钟频率 - CPU Clock
反映的是当前时间CPU各个核心的频率
3.5 Memory
这部分对于性能测试的参考性不是很高。
这里Perfdog提醒：在极限测试情况下，例如开启游戏超高帧率，建议不要勾选收集Memory Usage和Memory Detail，因为部分机型会有性能损耗。
内存测试数据
内存使用率3.6 GPU
GPU测试数据
GPU使用率测试项目解释
平均GPU利用率 - Avg(GUsage)[%]
反映的是应用是否可以充分利用GPU性能平均CPU时钟频率 - Avg(GClock)[MHz]
反映的是应用的负载压力
3.7 Network
这一部分对于非实时对战游戏参考性不是很高。测试王者荣耀等对网络要求较高的游戏可以进行关注。
网络测试数据
网络收发数据3.8 Battery
电池测试数据
电池测试图表测试项目解释
平均功耗 - Avg(Power)[mW]
在一定程度上反映了当前手机的功耗耗电量 - Sum(Battery)[mWh]
手机在运行测试期间所消耗的电量平均电压 - Avg(Voltage)[mV]
平均电流 - Avg(Current)[mA]
3.9 Energy Usage
能耗数据监控应用使用的能耗情况，可以监控CPU，GPU，网络模块，定位模块等等
3.10 需要关注的数据
对于芯片的性能测试，我认为主要应该关注的数据项目为
平均帧率 - Avg(FPS)
反映的是设备的游戏运行稳定性，越接近设定的游戏帧率越好。
帧率方差 - Var(FPS)
反映的是设备掉帧的严重程度，越小越好。
降帧次数 - Drop(FPS)[/h]
反映的是设备的掉帧次数（掉帧次数不等于卡顿次数），越少越好。
卡顿次数/每10分钟 - Jank(/10min)
反映的是人所能感知的小卡顿次数，越少越好。
严重卡顿次数/每10分钟 - BigJank(/10min)
反映的是人所能感知的严重卡顿次数，越少越好。
平均单帧渲染时间 - Avg(FTime)[ms]
反映的是设备对画面单一帧的渲染平均时间，若某一时刻对画面渲染的时间远远超过平均值，说明此时屏幕内容没有刷新，会觉得明显卡顿，单帧渲染时间越贴近平均值越好。
规范化的应用CPU利用率 - Avg(AppCPU)[%]Normalized
反映的是排除其他影响因素后应用对于CPU性能的消耗。
CPU平均温度 - Avg(CTemp)[°C]
反映的是应用长时间运行使CPU升高的温度，作为温控降频的参考数据。
CPU时钟频率 - CPU Clock
反映的是应用运行时CPU的调度情况，作为卡顿分析和功耗分析的参考数据。
平均GPU利用率 - Avg(GUsage)[%]
反映的是应用对于GPU的使用情况。
平均CPU时钟频率 - Avg(GClock)[MHz]
反映的是应用运行时GPU的调度情况，作为卡顿分析和功耗分析的参考数据。
平均功耗 - Avg(Power)[mW]
反映的是应用运行时的平均功耗，高中低负载在功耗这一测试项目差距较大，例如骁龙888在高负载可以跑到11w的功耗，在低负载只有4w，续航和发热因此不同。
四. 云端页面功能介绍
4.1 我的数据
存放着测试结束后上传的测试结果，当测试结果较多时可以设置条件筛选数据。
测试记录4.2 任务数据
Perfdog支持创建测试任务，你可以邀请小伙伴一起进行测试，并将数据归档到任务中进行分享。
类似是一个组织4.3 项目
在这里可以针对不同应用数据进行分类显示
筛选条件4.4 具体数据
4.4.1 图表基本操作（数据统计范围修改，图标曲线显示）
图表数据修改4.4.2 图表拖选操作（查看某一时间段的测试数据）
区域数据查看4.4.3 点选查看卡顿具体场景
具体场景分析
卡顿画面4.5 不同测试范例对比
4.5.1 可以添加5条测试用例
用例数据对比4.5.2 对比不同的测试用例
用例数据对比五. 写在最后
PerfDog收费了，贵的离谱，面向的用户是各类数码KOL，我们自己想测试，需要找别的软件了。
听说华为的测试软件不错，有时间看看，写篇文章。
关注上杉九月，关注上杉九月谢谢喵！
