@作者 彭海波 轉(zhuǎn)載請(qǐng)注明出處
前言
啟動(dòng)時(shí)間和響應(yīng)時(shí)間是App帶給用戶的最直觀的性能體驗(yàn)抽减。因此，無論是何種類型的App橄碾，我們都不能忽視響應(yīng)時(shí)間的測(cè)試卵沉。本文結(jié)合Monkeyrunner和Appium自動(dòng)化工具法牲，研究了幾種響應(yīng)時(shí)間的測(cè)試方案。
測(cè)試場(chǎng)景分析
我們通常所說的App卡拒垃、慢通常就是由于啟動(dòng)時(shí)間或者頁(yè)面響應(yīng)時(shí)間過長(zhǎng)導(dǎo)致的。我們從這兩個(gè)方面戈毒，結(jié)合實(shí)際的用戶場(chǎng)景横堡，給出了幾種常用的測(cè)試場(chǎng)景。
| 測(cè)試場(chǎng)景 | 說明 |
|---|---|
| App首次啟動(dòng)時(shí)間 | 從App啟動(dòng)到出現(xiàn)第一個(gè)可操作的頁(yè)面的時(shí)間間隔 |
| App非首次啟動(dòng)的時(shí)間 | 同上 |
| App啟動(dòng)到首頁(yè)加載出來的時(shí)間 | 從App啟動(dòng)到首頁(yè)完全加載出來的時(shí)間間隔 |
| 無網(wǎng)絡(luò)請(qǐng)求的頁(yè)面響應(yīng)時(shí)間 | 一般指從發(fā)起跳轉(zhuǎn)命贴，到頁(yè)面完全加載出來的時(shí)間間隔 |
| 有網(wǎng)絡(luò)請(qǐng)求的頁(yè)面響應(yīng)時(shí)間 | 同上 |
這些測(cè)試場(chǎng)景胸蛛，目前業(yè)內(nèi)也沒有成熟的測(cè)試方法。我們傳統(tǒng)的測(cè)試方法是掐秒表或者在代碼里面打日志葬项。但這樣誤差大，操作成本高零蓉，非常有必要改進(jìn)穷缤。下面我們就來討論一下我們的改進(jìn)思路。
測(cè)試方案研究
對(duì)于測(cè)試方法的衡量章喉，通常從兩個(gè)維度：準(zhǔn)確性和效率。而帶來這兩方面提升的方法一般是通過自動(dòng)化的手段來進(jìn)行秸脱。對(duì)于啟動(dòng)時(shí)間和響應(yīng)時(shí)間的測(cè)試，我們只做到了半自動(dòng)化咐蝇，但已經(jīng)從很大程度上提高了準(zhǔn)確度和效率巷查。
一、啟動(dòng)時(shí)間的測(cè)試（方案一）
方案背景：每個(gè)Activity的狀態(tài)是由它在Activity棧(是一個(gè)后進(jìn)先出LIFO岛请，包含所有正在運(yùn)行Activity的隊(duì)列)中的位置決定的。當(dāng)一個(gè)新的Activity啟動(dòng)時(shí)盅称，當(dāng)前的活動(dòng)的Activity將會(huì)移到Activity棧的頂部后室。
實(shí)現(xiàn)思路：一般app的啟動(dòng)頁(yè)面與首頁(yè)都不是同一個(gè)activity，當(dāng)啟動(dòng)結(jié)束的時(shí)候逞盆，啟動(dòng)activity都會(huì)被移除棧頂松申。因此，我們可以通過adb命令dump出當(dāng)前的棧頂activity贸桶，然后分析棧頂activity是否是啟動(dòng)activity來判斷是否app是否啟動(dòng)完成。
環(huán)境依賴：
- Android SDK platform-tools
- Android SDK tools
- Python運(yùn)行環(huán)境
參考代碼：
#!/usr/bin/python
# -*- coding: utf-8 -*-
import os,sys
import random,time
from com.android.monkeyrunner import MonkeyRunner,MonkeyDevice
import thread
def getlaunchtime(startActivity):
#獲取App包名和啟動(dòng)activity
#cmd = './tools/aapt %s | grep package' % apkpath
#pkginfo = output.split("name=/'")[1].split("/' ")[0]
#print pkginfo
#等待主機(jī)與android設(shè)備連接
device = MonkeyRunner.waitForConnection()
MonkeyRunner.sleep(1)
#殺掉待測(cè)程序，通常用于排除干擾
cmd = 'am force-stop %s' % startActivity.split('/')[0]
device.shell(cmd)
running = True
starttime = time.time()
#print starttime
endtime = time.time()
#device.startActivity(component='com.pafinancialtech.shundebank/com.pingan.fstandard.activity.SplashActivity')
device.startActivity(component=startActivity)
#print out
while running:
out = device.shell('dumpsys activity activities | grep mFocusedActivity')
#print out
if (out.find("SplashActivity") == -1):
running = False
endtime = time.time()
#print endtime
print "App launch time is : %s" %(endtime-starttime)
if __name__ == "__main__":
getlaunchtime(sys.argv[1])
二水醋、啟動(dòng)時(shí)間的測(cè)試（方案二）
方案背景：Monkeyrunner提供一個(gè)圖片相似度對(duì)比分析的接口，可以按規(guī)定的相似度比較兩張圖片蝇恶，如果相似則返回true惶桐。
實(shí)現(xiàn)思路：截取一張App啟動(dòng)后首頁(yè)的屏幕截圖潘懊，作為對(duì)比標(biāo)準(zhǔn)贿衍，然后從App啟動(dòng)開始，一直截圖释树，同時(shí)與標(biāo)準(zhǔn)圖片進(jìn)行比較擎淤，如果達(dá)到相似度，則表示啟動(dòng)成功揉燃，記錄時(shí)間差作為啟動(dòng)時(shí)間炊汤。
環(huán)境依賴：
- Android SDK platform-tools
- Android SDK tools
- Python運(yùn)行環(huán)境
參考代碼：
#!/usr/bin/python
# -*- coding: utf-8 -*-
import sys
import random,time
from com.android.monkeyrunner import MonkeyRunner,MonkeyDevice,MonkeyImage
def getlaunchtime(screenshot,startActivity):
#等待主機(jī)與android設(shè)備連接
device = MonkeyRunner.waitForConnection()
#獲取初始頁(yè)面截圖弊攘，作為對(duì)比標(biāo)準(zhǔn)
result = MonkeyRunner.loadImageFromFile(screenshot)
#殺掉待測(cè)程序，通常用于排除干擾
device.shell('am force-stop %s' % startActivity.split('/')[0])
#啟動(dòng)待測(cè)程序的主activity
device.startActivity(component=startActivity)
#等待app啟動(dòng)完成
#MonkeyRunner.sleep(15)
starttime=time.time()
while 1:
current=time.time()
mainPageImage=device.takeSnapshot()
#print time.time()-current
if(result.sameAs(mainPageImage,0.6)):
launchtime=current-starttime
print launchtime
break
if __name__ == "__main__":
getlaunchtime(sys.argv[1],sys.argv[2])
三迈倍、頁(yè)面響應(yīng)時(shí)間的測(cè)試
方案背景：
Appium執(zhí)行自動(dòng)化測(cè)試的時(shí)候捣域，一般先定位頁(yè)面元素，然后再執(zhí)行操作迹鹅。因此贞言，我們可以通過判斷頁(yè)面的某個(gè)元素（一般是布局或者標(biāo)志性的元素）是否存在來判斷頁(yè)面是否加載完成。記錄這其中的時(shí)間差弟蚀，就可以得到頁(yè)面響應(yīng)時(shí)間酗失。
實(shí)現(xiàn)思路：
我們?cè)谝涗涰?yè)面響應(yīng)時(shí)間的測(cè)試步驟后插入一個(gè)步驟，用于判斷某個(gè)頁(yè)面元素是否存在级零。然后點(diǎn)擊某個(gè)切換頁(yè)面的操作步驟的時(shí)間作為開始時(shí)間，通過Appium本身的元素查找功能鉴嗤，一直查找到元素，查找成功設(shè)置結(jié)束時(shí)間兔簇。
依賴工具：
- 平安云測(cè)試平臺(tái)-金融一賬通一站式測(cè)試服務(wù)平臺(tái)
MA網(wǎng)絡(luò)訪問地址
內(nèi)網(wǎng)訪問地址
測(cè)試結(jié)果示例：
如下圖所示硬耍，計(jì)算出來的各個(gè)頁(yè)面的響應(yīng)時(shí)間如下：
總結(jié)
第一種測(cè)試方案是針對(duì)App啟動(dòng)時(shí)間的測(cè)試经柴；第二個(gè)方案是針對(duì)App啟動(dòng)到首頁(yè)加載的測(cè)試；同時(shí)也可擴(kuò)展于頁(yè)面響應(yīng)時(shí)間的測(cè)試坯认；第三鐘方案主要用于頁(yè)面響應(yīng)時(shí)間的測(cè)試。另外陋气，以上測(cè)試方案主要是針對(duì)啟動(dòng)時(shí)間和響應(yīng)時(shí)間自動(dòng)化測(cè)試的一種嘗試引润，由于工具本身的一些耗時(shí)，計(jì)算可能會(huì)有一些誤差淳附。本解決方案只是作者的一個(gè)初步嘗試奴曙，作為拋磚引玉，希望大家有更好的思路拋出來一起研究缆毁。
