前言
學(xué)習(xí)的時間不短了,案例也分享了許多呆馁, 所以~~我打算自己做一次可用性測試了:
本次可用性測試的目標(biāo)為‘到位’,支付寶版本為9.9.8毁兆,網(wǎng)絡(luò)為WiFi環(huán)境浙滤。總共有9人參與測試气堕,均有多年移動app使用經(jīng)驗(yàn)纺腊。測試發(fā)現(xiàn):到位的在系統(tǒng)可用性量表(SUS)上的得分為60.6,在Lewis和Sauro的等級表中評級為D級茎芭,優(yōu)于該數(shù)據(jù)庫中30%左右的產(chǎn)品揖膜。
接下來將是對測試過程的詳細(xì)描述。
測試目標(biāo)
本次測試的目的在于探索‘到位’4個核心流程的可用性梅桩,并在測試結(jié)束后使用SUS量表評估‘到位’整體的可用性基線水平壹粟。
測試流程
測試前(3~5分鐘):a) 了解用戶對‘到位’的認(rèn)知;b) 用戶花3~5分鐘的時間熟悉到位的界面和功能宿百。
任務(wù)測試(25~30分鐘):分為3個任務(wù)情景趁仙,共5個任務(wù),涉及‘到位’的4個核心流程:
背景A:你最近時間比較寬裕垦页,希望找一份家教的兼職來填充空閑的時間并獲取一定的報(bào)酬雀费。
a) 在‘到位’中找到一份合適的家教(去幫忙)
b) 在‘到位’中提供自己的家教工作(發(fā)布服務(wù))
背景B:今晚你的朋友都沒有時間,但你希望能夠有人陪你一起運(yùn)動(跑步痊焊、打球等)盏袄。
c) 在‘到位’中找一個合適的人陪你運(yùn)動(找服務(wù))
d) 在‘到位’中提供你需要找人一起運(yùn)動的訴求(發(fā)布求助)
背景C:你需要馬上把文件帶給你的同學(xué),但你和你的朋友現(xiàn)在都無法脫身薄啥。
e) 在‘到位’中找人幫你把文件從北區(qū)李苑419帶到南區(qū)人文樓505
備注:用戶使用自己的移動手機(jī)完成任務(wù)并在操作時做出聲思考辕羽;在測試中對背景A和B的測試順序進(jìn)行平衡處理;每個任務(wù)完成后退出至支付寶首頁再開始下一個任務(wù)罪佳;通過手機(jī)攝像記錄下用戶執(zhí)行任務(wù)的過程逛漫;任務(wù)e的目的在于測試‘到位’的易學(xué)性。
任務(wù)/測試后(3~5分鐘):用戶在每個任務(wù)后完成SEQ問卷赘艳;在完成全部任務(wù)后酌毡,填寫SUS量表克握。
測試結(jié)果
測試完成度:用戶的測試情況分為完成,放棄和錯誤三種枷踏。后兩者分別是用戶主動放棄繼續(xù)任務(wù)和用戶錯誤地認(rèn)為自己完成了任務(wù)菩暗。需要注意的是,盡管任務(wù)描述中鼓勵用戶在地圖中探索以完成任務(wù)旭蠕,但用戶使用搜索/發(fā)布功能也算作任務(wù)完成停团。各個任務(wù)的完成情況如圖:
任務(wù)難易度:用戶在每次完成任務(wù)后對該任務(wù)的難度進(jìn)行從非常困難到非常容易的7點(diǎn)評分。在第一輪測試3名用戶后發(fā)現(xiàn)用戶容易的評價其完成的任務(wù)為非常容易掏熬,放棄的任務(wù)評估為非常困難佑稠。因此在之后的測試中將‘打開支付寶’這一任務(wù)定為‘非常容易’的標(biāo)準(zhǔn)。在統(tǒng)計(jì)分?jǐn)?shù)時旗芬,也只計(jì)算6名的SEQ分?jǐn)?shù)舌胶。如圖,用戶在執(zhí)行第一個任務(wù)時經(jīng)歷了最高的難度疮丛,隨著測試的進(jìn)行幔嫂,用戶開始熟練到位的使用,任務(wù)的難度開始下降(圖中數(shù)值大代表難度低)誊薄。
可用性分析
1. 分析錄像:在黃色的貼紙上記錄用戶的操作路徑和部分言語履恩;在旁邊通過不同顏色的貼紙記錄觀察到的可用性問題或亮點(diǎn)。
2. 歸類整理: 將不同的可用性問題按照類型進(jìn)行分類和計(jì)數(shù)呢蔫。
可用性亮點(diǎn)
1. 使用路徑 ?到位中可以通過多種操作路徑達(dá)成同一任務(wù)目標(biāo)切心。大多數(shù)用戶的使用路徑為:在地圖界面探索---使用導(dǎo)航欄或搜索進(jìn)行篩選---(無結(jié)果的話)發(fā)布服務(wù)/求助。有一名用戶表示沒有注意到搜索功能咐刨。
2. 功能模式 ?用戶能夠通過地圖直觀判斷距離和地區(qū)昙衅;地圖上的氣球圖標(biāo)能夠吸引用戶的注意力并鼓勵探索;服務(wù)封面有助于用戶對服務(wù)提供者進(jìn)行第一印象的判斷定鸟。
可用性問題
1. 服務(wù)vs. 求助 ?6名用戶在使用中沒有切換找服務(wù)/找?guī)椭妫以诎l(fā)布服務(wù)/求助時存在猶豫。其中1名用戶在表示‘這里沒有人需要家教’而放棄了任務(wù)联予,3名用戶在找家教的任務(wù)中預(yù)約了他人的家教服務(wù)啼县。
2. 交互細(xì)節(jié)
a) 在地圖界面:兩名用戶表示‘只想和女生一起跑步’,但只通過地圖氣球一個個探索沸久;
b) 在發(fā)布服務(wù)表單:8名用戶忽視了導(dǎo)入封面圖片季眷;所有用戶都觸發(fā)了‘描述不可低于50個字’的提示(后期確認(rèn)表示如果不是測試,會填寫更多內(nèi)容)卷胯;界面中中顯示已存在圖片子刮,但提示‘圖片上傳未完成’。
c) 在發(fā)布求助表單:用戶似乎會將發(fā)布服務(wù)時學(xué)習(xí)到的規(guī)則套用在發(fā)布求助的表單中(用戶在描述求助時輸入完整的用戶背景,有一名用戶在求助發(fā)布成功后驚訝于沒有50個字?jǐn)?shù)的限制)挺峡;用戶輸入標(biāo)題的內(nèi)容通常與求助分類相同(找人送文件的任務(wù))葵孤。
3 .命名
a) 主要體現(xiàn)在發(fā)布服務(wù)和發(fā)布求助時二者的分類并不存在對應(yīng)關(guān)系;
b) 發(fā)布服務(wù)時有較多分類橱赠,用戶經(jīng)常跳過‘教育咨詢’尤仍,有兩名用戶選擇了‘專業(yè)咨詢’;
c) 發(fā)布求助時狭姨,用戶對分類的理解存在歧義:在發(fā)布‘找人一起運(yùn)動’的求助時宰啦,有6名用戶選擇了‘其他’,剩下的2名用戶分別選擇了‘尋人’和‘跑腿’饼拍,還有一名用戶在‘尋人’和‘其他’之間猶豫后選擇后者赡模。
4. 其他
a) 地圖vs.列表模式:盡管在初次打開的時候有著蒙版提示,但仍只有1名用戶在任務(wù)前的熟悉產(chǎn)品階段發(fā)現(xiàn)了列表模式惕耕,并在任務(wù)中持續(xù)使用纺裁。
b) 推廣:在測試前所有用戶均不知道‘到位’功能,即使更新了支付寶司澎;
c) 網(wǎng)速制約:地圖氣球的加載速度導(dǎo)致用戶誤判‘這邊沒有人用這個啊’;
d) 新舊版本規(guī)則沖突:測試中有一名用戶使用的舊版本栋豫,所以在添加6張圖片后仍然收到‘請?zhí)砑臃饷鎴D片’的提示挤安;
e) 可信度問題:1名用戶表示不知道能否相信服務(wù)提供者,并表示不知道‘芝麻信用’代表什么丧鸯。
建議:
1. 對找服務(wù)和去幫忙兩個底部TAB做更明確的區(qū)分:用戶通常不會切換底部TAB蛤铜,而是在默認(rèn)的首頁進(jìn)行探索;
2. 搜索和篩選功能的優(yōu)化:盡管地圖氣球鼓勵了用戶在到位中進(jìn)行探索且能夠快速對比距離差異丛肢,但事實(shí)上大多數(shù)任務(wù)是通過搜索或發(fā)布完成围肥。
3. 對表單中項(xiàng)目的填寫限制和必填/非必填項(xiàng)做出明確的標(biāo)識;
4. 為服務(wù)描述提供可選的模板蜂怎,避免過多的輸入操作導(dǎo)致用戶流失穆刻;
5. 對服務(wù)和求助的類型進(jìn)行優(yōu)化,以方便用戶快速選擇分類杠步;
6. 新舊版本間規(guī)則沖突的BUG修復(fù)氢伟。
測試中踩的坑
1. 一定要事前確認(rèn)設(shè)備的版本等信息。我在測試中看到同學(xué)支付寶上有‘到位’就默認(rèn)他更新了幽歼,但事實(shí)上是舊版... 雖然也發(fā)現(xiàn)了新產(chǎn)品的規(guī)則被直接套用在舊版本上這種BUG.. 但源于該用戶的其它測試結(jié)果(SUS,SEQ)我就無法使用... ?在真正的用戶研究中這部分的招募朵锣、測試成本就基本白費(fèi)了...
2. 測試過程中應(yīng)該關(guān)注用戶的操作并適當(dāng)?shù)淖龉P記。在第一輪測試中甸私,我明顯更多關(guān)注了攝像的效果怎么樣... 以至于不得不在后來和他們再把視頻過一遍才知道該問些什么诚些,對于一些明顯需要提問深入了解的部分也沒能夠及時關(guān)注。
3. 計(jì)劃與變化皇型。用戶執(zhí)行任務(wù)的過程中诬烹,總有在項(xiàng)目計(jì)劃時考慮不周的地方助析,在有條件的時候應(yīng)當(dāng)做到及時調(diào)整。我覺得我在SEQ的問題上做的不錯啊~~
4. 為了完成任務(wù)而完成任務(wù):為任務(wù)制定精細(xì)而明確的目標(biāo)應(yīng)當(dāng)能夠避免這種情況椅您。
5. 對任務(wù)目標(biāo)的定義不清晰:由于沒有明確的定義目標(biāo)外冀,對用戶的輸入內(nèi)容沒有嚴(yán)格控制,所以不能將完成時間作為評價指標(biāo)掀泳。
PS.?整個準(zhǔn)備+測試+報(bào)告在晚上或?qū)嵙?xí)的空閑中完成雪隧,時間預(yù)計(jì)在3個工作日左右。
附錄:
測試任務(wù)卡(用戶版):
測試任務(wù)卡(觀察者版):
SUS量表: