用研實(shí)操---‘到位’的可用性測試報(bào)告


前言

學(xué)習(xí)的時間不短了,案例也分享了許多呆馁, 所以~~我打算自己做一次可用性測試了:

本次可用性測試的目標(biāo)為‘到位’,支付寶版本為9.9.8毁兆,網(wǎng)絡(luò)為WiFi環(huán)境浙滤。總共有9人參與測試气堕,均有多年移動app使用經(jīng)驗(yàn)纺腊。測試發(fā)現(xiàn):到位的在系統(tǒng)可用性量表(SUS)上的得分為60.6,在Lewis和Sauro的等級表中評級為D級茎芭,優(yōu)于該數(shù)據(jù)庫中30%左右的產(chǎn)品揖膜。

接下來將是對測試過程的詳細(xì)描述。


測試目標(biāo)

本次測試的目的在于探索‘到位’4個核心流程的可用性梅桩,并在測試結(jié)束后使用SUS量表評估‘到位’整體的可用性基線水平壹粟。

測試流程

測試前(3~5分鐘):a) 了解用戶對‘到位’的認(rèn)知;b) 用戶花3~5分鐘的時間熟悉到位的界面和功能宿百。

任務(wù)測試(25~30分鐘):分為3個任務(wù)情景趁仙,共5個任務(wù),涉及‘到位’的4個核心流程:

背景A:你最近時間比較寬裕垦页,希望找一份家教的兼職來填充空閑的時間并獲取一定的報(bào)酬雀费。

a) 在‘到位’中找到一份合適的家教(去幫忙

b) 在‘到位’中提供自己的家教工作(發(fā)布服務(wù)

背景B:今晚你的朋友都沒有時間,但你希望能夠有人陪你一起運(yùn)動(跑步痊焊、打球等)盏袄。

c) 在‘到位’中找一個合適的人陪你運(yùn)動(找服務(wù)

d) 在‘到位’中提供你需要找人一起運(yùn)動的訴求(發(fā)布求助

背景C:你需要馬上把文件帶給你的同學(xué),但你和你的朋友現(xiàn)在都無法脫身薄啥。

e) 在‘到位’中找人幫你把文件從北區(qū)李苑419帶到南區(qū)人文樓505

備注:用戶使用自己的移動手機(jī)完成任務(wù)并在操作時做出聲思考辕羽;在測試中對背景A和B的測試順序進(jìn)行平衡處理;每個任務(wù)完成后退出至支付寶首頁再開始下一個任務(wù)罪佳;通過手機(jī)攝像記錄下用戶執(zhí)行任務(wù)的過程逛漫;任務(wù)e的目的在于測試‘到位’的易學(xué)性。

任務(wù)/測試后(3~5分鐘):用戶在每個任務(wù)后完成SEQ問卷赘艳;在完成全部任務(wù)后酌毡,填寫SUS量表克握。


測試結(jié)果

測試完成度:用戶的測試情況分為完成,放棄和錯誤三種枷踏。后兩者分別是用戶主動放棄繼續(xù)任務(wù)和用戶錯誤地認(rèn)為自己完成了任務(wù)菩暗。需要注意的是,盡管任務(wù)描述中鼓勵用戶在地圖中探索以完成任務(wù)旭蠕,但用戶使用搜索/發(fā)布功能也算作任務(wù)完成停团。各個任務(wù)的完成情況如圖:

任務(wù)難易度:用戶在每次完成任務(wù)后對該任務(wù)的難度進(jìn)行從非常困難到非常容易的7點(diǎn)評分。在第一輪測試3名用戶后發(fā)現(xiàn)用戶容易的評價其完成的任務(wù)為非常容易掏熬,放棄的任務(wù)評估為非常困難佑稠。因此在之后的測試中將‘打開支付寶’這一任務(wù)定為‘非常容易’的標(biāo)準(zhǔn)。在統(tǒng)計(jì)分?jǐn)?shù)時旗芬,也只計(jì)算6名的SEQ分?jǐn)?shù)舌胶。如圖,用戶在執(zhí)行第一個任務(wù)時經(jīng)歷了最高的難度疮丛,隨著測試的進(jìn)行幔嫂,用戶開始熟練到位的使用,任務(wù)的難度開始下降(圖中數(shù)值大代表難度低)誊薄。

可用性分析

1. 分析錄像:在黃色的貼紙上記錄用戶的操作路徑和部分言語履恩;在旁邊通過不同顏色的貼紙記錄觀察到的可用性問題或亮點(diǎn)。

2. 歸類整理: 將不同的可用性問題按照類型進(jìn)行分類和計(jì)數(shù)呢蔫。

可用性亮點(diǎn)

1. 使用路徑 ?到位中可以通過多種操作路徑達(dá)成同一任務(wù)目標(biāo)切心。大多數(shù)用戶的使用路徑為:在地圖界面探索---使用導(dǎo)航欄或搜索進(jìn)行篩選---(無結(jié)果的話)發(fā)布服務(wù)/求助。有一名用戶表示沒有注意到搜索功能咐刨。

2. 功能模式 ?用戶能夠通過地圖直觀判斷距離和地區(qū)昙衅;地圖上的氣球圖標(biāo)能夠吸引用戶的注意力并鼓勵探索;服務(wù)封面有助于用戶對服務(wù)提供者進(jìn)行第一印象的判斷定鸟。

可用性問題

1. 服務(wù)vs. 求助 ?6名用戶在使用中沒有切換找服務(wù)/找?guī)椭妫以诎l(fā)布服務(wù)/求助時存在猶豫。其中1名用戶在表示‘這里沒有人需要家教’而放棄了任務(wù)联予,3名用戶在找家教的任務(wù)中預(yù)約了他人的家教服務(wù)啼县。

2. 交互細(xì)節(jié)

a) 在地圖界面:兩名用戶表示‘只想和女生一起跑步’,但只通過地圖氣球一個個探索沸久;

b) 在發(fā)布服務(wù)表單:8名用戶忽視了導(dǎo)入封面圖片季眷;所有用戶都觸發(fā)了‘描述不可低于50個字’的提示(后期確認(rèn)表示如果不是測試,會填寫更多內(nèi)容)卷胯;界面中中顯示已存在圖片子刮,但提示‘圖片上傳未完成’。

c) 在發(fā)布求助表單:用戶似乎會將發(fā)布服務(wù)時學(xué)習(xí)到的規(guī)則套用在發(fā)布求助的表單中(用戶在描述求助時輸入完整的用戶背景,有一名用戶在求助發(fā)布成功后驚訝于沒有50個字?jǐn)?shù)的限制)挺峡;用戶輸入標(biāo)題的內(nèi)容通常與求助分類相同(找人送文件的任務(wù))葵孤。

3 .命名

a) 主要體現(xiàn)在發(fā)布服務(wù)和發(fā)布求助時二者的分類并不存在對應(yīng)關(guān)系;

b) 發(fā)布服務(wù)時有較多分類橱赠,用戶經(jīng)常跳過‘教育咨詢’尤仍,有兩名用戶選擇了‘專業(yè)咨詢’;

c) 發(fā)布求助時狭姨,用戶對分類的理解存在歧義:在發(fā)布‘找人一起運(yùn)動’的求助時宰啦,有6名用戶選擇了‘其他’,剩下的2名用戶分別選擇了‘尋人’和‘跑腿’饼拍,還有一名用戶在‘尋人’和‘其他’之間猶豫后選擇后者赡模。

4. 其他

a) 地圖vs.列表模式:盡管在初次打開的時候有著蒙版提示,但仍只有1名用戶在任務(wù)前的熟悉產(chǎn)品階段發(fā)現(xiàn)了列表模式惕耕,并在任務(wù)中持續(xù)使用纺裁。

b) 推廣:在測試前所有用戶均不知道‘到位’功能,即使更新了支付寶司澎;

c) 網(wǎng)速制約:地圖氣球的加載速度導(dǎo)致用戶誤判‘這邊沒有人用這個啊’;

d) 新舊版本規(guī)則沖突:測試中有一名用戶使用的舊版本栋豫,所以在添加6張圖片后仍然收到‘請?zhí)砑臃饷鎴D片’的提示挤安;

e) 可信度問題:1名用戶表示不知道能否相信服務(wù)提供者,并表示不知道‘芝麻信用’代表什么丧鸯。


建議:

1. 對找服務(wù)和去幫忙兩個底部TAB做更明確的區(qū)分:用戶通常不會切換底部TAB蛤铜,而是在默認(rèn)的首頁進(jìn)行探索;

2. 搜索和篩選功能的優(yōu)化:盡管地圖氣球鼓勵了用戶在到位中進(jìn)行探索且能夠快速對比距離差異丛肢,但事實(shí)上大多數(shù)任務(wù)是通過搜索或發(fā)布完成围肥。

3. 對表單中項(xiàng)目的填寫限制和必填/非必填項(xiàng)做出明確的標(biāo)識;

4. 為服務(wù)描述提供可選的模板蜂怎,避免過多的輸入操作導(dǎo)致用戶流失穆刻;

5. 對服務(wù)和求助的類型進(jìn)行優(yōu)化,以方便用戶快速選擇分類杠步;

6. 新舊版本間規(guī)則沖突的BUG修復(fù)氢伟。


測試中踩的坑

1. 一定要事前確認(rèn)設(shè)備的版本等信息。我在測試中看到同學(xué)支付寶上有‘到位’就默認(rèn)他更新了幽歼,但事實(shí)上是舊版... 雖然也發(fā)現(xiàn)了新產(chǎn)品的規(guī)則被直接套用在舊版本上這種BUG.. 但源于該用戶的其它測試結(jié)果(SUS,SEQ)我就無法使用... ?在真正的用戶研究中這部分的招募朵锣、測試成本就基本白費(fèi)了...

2. 測試過程中應(yīng)該關(guān)注用戶的操作并適當(dāng)?shù)淖龉P記。在第一輪測試中甸私,我明顯更多關(guān)注了攝像的效果怎么樣... 以至于不得不在后來和他們再把視頻過一遍才知道該問些什么诚些,對于一些明顯需要提問深入了解的部分也沒能夠及時關(guān)注。

3. 計(jì)劃與變化皇型。用戶執(zhí)行任務(wù)的過程中诬烹,總有在項(xiàng)目計(jì)劃時考慮不周的地方助析,在有條件的時候應(yīng)當(dāng)做到及時調(diào)整。我覺得我在SEQ的問題上做的不錯啊~~

4. 為了完成任務(wù)而完成任務(wù):為任務(wù)制定精細(xì)而明確的目標(biāo)應(yīng)當(dāng)能夠避免這種情況椅您。

5. 對任務(wù)目標(biāo)的定義不清晰:由于沒有明確的定義目標(biāo)外冀,對用戶的輸入內(nèi)容沒有嚴(yán)格控制,所以不能將完成時間作為評價指標(biāo)掀泳。

PS.?整個準(zhǔn)備+測試+報(bào)告在晚上或?qū)嵙?xí)的空閑中完成雪隧,時間預(yù)計(jì)在3個工作日左右。

附錄:

測試任務(wù)卡(用戶版):

測試任務(wù)卡(觀察者版):

SUS量表

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末员舵,一起剝皮案震驚了整個濱河市脑沿,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌马僻,老刑警劉巖庄拇,帶你破解...
    沈念sama閱讀 216,544評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異韭邓,居然都是意外死亡措近,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,430評論 3 392
  • 文/潘曉璐 我一進(jìn)店門女淑,熙熙樓的掌柜王于貴愁眉苦臉地迎上來瞭郑,“玉大人,你說我怎么就攤上這事鸭你∏牛” “怎么了?”我有些...
    開封第一講書人閱讀 162,764評論 0 353
  • 文/不壞的土叔 我叫張陵袱巨,是天一觀的道長阁谆。 經(jīng)常有香客問我,道長愉老,這世上最難降的妖魔是什么场绿? 我笑而不...
    開封第一講書人閱讀 58,193評論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮俺夕,結(jié)果婚禮上裳凸,老公的妹妹穿的比我還像新娘。我一直安慰自己劝贸,他們只是感情好姨谷,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,216評論 6 388
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著映九,像睡著了一般梦湘。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,182評論 1 299
  • 那天捌议,我揣著相機(jī)與錄音哼拔,去河邊找鬼。 笑死瓣颅,一個胖子當(dāng)著我的面吹牛倦逐,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播宫补,決...
    沈念sama閱讀 40,063評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼檬姥,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了粉怕?” 一聲冷哼從身側(cè)響起健民,我...
    開封第一講書人閱讀 38,917評論 0 274
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎贫贝,沒想到半個月后秉犹,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,329評論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡稚晚,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,543評論 2 332
  • 正文 我和宋清朗相戀三年崇堵,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片蜈彼。...
    茶點(diǎn)故事閱讀 39,722評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡筑辨,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出幸逆,到底是詐尸還是另有隱情,我是刑警寧澤暮现,帶...
    沈念sama閱讀 35,425評論 5 343
  • 正文 年R本政府宣布还绘,位于F島的核電站,受9級特大地震影響栖袋,放射性物質(zhì)發(fā)生泄漏拍顷。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,019評論 3 326
  • 文/蒙蒙 一塘幅、第九天 我趴在偏房一處隱蔽的房頂上張望昔案。 院中可真熱鬧,春花似錦电媳、人聲如沸踏揣。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,671評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽捞稿。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間娱局,已是汗流浹背彰亥。 一陣腳步聲響...
    開封第一講書人閱讀 32,825評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留衰齐,地道東北人任斋。 一個月前我還...
    沈念sama閱讀 47,729評論 2 368
  • 正文 我出身青樓,卻偏偏與公主長得像耻涛,于是被迫代替她去往敵國和親废酷。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,614評論 2 353

推薦閱讀更多精彩內(nèi)容

  • 概要/前言 上一次測試微信小程序的時候被吐槽測試的APP她們都不知道或者不感興趣犬第,所以在某些人的強(qiáng)烈推薦下這一次選...
    IvanMu閱讀 3,471評論 4 18
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理锦积,服務(wù)發(fā)現(xiàn),斷路器歉嗓,智...
    卡卡羅2017閱讀 134,652評論 18 139
  • 我們在做產(chǎn)品或系統(tǒng)的可用性測試后丰介,都想把結(jié)果更好地傳遞給相關(guān)方。除了定性的研究結(jié)果之外鉴分,還有定量的可用性問卷哮幢,這些...
    小釋界閱讀 15,692評論 1 34
  • 可用性工程閱讀筆記 Nielsen 看這本書和寫下這些筆記總共用了快兩個星期的時間,這段時間事情真的有點(diǎn)多志珍。橙垢。 從...
    Witty_28閱讀 1,965評論 1 12
  • 逼著你往前走的,不是前面微弱的光芒伦糯,而是身后的萬丈深淵 自己幸福柜某,讓更多人幸福,好好活著敛纲,幫助更多人好好活著喂击。
    磐石yy閱讀 160評論 0 0