SBE: 劇本為基準的評估法

在設計互動產品的時候, 經常會遇到使用性評估的問題. 尤其是在評估合作式系統 (Collaborative Systems) 的時候, 為了要將科技與社會, 心理, 組織, 文化等層面做 mapping, 評估方法勢必要涉及廣範圍的許多情境因素. 過去常用的評估方法如使用性自我推衍 (usability heuristics), 使用性測試 (usability testing), 實驗室實驗 (e.g. User-Centered Design) 等, 都是較適合用來辨識與分析幾個較微觀的變數, 但是對於瞭解廣範圍的社會情境對系統使用效能的影響, 卻少有幫助.

Penn State University 的一群研究者在去年 CSCW 2004 上發表了一篇 "Situating Evaluation in Scenarios of Use", 提出了劇本為基準的評估法 (SBE; Scenario-Based Evaluation), 一種適用於合作式系統的新的評估方法. 這個方法有點像是引導受測者自己去做問題劇本及理想劇本的快速開發, 因為劇本都會有一些固定構成的要素, 透過將這些要素統整起來, 藉由統計就可以得知系統的使用性問題. 我覺得這是一個很有趣的做法.

其方法大致的過程, 是先用半結構式訪談法 (semi-structured interview), 得到一些具系統使用經驗的使用者的一些關於: 1.角色, 工作目標, 與環境設定, 以及 2.目前系統的使用經驗的劇本描述, 以及 3.使用者提出改善的劇本描述. 之後, 再將劇本依照角色, 工作目標, 工作特性, 障礙等 SBE Framework 所提供的操作項目, 逐一分析出來, 並進行統計. 最後, 就可以可辨識出一些共同的使用性問題, 並且可以獲得共同的使用性建議.

related links:
[ScienceDaily News] Improving Computer-supported Work Through Scenario-based Evaluation