【用研專題】綠野仙蹤測試

UX方法,有一種測試方法叫綠野仙蹤(Wizard of Oz,簡寫WOZ),是不是被這個名字所吸引。這個名字非常的形象,下面看下什麼是綠野仙蹤測試。

綠野仙蹤的故事

📚童話中的綠野仙蹤:令人生畏的奧茲國大法師,實際上幕後是一個普通人在操縱🕹️着機器來唬人的。

綠野仙蹤的UX測試

綠野仙蹤的梗,也就是玩的是藏在簾子後面的人。在用研角度,綠野仙蹤測試方法:在模擬界面中通過人工來操控UI界面的交互。

該方法的起源可以追溯到1975年艾倫·門羅(Allen Munro)和唐·諾曼(Don Norman)在加州大學的一項研究。在這項研究中,他們要求測試者使用一款旅行自助服務機器。測試者不知道的是,機器的幕後是有人在實時響應他們的操作,爲測試者提供的資料有旅行宣傳冊、航空公司指南、行程。這項研究幫助研究人員收集了旅行自助服務機器應提供哪些服務的樣本。

直到1983年,傑夫·凱利(Jeff Kelley)在約翰·霍普金斯大學寫自然語言用戶界面的論文時,首次爲這種方法起名“綠野仙蹤”。在研究中,他用一個真正的簾子將測試者與幕後控制交互系統的人隔開。

在早期研究中,自然語言技術還處於起步階段。在技術成熟前,研究人員喜歡探索用戶的詞彙、行爲、期望。這種研究方法能將一個大型的任務縮小爲一個涉及自然語言的子集的小任務。(自然語言的理解與形成相關問題)

何時使用綠野仙蹤測試

該方法常用於通過低成本的方式測試高成本的實驗,或縮短問題的範圍。

綠野仙蹤測試除了傳統的對話式響應測試外,還可在投入資源搭建一套完整技術方案前,用來評估所要提供功能的效能、探索系統的侷限性、瞭解用戶可能輸入的內容。

不同類型的綠野仙蹤測試

根據提供給用戶的響應內容,可以分爲3類綠野仙蹤測試法。

1、封閉式的

在封閉式的綠野仙蹤測試中,有一系列固定的響應式系統提供給幕後操控人(wizard法師🧙♀️)選擇,其中有各種界面或文本。
這與紙質版原型測試類似。在原型測試中,主持人扮演法師,根據測試人員的反應提供不同的原型頁面。這種測試方式可以通過低成本的方式探索各種可能的方案並選擇最佳的。

🌰該方法能用來發現系統的不足。例如,爲提高聊天機器人的智能度,瞭解在響應用戶查詢內容時是否存在一些侷限或空白時,用現有的機器人的語料庫做模型。wizard需要非常熟悉響應的語料庫,快速選出相應的響應,如果響應錯誤,那就需要擴展語料庫。並就新的擴展後的語料庫開展一輪新的測試。

2、開放式的

在開放式的綠野仙蹤測試中,wizard會及時的、動態的響應用戶的對話。

開放式的測試通常用於發現階段,以瞭解用戶的心理模型、期望和詞彙。wizard需要對產品有豐富的知識,纔可動態響應。由於開放式的測試涉及範圍較廣,因此數據分析時必須從測試期間收集的各種用戶行爲和輸入的內容中提取主題,包括主題、問題、預期之外用戶的期望和路徑。

3、混合的

在混合式的綠野仙蹤中,有一個現有的響應系統,如同封閉式的一般。但是如果語料庫中國呢沒有適當的響應,就會創建一個新的響應。這種方法適用於已有了響應系統,解決陷入死循環的場景。

如何使用綠野仙蹤

1、設計師和開發都要參與。

對綠野仙蹤測試法的吐槽就是技術上的不可行或對綠野仙蹤測試法的誤解,你最終得到的是一堆無用的研究數據。所以如果可以的話,讓設計師和開發也參與到測試的規劃與模擬的後期工作中,這樣可以方便評估到技術的可行性與可用性。如果技術包含現有的AI模型,那就需要考慮基於現有系統的響應方式。

2、定義幕後操縱者(法師🧙♀️)

和其他的用戶測試已有,需要一個引導人和參與測試的人,參與測試人是潛在用戶。此外還需要一個操縱者(法師🧙♀️),他需要非常瞭解並能快速響應提供正確的信息。

需要定義法師與測試者的交互方式,尤其是法師🧙♀️對測試人員不可見的情況。測試中會使用哪些技術?法師🧙♀️通過什麼操控原型?

尤其是封閉式或混合式的綠野仙蹤測試中,可以給法師🧙♀️一個可執行的流程圖,這樣法師面對不同類型的交互,可以快速提供相應的響應。

如果法師是實時動態的響應交互,可以指定一份與產品體驗一致的指南。比如🌰,客服類的感覺應該是專業又富有情感的。預約服務類的感覺應能感受到邀請與提供服務。此外還應該提供詞彙的使用、媒體的類型或在測試中可能需要的其他素材的一些指南。

測試中法師🧙♀️對測試人員是不可見的,測試結束後應當向測試人員說明。和其他用研測試一樣,在測試前預測試,可以發現腳本的問題,同時讓法師🧙♀️熟悉一下流程。

3、測試過程中的一些方法

大多數的用研都是基於發聲思考測試方法的。綠野仙蹤測試中也可以用發聲思考,但如果你的研究是用戶與系統交互時使用但語言,那麼測試過程中用戶的自言自語就可能是雜數據,這時候,你可以用回訪,任務結束時回訪用戶的行爲和語言,詢問他們當時在想的是什麼。

總結

綠野仙蹤的測試方法,能夠將定性研究中用戶的心理模型,轉化爲可改進的系統響應方式。它以低成本的方式提供了寶貴的建議,尤其是在一些高成本的技術實現或產品搭建中。

參考資料:

NNg:The Wizard of Oz Method in UX

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章