用研的目的是為了獲得准確的數據來指導或者解決我們在實際工作中出現的問題。為了達到這個目的，我們不妨借鑒一些心理學研究的方法來改進我們的研究設計，讓我們的研究更加科學、准確、可信。心理學的實驗設計分為兩種，一種是真實驗設計，一種是准實驗設計。當然，真實驗設計和准實驗設計這兩個名字是相對而言的，也就是說准實驗設計的控制條件沒有真實驗設計那麼嚴格。
心理學實驗室研究中一個很重要的部分是研究人的心理過程，為了更好的研究心理過程，一個心理學實驗的要盡量做到研究任務的物理屬性盡量相同，而結果的不同僅僅是由於執行了不同的心理過程才產生的。例如下圖的實驗流程，被試在不同的實驗試次中分布執行兩個不同的任務，判斷目標圖片的語義（如山峰）或結構（開放性，閉合性，溫度高低等）。
實驗結果的不同完全是由於執行不同的任務所造成的，也就是說這兩個不同的任務卷入的心理過程的差異造成了結果的差異。當然一個精密的心理學實驗不會僅僅是這麼簡單，我們單拿出一點來舉個例子方便大家理解。
圖1 一個心理學實驗流程示意圖
但是在我們的現實工作中，我們需要的研究設計應該是恰恰相反的，即保證用戶執行的是相同的心理過程，結果的不同是由於物理屬性的不同而引起的。例如，在交互設計沒變的基礎上的網站改版所引起的點擊量差異等，就屬於這類。
1.隨機化
實驗研究中非常重要的一點就是隨機化，包括被試樣本隨機化，刺激試次隨機化等。我們的研究對象是人，也沒有兩個人是完全一樣的，所以為了平衡實驗組間的條件，我們盡量的采取隨機化原則，來避免因為個體差異對研究結果帶來的影響，但是這個原則不適用於對不同用戶群體的差異性研究（請參考隨機區組實驗設計）；實驗試次隨機化是為了消除定式對研究結果產生的影響。心理學實驗最理想的結果是任務試次完全隨機，實驗被試完全隨機。但是這種情況只能無限的接近，所以如果我們的研究條件不能達到隨機化，那就盡量匹配各個任務組和被試組的條件。
2.控制組
或者叫做對照組，做基線、做比較、結果做運算，好用又方便。
圖2 加減乘除
3.增加前後測而不是簡單的事後比較
說到結果做運算，就不得不提一下前測和後測，比僅僅只做事後比較好處多，實驗組和控制組後測成績分別減去各自前測成績，得到的結果可以消除一定的歷史和成熟的作用，使得到的結果更准確。好處就是原來顯著的可能不顯著了，原來顯著的可能顯著了，我可沒教你作弊，我只是說這樣得到的結果可能更准確。
4.迫選法
圖3 A、B、C、D…K，選一個你覺得好的方案
記得我參觀過的一項研究，研究者要被試在林林總總不下10個設計方案中選出一個被試最喜歡的，結果怎麼樣？用戶完全選不過來了，常常是看過了前面的，忘記後面的。這個時候引入迫選法比較適用。每次呈現2個方案，讓用戶案選出一個最喜歡的，然後繼續和其他方案比較。
5.重視預實驗，研究者不要想當然
上一個例子裡，研究者給被試看10幾個方案，讓被試全看一遍，再做出的選擇，其實這樣得到的結果並不是研究想要的結果。因為這樣做出的選擇只是這些方案中用戶比較偏愛的，而不是用戶心目中真正喜歡的產品，相當於矬子裡拔大個兒一樣。所以在正式研究之前，研究者不妨先做幾個預實驗，很多時候，研究設計中存在的問題就可以在這個階段中暴露出來的。研究者不要想當然的認為自己研究經驗豐富，實驗設計嚴密，就忽略了實驗所必備的一些限制條件，比如樣本數量之類，要時刻謹記，小樣本雖然不一定不准確，但是帶來的風險也高，所以我建議研究的樣本數量一定要足夠多。
6.慎用統計方法
這個問題很難一句兩句說清，不過圖表總是比數字更容易理解，簡單的統計方法能說明的問題，就不要選擇復雜的統計方法來做，明確每種統計方法的適用條件。想起過去看過的一句話：Statistics never lie， but liars use statistics. 很說明問題。接下來我會寫一些結合具體工作實例的文章，另外推薦給大家一本統計學入門讀物：機械工業出版社出版的《統計學原理學習指南與習題集》，邊學邊做；再推薦果殼網的一篇文章《一秒鐘看穿統計陷阱》，愛科學，愛生活！
圖4 統計學原理學習指南與習題集