運用Gorilla與Prolific進行線上實驗的簡單示範

可獲得啓動點數的Gorilla註冊網址

可獲得啓動資金的Prolific註冊網址

這三年與荷蘭學者Bjorn de Korning 與 Rolf Zwaan 合作的註冊研究專案終於被Experimental Psychology正式接受。這項專案達成了幾件個人學術創舉,其中之一是透過網路收集資料的線上實驗。我們的發表報告採用透明的研究操作,即公開研究材料、原始資料、以及統計腳本。這項專案運用線上實驗平台Gorilla設計研究材料及執行程序,以及透過行為研究協作平台Prolific等途徑招募參與者。運用線上平台進行實驗研究,對於所屬機構較難獲得大量樣本的研究者,是從事基礎研究課題的可行途徑。為了讓有興趣的朋友能快速了解,我錄製七段公開示範影片,並在這個網誌介紹相關資訊。

  1. 註冊Gorrila平台

Gorrila是2016年由Cauldron公司推出的雲端產品,因為創辦人有實驗心理學研究背景,Gorrila的開發以服務行為科學研究者的需求為主,除了基本的多媒體呈現及按鍵反應時間紀錄,目前也提供語音紀錄與眼動軌跡紀錄等套件,讓研究者能將在傳統實驗室進行的實驗,讓參與者透過網路在熟悉的生活空間貢獻資料。

註冊Gorrila不需付費,因為這家公司的收費來自使用平台的研究者執行線上實驗的點數費。為了鼓勵研究者多加運用,推出呼朋引伴的點數回饋。有興趣使用的讀者可使用可獲得啓動點數的Gorilla註冊網址,在學校就學或服務的朋友請以機構電子郵件註冊,購買點數的費用有折扣。註冊成功後可參考影片自行瀏覽。

  1. 專案元素

使用者只要依計畫流程將線上測驗(Questionnaires)線上作業(Tasks)串連為實驗(Experiments),包裹在專案(Project)之人內。三項元素都有專屬編輯器,除了直接運用Gorilla提供的元件設計需要的測驗、作業及實驗,使用者可運用javascript設計需要的實驗元件。一件專案可包含複數元素,只有實驗是可正式上線收集資料的元素。

註冊使用者能協同合作編輯一件專案,創建專案的使用者只要透過Settings -> Collaborate -> 加入註冊使用者的e-mail。專案也能建立複本,只要運用Settings -> Clone。

  1. 線上測驗創建與測試示範

使用者除了運用編輯器自行建立與測試線上測驗,也可以由示範資源庫(Samples)取得官方範本,或由開放材料庫(Open Materials)取得其他使用者公開的測驗腳本。

  1. 線上作業程序設計與材料準備示範

使用者除了運用編輯器自行建立與測試線上作業及編輯實驗素材,也可以由示範資源庫(Samples)取得官方範本及素材,或由開放材料庫(Open Materials)取得其他使用者公開的資源。

  1. 實驗流程構成示範

Gorilla實驗流程編輯器是圖像互動介面,使用者可自由調整作業與測驗的執行順序,並可加入流程控制元件實行隨機分派。如果官方元件未提供符合計畫需要的流程控制,使用者可撰寫javascript腳本。使用流程控制元件除了參考官方範例,也可從開放材料庫(Open Materials)取得合適的流程。

一件專案可依計畫設計多套實驗流程,並能測試流程執行以及收集的資料結果。Gorilla的資料以試算表格式輸出,我建議採用CSB匯出,以利分析的可重製性。

  1. 實驗上線管理

Gorilla提供多種實驗上線方式,任何上線方式收集一次完整資料,就要消耗一個點數(token)。如果使用者希望收集有代表性的樣本,建議在有過濾參與者條件的第三方平台上線。

  1. Prolific註冊與建立專案

接續前一點,有過濾參與者條件的第三方平台最成功的是英語系國家的MTurk與Prolific,這次是透過Prolific收集英語參與者資料。這段影片示範如何在Prolific上線收集資料,也期望拋轉引玉,尋找有膽識的朋友們創建功能類似,以中文人口為主的第三方平台。Prolific註冊免費,按成功樣本收費。與Gorilla一樣要事先儲值,有興趣註冊找參與者的朋友,可透過可獲得啓動資金的Prolific註冊網址,註冊帳號獲得第一桶金。

Avatar
陳紹慶
副教授

My research interests include language processing and embodied cognition.

comments powered by Disqus

相關