2019年第一次線上預先註冊工作坊感想

兩年多前我寫下第一篇討論預先註冊註冊報告網誌,當時才剛開始準備第一項註冊報告。今年7/28與Chinese Open Science Network合作,舉辦第一次線上工作坊。透過帶領三位研究者規劃研究計畫的預先註冊,幫助有意願嘗試的研究者開啓第一次經驗,並向旁觀朋友推廣開放研究操作。三位研究者的專案來自發展心理學、社會心理學與認知心理學,計畫目標與規模也互有差異。與三位參與者還有熱心朋友的線上互動經驗,讓我更確信在開場建議的準備三步驟,確實能形成值得信賴的預先註冊計畫:首先先確定最關鍵的研究問題,了解想採取的分析模式,最後盡可能列出有可能導致偽陽性結果的彈性研究操作,才能充分評估研究計畫是適合節制彈性操作的驗證性研究,還是最大化研究內容透明度的探索性研究。我就本次工作坊尚待改進的一些措施,做些檢討與建議。

值得改進的地方

這次開始前除了要求有意願完成預先註冊的參與者繳交報名費,也要求以AsPredicted的格式提出初步計畫書。這些措施確實提高參與者動機,不過因為AsPredicted能說明的篇幅有限,加上我不是完全熟悉所有參與者的研究,作業開始後需要參與者花一些時間說明自已的研究問題與規劃。加上第一次使用分組線上會議功能,我與所有參與人員午休之前幾乎都在習慣這種線上互動模式,一直到中午之後才了解每位參與者的研究問題與想採用的分析策略是什麼。

從三參與者的回饋(此連結為暫時網頁,正式發佈後更新),也證實參與者有接收到我想傳達的理念,但是因為事前準備不足的關係,尚未完全落實在活動成果,是讓我覺得最可惜的地方。在此必須感謝三位參與者,幫肋我與Chinese Open Science Network核心成員獲得寶貴經驗。除了繼續幫助他們完善本身的預先註冊計畫,也希望所有參與人士能更認識開放研究操作。

改進建議

對於下一次不論是線上或現場活動,我們這次採用的模式對所有參與者都有正面幫助,不過主辦方應該有一些更積極的作為。首先是對於參與者提出的計畫,主要講者應該花些時間了解,最好能與每位參與者先做即時溝通,清楚每項研究真正的目標及想採取的資料分析策略。參與者可先準備完整的說明文件或影片,讓旁觀朋友在事前或現場隨時了解,有助眾人融入現場,更能提高主動參與的行為。

這次限於時間安排,彈性研究操作的樣態我只能用簡報約略帶過,也因為大多數作業時間在了解各項研究專案目標,並未帶領每位參與者完整區辨自己的研究計畫可能遇到的狀況。認識彈性研究操作需要親身體悟,才能明白其不良影響。我建議Chinese Open Science Network可以規劃幾次網路廣播,邀請各領域的朋友彼此分享與討論自己或熟人遇到的狀況,讓有意願嘗試預先註冊的朋友,真正了解關心科學知識品質的人士,推廣開放研究操作的宗旨。

Avatar
陳紹慶
副教授

My research interests include language processing and embodied cognition.

comments powered by Disqus

相關