OTK測驗的評分者只有我一人,為避免因為知道個案組別而評分不公,我採取以下作法。
簡答題:
步驟一、匿名、將個案以亂數編號之後排序
將所有作答結果輸入excel,請另一位未參與研究也不知道分組的人將編號隱藏並且以亂數排列。再將檔案寄給我。
因此,我並不知道某一列的分數屬於那一組,也不知道是前測或後測的結果。
步驟二、同一題目一起評分
評分的時候統一改每個人的第某題,再改每個人的下一題。
如此,可避免對同一位個案的前後作答內容有印象分數。
選擇題:
在Excel輸入個案的作答選項,再於評分欄寫公式,告訴Excel什麼狀況會得01分、1分或2分。
就可以避免人為評分的誤判或以印象評分。
公式的範例如下:
=IF(DE50="ABDE",2,IF(OR(DE50="N",DE50="C"),0,IF(DE50="NN","NN",1)))
這表示DE50這個儲存格的正確答案應該是ABDE。
回答ABDE得2分,回答N(不知道)或C得0分,NN表示這題不需作答故維持原本標記,其餘作答情況給1分。
2分表全對,1分表部分對,0分表全錯。
可找助理協助評分,確認有無 bias
回覆刪除