2013年9月17日 星期二

OTES收案結果快報

收案人數:20人
可計算施測者間信度之人數:18人

今天剛把結果輸入excel,就好奇地分析了治療師與實習生評分的差異。
實習生的平均評分比治療師高約1.6分,
若將差異以絕對值計算,則差8分。
實習生與治療師的評估總分之相關性僅有0.32。
就目前的結果看來,施測者間信度似乎不太理想。

逐題的weighted kappa和總分的ICC將於明日補上,再探討可能造成施測者間信度不佳的原因。

1 則留言:

  1. looks interesting.
    but I don't think it's a good idea to analyze the data at the current stage.
    1. too early to find a decisive (meaningful) result
    2. it will give you nothing but (subjective) bias
    3. you cannot do anything on the raters at this stage. or you'll interrupt the current process of data collection
    so please leave the data....
    do something else

    回覆刪除