2011年4月30日 星期六

IRT的問題解答

以下為記錄業太上課的講解與大家討論的結果。

Q1.Winsteps將個案分為EXTREME 和 NON-EXTREME的目的為何? (報表有分別呈現兩種分法的結果)
Ans.由於部分軟體在計算得到量表最高分或最低分的個案的各項估計值時會有問題,因此Winsteps將個案分成兩群,方便使用者操作。

Q2.題目必須同時具備「符合適合度指標與主成分分析結果無主要因素」兩個條件,才能算是具有單一面向的特性嗎?如果差一點點,是否有其他強韌性檢驗(robust),確保單面向模式成立?
Ans.適合度與殘差主成分分析皆是單一面向性的特質,但兩項指標有時未必一致。一般來說,如果適合度指標是overfit(<0.6),而不是misfit(>1.4),就可以考慮保留。殘差主成分分析的部分,則應先看整體量表分數的可解釋變異量的大小。若可解釋變異量很高(例如>80%),則可以不用在意剩下的殘差當中還有一主要成分,因為此時殘差中的25%解釋變異量,只佔整體變異量中的5%,影響並不大。
總之,單一面向性是一個「漸進」的過程,沒有斷然的切截點,只能說比較可能是(或比較有信心宣稱它是)單一面向。


Q3.請問就目前的資料,要如何判斷有無item dependency 與DIF?如果能夠判斷,又要如何解決這些問題?
Ans.item dependency可由residual 檔案中,各題的殘差間相關判斷。若各題的殘差間相關有低度以上相關,表示題目可能有item dependency。
DIF則是將個案分群後,分析其能力與通過率,看不同組中,能力相同的個案在通過某一題的機率是否明顯不同。要篩檢是否有DIF的方法包括logistic regression, Rasch tree等。
如果題目有item dependency 與DIF,則需斟酌刪除,使題目能夠符合模式的假設。

4.SF-36的結果跑出來,發現有幾題的step為0(剛好是同一個面向的題目)。請問要怎麼解釋這個數據呢?(原始資料中,並不是所有人都選同樣的答案)
Ans.由於這幾題剛好是兩點計分,因此只有1 step,PCM算出的step 就會自動把它列為整體難度,而不將step呈現在step file中。必須開啟item file,由 item measure的難度來看這幾題的step。

沒有留言:

張貼留言