I.
明確的假說：
A.
整體而言：具備measurement invariance之工具應具備穩定之因素結構、信度與題目難度。
B.
分別而言
1.
GSES在各時間點皆為單因素結構
2.
GSES在各時間點之信度皆相近（差異不超過0.05）
3.
GSES在各時間點之題目位置一致（亦即不同時間點的題目難度與階難度的相關性高）
II. 資料分析方法
A.
GSES之單因素結構驗證
1.
以羅序分析之PCM驗證之，判斷標準如下：
a.
各題之In fit 與out fit MNSQ 皆< 1.4
b.
以PCA確認殘差中的第一因素特徵值< 2
B.
GSES之信度（差異不超過0.05）
1.
以羅序分析所得之person reliability表示
C.
GSES之題目位置之一致程度
1.
整體而言：以羅序分析所得之題目難度估計值進行排序
2.
個別而言：
a.
排序
1.
各題平均題目於各時間點分別排序，並進行Friedman test
2.
各題的各選項的平均難度於三個時間點分別排序
b.
相關
1.
三個時間點的平均題目難度，兩兩分析其皮爾森相關值
2.
三個時間點的各選項平均難度，兩兩分析其皮爾森相關值
Q.若是以PCM分析，看各題的平均難度是否意義不大？
Q.若是以PCM分析，看各題的平均難度是否意義不大？
III. 結果彙整與說明
A.
單因素結構驗證
1.
In
fit & out fit：第一個時間點不需刪題即符合單向度結構之假設。刪除一題（第三題：對我來說，堅持理想和達成目標是輕而易舉的）後，第二個和第三個時間點符合單向度結構。
表一、三個時間點之羅序分析之各題適配值
|
Item
#
|
1 month
|
6months
|
12 months
|
|||
|
|
In fit
|
Out fit
|
In fit
|
Out fit
|
In fit
|
Out fit
|
|
1
|
1.22
|
1.22
|
0.99
|
0.92
|
0.91
|
0.68
|
|
2
|
1.32
|
1.31
|
1.18
|
1.35
|
1.23
|
1.3
|
|
3
|
.
|
.
|
.
|
.
|
.
|
.
|
|
4
|
0.96
|
0.96
|
1.09
|
1.13
|
1.18
|
1.16
|
|
5
|
0.94
|
0.92
|
0.96
|
0.91
|
1.02
|
0.97
|
|
6
|
0.96
|
0.95
|
1.1
|
1.13
|
1.03
|
1.02
|
|
7
|
0.98
|
0.97
|
1.01
|
1.01
|
1.05
|
0.96
|
|
8
|
0.93
|
0.9
|
0.9
|
0.86
|
0.83
|
0.77
|
|
9
|
0.8
|
0.76
|
0.85
|
0.8
|
0.83
|
0.77
|
|
10
|
0.87
|
0.84
|
0.83
|
0.77
|
0.8
|
0.6
|
*第三題在第六個月與第十二個月之適配值不符合標準，因此於所有時間皆刪除此題後重新分析。
2.
PCA：殘差分析的結果顯示殘差的第一因素特徵值皆<2 span="">，符合羅序分析單向度之期待。
表二、三個時間點之殘差分析結果（三個時間點皆刪除第三題）
表二、三個時間點之殘差分析結果（三個時間點皆刪除第三題）
|
|
1 month
|
6months
|
12 months
|
|
Variance
explained by measures
|
59.6%
|
67.9%
|
64.6%
|
|
Unexplned
variance in 1st contrast ( eigen value)
|
1.6
|
1.4
|
1.3
|
B.
信度驗證：三個時間點的信度分別為0.89、0.92、0.91，信度之差異小於0.05，應可視為具備穩定之信度。
C.
題目位置之一致程度
1.
排序：一致程度不佳
a.
各題平均難度於各時間點分別排序：由表三可知各題於不同時間點之難度排序差異頗大，不支持題目位置之一致性。
表三、題平均難度於各時間點之排序（三個時間點皆刪除第三題）
表三、題平均難度於各時間點之排序（三個時間點皆刪除第三題）
|
item #
|
Item difficulty
|
|||||
|
1 month
|
6months
|
12 months
|
||||
|
1
|
-0.07
|
(6)
|
-0.68
|
(1)
|
-0.45
|
(2)
|
|
2
|
0.95
|
(9)
|
0.75
|
(9)
|
0.38
|
(9)
|
|
4
|
0.07
|
(8)
|
-0.02
|
(4)
|
0.13
|
(6)
|
|
5
|
0.02
|
(7)
|
0.08
|
(7)
|
0.35
|
(8)
|
|
6
|
-0.28
|
(2)
|
0.11
|
(8)
|
0.1
|
(5)
|
|
7
|
-0.1
|
(5)
|
0.02
|
(5)
|
0.25
|
(7)
|
|
8
|
-0.15
|
(3)
|
-0.24
|
(2)
|
-0.02
|
(4)
|
|
9
|
-0.31
|
(1)
|
0.07
|
(6)
|
-0.09
|
(3)
|
|
10
|
-0.13
|
(4)
|
-0.09
|
(3)
|
-0.65
|
(1)
|
*括號中之數值為題目難度之排序，數值越大表示題目越難。
*第三題於第6、12個月皆刪除，因此無數據。
*第三題於第6、12個月皆刪除，因此無數據。
b.
各題的各選項的平均難度於三個時間點分別排序：由下圖可知各選項的平均難度約可分成高中低三組。然而，三組的題目難度排序並不相同（或可解釋為：對不同程度的個案而言，題目的難度不同？）。此外，在三個時間點之選項難度排序亦不完全相同。因此此部分結果僅部分支持題目位置之一致性。
圖、各題的各選項的平均難度之比較
2.
相關
a. 三個時間點的平均題目難度，兩兩分析其皮爾森相關值：三個時間點的平均題目難度為中度至高度相關。然而相關係數並未高到支持題目位置一致。（表四）
表四、三個時間點的平均題目難度值之相關
|
Time points
|
Correlation (r)
|
|
1 month &
6months
|
0.67
|
|
1 month & 12 months
|
0.44
|
|
6months & 12 months
|
0.66
|
*註、三個時間點皆刪除第三題
b.
三個時間點的各選項平均難度，兩兩分析其皮爾森相關值：三個時間點的各選項平均難度之相關值為極高度相關。支持題目位置之一致性。（表五）
表五、三個時間點的各選項難度值之相關
|
Time points
|
Correlation (r)
|
|
1 month &
6months
|
0.99
|
|
1 month & 12 months
|
0.99
|
|
6months & 12 months
|
0.99
|
*註、三個時間點皆刪除第三題
IV.
結論：GSES具備穩定之單向度結構與信度。但題目位置之一致性分析結果並不一致，因此此結果只能說明GSES具備measurement invariance的潛力。
沒有留言:
張貼留言