先以單向度IRT進行刪題,後以多向度IRT提升各向度信度值。
單向度IRT刪題標準分為兩類:(1) MNSQ [0.6-1.4] ; (2) MNSQ <1.4 ZSTD[+-2.58]
多向度信度值分析結果(已請業太確認無誤):
(1) MNSQ [0.6-1.4] n=32
| | EAP reliability | |||||||
| Condition | D1 | D2 | D3 | D4 | D5 | D6 | D7 | D8 |
| 1 Step 200 Nodes | 0.867 | 0.900 | 0.870 | 0.899 | 0.936 | 0.923 | 0.914 | 0.928 |
| 1 Step 2000 Nodes | 0.779 | 0.803 | 0.841 | 0.825 | 0.890 | 0.887 | 0.808 | 0.869 |
| 2 Steps 2000 Nodes | 0.831 | 0.812 | 0.855 | 0.831 | 0.865 | 0.849 | 0.799 | 0.849 |
(2) MNSQ <1.4 ZSTD[+-2.58] n=27
| | EAP reliability | |||||||
| Condition | D1 | D2 | D3 | D4 | D5 | D6 | D7 | D8 |
| 1 Step 200 Nodes | 0.830 | 0.895 | 0.842 | 0.828 | 0.904 | 0.890 | 0.913 | 0.862 |
| 1 Step 2000 Nodes | 0.831 | 0.860 | 0.863 | 0.741 | 0.827 | 0.832 | 0.843 | 0.775 |
| 2 Steps 2000 Nodes | 0.817 | 0.836 | 0.863 | 0.767 | 0.844 | 0.849 | 0.842 | 0.789 |
討論
1. 以三種分析方法來看信度值:一階段200節點、一階段2000節點、兩階段2000節點。三種方法所得之向度信度值分配比較:
| | 一階段,200節點 | 一階段,2000節點 | 二階段,2000節點 |
| MNSQ [0.6-1.4] | >0.85, n=8 >0.90, n=5 | >0.75, n=8 >0.80, n=7 >0.85, n=3 | >0.80, n=8 >0.85, n=4 |
| MNSQ<1.4 ZSTD [+-2.58] | >0.80, n=8 >0.85, n=5 >0.90, n=3 | >0.70, n=8 >0.75, n=7 >0.80, n=6 >0.85, n=2 | >0.75, n=8 >0.80, n=6 >0.85, n=2 |
2.一階段,200節點的分析結果最佳;然分析理論上二階段,2000節點為最精準的結果,需思考此兩種分析方法的差異以及數據報告的選擇。
沒有留言:
張貼留言