ค่าความเที่ยงตรงของแบบสอบถาม หรือการหาค่า IOC (Index of item objective congruence: IOC) ที่มักพบในการทำแบบสอบถาม สูตรที่มักปรากฎตามตำราเรียน เอกสารงานวิจัย และต่าง ๆ คือสูตรดังต่อนี้
$$IOC = \frac{\sum R}{N}$$
เมื่อ $IOC$ คือดัชนีค่าความเที่ยงตรงของแบบสอบถาม, $\sum R$ คือผลรวมของคะแนนของผู้เชี่ยวชาญ และ $N$ คือจำนวนผู้เชี่ยวชาญทั้งหมด
ค่า IOC จะมีค่าอยู่ระหว่าง 1 ถึง – 1 ข้อคำถามที่มีความตรงตามเนื้อหาจะมีค่า IOC เข้าใกล้ 1 ถ้าข้อใดมีค่า IOC ต่ำกว่า 0.5 ควรจะปรับปรุงข้อคำถามใหม่ให้สอดคล้องกับวัตถุประสงค์ที่ต้องการวัด
เกณฑ์การให้คะแนนผู้ชาญ คือ +1 สำหรับข้อคำถามมีความสอดคล้องกับวัตถุประสงค์, 0 เมื่อไม่แน่ใจว่าข้อคำถามมีความสอดคล้องกับวัตถุประสงค์ และ -1 สำหรับข้อคำถามไม่มีความสอดคล้องกับวัตถุประสงค์
จากสูตรการคำนวณหาค่า IOC ดังกล่าว จะพบว่าเป็นเพียงการหาค่าเฉลี่ยของคะแนนที่ผู้เชี่ยวชาญให้เท่านั้น แล้วเอาค่าที่มากกว่าหรือเท่ากับครึ่งหนึ่ง (0.5)
สูตรการคำนวณหาค่า IOC
สูตรการคำนวณ index of item-objective congruence ที่พัฒนาโดย Rovinelli และ Hambleton (1977) มีสูตรดังนี้ [1]
$$I_{ik} = \frac{(N – 1)\sum\limits_{j=1}^{n} X_{ijk} – \sum\limits_{i=1}^{N} \sum\limits_{j=1}^{n} X_{ijk} + \sum\limits_{j=1}^{n} X_{ijk}}{2(N – 1)n}$$
เมื่อ $I_{ik}$ คือ ค่า IOC ของข้อคำถาม $k$ ในจุดประสงค์ที่ $i$
$N$ คือ จำนวนจุดประสงค์ ($i = 1, 2, …, N$)
$n$ จำนวนผู้เชี่ยวชาญด้านเนื้อหา ($j = 1, 2, …, n$)
$X_{ijk}$ คือ คะแนน (1, 0, –1) ของข้อคำถามที่ k ที่สอดคล้องกับจุดประสงค์ i โดยผู้เชี่ยวชาญ j
Crocker และ Algina (1986 หน้า 221) ได้ปรับสูตรใหม่ให้ดูง่ายขึ้น ปรากฏในหนังสือ Introduction to Classical and Modern Test Theory ดังนี้ [2]
$$I_{ik}=\frac{N}{2N – 2}(\mu_k-\mu)$$
เมื่อ $I_{ik}$ คือ ค่า IOC ของข้อคำถามที่ i ในจุดประสงค์ข้อที่ k
$N$ คือ จำนวนจุดประสงค์
$µ_k$ คือ คะแนนเฉลี่ยของข้อคำถามข้อที่ i ในจุดประสงค์ข้อที่ k
$\mu$ คือ คะแนนเฉลี่ยของข้อคำถามข้อที่ i ในจุดประสงค์ทั้งหมด
References:
[1] Rovinelli, R. J., & Hambleton, R. K. (1977). On the use of content specialists in the assessment of criterion-referenced test item validity. Tijdschrift voor Onderwijsresearch, 2(2), 49–60.
[2] Crocker, L., & Algina, J. (1986). Introduction to classical and modern test theory. Orlando, FL: Harcourt Brace Jovanovich
[3] Ronna C. Turner & Laurie Carlson (2003) Indexes of ItemObjective Congruence for Multidimensional Items, International Journal of Testing, 3:2, 163-171