ค่าความเที่ยงตรงของแบบสอบถาม หรือการหาค่า IOC (Index of item objective congruence: IOC) ที่มักพบในการทำแบบสอบถาม สูตรที่มักปรากฎตามตำราเรียน เอกสารงานวิจัย และต่าง ๆ คือสูตรดังต่อนี้
IOC = \frac{\sum R}{N}
เมื่อ IOC คือดัชนีค่าความเที่ยงตรงของแบบสอบถาม, \sum R คือผลรวมของคะแนนของผู้เชี่ยวชาญ และ N คือจำนวนผู้เชี่ยวชาญทั้งหมด
ค่า IOC จะมีค่าอยู่ระหว่าง 1 ถึง – 1 ข้อคำถามที่มีความตรงตามเนื้อหาจะมีค่า IOC เข้าใกล้ 1 ถ้าข้อใดมีค่า IOC ต่ำกว่า 0.5 ควรจะปรับปรุงข้อคำถามใหม่ให้สอดคล้องกับวัตถุประสงค์ที่ต้องการวัด
เกณฑ์การให้คะแนนผู้ชาญ คือ +1 สำหรับข้อคำถามมีความสอดคล้องกับวัตถุประสงค์, 0 เมื่อไม่แน่ใจว่าข้อคำถามมีความสอดคล้องกับวัตถุประสงค์ และ -1 สำหรับข้อคำถามไม่มีความสอดคล้องกับวัตถุประสงค์
จากสูตรการคำนวณหาค่า IOC ดังกล่าว จะพบว่าเป็นเพียงการหาค่าเฉลี่ยของคะแนนที่ผู้เชี่ยวชาญให้เท่านั้น แล้วเอาค่าที่มากกว่าหรือเท่ากับครึ่งหนึ่ง (0.5)
สูตรการคำนวณหาค่า IOC
สูตรการคำนวณ index of item-objective congruence ที่พัฒนาโดย Rovinelli และ Hambleton (1977) มีสูตรดังนี้ [1]
I_{ik} = \frac{(N - 1)\sum\limits_{j=1}^{n} X_{ijk} - \sum\limits_{i=1}^{N} \sum\limits_{j=1}^{n} X_{ijk} + \sum\limits_{j=1}^{n} X_{ijk}}{2(N - 1)n}
เมื่อ I_{ik} คือ ค่า IOC ของข้อคำถาม k ในจุดประสงค์ที่ i
N คือ จำนวนจุดประสงค์ (i = 1, 2, …, N)
n จำนวนผู้เชี่ยวชาญด้านเนื้อหา (j = 1, 2, …, n)
X_{ijk} คือ คะแนน (1, 0, –1) ของข้อคำถามที่ k ที่สอดคล้องกับจุดประสงค์ i โดยผู้เชี่ยวชาญ j
Crocker และ Algina (1986 หน้า 221) ได้ปรับสูตรใหม่ให้ดูง่ายขึ้น ปรากฏในหนังสือ Introduction to Classical and Modern Test Theory ดังนี้ [2]
I_{ik}=\frac{N}{2N - 2}(\mu_k-\mu)
เมื่อ I_{ik} คือ ค่า IOC ของข้อคำถามที่ i ในจุดประสงค์ข้อที่ k
N คือ จำนวนจุดประสงค์
µ_k คือ คะแนนเฉลี่ยของข้อคำถามข้อที่ i ในจุดประสงค์ข้อที่ k
\mu คือ คะแนนเฉลี่ยของข้อคำถามข้อที่ i ในจุดประสงค์ทั้งหมด
References:
[1] Rovinelli, R. J., & Hambleton, R. K. (1977). On the use of content specialists in the assessment of criterion-referenced test item validity. Tijdschrift voor Onderwijsresearch, 2(2), 49–60.
[2] Crocker, L., & Algina, J. (1986). Introduction to classical and modern test theory. Orlando, FL: Harcourt Brace Jovanovich
[3] Ronna C. Turner & Laurie Carlson (2003) Indexes of ItemObjective Congruence for Multidimensional Items, International Journal of Testing, 3:2, 163-171