การหาคุณภาพเครื่องมือ

Download Report

Transcript การหาคุณภาพเครื่องมือ

การหาคุณภาพ
่
เครืองมือวิจ ัย
โดย
รศ.ดร.ร ัชนี กูล
ภิญโญภานุ ว ัฒน์
สานักทะเบียนและ
วัดผล
การตรวจสอบคุณภาพ
่
ของเครืองมื
อ
ความตรง
ความยาก
คุณภาพ
่
ความเทียง
่
เครืองมือ
อานาจจาแนก
ความตรง (Validity)
ความหมาย
ความถู กต้องแม่นยาของ
่
อ
เครืองมื
่
่
ในการวัดสิงทีต้องการจะ
วัด
่
ค่าความเทียง (Reliability
ความหมาย
ความคงเส้นคงวาหรือ
่
ความคงทีของคะแนนสอบ
ความยากของ
ข้อสอบ (p)
ความหมาย
่
สัดส่วนของคนทีตอบ
้
ข้อสอบข้อนัน
ได้
ถ
ู
ก
ต้
อ
ง
มี
ค
า
่
ระหว่
า
ง
ึ าทีตอ
จานวนนักศกษ
่ บข้อ้ สอบถูก
0.00 – 1.00
ึ าทีเข่ าส้ อบทังห
จานวนนักศกษ
้ มด
เกณฑ ์ทีใช้ในการ
พิจารณาค่า p
่ ่ในเกณฑ ์
ข้อสอบทีอยู
่ าp
ใช้ได้ คือ ข้อสอบทีค่
ของตัวถู กมีคา
่ อยู ่ระหว่าง
0.20 – 0.80
อานาจจาแนกของ
ข้อสอบ (r)
ความหมาย
ความสามารถของ
ข้อสอบในการจาแนก
นักศึกษากลุ่มเก่งออกจาก
นักศึกษา
เกณฑ ์ r > 0.20
กลุ่มอ่อน มีคา
่ อยู ่ระหว่าง -1
คุณภาพแบบทดสอบด้าน
้
ความตรงตามเนื
อหา
ตรวจสอบคุณภาพของ
่
เครืองมื
อว่าสร ้างไว้ครอบคลุม
้
เนื อหาตรงตามสมรรถนะหรื
อ
่ องการ
พฤติกรรมทีต้
่
่
่
ให้ผูเ้ ชียวชาญในเรื
องที
ต้องการวัดเป็ นผู ต
้ รวจสอบความ
้
่
ตรงเชิงเนื อหาของเครื
องมื
อจาก
้
ความตรงตามเนื อหา
เป็ นความสอดคล้องกัน
้
ระหว่างเนื อหาของ
่
เครืองมื
อกับวัตถุประสงค ์
ของการวัด
่
ผู เ้ ชียวชาญจะเป็
นผู ้
พิจารณาความสอดคล้อง
้
ารตรวจสอบความตรงเชิงเนื อห
่
จารณาจาก
1. ผู เ้ ชียวชาญพิ
เกณฑ ์การประเมิน
แน่ ใจว่า ข้อสอบว ัดได้ตรงตาม
ว ัตถุประสงค ์เชิงพฤติกรรมหรือระด ับ
พฤติกรรมได้ 1 คะแนน
แน่ ใจว่า ข้อสอบวัดได้ไม่ตรงตาม
ว ัตถุประสงค ์เชิงพฤติกรรมหรือระด ับ
พฤติกรรมได้ -1 คะแนน
ไม่แน่ ใจว่า ข้อสอบวัดได้ตรงตาม
้
ารตรวจสอบความตรงเชิงเนื อห
2. หาค่าความสอดคล้อง (IOC)
่
ระหว่างผู เ้ ชียวชาญ
R
สู ตรคานวณ
IOC =
N
่ IOC แทน ดัชนี ความสอดคล้องระหว่างข้อคาถ
เมือ
่
R
แทน ความคิดเห็นของผู เ้ ชียวชาญ
ถ้าแน่ ใจว่าข้อคาถามวัดตรงกับคุณลักษณะท
ถ้าไม่แน่ ใจว่าข้อคาถามวัดตรงกับคุณลักษณ
ถ้าแน่ ใจว่าข้อคาถามวัดไม่ตรงกับคุณลักษ
่
N
แทน จานวนผู เ้ ชียวชาญ
ตัวอย่างสรุปผลการคานวณค่า
ดัชนีผูค
วามสอดคล้
อ
ง
่
เ้ ชียวชาญ
ข้อที่ คนที่
1
1
-1
2
-1
3
+1
4
+1
5
+1
คนที่ 2 คนที่ 3 คนที่ 4 คนที่ 5
+1
+1
0
+1
+1
0
+1
0
+1
-1
-1
+1
0
+1
+1
0
+1
+1
+1
+1
∑R
IOC
C
-1
3
2
5
3
-.20
0.6
0.4
1
0.6
ข้อที่ 1, 3 ต้องปร ับแก้เนื่ องจากค่า IO
คุณภาพข้อสอบรายข้อ
1. ค่าความยาก
ตัวอย่างการวิเคราะห ์ค่าความ
ยาก
่
จานวนคนทีตอบถู
ก
กลุ่ม
ข้อ 1
ข้อ 2
ข้อ 8
ข้อ 9
ข้อ 10
กลุ่มสู ง
่
กลุ่มตา
ค่าความยาก
1
2
0.10
11
8
0.63
7
4
0.37
12
8
0.67
10
2
0.40
จานวนผู ส
้ อบในกลุ่มสู งเท่ากับ 15 คน
่
กลุ่มตาเท่
ากับ 15 คน
ข้อที่ 1 ควรปร ับเพราะเป็ นข้อสอบที่
คุณภาพข้อสอบรายข้อ
2. ค่าอานาจจาแนก
ตัวอย่างการวิเคราะห ์ค่าอานาจ
จาแนก
่
จานวนคนทีตอบถู
ก
กลุ่ม
ข้อ 1
ข้อ 2
ข้อ 8
ข้อ 9
ข้อ 10
กลุ่มสู ง
่
กลุ่มตา
ค่าอานาจ
จาแนก
1
2
-0.07
11
8
0.20
7
4
0.20
12
8
0.26
10
2
0.53
ข้อที่ 1 ควรปร ับเพราะไม่มอ
ี านาจ
จาแนก
คุณภาพแบบทดสอบด้านความ
่
เที
ยง
1. วิธข
ี องคู เดอร ์-ริชาร ์ดสัน
่
ตัวอย่างการหาความเทียงตาม
สู ตร KR-20
รายการ
จานวนผู ท
้ ตอบข้
ี่
อสอบ
ถู ก
จานวนผู ท
้ ตอบข้
ี่
อสอบ
ผิด
ข้อ 1
ข้อ 2
ข้อ3
ข้อ 4
ข้อ 5
ข้อ 6
ข้อ 7
ข้อ 8
ข้อ 9 ข้อ 10 รวม
2
9
16
11
11
11
16
13
13
4
18
11
4
9
9
9
4
7
7
16
0.10
0.45
0.80
0.55
0.55
0.55
0.80
0.65
0.65
.20
0.90
0.55
0.20
0.45
0.45
0.45
0.20
0.35
0.35
0.80
0.09
0.25
0.16
0.25
0.25
0.25
0.16
0.23
0.23
0.16 2.03
การตรวจสอบคุณภาพของ
แบบสอบถาม
้
1. คุณภาพด้
านความตรงเชิงเนื อหา
2. คุณภาพรายข้อโดยการหาค่า
อานาจจาแนก โดยใช้สหสัมพันธ ์
เพียร ์สัน (เฉพาะแบบสอบถามวัด
ความเห็น ความพึงพอใจ)
่
3. คุณภาพด้านความเทียงด้
วยวิธ ี
่ นมาตร
แอลฟาครอนบัคทีเป็
การตรวจสอบความตรงเชิง
้
เนื อหา
แบบสอบถาม
ของแบบสอบถาม
่
ผู เ้ ชียวชาญพิ
จารณาความ
้
ตรงเชิงเนื อหาจากโครงสร
้าง
แบบสอบถาม นิ ยาม และ
้
องค ์ประกอบของเนื อหาตามกรอบ
้
แนวคิด (ไม่มเี นื อหาแน่
ช ัด) โดย
่
ให้ผูเ้ ชียวชาญพิ
จารณาจาก
ตัวอย่างการหาความตรงตาม
้
เนื อหา
้ า
จงพิจารณาข้อความต่อไปนี ว่
สามารถวัด
ความประหยัดและออมได้หรือไม่
แล้วให้คะแนนตามเกณฑ ์ต่อไปนี ้
่ อความนัน
้ สามารถวัด
1 เมือข้
ความประหยัดและออมได้
่ อความนัน
้ ไม่สามารถวัด
-1 เมือข้
ตารางวิเคราะห ์ค่า IOC
ผลการพิจารณา
ข้อคาถาม
1.ใช้จา
่ ยส่วนตัวตามสถานภาพ
ของตน
้ งของเครื
่
่
่ าเป็ น
2.ซือสิ
องใช้
เท่าทีจ
่
3.ออมทร ัพย ์เพืออนาคตในรู
ปแบบ
ต่างๆ
ตรง
(1)
ไม่ตรง
(-1)
ไม่
แน่ ใจ
(0)
่
ผู เ้ ชียวชาญ
ตารางวิเคราะห ์ค่า
ผลการพิจารณา
IOC ข้อ 1
คนที่
ตรง
(1)
1
2
3
4
5

IOC
คะแนน
ไม่ตรง ไม่
แน่ ใจ
(-1)
(0)




1
1
1
1
-1
3/5= 0.6
คุณภาพแบบสอบถามด้าน
วิธข
ี องแอลฟา ่
ความเทียง
ครอนบัค
่
่ การให้คะแนนหลาย
ใช้สาหร ับเครืองมื
อทีมี
่ น
ค่า เช่น แบบสอบถามทีเป็
มาตรประมาณค่า 5k ระดับ
มี
ส
ู
ต
2 รดังนี ้
  Si 
 =
1  2 
k 1 
Sx 
่
ต ัวอย่างการคานวณค่าความเทียง
ตามวิธแ
ี อลฟา ของครอนบัค
คนที่
1
2
3
4
5
6
7
8
9
10
ผลรวม
่
ค่าเฉลีย
ความ
แปรปรวน
ข้อที่
1
4
4
4
4
3
5
4
4
5
5
41
4.20
0.40
0
2
3
5
3
3
4
5
5
5
5
5
43
4.30
0.90
0
3
3
4
4
4
4
5
5
5
5
5
44
4.40
0.48
9
4
4
4
3
4
4
5
4
5
5
5
43
4.30
0.45
6
5
4
4
5
5
3
5
4
5
5
5
45
4.50
0.50
0
คะแนน
6
4
5
2
4
3
5
5
3
5
4
40
4.00
1.11
2
7
5
5
5
4
2
5
5
5
5
4
45
4.50
0.94
5
8
4
5
5
4
4
5
5
5
5
4
46
4.60
0.26
7
9
5
5
2
3
4
5
5
5
5
4
43
4.30
1.12
3
10
4
5
5
4
5
5
4
5
4
4
45
4.50
0.25
0
รวม
40
46
38
39
36
50
46
47
49
45
436
43.60
การตรวจสอบคุณภาพรายข้อ
ค่าอานาจจาแนกโดยใช้สหสัมพันธ ์
เพียร ์สัน
ตัวอย่างการวิเคราะห ์ค่าอานาจ
จาแนกโดยใช้
สหสั
มพันธอที่์เพีx ยร y์สัน xy
นักเรียน คะแนนข้
อที่ คะแนนรวมข้
2
คนที่
10 (x)
1-9 (y)
1
2
3
4
5
6
7
8
9
10
รวม
4
4
5
5
4
2
5
5
5
5
44
40
34
38
41
39
35
42
43
39
42
393
16
16
25
25
16
4
25
25
25
25
202
2
1,600
1,156
1,444
1,681
1,521
1,225
1,764
1,849
1,521
1,764
15,525
160
136
190
205
156
70
210
215
195
210
1,747
การตรวจสอบคุณภาพของ
แบบสังเกตและแบบสัมภาษณ์
้
1. คุณภาพด้านความตรงเชิงเนื อหา
(ตรวจสอบตามนิ ยาม)
่
2. คุณภาพด้านความเทียงระหว่
างผู ้
สังเกตหรือระหว่าง
ผู ส
้ ม
ั ภาษณ์
่
คุณภาพเครืองมื
อด้านความ
่
ยงระหว่
างผู ้
3. การหาค่าความเที
่
เทียง
สังเกตหรือผู ส
้ ม
ั ภาษณ์
่
ตัวอย่างการหาค่าความเทียง
ตัวอย่าง
จากการสั
งเกตพฤติ
กรรมการท
างานของ
ระหว่
า
งผู
ส
้
ง
ั
เกต
้ั
นักเรียนชนประถมศึ
กษาปี ที่ 5
่ ผู ส
นักเรีย
้ 10
งั เกตคนที
ผู ส
้ งั เกตคนที่ 2 ์ผู ส
จนคนที
านวน
คน่ 1จากอาจารย
้ งั เกต
ผลดังตาราง
1
2
3
4
5
6
7
8
9
10
5
6
6
3
6
4
5
7
5
6
7
5
7
4
6
5
5
8
5
6
2 คน ปรากฎ
่ = .40
ความเทียง
สรุปคุณภาพของแบบทดสอบ
 ค่าความยากรายข้อ (p) อยู ่ระหว่าง
0.2-0.8
 ค่าอานาจจาแนกรายข้อ (r) มีคา
่
้ั
ตงแต่
0.2 เป็ นต้นไป
 ค่าด ัชนี ความสอดคล้อง (IOC) โดย
่
ผู เ้ ชียวชาญ
แต่ละข้อ
้ั
มีคา
่ ตงแต่
0.5 เป็ นต้นไป (ความตรง
้
เชิงเนื อหา)
สรุปคุณภาพของ
แบบสอบถาม แบบสังเกต แบบ
สั
ม
ภาษณ์
 ค่าดัชนี ความสอดคล้อง (IOC) โดย
่
ผู เ้ ชียวชาญ
แต่ละข้อ
้
มีคา
่ ตังแต่
0.5 เป็ นต้นไป
่
้
้
 ความเทียงควรมี
คา
่ ตังแต่
0.7 ขึนไป
 สาหร ับแบบสอบถามความคิดเห็น
่ นมาตรประมาณค่า
ความพึงพอใจ ทีเป็
หลายค่า สามารถวิเคราะห ์อานาจ
จาแนก โดยพิจารณาความสัมพันธ ์
้