TAP: Test Analysis Program
1 like2,381 views
การใช้โปรแกรมวิเคราะห์ข้อสอบ TAP
TAP: Test Analysis Program
- 1. การวิเคราะหแบบทดสอบ ดวยโปรแกรม TAP (Test Analysis Program) Step by Step ประเสริฐ สุภิรักษ กลุมงานวัดและประเมินผลการศึกษา สพท.นครสวรรค 1
- 2. คํานํา การวิเคราะหแบบทดสอบ ดวยโปรแกรม TAP : Test Analysis Program (Step by Step) เลมนี้ ผูเขียนมีความตั้งใจที่ตองการใหผูศึกษาสามารถนําขั้นตอนในการวิเคราะห TAP ไปใชในงาน พัฒนาการเรียนการสอนในชั้นเรียน เพื่อวิเคราะหการทดสอบของนักเรียนและการวิเคราะหหาคุณภาพ แบบทดสอบในการแกไขปรับปรุงใหมีประสิทธิภาพมากขึ้น จากการที่ผูเขียนรับผิดชอบงานวัดและ ประเมินผลการศึกษาของเขตพื้นที่การศึกษา ทําใหทราบปญหาของครูผูสอนในการสรางและพัฒนา เครื่องมือวัดจะมีความยากในขั้นตอนวิเคราะหขอมูล ซึ่งอาจจะตองพึ่งพาผูวิเคราะหขอมูลให และมัก จะพบวาขอมูลที่วิเคราะหนั้นวิเคราะหถูกตองหรือไมเพียงไร ตําราเลมนี้จะชวยใหสามารถวิเคราะห ไดดวยตนเองอยางถูตองแมนยํายิ่งขึ้น เทากับเปนการแกไขปญหาดังกลาวไดเปนอยางดีในระดับหนึ่ง ผูเขียนขอขอบคุณ นางสาวฌนุษกุล สุภิรักษ ที่ไดชวยแปลเอกสารบางสวน จากการคันควาของผูเขียน สุดทายผูเขียนหวังเปนอยางยิ่งวา การนําเอกสารเลมนี้ไปใชคงอํานวยประโยชนตอผูใช พอสมควร หากมีขอบกพรองประการใดขอนอมรับคําแนะนําเพื่อการแกไขปรับปรุงโอกาสตอไป ประเสริฐ สุภิรักษ e-mail : supirak5@hotmail.com
- 3. สารบัญ บทที่ 1 บทนํา 1 ความรูเบื้องตนเกี่ยวกับ TAP 1 การแสดงผลการวิเคราะหแบบทดสอบ ( TAP output provides) 1 บทที่ 2 การติดตั้งโปรแกรม 3 การเขาสูโปรแกรม TAP 3 ขั้นตอนการปอนขอมูล 4 ในกรอบหนาตาง INPUT ใหเลือก 4 หนาตาง Data Editor ปอนขอมูลรายการตางๆ ลงในชวงวาง 5 บทที่ 3 ขั้นตอนการวิเคราะหขอมูล 6 ผลการวิเคราะหขอมูล 6 บทที่ 4 ผลลัพธที่ไดจากการวิเคราะห 9 สวนที่ 1. ผลการวิเคราะหผูสอบ (Examinee Analysis) 9 สวนที่ 2 ผลการวิเคราะหขอสอบรายขอและทั้งฉบับ 11 (Item and Test Analysis) สวนที่ 3 ผลการวิเคราะหรายตัวเลือก (Options Analysis) 14 สวนที่ 4 การแสดงดวยแผนภาพ ( Graph : Bar Chart and Histogram ) 14 บทที่ 5 การเลือกใช เมนู Option 16 การกําหนดคาเปอรเซ็นตของเกรด (Set Percentages lf Grades ) 16 การกําหนดคาเปอรเซ็นตแบงกลุมสูงกลุมคา(Set Percentages of 18 ltem Discrimination) บทที่ 6 การเลือกใช เมนู Analysis 19 การกําหนดจํานวนขอสอบเพิ่มเติมตามคาความเชื่อมั่นที่ตองการ 19 ผลการวิเคราะห 21 บทที่ 7 การตรวจสอบคุณภาพเครื่องมือวัดผลการศึกษา 22 การพิจารณาคาความยาก(p) และอํานาจจําแนก( r, D) แบบทดสอบ 35
- 4. บทที่ 1 บทนํา 1.1 ความรูเบื้องตนเกี่ยวกับ TAP โปรแกรม TAP (Test Analysis Program) ถูกออกแบบมาอยางมีประสิทธิภาพ งายตอการใช และเปน โปรแกรม Freeware สามารถดาวนโหลดไดจากเว็ปไซด http://oak.cats.ohio.edu/~brooksg/tap.htm พัฒนาโดย บรูก (Brooks,Gordon P.) เปนชุดโปรแกรมใหใชฟรี เพื่อวิเคราะหการทดสอบสําหรับครูผูสอนใน ระดับโรงเรียนตลอดจนในระดับมหาวิทยาลัย จุดเดนเปนลักษณะของ Software เครื่องมือที่อัจฉริยะสําหรับ ทดสอบออกแบบหลักสูตร ผูใชสามารถปอนขอมูลคะแนนทดสอบในรูปแบบตัวอักษร หรือขอมูลการ ทดสอบโดยตรง ในการวิเคราะหสถิติของผูสอบ ประกอบดวยเปอรเซ็นตในการตอบถูก การตัดเกรด ชวง ความเชื่อมั่นของนักเรียนแตละคน สถิติพื้นฐานของกลุมผูสอบ จํานวนขอที่ตอบถูกแตละคน และจํานวนขอที่ ตอบผิด วิเคราะหสถิติของขอสอบและแบบทดสอบ ประกอบดวย การวิเคราะหความยาก อํานาจจําแนก พอยทไบซีเรียล ตลอดจนวิเคราะหคุณภาพเปนรายตัวเลือก และสามารถแบงกลุมสูงและกลุมต่ําไดตาม กําหนด 1.2 การแสดงผลการวิเคราะหแบบทดสอบ ( TAP output provides) 2 สวน 1. ผลการวิเคราะหผูทดสอบ (Examinee Analysis ) ประกอบดวย รอยละความถูกตอง (Percentage Correct) เกรด ชวงความเชื่อมั่น สําหรับนักเรียนแตละคน และผลรวมคะแนน สถิติเชิงพรรณนา สําหรับกลุมผูสอบ TAP จะสรางรายการคะแนนและคําตอบที่ผิดของนักเรียน (คําตอบที่นักเรียนตอบผิด)ดวย เชน รายงานนักเรียนเปนรายบุคคล บงชี้คะแนนตอบสนองตอขอสอบที่ถูกตองไปจนถึงสิ่งที่ผิดพลาด 2. ผลการวิเคราะหขอสอบและการทดสอบ (Item and Test Analysis) ประกอบดวย ความ ยาก ดัชนีคาอํานาจจําแนก (Discrimination index) รายขอรายตัวเลือก และ สถิติความแปรปรวน KR-20 , KR-21 คาเฉลี่ย คาความเบี่ยงเบน ถาขอสอบถูกลบออก TAP สามารถคํานวณจํานวนขอสอบเพิ่มเติมตาม ความตองการที่เพิ่มคาความเชื่อมั่นได การวิเคราะหตัวเลือก (Option Analysis) ประกอบดวย กลุมสูง และกลุมต่ํา ความยากของ ขอสอบ เพื่อตรวจคําตอบ(คําตอบที่ถูกตอง) และตัวลวง ในเอกสารคูมือการใช TAP เลมนี้ จะนําเสนอขั้นตอนการใชโปรแกรม TAP Version 6.65 ซึ่งได ปรับปรุงพัฒนาตั้งแต Version 4.xx ถึง Version 6.65 ดังนี้
- 5. 2 Version 6.6X : - แกขอบกพรองหลัก ดวยรายงานเกรดสวนบุคคล ( ที่เคยเปนปญหาการจําแนกสําหรับการ ตอบสนอง / คําตอบขอสอบแตละบุคคล ) - เพิ่มความสามารถเพื่อใหผูใชงานระบุ Criteria ดวยตนเองสําหรับขอสอบที่มีปญหา - เพิ่มความสามารถในการจําแนกผลการวิเคราะห Quick ltem โดยการปรับ Point Bisorial. Version 6.4X : - ความสามารถในการปอนขอมูลตัวอักษร( A,B,C,D )ดังเชน ขอมูลตัวเลข (1,2 ,3, 4 ) สําหรับ เฉลย และคําตอบของนักเรียน Version 6.XX : - การนําเขา input files ที่ดีกวาทุก version - HELP เพื่อชวยในเรื่องของการนําเขาขอมูล SPSS ดวยคําสั่งใน Sytax ที่ใชใน SPSS - ความสามารถในการซอน และไมซอน( HIDE หรือ UNHIDE) ชื่อจาก Output (defult เปน hide,ดวย sasy button เปน unhide ) - ปุมการใชงานงายสําหรับคําสั่งการ Saveไฟล Output ทั่วไปทุกชนิด - การวิเคราะหอยางรวดเร็วสําหรับ ตัวเลือก / ตัวลวง - Output ที่ถูกเพิ่มเติม ( เชน class statistics, hard item annotations ) ไปสู Individual Grade Reports. - HELP ในหนาตางแกไขขอมูลสําหรับ OHOI UWIVERSITY FOUKS ที่ยอมใหนําเขา ขอมูลscanned TESTSCORE ที่งายกวา - HELP ในหนาตางแกไขขอมูล นับจํานวน / ines (บรรทัด) ในหนาตางขอมูล Version 5.XX : - เครดิตบางสวน ( Partial crdit ) สามารถเพิ่มคะแนน ( แตไมวิเคราะห ) - ขอสอบแบบหลายตัวเลือก สามารถมีคามากกวา 1 คะแนน ( แตยังคงวิเคราะหที่ 1 คะแนน ) - User Grading Categories ปรับเปลี่ยนใชมากกวาเดิม และปรับเปลี่ยนใชไดตามตองการ Version 4.XX : - จํานวนผูถูกทดสอบ เพิ่มเปน 9999 - Histrograns และ กราฟแทงสามารถปรับ,Save และ Print - จํานวนขอสอบเพิ่มเปน 100 - Histrograms และ bar charts แบบใหม สามารถสรางไดจาก Full Results (ผลลัพธ ทั้งหมด) - ตาราง ความถี่ (ดวย PR) เพิ่มใน Full Results. - Split – Half Reliability เพิ่มใน Full Results.
- 6. 3 บทที่ 2 การติดตั้งโปรแกรม 2.1 การติดตั้งโปรแกรม TAP ดาวนโหลดไฟร tap.exe จากเว็ปไซด http://oak.cats.ohio.edu/~brooksg/tap.htm หรือ Copy ไฟร tap.exe จาก CD ที่ใหมาพรอมกับเอกสารนี้ ลงใน My Documents หรือ Copy มาวาง หนา Desktop เปนไอคอน ดังภาพประกอบ 1 ภาพประกอบ 1 2.2 การเขาสูโปรแกรม TAP ขั้นตอนการเรียกใชโปรแกรม TAP (Test Analysis Program) for Windows สามารถทําไดโดย ภาพประกอบ 2 เขาสูหนาจอ TAP : Test Analysis Program (Version 6.65) ภาพประกอบ 3 ดับเบิ้ลคลิก
- 7. 4 2.3 ขั้นตอนการปอนขอมูล 2.3.1 ในกรอบหนาตาง INPUT ใหเลือก ภาพประกอบ 4 1. เลือก Enter New Data การสราง/ปอนขอมูลใหม 2. หรือ เลือก Open TAP file จากนั้น คลิกที่ปุม GO To Data Editor ในกรณี เปดขอมูลเกาที่ สรางจากโปรแกรม TAP 3. คลิกที่ปุม GO To Data Editor
- 8. 5 2.3 .2 หนาตาง Data Editor ปอนขอมูลรายการตางๆ ลงในชวงวาง ดังนี้ ภาพประกอบ 5 1. Title ปอนหัวขอของแบบทดสอบ หรือวิชาที่จัดสอบ จํานวนตัวอักษรสูงสุด 70 ตัวอักษณ 2. Comments ปอนหมายเหตุ หรืออาจระบุวาแบบทดสอบนี้วัดอะไร จํานวนตัวอักษรสูงสุด 70 ตัวอักษร 3. Key ปอนเฉลยของขอสอบ 4. Options ปอนจํานวนตัวเลือกในขอสอบแตละขอ 5. Include ระบุวาขอใดที่ตองการวิเคราะหและขอใดไมนําเขาวิเคราะห โดยพิมพ Y คือนําขอสอบ ขอนั้นเขาวิเคราะห หรือพิมพ N เมื่อไมนําขอสอบนั้นเขามาวิเคราะห 6. #Students ปอนจํานวนนักเรียนหรือผูสอบทั้งหมด 7. # Test ltems ปอนจํานวนขอสอบทั้งหมด 8. Length of Examinee Names /IDs (# character) ระบุจํานวนสดมภที่ตองการปอนรหัสประจําตัว ผูสอบหรือชื่อผูสอบ 9. DATA สําหรับปอนขอมูลทั้งหมดของผูสอบ โดยปอนรหัสประจําตัวผูสอบตามจํานวนสดมภ ที่กําหนด และปอนตัวเลือกแตละขอของผูสอบแตละคน ตามจํานวนที่ระบุ 10. เมื่อปอนขอมูลเสร็จสิ้น ใหบันทึกขอมูลโดยคลิกที่ปุม Save File
- 9. 6 บทที่ 3 ขั้นตอนการวิเคราะหขอมูล ขั้นตอนการวิเคราะหขอมูล3. 3.1 คลิกที่ปุม ในหนาตาง Data Editer ภาพประกอบ 5 โปรแกรมจะ วิเคราะหขอมูล 3.2 ผลการวิเคราะหขอมูล จะแสดงใน 2 หนาตางคือหนาตาง ดังภาพประกอบ 6 ภาพประกอบ 6 1. หนาตาง QUICK EXAMINEE RESULTS แสดงคาสถิติสําหรับผูสอบ และ 2. หนาตาง QUICK ITEM ANALYSIS แสดงคาสถิติสําหรับขอสอบ
- 10. 7 3.3 เมื่อตองการบันทึกผลการวิเคราะหทั้งสองหนาตางลงไปไฟล ใหไปที่ชองOUTPUT โดยพิมพชื่อ ไฟลที่ตองการเก็บผลลัพธในชอง Result File Name โดยผลลัพธจะเก็บไวในนามสกุล .Txt และ ภาพประกอบ 7 1. คลิก Save Quick Examinee Results โปรแกรมจะบันทึกไวในชื่อเดียวกับResult File Name แตนามสกุลตางกัน คือ .exm 2. คลิก Save Quick ltem Analysis โปรแกรมจะบันทึกไวในชื่อเดียวกับResult File Name แตนามสกุลตางกัน คือ .itm 3. คลิก Save Quick Option Analysis โปรแกรมจะบันทึกไวในชื่อเดียวกับResult File Name แตนามสกุลตางกัน คือ .opt 3.4 การวิเคราะหผลอยางยอ และตอเนื่องดวยการกําหนด Option ใหม ภาพประกอบ 8 1. ปุม Analyze (F9) เปนปุมวิเคราะหขอมูลโดยจะแสดงผลอยางยอและเมื่อคลิก Option เพื่อ กําหนด Option เพิ่มเติมใหม เชน การตัดเกรด หรือรอยละของกลุมสูง- กลุมต่ํา สามารถ วิเคราะหอยางตอเนื่องได ปุมAnalyze(F9) จะเปลี่ยนเปนดังภาพประกอบ 9 ภาพประกอบ 9
- 11. 8 2. ปุม View Full Results Graphs (F2) เปนปุมวิเคราะหขอมูลโดยละเอียด จะใหผล การวิเคราะหผูสอบและขอสอบที่มากกวา นอกจากนี้ยังแสดงแผนภูมิแทงและฮีสแกรม ของคะแนนสอบไดอีกดวย 3. ปุม Save Results Selected Output (F3) เปนปุมบันทึกผลการวิเคราะหโดย ละเอียดและเลือกการบันทึกไฟรผลลัพธ 4.ปุม View/Print Quick Examinee Full Screen (F5) ) เปนปุมแสดงเฉพาะผลการวิเคราะห คาสถิติของนักเรียนหรือผูสอบรายบุคคล ทุกรายการ 5.ปุม View/Print Item Analysis Full Screen (F6) เปนปุมแสดงผลการวิเคราะหคาสถิติ ของแบบทดสอบรายขอ และคุณภาพ ตลอดจนคาความเชื่อมั่น(KR-20,KR-21) ของ แบบทดสอบทั้งฉบับ ทุกรายการ 6.ปุม View/Print Quick Option Analysis (F7) เปนปุมแสดงผลเฉพาะการวิเคราะหคาสถิติ คุณภาพของแบบทดสอบรายขอ และตัวเลือกตัวลวง (คา p ,r (D) ตาม Option ที่กําหนด
- 12. 9 บทที่ 4 ผลลัพธที่ไดจากการวิเคราะห 4 . ผลลัพธที่ไดจากการวิเคราะหโดยละเอียด ผลลัพธที่ไดจากการวิเคราะหจะแบงออกเปน 4 สวนดังนี้ สวนที่ 1. ผลการวิเคราะหผูสอบ (Examinee Analysis) ใหผลดังนี้ สวนที่ 1 ภาพประกอบ 10 ID คือรหัสประจําตัวของผูสอบแตละคน Score คือคะแนนที่ไดของผูสอบแตละคน Percent คือสัดสวนระหวางคะแนนที่ไดกับคะแนนเต็ม Ltr Grade คือผลการตัดเกรด ซึ่งผูวิเคราะหสามารถกําหนดไดวาจะใหตัดกี่เกรด และ เกณฑผานคือเทาไร 68% C.I. คือประมาณคาคะแนนจริงของผูสอบแตละคน จากสูตร X ± SEM ที่ระดับความ เชื่อมั่น 68% 95% C.I. คือประมาณคาคะแนนจริงของผูสอบแตละคน จากสูตร X ± (1.96)SEM ที่ระดับ ความเชื่อมั่น 95%
- 13. 10 สวนที่ 1(ตอ) ภาพประกอบ 11 Number of Examinees คือจํานวนผูสอบทั้งหมด Minimum Score คือคะแนนต่ําสุดที่ผูสอบในกลุมทําได Maximum Score คือคะแนนสูงสุดที่ผูสอบในกลุมทําได Median Score คือคะแนนมัธยฐาน Mean Score คือคะแนนเฉลี่ย Standard Deviation คือคะแนนเบี่ยงเบนมาตรฐาน Variance คือความแปรปรวน Skewness คือความเบ Kurtosis คือความโดง Frequency Table คือ การแสดงแจกแจงความถี่ของคะแนนสอบ Bar Graph คือแสดงการแจกแจงความถี่ของคะแนนดวยแผนภูมิแทง Stem-and-Leaf Display คือแสดงการแจกแจงของคะแนนในรูปของแผนภาพตนใบ Bar Graph คือแสดงการแจกแจงความถี่ของแตละระดับเกรด
- 14. 11 สวนที่ 2 ผลการวิเคราะหขอสอบรายขอและทั้งฉบับ (Item and Test Analysis) ใหผลดังนี้ ภาพประกอบ 12 Item คือขอสอบแตละขอ Number Correct คือจํานวนผูสอบที่ตอบถูกในขอนั้น Item Diff. คือคาความยากของขอสอบ Disc. Index คือดัชนีอํานาจจําแนกขนองขอสอบ #Correct in High Grp คือจํานวนผูสอบในกลุมสูงที่ตอบขอสอบขอนั้นถูก #Correct in Low Grp คือจํานวนผูสอบในกลุมต่ําที่ตอบขอสอบขอนั้นถูก Point Biserial คือคาอํานาจจําแนกที่คํานวณจากสูตรสหสัมพันธพอยทไบซีเรียล Adjusted Pt. Bis. คือคาอํานาจจําแนกที่คํานวณจากสูตรสหสัมพันธไบซีเรียล ภาพประกอบ 13 Number of ltems คือจํานวนขอสอบทั้งหมด Mean ltem Difficulty คือคาเฉลี่ยของคาความยาก สวนที่ 2 สวนที่ 2 (ตอ)
- 15. 12 Mean ltem Discrimination คือคาเฉลี่ยของดัชนีอํานาจจําแนก Mean Point Biserial คือคาเฉลี่ยของสหสัมพันธพอยทไบซีเรียล KR20 (Alpha) คือคาความเชื่อมั่นที่คํานวณดวยสูตร KR-20 KR21 คือคาความเชื่อมั่นที่คํานวณดวยสูตร KR-21 SEM (from KR20 ) คือคาความคลาดเคลื่อนมาตรฐานของการวัด High Grp Min Score (n=18) คือคะแนนต่ําสุดของกลุมสูง LOW Grp Max Score (n=19) คือคะแนนสูงสุดของกลุมต่ํา Minimum ltem Diff. คือคาต่ําสุดของคาความยากของขอสอบ Maximum ltem Diff. คือคาสูงสุดของคาความยากของขอสอบ Minimum Disc. lndex คือคาต่ําสุดของดัชนีอํานาจจําแนกของขอสอบ Maximum Disc. lndex คือคาสูงสุดของดัชนีอํานาจจําแนกของขอสอบ Minimum Pt. Biserial คือคาต่ําสุดของของสหสัมพันธพอยทไบซีเรียล Miximum Pt. Biserial คือคาสูงสุดของของสหสัมพันธพอยทไบซีเรียล ภาพประกอบ 14 Additional ltem Analysis คือผลการวิเคราะหขอสอบเพิ่มเติม Item คือ ขอสอบแตละขอ Scale Mean if ltem Deleted คือคาเฉลี่ยของขอสอบทั้งฉบับเมื่อไมรวมขอสอบขอนั้น Scale SD if ltem Deleted คือคะแนนเบี่ยงเบนมาตรฐานของขอสอบทั้งฉบับเมื่อไมรวม ขอสอบขอนั้น KR-20 if ltem Deleted คือคาความเชื่อมั่นสูตร KR-20 ของแบบทดสอบทั้งฉบับเมื่อไม รวมขอสอบขอนั้น SEM if ltem Deleted คือความคลาดเคลื่อนมาตรฐานของการวัดของแบบทดสอยทั้งฉบับ เมื่อไมรวมขอสอบขอนั้น สวนที่ 2 (ตอ)
- 16. 13 Biserial Correl. คือคาสหสัมพันธไบซีเรียล Mean Biserial Corr. คือคาเฉลี่ยของสหสัมพันธไบซีเรียล Minimum Biserial Corr.คือคาต่ําสุดของสหสัมพันธไบซีเรียล คือคาสูงสุดของสหสัมพันธไบซีเรียลMaximum Biserial Corr. ภาพประกอบ 15 Answer Key Analysis คือการวิเคราะหตัวเลือกทั้งหมด Bar Chart for Correct Answer Usage คือแผนภาพแสดงความถี่ของตัวเลือกที่เปน เฉลยขอสอบ Bar Chart for Number of Options Usage คือแผนภาพแสดงความถี่ของตัวเลือกที่ใช ในขอสอบแตละขอ ภาพประกอบ 16 Ltem lncluded, Answer Keu, Additional Correct Options คือแสดงขอสอบที่รวมเขา วิเคราะห (ITEMS INCLUDED) ขอสอบที่ไมรวมเขาวิเคราะห (ITEMS EXCLUDED:) เฉลย ขอสอบ และเฉลยขอสอบ (CORRECTANSWERS (ltem#-Key) สวนที่ 2 (ตอ) สวนที่ 2 (ตอ)
- 17. 14 สวนที่ 3 ผลการวิเคราะหรายตัวเลือก (Options Analysis) ใหผลดังนี้ ภาพประกอบ 17 ตัวเลขที่อยูนอกวงเล็บคือความถี่ของผูสอบที่เลือกตอบตัวเลือกนั้นในแตละกลุม สวนตัวเลขในวงเล็บ คือสัดสวนของความถี่นั้นตอจํานวนผูสอบในกลุม นั้นคือในแถว Total ของตัวเลือกที่ 1 (Option 1) มีผูสอบ ทั้งหมดเลือกตัวเลือก 1 จํานวน 15 คน คิดเปนสัดสวน 0.300 ซึ่งสัดสวนนี้ก็คือคาความยาก ( คา p = 0.30 ) ของตัวเลือกที่ 1 สวนผลตางของกลุมสูงและกลุมต่ํา (Diff) คือ 3 คิดเปนสัดสวนในวงเล็บ 0.265 ซึ่งสัดสวน นี้ก็คือดัชนีอํานาจจําแนก (คา r / D = 0.256 ) ของตักเลือกที่ 1 สังเกตวาโปรแกรมจะคํานวณ Diff โดยใช ความถี่ของกลุมสูงลบดวยกลุมต่ํา ดังนั้นตัวลวงที่จําแนกไดอยางมีประสิทธิภาพ นั้นคือกลุมสูงควรเลือกตอบ ตัวลวงนอยกวากลุมต่ํานั่นเอง สวนขอ 1 นี้ตัวเฉลยคือตัวเลือกที่ 1 ซึ่งมีเครื่องหมายดอกจันอยู มีคาความยาก (p) 0.30 อํานาจจําแนก(r/D) 0.265 ซึ่งถือวาเปนขอสอบที่คอนขางยาก และมีคาอํานาจจําแนกที่ใชได จึงเปน ขอสอบที่ใชได ถาเครื่องหมาย # ก็คือตัวเลือกนั้นมีอํานาจจําแนกสูงกวาตัวเฉลย สวนที่ 4 การแสดงดวยแผนภาพ ( Graph : Bar Chart and Histogram )โดยดานลางของหนาตาง แสดงผลลัพธโดยละเอียดจะปรากฏ 3 ปุมคือ Bar Chart for Grades แสดงแผนภูมิแทงแจกแจงความถี่แตละ ระดับเกรด Bar Chart for Scores แสดงแผนภูมิแทงแจกแจงความถี่แตละระดับคะแนน และ Histogram for Scores แสดงฮีสโทแกรมแจกแจงความถี่ละระดับคะแนน ดังภาพประกอบ 19 ภาพประกอบ 18 สวนที่ 3 สวนที่ 4
- 18. 15 ภาพประกอบ 19
- 19. 16 บทที่ 5 การเลือกใช เมนู Option เมนู Options ผูวิเคราะหสามารถกําหนดคาตางในการวิเคราะหได ที่สําคัญดังนี้ 1. การกําหนดคาเปอรเซ็นตของเกรด (Set Percentages lf Grades ) 2. การกําหนดคาเปอรเซ็นตแบงกลุมสูงกลุมคา (Set Percentages of ltem Discrimination) ภาพประกอบ 20 1. การกําหนดคาเปอรเซ็นตของเกรด (Set Percentages lf Grades ) Set Percentages lf Grades ผูวิเคราะหสามารถเลือกใหผลเกรดแกผูสอบได โดยเลือกได 2 เกรด คือ ผานกับไมผาน เลือกได 5 เกรดคือ A, B, C, D และ F เลือกได 12 เกรดคือ A, A-, B+,B, B-, C+,C, C-, D+,D, D- และ F และไมแสดงผลเกรด โดยแตละระดับเกรดสามารถเลือกเปอรเซ็นตต่ําสุดที่ผูสอบควรได ดังภาพประกอบ 21 1.1 คลิก Option ที่เมนูบาร 1.2 เลือกคลิก Set Percentages lf Grades … 1.3 เลือกกําหนดคา
- 20. 17 ภาพประกอบ 21 การเลือกกําหนดคา คลิกเลือก 2 Categories (Pass, Fail) = เกรด 2 ระดับ ผาน และไมผาน กําหนด ตัวเลขใน ชอง Grade % หรือเลือกคา Defaults ของโปรแกรม (70%) คลิกเลือก 5 Categories (A,B,C,D,F) = เกรด 5 ระดับ A,B,C,D และF กําหนด ตัวเลข ใน ชอง Grade % หรือเลือกคา Defaults ของโปรแกรม (90,80,70,60 ตามลําดับ) คลิกเลือก 12 Categories (A,A-,B+,B,B-,C+,C,C-,D+,D,D-,F) = เกรด 12 กําหนด ตัวเลข ในชอง Grade % หรือเลือกคา Defaults ของโปรแกรม (94,91,88,84,81,78,74,71,68,64,61 ตามลําดับ) คลิกเลือก User Defined = ผูใชกําหนดระดับเกรดไดเอง คลิกเลือก No Grading Categories = ไมกําหนดเกรด
- 21. 18 เมื่อเลือกกําหนดคาแลว คลิก OK เขาสูหนาจอ TAP : Test Analysis Program (Version 6.65) ปุม Analyze(F9) จะเปลี่ยนเปน แลวคลิก เพื่อวิเคราะหผลใหม สดมภ Ltr Grade จะแสดงผลเกรดที่กําหนด ดังภาพประกอบ 22 ภาพประกอบ 22 2. การกําหนดคาเปอรเซ็นตแบงกลุมสูงกลุมคา(Set Percentages of ltem Discrimination) Set Percentages of ltem Discrimination ผูวิเคราะหสามารถเลือกแบงกลุมสูงกลุมต่ํากลุมละกี่ เปอรเซ็นตก็ไดโดยระบุคาเปอรเซ็นตที่ตองการ ดังภาพประกอบ 23 2.1 คลิก Option ที่เมนูบาร 2.2 เลือกคลิก Set Percentages of ltem Discrimination ภาพประกอบ 23 การกําหนดจํานวนเปอรเซ็นตเพื่อแบงกลุมสูงกลุมต่ํา ในชอง Top หรือ Bottom เปน 33 หรือ 50 ตามความตองการได หรือเลือกคา Defaults ของโปรแกรม (27%) เมื่อเลือกกําหนดคาแลว คลิก OK เขาสูหนาจอ TAP : Test Analysis Program (Version 6.65) ปุม Analyze(F9) จะเปลี่ยนเปน แลวคลิก เพื่อวิเคราะหผลใหม
- 22. 19 บทที่ 6 การเลือกใช เมนู Analysis การเลือกใช เมนู Analysis การกําหนดจํานวนขอสอบเพิ่มเติมตามคาความเชื่อมั่นที่ตองการ เมนู Analysis ประกอบไปดวยเมนูรอง Run Analysis ซึ่งสามารถคลิกเลือกไดจากปุมอยูแลว แตเมนู รองที่สําคัญก็คือ Speaman-Bown Prophecy เปนการทํานายจํานวนขอที่ควรเพิ่มเขาไปในแบบทดสอบเพื่อให ไดคาความเชื่อมั่นตามที่กําหนด ดังภาพประกอบ 23 ภาพประกอบ 23 1. คลิก Analysis ที่เมนูบาร 2. เลือกคลิก Speaman-Bown Prophecy แสดงหนาจอ Speaman-Bown Prophecy ดัง ภาพประกอบ 24 3. แสดงคุณภาพแบบทดสอบฉบับนี้มีขอสอบอยู 20 ขอ มีความเชื่อมั่นอยู 0.577
- 23. 20 ภาพประกอบ 24 จากภาพประกอบ 24 แสดงคุณภาพแบบทดสอบฉบับนี้มีขอสอบอยู 20 ขอ มีความเชื่อมั่นอยูเดิม 0.577 ถาตองการแบบทดสอบที่มีความเชื่อมั่นเพิ่มขึ้นควรจะเพิ่มขอสอบอีกจํานวนเทาใด 1. กําหนดตัวเลขคาความเชื่อมั่นเพิ่มใน To achieve a desired of reliability of … 2. คลิกการคํานวณ Calculate แสดงหนาจอจํานวนขอสอบเพิ่มเติม ดังภาพประกอบ 25
- 24. 21 ภาพประกอบ 25 ผลการวิเคราะห คาความเชื่อมั่นของแบบทดสอบเดิมทั้งฉบับ ( The reliability of the test analyzed was….)= 0.577 ตองการผลคาความเชื่อมั่นเพิ่มเติม (To Achieve a desired of reliability of …) = 0.800 จํานวนขอสอบที่ตองเพิ่ม (you need….) = 39 ขอ ขอสอบฉบับนี้เพิ่มมากขึ้น ( item. This is because the test must be….) = 2.94 เทาของขอสอบเดิม จํานวนขอสอบรวมทั้งหมด ( item. For a TOTAL of …) 59 ขอ นั่นคือแบบทดสอบฉบับนี้มีขอสอบอยูเดิม 20 ขอ มีความเชื่อมั่นอยูเดิม 0.577 ถาตองการ แบบทดสอบที่มีความเชื่อมั่น 0.800 ควรจะตองเพิ่มขอสอบอีกจํานวนเทาใด ผลการวิเคราะหก็คือ ตองเพิ่ม อีก 39 ขอหรือ 2.94 เทาของขอสอบเดิม จึงจะไดคาความเชื่อมั่น 0.800 ขอสอบในแบบทดสอบควรจะมี จํานวน 59 ขอ ซึ่งเปนผลการทํานายถาขอสอบที่เพิ่มเติมมีคุณภาพเทากับขอสอบเดิมหรือใกลเคียงกัน
- 25. 22 บทที่ 7 การตรวจสอบคุณภาพเครื่องมือวัดผลการศึกษา เครื่องมือวัดที่นําไปใชในการวัดผลการเรียนรูของผูเรียน ควรเปนเครื่องมือที่ดีมีคุณภาพ เพื่อทําให สามารถวัดผลการเรียนรูที่แทจริงของผูเรียนได เครื่องมือวัดผลที่มีคุณภาพ มีลักษณะสําคัญดังนี้ 1. ความตรงหรือความเที่ยงตรง (Validity) 2. ความยากหรือความยากงาย (Difficulty) 3. อํานาจจําแนก (Discrimination Power) 4. ความเที่ยงหรือความเชื่อมั่น (Reliability) 5.ความเปนปรนัย (Objectivity) 6. ความสามารถในการนําไปใช (Usability) 1. ความตรงหรือความเที่ยงตรง (Validity) ความหมายของความตรงแบงไดเปน 2 แนวคิด ตามแนวคิดเดิม ความตรง หมายถึง ความสามารถของเครื่องมือที่วัดไดตรงกับสิ่งที่ตองการวัด สวนแนวคิด ปจจุบัน ความตรง หมายถึง ความสามารถของหลักฐานที่อธิบายผลการวัดไดตรงกับสิ่งที่ตองการวัด ความ ตรงของผลการวัด อาจไดมาจาก การรวบรวมหลักฐานจากหลายวิธี การตรวจสอบหลักฐานที่แสดงถึงความ ตรงจึงมีหลายชนิด ซึ่งจําแนกตามหลักฐานได 3 ชนิด คือ หลักฐานความตรงเชิงเนื้อหา หลักฐานความตรงเชิง เกณฑ และหลักฐานความตรงเชิงโครงสราง 2. ความยากหรือความยากงาย (Difficulty) หมายถึงความยากในเชิงเนื้อหาของเครื่องมือประเภท แบบทดสอบ ซึ่งมีคําตอบถูกผิดตามหลักวิชา หรือหลักการอื่นๆ ความยากพิจารณาจากสัดสวนหรือรอยละ ของผูที่ตอบคําถามขอนั้นๆ ไมถูกตอง เครื่องมือวัดผลที่ดี ควรมีความยากพอเหมาะกับกลุมผูสอบ สําหรับ เครื่องมือประเภทที่ไมมีคําตอบถูกผิด จะไมมีความยากในเชิงเนื้อหา การสรางเครื่องมือตองใชภาษาที่ เหมาะสมกับกลุมสอบ 3. อํานาจจําแนก (Discrimination Power) หมายถึง ความสามารถของเครื่องมือที่วัดไดตรงกับ ความสามารถของผูถูกวัด เปนความสัมพันธระหวางความสามารถของผูตอบกับการตอบถูก กลาวคือ คนที่มี ความสามารถในสิ่งที่วัดมากควรตอบถูกมาก และในทํานองเดียวกันคนที่มีความสามารถต่ํา จะตอบถูกนอย เครื่องมือวัดที่มีอํานาจจําแนกสามารถจําแนกผูที่มีความสามารถแตกตางกัน ออกจากกันตามระดับ ความสามารถ เชน จําแนกคนที่รอบรู ออกจากที่ไมรอบรู จําแนกคนที่มีคุณธรรมสูง ออกจากคนที่มีคุณธรรม ต่ํา เปนตน 4. ความเที่ยงหรือความเชื่อมั่น (Reliability) หมายถึง ความคงที่ หรือความคงเสนคงวา (Consistency) ของผลที่ไดจากการวัดสิ่งเดียวกันดวยเครื่องมือเดียวกันในชวงเวลาที่ตางกัน
- 26. 23 2 ครั้งขึ้นไป หรือความสอดคลองของผลการวัดสิ่งเดียวกันดวยเครื่องมือหรือวิธีการที่แตกตางกันมากกวาหนึ่ง อยางขึ้นไป การตรวจสอบความเที่ยงทําไดหลายวิธี เชน วิธีวัดซ้ํา(test-retest) วิธีใชเครื่องมือที่สมมูลกัน (equivalent forms) วิธีหาความสอดคลองภายใน เปนตน 5. ความเปนปรนัย (Objectivity) หมายถึง ความชัดเจนของเครื่องมือทั้งคําถามและคําตอบ คําถามที่ เปนปรนัยตองมีความชัดเจน ผูอานเขาใจตรงกันวาถามอะไร สวนตําตอบที่เปนปรนัยตองมีคําตอบถูกชัดเจน มีวิธีการตรวจและเกณฑการใหคะแนน รวมทั้งการแปลความหมายที่ผูตรวจสามารถใหคะแนนไดตรงกัน 6. ความสามารถในการนําไปใช (Usability) ลักษณะของเครื่องมือที่ควรพิจารณาอีกอยางหนึ่ง คือ ความสามารถนําไปใชไดสะดวก เนื่องจากครูผูสอนหรือผูใชเครื่องมือไมใชผูที่ไดรับการฝกอบรมดานการ วัดผลมาโดยเฉพาะ ดังนั้นเครื่องมือจึงควรมีลักษณะที่สามารถนําไปใชไดสะดวก ดังนี้ 6.1 งายในการดําเนินการสอบ เครื่องมือควรมีคําชี้แจงสําหรับการสอบที่งายและชัดเจน 6.2 ใชเวลาในการสอบเหมาะสม เครื่องมือที่มีประสิทธิภาพเปนเครื่องมือที่วัดไดตรง โดยใชคําถาม จํานวนนอยขอ และใชเวลานอยที่สุด เครื่องมือที่วัดไดตรงตองครอบคลุมและเปนตัวแทนสิ่งที่วัด การใช คําถามนอยขออาจไมครอบคลุมสิ่งที่จะวัด การใชคําถามมากขออาจทําใหครอบคลุมสิ่งที่ตองการวัดแตก็ตอง ใหเวลาการตอบเพียงพอ การใชเวลานอยเกินไป อาจทําใหผูตอบทําไมทันซึ่งอาจตอบโดยการเดา ในทาง ตรงกันขามการใหเวลามากเกินไปอาจทําใหผูตอบตอบถูกเกือบทั้งหมด ซึ่งมีผลตอคาอํานาจจําแนกของ เครื่องมือ และสงผลใหเครื่องมือมีความเที่ยงต่ํา 6.3 งายในการตรวจใหคะแนน เครื่องมือที่ดีควรมีวิธีการตรวจใหคะแนนที่สะดวก ถูกตองไม ซับซอน และใชเวลาไมมากนัก 6.4 งายในการแปลผลและการนําผลไปใช เครื่องมือที่ดีควรมีคูมือการแปลผลและการนําผลไปใช ใหเปนประโยชนตอผูเกี่ยวของ เครื่องมือที่มีคุณภาพมีลักษณะสําคัญ หลายประการดังกลาวแลว ในการสรางเครื่องมือควรมีการ ตรวจสอบเครื่องมือที่สรางขึ้นวามีคุณภาพหรือไม เครื่องมือที่จะนําไปใชในการวัดและประเมินผลการศึกษา ควรเปนเครื่องมือที่มีคุณภาพ ตัวชี้วัดคุณภาพของเครื่องมือ ไดแก 1. ตัวชี้วัดคุณภาพของเครื่องมือวัดผลเปนรายขอ ประกอบดวย ความยาก อํานาจจําแนก 2. ตัวชี้วัดคุณภาพของเครื่องมือวัดผลทั้งฉบับ ประกอบดวย ความตรง ความเที่ยง
- 27. 24 1. การตรวจสอบความตรงเครื่องมือวัด สถิติที่ใชหาความตรง ในที่นี้จะกลาวถึงการหาความตรงเชิงเนื้อหา 2 วิธี คือ 1. IOC : Index of Item – Objective Congruence 2. CVR : Content Validity Ratio แบบทดสอบวัดผลสัมฤทธิ์ทางการเรียน : จะตรวจสอบความตรงเชิงเนื้อหาของแบบทดสอบ ความสอดคลองของขอสอบกับวัดถุประสงคที่วัด และความครอบคลุมของเนื้อหาที่วัด แบบสอบถามหรือแบบประเมินตางๆ : จะตรวจสอบความสอดคลองและครอบคลุมของ คําถาม(Items) กับเนื้อหา(Content) คุณลักษณะ (Trait)หรือองคประกอบของสิ่งที่ตองการวัด 1.1 การหาคา IOC พิจารณาจากคะแนนของผูเชี่ยวชาญ โดยการใหตรวจผลการพิจารณาของผูเชี่ยวชาญตอขอคําถามรายขอ 3 ประเด็น คือ ให +1 ถาแนใจวา ขอคําถามหรือขอความสอดคลองกับวัตถุประสงคที่ตองการวัด ให 0 ถาไมแนใจวา ขอคําถามหรือขอความสอดคลองกับวัตถุประสงคที่ตองการวัด ให -1 ถาแนใจวา ขอคําถามหรือขอความไมสอดคลองกับวัตถุประสงคที่ตองการวัด นําคะแนนของผูเชี่ยวชาญทุกคนที่ประเมินมากรอกลงในแบบวิเคราะหความสอดคลองของขอคําถาม กับจุดประสงคเพื่อหาคาเฉลี่ย สําหรับขอคําถามแตละขอใชสูตร ดังนี้ IOC = N R∑ IOC คือ คาดัชนีความสอดคลองระหวางขอสอบกับจุดประสงค (Index of Item – Objective Congruence) ∑R คือ ผลรวมของคะแนนความคิดเห็นของผูเชี่ยวชาญ N คือ จํานวนผูเชี่ยวชาญ การแปลความหมายดัชนีความสอดคลองใชเกณฑ ถา IOC ≥ 0.5 แสดงวา ขอคําถามหรือขอความวัดไดตรงตามเนื้อหาและ สอดคลองกับวัตถุประสงค IOC < 0.5 แสดงวา ขอคําถามหรือขอความวัดไมตรงตามเนื้อหาและ ไมสอดคลองกับวัตถุประสงค
- 28. 25 ตัวอยางแบบตรวจสอบความสอดคลองของขอสอบกับจุดประสงค (รายบุคคล) คําชี้แจง โปรดพิจารณาขอสอบแตละขอที่แนบมาใหวา วัดไดตรงกับจุดประสงคหรือไม ใหกาเครื่องหมาย ลงในชอง +1 ถาวัดไดตรงกับจุดประสงค ในชอง 0 ถาไมแนใจหรือตัดสินไมได ในชอง -1 ถาวัดไดไมตรงกับจุดประสงค พรอมทั้งความคิดเห็นและขอเสนอแนะ ความคิดเห็นของผูเชี่ยวชาญขอสอบ ความคิดเห็น/ จุดประสงค ขอที่ +1 0 -1 ขอเสนอแนะ แบบฝกการคํานวณหาคาดัชนีความสอดคลองระหวางขอสอบแตละขอกับจุดประสงค (Index of Item Objective Congruence : IOC) กิจกรรม 1.1 เมื่อนําขอสอบ จํานวน 5 ขอ ซึ่งวัดจุดประสงคขอ 1 ไปใหผูเชี่ยวชาญ เนื้อหาวิชาพิจารณาลงความเห็นวาขอสอบแตละขอ วัดพฤติกรรมตามที่ระบุ ไวในจุดประสงคขอ 1 หรือไม โดยใชแบบตรวจสอบความสอดคลองของ ขอสอบกับจุดประสงค ดังนี้ คะแนนความคิดเห็นของผูเชี่ยวชาญจุดประสงค ขอที่ ขอสอบ ขอที่ คนที่ 1 คนที่ 2 คนที่ 3 คนที่ 4 คนที่ 5 ∑R IOC 1 1 2 3 4 5 +1 +1 -1 0 +1 +1 +1 -1 0 +1 +1 0 0 0 +1 +1 +1 -1 0 +1 0 0 -1 0 +1 ........ ........ ........ ........ ........ .......... ........ ........ ........ ........ สรุปผลการพิจารณาตรวจสอบ ………………………………………………………..... ……………………………………………………………………………………………………….
- 29. 26 กิจกรรม 1.2 ผูเชี่ยวชาญ 5 คน พิจารณาแบบประเมินทักษะการทํางาน โดยมีรายการ ประเมิน 6 รายการ ผลการประเมินแสดงดังตาราง จงหาดัชนีความสอดคลอง ของรายการแตละรายการ และสรุปผลการพิจารณาแบบประเมินของผูเชี่ยวชาญ ความคิดเห็นของผูเชี่ยวชาญ รายการ + 1 0 - 1 1.ดานการวางแผนการทํางาน 1.1 การวิเคราะหงาน............................ 5 0 0 1.2 กําหนดเปาหมายในการทํางาน…………….. 4 0 1 1.3 กําหนดขั้นตอน กิจกรรมทํางาน 5 0 0 1.4 กําหนดวิธีการควบคุมผลการปฏิบัติงาน 4 1 0 1.5 บอกแหลงขอมูลสารสนเทศตางๆ ที่ใชประกอบการ ตัดสินใจในการทํางาน…………………….. 3 1 1 1.6 3 1 1การประมาณการใชงบประมาณ เวลา แรงงาน และ วัสดุอุปกรณในการทํางาน………………….. จากสูตร IOC = N R∑ คาดัชนีความสอดคลอง ขอ 1.1 ……………… คาดัชนีความสอดคลอง ขอ 1.2 ……………… คาดัชนีความสอดคลอง ขอ 1.3 ……………… คาดัชนีความสอดคลอง ขอ 1.4 ……………… คาดัชนีความสอดคลอง ขอ 1.5 ……………… คาดัชนีความสอดคลอง ขอ 1.6 ……………… สรุปผลการพิจารณาตรวจสอบ ………………………………………………………..... ………………………………………………………………………………………………………. ………………………………………………………………………………………………………. ………………………………………………………………………………………………………
- 30. 27 1.2 การคํานวณหาคา CVR : Content Validity Ratio จะมีตารางกําหนดมาให และใชสูตรคํานวณ นําคาไปเปรียบเทียบกับตาราง รายละเอียดดังนี้ ตาราง คาอัตราสวนความตรงเชิงเนื้อหาต่ําสุดที่ผานเกณฑของลอรชี คา CVR ต่ําสุด คา CVR ต่ําสุด จํานวนผูเชี่ยวชาญ จํานวนผูเชี่ยวชาญ ที่มีนัยสําคัญ ที่มีนัยสําคัญ 5 6 7 8 9 10 11 12 0.99 0.99 0.95 0.75 0.78 0.62 0.59 0.56 13 14 15 20 25 30 35 40 0.54 0.51 0.49 0.42 0.37 0.33 0.31 0.29 ที่มา (Lawshe, 1975, p.568) สูตรการคํานวณ CVR = N/2 Ne – N/2 เมื่อ Ne = ผูเชี่ยวชาญที่เห็นดวยหรือเห็นวาเหมาะสม N/2 = ครึ่งหนึ่งของผูเชี่ยวชาญทั้งหมด ตัวอยาง ถาขอคําถามขอหนึ่งมีผูเชี่ยวชาญ 14 คน เห็นดวย 11 คน คํานวณได ดังนี้ 11 - 7 7 CVR = = 0.57 นําคาที่คํานวณไดไปเปรียบเทียบกับคาในตารางที่จํานวนผูเชี่ยวชาญ 14 คือ 0.51 คาที่คํานวณได 0.57 ซึ่งสูงกวาจึงผานเกณฑ
- 31. 28 2. การการวิเคราะหความยาก ความยากของขอสอบรายขอ เปนดัชนีที่ชี้สัดสวนของผูสอบที่ตอบขอสอบขอนั้นๆ ถูก ความยากของ ขอสอบรายขอ(p) คํานวณไดจากสูตร จํานวนผูสอบทั้งหมด จํานวนผูสอบที่ตอบขอสอบถูก P = ตัวอยาง จากผูเขาสอบทั้งหมด 40 คน มีผูตอบขอสอบขอที่ 1 ถูก 30 คน จงคํานวณคา ความยากของขอสอบขอที่ 1 30P = 40 = .75 ความยากมีคาอยูระหวาง 0 ถึง 1 ขอสอบขอที่ไมมีผูใดตอบถูกเลย จะมีคาความยาก เทากับ 0 ขอสอบขอที่มีผูตอบถูกครึ่งหนึ่งของผูตอบทั้งหมด จะมีคาความยาก เทากับ .50 และ ขอสอบขอที่มีผูตอบถูกทั้งหมดจะมีคาความยาก เทากับ 1 การแปลความหมายคาความยาก ใชเกณฑการพิจารณา ดังนี้ 0.81 – 1.00 ขอสอบงายเกินไป 0.61 – 0.80 ขอสอบคอนขางงาย 0.41 – 0.60 ขอสอบยากปานกลง 0.21 – 0.40 ขอสอบคอนขางยาก 0. – 0.21 ขอสอบยากเกินไป กิจกรรม 2.1 จากตัวอยาง จงคํานวณคาความยากของขอสอบและแปลความหมายคาความ ยากขอที่ 1-5 ความยากขอสอบขอที่ จํานวนผูตอบถูก จํานวนผูตอบทั้งหมด ความหมาย 1 7 10 2 30 30 3 20 40 4 0 28 5 10 50
- 32. 29 สรุปคุณภาพขอสอบ ............................................................................................................................................................................. ................................................................................................................. ในกรณีที่มีผูเขาสอบจํานวนมาก(มากกวา 40 คน) การวิเคราะหความยากของขอสอบรายขอ อาจใช วิธีแบงกลุมผูสอบตามคะแนนรวม แลวน้ําผลการตอบของผูสอบที่ไดคะแนนรวมสูง รอยละ 27 และกลุม ผูสอบที่ไดคะแนนรวมต่ํา รอยละ 27 (เทคนิค 27%) มาวิเคราะห โดยใชสูตรการคํานวณ คาความยากรายขอ ดังนี้ H + L P = H + L NH + NL H แทน จํานวนผูตอบถูกในกลุมสูง NH แทน จํานวนผูตอบทั้งหมดในกลุมสูง L แทน จํานวนผูตอบถูกในกลุมต่ํา NL แทน จํานวนผูตอบทั้งหมดในกลุมต่ํา กิจกรรมที่ 2.2 จากผูเขาสอบทั้งหมด 100 คน แบงเปนผูสอบที่ไดคะแนนรวมสูง 27 คน และ ผูสอบที่ไดคะแนนรวมต่ํา 27 คน เมื่อแจงนับจํานวนผูตอบขอสอบขอที่ 2 ปรากฏวาผูสอบในกลุมสูงตอบถูก 25 คน และผูสอบในกลุมต่ําตอบขอสอบ ถูก 15 คน จงคํานวณคาความยากของขอสอบขอที่ 2 จากโจทย H = …..... L = …… NH = ……. NL= ……….. จากสูตร P = NH + NL = = ………… ดังนั้น ความยากของขอสอบขอที่ 2 เทากับ ………….. การวิเคราะหขอสอบแบบอัตนัย ขอสอบแบบอัตนัย (Essay) เปนขอสอบที่ใหผูสอบเขียนตอบตามความคิดของตนเอง เปนเครื่องมือที่ จําเปนในการวัดผลโดยเฉพาะในการวัดเกี่ยวกับความคิดเห็น เจตคติ ความสามารถในการคิดวิเคราะห (Synthesis) ความสามารถในการอธิบายใหคนอื่นเขาใจ ความสามารถในการบูรณาการความรู การตอบ ขอสอบชนิดนี้ไดตองอาศัยความรอบรู ประสบการณ และความสามารถในการบูรณาการความรู
- 33. 30 วิธีการวิเคราะหขอสอบแบบอัตนัย 1. ตรวจใหคะแนนขอสอบแตละขอ แลวรวมคะแนนทุกขอ 2. เรียงกระดาษคําตอบจากคะแนนสูงสุดมาหาต่ําสุด นําจํานวนผูตอบจากคะแนนสูงสุดลงมา 25% เปนกลุมสูง และจํานวนผูตอบจากคะแนนต่ําสุด 25% เปนกลุมค่ํา ในการวิเคราะหใชเฉพาะผล การสอบของกลุมสูงและกลุมต่ํา ที่เหลือกลุมกลาง 50% ไมนํามาวิเคราะห 3. บันทึกคะแนนของแตละคนในแตละขอ ลงในตาราง โดยแยกตามกลุม รวมคะแนนของแตละขอ ของแตละกลุม 4. วิเคราะหหาคาความยากและอํานาจจําแนก โดยใชสูตรดังนี้ ผลรวมของคะแนนกลุมสูง + ผลรวมของคะแนนกลุมต่ํา คาความยาก = จํานวนคนทั้งสองกลุม x คะแนนเต็ม 2NM ผลรวมของคะแนนกลุมสูง - ผลรวมของคะแนนกลุมต่ํา จํานวนคนในแตละกลุม x คะแนนเต็ม ΣH - ΣL NM หรือ P = ΣH + ΣL คาอํานาจจําแนก = หรือ D = 3. การการวิเคราะหคาอํานาจจําแนก 3.1 ารวิเคราะหอํานาจจําแนกของแบบทดสอบแบบอิงกลุม สูตร D = PH - PL เมื่อ D แทน อํานาจจําแนกของขอสอบรายขอ PH แทน สัดสวนของผูตอบขอสอบถูกในกลุมสูง PL แทน สัดสวนของผูตอบขอสอบถูกในกลุมต่ํา หรือ D = r = NH หรือ NL H - L
- 34. 31 เมื่อ D แทน อํานาจจําแนกของขอสอบรายขอ H แทน จํานวนผูตอบถูกในกลุมสูง L แทน จํานวนผูตอบถูกในกลุมต่ํา NH แทน จํานวนผูตอบทั้งหมดในกลุมสูง NL แทน จํานวนผูตอบทั้งหมดในกลุมต่ํา ตัวอยาง จากผูเขาสอบทั้งหมด 100 คน แบงเปน 3 กลุม กลุมที่ไดคะแนนรวมสูง 27 คน กลุมผูสอนที่ไดคะแนนกลางๆ 46 คน และกลุมผูสอบที่ไดคะแนนรวมต่ํา 27 คน เมื่อแจงนับจํานวนผูตอบขอสอบขอที่ 5 ปรากฏวา ผูสอบในกลุมสูงตอบถูก 25 คน และผูสอบในกลุมกลุม ตอบขอสอบถูก 15 คน จงคํานวณหาคาอํานาจ จําแนกของขอสอบขอที่ 5 27 27 ………… จากโจทย PH = = 0.93 25 PL = = 0.5615 จากสูตร D = PH - PL = 0.93 - 0.56 = 0.37 ดังนั้น คาอํานาจจําแนกของขอสอบขอที่ 5 เทากับ 0,37 กิจกรรมที่ 3.1 จากโจทยตัวอยาง จงคํานวณคาอํานาจจําแนก ขอที่ 5 H = ………., L = …………, NH = NL = …………… จากสูตร r = H - L = NH หรือ NL ……….. = สรุปผลการวิเคราะหคํานวณคาอาจจําแนก ..........................................................................................................................................................
- 35. 32 3.2 การวิเคราะหอํานาจจําแนกของแบบทดสอบแบบอิงเกณฑ สูตร D = Ppost - Ppre D แทน อํานาจจําแนกของขอสอบรายขอ Ppost แทน สัดสวนของผูตอบขอสอบหลังเรียนถูก Ppre แทน สัดสวนของผูตอบขอสอบกอนเรียนถูก ( จากสูตร Cox and Vargs, 1966 cited in Wiersma and Jurs, 1990: 244-245) กิจกรรมที่ 3.2 ผูเขาสอบ 8 จาก 25 คน ตอบขอสอบกอนเรียนขอที่ 4 ไดถูกตอง และเมื่อสอน เสร็จ ผูสอนใหผูเรียนกลุมเดิมตอบแบบทดสอบฉบับเดิมอีกครั้งหนึ่ง ปรากฏวา ผูเรียนตอบขอสอบขอที่ 4 ถูกตอง 20 คน จงหาคาอํานาจจําแนกของขอสอบขอที่ 4 ………………………………………………………………………………………………………………… ………………………………………………………………………………………………………………… ………………………………………………………………………………………………………………… ………………………………………………………………………………………………………………… ………………………………………………………………………………………………………………… ………………………………………………………………… 3. 3 การแปลความหมายคาอํานาจจําแนกของขอสอบ อีเบลและฟริสไบ (Ebel and Frisbi, 1986 : 234) เสนอเกณฑในการพิจารณาคาอํานาจจําแนก ดังนี้ อํานาจจําแนก ผลการประเมินขอสอบ .40 ขึ้นไป เปนขอสอบที่จําแนกไดดีมาก .30 - .39 เปนขอสอบที่จําแนกไดคอนขางดี แตถาเปนไปไดควรปรับปรุง .20 - .29 เปนขอสอบที่จําแนกไดบาง แตควรปรับปรุงแกไข ต่ํากวา .19 เปนขอสอบที่จําแนกไดนอย ควรตัดออกหรือปรับปรุงใหม
- 36. 33 4. การวิเคราะหความเที่ยงหรือความเชื่อมั่น (Reliability) 4.1 การหาคาความเที่ยงดวยวิธีของคูเดอร- ริชารดสัน (Kuder – Richardson) เปนวิธีที่นิยมใชกันมากเนื่องจากทดสอบกับกลุมตัวอยางเพียงครั้งเดียว แบงยอยเปน 2 สูตร KR-20 และ KR-21 โดยมีขอตกลงวาแบบทดสอบฉบับนั้นจะตองวัดลักษณะเดียวกันหรือวัดองคประกอบรวมกัน และมีระบบการใหคะแนนเปน Dichotomous คือ ตอบถูกให 1 คะแนน ตอบผิดให 0 คะแนน KR-21 ใชใน กรณีเครื่องมือหรือแบบทดสอบมีความยากเทากันซึ่งในทางปฏิบัติเปนไปไมไดยาก จึงตองใชมีวิธีการคํานวณ จากสูตร KR – 20 ดังนี้ สูตร ⎥ ⎥ ⎦ ⎤ ⎢ ⎢ ⎣ ⎡ − − =− ∑ 2 1 1 20 S pq k k KR เมื่อ k แทน จํานวนขอสอบ S2 แทน ความแปรปรวนของคะแนนรวมทั้งฉบับ p แทน สัดสวนของคนทําถูกในแตละขอ q แทน สัดสวนของคนทําผิดในแตละขอ (q = 1-p) ตัวอยาง ผลการสอบของนักเรียน 6 คน ขอสอบ 6 ขอ ดังตาราง ขอสอบ รวมคะแนน นักเรียน 1 2 3 4 5 6 X X2 1 2 3 4 5 6 1 1 0 0 1 1 1 1 1 0 1 0 1 1 1 1 0 0 1 1 1 1 0 0 1 1 1 1 0 0 1 1 1 1 0 0 6 6 5 4 2 1 36 36 25 16 4 1 P Q pq 4/6 2/6 8/36 4/6 2/6 8/36 4/6 2/6 8/36 4/6 2/6 8/36 4/6 2/6 8/36 4/6 2/6 8/36 ΣX = 24 Σ X2 = 118 Σpq = 1.33 S2 = 4.4 ⎥⎦ ⎤ ⎢⎣ ⎡ −=− ........... ......... 1 ....... ...... 20KR = ……………………..
- 37. 34 4.2 การหาความเที่ยงดวยวิธีของครอนบัค(Cronbach) การหาความเที่ยงหรือความเชื่อมั่นของแบบสอบถาม นิยมใชวิธีของครอนบาค ใชกับ แบบสอบถามที่ใหคะแนนแบบเรียงอันดับ หรือเปนมาตราสวนประมาณคา (rating scale) วิธีนี้เรียกวา การหา คาสัมประสิทธิ์แอลฟา (α -Coefficient) ซึ่งดัดแปลงมาจากสูตร KR – 20 ดังนี้ α = ⎥ ⎦ ⎤ ⎢ ⎣ ⎡ ∑ − − 2 t 2 i S S 1 1n n เมื่อ α = สัมประสิทธิ์ความเที่ยง (สัมประสิทธิ์แอลฟา) n = จํานวนคําถาม ∑ =2 iS ผลรวมของความแปรปรวนของคะแนนในแตละขอ =2 tS ความแปรปรวนของคะแนนรวมทั้งฉบับ ตัวอยาง จากแบบสอบถาม แบบประมาณคา 5 ระดับ จํานวน 6 ขอ ผูตอบ 6 คน ขอสอบ รวมคะแนน นักเรียน 1 2 3 4 5 6 X X2 1 2 3 4 5 6 4 4 3 3 4 2 4 4 3 3 3 1 4 3 2 4 3 1 3 3 4 2 1 2 4 3 3 2 2 1 3 4 3 2 2 1 22 21 18 16 15 8 484 441 324 256 225 64 ∑ i ∑ 2 i 2 tS 20 70 .67 18 60 1.19 17 55 1.37 15 43 1.10 15 43 1.10 15 43 1.10 ΣX = 100 Σ X2 = 1,794 ∑ 2 iS = 6.53 2 tS = 25.47 ⎥⎦ ⎤ ⎢⎣ ⎡ −= ........... ......... 1 ....... ...... α = ……………………..
- 38. 35 การพิจารณาคาความยาก(p) และอํานาจจําแนก( r, D) แบบทดสอบ ตารางเกณฑการพิจารณาคาความยากงาย(p) ของตัวเลือกถูก คา p รอยละ คา p สัดสวน แปลความหมาย ตีความหมาย ผลการพิจารณา 100 1.00 ตอบถูกทุกคน งายมาก ไมควร 80 .80 ตอบถูก 80% คอนขางงาย ถามากกวานี้ไมควรใช 50 .50 ตอบถูกครึ่งหนึ่ง ยากปานกลาง คุณภาพดีมาก 20 .20 ตอบถูก 20% คอนขางยาก ถานอยกวานี้ไมควรใช 00 .00 ไมมีคนตอบถูก ยากมาก ไมควรใช ตารางเกณฑการพิจารณาคาอํานาจจําแนก (r,D) ของตัวเลือกถูก คา r (D) แปลความหมาย ตีความหมาย ผลการพิจารณา 100 กลุมสูงถูกหมด กลุมต่ําผิดหมด จําแนกไดสูงมาก เปนขอสอบที่มีคุณภาพ .50 กลุมสูงตอบถูกมากกวากลุมต่ํา จําแนกไดคอนขางสูง คุณภาพดี .20 กลุมสูงตอบถูกมากกวากลุมต่ําเล็กนอย จําแนกไดพอใช คุณภาพดีมาก .00 กลุมสูงและกลุมต่ําทําถูกเทากัน จําแนกไมได ถานอยกวานี้ไมควรใช -1.00 กลุมต่ําทําถูกหมดกลุมสูงทําผิดหมด จําแนกทางตรงขาม(ทาง ลบ)ไดอยางสมบูรณ ไมควรใช ตารางเกณฑการพิจารณาคา p, r (D) ตัวลวง คา p คุณภาพ ผลการพิจารณา คา r (D) คุณภาพ ผลการพิจารณา .00 - .04 ใชไมได ไมมีคุณภาพ คาติดลบ .00 - .04 ใชไมได ใชไมได ไมมีคุณภาพ .05 - .09 .01 - .30 .31 - .50 พอใช ใชได พอใช มีคุณภาพ .05 - .09 .10 - .30 .31 - .50 พอใช ใชได พอใช คุณภาพดี .51 - 1.00 ใชไมได ไมมีคุณภาพ .50 - 1.00 ใชไมได ไมมีคุณภาพ