การทดลองแนวทางใหม่ในห้องเรียนมักมีคะแนนก่อนและหลังเรียน แต่คะแนนที่เปลี่ยนไปเพียงอย่างเดียวยังแยกไม่ได้ว่าเกิดจากกิจกรรมใหม่ หรือปัจจัยอื่น เช่น การฝึกทำข้อสอบ เหตุการณ์ระหว่างภาคเรียน หรือพัฒนาการตามเวลา บทความนี้ช่วยวางแผนการเปรียบเทียบและรายงานข้อมูลให้ผู้อ่านเห็นว่าหลักฐานบอกอะไรได้บ้าง
เริ่มจากคำถามและขอบเขตข้อสรุป
- ถ้าต้องการติดตามพัฒนาการของห้องเรียนตนเอง การวัดก่อน–หลังอาจช่วยตอบคำถามเชิงพัฒนาได้ โดยระบุข้อจำกัดของการไม่มีกลุ่มเปรียบเทียบ (ดู[บทความเรื่องการวิเคราะห์ก่อน–หลังเรียน](/knowledge/pre-post-analysis-ttest-effect-size-gain))
- ถ้าต้องการเปรียบเทียบแนวทาง ควรวางแผนกลุ่มที่ได้รับแนวทางใหม่และกลุ่มเปรียบเทียบตั้งแต่ก่อนเริ่มเก็บผลลัพธ์ และบอกให้ชัดว่ากลุ่มถูกเลือกหรือจัดอย่างไร
- การสุ่มจัดกลุ่มอาจทำไม่ได้ในบริบทโรงเรียน หากใช้ห้องเรียนเดิมเป็นกลุ่มเปรียบเทียบ ให้บันทึกความแตกต่างของผู้เรียนและบริบทก่อนเริ่ม ไม่ควรสรุปว่ากลุ่มเทียบเท่ากันเพียงเพราะอยู่ระดับชั้นเดียวกัน
วางแผนการเปรียบเทียบ
- ระบุผลลัพธ์หลักที่ตอบคำถามวิจัย เช่น คะแนนความเข้าใจในการอ่าน และกำหนดเครื่องมือกับช่วงเวลาวัดล่วงหน้า
- บันทึกวิธีเลือกกลุ่ม จำนวนผู้เรียน ลักษณะสำคัญของบริบท และข้อมูลตั้งต้นก่อนใช้แนวทางใหม่
- ใช้เครื่องมือและกำหนดเวลาวัดให้เทียบกันได้ พร้อมจดว่ากลุ่มใดได้รับกิจกรรมอะไร นานเท่าใด และมีการเปลี่ยนแปลงจากแผนหรือไม่
- ตรวจว่ามีการขาดเรียน ย้ายห้อง ขาดการทดสอบ หรือข้อมูลไม่ครบกี่คนในแต่ละกลุ่ม พร้อมระบุเหตุผลเท่าที่ทราบ
- วิเคราะห์และรายงานตามแบบวิจัยที่เลือก หากกลุ่มเริ่มต้นต่างกัน ต้องพิจารณาวิธีวิเคราะห์ที่เหมาะสมหรือเปิดเผยความต่างนั้นอย่างตรงไปตรงมา
รายงานข้อมูลที่ขาดหาย
- แสดงจำนวนผู้เรียนตั้งแต่เริ่มต้นจนถึงจำนวนที่นำมาวิเคราะห์ แยกตามกลุ่มและช่วงการเก็บข้อมูล
- บอกจำนวนและเหตุผลที่ข้อมูลหาย เช่น ขาดสอบ ย้ายสถานศึกษา หรือแบบวัดไม่สมบูรณ์ อย่าตัดข้อมูลออกโดยไม่อธิบาย
- พิจารณาว่าผู้ที่ไม่มีข้อมูลอาจแตกต่างจากผู้ที่เหลือหรือไม่ เพราะการสูญเสียผู้เข้าร่วมอาจทำให้ผลที่เห็นเอนเอียง
- ถ้ารายงานค่าเฉลี่ยหรือสถิติของกลุ่มที่เหลือ ให้ระบุจำนวนที่ใช้คำนวณควบคู่กัน
เช็กลิสต์ก่อนสรุปผล
- คำถามวิจัย วิธีเลือกกลุ่ม และผลลัพธ์ที่วัดสอดคล้องกัน
- ผู้อ่านทราบว่ากลุ่มเปรียบเทียบเกิดขึ้นอย่างไร และแตกต่างจากกลุ่มที่ได้รับแนวทางใหม่อย่างไร
- มีจำนวนผู้เรียนที่ขาดข้อมูลและเหตุผล ไม่รายงานเฉพาะผู้ที่ทำกิจกรรมครบ
- ใช้ถ้อยคำให้ตรงกับแบบวิจัย หากไม่มีการสุ่มหรือหลักฐานรองรับเพียงพอ ควรสรุปว่า “พบการเปลี่ยนแปลงร่วมกับแนวทาง” แทนการยืนยันว่าแนวทางเป็นสาเหตุเพียงอย่างเดียว
คู่มือ What Works Clearinghouse ของสหรัฐฯ เป็นแหล่งช่วยคิดเรื่องความเทียบเคียงของกลุ่มและการสูญเสียตัวอย่าง ไม่ใช่เกณฑ์บังคับสำหรับงานวิทยฐานะไทย ควรตรวจข้อกำหนดของหน่วยงานและบริบทการวิจัยของตนด้วย
แหล่งอ้างอิง
- What Works Clearinghouse. (2022, revised December 2022). Procedures and Standards Handbook, Version 5.0.
- What Works Clearinghouse. WWC Standards Brief for Attrition.
[คู่มือมาตรฐานการทบทวนงานวิจัยด้านการศึกษาของ WWC](https://ies.ed.gov/ncee/wwc/Handbooks) [คำอธิบายเรื่องการสูญเสียกลุ่มตัวอย่างของ WWC](https://ies.ed.gov/ncee/wwc/Docs/ReferenceResources/WWC-Attrition-Brief-v4_508_updated.pdf)
เนื้อหาใช้เป็นแนวทางประกอบการพัฒนาผลงานวิชาการ — เกณฑ์ทางการให้ยึดประกาศล่าสุดของ ก.ค.ศ. เสมอ พบข้อผิดพลาด? แจ้งทีมงาน