Development of Partial Knowledge Scoring Methods and Comparison of Psychometric Properties in Multiple True-False Tests

Authors

  • Pakjira Bowornthammarat
  • Nuttaporn Lawthong

Keywords:

Multiple True-False Test, Partial Knowledge Scoring Method, Psychometric properties

Abstract

The purposes of this research were to develop the partial knowledge scoring method of the Multiple True-False test (MTF) and to compare the psychometric properties of partial knowledge that using Count-2 method, Partial Scoring 50 method (PS50), Let Omit method (LO) and Modified Let Omit method (MLO). The sample were 1,178 twelfth grade Mathematic-Science program students from secondary school in Bangkok. Research instrument was “Organic Chemistry” Multiple True-False test with 20 items.

The results revealed 1) MLO scoring method was developed from LO. 2) Using different scoring method results in approximate reliability coefficient of 0.70. Count-2 produced highest reliability coefficient. Moreover, Count-2 also had highest discriminant index. Count-2 and MLO provided discriminant index more than 0.2. 1 item and 3 items had 0.2 below discriminant index when using PS50  and LO, respectively.

References

โชติกา ภาษีผล, ณัฏฐภรณ์ หลาวทอง, กมลวรรณ ตังธนกานนท์ (2559). การวัดและประเมินผลการเรียนรู้. สำนักพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.

ณัฐภรณ์ เลขะวัฒนพงษ์. (2560). การเปรียบเทียบคุณภาพของวิธีการตรวจให้คะแนนความรู้บางส่วน: การพัฒนาวิธีประยุกต์การให้คะแนนแบบตัดตัวลวง-เลือกตัวถูก, วิทยานิพนธ์มหาบัณฑิต. Chulalongkorn University Intellectual Repository (CUIR). http://cuir.car.chula.ac.th/handle/123456789/59866

ศิริชัย กาญจนวาสี. (2556). ทฤษฎีการทดสอบแบบดั้งเดิม (พิมพ์ครั้งที่ 7). โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย

สุพจน์ เกิดสุวรรณ์. (2545). การพัฒนาการวัดความรู้บางส่วนของผู้ตอบแบบสอบเลือกตอบ, วิทยานิพนธ์ดุษฎีบัณฑิต. Chulalongkorn University Intellectual Repository (CUIR). http://cuir.car.chula.ac.th/handle/123456789/10575

อรพรรณ แก้วน้อย. (2557). การเปรียบเทียบคุณสมบัติทางจิตมิติของแบบสอบถูกผิดหลายตัวเลือกกับแบบสอบถูกผิดหลายตัวเลือกปรับปรุงใหม่ที่ใช้วิธีการตรวจให้คะแนนที่ต่างกัน, วิทยานิพนธ์มหาบัณฑิต. Chulalongkorn University Intellectual Repository (CUIR). http://cuir.car.chula.ac.th/handle/123456789/46275

เอมอร จังศิริพรปกรณ์. (2545). การเปรียบเทียบคุณภาพของแบบสอบเลือกตอบเมื่อตรวจด้วยวิธีการให้คะแนนความรู้บางส่วนกับวิธีประเพณีนิยม. Chulalongkorn University Intellectual Repository (CUIR). http://cuir.car.chula.ac.th/handle/123456789/2181

Baghaei, P. & Dourakhshan, A. (2016). Properties of Single-Response and Double-Response Multiple-Choice Grammar Items. International Journal of Language Testing, 6(1), 33-42.

Brad, W. (2003). Scoring Multiple True False Items: A Comparison of Summed Scores and Response Pattern Scores at Item and Test Levels. University of Washington.

Grandy, J. (1987). Characteristics of examinees who leave questions unanswered on the GRE general test under right-only scoring. Educational testing service.

Kanzow, P., Schuelper, N., Witt, D., Wassmann, T., Sennhenn-Kirchner, S. Wiegand, A., & Raupach, T. (2018). Effect of different scoring approaches upon credit assignment when using Multiple True-False items in dental undergraduate examinations. European journal of dental education, 22(4), e669-e678.

McGahee, T. & Ball, J. (2009). How to read and really use an item analysis. Nurse Educator, 34(4), 166-171

Tsai, F., Suen, H.K., (1993) A brief report on a comparison of six scoring methods for multiple true-false items. Educational and Psychological Measurement, 53, 399-404.

Downloads

Published

2023-12-28

How to Cite

Bowornthammarat, P., & Lawthong, N. (2023). Development of Partial Knowledge Scoring Methods and Comparison of Psychometric Properties in Multiple True-False Tests. Muban Chombueng Rajabhat University Research Journal (Humanities and Social Science), 11(2), 110–124. Retrieved from https://so03.tci-thaijo.org/index.php/hssj/article/view/261461

Issue

Section

Research Articles