Electronic Theses and Dissertation

Pendidikan secara umum akan dinilai dalam bentuk tes kemampuan. estimasi skor kemampuan dapat dilakukan melalui pendekatan classical test theory (ctt) maupun item response theory (irt). hasil perhitungan menggunakan pendekatan ctt kurang sensitif terhadap karakteristik butir seperti tingkat kesulitan butir, daya pembeda butir, dan efek tebakan. irt merupakan teori yang dikembangkan untuk memperbaiki keterbatasan yang dimiliki ctt. teori irt membuat setiap soal memiliki bobot nilai yang berbeda tergantung dari tingkat kesulitan soal. penelitian ini mengimplementasikan irt pada sistem penilaian kuis, membandingkan hasil ctt dan irt kemudian menganalisis fungsionalitas dan usability dari sistem penilaian kuis. rancang bangun sistem mengikuti alur pada metode extreme programming. sistem ini dibangun dengan menggunakan framework adonis js. sistem penilaian kuis yang telah dibangun diujicoba dengan melibatkan 50 orang responden menggunakan 30 butir soal dengan 5 pilihan jawaban. data yang terkumpul lalu dihitung menggunakan irt melalui script r. dari hasil perhitungan didapatkan 15 butir soal tergolong mudah dan 15 butir soal tergolong sulit. hasil perhitungan lalu digunakan untuk membandingkan peringkat yang didapat antara perhitungan irt dengan ctt. hasil perbandingan terhadap 50 responden menunjukkan perbedaan yaitu terdapat 14 responden mengalami kenaikan peringkat, 19 responden mengalami penurunan peringkat, serta sisanya yaitu 17 responden tidak mengalami perubahan peringkat. sistem yang telah dibangun diuji fungsionalitasnya menggunakan metode blackbox testing memperoleh hasil bahwa seluruh fitur dan fungsi aplikasi yang telah dibangun berhasil berjalan dengan baik. sedangkan pengujian usability yang dilakukan pada 23 orang responden menggunakan system usability scale (sus) memperoleh skor akhir 79,7%. berdasarkan hal tersebut dapat disimpulkan bahwa aplikasi yang telah dibangun memiliki grade scale c dan adjective rating excellent sehingga dapat diterima oleh pengguna. kata kunci : item response theory, classical test theory, sistem penilaian kuis, black box testing, system usability scale.