TEXT
RANCANG BANGUN APLIKASI PENILAIAN ESSAI OTOMATIS BAGI SMK MUHAMMADIYAH 1 SURABAYA MENGGUNAKAN MODEL PROTOTYPE
ABSTRAK
Evaluasi pembelajaran di SMK Muhammadiyah 1 Surabaya, khususnya pada
program keahlian Teknik Jaringan Komputer dan Telekomunikasi (TKJ), masih
mengandalkan koreksi esai secara manual. Proses ini dinilai kurang efisien karena
membutuhkan waktu 2 hingga 3 hari kerja per rombongan belajar dan rentan
terhadap inkonsistensi penilaian akibat faktor kelelahan guru. Untuk mengatasi
masalah tersebut, penelitian ini bertujuan merancang dan membangun Aplikasi
Penilaian Esai Otomatis (Automated Essay Scoring) menggunakan Large Language
Models (LLM) dengan pendekatan Zero-Shot Learning. Algoritma sistem
mengadaptasi kerangka kerja Multi-Trait Specialization berbasis rubrik guru untuk
membedah jawaban siswa dan menghasilkan nilai yang objektif pada skala 0-100,
dilengkapi dengan laporan umpan balik terstruktur (Explainable AI).
Pengembangan perangkat lunak dilakukan menggunakan model Prototype yang
bersifat iteratif. Evaluasi dan pengujian sistem menggunakan tiga metode utama:
Black Box Testing, System Usability Scale (SUS), dan kelayakan standar ISO
9126-3. Hasil pengujian Black Box dengan teknik Equivalence Partitioning
menunjukkan tingkat keberhasilan fungsionalitas sebesar 100% dari 77 skenario
uji. Pengukuran tingkat kepuasan pengguna (SUS) yang melibatkan 40 responden
memperoleh skor 74,75 yang masuk ke dalam kategori "Excellent" (Keunggulan
Tinggi). Uji kelayakan berdasarkan ISO 9126-3 pada aspek Functionality, Usability,
Efficiency, dan Portability mencapai rata-rata keseluruhan 84,72% dengan kriteria
"Sangat Layak". Sistem ini terbukti andal dalam memangkas beban kerja
administratif guru serta memberikan transparansi evaluasi formatif yang cepat bagi
siswa.
Kata Kunci: Automated Essay Scoring, Large Language Models, Zero-Shot
Learning, Model Prototype, Explainable AI, ISO 9126-3.
| S06-26361 | Tersedia |
Tidak tersedia versi lain