Techno.COM, Vol. 20, No. 1, Februari 2021: 19-27 19 Pencocokan Berbasis Kata Kunci pada Penilaian Esai Pendek Otomatis Berbahasa Indonesia Keyword Matching-Based on Short Essay Autograding in Indonesian Nurul Chamidah 1 , Mayanda Mega Santoni 2 1,2, Fakultas Ilmu Komputer, Universitas Pembangunan Nasional Veteran Jakarta E-mail: 1 nurul.chamidah@upnvj.ac.id, 2 megasantoni@upnvj.ac.id Abstrak Evaluasi dalam pengajaran dapat dilakukan melalui ujian. Ujian berupa esai dapat digunakan untuk mengevaluasi pemahaman sesuai konteks dan memiliki jawaban referensi. Sayangnya, jawaban dari esai ini membutuhkan waktu yang lebih banyak untuk dievaluasi dan dapat terjadi inkonsistensi dalam melakukan penilaian. Penelitian ini dilakukan untuk menganalisis performa untuk penilaian esai pendek otomatis berbahasa Indonesia untuk mengevaluasi jawaban yang berbentuk esai pendek. Sehingga, penilaian terhadap jawaban esai lebih konsisten dan dapat digunakan sebagai alternatif untuk penilaian dalam ujian online. Penilaian esai dilakukan dengan menghitung kecocokan antara jawaban uji dengan jawaban referensi, yakni dengan meilihat kata kunci dari masing-masing jawaban. Kata kunci diperoleh dengan melakukan praproses pada teks yakni dengan case folding, pembuangan stopword, stemming, dan tokenisasi. Setelah mendapatkan kata kunci untuk jawaban uji dan jawaban referensi, pada tahap keyword matching dilakukan pencocokan jawaban uji terhadap jawaban referensi. Hasil kecocokan antara jawaban uji dan referensi selanjutnya dihitung menjadi nilai pada tahapan grading. Nilai yang diperoleh dari grading selanjutnya dibandingkan dengan nilai uji sebagai evaluasi performa dengan menghitung Mean Absolute Error (MAE) dan Pearson Correlation. Hasil dari penelitian ini menunjukkan MAE untuk keseluruhan jawaban uji sebesar 0.25 dan korelasi antara nilai uji dengan nilai hasil grading sebesar 0.79. Kata kunci: Penilaian Otomatis, Esai, Esai Pendek, Pencocokan Kata Kunci Abstract Teaching evaluation can be done through examinations. Essay exam models can be used to evaluate student understanding according to context and this type of exam has reference answers. Unfortunately, Essay’s answer needs extra time to check and there can be inconsistencies in grading. This research was conducted to analyze keyword matching-based methods to evaluate short essays answers in Indonesian. Thus, essay answers grading is more consistent and can be used as an alternative in online exams grading. Essay grading is done by calculating keywords match between the test answer’s keywords and the reference answers’s keyword. Keywords are obtained by case folding, stopword removal, stemming, and tokenization. After getting the keywords for the test answers and the reference answers, we carried out a matching process between these keywords. The result of the match between the test answer and the reference is then calculated at the grading stage. The value obtained from grading is then compared with the test value as a performance evaluation by calculating the Mean Absolute Error (MAE) and Pearson Correlation. The results of this study indicate that the MAE for all test answers is 0.25 and the correlation between the test value and the grading result value is 0.79 Keywords: Autograding, Essay, Short Essay, Keywords Matching