EUVIMEDEUVIMED entdecken
Open Access · CC BY 4.0

Penerapan Algoritma Sentence-BERT dan Cosine Similarity pada Sistem Penilaian Otomatis Jawaban Esai Terbatas

Alvianto Ramadana, Jumadil Nangi, La Surimi, Ilham Julian Efendi

Indonesian Journal of Innovation Multidisipliner Research · 17.11.2026 · 4 (4) · 5050-5059

DOI: 10.69693/ijim.v4i4.3503 ↗

Kurz gefasst

Fachartikel in der Zeitschrift Indonesian Journal of Innovation Multidisipliner Research, online erschienen am 17.11.2026. Verfasst von Alvianto Ramadana und 3 weiteren Autor:innen. Die Arbeit nennt 20 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0).

AbstractBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Penilaian jawaban esai terbatas secara manual memerlukan waktu pemeriksaan yang relatif panjang dan berpotensi menghasilkan perbedaan skor antarpemeriksa. Penelitian ini bertujuan mengembangkan sistem penilaian otomatis berbasis web dengan mengintegrasikan Sentence-BERT dan Cosine Similarity, serta mengevaluasi kinerja model dan penerimaan pengguna. Pengembangan perangkat lunak mengikuti tahapan Rational Unified Process, yaitu inception, elaboration, construction, dan transition. Jawaban siswa dan kunci jawaban diolah menjadi representasi semantik melalui model Sentence-BERT dan mean pooling, kemudian dibandingkan menggunakan Cosine Similarity dan dikonversi menjadi skor. Implementasi aplikasi memanfaatkan Python, Flask, dan SQLite. Evaluasi algoritma dilakukan terhadap 48 jawaban esai siswa program keahlian Teknik Jaringan Komputer dan Telekomunikasi di SMKN 1 Kendari. Kinerja sistem diukur menggunakan akurasi, F1-score, dan Quadratic Weighted Kappa, sedangkan kelayakan penggunaan dinilai melalui User Acceptance Testing terhadap 18 siswa dan seorang guru. Hasil pengujian jawaban siswa nyata memperoleh akurasi sebesar 81,25%, Weighted-F1 sebesar 82,64%, dan Quadratic Weighted Kappa sebesar 0,8125. Tingkat penerimaan pengguna mencapai 88,74%, dengan persentase penerimaan siswa sebesar 89,17% dan guru sebesar 80,00%. Temuan menunjukkan bahwa pendekatan kesamaan semantik dapat mendukung pemeriksaan esai pendek, tetapi validasi pengajar tetap diperlukan, khususnya untuk jawaban ambigu dan variasi konsep yang tidak tercakup dalam kunci jawaban tunggal. Evaluasi ini memberikan bukti awal mengenai pemanfaatan teknologi penilaian berbasis semantik dalam pembelajaran kejuruan.

Zitieren

APA

Ramadana, A., Nangi, J., Surimi, L., & Efendi, I. J. (2026). Penerapan Algoritma Sentence-BERT dan Cosine Similarity pada Sistem Penilaian Otomatis Jawaban Esai Terbatas. Indonesian Journal of Innovation Multidisipliner Research, 4(4), 5050-5059. https://doi.org/10.69693/ijim.v4i4.3503

Vancouver

Ramadana A, Nangi J, Surimi L, Efendi IJ. Penerapan Algoritma Sentence-BERT dan Cosine Similarity pada Sistem Penilaian Otomatis Jawaban Esai Terbatas. Indonesian Journal of Innovation Multidisipliner Research. 2026;4(4):5050-5059. doi:10.69693/ijim.v4i4.3503

BibTeX
@article{Ramadana2026,
  author = {Ramadana, Alvianto and Nangi, Jumadil and Surimi, La and Efendi, Ilham Julian},
  title = {Penerapan Algoritma Sentence-BERT dan Cosine Similarity pada Sistem Penilaian Otomatis Jawaban Esai Terbatas},
  journal = {Indonesian Journal of Innovation Multidisipliner Research},
  year = {2026},
  volume = {4},
  number = {4},
  pages = {5050--5059},
  doi = {10.69693/ijim.v4i4.3503}
}
Kostenlos starten →