EUVIMEDEUVIMED entdecken
Crossref

Penilaian Esai Pendek Otomatis Berdasarkan Similaritas Semantik dengan SBERT

Nurul Chamidah, Mayanda Mega Santoni, Helena Nurramdhani Irmanda, Ria Astriratma, Yulnelly Yulnelly

Techno.Com · 30.11.2022 · 21 (4) · 732-740

DOI: 10.33633/tc.v21i4.6758 ↗

Kurz gefasst

Fachartikel in der Zeitschrift Techno.Com, online erschienen am 30.11.2022. Verfasst von Nurul Chamidah und 4 weiteren Autor:innen. Die Arbeit wurde bisher 2-mal zitiert (Crossref).

AbstractBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Ujian dalam bentuk soal esai dianggap lebih baik dalam mengukur pemahaman dari pada soal berbentuk pilihan. Namun, jawaban esai memerlukan waktu dan tenaga lebih banyak untuk dievaluasi dan sering terjadi inkonsistensi. Maka dari itu, diperlukan suatu sistem penilaian esai otomatis yang dapat membantu evaluator dalam memberikan nilai dengan lebih cepat dan lebih konsisten. Penelitian ini bertujuan untuk mengevaluasi performa model penilaian esai otomatis dimana teks esai jawaban uji dan kunci jawaban dibandingkan secara semantik untuk mengetahui seberapa besar persamaan antara teks jawaban uji dan kunci jawaban. Semantik dari teks esai diperoleh dengan melakukan word embeddings dengan memanfaatkan model bahasa pretrained Siamese-BERT (SBERT) yang mentransformasi teks esai menjadi vektor sepanjang 512. Proses penilaian esai otomatis ini dimulai dengan praproses pada teks dengan menerapkan case folding, berikutnya word embeddings pada teks yang telah di praproses dengan SBERT. Vektor numerik dari kunci jawaban dan jawaban uji hasil word embeddings kemudian dibandingkan dengan Cosine Similarity untuk mendapatkan similaritas semantik sekaligus nilai esai yang merupakan output model. Evaluasi model penilaian esai otomatis ini dilakukan dengan membandingkan nilai dari model dengan nilai dari evaluator manusia. Pengukuran yang dipakai untuk mengukur performa penilaian esai otomatis ini adalah adalah dengan menghitung Mean Absolute Error (MAE) dan Pearson Correlation, dimana hasil penelitian ini menunjukan nilai rata-rata MAE sebesar 0.26 dan rata-rata korelasi sebesar 0.78.

Zitieren

APA

Chamidah, N., Santoni, M. M., Irmanda, H. N., Astriratma, R., & Yulnelly, Y. (2022). Penilaian Esai Pendek Otomatis Berdasarkan Similaritas Semantik dengan SBERT. Techno.Com, 21(4), 732-740. https://doi.org/10.33633/tc.v21i4.6758

Vancouver

Chamidah N, Santoni MM, Irmanda HN, Astriratma R, Yulnelly Y. Penilaian Esai Pendek Otomatis Berdasarkan Similaritas Semantik dengan SBERT. Techno.Com. 2022;21(4):732-740. doi:10.33633/tc.v21i4.6758

BibTeX
@article{Chamidah2022,
  author = {Chamidah, Nurul and Santoni, Mayanda Mega and Irmanda, Helena Nurramdhani and Astriratma, Ria and Yulnelly, Yulnelly},
  title = {Penilaian Esai Pendek Otomatis Berdasarkan Similaritas Semantik dengan SBERT},
  journal = {Techno.Com},
  year = {2022},
  volume = {21},
  number = {4},
  pages = {732--740},
  doi = {10.33633/tc.v21i4.6758}
}
Kostenlos starten →