EUVIMEDEUVIMED entdecken
Open Access · CC BY-NC-SA 4.0

Rancang Bangun Penerjemah BISINDO Real-time Berbasis Kamera dan Deep Learning dengan Kendali Suara ESP32 WiFi

I Gusti Agung Made Yoga Mahaputra, Putri Alit Widyastuti Santiary, I Ketut Swardika

Jurnal Elektro dan Mesin Terapan · 2025

DOI: 10.35143/elementer.v11i1.6578 ↗

Kurz gefasst

Fachartikel in der Zeitschrift Jurnal Elektro dan Mesin Terapan, 2025. Verfasst von I Gusti Agung Made Yoga Mahaputra und 2 weiteren Autor:innen. Der Volltext ist frei zugänglich (Open Access, CC BY-NC-SA 4.0).

AbstractBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Bahasa Isyarat Indonesia (BISINDO) merupakan sarana komunikasi utama bagi komunitas tunarungu. Namun, keterbatasan pemahaman masyarakat umum serta minimnya teknologi penerjemah real-time yang praktis menjadi kendala dalam komunikasi dua arah. Sebagian besar penelitian sebelumnya berfokus pada bahasa isyarat asing atau menggunakan sarung tangan sensor yang kurang fleksibel. Penelitian ini merancang sistem penerjemah BISINDO berbasis kamera real-time yang mengubah gesture menjadi suara melalui mikrokontroler ESP32. Sistem memanfaatkan model deep learning CNN-LSTM di Python untuk mengklasifikasikan gestur huruf A hingga J, kemudian mengirimkan hasil klasifikasi secara nirkabel ke ESP32 yang mengaktifkan keluaran suara. Dataset dikumpulkan secara mandiri, dengan preprocessing dan augmentasi untuk mendukung pelatihan model. Hasil evaluasi menunjukkan akurasi klasifikasi sebesar 91,4%, precision 89,7%, recall 90,5%, dan F1-score 89,9%. Latensi komunikasi rata-rata tercatat 3,1 detik, sementara tingkat keberhasilan keluaran suara mencapai 86,7%. Sistem ini terbukti cukup andal dalam menerjemahkan gestur secara otomatis dan real-time, serta berpotensi dikembangkan lebih lanjut sebagai alat bantu komunikasi inklusif bagi penyandang disabilitas rungu di Indonesia. Penelitian ini dapat menjadi landasan awal dalam pengembangan alat bantu komunikasi inklusif bagi penyandang disabilitas rungu di masa mendatang.

Zitieren

APA

Mahaputra, I. G. A. M. Y., Santiary, P. A. W., & Swardika, I. K. (2025). Rancang Bangun Penerjemah BISINDO Real-time Berbasis Kamera dan Deep Learning dengan Kendali Suara ESP32 WiFi. Jurnal Elektro dan Mesin Terapan. https://doi.org/10.35143/elementer.v11i1.6578

Vancouver

Mahaputra IGAMY, Santiary PAW, Swardika IK. Rancang Bangun Penerjemah BISINDO Real-time Berbasis Kamera dan Deep Learning dengan Kendali Suara ESP32 WiFi. Jurnal Elektro dan Mesin Terapan. 2025. doi:10.35143/elementer.v11i1.6578

BibTeX
@article{Mahaputra2025,
  author = {Mahaputra, I Gusti Agung Made Yoga and Santiary, Putri Alit Widyastuti and Swardika, I Ketut},
  title = {Rancang Bangun Penerjemah BISINDO Real-time Berbasis Kamera dan Deep Learning dengan Kendali Suara ESP32 WiFi},
  journal = {Jurnal Elektro dan Mesin Terapan},
  year = {2025},
  doi = {10.35143/elementer.v11i1.6578}
}
Kostenlos starten →