IMPLEMENTASI BOX TRANSLATOR BAGI TUNARUNGU MENGGUNAKAN ESP32 DENGAN FITUR SPEECH-TO-TEXT DAN TAMPILAN SECARA REAL-TIME
Keywords:
Box Translator, tunarungu, ESP32, speech-to-text, real-timeAbstract
Penyandang tunarungu mengalami hambatan dalam menerima informasi lisan sehingga pada aktivitas sehari-hari menjadi kurang efektif. Kondisi tersebut menunjukkan perlunya teknologi bantu yang mampu mengubah informasi suara menjadi bentuk visual. Penelitian ini bertujuan merangcang dan mengimplementasikan Box Translator berbasis ESP32 dengan fitur Speech-to-text dan tampilan secara real-time sebagao alat bantu komunikasi bagi penyandang tunarungu.
Metode penelitian yang digunakan adalah Research and Development (R&D) yang meliputi tahap studi pendahuluan dan analisis kebutuhan, perancangan sistem, pengembangan prototipe, serta pengujian dan evaluasi. Sistem dikembangkan dengan mengintegrasikan ESP32 sebagai pusat kendali dan penyedia jaringan lokal, dan web sebagai media pengenalan suara, serta layar LCD sebagai media untuk menampilkan hasil transkripsi.
Proses kerja sistem dimulai ketika suara diterima melalui mikrofon pada perangkat pengguna, kemudia dikonversi menjadi teks menggunakan fitur speech-to-text pada web. Hasil transkripsi selanjutnya dikirimkan menuju ESP32 dan ditampilkan pada layar LCD agar dapat dibaca oleh pengguna. Pengujian sistem mencakup akses halaman web, fungsi tombol Mulai, Stop, dan Bersihkan Teks, proses pengenalan suara, pengiriman teks menuju ESP32, tampilan LCD, serta penggunaan sistem secara berulang.
Hasil pengujian menunjukkan bahwa seluruh fungsi utama sistem dapat berjalan dengan baik. Sistem memperoleh tingkat akurasi pengenalan suara sebesar 91,13% dengan waktu respons sekitar 2-3 detik. Kinerja terbaik diperoleh ketika sumber suara berada pada jarak 15-30 cm dalam lingkungan relatif tenang. Berdasarkan hasil tersebut, prototipe Box Translator dinyatakan dapat digunakan sebagai alat bantu visualisasi percakapan bagi penyandang tunarungu, terutama pada lingkungan dengan tingkat kebisingan rendan hingga rendah.
References
Afriani, L., Tinggi Ilmu Hukum Awang Long, S., & Tinggi Agama Islam Al-Muntahy, S. (2025a). Understanding the Design of Research and Development Methods in the Field of Education. https://doi.org/10.56371/ijess.v6i1.333
Amshumanth, K. M., G, K. K., Narayan, K. V, Krishna, M. K., & Professor, S. B. (2024b). SMART GLASS FOR INDIVIDUALS WITH HEARING IMPAIRMENT (Vol. 11). www.jetir.org
Ananda Bagus Sajiwo, & Martiano. (2025). Rancang bangun sistem monitoring kualitas air pada tambak ikan nila berbasis iot menggunakan nodemcu v3 dengan sensor tds dan ds18b20 (Vol. 2, Nomor 2). https://doi.org/10.56495/saintek.v2i2.1094
And, I., & Expert, D. (2023). Pengembangan Real-Time Monitoring dan Data Logging Berbasis Web Pada Proses Robot Painting untuk Meningkatkan Efisiensi Produksi INFORMASI ARTIKEL A B S T R A K (Vol. 5, Nomor 2). https://e-journal.unper.ac.id/index.php/informatics
Jacob, N., Sathwik Nair, K. P., Mathew, R., & Divya Sunny, K. (2023a). SpecAssist: Smart Glasses with Real-time speech recognition and transcription for the hearing impaired. www.ijert.org
Meysa Malika, & Berlianti Berlianti. (2025). Penggunaan Bahasa Isyarat SIBI dan BISINDO untuk Siswa Tuli di Sekolah Luar Biasa Negeri Pembina Medan. Concept: Journal of Social Humanities and Education, 4(3), 78–87. https://doi.org/10.55606/concept.v4i3.2178
Nanda Puspita, S., Islamarida, R., & Guna Bangsa Yogyakarta, S. (2026). GAMBARAN PERKEMBANGAN SOSIAL EMOSIONAL PADA ANAK TUNARUNGU DI PONDOK PESANTREN DARUL ASHOM SLEMAN YOGYAKARTA. https://journal-mandiracendikia.com/jikmc
P J, D., Joshy, J., T O, U., Nandan S, Y., & Krishnaveni V, Prof. (2024). ECHOLENS: Smart Glasses for Real-time speech display for deaf individuals. IJARCCE, 13(6). https://doi.org/10.17148/ijarcce.2024.13669
Parulian Sinaga, G., & Abdi Prawira Tanjung, M. (2025). RANCANG BANGUN SMART DONATION BOX UNTUK OTOMATISASI PERHITUNGAN DANA DONASI BERBASIS IOT. Dalam Jurnal Mahasiswa Teknik Informatika) (Vol. 9, Nomor 5). https://doi.org/10.36040/jati.v9i5.15168
Rahayu, P., & Sari, U. (2025). Perancangan Sistem Smart Home Berbasis IoT Menggunakan ESP32 dan Aplikasi Blynk untuk Otomatisasi Perangkat Rumah Tangga. JISKA: Jurnal Sistem Informasi Dan Informatika, 3(2), 2025. http://jurnal.unidha.ac.id/index.php/jiska
Raju, G. N., Sreedhar, M., Prasad, P., & Asst, S. (2025). SPEECH-TO-TEXT CONVERSION WEARABLE SMART GLASSES FOR THE HEARING-IMPAIRED USING ESP 32. https://doi.org/10.46121/pspc.53.2.18
Rangkuti, T. H., & Martiano, M. (2025). Design of IoT Based Electrical Parameter Monitoring System using NodemCu V3 and PZEM-004T V3 Sensor. Tsabit Journal of Computer Science, 2(1), 1–8. https://doi.org/10.56211/tsabit42
Silalahi, A. (2026). PENGEMBANGAN SISTEM LOGGING JARINGAN BERBASIS WEB UNTUK MENCATAT SEMUA LOG AKTIVITAS DAN DETEKSI ANOMALI. Jurnal Informatika dan Teknik Elektro Terapan, 14(1). https://doi.org/10.23960/jitet.v14i1.8235
Simabur, L. A., M, E., Zainuddin, Z., & Ahmad, M. (2022). ‘Talk Me : Aplikasi Pendukung Media Komunikasi Nonverbal Penyandang Tunarungu Dalam Meningkatkan Kemampuan Berinteraksi Sosial Di Kota Ternate. JURNAL LENSA MUTIARA KOMUNIKASI, 6(2), 260–269. https://doi.org/10.51544/jlmk.v6i2.3511
Syahri, A., & Basri, Mhd. (2025). Perancangan Sistem Keamanan untuk Deteksi Pencurian Menggunakan Sensor Magnetic dan RFID Berbasis Internet of Things. Hello World Jurnal Ilmu Komputer, 4(3), 163–170. https://doi.org/10.56211/helloworld.v4i3.1166
Tamilselvan, K. S., Sachin, A. M., Ramakrishna Raja, C., Sowndhar, M., & Srinivas, V. (2024a). Assistive glass for hearing impairment using speech recognition. Dalam Challenges in Information, Communication and Computing Technology (hlm. 484–489). CRC Press. https://doi.org/10.1201/9781003559092-83
Tarsini, I., & Anggraeni Riska. (2024). Explore flowchart and pseudocode concepts in algorithms and programming. https://doi.org/10.55324/1joms.v315.807
