Sistem Kendali Peralatan Elektronik Menggunakan Voice Recognition

Authors

  • Hisyam Arsyad Zakiyuddin Teknik Informatika/Fakultas Ilmu Komputer, Universitas Duta Bangsa
  • Izzul Maali Teknik Informatika/Fakultas Ilmu Komputer, Universitas Duta Bangsa
  • Ravinolddy Firza Pratama Teknik Informatika/Fakultas Ilmu Komputer, Universitas Duta Bangsa
  • Pramono Teknik Informatika/Fakultas Ilmu Komputer, Universitas Duta Bangsa

Keywords:

ESP32, MQTT, Firebase, Dialogflow, Smart Home, Voice Recognition

Abstract

Perkembangan teknologi otomasi rumah pintar (smart home) saat ini menjadi solusi penting untuk meningkatkan efisiensi aktivitas manusia dan membantu aksesibilitas, khususnya dalam meminimalkan kelalaian pengelolaan interaksi fisik perangkat domestik. Penelitian ini bertujuan untuk merancang dan mengimplementasikan prototipe sistem kendali lampu pada dua ruangan, yaitu ruang tamu dan kamar tidur, yang dapat dioperasikan melalui perintah suara, teks, maupun kontrol manual berbasis aplikasi web. Metodologi yang digunakan meliputi integrasi perangkat keras berupa mikrokontroler ESP32 dan modul relai sebagai aktuator lampu, serta perangkat lunak berupa aplikasi web yang memanfaatkan Web Speech API untuk konversi suara menjadi teks, layanan Natural Language Processing (NLP) Dialogflow ES untuk mengenali maksud (intent) dan ruangan target pengguna, protokol Message Queuing Telemetry Transport (MQTT) melalui broker HiveMQ Cloud sebagai jalur kendali perangkat, serta Firebase Realtime Database sebagai media sinkronisasi status secara waktu nyata. Validasi sistem dilakukan melalui pengujian eksperimental yang mencakup kesesuaian kontrol manual pada dasbor aplikasi serta analisis waktu tanggap (response time) kontrol berbasis suara dan teks. Hasil pengujian menunjukkan bahwa seluruh percobaan kontrol manual berjalan tanpa selisih status antara perintah dan kondisi fisik lampu, sedangkan kontrol berbasis suara dan teks memiliki rata-rata waktu tanggap total sebesar 2.201,33 milidetik, dengan kontribusi layanan NLP mencapai sekitar 98,1% dari total waktu tersebut. Sistem juga terbukti memiliki ketahanan terhadap gangguan koneksi jaringan, ditandai dengan kemampuan penyambungan ulang (auto-reconnect) otomatis pada protokol MQTT tanpa kehilangan perintah pengguna. Hasil penelitian menunjukkan bahwa integrasi ESP32, NLP cloud, protokol MQTT, dan basis data waktu nyata mampu menghasilkan sistem kendali rumah pintar yang fungsional, responsif, dan andal untuk diterapkan pada skala rumah tangga.

References

[1] Cakra, M. S. Said, and Henny, “Sistem kontrol lampu menggunakan sensor suara,” Simtek : jurnal sistem informasi dan teknik komputer, vol. 8, no. 1, pp. 77–82, Apr. 2023, doi: 10.51876/simtek.v8i1.218.

[2] M. Amiruddin, “Implementasi Sistem Kontrol Stopkontak Elektronik Cerdas Menggunakan Aktivasi Suara dan Integrasi Pengenalan Wajah.” [Online]. Available: http://eprints.ums.ac.id/id/eprint/124391.

[3] G. Alexakis, S. Panagiotakis, A. Fragkakis, E. Markakis, and K. Vassilakis, “Control of Smart Home Operations Using Natural Language Processing, Voice Recognition and IoT Technologies in a Multi-Tier Architecture,” Designs, vol. 3, no. 3, p. 32, Jul. 2019, doi: 10.3390/designs3030032.

[4] Mohamad Salman Farizi, S. Somantri, and I. Yustiana, “IMPLEMENTASI SPEECH RECOGNITION PADA SISTEM KENDALI PERANGKAT ELEKTRONIK RUMAH BERBASIS IoT (Internet Of Things) DAN MOBILE APPLICATION,” ZONAsi: Jurnal Sistem Informasi, vol. 4, no. 2, pp. 157–166, Dec. 2022, doi: 10.31849/zn.v4i2.10662.

[5] A. P. Launuru, G. Manu, H. K. Tupan, and R. Hutagalung, “RANCANG BANGUN SISTEM KONTROL NIRKABEL ON – OFF PERALATAN LISTRIK DENGAN PERINTAH SUARA MENGGUNAKAN SMARTPHONE ANDROID,” JURNAL SIMETRIK, vol. 11, no. 1, pp. 388–397, Aug. 2021, doi: 10.31959/js.v11i1.570.

[6] H. Haeruddin, “Sistem Pengendali Alat Elektronik Rumah Tangga Berbasis Internet of Things (IoT) Menggunakan Voice Recognition,” Journal of System and Computer Engineering (JSCE), vol. 5, no. 1, pp. 56–65, Jan. 2024, doi: 10.61628/jsce.v5i1.1063.

[7] O. D. Winarto, I. K. Somawirata, and Sotyohadi, “DESAIN SISTEM KENDALI KURSI RODA ELEKTRIK DENGAN PERINTAH SUARA BERBASIS VOICE RECOGNITION MODULE V3,” Magnetika: Jurnal Mahasiswa Teknik Elektro, vol. 8, no. 2, pp. 213–223, Nov. 2024.

[8] D. P. Utomo, “Implementasi Internet of Things (IoT) Untuk Sistem Kendali Pada Smart Lamp,” Prosiding Seminar Nasional Informatika, vol. 2, pp. 540–551, Jul. 2024.

[9] R. Rizky Ababil, Y. Yandi Bria, S. M Rosyid Aridho, and P. Pramono, “Sistem Smart Lighting Berbasis Internet of Things (IoT) dengan Aplikasi Blynk,” Prosiding Seminar Nasional Teknologi Informasi dan Bisnis, pp. 1256–1261, Jul. 2025, doi: 10.47701/5add4003.

[10] D. Karina, “PENERAPAN INTERNET OF THINGS PADA SISTEM SMART HOME MEMANFAATKAN VOICE RECOGNITION,” Techno Bahari, vol. 8, no. 2, May 2023, doi: 10.52234/tb.v8i2.145.

[11] R. Wahyuningrum and L. Febrianto, “Rancang Bangun Prototype Sistem Kontrol Kunci Pintu Berbasis Voice Recognition Arduino Uno & Sensor Bluetooth,” Jurnal Esensi Infokom : Jurnal Esensi Sistem Informasi dan Sistem Komputer, vol. 7, no. 2, pp. 78–85, Oct. 2023, doi: 10.55886/infokom.v7i2.755.

Downloads

Published

2026-07-25