Klasifikasi Bahasa Isyarat Huruf Hijaiyah Dengan GAN Dan CNN
DOI:
https://doi.org/10.56995/sintek.v5i2.174Keywords:
Bahasa Isyarat Huruf Hijaiyah, GAN, CNNAbstract
Pembelajaran huruf hijaiyah, termasuk untuk penyandang tunarungu yang menggunakan bahasa isyarat, sangat penting untuk memahami Al-Qur'an. Namun, pengembangan sistem klasifikasi berbasis kecerdasan buatan menghadapi kendala karena jumlah data citra bahasa isyarat huruf hijaiyah terbatas. Studi ini menyarankan metode hibrida yang menggunakan Generative Adversarial Network (GAN) untuk memperluas dataset dan Convolutional Neural Network (CNN) untuk mengklasifikasikan gambar bahasa isyarat huruf hijaiyah. Dataset awal, yang terdiri dari 1.877 gambar dengan 28 kelas yang dikumpulkan dari Roboflow, diperluas menggunakan DCGAN dan augmentasi gambar. Hasil pengujian menunjukkan bahwa integrasi GAN dan augmentasi dapat secara signifikan meningkatkan akurasi klasifikasi CNN, dengan tingkat akurasi tertinggi 95%. Metode ini terbukti efektif dalam meningkatkan kinerja sistem klasifikasi dan dapat digunakan sebagai media pembelajaran interaktif untuk penyandang disabilitas, terutama tunarungu.
Downloads
References
I. P. Akbar, I. Mahmudah, and S. Fatimah, “Peran Mahasiswa MBKM Mengajar Mengaji untuk Membantu Siswa MI Darul Ulum Palangka Raya dalam Membaca Al-Qur’an dengan Baik,” Jurnal Ilmu Pendidikan Islam, vol. 3, no. 1, pp. 23–34, 2025, doi: 10.59059/al-tarbiyah.v3i1.1719.
G. Murtadlo et al., “Mendalami Living Qur’an: Analisis Pendidikan Dalam Memahami Dan Menghidupkan Al-Qur’an,” 2023.
M. J. Takhassus, I. Syar’i, and M. Hafshah Binti Umar, “Hukum Tarik Menarik Dalam Perspektif Al-Quran: Ketenangan Hati Sebagai Kunci Kesuksesan,” Integrative Perspectives of Social and Science Journal, vol. 2, no. 1, p. 546, 2025.
M. Christina, K. Paruntu, H. Anis, and E. L. Mamesah, “Nomor 8 Tahun 2016 Tentang Penyandang Disabilitas Di Indonesia 1,” 2023. [Online]. Available: https://www.un.org/development/desa/disabilities/conventi
B. A. Gholibah and Y. Nurmaliyah, “Implementasi Metode Bahasa Isyarat Huruf Hijaiyah Dalam Peningkatan Belajar Baca Tulis Al-Qur’an (Btq) Bagi Santriwati Tunarungu Di Pondok Pesantren Tahfiz Difabel Baznas (Bazis) Lebak Bulus Implementation Of The Hijaiyah Sign Language Method In Improving Reading And Writing Al-Qur’an (Btq) For Deaf Students At The Baznas Tahfiz Didisabled Islamic Boarding School (Bazis) Lebak Bulus,” Multidisciplinary Indonesian Center Journal (MICJO), doi: 10.62567/micjo.v2i1.482.
D. A. Dermawan, H. A. Muhimmah, A. Ovel, N. Beny, O. F. Anggara, and N. R. Windayani, “Januari 2024 Jurnal Kajian Pendidikan dan Hasil Penelitian,” Jurnal Review Pendidikan Dasar, vol. 10, no. 01, [Online]. Available: http://journal.unesa.ac.id/index.php/PD
D. I. Mulyana, M. Faizal Lazuardi, and M. Betty Yel, “Deteksi Bahasa Isyarat Dalam Pengenalan Huruf Hijaiyah Dengan Metode YOLOV5,” 2022, doi: 10.32528/elkom.v4i2.8145.
D. E. Putri, J. Jumadi, and E. Nurlatifah, “Klasifikasi Pengenalan Huruf Hijaiyah Pada Bahasa Isyarat Arab Menggunakan Transfer Learning EfficientNetB1,” JIPI (Jurnal Ilmiah Penelitian dan Pembelajaran Informatika), vol. 10, no. 2, pp. 1371–1384, Mar. 2025, doi: 10.29100/jipi.v10i2.6174.
W. A. R. C. Ma’fi, “Model Penerjemah Bahasa Isyarat Huruf Hijaiyah Secara Realtime Menggunakan Cnn,” 2024.
S. Ulfah, “Ulfah Penerapan Bahasa Isyarat dalam Pembelajaran bagi Anak Berkebutuhan Khusus Tuna Rungu,” JDSR, 2023.
I. F. A. E. S. Sari, “Sistem Pengembangan Bahasa Isyarat Untuk Berkomunikasi dengan Penyandang Disabilitas (Tunarungu),” 2023. [Online]. Available: https://jits.unmuhbabel.ac.id/
M. Sholawati, K. Auliasari, and F. X. Ariwibisono, “Pengembangan Aplikasi Pengenalan Bahasa Isyarat Abjad Sibi Menggunakan Metode Convolutional Neural Network (CNN),” 2022.
R. Z. Fadillah, A. Irawan, M. Susanty, and I. Artikel, “Data Augmentasi Untuk Mengatasi Keterbatasan Data Pada Model Penerjemah Bahasa Isyarat Indonesia (BISINDO),” Jurnal Informatika, vol. 8, no. 2, 2021, [Online]. Available: http://ejournal.bsi.ac.id/ejurnal/index.php/ji
A. S. Y. K. N. A. L. G. Saputra, “Meningkatkan Kemampuan Mengenal Huruf Hijaiyah Anak Melalui Permainan Kartu Huruf Di Tkit An-Nur Walikukun Kabupaten Ngawi,” 2021.
A. R. H. G. C. S. M. T. T. Ama, “Peningkatan Resolusi Citra dengan Menggunakan Metode GAN untuk Aplikasi Peningkatan Gambar,” 2024.
H. E. S. Purba, “Implementation Of Generative Adversarial Networks For Creating Digital Artwork In The Form Of Abstract Images,” Jurnal Teknik Informatika (JUTIF), vol. 3, no. 3, pp. 707–715, 2022, doi: 10.20884/1.jutif.2022.3.3.262.
I. Suhardin, A. Patombongi, A. Muhammad Islah, and S. H. Catur Sakti Kendari Jl Abdullah, “Mengidentifikasi Jenis Tanaman Berdasarkan Citra Daun Menggunakan Algoritma Convolutional Neural Network,” vol. 6, no. 2, 2021.
