%0 Thesis
%9 S1
%A Fanisa Nur Indah Sari, -
%B KODEPRODI20201#Teknik_Elektro_S1
%D 2023
%F repoupi:103003
%I Universitas Pendidikan Indonesia
%K Bahasa Isyarat, Mediapipe, OpenAI, Web Speech API  Sign Language
%T ALAT PENERJEMAH BAHASA ISYARAT BERBASIS MACHINE LEARNING UNTUK KOMUNIKASI DUA ARAH BAGI PENYANDANG DISABILITAS SENSORIK (TUNARUNGU DAN TUNAWICARA)
%U http://repository.upi.edu/103003/
%X Penelitian ini bertujuan untuk menciptakan alat komunikasi dua arah berupa sistem yang mampu mendeteksi bahasa isyarat melalui gerakan tangan dan suara manusia. Sistem ini dirancang untuk memberikan solusi bagi masalah komunikasi yang dihadapi oleh pengidap tunawicara dan tunarungu. Metode yang digunakan melibatkan teknologi Computer Vision dengan memanfaatkan Mediapipe Model Maker dan Tensorflow untuk mendeteksi gerakan isyarat. Selain itu, integrasi dengan NLP (Natural Language Processing) dilakukan melalui penggunaan Text-Davinci-003 pada OpenAI dan Web Speech API. Hasil pengujian menunjukkan bahwa model gerakan isyarat memiliki akurasi sebesar 95% dalam pengenalan kosakata yang diuji. Persentase keseluruhan kosakata yang berhasil dikenali mencapai 92,6% dalam pengujian berulang sebanyak 10 kali, dan waktu respon sistem berada dalam rentang 0,08s – 0,1s. Dalam pengujian berulang sebanyak 20 kali pada 12 kalimat yang disusun, total persentase keseluruhan kalimat mencapai nilai 84,6%. Meskipun terdapat kekurangan dalam sistem deteksi gerakan yang dapat mengalami kebocoran dan kepekaan yang tinggi, sistem tetap mampu menjalankan fungsinya dengan baik dalam mendukung komunikasi dua arah antara penyandang disabilitas sensorik (tunarungu-tunawicara) dengan orang normal. Adapun tanggapan pengguna terhadap sistem penerjemah bahasa isyarat secara keseluruhan sangat positif. Pengguna mengakui bahwa aplikasi ini berguna, efektif, efisien, mudah dipahami, dan memiliki tampilan yang menarik.
%Z Link Google Scholar:  https://scholar.google.com/citations?hl=id&user=7QZoCJUAAAAJ     ID SINTA Dosen Pembimbing:  Arjuni Budi Pantjawati: 5994602  Silmi Ath Thahirah Al Azhima: 6745812