Please take a moment to complete this survey below

Library's collection Library's IT development Cancel

Pengenalan alfabet bahasa isyarat tangan secara real-time dengan menggunakan metode convolutional Neural Network dan Recurrent Neural Network

Bahasa isyarat tangan merupakan salah satu alat komunikasi yang biasa digunakan oleh penyandang disabilitas atau difabel. Bahasa isyarat alfabet merupakan alat bantu dasar yang digunakan para pengajar untuk mengajar para penyandang tunarungu dan tunawicara untuk mengenal huruf alfabet dasar. Akan tetapi, banyak masyarakat yang kesusahan dalam berkomunikasi dengan kalangan tersebut dikarenakan kurangnya wawasan masyarakat tentang bahasa isyarat tangan. Penelitian pada bahasa isyarat tangan telah mengalami banyak kemajuan dalam memproses gambar statik tetapi masih mengalami kendala karena kesulitan dalam memproses gambar dinamik / video mengingat kebanyakan dari bahasa isyarat tangan direpresentasikan dengan gerakan tubuh, tangan, dan wajah. Penelitian ini menggunakan metode Convolutional Neural Network (CNN) dan Recurrent Neural Network (RNN) dengan input berupa video. Metode CNN digunakan sebagai feature extraction di spatial feature sementara RNN bertugas untuk mengkolerasikan antar frame yang di ekstrak oleh CNN di temporal feature. Hasil akhir yang ditampilkan berupa text alphabet yang merupakan hasil dari pengenalan alphabet bahasa isyarat tangan tersebut. Berdasarkan pengujian yang dilakukan, didapatkan nilai akurasi rata-rata sebesar 60.58% pada seluruh huruf sementara pengujian real-time mengalami kegagalan karena teknologi yang digunakan tidak bisa menopang arsitektur yang dibuat.

Creator(s)
  • (26416006) DEVINA YOLANDA
Contributor(s)
  • Kartika Gunadi → Advisor 1
  • Rolly Intan → Examination Committee 1
Publisher
Universitas Kristen Petra; 2020
Language
Indonesian
Category
s1 – Undergraduate Thesis
Sub Category
Skripsi/Undergraduate Thesis
Source
Skripsi No. 01021969/INF/2020; Devina Yolanda (26416006)
Subject(s)
  • NEURAL NETWORKS (COMPUTER SCIENCE)
  • PROGRAMMING (COMPUTERS)
File(s)

Similar Collection

by creator, contributor, or subject