Game Edukasi Pengenalan Sistem Isyarat Bahasa Indonesia (SIBI) Menggunakan Myo Armband pada Arsitektur Client Server

Abstrak

Komunikasi verbal adalah komunikasi umum digunakan sebagai sarana dalam memberikan informasi kepada orang lain. Disamping itu, untuk berkomunikasi dengan tuna rungu serta tuna wicara sarana komunikasi dapat melalui bahasa isyarat. Indonesia telah memiliki sistem bahasa isyarat yaitu Bahasa Isyarat Indonesia atau Sistim Isyarat Bahasa Indonesia (SIBI). Aplikasi pengenalan dan pembelajaran SIBI yang ada pada saat ini berupa aplikasi yang terikat pada platform. Aplikasi beserta proses pengenalan menjadi satu sehingga memiliki kebergantungan yang cukup tinggi. Penelitian ini bertujuan mengembangkan platform cloud sebagai backend untuk pengenalan gerakan tangan, sehingga memudahkan pengembang untuk membuat aplikasi pengenalan SIBI. Platform tersebut memiliki kemampuan untuk mengenal gerakan tangan yang diperoleh dari data sensor Myo Armband. Aplikasi yang berada sisi frontend dapat menggunakan fitur platform melalui Application Programming Interface (API) yang disediakan. Penelitian ini juga membangun aplikasi permainan edukasi yang menggunakan platform cloud tersebut sebagai implementasi dari penggunaan platform. Hasil pengujian terhadap platform yang dilakukan menghasilkan kemampuan pengenalan secara real-time dari satu atau lebih client secara simultan. Pada uji 5 client request bersamaan secara simultan, waktu yang dibutuhkan rerata 0.1107333 detik per request pada latency jaringan rerata 36.7 ms.   

Abstract

Verbal communication is a general communication used in providing information to other people. On the other hand, to communicate with deaf and speech impaired people can use sign language. Indonesia has a sign language system called Indonesian Sign Language or Indonesian Sign Language System (SIBI). The current SIBI introduction and learning application is an application tied to the platform. Application, along with the recognition process, is combined so that it has a high enough dependence. This study aims to develop a cloud platform as a backend for hand gesture recognition, making it easier for developers to create SIBI recognition applications. The platform can recognize hand movements obtained from Myo Armband sensor data. Applications on the front-end side can use the platform features through the provided Application Programming Interface (API). This study also builds an educational game application that uses the cloud platform to implement platform usage. The results of the platform's testing carried out resulted in real-time recognition capabilities from one or more clients simultaneously. In the five simultaneous client requests test, the average time needed is 0.12654 seconds per request at a mean network latency of 36.7 ms.