Model Penerjemah Bahasa Isyarat Indonesia (BISINDO) Menggunakan Pendekatan Transfer Learning

Abstract

Sistem Bahasa Isyarat Indonesia (SIBI) yang berasal dari bahasa isyarat Amerika (American Sign Language) dan lebih banyak dipakai pada situasi formal tidak terlalu familiar bagi insan tuli atau difabel rungu di Indonesia karena mereka umumnya menggunakan Bahasa Isyarat Indonesia (Bisindo). Sejak 1975 perwakilan Tuli melalui organisasi kemasyarakatan Gerakan untuk Kesejahteraan Tunarungu Indonesia (Gerkatin) telah meminta pemerintah untuk mengakui Bisindo sebagai bahasa pengantar resmi di Sekolah Luar Biasa namun upaya ini hingga kini belum berhasil. Untuk membantu meningkatkan aksesibilitas Tuli dengan menambah jumlah penerjemah serta memperluas pemahaman Bisindo di masyarakat luas, penelitian ini berupaya membangun mesin penerjemah bahasa isyarat menggunakan teknik machine learning dengan algoritma Convolutional Neural Network (CNN). Karena bukan merupakan bahasa isyarat format, ketersediaan dataset Bisindo di Internet terbatas. Metode transfer learning, yaitu dengan memanfaatkan model yang dilatih dengan dataset ASL kemudian disesuaikan untuk melakukan pekerjaan yang sama pada menggunakan dataset Bisindo digunakan dalam penelitian ini untuk mengatasi masalah keterbatasan dataset. Karena perbedaan karakteristik bahasa isyarat dan gestur dari masing-masing bahasa isyarat, pemindahan knowledge khususnya learning parameter dari Model ASL tidak dapat meningkatkan performa Model Bisindo dalam memprediksi seluruh huruf pada alfabet Bisindo sehingga model hasil transfer learning hanya mampu memprediksi huruf-huruf Bisindo yang memiliki kemiripan dengan ASL.

Identifikasi Alfabet Bahasa Isyarat Indonesia dengan Menggunakan Convolutional LSTM

“…resmi. Permintaan ini terus diupayakan karena penggunaan BISINDO memudahkan komunikasi bagi penyandang disabilitas pendengaran, terutama dalam menyampaikan aspirasi mereka kepada orangorang yang tidak memiliki gangguan pendengaran [5].…”

Sistem Klarifikasi Bahasa Isyarat Indonesia (Bisindo) Dengan Menggunakan Algoritma Convolutional Neural Network

“…Di Indonesia sendiri ada dua macam penggunaan bahasa isyarat yaitu Sistem Bahasa Isyarat Indonesia (SIBI) yang dibakukan dan diambil dari American Sign Language (ASL) dengan di tambah imbuhan awal dan akhir [4]dan Bahasa Isyarat Indonesia (BISINDO) yang merupakan bahasa ibu atau bahasa awal tunawicara-rungu yang di pakai sehari-hari [5].…”

Deep Transfer Learning for Sign Language Image Classification: A Bisindo Dataset Study

“…Transfer learning is a technique that capitalizes on the knowledge and features acquired during the initial training of a neural network or model, thereby enabling a substantial decrease in training time and resource demands. This methodology is especially advantageous in situations where there is a scarcity of data accessible for the specific objective, as it allows the model to leverage the insights acquired from a more extensive, interconnected dataset, hence enhancing its efficacy in the novel task (Susanty et al, 2021).…”