jatimnow.com - Muhammad Rifki Pratama Nautica dan Akbar Mahardi Hidayatullah, mahasiswa S1 Prodi Teknik Komputer Universitas Dinamika (Undika) berhasil membuat sarana pembelajaran untuk mendeteksi sistem isyarat bahasa Indonesia (SIBI).
Sarana yang dirancang dengan memanfaatkan artificial intelligence (AI), untuk tugas akhir berbasis deep learning ini dinamai Hand Gesture Detection. Selain itu alat tersebut juga dapat mempermudah proses pembelajaran menjadi efektif yang menyenangkan.
“Idenya itu karena saat pandemi saya melihat adik saya yang berusia PAUD mengalami learning lost dimana materi yang disampaikan guru secara daring kurang tersampaikan dengan menarik,” tutur Muhammad Rifki, Selasa (11/10/2022).
Melalui Program Hand Gesture Detection ini, para pengguna yang targetnya adalah anak-anak usia dini dapat mengetahui jumlah angka secara real time dengan hanya memperlihatkan jari di layar kaca laptop.
“Scriptnya sudah tersedia dan tinggal diinstall di laptop saja,” terang Rifki.
Lebih lanjut mahasiswa yang pernah aktif di HIMA Teknik Komputer ini menjelaskan bahwa pengguna yang ingin mencoba program ini harus menyiapkan webcam pada perangkat laptop atau PC serta menginstall program bernama Jupiter terlebih dahulu.
“Nanti setelah terinstall maka pengguna tinggal mengarahkan jari ke webcam maka secara langsung akan muncul landmark atau kerangka tangan untuk ditentukan oleh komputer berapa jari yang terlihat,” ungkap Rifki.
Jumlah jari yang terhitung oleh program tersebut adalah jari yang terdeteksi tegak oleh perangkat yang digunakan. Tidak jauh berbeda dengan Rifki yang memanfaatkan AI dalam programnya.
Baca juga:
Mahasiswa Surabaya Ciptakan Patriot, Alat Apa Itu?
Akbar Mahardi Hidayatullah juga membuat inovasi serupa namun dikemas dengan konsep yang sedikit berbeda. Yakni membuat sebuah program untuk bisa membaca bahasa isyarat melalui aplikasi Sistem Deteksi Simbol SIBI.
Melalui aplikasi ini, penyandang tunarungu dan tunawicara bisa menyampaikan pesan kepada orang lain melalui gerak tangan yang ditampilkan dan diterjemahkan dalam aplikasi.
“Di aplikasi ini ada enam kata yang sudah saya setting yaitu aku, kamu, dia, cinta, maaf dan sedih,” jelas mahasiswa yang juga aktif di UKM Dinamika Cyber Sport ini.
Berawal dari ketertarikannya di mata kuliah Sistem Cerdas dan juga melihat penelitian kakak tingkat sebelumnya, ia tertarik untuk mengembangkan aplikasi ini. Bedanya, pada penelitian sebelumnya menggunakan metode klasifikasi image yaitu menggunakan media gambar lalu di proses ke aplikasi baru keluar arti gerakan tangannya.
Baca juga:
Melihat dari Dekat Mal Masa Depan Rancangan Mahasiswa Undika Surabaya
“Sedangkan punya saya pakai metode deteksi objek secara realtime, jadi dari live kamera bisa langsung muncul arti dari gerakan tangannya,” tutur Akbar menjelaskan kelebihan aplikasi buatannya.
Meskipun begitu, ia menuturkan masih ada beberapa hal yang perlu diperbaiki diantaranya adalah kurangnya fokus yang ditangkap oleh komputer saat latar belakang pengguna ramai obyek sehingga tidak dapat mengidentifikasi gerak bahasa isyarat.
“Ya semoga nanti adik tingkat ada yang mau meneruskan dan mengembangkan agar kekurangan ini bisa diminimalisir,” pesannya.
