Mikro Denetleyici Sistemler ile Türk İşaret Dili Kelime Çevirici


Gökçe F., Kekül H.

Avrupa Bilim ve Teknoloji Dergisi, sa.28, ss.972-977, 2021 (Hakemli Dergi)

Özet

Bu çalışmanın amacı Türkçe dilinde kullanılan kelimelerin işaret dili karşılıklarını, oluşturulan model yardımıyla tespit etmektir. Bu sayede konuşma engelli bireyler ve toplumun geri kalanı arasındaki iletişimin kolaylaştırılması amaçlanmaktadır. Konuşma engelliler ile engelli olmayan bireyler arasında iletişim sağlamak her zaman zor olmuştur. Engelli ve engelli olmayan bireyler arasında iletişimi sağlamak için önerilen yöntem, mikro denetleyici (Arduino), görüntüleme birimi (LCD Panel) ile flex, ivme ve gyro sensörler kullanmaktadır. Kelimelerin modellenebilmesi için bir eldiven tasarlanmıştır. İşaret dili çevirici eldiven sayesinde engelli bireylerle engelli olmayan bireyler iletişim sağlayabileceklerdir. İşaret dili çeviriciyi eline takan engelli bir birey işaret dilindeki bir sözcüğü işaret ettiğinde eldiven üzerindeki her bir parmağa denk gelen beş flex, ivme ve gyro sensörlerinden gelen veriler mikro denetleyiciye aktarılmaktır. Mikro denetleyicide işaret dili çevirici eldivenden gelen bu verilere göre işaretin hangi ifadeyi kastettiğini tespit ederek görüntüleme biriminde yazı olarak göstermektedir. İşaret dili çevirici projesinde işaret dilindeki kelimeleri çevirirken Türk işaret dili kullanılmıştır. İşaret dilinde hareketi yapılan bir ifadenin ne anlama geldiğini görüntüleme biriminde göstermek için, örnek olarak seçilen işaret dili hareketlerinin işaret dili çevirici eldiven takılarak yapıldığında elde edilen beş flex sensör verisi, üç ivme verisi ve üç gyro verisi olmak üzere toplam onbir verinin değerleri tespit edilmiştir. Örnek seçilen her işaret dili hareketi için tespit edilen onbir veri kayıt edilmiştir. Mikro denetleyici üzerinde çalışan programda bu değerlere göre işaret dili hareketleri sınıflandırılmıştır.