İşaretçi iskelet yapısını kullanarak saklı Markov model ile türk işaret dili tanıma sistemi

---

Tezin Türü: Yüksek Lisans

Tezin Yürütüldüğü Kurum: Yıldız Teknik Üniversitesi, Fen Bilimleri Enstitüsü, BİLGİSAYAR MÜHENDİSLİĞİ ANABİLİM DALI, Türkiye

Tezin Onay Tarihi: 2016

Tezin Dili: Türkçe

Öğrenci: KAKAJAN KAKAYEV

Danışman: Songül Varlı

Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu

Özet:

İnsan ile makine arasındaki etkileşimi sağlamak ve kolaylaştırmak için son yıllarda geniş çapta çalışmalar yapılmıştır. İnsan hareketini kavrayabilen sistemler geliştirmek, insan ile makine arasındaki etkileşimi arttırmak için önemli bir çalışmadır. İşaret dili işitme engellilerin birbirleriyle iletişim kurmasını sağlayan bir dildir ve işaret dili el hareketleri ve yüz ifadesinden oluşmaktadır. İşitme engellilerin diğer kişilerle iletişimlerini kolaylaştırmak için son 20 yıldır bu konuda araştırmalar artmıştır. Çeşitli ülkelerin işaret dillerini tanıma amaçlı bilgisayarlı sistemleri tasarlanmıştır. Bu tez çalışmasında, Türk İşaret Dili'nde (TİD) yaygın olarak kullanılan hareketleri tanımayı amaçladık. Bu çalışmada işaretçi iskelet yapısını kullanan işaret dili tanıma sistemi geliştirilmiştir. İskelet yapısını içeren türk işaret diline ait veritabanı arşivi olmadığı için, kayıtlar 3 işaretçi tarafından kaydedilmiştir. Türk İşaret Dili'ne ait toplamda 15 kelime (her kelime için 4 tekrar) Microsoft Kinect kamerası kullanılarak toplam 180 kayıt alınarak oluşturulmuştur. Bu çalışmada sistemi eğitmek ve test etmek için Saklı Markov Modeli kullanılmıştır. 100%'e yakın başarı oranı elde edilmiştir.