İşitme güçlüğü çeken kişiler için işaret dili sadece bir iletişim aracı değildir; bu onların ana dilidir. Sorun şu ki, işaret dili düzenli işiten insanlara öğretilmiyor, bu da aşılması zor bir engel oluşturuyor. Şimdi, Güney Kore'deki bir araştırma ekibi bu asırlık soruna şaşırtıcı derecede şık bir çözüm bulmuş olabilir.
Science Advances dergisinde yayınlanan yeni bir çalışmaya göre, WRSLT (kablosuz bağlantılı, halka tipi işaret dili çevirmeni) adı verilen sistem, hem Amerikan İşaret Dili hem de Uluslararası İşaret Dili sözcüklerini yaklaşık %88 doğrulukla tanıyıp tercüme edebiliyor. Ve evet, gerçek zamanlı olarak çalışıyor.
Yedi halka bir dilin tamamını nasıl tercüme eder?
Her akıllı yüzük, parmak hareketini algılayabilen üç eksenli bir ivmeölçer içerir. İmzalayan kişi yüzükleri taktığında ve imzalamaya başladığında, sensörler parmak yönünü ve el hareketini takip ediyor. Tüm bu veriler Bluetooth aracılığıyla kablosuz olarak bir akıllı telefona veya bilgisayara gönderiliyor; burada yapay zeka hareketleri yorumluyor ve bunları yazılı metne dönüştürüyor.
Mevcut çözümlere göre en büyük avantaj hareket özgürlüğüdür. Mevcut işaret dili çeviri araçları, doğal el hareketlerini kısıtlayan ve her kullanıcı için yeniden kalibre edilmesi gereken büyük eldivenlere veya kablolu sensör dizilerine dayanmaktadır. WRSLT'de bu sorunların hiçbiri yok.
Aslında herkes için işe yarayabilir mi?
Testler oldukça olumlu ve araştırmacılar sistemlerinin herkes için çalışabileceğine inanıyor. Sistemi bir grup kullanıcı üzerinde eğittiler ve ardından tamamen farklı bir grup üzerinde test ettiler. ISL kelimelerini %88,5 doğrulukla ve ASL kelimelerini %88,3 doğrulukla doğru bir şekilde tanımladı; bu, farklı insanların işaret şeklinin doğal çeşitliliği göz önüne alındığında etkileyici.
Şu anda sistem her dilde 100 kelimeyi tanıyabiliyor, bu da iyi bir başlangıç. Ekip, halkaları daha da küçültmeyi ve yapay zekanın kelime dağarcığını daha fazla kelime ve işaret dilini kapsayacak şekilde genişletmeyi planlıyor.
Henüz ilk günler ama bu, bir süredir gördüğümüz en umut verici işaret dili çeviri çözümlerinden biri.
Bir yanıt yazın