Bir İşaret Dili Çeviri Uygulaması Hiç Gerçek Olacak mı?

İlan

Sağır ve duruşma arasındaki engellerin ortadan kalktığı bir dünya düşünün. Ses duyanlar ve duyanlar arasında sohbetlerin akıcı bir şekilde aktığı bir dünya. Bu dünya yakın gelecekte gerçek olabilir mi?

Haziran ayında, Berghs İletişim Okulu'ndaki bir grup pazarlama öğrencisi, Google Gesture adlı kurgusal bir ürün için bir konsept video geliştirdi. Ürün, giyilebilir bir bilek bandı ve işaret dili yapan sağır bir kişinin kas hareketlerini okumak için elektromiyografiyi kullanan bir mobil uygulamayı içeriyordu. Sistem daha sonra bu sinyalleri uygulamaya aktardı, bu da bu sinyalleri sayısallaştırılmış bir sese çevirdi ve kişi için konuştu.

Sahte pazarlama videosunu izlemek oldukça heyecan vericiydi. Aslında o kadar heyecan verici ki, Mashable, Slashgear ve diğerleri gibi büyük teknoloji siteleri ürünü gerçek olarak ilan etti ve daha sonra iddiayı yeniden anlatmak ve hatalarından dolayı özür dilemek zorunda kaldı. Gerçekten orada olduğunu düşünürsek garip bir hataydı dır-dir kişileri, yer imlerini ve daha fazlasını aramak için mobil ekranınıza hareketler çizmenize olanak tanıyan Google Hareket Arama [Artık Kullanılamıyor] adlı bir Google ürünü.

Ne olursa olsun, Berghs öğrencileri konsepti, soruna yol açan dikkate değer bir fikir sundu - böyle bir uygulamayı gerçekte oluşturmak mümkün olabilir mi?

İşaret Dili Tercümesi Mümkün mü?

Pazarlama kavramını teknik düzeyde incelemek, işaret dilini “algılamak” için elektromiyografi (EMG) kullanan teknolojinin aslında o kadar da ileri gitmediğini ortaya koyuyor. 2009 yılına kadar, Washington Üniversitesi'nden araştırmacılar kas hareketlerini çözmek ve bunları gerçek kol ve el hareketlerine dönüştürmek için birden fazla EMG sensörü kullanabildiler.

Araştırmacılar aslında hangi kas sinyallerinin hangi hareketi temsil ettiğini belirleyen eksiksiz bir “jest tanıma kütüphanesi” oluşturdular. Araştırma, bu tür teknolojilerin Berghs öğrencilerin öngördüğü uygulama türünde mevcut ve uygulamaya hazır olduğunu kanıtlıyor.

Peki bunu henüz başaran var mı? Değilse, neden kimse bunu yapmıyor ve sağır ve işitme engellilere işaret dili aracılığıyla dünyadaki herhangi biriyle iletişim kurma yeteneği sağlıyor?

Gerçek Zamanlı Çeviri Teknolojisinin Geleceği

Gerçek şu ki, birisi aslında böyle gerçek zamanlı işaret dili çeviri teknolojisi üzerinde çalışıyor.

SpeechTrans [Kırık URL Kaldırıldı] adında bir şirket var. çeviri teknolojileri Google Çeviri'yi Unutun: Doğru, Hızlı Çeviri Yapmanın 3 YoluYurtdışında bir işe veya daireye başvurmayı planlıyor ya da web sayfanızı çevirmek istiyorsanız, yabancı bir dilde bile doğru şeyleri almanız gerekiyor. Daha fazla oku son yıllarda. SpeechTrans, bugün piyasadaki en dikkat çekici gerçek zamanlı dil çeviri hizmetlerinden bazılarını üretmek için teknoloji ortaklarıyla birlikte çalışmaktadır. Bunlar, metin sohbetini metin sohbetine, sesden metne ve hatta gerçek zamanlı sesli-sesli dil çevirisini cep telefonu ve masaüstü uygulamaları aracılığıyla çeviren servislerdir.

Bir işaret dili teknolojisinin yakın gelecekte bir gerçeklik haline gelip gelmeyeceğini keşfetmek için MakeUseOf, bu çığır açan yeni tartışmak için SpeechTrans CEO'su John Frei ve COO Yan Auerbach ile oturdu çeviri teknolojisi Bu 5 Dil Çeviri Web Sitesiyle Herhangi Bir Dili AnlayınTeknoloji dünyayı daha küçük bir yer haline getirdi. Bu gezegenin her yerinden insanlar aynı araçların çoğunu kullanıyor, aynı web sitelerini ziyaret ediyor ve çevrimiçi olarak çeşitli sohbet odalarında karışıyor. ... Daha fazla oku ve geleceğe ne kadar uzak olabileceğini.

İşaret Dili Tercüme Uygulaması Geliştirme

MUO: Berghs öğrencilerinin bu Google Gesture konsept videosunda canlandırdığı işaret dilini konuşma çevirisine yapmak mümkün müdür?

John: Bunu geliştirmek için teknolojinin mevcut olduğunu söyleyebilirim. Şu anda Microsoft ve Intel ile birlikte çıktıkları bazı teknolojileri donanım ve yazılım açısından araştırmak için çalışıyoruz. İşaret teknolojisini tanımak ve daha sonra bunu konuşma ve ses çıkışına dönüştürmek için bu teknolojiyi kullanma yeteneğini öngörüyoruz.

MUO: Şu anda bu teknolojiyi aktif olarak geliştirmek için mi çalışıyorsunuz?

Yan: Yani, yazılımımızı kullanan bir müşteri vardı ve işitme engelli kişilerin bunu kullanmak için değiştirebilmemiz harika olacağını düşündü uygulamamızdan telefon görüşmeleri yapın, bizzat işaret dili gerekmeden veya telefon için TTY tipi bir hizmete ihtiyaç duymadan iletişim kurmak için çağırır. Bu ürünü geliştirdik ve Microsoft ve Intel'in finansmanı ile Windows 8.1'de işitme engelliler için SpeechTrans'ı başlattık, bu da işaret diline olan ihtiyacı ortadan kaldırıyor.

MUO: “Şahsen” uygulaması nasıl çalışır?

Yan: Bir dinleme modu var ve bir giriş modu var. Birisi sizinle konuşurken, dinleme moduna geçersiniz ve ekranda söylediklerini metinde yazar. Sonra, geri cevap verdiğinizde, onu yazın ve sonra ne yazdığınızı yüksek sesle söyler. Telefonla, herhangi bir kişinin telefon numarasını çevirirsiniz ve telefona cevap verdiklerinde, anlık bir mesaj haline gelir. Her ne konuşurlarsa konuşursunuz. Ardından, yazdığınız her şey telefonla yüksek sesle söylenir. Bu ilk aşama.

Yakın Gelecek İşaret Dili Çevirisi

MUO: İnsanlar yakın gelecekte hangi teknolojileri görmeyi bekleyebilirler? Bir sonraki aşama nedir?

John: Sadece işaret dilini kullanabilen biri için bunu telefon, PC veya dizüstü bilgisayar gibi bir cihazın önünde yapabilmek için öngörüyoruz. Intel'in yeni bir kamera sistemi var ve Microsoft, hareket tanıma işlevi yapan Kinect ile de çalışıyor.

MUO: Bu, Berghs öğrencileri tarafından ortaya atılan kol bandı konseptinden nasıl daha iyi?

Yan: Temel olarak, bizimki kolunuza bir şey koymanızı gerektirmeyecek şekilde çalışacak. Elinizdeki 64 noktayı tanıyacaktır. Intel’in RealSense kameranın beta sürümünü kullanıyoruz. Yani sadece işaret dilini ve işaret dilinin birçok farklı lehçesini tanıyamayacak, aynı zamanda ayrıca duyguları, yüz ifadelerini ve diğer küçük nüansları tanıyabilir ve daha sonra bunu sözlü kelimelere dönüştürebilir. iyi.

Bu, herhangi bir eldiven veya başka bir şey giymenizi gerektirmez. Özellikle genel olarak insanlara yardım etmeyi sevdiğimiz için bu pazara odaklanıyoruz. Sadece birçok dilde konuşmak isteyen insanlara yardım etmek istemiyoruz, aynı zamanda herhangi bir dilde konuşamayan insanlara da yardım etmek istiyoruz. Teknoloji var ve yaşam kalitelerinin bizimkinden farklı olması için hiçbir neden yok.

John: Bu uygulanabilir bir kavram. Bu sadece farklı bir girdi ve çıktı. Gelecekteki teknolojilerden bazıları hakkında Microsoft ile yaptığımız görüşmelerden bazıları Birisi boynuna bir mikroçip yerleştirebilir ve doğrudan beyin dalgalarını okur kalıpları. Dolayısıyla, iletişim kuramayan insanlara yardım ediyorsanız, bunun gibi bir şeyi üçüncü aşama uygulaması olarak görürüz.

Geçen yıl, bir bilgisayara takılan bir eldivenin çalışan prototipiyle ortaya çıkan bir grup öğrenci vardı. Eldivenle yaptığınız hareketler daha sonra tanınır ve işaret diline dönüştürülür. Yani şimdiki teknoloji ile zaten yetenekli.

Vizyonumuz, takmanız gereken kol bantları gibi aksesuarları gerçekten oluşturmak istemiyoruz. Video kameralarının önünde yapmaları sadece [işaret dili yapan insanlar] için doğal ve serbest akışlı olmalıdır. İnsanların iletişimde söylediklerinin% 90'ı aslında beden dillerinde. Yüz tanıma, jestler ve duygulara erişebildiğimizden, bu verileri şu şekilde kullanabiliriz: çevirinin ve aktarmaya çalıştıklarının sağda ifade edildiğinden emin olmak için form.

MUO: Intel 5 yıllık işaret dili tanıma teknolojisine sahip mi?

John: Intel'in kesinlikle çok fazla kaynağı var. Teknolojileri ve yazılımları, bunun oldukça hızlı bir şekilde gerçekleşebileceği bir hızda geliyor.

MUO: Bu teknolojiyi piyasaya sürmeyi umduğunuz zaman diliminiz var mı?

John: İşaret dili için yaklaşık 12 ila 18 aydır.

MUO: İşaret dili çevirisi için bunun dışında başka biri var mı?

John: IBM'in bir YouTube videosunun, birinin işaret dili yaptığı bir prototip yaptığını gördüm, ancak bu bir kavram kanıtıydı ve sadece üç veya dört kelime tanıdı. Kullanmayı planladığımız beş yüz binden fazla kelimemiz var, bu yüzden onu başka bir seviyeye taşıyacak.

Sonuç

Berghs'deki öğrencilerin hayal ettikleri vizyon geleceğin işaret dili çeviri uygulaması olamazken, bu böyle bir kavramın olmayacağı anlamına gelmez. SpeechTran, Intel ve Microsoft'ta yapılan çalışma, işaret dili çevirisinin sadece birkaç yıl içinde gerçek bir teknoloji haline geleceğinin kesin olduğudur. Büyük olasılıkla hantal kol bantları içermez, bunun yerine özel bir video kamera ve mobil uygulamadan başka bir şey değildir.

Jest ve yüz tanıma büyüsü sayesinde, geleceğin bu işaret dili çeviri uygulaması yüz binlerce insan için kişilerarası iletişimi tamamen kökten değiştirmeyi vaat ediyor. işitme engelliler Mac ve Apple Cihazı Engelli Kullanıcıları için En İyi 5 Kaynak Daha fazla oku ya da dünyanın her yerinde işiten kişiler.