Dokunmatik ekranlar ve VR için AI tarafından desteklenen hayali bir klavye başarıyla geliştirildi

Kore İleri Bilim ve Teknoloji Enstitüsü'nden (KAIST) üç yapay zeka (AI) araştırmacısından oluşan bir grup, yakın zamanda başarıyla görünmez bir klavye arayüzü geliştirdi; AI desteği, kesinlikle herhangi bir fiziksel tuşa basılmasını gerektirmez, yalnızca konuma güvenmesi gerekir veri girişi işlemlerini desteklemek için elinizi yazmaya hazır bir konuma getirdiğiniz yer.

Görünmez klavye mi? Kulağa ilginç geliyor ama yine de çok belirsiz. Peki bu tür klavye nasıl çalışır? Veri girişi verimliliği nasıl sağlanır? Yakında öğreneceğiz.

• Mekanik klavye, 1 milyar tıklamaya kadar dayanıklılık sağlayabilen yeni bir anahtar mekanizması kullanıyor

Sanal klavyeler hâlâ dokunmatik cihazlarda bir numaralı tercih

Her yıl, klavyeler de dahil olmak üzere çevresel aygıt imalat endüstrisi, daha eksiksiz, benzersiz özelliklere sahip ürünler getirmeyi amaçlayan Ar-Ge ve pazarlama planlarına milyarlarca dolar harcıyor. Lazer projeksiyonlu sanal klavye gibi daha gelişmiş özellikler, herhangi bir cihazda kullanılabilir. yüzey. Ancak mevcut yan ürünlerin pratik kullanımındaki etkinliği çoğu durumda hala büyük bir soru işaretidir.

Dokunmatik ekranların ve mobil cihazların tanıtımı ve popülerliği, klavye ve farelerde birçok büyük değişikliğe yol açtı. Dokunmatik ekranlar ve sanal klavyeler mobil kullanıcılar için makul bir seçenektir, ancak masaüstü bilgisayarlar gibi sabit cihazlar için klavyelerin yerini alacak çok fazla kayda değer alternatif bulunmamaktadır.Tam boyutlu QWERTY (on parmağınıza aynı anda takabileceğiniz türden bir klavye) ). Her ne kadar fiziksel klavyenin boyutu artık optimize edilmiş ve önemli ölçüde azaltılmış olsa da, eğer bir masaüstü bilgisayar kullanmak istiyorsak genel olarak hala hantal klavyeler kullanmak zorundayız.

Giriş yöntemleri, geleneksel klavyeler yerine sesle kontrol veya normal tuş vuruşları yerine kaydırarak giriş gibi onlarca farklı çözüm önerildi. Yukarıdaki önlemler teorik olarak geleneksel klavye modellerinin yerini alabilir ancak pratikte çok etkili değildirler ve geleneksel donanım modellerine göre daha kolay gözden kaçar veya yanıltıcı olurlar.

• DeepMind'ın yapay zeka modeli, yalnızca YouTube kliplerini izleyerek nasıl video oluşturulacağını öğrenebilir

Lazer projeksiyonlu sanal klavyenin pratikteki etkinliği hala yüksek değil

Bu nedenle Kore Bilim ve İleri Teknoloji Enstitüsü'nden araştırmacılar Ue-Hwan Kim, Sahng-Min Yoo ve Jong-Hwan Kim, mevcut yapay zeka geliştirme çağında Klavye giriş deneyimini "yeniden tanımlayabilecek" yeni bir ürün geliştirmeye karar verdiler. Gerçek anlamda bir "hayali klavye" arayüzünü başarıyla geliştirdiler.

Koreli bilim adamlarının araştırma belgelerinde yer alan bilgiler şöyle belirtiliyor:

“Öncelikle bu I-Klavyenin %100 görünmez olacağını ve mobil cihazlarda ekranın kullanışlılığının en üst düzeye çıkarılmasına yardımcı olacağını doğrulamak gerekiyor. Kullanıcılar, daha önce olduğu gibi sanal klavyenin görüntüleme alanının bir kısmını kaybetmek zorunda kalmadan, bir uygulamanın içeriğini tam ekran modunda görüntüleyebilir ve aynı anda serbestçe yazabilir. Pratik kullanılabilirliği daha da geliştirmek için I-Klavyemiz kesinlikle sabit bir tuş düzenine, şekline veya boyutuna sahip olmayacaktır. Kullanıcılar, klavyenin konumu ve şekli konusunda endişelenmelerine gerek kalmadan, dokunmatik ekranda herhangi bir konumdan, herhangi bir açıda giriş işlemini başlatabilirler.

• Nvidia'nın STEAL AI'si bilgisayarla görme modelleri için daha iyi çıkarım desteği sağlıyor

Araştırmacılara göre I-Keyboard'un çalışması için herhangi bir kalibrasyon veya ayar konfigürasyonu gerekmeyecek. Tıpkı fiziksel bir klavyede yaptığınız gibi, dokunmatik ekranın herhangi bir yerinde yazmaya başlıyorsunuz ve yazmaya çalıştığınız içeriği tanımak ve anlamak için yapay zeka alanının bir yönü olan derin öğrenmeyi kullanacak. Aşağıdaki gibi:

“I-Klavye klavyesi, derin öğrenmenin temel teknolojisiyle geliştirilen özel bir kod çözme algoritmasına göre entegre edilecek ve çalışacak, dolayısıyla normal şekilde çalışması için hiçbir ayar adımı gerektirmeyecek. . Derin sinir kod çözücü (DND), hem parmağın çalışma durumunu hem de dokunma işlemlerinin değişkenliğini etkili bir şekilde yönetecek şekilde entegre edilmiştir, böylece temas noktaları otomatik olarak belirli harflere dönüştürülür".

Bu biraz sihir numarasına benziyor. Parmaklarınızı her yere sokarken klavye ne yazmaya çalıştığınızı nasıl açıkça bilebilir? Sonuçta, yumuşak klavyelerle ilgili en büyük sorunlardan biri, zaman içinde parmaklarınızın tuşların üzerinde tam olarak nerede olduğunu bakmadan belirlemenin neredeyse imkansız olmasıdır; çünkü dokunma hissi üzerinde sahip olduğumuz fiziksel kısıtlamalar olmadığında, orijinal konumumuzdan saparız.

Ancak I-klavyede oldukça harika teknolojiler var. Algoritma, kullanıcının parmaklarının tam konumunu belirlemek yerine, hangi eylemi gerçekleştirmeye çalıştığınızı anlar ve görünmez klavyesini, kafanızdaki diğer hayali klavyeye uyacak şekilde sürekli olarak ayarlar.

• Yapay zeka alanındaki 5 dahi beyin, muhteşem robotlar yaratmak için el ele veriyor

Kullanıcı giriş modellerine örnek. Ölçekler normalleştirilir ve gösterim için boş alanlar kaldırılır

I-Keyboard'da hâlâ yapılacak çok iş var. Şu anda %95,8'e kadar son derece etkileyici bir doğrulukla çalışabilmesine rağmen, yalnızca yaklaşık 45WPM'de çalışabilir. Her neyse, mevcut yumuşak klavye teknolojisiyle karşılaştırıldığında bu dikkate değer bir gelişme olarak değerlendirilebilir.

Daha fazla algoritmik gelişme ve daha iyi bir dokunmatik arayüz ile araştırmacılar, I-Keyboard'un günümüzün fiziksel klavyelerinin mükemmel bir alternatifi olacak şekilde geliştirilebileceğine inanıyorlar; ancak mevcut hedefleri sadece dokunmatik ekranlar ve sanal gerçeklik cihazlarındaki I-Keyboard uygulamasıdır.

• YouTube, kullanıcıların dünyanın en iyi güzellik ürünleriyle makyaj denemelerine olanak tanıyan yeni AR filtrelerini kullanıma sunuyor

Sanal gerçeklik teknolojisinde klavye örneği

Uygulamada etkili bir şekilde kullanıldığında I-Keyboard'un VR teknolojisine sağladığı faydalar son derece büyüktür. Ayrıca dokunmatik ekranın herhangi bir yerine (görüntülenen bilgilere bile) giriş yapabilme yeteneği, UX tasarımını tamamen değiştiren bir araç olabilir. Telefonunuzun veya tabletinizin, günümüzdeki gibi ayrı bir fiziksel klavye kullanmanıza gerek kalmadan yazarken bile ekranın %100'ünü görüntüleyebildiğini hayal edin.