A dezvoltat cu succes o tastatură imaginară pentru ecrane tactile și VR, alimentată de AI

Un grup de trei cercetători în inteligență artificială (AI) de la Institutul Avansat de Știință și Tehnologie din Coreea (KAIST) a dezvoltat recent cu succes o interfață invizibilă de tastatură, suport AI, absolut nu necesită apăsări fizice de taste, ci trebuie doar să se bazeze pe poziție. unde vă puneți mâna într-o poziție gata de tastare pentru a sprijini operațiunile de introducere a datelor.

Tastatură invizibilă? Sună interesant, dar încă prea vag. Deci, cum funcționează acest tip de tastatură? Cum să obțineți eficiența introducerii datelor? Vom afla în curând.

• Tastatura mecanică folosește un nou mecanism de comutare care poate oferi durabilitate de până la 1 miliard de clicuri

Tastaturile virtuale sunt în continuare alegerea numărul unu pe dispozitivele cu atingere

În fiecare an, industria producătoare de dispozitive periferice, inclusiv tastaturi, cheltuiește miliarde de dolari pe R&D și planuri de marketing menite să aducă produse mai complete, care posedă caracteristici unice. Funcții mai avansate, cum ar fi o tastatură virtuală proiectată cu laser, pot fi utilizate pe orice suprafaţă. Cu toate acestea, eficacitatea în utilizarea practică a produselor periferice actuale, în multe cazuri, este încă un mare semn de întrebare.

Introducerea și popularitatea ecranelor tactile și a dispozitivelor mobile a dus la multe schimbări majore în ceea ce privește tastaturile și mouse-urile. Ecranele tactile și tastaturile virtuale sunt o opțiune rezonabilă pentru utilizatorii de telefonie mobilă, dar pentru dispozitivele fixe, cum ar fi computerele desktop, încă nu există prea multe înlocuitoare notabile pentru tastaturi. ). Deși dimensiunea tastaturii fizice a fost acum optimizată și redusă semnificativ, în general mai trebuie să folosim tastaturi greoaie dacă vrem să folosim un computer desktop.

Au fost propuse zeci de soluții diferite, inclusiv metode de introducere, control vocal în loc de tastaturi tradiționale sau introducere prin glisare în loc de apăsările obișnuite de taste. Măsurile de mai sus pot înlocui teoretic modelele tradiționale de tastatură, dar în practică, acestea nu sunt foarte eficiente și sunt mai ușor ratate sau înșelătoare decât modelele hardware tradiționale.

• Modelul AI al DeepMind poate învăța cum să creeze videoclipuri doar vizionând clipuri YouTube

Eficiența tastaturii virtuale proiectate cu laser în practică nu este încă mare

De aceea, cercetătorii Ue-Hwan Kim, Sahng-Min Yoo și Jong-Hwan Kim de la Institutul Coreean de Știință și Tehnologie Avansată au decis să dezvolte un nou produs care ar putea „redefini” experiența de introducere a tastaturii în era actuală a dezvoltării AI. Au dezvoltat cu succes o interfață literală „tastatură imaginară”.

Informațiile din documentele de cercetare ale oamenilor de știință coreeni sunt prezentate după cum urmează:

„În primul rând, este necesar să confirmăm că această I-Keyboard va fi 100% invizibilă, contribuind la maximizarea utilității ecranului pe dispozitivele mobile. Utilizatorii pot vizualiza conținutul unei aplicații în modul ecran complet și pot scrie liber în același timp, fără a fi nevoiți să piardă o parte din zona de afișare pentru tastatura virtuală ca înainte. Pentru a îmbunătăți și mai mult utilizarea practică, I-Keyboard nu va avea absolut nicio formă, formă sau dimensiune a tastelor fixe. Utilizatorii pot începe procesul de introducere din orice poziție, din orice unghi de pe ecranul tactil, fără a fi nevoiți să-și facă griji cu privire la poziția și forma tastaturii.

• STEAL AI de la Nvidia oferă un suport de inferență mai bun pentru modelele de computer vision

Potrivit cercetătorilor, I-Keyboard nu va necesita nicio calibrare sau configurație de reglare pentru a funcționa. Începeți doar să scrieți oriunde pe ecranul tactil, la fel ca pe o tastatură fizică, și va folosi deep learning, un aspect al domeniului inteligenței artificiale, pentru a recunoaște și înțelege conținutul pe care încercați să-l introduceți. După cum urmează:

„Tastatura I-Keyboard va fi integrată și va funcționa pe baza unui algoritm de decodare special, dezvoltat cu tehnologia de bază a învățării profunde, nefiind astfel nevoie de pași de ajustare pentru a funcționa normal. Decodorul neuronal profund (DND) este integrat pentru a gestiona eficient atât starea de funcționare a degetului, cât și variabilitatea operațiunilor tactile, schimbând astfel automat punctele de atingere în litere specifice".

Acesta pare un pic un truc magic. Cum poate tastatura să știe clar ce încerci să tastați atunci când pur și simplu băgați cu degetele peste tot? La urma urmei, una dintre cele mai mari probleme cu tastaturile soft este că este practic imposibil să determinați exact unde sunt degetele pe taste de-a lungul timpului fără a ne uita, pentru că atunci când nu există orice constrângeri fizice pe care le avem asupra senzației de atingere, vom începe să ne uităm. abate de la poziția noastră inițială.

Cu toate acestea, există o tehnologie destul de grozavă echipată pe tastatura I. În loc să determine poziția exactă a degetelor utilizatorului, algoritmul își dă seama ce acțiune încercați să efectuați și își ajustează continuu tastatura invizibilă pentru a se potrivi cu cealaltă tastatură imaginară din capul dumneavoastră.

• 5 minți de geniu în domeniul AI își unesc mâinile pentru a crea roboți uimitoare

Exemplu de modele de introducere a utilizatorului. Scalele sunt normalizate și spațiile goale sunt eliminate pentru afișare

Mai este mult de lucru pe I-Keyboard. Deși în prezent poate funcționa cu o precizie extrem de impresionantă, de până la 95,8%, poate funcționa doar la aproximativ 45WPM. Oricum, aceasta poate fi considerată o îmbunătățire notabilă în comparație cu tehnologia actuală a tastaturii soft.

Cu noi dezvoltări algoritmice și o interfață tactilă mai bună, cercetătorii cred că I-Keyboard poate fi îmbunătățită pentru a deveni un înlocuitor perfect pentru tastaturile fizice de astăzi, deși, deși scopul lor actual este doar aplicația I-Keyboard pe ecranele tactile și dispozitivele de realitate virtuală.

• YouTube lansează noi filtre AR, permițând utilizatorilor să încerce machiajul cu cele mai bune produse de înfrumusețare din lume

Exemplu de tastatură în tehnologia de realitate virtuală

Dacă este folosit eficient în practică, beneficiile pe care I-Keyboard le aduce tehnologiei VR sunt extrem de vaste. În plus, abilitatea de a introduce oriunde pe ecranul tactil (chiar și pe informațiile afișate) poate fi un instrument care schimbă complet designul UX. Imaginați-vă că telefonul sau tableta dvs. poate afișa 100% din ecran chiar și în timp ce scrieți, fără a fi nevoie să utilizați o tastatură fizică separată, ca în prezent.