Pomyślnie opracowano wyimaginowaną klawiaturę dla ekranów dotykowych i VR, obsługiwaną przez sztuczną inteligencję

Grupie trzech badaczy sztucznej inteligencji (AI) z Koreańskiego Zaawansowanego Instytutu Nauki i Technologii (KAIST) niedawno udało się opracować niewidzialny interfejs klawiatury, obsługujący sztuczną inteligencję, absolutnie nie wymagający żadnego fizycznego naciśnięcia klawiszy, a jedynie polegający na pozycji gdzie umieszczasz rękę w pozycji gotowej do pisania, aby wesprzeć operacje wprowadzania danych.

Niewidzialna klawiatura? Brzmi interesująco, ale wciąż zbyt niejasno. Jak więc działa tego typu klawiatura? Jak osiągnąć efektywność wprowadzania danych? Dowiemy się tego wkrótce.

• W klawiaturze mechanicznej zastosowano nowy mechanizm przełączający, który może zapewnić trwałość do 1 miliarda kliknięć

Klawiatury wirtualne są nadal najpopularniejszym wyborem na urządzeniach dotykowych

Każdego roku branża produkująca urządzenia peryferyjne, w tym klawiatury, wydaje miliardy dolarów na badania i rozwój oraz plany marketingowe mające na celu dostarczanie bardziej kompletnych produktów, posiadających unikalne funkcje. Bardziej zaawansowane funkcje, takie jak wirtualna klawiatura wyświetlana laserowo, mogą być używane na dowolnym urządzeniu powierzchnia. Jednak skuteczność w praktycznym wykorzystaniu obecnych produktów peryferyjnych w wielu przypadkach pozostaje dużym znakiem zapytania.

Wprowadzenie i popularność ekranów dotykowych i urządzeń mobilnych doprowadziło do wielu poważnych zmian w klawiaturach i myszach. Ekrany dotykowe i klawiatury wirtualne to rozsądna opcja dla użytkowników mobilnych, ale w przypadku urządzeń stacjonarnych, takich jak komputery stacjonarne, wciąż nie ma zbyt wielu godnych uwagi zamienników klawiatur.Pełnowymiarowa klawiatura QWERTY (rodzaj klawiatury, którą można założyć na wszystkich dziesięciu palcach jednocześnie ). Chociaż rozmiar fizycznej klawiatury został teraz zoptymalizowany i znacznie zmniejszony, ogólnie rzecz biorąc, nadal musimy używać nieporęcznych klawiatur, jeśli chcemy korzystać z komputera stacjonarnego.

Zaproponowano dziesiątki różnych rozwiązań, w tym metody wprowadzania, sterowanie głosowe zamiast tradycyjnych klawiatur lub wprowadzanie poprzez przesuwanie zamiast zwykłych naciśnięć klawiszy. Powyższe środki teoretycznie mogą zastąpić tradycyjne modele klawiatur, jednak w praktyce są mało skuteczne i łatwiej je przeoczyć lub wprowadzić w błąd niż tradycyjne modele sprzętowe.

• Model AI DeepMind może nauczyć się tworzyć filmy, po prostu oglądając klipy na YouTube

Skuteczność wirtualnej klawiatury wyświetlanej laserowo w praktyce wciąż nie jest wysoka

Właśnie dlatego badacze Ue-Hwan Kim, Sahng-Min Yoo i Jong-Hwan Kim z Koreańskiego Instytutu Nauki i Zaawansowanych Technologii postanowili opracować nowy produkt, który mógłby „na nowo zdefiniować” wrażenia z wprowadzania danych za pomocą klawiatury w obecnej erze rozwoju sztucznej inteligencji. Udało im się opracować dosłowny interfejs „wyimaginowanej klawiatury”.

Informacje w dokumentach badawczych koreańskich naukowców są następujące:

„Przede wszystkim należy potwierdzić, że ta klawiatura I-Keyboard będzie w 100% niewidoczna, co pomoże zmaksymalizować użyteczność ekranu na urządzeniach mobilnych. Użytkownicy mogą przeglądać zawartość aplikacji w trybie pełnoekranowym i jednocześnie swobodnie pisać, bez konieczności utraty części obszaru wyświetlania dla wirtualnej klawiatury, jak dotychczas. Aby jeszcze bardziej poprawić praktyczną użyteczność, nasza klawiatura I-Keyboard nie będzie miała żadnego stałego układu, kształtu ani rozmiaru klawiszy. Użytkownicy mogą rozpocząć proces wprowadzania danych z dowolnej pozycji i pod dowolnym kątem na ekranie dotykowym, nie martwiąc się o położenie i kształt klawiatury.

• Sztuczna inteligencja Nvidia STEAL zapewnia lepszą obsługę wnioskowania dla modeli widzenia komputerowego

Według naukowców I-Keyboard do działania nie będzie wymagać żadnej kalibracji ani konfiguracji. Po prostu zaczynasz pisać w dowolnym miejscu na ekranie dotykowym, tak jak na fizycznej klawiaturze, a system wykorzystuje głębokie uczenie się, aspekt dziedziny sztucznej inteligencji, do rozpoznawania i rozumienia treści, którą próbujesz wpisać. Następująco:

„Klawiatura I-Keyboard zostanie zintegrowana i będzie działać w oparciu o specjalny algorytm dekodowania, opracowany przy użyciu podstawowej technologii głębokiego uczenia się, dzięki czemu nie będzie wymagać żadnych czynności regulacyjnych, aby normalnie działać. Zintegrowany dekoder neuronowy (DND) skutecznie radzi sobie zarówno ze stanem operacyjnym palca, jak i zmiennością operacji dotykowych, automatycznie przełączając punkty dotyku na określone litery.

Wygląda to trochę jak magiczna sztuczka. Jak klawiatura może wyraźnie wiedzieć, co próbujesz wpisać, skoro po prostu szturchasz palcami wszędzie? W końcu jednym z największych problemów z miękkimi klawiaturami jest to, że praktycznie niemożliwe jest określenie dokładnego położenia palców na klawiszach w miarę upływu czasu bez patrzenia, ponieważ gdy nie ma żadnych fizycznych ograniczeń, jakie mamy w zakresie czucia dotyku, zaczniemy odbiegamy od naszego pierwotnego stanowiska.

Jednak w klawiaturze I znajduje się całkiem fajna technologia. Zamiast określać dokładną pozycję palców użytkownika, algorytm domyśla się, jaką czynność próbujesz wykonać i na bieżąco dostosowuje swoją niewidzialną klawiaturę, aby dopasować ją do innej wyimaginowanej klawiatury w Twojej głowie.

• 5 genialnych umysłów w dziedzinie sztucznej inteligencji łączy ręce, aby stworzyć niesamowite roboty

Przykład modeli wejściowych użytkownika. Skale są znormalizowane, a puste miejsca są usuwane na potrzeby wyświetlania

Nadal jest dużo pracy nad I-Keyboardem. Chociaż obecnie może działać z niezwykle imponującą dokładnością, sięgającą 95,8%, może działać jedynie przy prędkości około 45 WPM. Tak czy inaczej, można to uznać za zauważalną poprawę w porównaniu z obecną technologią miękkich klawiatur.

Naukowcy uważają, że dzięki dalszym udoskonaleniom algorytmów i lepszemu interfejsowi dotykowemu klawiaturę I-Keyboard można ulepszyć, aby stała się idealnym zamiennikiem dzisiejszych klawiatur fizycznych, chociaż ich obecnym celem jest tylko aplikacja I-Keyboard na ekranach dotykowych i urządzeniach rzeczywistości wirtualnej.

• YouTube wprowadza nowe filtry AR, dzięki którym użytkownicy mogą wypróbować makijaż z użyciem najlepszych na świecie kosmetyków

Przykład klawiatury w technologii wirtualnej rzeczywistości

Jeśli zostanie skutecznie zastosowany w praktyce, korzyści, jakie I-Keyboard wnosi do technologii VR, są niezwykle ogromne. Poza tym możliwość wprowadzania danych w dowolnym miejscu ekranu dotykowego (nawet na wyświetlanych informacjach) może być narzędziem, które całkowicie zmienia projekt UX. Wyobraź sobie, że Twój telefon lub tablet może wyświetlać 100% ekranu nawet podczas pisania, bez konieczności używania osobnej klawiatury fizycznej, jak obecnie.