AI 기반 터치스크린 및 VR용 가상 키보드 개발 성공

한국과학기술원(KAIST) 인공지능(AI) 연구진 3명이 최근 눈에 보이지 않는 키보드 인터페이스인 AI 지원 개발에 성공했다. AI 지원은 물리적인 키 누름이 전혀 필요하지 않고 위치에만 의존하면 된다. 데이터 입력 작업을 지원하기 위해 손을 바로 입력할 수 있는 위치에 놓습니다.

보이지 않는 키보드? 흥미롭게 들리지만 여전히 너무 모호합니다. 그렇다면 이러한 유형의 키보드는 어떻게 작동합니까? 데이터 입력 효율성을 달성하는 방법은 무엇입니까? 우리는 곧 알아낼 것입니다.

• 기계식 키보드는 최대 10억 번의 클릭에도 내구성을 제공할 수 있는 새로운 스위치 메커니즘을 사용합니다.

가상 키보드는 여전히 터치 지원 장치에서 최고의 선택입니다

매년 키보드를 포함한 주변 장치 제조 산업은 고유한 기능을 갖춘 보다 완전한 제품을 제공하기 위한 R&D 및 마케팅 계획에 수십억 달러를 지출합니다. 레이저 투사 가상 키보드와 같은 고급 기능을 모든 장치에서 사용할 수 있습니다. 표면. 그러나 현재 주변기기의 실용화에 있어서의 실효성은 여전히 ​​큰 의문점으로 남아 있는 경우가 많습니다.

터치 스크린과 모바일 장치의 도입과 인기는 키보드와 마우스에 많은 큰 변화를 가져왔습니다. 터치 스크린과 가상 키보드는 모바일 사용자에게는 합리적인 옵션이지만 데스크톱 컴퓨터와 같은 고정 장치의 경우 키보드를 대체할 만한 눈에 띄는 제품은 아직 많지 않습니다. ). 이제 물리적 키보드의 크기가 최적화되어 크게 줄어들었지만 일반적으로 데스크톱 컴퓨터를 사용하려면 여전히 투박한 키보드를 사용해야 합니다.

입력 방법, 기존 키보드 대신 음성 제어, 일반 키 입력 대신 스와이프 입력 등 수십 가지의 다양한 솔루션이 제안되었습니다. 위의 조치는 이론적으로 기존 키보드 모델을 대체할 수 있지만 실제로는 그다지 효과적이지 않으며 기존 하드웨어 모델보다 쉽게 ​​놓치거나 오해의 소지가 있습니다.

• DeepMind의 AI 모델은 YouTube 클립을 보는 것만으로도 동영상 제작 방법을 학습할 수 있습니다.

실제로 레이저 투사 가상 키보드의 효율성은 아직 높지 않습니다.

한국과학기술연구원(KIST) 김유환·유상민·김종환 연구원은 현 AI 개발 시대에 키보드 입력 경험을 '재정의'할 수 있는 신제품을 개발하기로 결정했다. 그들은 문자 그대로 "가상 키보드" 인터페이스를 성공적으로 개발했습니다.

한국 과학자들의 연구 문서에 포함된 정보는 다음과 같습니다.

“먼저 이 아이키보드가 100% 눈에 띄지 않아 모바일 기기에서 화면의 활용도를 극대화하는 데 도움이 되는지 확인하는 것이 필요합니다. 사용자는 이전처럼 가상 키보드 표시 영역의 일부를 잃지 않고 전체 화면 모드에서 애플리케이션의 콘텐츠를 보면서 동시에 자유롭게 입력할 수 있습니다. 실용적인 사용성을 더욱 향상시키기 위해 I-Keyboard에는 고정된 키 레이아웃, 모양 또는 크기가 전혀 없습니다. 사용자는 키보드의 위치와 모양에 대해 걱정할 필요 없이 터치 스크린의 어느 위치, 어느 각도에서나 입력 프로세스를 시작할 수 있습니다.

• Nvidia의 STEAL AI는 컴퓨터 비전 모델에 대한 더 나은 추론 지원을 제공합니다.

연구원에 따르면 I-Keyboard는 작동하기 위해 보정이나 조정 구성이 필요하지 않습니다. 실제 키보드에서 하듯이 터치스크린의 아무 곳이나 입력하기 시작하면 인공 지능 분야의 한 측면인 딥 러닝을 사용하여 입력하려는 내용을 인식하고 이해합니다. 다음과 같이:

“I-Keyboard 키보드는 딥러닝 핵심 기술로 개발된 특수 디코딩 알고리즘을 기반으로 통합되어 작동하므로 정상적으로 작동하기 위해 조정 단계가 필요하지 않습니다. . 심층 신경 디코더(DND)가 통합되어 손가락의 동작 상태와 터치 동작의 가변성을 모두 효과적으로 처리함으로써 터치 포인트를 특정 문자로 자동 전환합니다."

이것은 약간 마술처럼 보입니다. 단순히 손가락을 여기저기로 찌르기만 하면 키보드가 입력하려는 내용을 어떻게 명확하게 알 수 있습니까? 결국, 소프트 키보드의 가장 큰 문제점 중 하나는 시간이 지남에 따라 보지 않고도 손가락이 키 위에 있는지 정확하게 파악하는 것이 사실상 불가능하다는 것입니다. 우리의 원래 입장에서 벗어나다.

하지만 I-키보드에는 꽤 멋진 기술이 탑재되어 있습니다. 사용자 손가락의 정확한 위치를 결정하는 대신 알고리즘은 사용자가 수행하려는 작업이 무엇인지 파악하고 머리 속의 다른 가상 키보드와 일치하도록 보이지 않는 키보드를 지속적으로 조정합니다.

• AI 분야의 천재 5인이 손을 잡고 놀라운 로봇을 만든다

사용자 입력 모델의 예. 눈금이 정규화되고 표시를 위해 공백이 제거됩니다.

I-Keyboard에는 아직 할 일이 많습니다. 현재는 최대 95.8%의 매우 인상적인 정확도로 작동할 수 있지만 약 45WPM에서만 작동할 수 있습니다. 어쨌든 이는 현재의 소프트 키보드 기술에 비하면 눈에 띄는 발전이라고 볼 수 있다.

추가적인 알고리즘 개발과 더 나은 터치 인터페이스를 통해 연구원들은 I-Keyboard가 오늘날의 실제 키보드를 완벽하게 대체할 수 있도록 개선될 수 있다고 믿습니다. 그러나 현재 목표는 터치 스크린과 가상 현실 장치의 I-Keyboard 애플리케이션일 뿐입니다.

• 유튜브, 세계 최고의 뷰티 제품으로 메이크업 체험할 수 있는 새로운 AR 필터 출시

가상현실 기술의 키보드 예시

실제로 효과적으로 사용한다면 I-Keyboard가 VR 기술에 가져오는 이점은 매우 방대합니다. 게다가, 터치스크린 어디에서나(표시된 정보에서도) 입력할 수 있는 기능은 UX 디자인을 완전히 바꾸는 도구가 될 수 있습니다. 지금처럼 별도의 물리적 키보드를 사용할 필요 없이 휴대폰이나 태블릿이 입력하는 동안에도 화면을 100% 표시할 수 있다고 상상해 보세요.