KR102149131B1 - 보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램 - Google Patents

보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램 Download PDF

Info

Publication number
KR102149131B1
KR102149131B1 KR1020190002476A KR20190002476A KR102149131B1 KR 102149131 B1 KR102149131 B1 KR 102149131B1 KR 1020190002476 A KR1020190002476 A KR 1020190002476A KR 20190002476 A KR20190002476 A KR 20190002476A KR 102149131 B1 KR102149131 B1 KR 102149131B1
Authority
KR
South Korea
Prior art keywords
output
symbol
input
keyboard layout
received
Prior art date
Application number
KR1020190002476A
Other languages
English (en)
Other versions
KR20200086175A (ko
Inventor
김경양
Original Assignee
김경양
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김경양 filed Critical 김경양
Priority to KR1020190002476A priority Critical patent/KR102149131B1/ko
Publication of KR20200086175A publication Critical patent/KR20200086175A/ko
Application granted granted Critical
Publication of KR102149131B1 publication Critical patent/KR102149131B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/018—Input/output arrangements for oriental characters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0238—Programmable keyboards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/232—Orthographic correction, e.g. spell checking or vowelisation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems

Abstract

본 발명은 보완 대체 의사소통 방법을 제안한다. 상기 보완 대체 의사소통 방법은 사용자의 계정에 대응되어 사전에 등록된 자판 배열을 불러(loading)오는 단계; 상기 불러온 자판 배열에 따라 가상의 글쇠(key)들을 구성하여 출력하고, 보완 대체 의사소통(augmentative and alternative communication)을 위해 연결된 보조 입력 장치로부터 수신된 정보를 기초로, 상기 글쇠들 중 어느 하나를 선택하는 단계; 상기 선택된 글쇠에 대응되는 기호를 텍스트 박스(text box)에 출력하는 단계; 및 상기 보조 입력 장치로부터 입력 완료가 수신되기 전까지 상기 텍스트 박스에 출력된 기호의 수정을 허용하고, 상기 입력 완료가 수신되면 상기 텍스트 박스에 출력된 기호를 사전에 지정된 애플리케이션(application)에 전달하는 단계를 포함할 수 있다.

Description

보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램{Method for augmentative and alternative communication, and computer program recorded on record-medium for executing method therefor}
본 발명은 특수 교육학(special education)에 관한 것이다. 보다 상세하게는, 보완 대체 의사소통(Augmentative and Alternative Communication, AAC)을 수행하는 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램에 관한 것이다.
보완 대체 의사소통(AAC)은 말(speech)이나 글(writing)을 통해 의사소통(communication)하기 곤란한 자의 언어능력을 촉진하기 위하여 사용되는 다양한 형태의 의사소통 수단을 의미한다. 예를 들어, 보완 대체 의사소통(AAC)에는 말의 발달이 늦거나 또는 조음(articulation)에 문제가 있는 자의 말을 보완(augment)하여 의사소통을 지원하거나, 또는 조음 기관에 대한 수술 또는 장애 등으로 인해 발음할 수 없는 자에게 다른 대체적인(alternative) 의사소통 수단을 지원하는 것 등이 포함될 수 있다.
일반적으로, 보완 대체 의사소통(AAC)은 사용자가 입력하기 원하는 기호(symbol)를 직접적으로 선택하는 방식, 또는 사용자가 입력하기 원하는 기호를 간접적으로 선택하는 방식이 있다.
구체적으로, 기호를 직접적으로 선택하는 방식은 사용자가 자신의 신체 일부분(예를 들어, 손가락, 발가락, 코, 눈, 팔꿈치 등)으로 입력하고자 하는 기호를 지적하거나, 또는 보조 수단을 이용하여 입력하고자 하는 기호를 직접 또는 간접적으로 지적하는 것이다.
여기서, 기호를 직접적으로 지적할 수 있는 보조 수단에는 헤드 스틱(head sticks), 핸드 스플린트(hand splints) 및 마우스 스틱(mouth sticks) 등이 포함될 수 있다. 그리고, 기호를 간접적으로 지적할 수 있는 보조 수단에는 터치 패드(touch pad), 광 포인터(light beam pointer), 조이스틱(joysticks) 및 시선 추적 모니터(ocular eyegaze monitor) 등이 포함될 수 있다.
기호를 간접적으로 선택하는 방식은 의사소통 장치가 여러 기호들에 대하여 스캐닝(scanning)하는 과정에서 사용자가 입력하고자 하는 기호를 선택하는 것이다. 여기서, 스캐닝은 자동 스캐닝(automation scanning), 순서적 스캐닝(step scanning), 역 스캐닝(inverse scanning), 그룹 스캐닝(group scanning), 및 행렬 스캐닝(row-column scanning) 등으로 분류될 수 있다.
자동 스캐닝은 여러 기호들을 스캐닝하는 과정에서, 입력하고자 하는 기호에 포커스(focus)가 도달하면 사용자가 스위치(switch)를 입력하여 기호를 선택하는 방식이다. 여기서, 포커스는 스캐닝 과정에서 복수 개의 기호들 중 사용자에 의해 선택될 수 있는 기호를 가리키는 지시자(indicator)이다.
순서적 스캐닝은 사용자가 스위치를 반복적으로 입력하여 입력하고자 하는 기호까지 포커스를 이동시킨 후, 다른 스위치를 입력하여 기호를 선택하는 방식이다.
역 스캐닝은 입력하고자 하는 기호에 포커스가 도달할 때까지 사용자가 스위치를 누르고 있다가, 포커스가 입력하고자 하는 기호에 도달하면 사용자가 누르고 있던 스위치를 떼어 기호를 선택하는 방식이다.
그룹 스캐닝은 우선적으로 대분류된 그룹들에 대하여 스캐닝을 수행하고, 사용자에 의해 특정 그룹이 선택되면 선택된 그룹에 속한 소분류된 기호들에 대하여 스캐닝을 수행하는 방식이다.
그리고, 행렬 스캐닝은 2차원 행렬(matrix)로 배열된 여러 기호들 중에서 우선적으로 행(row)들에 대하여 스캐닝을 수행하고, 사용자에 의해 특정 행이 선택되면 선택된 행에 속한 기호들에 대하여 스캐닝을 수행하는 방식이다.
그러나, 종래의 보완 대체 의사소통 방법들에 따르면, 사용자는 한정된 종류의 기호들 내에서만 입력하고자 하는 기호를 선택할 수 있었다. 또한, 사용자는 사전에 정해진 위치로 배열된 기호들 중에서 입력하고자 하는 기호를 검색하여야 했다.
또한, 입력하고자 하는 기호를 직접적으로 선택(즉, 사용자가 신체의 일부분 또는 보조수단을 이용하여 지적)하는 과정, 또는 스캐닝하는 과정에서 입력하고자 하는 기호를 간접적으로 선택하는 과정에서 의도치 않게 다른 기호를 선택할 가능성이 매우 높다. 그러나, 종래의 보완 대체 의사소통 방법들에 따르면, 이와 같이 의도치 않게 선택된 기호(즉, 오타)를 곧바로 화면 또는 소리 형태로 출력(output)하여, 사용자가 의사소통에 어려움을 겪고 있다는 사실을 의사소통 상대방에서 곧바로 노출하는 문제가 있다.
따라서, 사용자가 가 입력하고자 하는 기호를 제한 없이 선택하고, 의도치 않게 다른 기호가 선택된 경우에도 이를 수정할 수 있는 기회를 제공할 수 있는 솔루션이 요구되고 있다.
대한민국 공개특허 제10-2005-0092293호, ‘장애인용 보완대체 의사 소통 단말기’, (2005.09.21. 공개)
본 발명의 일 개시는 사용자가 입력하고자 하는 기호를 제한 없이 선택하고, 의도치 않게 선택된 기호를 수정할 수 있는 기회를 제공하는, 보완 대체 의사소통 방법을 제공하는 것을 그 목적으로 한다.
본 발명의 다른 개시는 사용자가 입력하고자 하는 기호를 제한 없이 선택하고, 의도치 않게 선택된 기호를 수정할 수 있는 기회를 제공하는, 보완 대체 의사소통 방법을 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램을 제공하는 것을 그 목적으로 한다.
본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명은 상술한 바와 같은 기술적 과제를 달성하기 위한 보완 대체 의사소통 방법을 제안한다. 상기 보완 대체 의사소통 방법은 사용자의 계정에 대응되어 사전에 등록된 자판 배열을 불러(loading)오는 단계; 상기 불러온 자판 배열에 따라 가상의 글쇠(key)들을 구성하여 출력하고, 보완 대체 의사소통(augmentative and alternative communication)을 위해 연결된 보조 입력 장치로부터 수신된 정보를 기초로, 상기 글쇠들 중 어느 하나를 선택하는 단계; 상기 선택된 글쇠에 대응되는 기호를 텍스트 박스(text box)에 출력하는 단계; 및 상기 보조 입력 장치로부터 입력 완료가 수신되기 전까지 상기 텍스트 박스에 출력된 기호의 수정을 허용하고, 상기 입력 완료가 수신되면 상기 텍스트 박스에 출력된 기호를 사전에 지정된 애플리케이션(application)에 전달하는 단계를 포함할 수 있다.
상기 애플리케이션은 운영체제(operating system)에 의해 관리되는 프로세스(process), 작업(task) 또는 쓰레드(thread)의 우선순위(priority)에 따라 결정될 수 있다. 이와 같은, 상기 애플리케이션은 웹 브라우저(web browser), 소셜 네트워크 서비스(Social Network Service), 또는 메신저(messenger) 중 어느 하나가 될 수 있으나, 이에 한정되는 것은 아니다.
상기 자판 배열을 불러오는 단계는 상기 사용자의 계정에 대응하여 등록된 복수 개의 자판 배열들 중에서, 상기 애플리케이션의 종류에 따라 결정된 하나의 자판 배열을 결정할 수 있다.
상기 선택하는 단계는 상기 보조 입력 장치가 터치 패드(touch pad), 광 포인터(light beam pointer), 조이스틱(joysticks) 및 시선 추적 모니터(ocular eyegaze monitor) 중 어느 하나인 경우, 상기 보조 입력 장치로부터 수신된 입력 좌표에 대응되게 위치하는 글쇠를 선택할 수 있다. 또는, 상기 선택하는 단계는 상기 보조 입력 장치가 스위치(switch)인 경우, 상기 자판 배열에 따라 배치된 글쇠들에 대하여 순차적으로 포커스(focus)를 이동시키는 중, 상기 보조 입력 장치로부터 선택 신호가 수신된 시점에 포커스가 위치하는 글쇠를 선택할 수 있다.
상기 자판 배열을 구성하는 각 글쇠는 한글 자음, 한글 모임, 한 글자 이상의 단어 및 복수 개의 단어로 구성된 문장 중 어느 하나에 대응될 수 있다. 그리고, 상기 출력하는 단계는 상기 선택된 글쇠가 한글 모음에 해당되는 경우, 상기 자판 배열에 따라 출력된 글쇠들 중 한글 자음에 해당되는 글쇠의 색상을 변경하여 출력할 수 있다.
상기 출력하는 단계는 맞춤법 사전(spelling dictionary)을 기초로 상기 텍스트 박스에 출력 중인 기호들로 구성된 문자열 내에서 맞춤법이 틀린 기호를 식별하고, 상기 텍스트 박스에 출력 중인 기호들 중 상기 맞춤법이 틀린 기호의 색상을 변경하여 출력할 수 있다.
상기 출력하는 단계는 상기 선택된 글쇠에 대응되는 기호를 큐(queue)에 삽입(enqueue)하고, 상기 전달하는 단계는 상기 큐가 빌 때(empty)까지 상기 큐에 삽입된 기호를 하나씩 추출(dequeue)하여, 상기 애플리케이션의 메시지 입력 큐(message input queue)에 삽입할 수 있다. 이 경우, 상기 전달하는 단계는 상기 큐로부터 추출된 기호에 대응되는 가상 키 코드(virtual-key code)를 워드 파라미터(wParam)로 가지는 키 입력 메시지(WM_KEYDOWN)를 상기 메시지 입력 큐에 삽입할 수 있다.
상기 전달하는 단계는 상기 입력 완료가 수신되면, TTS(Text To Speech) 라이브러리(library)를 이용하여, 상기 텍스트 박스에 출력된 기호들로 구성된 단어 또는 문장을 소리로 출력할 수 있다.
상술한 바와 같은 기술적 과제를 달성하기 위하여, 본 발명은 보완 대체 의사소통 방법을 실행시키기 위하여 기록매체에 기록된 컴퓨터 프로그램을 제안한다. 상기 프로그램은 사용자의 계정에 대응되어 사전에 등록된 자판 배열을 불러오는 단계; 상기 불러온 자판 배열에 따라 가상의 글쇠(key)들을 구성하여 출력하고, 보완 대체 의사소통(AAC)을 위해 연결된 보조 입력 장치로부터 수신된 정보를 기초로, 상기 글쇠들 중 어느 하나를 선택하는 단계; 상기 선택된 글쇠에 대응되는 기호를 텍스트 박스에 출력하는 단계; 및 상기 보조 입력 장치로부터 입력 완료가 수신되기 전까지 상기 텍스트 박스에 출력된 기호의 수정을 허용하고, 상기 입력 완료가 수신되면 상기 텍스트 박스에 출력된 기호를 사전에 결정된 애플리케이션에 전달하는 단계를 실행시킬 수 있다.
기타 실시 예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 발명의 실시 예들에 따르면, 한글 자음, 한글 모음, 영문자 알파벳, 숫자 및 특수 기호 뿐만 아니라, 자주 사용하는 단어, 문장까지 자유롭게 배치할 수 있는 맞춤형 자판(keyboard)을 제공하므로, 의사소통에 어려움을 겪는 사용자가 표현할 수 있는 의사 범위가 넓어질 수 있다.
특히, 본 발명의 실시 예들에 따르면, 사용자에 의해 선택된 기호를 즉각 출력하지 않고 이를 수정할 수 있는 기회를 제공하므로, 사용자가 의사소통에 어려움을 겪고 있다는 사실을 의사소통 상대방에서 노출시키지 않을 수 있다.
본 발명의 효과들은 이상에서 언급한 효과로 제한되지 아니하며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 본 발명이 속한 기술분야의 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
도 1 및 도 2는 종래의 보완 대체 의사소통 방법의 몇몇 예시를 나타낸 예시도이다.
도 3은 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법의 예시를 나타낸 예시도이다.
도 4는 본 발명의 일 실시예에 따른 보완 대체 의사소통 시스템의 구성도이다.
도 5는 본 발명의 일 실시예에 따른 의사소통 장치의 논리적 구성도이다.
도 6은 본 발명의 일 실시예에 따른 의사소통 장치의 하드웨어 구성도이다.
도 7은 본 발명의 일 실시예에 따라 의사소통 장치가 보완 대체 의사소통 방법을 수행하는 과정을 나타낸 순서도이다.
도 8은 본 발명의 일 실시예에 따라 기호를 입력 대상 애플리케이션에 전달하는 과정을 나타낸 순서도이다.
본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 명세서에서 사용되는 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성 요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.
어떤 구성 요소가 다른 구성 요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성 요소가 존재할 수도 있다. 반면에, 어떤 구성 요소가 다른 구성 요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성 요소가 존재하지 않는 것으로 이해되어야 할 것이다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다. 본 발명의 사상은 첨부된 도면 외에 모든 변경, 균등물 내지 대체물에 까지도 확장되는 것으로 해석되어야 한다.
본 발명에 대한 설명에 앞서, 본 명세서에서 반복 기술하는 몇몇 용어에 대해 설명한다.
보완 대체 의사소통(Augmentative and Alternative Communication, AAC)은 말이나 글을 통해 의사소통이 곤란한 자의 언어능력을 촉진하기 위하여 사용되는 다양한 형태의 의사소통 수단이다. 보완 대체 의사소통 장치는 사용자로부터 입력된 신호를 기초로, 화면(즉, 글) 또는 소리(즉, 말)을 출력하여 의사소통을 지원하는 장치이다.
기호(symbol)는 사용자가 보완 대체 의사소통 장치에 입력하는 의사의 단위이다. 즉, 기호는 사용자가 보완 대체 의사소통 장치를 이용하여 상대방에게 표현하고자 하는 의사의 일 구성 요소이다. 이와 같은, 기호에는 한글 자음, 한글 모음, 영문자 알파벳, 숫자, 특수 기호, 단어 및 문장 등이 포함될 수 있으며, 이에 한정되는 것은 아니다.
글쇠(key)는 보완 대체 의사소통 장치의 자판(keyboard)의 일 구성 요소이다. 보완 대체 의사소통 장치의 자판을 구성하는 각각의 글쇠는 보완 대체 의사소통 장치가 지원하는 각각의 기호와 대응될 수 있다. 본 발명의 일 실시예에 따른 자판은 물리적 버튼의 글쇠로 구성되지 않고, 화면을 통해 기호를 출력하고 입력된 신호를 기초로 기호를 선택하는 가상의 글쇠(virtual key)로 구성된 가상 자판(virtual keyboard)가 될 수 있다.
텍스트 박스(text box)는 사용자가 기호를 입력하거나 수정할 수 있는 그래픽 사용자 인터페이스(Graphic User Interface, GUI) 객체(object)이다. 이와 같은, 텍스트 박스는 운영체제(Operating System, OS)에서 제공하는 애플리케이션 프로그래밍 인터페이스(Application Programming Interface, API) 또는 라이브러리(library)를 이용하여 구현될 수 있으나, 이에 한정되는 것은 아니다.
이하, 종래의 보완 대체 의사소통 방법과 대비하여, 본 발명이 제안하고자 하는 보완 대체 의사소통 방법의 특징을 설명하기로 한다.
도 1 및 도 2는 종래의 보완 대체 의사소통 방법의 몇몇 예시를 나타낸 예시도이다 .
일반적으로, 보완 대체 의사소통 방법은 고정식 컴퓨팅 장치 또는 이동식 컴퓨팅 장치를 이용하여 구현될 수 있다. 여기서, 고정식 컴퓨팅 장치에는 데스크탑(desktop), 워크스테이션(workstation) 또는 서버(server)가 포함될 수 있으나, 이에 한정되지 않는다. 그리고, 이동식 컴퓨팅 장치에는 스마트폰(smart phone), 랩탑(laptaop), 태블릿(tablet), 패블릿(phablet), 휴대용 멀티미디어 재생장치(Portable Multimedia Player, PMP), 개인용 휴대 단말기(Personal Digital Assistants, PDA) 또는 전자책 단말기(E-book reader)가 포함될 수 있으나, 이에 한정되지 않는다.
또한, 종래의 보완 대체 의사소통 방법은 "문장" 단위의 기호, 또는 "한글 자음, 한글 모음, 영문자, 숫자 또는 특수 기호" 단위의 기호 중 어느 하나를 지원하였다.
도 1은 고정식 컴퓨팅 장치를 이용하여 구현되며, 문장 단위의 기호를 지원하는 종래의 보완 대체 의사소통 방법의 일 예시를 나타내고 있다.
도 1에 도시된 바와 같은 종래의 보완 대체 의사소통 방법에 따르면, 화면(10)에 그룹으로 분류된 문장 단위의 기호들이 출력되면, 사용자는 자신이 입력하고자 하는 기호가 속한 그룹에 따라 우선적으로 탭(tap, 11)을 선택한 후, 그룹 내에 속한 기호들 중에서 입력하고자 하는 기호의 글쇠(13)를 선택할 수 있었다. 여기서, 탭(11)은 그룹을 선택하기 위한 GUI 객체이다.
한편, 웹 검색(web searching), 소셜 네트워크 서비스(Social Network Service, SNS), 또는 메신저(messenger) 등과 같은 서비스이 대중화되면서, 언어 장애를 가진 자들 또한 자신의 의사를 자유롭게 표현하고 싶은 니즈(needs)가 강해지고 있다.
그러나, 도 1에 도시된 종래의 보완 대체 의사소통 방법을 이용하면, 사용자는 오직 문장 단위의 정해진 기호만을 입력할 수 있으므로 자신의 의사를 자유롭게 표현하고 싶어도 할 수가 없었다.
도 2는 이동식 컴퓨팅 장치를 이용하여 구현되며, 한글 자음, 한글 모음, 영문자, 숫자 또는 특수 기호 단위의 기호를 지원하는 종래의 보완 대체 의사소통 방법의 일 예시를 나타내고 있다.
도 2에 도시된 바와 같은 종래의 보완 대체 의사소통 방법에 따르면, 화면(20)에 사용자가 선택할 수 있는 모든 기호들이 출력되면, 사용자는 출력된 수 많은 기호들 중에서 자신이 입력하고자 하는 기호를 탐색한 후, 탐색된 기호의 글쇠(21)를 선택할 수 있었다.
따라서, 도 2에 도시된 종래의 보완 대체 의사소통 방법을 이용하면, 사용자는 화면(20)에 출력된 수 많은 기호들 중에서 자신이 입력하고자 하는 기호를 탐색해야 하는 어려움이 있었다.
만약, 언어 장애 이외에 지적 장애를 함께 가지고 있는 사용자의 경우, 기호들의 위치를 외울 수 없어 하나의 기호를 선택할 때마다 화면(20)에 출력된 수 많은 기호들 중에서 자신이 입력하고자 하는 기호를 다시 탐색하여야 했다.
스위치(switch) 등을 이용하여 스캐닝(scanning) 되는 기호들 중에서 입력하고자 하는 기호를 간접적으로 선택하는 사용자의 경우, 스캐닝 되는 기호들의 수가 너무 많아 자신이 입력하고자 하는 기호까지 포커스가 이동하기까지 오랜 시간을 기다려야 했다.
또한, 스위치 등을 이용하는 것이 익숙하지 않은 사용자의 경우, 의도치 않게 다른 기호를 입력(즉, 오타)하게 되는 문제가 있었다. 특히, 시선 추적 모니터(ocular eyegaze monitor)와 같은 보조 수단을 이용하는 사용자의 경우, 화면(20)에 출력된 많은 기호들을 눈으로 읽어가며 자신이 입력하고자 하는 기호를 탐색하게 되면, 기호를 읽기 위해 시선이 머무는 순간 의도치 않게 기호가 선택되었다.
그리고, 이와 같이 의도치 않게 입력된 기호는 곧바로 화면 또는 소리 형태로 출력되어, 사용자가 의사소통에 어려움을 겪고 있다는 사실을 의사소통 상대방에서 노출하는 문제가 있었다.
본 발명은 상술한 바와 같은 종래의 보완 대체 의사소통 방법의 문제점을 해결하고자 도출되었다. 특히, 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법은 인접한 공간에 존재하는 상대방과의 의사소통이 아닌, 사용자에게 특정 서비스를 제공하는 애플리케이션에 사용자의 의사표현을 입력하는 관점에서 도출되었다.
도 3은 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법의 예시를 나타낸 예시도이다 .
도 3에 도시된 바와 같이, 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법에 따르면, 사용자 맞춤형 자판(30)이 출력되면, 사용자는 자판(30)의 글쇠(31)를 선택하여 텍스트 박스(33) 내에서 자신이 입력하고자 하는 단어 또는 문장을 완성시킨 경우, 입력 완료(35)를 입력하여 텍스트 박스(33) 내의 완성된 단어 또는 문장을 사용자가 이용하고자 하는 애플리케이션(40)의 입력 객체(41)에 전달할 수 있다.
상술한 바와 같은 종래의 보완 대체 의사소통 방법들의 문제점을 해결하고자, 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법은 사용자 또는 사용자의 보호자가 자판(30)을 구성하는 글쇠(31)의 종류 및 위치를 자유롭게 배열할 수 있다. 또한, 자판(30)을 구성하는 글쇠(31)의 기호는 한글 자음, 한글 모음, 영문자 알파벳, 숫자 및 특수 기호에 한정되지 않고, 사용자가 자주 사용하는 단어, 사용자가 자주 사용하는 문장도 해당될 수 있다.
특히, 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법은 사용자가 텍스트 박스(33) 내에서 자신이 입력하고자 하는 단어 또는 문장을 자유롭게 수정(37)한 후, 완성된 단어 또는 문장을 일체로서 애플리케이션(40)의 입력 객체(41)에 전달할 수 있다. 따라서, 사용자가 이용하고자 하는 애플리케이션(40)이 소셜 네트워크 서비스(SNS) 또는 메신저 등과 같이 상대방이 존재하는 경우라 하더라도, 상대방이 사용자가 의사소통에 어려움을 겪고 있다는 사실을 알아차리기 어렵다.
이하, 상술한 바와 같은 특징을 가지는 본 발명의 보완 대체 의사소통 방법을 수행하는 시스템의 구성에 대해 설명한다.
도 4는 본 발명의 일 실시예에 따른 보완 대체 의사소통 시스템의 구성도이다.
도 4에 도시된 바와 같이, 본 발명의 일 실시예에 따른 보완 대체 의사소통 시스템은 보조 입력 장치(100), 의사소통 장치(200) 및 의사소통 지원 서버(300)를 포함하여 구성될 수 있다. 이와 같은, 보완 대체 의사소통 시스템의 구성 요소들은 기능적으로 구분되는 요소들을 나타낸 것에 불과하므로, 어느 하나 이상의 구성 요소가 실제 물리적 환경에서는 서로 통합되어 구현될 수 있다.
보완 대체 의사소통 시스템의 각각의 구성 요소에 대해 설명한다.
보조 입력 장치(100)는 보완 대체 의사소통을 위하여 의사소통 장치(200)와 연결되어, 사용자가 입력하고자 하는 기호를 직접 또는 간접으로 선택하는데 사용되는 장치이다.
도 4에는 보조 입력 장치(100)가 스캐닝에 사용되는 스위치(switch) 형태로 도시되었으나, 보조 입력 장치(100)는 터치 패드(touch pad), 광 포인터(light beam pointer), 조이스틱(joysticks) 및 시선 추적 모니터(ocular eyegaze monitor) 중 어느 하나가 될 수 있으며, 이에 한정되는 것도 아니다.
만약, 보조 입력 장치(100)가 터치 패드, 광 포인터, 조이스틱 및 시선 추적 모니터 중 어느 하나에 해당되는 경우, 보조 입력 장치(100)는 사용자의 조작에 따른 입력 좌표를 의사소통 장치(200)에 전송할 수 있다. 그리고, 보조 입력 장치(100)가 스위치에 해당되는 경우, 보조 입력 장치(100)는 사용자의 입력에 따른 선택 신호를 의사소통 장치(200)에 전송할 수 있다.
그리고, 보조 입력 장치(100)는 사용자의 조작에 따라, 의사소통 장치(200)에 입력 완료를 전송할 수 있다. 여기서, 입력 완료는 사용자가 입력하고자 하는 단어 또는 문장을 완성하였음을 알리는 신호이다.
다음 구성으로, 의사소통 장치(200)는 보조 입력 장치(100)로부터 수신된 신호를 기초로, 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법을 수행하는 장치이다.
의사소통 장치(200)에 대한 구체적인 구성 및 동작에 대해서는 추후 도 5 내지 도 8을 참조하여 보다 구체적으로 설명하기로 한다.
보조 입력 장치(100)와 의사소통 장치(200)는 직접 연결된 케이블 또는 근거리 무선 통신을 이용하여 데이터를 송수신할 수 있다. 여기서, 근거리 무선 통신에는 블루투스(Bluetooth), 블루투스 로우 에너지(Bluetooth Low Energy, BLE), RFID(Radio Frequency IDentification), NFC(Near Field Communication) 또는 지그비(ZigBee)가 포함될 수 있으나, 이에 한정되는 것은 아니다.
또한, 본 발명의 다른 실시예에 따르면, 보조 입력 장치(100)와 의사소통 장치(200)는 하나의 장치로 통합 구현될 수도 있다.
다음 구성으로, 의사소통 지원 서버(300)는 의사소통 장치(200)가 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법을 원활하게 수행할 수 있도록 지원하는 장치이다.
구체적으로, 의사소통 지원 서버(300)는 의사소통 장치(200)로부터 사용자의 계정 및 애플리케이션의 종류를 수신할 수 있다. 의사소통 지원 서버(300)는 사용자의 계정에 대응하여 등록된 복수 개의 자판 배열들 중에서 수신된 애플리케이션의 종류에 따라 하나의 자판 배열을 결정할 수 있다. 그리고, 의사소통 지원 서버(300)는 결정된 하나의 자판 배열을 의사소통 장치(200)에 전송할 수 있다.
의사소통 지원 서버(300)는 의사소통 장치(200)로부터 문자열을 수신할 수 있다. 의사소통 장치(200)는 수신된 문자열에 대하여, 맞춤법 사전(spelling dictionary)을 기초로 맞춤법 검사를 수행할 수 있다. 그리고, 의사소통 지원 서버(300)는 맞춤법 검사 결과를 의사소통 장치(200)에 전송할 수 있다.
의사소통 장치(200)와 의사소통 지원 서버(300)는 공용 유선 통신망 또는 이동 통신망 중 어느 하나를 이용하여 데이터를 송수신할 수 있다. 여기서, 공용 유선 통신망에는 이더넷(ethernet), 디지털가입자선(x Digital Subscriber Line, xDSL), 광동축 혼합망(Hybrid Fiber Coax, HFC), 광가입자망(Fiber To The Home, FTTH)가 포함될 수 있으나, 이에 한정되는 것은 아니다. 또한, 이동 통신망에는 코드 분할 다중 접속(Code Division Multiple Access, CDMA), 와이드 밴드 코드 분할 다중 접속(Wideband CDMA, WCDMA), 고속 패킷 접속(High Speed Packet Access, HSPA), 롱텀 에볼루션(Long Term Evolution, LTE)가 포함될 수 있으나, 이에 한정되는 것도 아니다.
이하, 상술한 바와 같은 의사소통 장치(200)의 구성에 대하여 보다 구체적으로 설명하기로 한다.
도 5는 본 발명의 일 실시예에 따른 의사소통 장치의 논리적 구성도이다.
도 5에 도시된 바와 같이, 본 발명의 일 실시예에 따른 의사소통 장치(200)는 통신부(205), 입출력부(210), 자판 배열 관리부(215), AAC 제어부(220), 부가기능 관리부(225) 및 입력 완료 처리부(230)를 포함하여 구성될 수 있다. 이와 같은, 의사소통 장치(200)의 구성 요소들은 기능적으로 구분되는 요소들을 나타낸 것에 불과하므로, 어느 하나 이상의 구성 요소가 실제 물리적 환경에서는 서로 통합되어 구현될 수 있다.
의사소통 장치(200)의 각각의 구성 요소에 대해 설명한다.
통신부(205)는 보조 입력 장치(100) 또는 의사소통 지원 서버(300)와 데이터를 송수신할 수 있다.
구체적으로, 통신부(205)는 보조 입력 장치(100)로부터 입력 좌표 또는 선택 신호를 수신할 수 있다. 여기서, 입력 좌표는 보조 입력 장치(100)가 터치 패드, 광 포인터, 조이스틱 및 시선 추적 모니터 중 어느 하나에 해당되는 경우에 수신될 수 있다. 선택 신호는 보조 입력 장치(100)가 스위치인 경우에 수신될 수 있다.
통신부(205)는 의사소통 지원 서버(300)에 사용자의 계정, 애플리케이션 종류 및 문자열을 송신할 수 있다. 그리고, 통신부(250)는 의사소통 지원 서버(300)로부터 자판 배열 및 맞춤법 검사 결과를 수신할 수 있다.
다음 구성으로, 입출력부(210)는 의사소통 장치(200)의 보조 입력 장치(100)에 해당되지 않는 입출력 장치를 이용하여, 사용자 또는 사용자의 보호자와 의사소통 장치(200)의 동작에 필요한 데이터를 입출력할 수 있다.
구체적으로, 입출력부(210)는 사용자 또는 보호자로부터 사용자의 계정을 입력 받을 수 있다. 그리고, 입출력부(210)는 사용자 또는 보호자로부터 맞춤형 자판 배열을 구성하기 위한 글쇠의 배치 정보를 입력 받을 수 있다. 여기서, 글쇠의 배치 정보는 자판을 구성하는 하나 이상의 글쇠의 종류 및 위치에 관한 정보이다.
입출력부(210)는 본 발명의 일 실시예에 따른 보완 대체 의사소통 방법이 구현된 애플리케이션의 화면을 출력할 수 있다. 입출력부(210)는 사용자가 이용하고자 하는 애플리케이션의 화면을 출력할 수 있다. 입출력부(210)는 화면 또는 소리를 통해, 사용자에 의해 입력된 기호를 출력할 수 있다. 그리고, 입출력부(210)는 화면 또는 소리를 통해, 사용자에 완성된 단어 또는 문장을 출력할 수 있다.
다음 구성으로, 자판 배열 관리부(215)는 사용자의 맞춤형 자판 배열을 관리할 수 있다. 자판 배열 관리부(215)는 새로운 자판 배열을 등록(registration)하거나, 또는 기존에 등록된 자판 배열을 불러(loading)올 수 있다.
우선, 자판 배열 관리부(215)가 새로운 자판 배열을 등록하는 과정을 설명한다.
자판 배열 관리부(215)는 입출력부(210)를 통해 입력된 사용자의 계정을 식별할 수 있다. 자판 배열 관리부(215)는 입출력부(210)를 통해 입력된 글쇠의 배치 정보를 기초로, 사용자의 새로운 자판 배열을 생성할 수 있다.
본 발명의 일 실시예에 따른 기호는 한글 자음, 한글 모음, 영문자 알파벳, 숫자, 특수 기호, 사용자가 자주 사용하는 단어, 사용자가 자주 사용하는 문장 중 어느 하나가 될 수 있다. 따라서, 자판 배열을 구성하는 각 글쇠는 한글 자음, 한글 모음, 영문자 알파벳, 숫자 및 특수 기호, 한 글자 이상의 단어 및 복수 개의 단어로 구성된 문장 중 어느 하나에 대응될 수 있다.
자판 배열 관리부(215)는 사용자가 새로운 자판 배열을 이용하여 기호를 입력하는 경우, 사용자가 그와 동시에 실행 중인 애플리케이션의 종류를 식별할 수 있다.
자판 배열 관리부(215)는 새로운 자판 배열을 사용자의 계정 및 애플리케이션의 종류에 대응시켜, 내부 데이터베이스에 저장할 수 있다. 또한, 자판 배열 관리부(215)는 새로운 자판 배열을 사용자의 계정 및 애플리케이션의 종류에 대응시킨 정보를 의사소통 지원 서버(300)에 전송할 수 있다.
다음으로, 자판 배열 관리부(215)는 기존에 등록된 자판 배열을 불러오는 과정을 설명한다.
자판 배열 관리부(215)는 입출력부(210)를 통해 입력된 사용자의 계정 정보를 식별할 수 있다. 자판 배열 관리부(215)는 입력 대상 애플리케이션의 종류를 식별할 수 있다.
여기서, 입력 대상 애플리케이션은 사용자 또는 보호자에 의해 사전에 설정될 수 있다. 또는, 입력 대상 애플리케이션은 운영체제(OS)에 의해 관리되는, 프로세스(process), 작업(task) 또는 쓰레드(thread)의 우선순위(priority)에 따라 결정될 수도 있다. 이와 같은, 입력 대상 애플리케이션은 웹 브라우저(web browser), 소셜 네트워크 서비스(SNS), 또는 메신저 중 어느 하나가 될 수 있으나, 이에 한정되는 것은 아니다.
자판 배열 관리부(215)는 식별된 사용자의 계정에 대응하여 내부 데이터베이스에 등록된 복수 개의 자판 배열들 중에서, 입력 대상 애플리케이션의 종류에 따라 하나의 자판 배열을 결정할 수 있다. 그리고, 자판 배열 관리부(125)는 결정된 하나의 자판 배열을 불러올 수 있다.
또는, 자판 배열 관리부(215)는 식별된 사용자의 계정 및 입력 대상 애플리케이션의 종류를 의사소통 지원 서버(300)에 전송할 수 있다. 그리고, 자판 배열 관리부(215)는 의사소통 지원 서버(300)로부터 자판 배열을 수신할 수 있다.
다음 구성으로, AAC 제어부(220)는 보조 입력 장치(100)를 통해 보완 대체 의사소통을 제어할 수 있다.
구체적으로, AAC 제어부(220)는 자판 배열 관리부(215)에 의해 등록되거나 또는 불러온 자판 배열에 따라 가상의 글쇠를 구성하여 출력할 수 있다. AAC 제어부(220)는 보조 입력 장치(100)로부터 수신된 정보를 기초로, 자판 배열을 구성하고 있는 글쇠들 중 어느 하나를 선택할 수 있다. AAC 제어부(220)는 선택된 글쇠에 대응되는 기호를 텍스트 박스에 출력할 수 있다. 그리고, AAC 제어부(220)는 보조 입력 장치(100)로부터 입력 완료가 수신되기 전까지, 텍스트 박스에 출력된 기호의 수정을 허용할 수 있다.
만약, 보조 입력 장치(100)가 터치 패드, 광 포인터, 조이스틱, 및 시선 추적 모니터 중 어느 하나인 경우, AAC 제어부(220)는 자판 배열을 구성하고 있는 글쇠들 중에서, 보조 입력 장치(100)로부터 수신된 입력 좌표에 대응되게 위치하는 글쇠를 선택할 수 있다.
만약, 보조 입력 장치(100)가 스위치인 경우, AAC 제어부(220)는 자판 배열에 따라 배치된 글쇠들에 대하여 순차적으로 포커스(focus)를 이동시키는 중, 보조 입력 장치(100)로부터 선택 신호가 수신된 시점에 포커스가 위치하는 글쇠를 선택할 수 있다. 여기서, 포커스는 스캐닝(scanning) 과정에서 복수 개의 기호들 중 사용자에 의해 선택될 수 있는 기호를 가리키는 지시자(indicator)이다.
AAC 제어부(220)는 선택된 글쇠의 종류에 따라, 사용자가 다음 선택할 수 있는 글쇠의 색상을 변경하여 출력할 수 있다. 예를 들어, 선택된 글쇠가 한글 모음에 해당되는 경우, AAC 제어부(220)는 자판 배열에 따라 출력된 글쇠들 중 한글 자음에 해당되는 글쇠의 색상을 변경하여 출력할 수 있다. 이와 다르게, 선택된 글쇠가 한글 자음에 해당되는 경우, AAC 제어부(220)는 자판 배열에 따라 출력된 글쇠들 중 한글 모음에 해당되는 글쇠, 마침표, 물음표 및 느낌표에 해당되는 글쇠의 색상을 변경하여 출력할 수도 있다.
그리고, AAC 제어부(220)는 텍스트 박스에 출력된 기호(즉, 사용자에 의해 완성 중인 단어 또는 문장)를 저장할 수 있다. 구체적으로, AAC 제어부(220)는 보조 입력 장치(100)로부터 수신된 정보를 기초로 글쇠가 선택되면, 선택된 기호를 큐(queue)에 삽입(enqueue)할 수 있다. 여기서, 큐(queue)는 선입 선출(First-In, First-Out) 특성을 가지는 데이터 구조(data structure)이다.
다음 구성으로, 부가기능 관리부(225)는 보완 대체 의사소통 과정에서 제공될 수 있는 부가적인 기능을 관리할 수 있다.
부가기능 관리부(225)는 맞춤법 점검을 수행할 수 있다. 구체적으로, 부가기능 관리부(225)는 내장된 맞춤법 사전을 기초로 텍스트 박스에 출력 중인 기호들로 구성된 문자열 내에서 맞춤법이 틀린 기호를 식별할 수 있다. 그리고, 부가기능 관리부(225)는 텍스트 박스에 출력 중인 기호들 중 맞춤법이 틀린 기호의 색상을 변경하여 출력할 수 있다.
이와 다르게, 부가기능 관리부(225)는 텍스트 박스에 출력 중인 기호들로 구성된 문자열을 의사소통 지원 서버(300)에 전송할 수 있다. 부가기능 관리부(225)는 의사소통 지원 서버(300)로부터 맞춤법 검사 결과를 수신할 수 있다. 그리고, 부가 기능 관리부(225)는 수신된 맞춤법 검사 결과를 기초로, 텍스트 박스에 출력 중인 기호들 중 맞춤법이 틀린 기호의 색상을 변경하여 출력할 수도 있다.
부가기능 관리부(225)는 TTS(Text To Speech)를 수행할 수 있다. 구체적으로, 부가기능 관리부(225)는 내장된 TTS 라이브러리(library)를 이용하여, AAC 제어부(220)에 의해 선택된 글쇠에 대응되는 기호의 소리를 출력할 수 있다. 또는, 부가기능 관리부(225)는 TTS 라이브러리를 이용하여, 보조 입력 장치(100)로부터 입력 완료가 수신되면 텍스트 박스에 출력된 기호들로 구성된 단어 또는 문장을 소리로 출력할 수 있다.
다음 구성으로, 입력 완료 처리부(230)는 보조 입력 장치(100)로부터 입력 완료가 수신되면, 텍스트 박스에 출력된 기호(즉, 완성된 단어 또는 문장)를 입력 대상 애플리케이션에 전달할 수 있다.
구체적으로, 입력 완료 처리부(230)는 보조 입력 장치(100)로부터 입력 완료가 수신되었는지 판단할 수 있다. 입력 완료 처리부(230)는 입력 완료가 수신되면, AAC 제어부(220)에 의해 기호가 삽입된 큐를 식별할 수 있다. 입력 완료 처리부(230)는 식별된 큐가 빌 때(empty)까지, 큐에 삽입된 기호를 하나씩 추출(dequeue)하여, 입력 대상 애플리케이션의 메시지 입력 큐(message input queue)에 삽입할 수 있다. 여기서, 메시지 입력 큐는 메시지 주도형(message-driven)으로 동작하는 운영체제(OS)에서 입력에 관한 이벤트가 발생된 경우, 발생된 이벤트에 관한 메시지를 입력 대상 애플리케이션에 전달하기 위하여 할당해 놓은 큐이다.
예를 들어, 운영체제(OS)가 마이크로소프트(Microsoft) 사의 윈도우즈(windows)에 해당되는 경우, 입력 완료 처리부(230)는 입력 대상 애플리케이션의 메시지 입력 큐에 키 입력 메시지(WM_KEYDOWN)를 삽입할 수 있다. 이 경우, 키 입력 메시지는 큐로부터 추출된 기호에 대응되는 가상 키 코드(virtual-key code)를 워드 파라미터(wParam)로 가지고, 입력된 기호의 반복 횟수, 해당 기호의 입력 전 상태 등에 관한 상태 정보를 롱 파라미터(lParam)로 가질 수 있다.
이하, 상술한 바와 같은 의사소통 장치(200)의 논리적 구성을 구현하기 위한 하드웨어에 대하여 보다 구체적으로 설명한다.
도 6은 본 발명의 일 실시예에 따른 의사소통 장치의 하드웨어 구성도이다.
도 6에 도시된 바와 같이, 의사소통 장치(200)는 프로세서(Processor, 250), 메모리(Memory, 255), 송수신기(Transceiver, 260), 입출력장치(Input/output device, 265) 및 데이터 버스(Bus, 270) 및 스토리지(Storage, 275)를 포함하여 구성될 수 있다.
프로세서(250)는 메모리(255)에 상주된 보완 대체 의사소통(AAC) 방법이 구현된 소프트웨어(280a)에 따른 명령어를 기초로, 보완 대체 의사소통 방법과 관련된 동작 및 기능을 구현할 수 있다. 메모리(255)에는 보완 대체 의사소통 방법이 구현된 소프트웨어(280a)가 상주(loading)될 수 있다. 송수신기(260)는 보조 입력 장치(100) 또는 의사소통 지원 서버(300)와 데이터를 송수신할 수 있다. 입출력장치(265)는 보완 대체 의사소통 방법의 수행에 필요한 데이터를 입력 받고, 입력된 기호를 출력할 수 있다. 데이터 버스(270)는 프로세서(250), 메모리(255), 송수신기(260), 입출력장치(265) 및 스토리지(275)와 연결되어, 각각의 구성 요소 사이가 서로 데이터를 전달하기 위한 이동 통로의 역할을 수행할 수 있다.
스토리지(275)는 보완 대체 의사소통 방법이 구현된 소프트웨어(280a)의 실행을 위해 필요한 애플리케이션 프로그래밍 인터페이스(API), 라이브러리(library) 파일, 리소스(resource) 파일 등을 저장할 수 있다. 스토리지(275)는 보완 대체 의사소통 방법이 구현된 소프트웨어(280b)를 저장할 수 있다. 또한, 스토리지(275)는 보험 추천 방법의 수행에 필요한 데이터베이스(285)를 저장할 수 있다. 여기서, 데이터베이스(285)에는 등록된 자판 배열이 저장될 수 있으나, 이에 한정되는 것은 아니다.
메모리(255)에 상주되거나 또는 스토리지(275)에 저장된 보완 대체 의사소통 방법을 구현하기 위한 소프트웨어(280a, 280b)는 사용자의 계정에 대응되어 사전에 등록된 자판 배열을 불러(loading)오는 단계; 불러온 자판 배열에 따라 가상의 글쇠(key)들을 구성하여 출력하고, 연결된 보조 입력 장치(100)로부터 수신된 정보를 기초로, 상기 글쇠들 중 어느 하나를 선택하는 단계; 상기 선택된 글쇠에 대응되는 기호를 텍스트 박스에 출력하는 단계; 및 보조 입력 장치(100)로부터 입력 완료가 수신되기 전까지 텍스트 박스에 출력된 기호의 수정을 허용하고, 상기 입력 완료가 수신되면 텍스트 박스에 출력된 기호를 사전에 지정된 애플리케이션(application)에 전달하는 단계를 실행시키기 위하여, 기록매체에 기록된 컴퓨터 프로그램이 될 수 있다.
보다 구체적으로, 프로세서(250)는 ASIC(Application-Specific Integrated Circuit), 다른 칩셋(chipset), 논리 회로 및/또는 데이터 처리 장치를 포함할 수 있다. 메모리(255)는 ROM(Read-Only Memory), RAM(Random Access Memory), 플래쉬 메모리, 메모리 카드, 저장 매체 및/또는 다른 저장 장치를 포함할 수 있다. 송수신기(260)는 유무선 신호를 처리하기 위한 베이스밴드 회로를 포함할 수 있다. 입출력장치(265)는 키보드(keyboard), 마우스(mouse), 및/또는 조이스틱(joystick) 등과 같은 입력 장치 및 액정표시장치(Liquid Crystal Display, LCD), 발광 다이오드(Light Emitting Diode, LED), 유기 발광 다이오드(Organic LED, OLED) 및/또는 능동형 유기 발광 다이오드(Active Matrix OLED, AMOLED) 등과 같은 영상 출력 장치 프린터(printer), 플로터(plotter) 등과 같은 인쇄 장치를 포함할 수 있다.
본 명세서에 포함된 실시 예가 소프트웨어로 구현될 경우, 상술한 방법은 상술한 기능을 수행하는 모듈(과정, 기능 등)로 구현될 수 있다. 모듈은 메모리(255)에 상주되고, 프로세서(250)에 의해 실행될 수 있다. 메모리(255)는 프로세서(250)의 내부 또는 외부에 있을 수 있고, 잘 알려진 다양한 수단으로 프로세서(250)와 연결될 수 있다.
도 6에 도시된 각 구성요소는 다양한 수단, 예를 들어, 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다. 하드웨어에 의한 구현의 경우, 본 발명의 일 실시예는 하나 또는 그 이상의 ASICs(Application Specific Integrated Circuits), DSPs(Digital Signal Processors), DSPDs(Digital Signal Processing Devices), PLDs(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), 프로세서, 콘트롤러, 마이크로 콘트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.
또한, 펌웨어나 소프트웨어에 의한 구현의 경우, 본 발명의 일 실시예는 이상에서 설명된 기능 또는 동작들을 수행하는 모듈, 절차, 함수 등의 형태로 구현되어, 다양한 컴퓨터 수단을 통하여 판독 가능한 기록매체에 기록될 수 있다. 여기서, 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 기록매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 예컨대 기록매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광 기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치를 포함한다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 이러한, 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이하, 상술한 바와 같은 보완 대체 의사소통 방법에 대하여 구체적으로 설명하기로 한다.
도 7은 본 발명의 일 실시예에 따라 의사소통 장치가 보완 대체 의사소통 방법을 수행하는 과정을 나타낸 순서도이다 .
도 7을 참조하면, 의사소통 장치(200)는 기존에 등록된 자판 배열을 로딩할 수 있다(S100). 구체적으로, 의사소통 장치(200)는 사용자의 계정에 대응하여 데이터베이스에 등록된 복수 개의 자판 배열들 중에서, 입력 대상 애플리케이션의 종류에 따라 하나의 자판 배열을 결정할 수 있다. 그리고, 의사소통 장치(200)는 결정된 자판 배열을 로딩할 수 있다.
의사소통 장치(200)는 로딩된 배열의 자판에 따라 가상의 글쇠를 구성하여 출력할 수 있다(S200).
의사소통 장치(200)는 보조 입력 장치(100)로부터 수신된 정보를 기초로, 자판 배열을 구성하고 있는 글쇠들 중 어느 하나를 선택할 수 있다(S300). 구체적으로, 보조 입력 장치(100)가 터치 패드, 광 포인터, 조이스틱, 및 시선 추적 모니터 중 어느 하나인 경우, 의사소통 장치(200)는 자판 배열을 구성하고 있는 글쇠들 중에서, 보조 입력 장치(100)로부터 수신된 입력 좌표에 대응되게 위치하는 글쇠를 선택할 수 있다. 이와 다르게, 보조 입력 장치(100)가 스위치인 경우, 의사소통 장치(200)는 자판 배열에 따라 배치된 글쇠들에 대하여 순차적으로 포커스(focus)를 이동시키는 중, 보조 입력 장치(100)로부터 선택 신호가 수신된 시점에 포커스가 위치하는 글쇠를 선택할 수 있다.
의사소통 장치(200)는 선택된 글쇠에 대응하는 기호를 텍스트 박스에 출력할 수 있다. 그리고, 의사소통 장치(200)는 텍스트 박스에 출력된 기호(즉, 사용자에 의해 완성 중인 단어 또는 문장)를 저장할 수 있다(S400).
의사소통 장치(200)는 보조 입력 장치(100)로부터 입력 완료가 수신되었는지 판단할 수 있다(S500). 판단 결과, 보조 입력 장치(100)로부터 입력 완료가 아직 수신되지 않은 경우, 의사소통 장치(100)는 텍스트 박스에 출력된 기호의 수정을 허용할 수 있다.
판단 결과, 보조 입력 장치(100)로부터 입력 완료가 수신된 경우, 텍스트 박스에 출력된 기호(즉, 완성된 단어 또는 문장)를 입력 대상 애플리케이션에 전달할 수 있다(S600). 기호를 입력 대상 애플리케이션에 전달하는 과정에 대해서는 도 8을 참조하여 설명하기로 한다.
도 8은 본 발명의 일 실시예에 따라 기호를 입력 대상 애플리케이션에 전달하는 과정을 나타낸 순서도이다 .
도 8을 참조하면, 의사소통 장치(200)는 기호가 삽입된 큐가 비었는지(empty) 판단할 수 있다(S610). 판단 결과, 큐가 비었다면, 의사소통 장치(200)는 이하의 단계를 수행하지 않고 종료한다.
판단 결과, 큐가 비어있지 않다면, 의사소통 장치(200)는 큐로부터 기호를 하나씩 추출할 수 있다(S620). 의사소통 장치(200)는 추출된 기호를 입력 대상 애플리케이션의 메시지 입력 큐에 삽입할 수 있다(S630).
추출된 기호를 입력 대상 애플리케이션의 메시지 입력 큐에 삽입한 이후, 의사소통 장치(200)는 큐가 비었는지 다시 판단할 수 있다(S610).
이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으나, 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다. 또한, 본 명세서와 도면에서 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서, 상술한 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니 되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 선정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.
아울러, 본 발명에 따른 장치나 단말은 하나 이상의 프로세서로 하여금 앞서 설명한 기능들과 프로세스를 수행하도록 하는 명령에 의하여 구동될 수 있다. 예를 들어 그러한 명령으로는, 예컨대 JavaScript나 ECMAScript 명령 등의 스크립트 명령과 같은 해석되는 명령이나 실행 가능한 코드 혹은 컴퓨터로 판독 가능한 매체에 저장되는 기타의 명령이 포함될 수 있다. 나아가 본 발명에 따른 장치는 서버 팜(Server Farm)과 같이 네트워크에 걸쳐서 분산형으로 구현될 수 있으며, 혹은 단일의 컴퓨터 장치에서 구현될 수도 있다.
또한, 본 발명에 따른 장치에 탑재되고 본 발명에 따른 방법을 실행하는 컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 어플리케이션, 스크립트 혹은 코드로도 알려져 있음)은 컴파일 되거나 해석된 언어나 선험적 혹은 절차적 언어를 포함하는 프로그래밍 언어의 어떠한 형태로도 작성될 수 있으며, 독립형 프로그램이나 모듈, 컴포넌트, 서브루틴 혹은 컴퓨터 환경에서 사용하기에 적합한 다른 유닛을 포함하여 어떠한 형태로도 전개될 수 있다. 컴퓨터 프로그램은 파일 시스템의 파일에 반드시 대응하는 것은 아니다. 프로그램은 요청된 프로그램에 제공되는 단일 파일 내에, 혹은 다중의 상호 작용하는 파일(예컨대, 하나 이상의 모듈, 하위 프로그램 혹은 코드의 일부를 저장하는 파일) 내에, 혹은 다른 프로그램이나 데이터를 보유하는 파일의 일부(예컨대, 마크업 언어 문서 내에 저장되는 하나 이상의 스크립트) 내에 저장될 수 있다. 컴퓨터 프로그램은 하나의 사이트에 위치하거나 복수의 사이트에 걸쳐서 분산되어 통신 네트워크에 의해 상호 접속된 다중 컴퓨터나 하나의 컴퓨터 상에서 실행되도록 전개될 수 있다.
아울러, 본 발명에 따른 실시예를 설명하는데 있어서, 특정한 순서로 도면에서 동작들을 묘사하고 있지만, 이는 바람직한 결과를 얻기 위하여 도시된 그 특정한 순서나 순차적인 순서대로 그러한 동작들을 수행하여야 한다거나 모든 도시된 동작들이 수행되어야 하는 것으로 이해되어서는 안 된다. 특정한 경우, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다. 또한, 상술한 실시형태의 다양한 시스템 컴포넌트의 분리는 그러한 분리를 모든 실시형태에서 요구하는 것으로 이해되어서는 안되며, 설명한 프로그램 컴포넌트와 시스템들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 다중 소프트웨어 제품에 패키징될 수 있다는 점을 이해하여야 한다.
보조 입력 장치: 100 의사소통 장치: 200
의사소통 지원 서버: 300
통신부: 205 입출력부: 210
자판 배열 관리부: 215 AAC 제어부: 220
부가기능 관리부: 225 입력 완료 처리부: 230

Claims (10)

  1. 사용자의 계정에 대응되어 사전에 등록된 자판 배열을 불러(loading)오는 단계;
    상기 불러온 자판 배열에 따라 가상의 글쇠(key)들을 구성하여 출력하고, 보완 대체 의사소통(augmentative and alternative communication)을 위해 연결된 보조 입력 장치로부터 수신된 정보를 기초로, 상기 글쇠들 중 어느 하나를 선택하는 단계;
    상기 선택된 글쇠에 대응되는 기호를 텍스트 박스(text box)에 출력하는 단계; 및
    상기 보조 입력 장치로부터 입력 완료가 수신되기 전까지 상기 텍스트 박스에 출력된 기호의 수정을 허용하고, 상기 입력 완료가 수신되면 상기 텍스트 박스에 출력된 기호를 사전에 결정된 애플리케이션(application)에 전달하는 단계를 포함하며,
    상기 출력하는 단계는
    상기 선택된 글쇠에 대응되는 기호를 큐(queue)에 삽입(enqueue)하고,
    상기 전달하는 단계는
    상기 보조 입력 장치로부터 상기 입력 완료가 수신되면, 상기 큐가 빌 때(empty)까지 상기 큐에 삽입된 기호를 하나씩 추출(dequeue)하여 상기 애플리케이션의 메시지 입력 큐(message input queue)에 삽입하는 것을 특징으로 하는, 보완 대체 의사소통 방법.
  2. 제1 항에 있어서, 상기 애플리케이션은
    운영체제(operating system)에 의해 관리되는 프로세스(process), 작업(task) 또는 쓰레드(thread)의 우선순위(priority)에 따라 결정되고,
    상기 자판 배열을 불러오는 단계는
    상기 사용자의 계정에 대응하여 등록된 복수 개의 자판 배열들 중에서, 상기 애플리케이션의 종류에 따라 결정된 하나의 자판 배열을 결정하는 것을 특징으로 하는, 보완 대체 의사소통 방법.
  3. 제1 항에 있어서, 상기 선택하는 단계는
    상기 보조 입력 장치가 터치 패드(touch pad), 광 포인터(light beam pointer), 조이스틱(joysticks) 및 시선 추적 모니터(ocular eyegaze monitor) 중 어느 하나인 경우, 상기 보조 입력 장치로부터 수신된 입력 좌표에 대응되게 위치하는 글쇠를 선택하거나, 또는
    상기 보조 입력 장치가 스위치(switch)인 경우, 상기 자판 배열에 따라 배치된 글쇠들에 대하여 순차적으로 포커스(focus)를 이동시키는 중, 상기 보조 입력 장치로부터 선택 신호가 수신된 시점에 포커스가 위치하는 글쇠를 선택하는 것을 특징으로 하는, 보완 대체 의사소통 방법.
  4. 제1 항에 있어서, 상기 자판 배열을 구성하는 각 글쇠는
    한글 자음, 한글 모임, 한 글자 이상의 단어 및 복수 개의 단어로 구성된 문장 중 어느 하나에 대응되며,
    상기 출력하는 단계는
    상기 선택된 글쇠가 한글 모음에 해당되는 경우, 상기 자판 배열에 따라 출력된 글쇠들 중 한글 자음에 해당되는 글쇠의 색상을 변경하여 출력하는 것을 특징으로 하는, 보완 대체 의사소통 방법.
  5. 제1 항에 있어서, 상기 출력하는 단계는
    맞춤법 사전(spelling dictionary)을 기초로 상기 텍스트 박스에 출력 중인 기호들로 구성된 문자열 내에서 맞춤법이 틀린 기호를 식별하고, 상기 텍스트 박스에 출력 중인 기호들 중 상기 맞춤법이 틀린 기호의 색상을 변경하여 출력하는 것을 특징으로 하는, 보완 대체 의사소통 방법.
  6. 삭제
  7. 제1 항에 있어서, 상기 전달하는 단계는
    상기 큐로부터 추출된 기호에 대응되는 가상 키 코드(virtual-key code)를 워드 파라미터(wParam)로 가지는 키 입력 메시지(WM_KEYDOWN)를 상기 메시지 입력 큐에 삽입하는 것을 특징으로 하는, 보완 대체 의사소통 방법.
  8. 제1 항에 있어서, 상기 전달하는 단계는
    상기 입력 완료가 수신되면, TTS(Text To Speech) 라이브러리(library)를 이용하여, 상기 텍스트 박스에 출력된 기호들로 구성된 단어 또는 문장을 소리로 출력하는 것을 특징으로 하는, 보완 대체 의사소통 방법.
  9. 제1 항에 있어서, 상기 애플리케이션은
    웹 브라우저(web browser), 소셜 네트워크 서비스(Social Network Service), 또는 메신저(messenger) 중 어느 하나인 것을 특징으로 하는, 보완 대체 의사소통 방법.
  10. 출력 장치(output device);
    메모리(memory); 및
    상기 메모리에 상주(loading)된 명령어를 처리하는 프로세서(processor)를 포함하여 구성된 컴퓨팅 장치와 결합되어,
    상기 프로세서가 사용자의 계정에 대응되어 사전에 등록된 자판 배열을 불러(loading)오는 단계;
    상기 프로세서가 상기 불러온 자판 배열에 따라 가상의 글쇠(key)들을 구성하여 상기 출력 장치를 통해 출력하고, 보완 대체 의사소통(augmentative and alternative communication)을 위해 연결된 보조 입력 장치로부터 수신된 정보를 기초로, 상기 글쇠들 중 어느 하나를 선택하는 단계;
    상기 프로세서가 상기 선택된 글쇠에 대응되는 기호를 텍스트 박스(text box)에 출력하는 단계; 및
    상기 프로세서가 상기 보조 입력 장치로부터 입력 완료가 수신되기 전까지 상기 텍스트 박스에 출력된 기호의 수정을 허용하고, 상기 입력 완료가 수신되면 상기 텍스트 박스에 출력된 기호를 사전에 결정된 애플리케이션(application)에 전달하는 단계를 실행시키도록 하며,
    상기 출력하는 단계는
    상기 선택된 글쇠에 대응되는 기호를 큐(queue)에 삽입(enqueue)하고,
    상기 전달하는 단계는
    상기 보조 입력 장치로부터 상기 입력 완료가 수신되면, 상기 큐가 빌 때(empty)까지 상기 큐에 삽입된 기호를 하나씩 추출(dequeue)하여 상기 애플리케이션의 메시지 입력 큐(message input queue)에 삽입하는 것을 특징으로 하는, 기록매체에 기록된 컴퓨터 프로그램.
KR1020190002476A 2019-01-08 2019-01-08 보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램 KR102149131B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190002476A KR102149131B1 (ko) 2019-01-08 2019-01-08 보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190002476A KR102149131B1 (ko) 2019-01-08 2019-01-08 보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램

Publications (2)

Publication Number Publication Date
KR20200086175A KR20200086175A (ko) 2020-07-16
KR102149131B1 true KR102149131B1 (ko) 2020-08-27

Family

ID=71839810

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190002476A KR102149131B1 (ko) 2019-01-08 2019-01-08 보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램

Country Status (1)

Country Link
KR (1) KR102149131B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102526772B1 (ko) 2021-11-26 2023-04-26 광운대학교 산학협력단 맥락 정보 기반 보완 대체 의사소통 방법 및 장치
KR20240003870A (ko) 2022-07-04 2024-01-11 정유성 보완 대체 의사소통 어플리케이션 제공 시스템

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114356108A (zh) * 2022-01-13 2022-04-15 天津大学 一种高级语言键盘

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050092293A (ko) 2004-03-15 2005-09-21 고진복 장애인용 보완대체 의사 소통 단말기
KR100859379B1 (ko) * 2006-07-05 2008-09-22 동서대학교산학협력단 언어장애자 의사소통 지원시스템
KR20090104147A (ko) * 2008-03-30 2009-10-06 은성훈 터치입력을 수단으로 하는 한글입력장치 및 방법
KR101277313B1 (ko) * 2011-01-31 2013-06-20 고려대학교 산학협력단 의사소통 보조 장치 및 방법
KR102217560B1 (ko) * 2014-03-20 2021-02-19 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR20160101633A (ko) * 2015-02-13 2016-08-25 (주)위자드웍스 키보드 어플리케이션이 설치된 사용자 단말 및 그것을 이용한 키보드 선택 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102526772B1 (ko) 2021-11-26 2023-04-26 광운대학교 산학협력단 맥락 정보 기반 보완 대체 의사소통 방법 및 장치
KR20240003870A (ko) 2022-07-04 2024-01-11 정유성 보완 대체 의사소통 어플리케이션 제공 시스템

Also Published As

Publication number Publication date
KR20200086175A (ko) 2020-07-16

Similar Documents

Publication Publication Date Title
CN107305585B (zh) 由键盘作出的搜索查询预测
EP3408733B1 (en) Keyboard with a suggested search query region
KR101781557B1 (ko) 텍스트 입력을 용이하게 하기 위한 방법 및 시스템
US11494547B2 (en) Inputting images to electronic devices
US7562007B2 (en) Method and apparatus for recognizing language input mode and method and apparatus for automatically switching language input modes using the same
US20150106702A1 (en) Cross-Lingual Input Method Editor
KR102149131B1 (ko) 보완 대체 의사소통 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램
US20180349346A1 (en) Lattice-based techniques for providing spelling corrections
US20170308290A1 (en) Iconographic suggestions within a keyboard
CN105659194B (zh) 用于屏幕上键盘的快速任务
TWI443551B (zh) 用於輸入方法編輯器之方法及系統，及電腦程式產品
US20140170611A1 (en) System and method for teaching pictographic languages
CN104509080A (zh) 基于动态上下文的语言确定
US7707515B2 (en) Digital user interface for inputting Indic scripts
WO2018118172A1 (en) Iconographic symbol predictions for a conversation
US9965530B2 (en) Graphical keyboard with integrated search features
US20100153880A1 (en) Method system and apparatus for entering text on a computing device
US20130185054A1 (en) Techniques for inserting diacritical marks to text input via a user device
US10318632B2 (en) Multi-lingual data input system
Nitschke et al. The effect of linguistic nativeness on structural priming in comprehension
KR20180102134A (ko) 키보드에 의한 자동 번역
WO2014070577A2 (en) Keyboard gestures for character string replacement
Cox et al. Tlk or txt? Using voice input for SMS composition
US11899904B2 (en) Text input system with correction facility
KR20170132643A (ko) 문자 디스플레이 방법 및 그 장치

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant