KR101298926B1

KR101298926B1 - 수화 키보드 및 이를 이용한 수화 검색 장치

Info

Publication number: KR101298926B1
Application number: KR1020117019697A
Authority: KR
Inventors: 준토 오오키
Original assignee: 준토 오오키
Priority date: 2009-01-27
Filing date: 2010-01-25
Publication date: 2013-08-22
Also published as: EP2392989A4; KR20110111504A; JP5628691B2; US8711100B2; JPWO2010087301A1; WO2010087301A1; US20110285635A1; EP2392989A1

Abstract

수화에 의한 표현을 보다 간단하고 쉽고 확실하게 입력할 수 있도록 하고, 그 검색도 가능하게 한다. 범용의 키보드에 있어서, 손가락의 형상을 각각의 키탭에 할당한 손가락 입력 영역과, 수화자의 상반신을 분할하여 키탭에 할당한 상반신 입력 영역으로 나누어, 각각의 영역의 키 입력의 제휴로 수화가 의미하는 정보를 키보드를 통해서 입력할 수 있도록 했다.

Description

수화 키보드 및 이를 이용한 수화 검색 장치{SIGN LANGUAGE KEYBOARD AND SIGN LANGUAGE SEARCHING DEVICE USING SAME}

본 발명은 수화로 표현되는 시각적인 의사 전달에 이용되는 수화 키보드 및 이를 이용한 수화 검색 장치에 관한 것이다.

종래, 청각 장애인을 위한 정보 전달 수단으로서 수화가 많이 이용되고 있다. 수화는 손가락 동작과 손가락 외의 동작을 동시에 사용하는 시각 언어이고, 음성 언어와 대등한 언어이지만, 이들의 수화에 의한 표현과 전자 정보를 어떻게 관련지을지가 과제였다.

예를 들면, 일본국 특허공개 2008-216397호(특허 문헌 1)에서는, 건강한 청자 및 청각 장애인 쌍방이 정보 내용을 간단하고 신속하게 또한 정확하게 파악할 수 있도록 하기 위해서, 문장 데이터의 형태소를 해석하여 키워드를 추출하고, 이 키워드로부터 조목별로 나누어 쓴 텍스트(text) 데이터와 단편 수화 영상 데이터로 변환하여 청각 장애인에게 시각적으로 표시하는 기술이 개시되어 있다.

또, 수화자의 상반신을 동영상으로서 촬영하고, 이것을 화상 해석하여 단어나 문장으로 변환하는 것 같은 기술이 제안되어 오는 것도 당업자이면 용이하게 생각에 이를 것이다.

일본국 특허공개 2008-216397호 공보

그렇지만, 전술의 문헌 1의 기술은, 입력되는 문서 데이터의 형태소를 해석하는 처리와, 그 결과를 또한 미리 준비된 단편 수화 영상 데이터로 변환한다고 하는 복수의 작업이 필요하기 때문에 문서 데이터의 의미 내용이 정확하게 단편 수화 영상에 반영되기 어려운 문제가 있었다.

또한, 수화자의 동작을 동영상으로 촬영하고, 이것을 화상 해석하는 기술은, 수화자도 개성에 의해 미묘하게 손가락 동작과 손가락 외의 동작이 다르고, 또한 양자의 연계 동작에 대해서도 개성이 있기 때문에 화상 해석이 어렵다고 하는 문제가 있었다.

또한, 수화에 의한 표현은 양손과 상반신의 큰 움직임을 필요로 하기 때문에 손가락이나 팔에 장해를 입거나 노령의 청각 장애인에게는 체력적으로 어렵다고 하는 염려도 있었다.

즉, 적어도 일방이 청각 장애인인 경우의 수화를 인터페이스로 한 커뮤니케이션에 있어서는 정보 입력에 즈음하여 보다 간략한 입력 방식의 등장이 요망되고 있었다.

한편, 수화는 손가락 동작과 손가락 외의 동작이 연동하여 의미 내용을 나타내는 것이지만, 이들의 양쪽 동작으로부터 수화의 의미 내용을 추측하는 것은 어렵고, 미리 손가락 동작과 손가락 외의 동작으로 나눈 카드 등을 준비하여 이들의 의미 내용을 학습할 수밖에 방법이 없었다.

본 발명은, 이러한 실정을 감안하여 이루어진 것이고, 그 제1의 과제는 수화가 손가락 동작과 손가락 외의 동작으로 성립되어 있다고 하는 특성에 주목하여 간단하고 쉽게 입력 가능한 입력 수단을 제공하는 것에 있다.

본 발명의 제2의 과제는 손가락 동작과 손가락 외의 동작으로부터 수화의 의미 내용을 검색 가능한 검색 수단을 제공하는 것에 있다.

본 발명은 이하의 수단으로 이루어진다.

본 발명의 청구항 1은, 손가락 동작과 손가락 외의 동작을 연동하여 의미 내용을 표현하는 수화 정보를 입력하기 위한 입력 장치로서, 적어도 화자의 상반신 부위를 분해 표시한 복수의 상반신 입력 영역과, 손가락의 형상을 그 하나씩에 할당한 손가락 입력 영역을 구비하고, 상기 손가락 입력 영역에서 입력된 손가락의 형상과, 상기 상반신 입력 영역에서 입력된 상반신의 부위를 입력 식별 수단으로 식별하여 동적으로 변화하는 수화 표현의 입력을 가능하게 한 입력 장치이다.

이것에 의하면, 입력 장치가 상반신 입력 영역과, 손가락 입력 영역과, 손목 상태 입력 영역으로 분할되어 있기 때문에 손가락 동작과 손가락 외의 동작을 연동하여 순조롭게 입력할 수가 있어 수화의 의미하는 정보의 입력을 매우 간편하게 실시하는 것이 가능하게 된다.

본 발명의 청구항 2는, 상기 상반신 입력 영역과, 손가락 입력 영역은 각각 범용 키보드의 키탭에 할당되어 있는 것이다. 이와 같이 범용의 키보드에 각 영역을 할당함으로써 하드웨어의 물리적 구성을 다시 재차 설계하는 일이 없이 염가로 간단하고 쉬운 수화 입력이 가능하게 된다.

본 발명의 청구항 3은, 상기 상반신 입력 영역은 수화 입력자에 대해서 키보드의 좌측에 배치되고, 상기 손가락 입력 영역은 키보드의 우측에 배치되어 있는 것을 특징으로 하는 것이다.

이것에 의하면, 수화 입력을 위해서 범용의 키보드를 이용하는 경우에 최적인 배치를 얻을 수 있다.

본 발명의 청구항 4는, 상기 상반신 입력 영역과, 손가락 입력 영역은 각각 평면적인 입력 화면에 키보드 화상으로서 터치 패널 화면에 표시되어 있는 것이다.

이것에 의하면, 물리적인 입력 장치로서 터치 패널 표시 화면을 가지는 퍼스널 컴퓨터나 패드면(pad surface) 상에 인쇄로 영역이 표시된 터치 패드 등을 이용할 수가 있고, 키보드 장치의 물리적인 구조에 사로잡히지 않고 각 영역의 배치가 가능하게 된다.
본 발명의 청구항 5는, 컴퓨터로서, 청구항 1에 기재된 입력 장치로부터 상기 손가락 입력 영역의 입력에 의한 손가락 동작 정보와 상기 상반신 입력 영역의 입력에 의한 손가락 외의 동작 정보를 취득하고, 상기 입력 장치에서 입력된 수화 정보를 대응하는 문장 정보로 변환하는 제어수단을 구비하는 컴퓨터이다.

본 발명의 청구항 6은, 손가락 동작과 손가락 외의 동작으로부터 수화의 의미 정보를 검색하는 검색 장치로서, 적어도 화자의 상반신 부분을 분해 표시한 복수의 상반신 입력 영역과, 손가락의 형상을 그 하나씩에 할당한 손가락 입력 영역을 가지는 입력 수단과, 상기 입력 수단의 손가락 입력 영역의 입력에 의해 손가락 동작 정보를 취득한 후에, 당해 손가락 동작 정보와 조합될 가능성이 있는 상기 상반신 입력 영역으로부터의 입력에 의한 손가락 외의 동작 정보를 예측하고, 기억 수단에 기억되어 있는 손가락 동작 정보와 손가락 외의 동작 정보의 조합으로 이루어지는 유의 단어를 읽어내어 표시 수단에 표시하는 제어 수단을 가지는 수화 검색 장치이다.

이것에 의하면, 우선 손가락 동작이 들어맞는 손가락 입력 영역을 지정하는 것만으로, 이 손가락 동작을 출발 동작으로서 조합되는 손가락 외의 동작이 예상되고, 그 조합이 의미하는 유의 단어가 표시 수단에 표시되기 때문에 수화 검색이 가능하게 된다.

본 발명의 청구항 7은, 상기 제어 수단은, 상기 손가락 동작 정보를 취득하여 상기 기억 수단에 기억되어 있는 손가락 동작 정보와 손가락 외의 동작 정보의 조합으로 이루어지는 유의 단어를 읽어내어 표시 수단에 표시한 후에, 상반신 입력 영역으로부터의 입력이 있었을 때에는, 상기 손가락 동작 정보와 당해 상반신 입력 영역으로부터의 입력에 의한 손가락 외의 동작 정보의 조합에 의해 상기 유의 단어의 좁힘 검색을 행하고, 검색 결과 정보를 상기 표시 수단에 더 표시시키는 청구항 6에 기재의 수화 검색 장치이다.

이것에 의하면, 손가락 입력 영역으로부터의 입력에 이어, 상반신 입력 영역과 손목 상태 입력 영역의 입력에 의해 더욱 더 단어 후보를 좁힐 수가 있다.

본 발명의 수화 키보드에 의하면, 수화에 의한 표현이나 그 의미 내용의 검색을 보다 간단하고 쉽고 적확하게 할 수가 있다.

도 1은 본 발명의 실시예인 키보드의 배치를 나타내는 설명도이다.
도 2는 실시예의 상반신 입력 영역을 나타내는 설명도이다.
도 3는 실시예의 입력 순서를 나타내는 설명도(1)이다.
도 4는 실시예의 입력 순서를 나타내는 설명도(2)이다.
도 5는 실시예의 입력 순서를 나타내는 설명도(3)이다.
도 6는 실시예의 입력 순서를 나타내는 설명도(4)이다.
도 7는 실시예의 입력 순서를 나타내는 설명도(5)이다.
도 8은 실시예의 입력 순서를 나타내는 설명도(6)이다.
도 9는 실시예의 검색 순서를 나타내는 설명도(1)이다.
도 10은 실시예의 검색 순서를 나타내는 설명도(2)이다.
도 11은 실시예의 검색 순서를 나타내는 설명도(3)이다.

이하, 본 발명의 실시의 형태를 첨부 도면을 참조하여 설명한다.

<실시예 >

본 발명의 수화 키보드는 도 1에 나타내는 키탭(key-tap)을 구비한 범용의 키보드 장치이고, 그 각 키탭에 각각 상반신 입력 영역과, 손가락 입력 영역과, 손목 상태 입력 영역을 할당하여 배치하고 있다.

보다 구체적으로는, 도 1에 있어서 키보드의 입력자측(앞측)으로부터 보아 좌측에 상반신 입력 영역(101~109)이 배치되고, 우측에 손가락 입력 영역(201~224)이 배치되고, 상부에 손목 상태 입력 영역(301~305)이 배치되어 있다.

상반신 입력 영역은, 키탭(101~109)이 나타내는 9개의 키(key)로 구성되어 있고, 101이 좌상 머리좌상 머리2가 중앙상 머리 부분, 103이 우상 머리 부분, 104가 왼쪽 어깨부, 105가 하안부, 106이 오른쪽 어깨부, 107이 왼손부, 108이 복부, 109가 오른손부를 각각 표시하고 있다.

손가락 입력 영역은, 키탭(201~224)이 나타내는 24개의 키로 구성되어 있고, 각각의 키탭에는 수화로서 이용되는 손가락 형상이 각각 할당되어 표시되어 있다.

또, 손목 상태 입력 영역은, 키탭(301~305)이 나타내는 5개의 키로 구성되어 있다.

또한, 왼쪽 쉬프트 키(shift key)(401)는, 왼손의 손의 형태를 선택하기 위한 키로, 당해 왼쪽 쉬프트 키(401)를 누른 후에, 손가락 입력 키(201~224)를 누름으로써 왼손의 손가락 입력이 실현되게 되어 있다. 또, 오른손에 관해서는, 왼쪽 쉬프트 키(401)를 누르고 있지 않을 때가 오른손의 손가락 입력 모드로 되어 있다. 또한, Caps Lock(쉬프트 키 「Shift」와 컨트롤 키(control key) 「Ctrl」를 동시에 누르면 실현되는 기능)을 이용하여 상시 왼손에 의한 손가락 입력 모드로 해도 좋다.

또한, 손가락을 굽힌다고 하는 「L자 모양의 도형」을 키탭에 표시한 키(손가락 굽힘 키(402))도 준비한다. 기본적으로 손가락을 굽히는 것은 적기 때문에, 손가락 입력 키(201~224)의 어느 쪽을 누른 후에, 이 손가락 굽힘 키(402)를 1회 누르면, 굽힘의 동작이 입력되게 된다. 또, 이 손가락 굽힘 키(402)를 재차 누르면 굽힌 손가락이 되돌아온다고 하는 동작을 입력한 것으로 된다. 또한, 손가락이 90° 이상 굽은 경우는 굽었다고 하고, 약간 굽히는 정도의 것은 키보드 상에서는 굽어 있지 않다고 판단한다.

또한, 손목 상태 입력 키의 일부(301, 302)는, 작은 원형과 큰 원형을 키탭에 표시하고 있고, 수화의 크기를 나타내는 「소」, 「대」를 의미한다. 손목 상태 입력 키(303~305)는, 손목의 각도를 의미하고 있고, 손목을 수직 아래로 향한 키(303), 수평으로 한 키(304), 수직 위로 향한 키(305)가 배치되어 있다.

또한, 키탭에의 표시는 생략했지만, 이상으로 설명한 키 이외의 키는 「입니다」나 「그러나」 등의 접속사 등의 단축 키로서의 기능을 할당해도 좋다.

수화 키보드는, 범용의 퍼스널 컴퓨터에 USB 인터페이스, 블루투스(bluetooth), 적외선 통신 등의 무선 인터페이스로 접속되어 있다. 당해 퍼스널 컴퓨터에는, 도시는 생략 하지만, 중앙 처리장치(CPU)를 중심으로, 버스(BUS)를 통해 접속된 메인 메모리(MM), 대규모 기억 장치로서의 하드디스크 장치(HD), 출력 장치로서의 디스플레이 장치(DISP), 프린터 장치(PRN) 등을 가지고 있다.

상기 하드디스크 장치(HD) 내에는 운영체제(OS : Operating System)와 함께, 응용 프로그램(APL)이 인스톨되어 있다. 당해 응용 프로그램(APL)은 버스(BUS) 및 메인 메모리(MM)를 통해 중앙 처리장치(CPU)에 읽혀 차례로 실행 처리된다.

이 응용 프로그램(APL)은, 수화 키보드로 입력된 수화 정보를 그것을 의미하는 문장으로 변환하는 기능을 가지고, 수화 문법에 따른 해석 알고리즘 모듈에 기초하여 변환 테이블에 등록된 문장 정보를 디스플레이 장치(DISP)에 출력하도록 되어 있다. 또한, 이 해석 알고리즘 모듈은 수화 키보드 내에 설치해 두고, 퍼스널 컴퓨터에는 변환 후의 문장 정보를 텍스트 코드로서 입력하도록 해도 좋다.

이하는, 해당 수화 키보드가 기능으로서 구비하는 해석 알고리즘에 의한 해석 순서를 수화 키보드의 입력 순서에 따라 설명한다.

표현하고 싶은 말이 2개의 동작으로 성립되어 있는 수화의 경우(예 : 왜?=이유→무엇?), 최초의 손의 형태(손가락 키(201~224)로 특정) 및 위치(상반신 입력 키(101~109)로 특정)를 누른 후에, 특히 아무것도 하지 않고, 각 키로부터 손가락을 이야기하고, 다음의 수화의 손의 형태(손가락 키(201~224)로 특정), 위치(상반신 입력 키(101~109)로 특정)를 특정한 후, 엔터 키(enter key)로 확정한다.

한편, 연속한 동작의 수화의 경우, 예를 들어 「아무쪼록=좋은+부탁」 등의 경우, 최초의 손의 형태(손가락 키(201~224)로 특정), 위치(상반신 입력 키(101~109)로 특정)를 누른 후에, 이들의 키로부터 손가락을 떼지 않고 누르면서, 다음의 손의 형태, 위치를 선택한다.

이하에 더욱 더 상세한 문장을 수화 키보드로 입력하는 경우에 대해서 설명한다.

예를 들면, 「수고하셨습니다」라고 하는 수화는, 양손을 좋음(good)으로 하고, 오른손을 목의 근처로부터, 가슴의 앞에 둔 왼손을 향해 내리는 동작을 행하는 수화이다. 이것을 본 실시예의 수화 키보드로 입력하는 경우, 우선 왼손을 선택하는 왼쪽 쉬프트 키(401)를 누르고, 다음에 손가락 키의 「좋음」을 의미하는 키(201)를 누르고, 상반신 입력 키의 왼손의 위치의 키(107)를 누른 후에, 이들의 키의 눌러 내리는 상태를 떼어 놓고, 다음에 재차 손가락 키의 「좋음」을 의미하는 키(201)를 누르고, 목의 위치를 나타내는 상반신 입력 키(105)를 누른 상태인 채로 가슴의 위치를 의미하는 상반신 입력 키(108)를 누른다. 이들의 동작에 의해, 「왼손을 가슴의 앞에 좋음의 형태로 두고, 오른손을 좋음으로 하고, 목으로부터 가슴에 걸쳐 이동시킨 수화」로 하게 된다. 이상의 순서를 키탭을 누르는 순서로 나타냈던 것이 도 3이다.

도 4는 「함께」를 의미하는 수화를 수화 키보드로 입력하는 순서를 나타낸 것이고, 「양손의 검지를 세워 가슴의 좌우로 넓히고, 손가락을 접근해 가고, 손가락을 서로 붙임」이라고 하는 동작을 나타내고 있다.

즉, 「왼쪽 쉬프트 키(401)→손가락 키(224)→상반신 입력 키(109)를 누른 채로 키(108)를 누르고서 일단 키를 떼어 놓는다. 다음에, 손가락 키(224)→상반신 입력 키(108)를 누른 채로 키(107)를 누른 후 각 키를 떼어 놓음」이라고 하는 동작을 나타내고 있다.

도 5는 「작다」를 의미하는 수화를 수화 키보드로 입력하는 순서를 나타낸 것이고, 왼손의 검지를 세우고 오른손의 검지와 중지를 세우고, 그리고 왼손의 검지의 좌우에 두는 것에 의해 한자의 「소」를 만든다.

이것을 실시예의 수화 키보드로 입력하는 경우, 「왼쪽 쉬프트 키(401)→손가락 키(224)→상반신 입력 키(105)」의 순서로 누른 후, 각 키를 개방하고, 다음에 「손가락 키(210)→상반신 입력 키(105)」를 누른다.

도 6은 「찾다」라고 하는 수화를 수화 키보드로 입력하는 순서를 나타낸 것이고, 「검지와 엄지로 고리를 만들고, 얼굴의 높이로 왼쪽에서 오른쪽으로 움직임」이라고 하는 동작을 나타내고 있다.

구체적으로는, 「손가락 키(214)→상반신 입력 키(103)을 누른 상태인 채, 키(102) 및 키(101)를 차례로 누름」으로서 입력 가능하다.

또, 「소」(소 키(301))과 「대」(대 키(302))를 사용하는 경우의 수화에 대해서 설명하면, 「조금 전」, 「이전」, 「훨씬 전」의 수화는 손바닥을 조금 둥글게, 뒤를 향해 뒤로 당기는 동작이 공통이다. 그러나, 그 동작을 작게 행하면 「조금 전」, 크게 행하면 「훨씬 전」, 보통으로 두면 「이전」으로 된다. 즉, 손바닥을 움츠린 형태는 손가락 키(217)이므로, 「손가락 키(217)→상반신 입력 키(101)」(도 7)의 입력으로 「이전」으로 변환되고, 「손가락 키(217)→상반신 입력 키(101)→소 키(301)」이 「조금 전」(또는 「방금 전」)으로 변환되고, 「손가락 키(217)→상반신 입력 키(101)→대 키(302)」가 「훨씬 전」으로 변환되어 퍼스널 컴퓨터에 입력되게 된다.

도 8은 「캠프」를 의미하는 수화를 수화 키보드로 입력하는 순서를 나타낸 것이다. 「캠프」는 수화에서는 손의 위치를 바꾸면서, 손의 형태도 바꾸기 때문에 복잡한 움직임을 필요로 한다. 구체적으로는, 「왼손의 손등을 위를 향해 가슴의 앞에서 몸과 평행으로 왼팔을 두고, 오른손의 손가락을 열어서, 왼손의 손등 위에 두고, 손을 움츠리면서 목의 위치까지 올림」이라고 하는 동작을 행한다.

수화 키보드에서는, 「왼쪽 쉬프트 키(401)→손가락 키(217)→상반신 입력 키(108)」를 누른 후에 각 키를 떼어 놓고, 그 다음에 「손가락 키(219)를 누르면서 키(223)를 누른다」. 또한, 「상반신 입력 키(108)를 누르면서 키(105)를 누름」이라고 하는 키 입력에 의해 「캠프」라고 하는 단어로 변환되어 퍼스널 컴퓨터에 입력되게 된다.

또한, 이상에서 설명한 키의 배치나 조작 순서는 어디까지나 일례로서 본 실시예에 한정되는 것은 아니다. 요컨대, 상반신의 부위를 나타내는 키가 분할 표시되고, 한편 각 손가락의 형태가 각각의 키에 할당되어 있으면 좋다.

또한, 이상의 실시예의 설명에서는, 범용의 키보드 장치에 상반신 입력 키나 손가락 키를 할당하여 배치한 수화 키보드 장치로 설명했지만, 키보드는 반드시 기계적인 키의 눌러 내림 기구를 구비한 것일 필요는 없고, 예를 들어 터치 패널 디스플레이 장치에 화상 표시된 것이어도 좋다. 또, 터치 펜(touch pen)으로 입력하는 터치 패드의 표면에 도 1에 나타낸 키보드가 인쇄되고, 터치 펜의 터치 위치에서 키보드와 같은 입력이 가능한 기능을 가지는 것이어도 좋다.

다음에, 본 실시 형태의 수화 키보드를 검색 장치의 입력 수단으로서 이용했을 경우의 실시 형태에 대해서 설명한다.

당해 키보드는 도시하지 않는 퍼스널 컴퓨터에 USB 등의 인터페이스를 통해 접속되어 있다.

퍼스널 컴퓨터는 범용의 컴퓨터이고, 중앙 처리장치 및 메인 메모리를 중심으로 버스로 접속된 하드디스크 장치, 디스플레이 장치 등을 가지고 있다.

하드디스크 장치 내에는, 운영체제와 함께, 수화 응용 프로그램, 수화 동영상 데이터, 손가락 동작과 손가락 외의 동작의 조합에 의해 표현되는 단어 데이터베이스 등이 격납되어 있고, 이 수화 응용 프로그램을 버스 및 메인 메모리를 통해 중앙 처리장치가 차례로 읽어들여 실행 처리함으로써 이하에 설명하는 본 실시 형태의 기능이 실현된다.

본 실시 형태로 설명한 키보드(도 1 참조)는 USB 인터페이스를 통해 상기 버스에 접속되어 있다.

키보드를 이용한 수화 검색을 실시하는 경우, 우선 중앙 처리장치는 수화 응용 프로그램을 읽어들여 키보드로부터의 인터럽트 처리를 기다린다.

우선, 키보드의 손가락 입력 키, 여기에서는 검지를 상방으로 한 상태의 키, 즉 손가락 키(203)가 눌리면, 수화 응용 프로그램은 당해 손가락 키의 인터럽트 코드를 검출하고, 이 손가락 키를 이용하는 단어를 단어 데이터베이스로부터 읽어내고, 그 후보 단어를 수화 화상과 함께 디스플레이 장치에 표시한다(도 9 참조). 이때, 단어 데이터베이스는 학습 기능에 의해 사용 빈도가 높은 단어의 그룹만을 표시한다. 도 9에서는 상기 손가락 키(203)의 손가락 동작을 사용함으로써 표현 가능한 6개의 단어, 즉 「나」, 「수화」, 「내일」, 「생각하다」, 「듣다」 및 「놀다」가 문자와 수화 화상으로 표시되어 있다.

이 단계에서 검색 목적의 단어가 발견되었을 경우에는 검색은 종료한다.

당해 검색 결과가 대량으로 색출된 경우에는, 상기 손가락 키(203)의 손가락 동작의 입력에 이어, 손가락 외의 동작을 의미하는 키, 예를 들어 상반신 입력 키(101)(머리의 오른쪽을 나타내는 키)를 누른다. 이에 의해 검지를 머리의 오른쪽에 위치시킨 상태의 수화가 의미하는 후보 단어로 좁혀져 이들의 좁혀진 후보 단어가 수화 화상과 함께 디스플레이 장치에 표시된다(도 10).

상기 도 10에 나타낸 좁힘 검색에서도 아직 좁힘이 완료하지 않는 경우에는, 더욱 더 손가락 외의 키의 입력에 의해 수화의 동작을 한정함으로써 단어를 좁힐 수가 있다. 예를 들어 도 11에 나타내듯이, 손가락 키(203)→상반신 입력 키(101)에 이어, 쉬프트 키(401)를 누르면서 손가락 키(203)를 누름으로써, 왼손의 검지를 지정 입력할 수가 있다(도 11 참조). 이 단계에서, 오른손의 검지를 머리의 오른쪽에 배치시키면서 왼손의 검지를 사용하는 수화에 해당하는 단어로 좁혀짐이 행해진다. 이 결과 이 도에 나타나듯이, 「듣다」와 「놀다」의 단어로 좁혀지게 된다.

마지막으로, 머리의 왼쪽을 나타내는 상반신 입력 키(103)를 누르는 것에 의해, 왼손의 검지를 머리의 왼쪽에 배치시키는 수화 동작을 의미하게 되어, 이에 의해 최종적으로 양손의 검지를 머리의 각각의 상방에 배치시키는 「놀다」라고 하는 단어를 의미하는 수화 동작으로 좁혀진다(도 11 참조)

이와 같이, 손가락 키(203)→상반신 입력 키(101)→쉬프트 키(401)+손가락 키(203)→상반신 입력 키(103)를 차례로 키가 눌려져 가는 단계마다 수화 동작이 좁혀지고 거기에 해당하는 단어도 좁힘이 행해져 간다.

이상의 실시 형태에서는, 독립된 키보드가 USB 규격 등의 인터페이스로 수화 응용 프로그램을 인스톨(install)한 퍼스널 컴퓨터에 접속했을 경우로 설명했지만, 이것에 한정되는 것은 아니고, 도 1에 나타낸 것 같은 키 배치를 가지는 키보드를 구비한 것이면 전자 사전, 스마트폰 등으로 실현되어도 좋다.

또한, 수화 응용 프로그램은 퍼스널 컴퓨터의 하드디스크 장치에 인스톨했을 경우로 설명했지만, 이것에 한정되지 않고, 당해 프로그램은 서버에 인스톨되고 있어 인터넷 등의 통신망을 통해 입력 결과나 검색 결과를 단말장치에 표시시키도록 해도 좋다.

<산업상의 이용 가능성>

본 발명의 수화 키보드는 수화에 의해 표현되는 의미 내용의 입력 시스템 또는 검색 시스템, 수화의 전자 사전으로서 이용할 수가 있다.

101~106 상반신 입력 영역(상반신 입력 키)
210~224 손가락 입력 영역(손가락 입력 키)
301~305 손목 상태 입력 영역(손목 상태 입력 키)
401 왼쪽 쉬프트 키
402 손가락 굽힘 키

Claims

손가락 동작과 손가락 외의 동작을 연동하여 의미 내용을 표현하는 수화 정보를 입력하기 위한 입력 장치로서,
적어도 화자의 상반신 부위를 분해 표시한 복수의 상반신 입력 영역과,
손가락의 형상을 그 하나씩에 할당한 손가락 입력 영역을 구비하고,
상기 손가락 입력 영역에서 입력된 손가락의 형상과, 상기 상반신 입력 영역에서 입력된 상반신의 부위를 입력 식별 수단으로 식별하여 동적으로 변화하는 수화 표현의 입력을 가능하게 한 입력 장치.
제1항에 있어서,
상기 상반신 입력 영역과, 손가락 입력 영역은 각각 범용 키보드의 키탭에 할당되어 있는 것을 특징으로 하는 입력 장치.
제2항에 있어서,
상기 상반신 입력 영역은 수화 입력자에 대해서 키보드의 좌측에 배치되고, 상기 손가락 입력 영역은 키보드의 우측에 배치되어 있는 것을 특징으로 하는 입력 장치.
제1항에 있어서,
상기 상반신 입력 영역과, 손가락 입력 영역은 각각 평면적인 입력 화면에 키보드 화상으로서 터치 패널 화면에 표시되어 있는 입력 장치.
청구항 제1항에 기재된 입력 장치로부터 상기 손가락 입력 영역의 입력에 의한 손가락 동작 정보와 상기 상반신 입력 영역의 입력에 의한 손가락 외의 동작 정보를 취득하고, 상기 입력 장치에서 입력된 수화 정보를 대응하는 문장 정보로 변환하는 제어수단을 구비하는 것을 특징으로 하는 컴퓨터.
손가락 동작과 손가락 외의 동작으로부터 수화의 의미 정보를 검색하는 검색 장치로서,
적어도 화자의 상반신 부분을 분해 표시한 복수의 상반신 입력 영역과, 손가락의 형상을 그 하나씩에 할당한 손가락 입력 영역을 가지는 입력 수단과,
상기 입력 수단의 손가락 입력 영역의 입력에 의해 손가락 동작 정보를 취득한 후에, 당해 손가락 동작 정보와 조합될 가능성이 있는 상기 상반신 입력 영역으로부터의 입력에 의한 손가락 외의 동작 정보를 예측하고, 기억 수단에 기억되어 있는 손가락 동작 정보와 손가락 외의 동작 정보의 조합으로 이루어지는 유의 단어를 읽어내어 표시 수단에 표시하는 제어 수단을 가지는 수화 검색 장치.
제6항에 있어서,
상기 제어 수단은, 상기 손가락 동작 정보를 취득하여 상기 기억 수단에 기억되어 있는 손가락 동작 정보와 손가락 외의 동작 정보의 조합으로 이루어지는 유의 단어를 읽어내어 표시 수단에 표시한 후에,
상반신 입력 영역으로부터의 입력이 있었을 때에는, 상기 손가락 동작 정보와 당해 상반신 입력 영역으로부터의 입력에 의한 손가락 외의 동작 정보의 조합에 의해 상기 유의 단어의 좁힘 검색을 행하고, 검색 결과 정보를 상기 표시 수단에 더 표시시키는 수화 검색 장치.