KR20020036280A

KR20020036280A - 유무선 네트웍 환경에서의 수화 전송방법 및 장치

Info

Publication number: KR20020036280A
Application number: KR1020000066391A
Authority: KR
Inventors: 임영문; 방혜경; 김성택; 최요한; 김홍기
Original assignee: 방혜경; 김홍기; 최요한; 김성택
Priority date: 2000-11-09
Filing date: 2000-11-09
Publication date: 2002-05-16

Abstract

본 발명은 발신자 클라이언트로부터 유무선 네트웍을 통하여 웹서버가 문자 또는 음성 형태의 메시지를 입력 받아 이를 청각장애인간 또는 청각장애인과 일반인간의 의사소통수단인 수화를 나타내는 동영상으로 변화하여 수화 동영상 또는 수화 동영상에 문자 메시지를 결합한 형태로 수신자 클라이언트에게 전송하는 방법 및 장치에 관한 것으로서, 발신자 클라이언트로부터 수신자 클라이언트의 네트웍 주소 및 메시지를 수신하는 메시지수신단계, 상기 메시지수신단계에서 수신된 메시지를 데이터 처리하여 대표단어를 추출하는 데이터처리단계, 상기 데이터 처리단계에서 추출된 대표단어에 매칭되는 수화동영상 파일을 수화동영상 DB에서 검색하는 DB검색단계, 상기 DB 검색단계에서 검색된 수화동영상 파일을 수신자 클라이언트에게 전송하는 전송단계로 구성된다. 본 발명에 따르면 음성 또는 문자 형태의 입력을 수화동영상으로 변화하여 수신자에게 전송할 수 있게 되어 청각장애인간 또는 청각장애인과 일반인간의 의사소통이 원활해지는 효과가 있다.

Description

유무선 네트웍 환경에서의 수화 전송방법 및 장치{Method of and apparatus for transferring finger language on wire or wireless network}

본 발명은 청각장애인의 원활한 의사소통을 돕기 위해 유무선 네트웍 환경을 통하여 수화를 전송하는 방법 및 장치에 관한 것이다. 좀 더 구체적으로는, 유무선 네트웍을 통하여 음성 또는 문자 메시지가 입력될 경우에 이를 청각장애인들의 의사소통수단인 수화를 나타내는 동영상으로 변환하여 상대방에게 전송함으로써 일반인과 청각장애인간 또는 청각장애인 상호간에 유무선 네트웍 상에서 원활한 의사전달 및 교환이 가능토록 지원하는 방법 및 장치에 관한 것이다.

최근, 컴퓨터, 네트웍, 통신기술, 영상처리기술, 멀티미디어 기술, 디지털 기술 등의 비약적 발전으로 인하여 인터넷이나, LAN, WAN 또는 인트러넷 등의 유무선 네트웍이 생활 전반에 깊숙히 보급되었고, 이를 통한 이메일이나 PC통신 등 개인간의 의사전달수단도 날로 다양화 되어가고 있다. 또한, 인터넷은 기존의 유선방식에서 벗어나 WAP(Wireless Application Protocol)을 기반으로 하여 무선 인터넷 시스템으로의 전환을 시도하고 있다. 그리하여, 최근 전세계적으로 무선 데이터 송수신에 대한 관심과 기대가 증폭되고 있고 관련기술 또한 비약적으로 발전하고 있으며, 몇몇 기술과 방법들이 WAP기반에서 활용되고 있고, 머지 않은 시기에 본격적인 무선 인터넷 시대의 도래를 의미하는 IMT2000서비스가 시작될 예정이다.

그간 문제가 되었던 휴대용 단말기상에서 동영상자료를 송수신 할 수 있는 기술도 몇몇 이동통신회사에서 현재 사용되고 있는 단말기보다는 데이터 송수신 속도를 발전시킨 기술로 IMT2000기술로의 전초단계인 CDMA2000-1x을 2000년도 하반기부터 서비스한다고 발표하였다. 이는 동영상 형태의 자료가 자유롭게 송수신될 수 있다는 것을 의미한다.

이러한 기술적 발전의 배경 하에서 일반인과는 달리 듣고 말하는 것에 장애를 갖고 있는 청각장애인들 또한 PC통신이나 이메일 또는 PCS의 문자메시지 서비스 등을 이용하여 종전보다는 훨씬 자유롭게 타인과 의사소통을 할 수 있게 되었지만 청각장애인간 또는 청각장애인 및 일반인간의 통상적 의사소통수단인 수화로 유무선 인터넷 상에서 의사소통을 할 수 있는 기술은 현재까지 개발되고 있지 않은 실정이다.

이에 본 발명의 발명자는 유무선 네트웍 환경 하에서 청각장애인 상호간 또는 청각장애인과 일반인간의 의사소통에 있어서 수화를 동영상으로 자유롭게 전송할 수 있다면 이들간의 의사소통이 지금보다 훨씬 더 원활해질 것이라는 생각으로 본 발명을 창안하게 되었다.

따라서 본 발명의 목적은 유무선 네트웍을 통하여 음성 또는 문자 메시지가 입력될 경우에 이를 청각장애인들의 의사소통수단인 수화를 나타내는 동영상으로 변환하여 상대방에게 전송함으로써 일반인과 청각장애인간 또는 청각장애인 상호간에 유무선 네트웍 상에서 원활한 의사전달 및 교환이 가능토록 지원하는 방법 및 장치를 제공하는 것이다.

도1은 본 발명이 구현되는 시스템 환경의 개요도.

도2는 본 발명의 전체 흐름도.

도3은 본 발명에 따른 웹서버의 기능적 구성도.

<도면부호의 설명>

11 웹서버, 13 유무선 네트웍, 15 발신자 및 수신자 클라이언트,

101 제어부, 103 송수신부, 105 음성인식부, 107 데이터처리부,

109 메모리부, 111 DB검색부, 113 수화동영상 DB, 115 어휘사전 DB

117 파일조합부, 119 파일결합부

발명의 개요

본 발명은 발신자 클라이언트로부터 유무선 네트웍을 통하여 웹서버가 문자 또는 음성 형태의 메시지를 입력받아 이를 청각장애인간 또는 청각장애인과 일반인간의 의사소통수단인 수화를 나타내는 동영상으로 변환하여 수화 동영상 또는 수화 동영상에 문자 메시지를 결합한 형태로 수신자 클라이언트에게 전송하는 방법 및 장치에 관한 것으로서, 발신자 클라이언트로부터 수신자 클라이언트의 네트웍 주소 및 메시지를 수신하는 메시지수신단계, 상기 메시지수신단계에서 수신된 메시지를데이터 처리하여 대표단어를 추출하는 데이터처리단계, 상기 데이터 처리단계에서 추출된 대표단어에 매칭되는 수화동영상 파일을 수화동영상 DB에서 검색하는 DB검색단계, 상기 DB 검색단계에서 검색된 수화동영상 파일을 수신자 클라이언트에게 전송하는 전송단계로 구성된다.

본 발명은 DB 검색단계에서 검색된 수화동영상 파일을 조합하는 파일조합단계를 추가적으로 포함할 수 있다.

본 발명은 또한 메시지 입력단계에서 음성형태의 메시지가 입력될 경우에는 음성을 인식하여 이를 텍스트 파일로 변환하여 저장하여 두었다가 파일조합단계에서 조합된 동영상파일과 결합하는 파일결합단계를 추가로 포함할 수 있다.

또한 본 발명은 상기의 방법을 실시하기 위한 장치를 포함하는 것으로서 상기 장치는 수화동영상 파일이 저장된 수화동영상 DB, 발신자 클라이언트가 전송한 수신자 클라이언트의 네트웍 주소 및 메시지를 수신하는 수신부, 수신부에서 수신된 메시지를 데이터 처리하여 대표단어를 추출하는 데이터처리부, 데이터처리부에서 추출된 대표단어에 매칭되는 수화동영상 파일을 수화 DB에서 검색하는 수화검색부, 수화검색부에서 검색된 수화동영상 파일을 수신자의 클라이언트에게 전송하는 송신부, 상기 각 구성요소를 전체적으로 제어하는 제어부로 구성된다.

본 발명에 따른 장치는 또한, 수화검색부에서 검색된 수화동영상 파일을 조합하는 파일조합부, 메시지 입력단계에서 문자형태의 메시지가 입력될 경우에는 이를 텍스트 파일로 변환하여 저장할 수 있는 메모리부와, 메모리부에 저장된 텍스트 파일과 파일조합부에서 조합된 동영상파일과 결합하는 파일결합부, 입력부를 통하여 입력된 메시지가 음성인 경우에 이를 인식하여 텍스트 파일로 변환하는 음성인식부와, 변환된 텍스트 파일을 저장할 수 있는 메모리부 및 상기 메모리부에 저장된 텍스트 파일과 파일조합부에 조합된 동영상파일을 결합하는 파일결합부, 동일한 의미를 내포하는 다수의 단어들과 이를 대표하는 대표단어를 각각 필드로 포함하는 어휘사전 DB를 추가적으로 포함할 수 있다.

시스템 환경

도1은 본 발명이 구현되는 시스템 환경을 나타내는 개략도이다.

다수의 발신자 또는 수신자 클라이언트(15)들이 웹서버(11)를 중심으로 유무선 네트웍(13)을 매개로 하여 연결되어 있다.

본 발명에서 웹서버(11)는 발신자 클라이언트로부터 메시지를 입력받아 이를 수화동영상으로 변환하여 수신자 클라이언트에게 보내는 기능을 수행하는 컴퓨터 시스템 및 이를 구동하기 위한 컴퓨터 프로그램 또는 응용 프로그램이나 데이터베이스를 총괄하는 포괄적 개념이다.

또한, 발신자 및 수신자 클라이언트(15)는 웹서버(11)와 유무선 네트웍(13)을 통하여 연결되어 메시지를 송수신 할 수 있는 컴퓨터 시스템 또는 휴대용 단말기(PDA, Personal Digital Assitant) 및 이를 사용하는 사용자를 일컫는 말이다.

유무선 네트웍은 WWW(WorldWide Web), WAP(Wireless Application Protocol)을 기반으로 하는 유무선 인터넷뿐만 아니라 조직 내부의 업무를 인터넷 기술로 처리하는 인트러넷 및 LAN(Local Area Network)이나 WAN(Wide Area Network)을 포괄하는 개념이다.

실시예

도2는 본 발명에 따른 유무선 네트웍 환경에서의 수화 전송방법의 전체적 흐름도이고, 도3은 본 발명에 따른 웹서버의 기능적 구성도이다.

도2와 도3의 설명 전에 본 발명의 이해를 돕기 위하여 청각장애인간 또는 청각장애인과 일반인간의 의사소통수단인 수화의 특징에 대하여 간략하게 설명하고자 한다.

수화는 각 단어별로 몇몇의 연속되는 손동작을 보여줌으로써 그 단어의 의미를 나타내는 동작언어로, 문장은 그 문장을 구성하는 각 단어에 해당되는 손동작을 순서대로 보여줌으로써 표현한다.

수화가 일반언어와 다른 점은 조사를 사용하지 않는다는 것과 명사, 동사, 형용사, 관형사, 부사 등의 품사가 관여하지 않고 동일하게 사용된다는 점, 그리고 존경이나 겸양표현이 거의 없다는 점 등이다.

따라서, 예를 들어 '위험', '위험스러운', '위험하다', 위험한'을 나타내는 수화가 개별적으로 있는 것이 아니라 한가지 동일한 손동작으로 표현하는 것이다. 또한, '나', '나를', '나에게', '나는', '저', '저를', '저에게'등도 마찬가지이다.

본 발명은 각 단어별로 수화동영상 파일을 제작하여 이를 데이터베이스화하고, 발신자 클라이언트로부터 음성 또는 문자형태의 메시지를 수신 받아 이를 데이터 처리한 후 상기 데이터베이스로부터 수화동영상 파일을 검색한 후 이것을 수신자 클라이언트에게 전송하는 방법 및 장치에 관한 것으로서, 상기한 수화의 특징을고려하여야 한다.

본 발명에 따른 유무선 네트웍 상에서의 수화 전송방법의 전체적 흐름과 웹서버의 구성을 도2와 도3을 참조하여 설명한다.

발신자 클라이언트는 WWW, WAP이나 LAN 또는 WAN 등을 통하여 본 발명에 따른 웹서버에 접속한다(21). 접속 후 본 발명에 따른 시스템을 이용하기 위하여 회원 등록과정(비회원인 경우)이나 회원 인증과정(회원인 경우)을 거칠 수 있다. 웹서버에 접속한 발신자 클라이언트가 수화동영상이 전송될 수신자 클라이언트의 네트웍 주소(IP 주소, URL 등)와 음성 또는 문자 형태의 메시지를 입력하면, 웹서버의 수신부(103)는 이 메시지를 수신한다.

수신된 메시지가 음성 형태인 경우 웹서버의 음성인식부(105)는 음성을 인식하여(25) 이를 텍스트 파일로 변환한다(27). 문자 형태의 메시지가 수신된 경우(23)에는 이러한 음성인식의 단계는 생략된다. 이 과정에서 변환된 텍스트 파일은 일단 메모리부(109)에 저장되는(29) 한편 그 복사본은 데이터처리부(107)에서 데이터처리 과정을 밟는다. 여기서 데이터처리라 함은 텍스트 파일의 각 단어별로 어휘사전 DB(115)에서 대표단어를 추출하는 과정을 말한다(31). 대표단어를 추출하는 이유는 수화동영상 DB(113)에서 수화동영상 파일을 검색하기 위한 것으로, 수화동영상 DB(113)는 각 단어별 대표단어와 그에 해당되는 수화동영상 파일이 매칭되어 있으므로, 조사가 결합되어 있거나 존경 또는 겸양표현에 해당되는 단어들로부터 대표단어를 추출할 필요가 있다.

어휘사전 DB(115)는 대표단어를 추출하기 위하여 필요한 것으로서, 이것은대표단어 필드와 대표단어에 조사가 결합된 형태 또는 존경이나 겸양표현 또는 유사어를 모두 포함하고 있는 유사어휘군 필드를 포함하고 있다.

어휘사전 DB(115)와 수화동영상 DB(113)의 테이블 구조의 예시가 표1과 표2에 나타나 있다.

일련번호	1
유사어휘군	'나는', '나를', '내가','나에게''저는', '저를','제가', '제게'...
대표단어	'나'

일련번호	1
대표단어	'나'
수화동영상파일	파일

어휘사전 DB(115)에서 대표단어를 추출하여 수화동영상 DB(117)로부터 수화동영상 DB를 검색하는 과정을 예를 들어 설명하면, "저에게 내일 와 주십시오."라는 문장이 수신된 경우에 웹서버의 데이터처리부(107)는 단어 순서대로 '저에게'라는 단어를 어휘사전 DB(115)를 검색하여 그것의 대표단어인 '나'라는 단어를 추출하고, 이로부터 수화동영상 DB(117)에서 '나'에 해당되는 수화동영상 파일을 검색하게 되는 것이다(35).

이런 식으로 단어별로 수화동영상 파일을 검색하여 파일조합부(117)에서 수화동영상 파일을 조합한다(39). 파일 조합시에는 마침표, 느낌표, 물음표 등의 문장 마침기호를 기준으로 문장별로도 할 수 있고 메시지 전체를 하나로 묶을 수도 있다.

수화동영상 파일은 각 대표단어별로 수화의 동작을 WML script를 이용하여 여러 장의 이미지를 연결시킴으로써 움직이는 영상으로 표현 가능하게 제작할 수 있으며, 파일조합부(117)에서는 별개의 단어별 파일을 문장별 또는 메시지 전체로 결합시키는 것이다. 수화동영상 파일은 영상 압축기술을 사용하여 퀵타임 파일이나 avi파일 또는 MPEG파일 등으로도 제작될 수도 있다.

파일조합부(117)에서 조합된 수화동영상 파일은 파일결합부(119)에서 메모리부(109)에 저장되었던 텍스트 파일과 결합되어(41) 송신부(103)를 통하여 수신자 클라이언트에게 전송된다(43). 도4에 수신자 클라이언트의 단말기에 표시되는 수화동영상과 텍스트 표시를 예시하였다.

수신자 클라이언트에 전송된 수화동영상은 수신자 클라이언트의 시스템 환경(컴퓨터 단말기, PDA, PCS)에 따라 이메일 모드나 SMS모드 등으로 출력될 수 있다.

본 발명에 의한 유무선 네트웍 상에서의 수화 전송방법 및 장치에 따르면 음성 또는 문자 형태의 입력을 수화동영상으로 변화하여 수신자에게 전송할 수 있게 되어 다음과 같은 효과를 얻을 수 있다.

첫째, 유선 상에서(WEB, LAN, WAN, 인트러넷 등) 일반인과 청각장애인 사이또는 청각장애인간에 문자 및 수화서비스가 지원 가능하여 손쉬운 의사전달이 가능하게 된다.

둘째, 곧 상용화 될 CDMA나 IMT2000서비스를 이용하여 무선(휴대폰, PDA 등)을 이용하여도 본 발명에 의한 서비스를 제공할 수 있으므로 청각장애인들의 사회활동 범위가 확대된다.

셋째, 본 발명의 기술이 활성화 될 때 청각장애인들을 사고 및 위급 상황으로부터 보호할 수 있을 뿐만 아니라 청각장애인들이 일반인들이 이용하고 있는 휴대용 단말기의 사용이 가능하게 되어 그들의 여가생활에 도움을 줄 수 있다.

넷째, 본 발명에 따른 기술의 발전과 데이터베이스의 확장을 통하여 청각장애인들을 위한 실시간 채팅도 가능할 것이다.

Claims

수화동영상 DB를 구비한 웹서버와 상기 웹서버를 중심으로 유무선 네트웍 상에서 연결된 다수의 발신자 클라이언트와 다수의 수신자 클라이언트로 구성된 시스템에 있어서, 상기 웹서버가

발신자 클라이언트로부터 수신자 클라이언트의 네트웍 주소 및 메시지를 수신하는 메시지수신단계,

상기 메시지수신단계에서 수신된 메시지를 데이터 처리하여 대표단어를 추출하는 데이터처리단계,

상기 데이터 처리단계에서 추출된 대표단어에 매칭되는 수화동영상 파일을 수화동영상 DB에서 검색하는 DB검색단계,

상기 DB 검색단계에서 검색된 수화동영상 파일을 수신자 클라이언트에게 전송하는 전송단계를 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송방법.
청구항 1에 있어서, DB 검색단계에서 검색된 수화동영상 파일을 조합하는 파일조합단계를 추가로 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송방법.
청구항 2에 있어서, 메시지 입력단계에서 문자형태의 메시지가 입력될 경우에는 이를 텍스트 파일로 저장하여 두었다가 파일조합단계에서 조합된 동영상파일과 결합하는 파일결합단계를 추가로 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송방법.
청구항 2에 있어서, 메시지 입력단계에서 음성형태의 메시지가 입력될 경우에는 음성을 인식하여 이를 텍스트 파일로 변환하여 저장하여 두었다가 파일조합단계에서 조합된 동영상파일과 결합하는 파일결합단계를 추가로 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송방법.
청구항 1 내지 4의 어느 한 항에 있어서, 데이터처리단계에서 대표단어를 추출하는 방법은 동일한 의미를 내포하는 다수의 단어들과 이를 대표하는 대표단어를 각각 필드로 포함하는 어휘사전 DB를 검색함으로써 행해지는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송방법.
수화동영상 파일이 저장된 수화동영상 DB를 구비한 웹서버와 상기 웹서버를 중심으로 유무선 네트웍 상에서 연결된 다수의 발신자 클라이언트와 다수의 수신자 클라이언트로 구성된 시스템에 있어서, 상기 웹서버는

발신자 클라이언트가 전송한 수신자 클라이언트의 네트웍 주소 및 메시지를 수신하는 수신부,

수신부에서 수신된 메시지를 데이터 처리하여 대표단어를 추출하는 데이터처리부,

데이터처리부에서 추출된 대표단어에 매칭되는 수화동영상 파일을 수화 DB에서 검색하는 수화검색부,

수화검색부에서 검색된 수화동영상 파일을 수신자의 클라이언트에게 전송하는 송신부,

상기 각 구성요소를 전체적으로 제어하는 제어부를 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송장치.
청구항 6에 있어서, 수화검색부에서 검색된 수화동영상 파일을 조합하는 파일조합부를 추가로 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송장치.
청구항 6에 있어서, 메시지 입력단계에서 문자형태의 메시지가 입력될 경우에는 이를 텍스트 파일로 변환하여 저장할 수 있는 메모리부와, 메모리부에 저장된 텍스트 파일과 파일조합부에서 조합된 동영상파일과 결합하는 파일결합부를 추가로 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송장치.
청구항 6에 있어서, 입력부를 통하여 입력된 메시지가 음성인 경우에 이를 인식하여 텍스트 파일로 변환하는 음성인식부와, 변환된 텍스트 파일을 저장할 수 있는 메모리부 및 상기 메모리부에 저장된 텍스트 파일과 파일조합부에 조합된 동영상파일을 결합하는 파일결합부를 추가로 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송장치.
청구항 6 내지 9의 어느 한 항에 있어서, 동일한 의미를 내포하는 다수의 단어들과 이를 대표하는 대표단어를 각각 필드로 포함하는 어휘사전 DB를 추가로 포함하는 것을 특징으로 하는 유무선 네트웍 환경에서의 수화 전송장치.