KR20100026701A - 수화 번역기 및 그 방법 - Google Patents

수화 번역기 및 그 방법 Download PDF

Info

Publication number
KR20100026701A
KR20100026701A KR1020080085809A KR20080085809A KR20100026701A KR 20100026701 A KR20100026701 A KR 20100026701A KR 1020080085809 A KR1020080085809 A KR 1020080085809A KR 20080085809 A KR20080085809 A KR 20080085809A KR 20100026701 A KR20100026701 A KR 20100026701A
Authority
KR
South Korea
Prior art keywords
voice
sign language
video
text
image
Prior art date
Application number
KR1020080085809A
Other languages
English (en)
Inventor
강대진
백명진
엄정민
강순신
심규대
최병욱
Original Assignee
한국산업기술대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국산업기술대학교산학협력단 filed Critical 한국산업기술대학교산학협력단
Priority to KR1020080085809A priority Critical patent/KR20100026701A/ko
Publication of KR20100026701A publication Critical patent/KR20100026701A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G10L2021/065—Aids for the handicapped in understanding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Machine Translation (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 청각 장애가 있는 수화자의 수화 동영상에 대하여 패턴 매칭과 영상 인식을 통하여 음성 또는 텍스트로 번역할 수 있으며, 일반인의 음성에 대한 인식을 통하여 수화 동영상 또는 텍스트 형태로 번역하여 출력함으로써, 일반인과 청각 장애인 간에 효과적으로 의사 소통이 가능하도록 한 수화 번역기 및 그 방법에 관한 것이다. 본 발명에 따른 수화 번역기는, 수화 영상에 대응되는 음성과 텍스트를 저장하는 메모리, 카메라를 통하여 입력되는 수화 동영상을 소정 단위로 처리하여 영상 패턴을 결정하고, 결정된 상기 영상 패턴과 매칭되는 수화 영상을 상기 메모리에서 검색하여 검색된 수화 영상과 대응된 음성 또는 텍스트를 추출하는 패턴 매칭 및 영상 인식부, 및 추출된 상기 음성 또는 텍스트를 출력하는 음성 출력 수단 또는 디스플레이 수단을 포함할 수 있다.
수화 번역, 패턴 매칭, 영상인식, 음성인식, 카메라, 마이크

Description

수화 번역기 및 그 방법{Sign Language Translator and Method thereof}
　　　　　　　　본 발명은 수화 번역기 및 그 방법에 관한 것으로서, 특히, 청각 장애가 있는 수화자의 수화 동영상에 대하여 패턴 매칭과 영상 인식을 통하여 음성 또는 텍스트로 번역할 수 있으며, 일반인의 음성에 대한 인식을 통하여 수화 동영상 또는 텍스트 형태로 번역하여 출력함으로써, 일반인과 청각 장애인 간에 효과적으로 의사 소통이 가능하도록 한 수화 번역기 및 그 방법에 관한 것이다.
현재 우리나라에만 35만명 이상의 청각 장애인이 있는 것으로 추산되며, 전세계적으로 각 국에는 많은 청각 장애인이 있으나, 청각 장애인의 의사 소통 수단인 수화를 모르는 일반인이 청각 장애인들과 의사 소통하기에는 많은 어려움이 있다.
특히, 기업이나 공공 기관에 고용된 많은 장애인들이 동료나 상사와 의사 소통의 어려움을 격고 있으며, 수화를 모르는 일반 직장 동료나 상사들로서는 청각 장애인과 의사 소통이 수월하지 않아 업무에 지장을 초래하기도 한다.
따라서, 수화를 모르더라도 청각 장애인과 의사 소통할 수 있는 수단이 절실한 실정이다.
본 발명은 상술한 문제점을 해결하기 위한 것으로서, 본 발명의 목적은 청각 장애가 있는 수화자의 수화 동영상에 대하여 패턴 매칭과 영상 인식을 통하여 음성 또는 텍스트로 번역하여 제공하고, 일반인의 음성에 대한 인식을 통하여 수화 동영상 또는 텍스트 형태로 번역하여 제공할 수 있는 수화 번역기를 제공하며, 핸드폰, PDA 등 소형 휴대 단말에 장착이 용이하도록 하여 언제 어디서나 일반인 또는 청각 장애인이 상호간에 수월하게 의사 소통할 수 있게 한 수화 번역기 및 그 방법을 제공하는 데 있다.
먼저, 본 발명의 특징을 요약하면, 상기의 목적을 달성하기 위한 본 발명의 일면에 따른, 수화 번역기는, 카메라; 수화 영상에 대응되는 음성과 텍스트를 저장하는 메모리; 상기 카메라를 통하여 입력되는 수화 동영상을 소정 단위로 처리하여 영상 패턴을 결정하고, 결정된 상기 영상 패턴과 매칭되는 수화 영상을 상기 메모리에서 검색하여 검색된 수화 영상과 대응된 음성 또는 텍스트를 추출하는 패턴 매칭 및 영상 인식부; 및 추출된 상기 음성 또는 텍스트를 출력하는 음성 출력 수단 또는 디스플레이 수단을 포함한다.
상기 수화 번역기는 마이크, 및 상기 마이크를 통하여 입력되는 음성 데이터를 소정 단위로 처리하여 음성 패턴을 결정하고, 결정된 상기 음성 패턴과 매칭되는 음성을 상기 메모리에서 검색하여 검색된 음성과 대응된 영상 또는 텍스트를 추 출하는 음성 인식부를 더 포함한다.
상기 메모리는, 상기 수화 영상에 대응되는 적어도 하나 이상의 외국의 음성과 텍스트를 더 저장할 수 있으며, 외국어 선택이 있는 경우에, 상기 패턴 매칭 및 영상 인식부는 해당 외국어의 음성 또는 텍스트를 추출하고, 상기 음성 인식부는 해당 외국어의 텍스트를 추출할 수도 있다.
본 발명의 다른 일면에 따른, 수화 번역기는, 입력되는 수화 동영상을 분석하여 상기 수화 동영상에 대응된 음성 또는 텍스트를 추출하는 제1 수단을 이용하여, 수화자에 대한 동영상으로부터 음성 또는 텍스트를 출력하여 일반인이 수화자의 의사를 이해할 수 있게 하는 것을 특징으로 한다.
상기 수화 번역기는, 입력되는 음성을 분석하여 상기 입력된 음성에 대응된 영상 또는 텍스트를 추출하는 제2 수단을 더 이용하여, 일반인의 음성이 수화자에게 동영상 또는 텍스트로 전달되어 수화자가 일반인의 의사를 이해할 수 있게 하는 것을 특징으로 한다.
본 발명의 또 다른 일면에 따른, 수화 번역 방법은, 입력되는 수화 동영상을 분석하여 상기 수화 동영상에 대응된 음성 또는 텍스트를 추출하는 단계를 포함하여, 수화자에 대한 동영상으로부터 음성 또는 텍스트를 출력하여 일반인이 수화자의 의사를 이해할 수 있게 하는 것을 특징으로 한다.
상기 수화 번역 방법은, 입력되는 음성을 분석하여 상기 입력된 음성에 대응된 영상 또는 텍스트를 추출하는 단계를 더 포함하고, 일반인의 음성이 수화자에게 동영상 또는 텍스트로 전달되어 수화자가 일반인의 의사를 이해할 수 있게 하는 것 을 특징으로 한다.
상술한 바와 같이, 본 발명에 따른 수화 번역기 및 그 방법에 따르면, 핸드폰, PDA 등 소형 휴대 단말에 장착되어, 수화자의 수화 동영상을 음성 또는 텍스트로 번역하여 제공하고, 일반인의 음성을 수화 동영상 또는 텍스트 형태로 번역하여 제공 함으로써, 언제 어디서나 일반인 또는 청각 장애인이 상호간에 수월하게 의사 소통할 수 있고, 장애인 복지 향상에 기여할 수 있다.
　　　　　　　　본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로써, 본 발명을 상세히 설명한다.
도 1은 본 발명의 일실시예에 따른 수화 번역기(100)의 블록도이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 수화 번역기(100)는, 제어부(110), 메모리(120), 웹카메라(130), 마이크(140), 패턴 매칭 및 영상 인식부(150), 음성 인식부(160), 디스플레이부(170), 및 음성 출력부(180)를 포함한다.
제어부(110)는 위와 같은 수화 번역기(100)의 구성 요소들의 전반적인 제어를 담당하는 프로세서에 해당하고, 위와 같은 구성 요소들의 일부 또는 전부를 포함하도록 구성할 수도 있다.
메모리(120)는 수화 영상과 그에 대응되는 음성과 텍스트를 저장하고, 필요에 따라서는 다국어(다수의 외국어) 처리를 위하여 수화 영상에 대응되는 적어도 하나 이상의 외국의 음성과 텍스트를 더 저장할 수도 있다. 여기서 저장되는 영상은 소정의 노이즈 필터링으로 최적화된 데이터를 OCR(Optical Character Reader)을 이용하여 저장된 데이터일 수 있다.
웹카메라(130)는 수화자를 촬영하여 수화 동영상(데이터)를 생성하기 위한 것으로서, 웹 카메라를 예시하였으나, 이에 한정되는 것은 아니며, CCD 카메라나 CMOS 카메라 또는 사용되는 장소에 따라서는 CCTV용 카메라나 디지털카메라 등이 이에 해당할 수도 있다. 수화 번역기(100)가 휴대 전화기, PDA(Personal Digital Assistant) 등 소형 휴대 단말에 장착되는 경우에는 해당 단말의 기능을 지원하기 위한 CCD 카메라나 CMOS 카메라 등과 공용으로 사용될 수도 있다.
마이크(140)는 마이크로폰(micro phone)을 의미하고, 수신되는 음성을 아날로그 또는 디지털 형태의 음성 데이터로 변환할 수 있다.
디스플레이부(170)는 수화자나 일반인이 의사 소통에 필요한 동영상 또는 텍스트 등을 볼수 있도록 표시하기 위한 수단으로서, LCD(Liquid Crystal Display), 또는CRT 모니터일 수 있고, 또는 소형 휴대 단말에 장착되는 경우에는 터치 스크린 등일 수도 있다. 음성 출력부(180)는 수화자나 일반인이 의사 소통에 필요한 음성을 들을 수 있게 출력하기 위한 수단으로서, 스피커 등이 이에 한다. 이외에도, 수화 번역기(100)에는 디스플레이부(170)에 표시되는 메뉴의 선택을 위한 키나 버튼, 예를 들어, 국어, 외국어 등 언어의 선택, 또는 수화 매칭 모드/음성 매칭 모드의 선택 등을 위한 키나 버튼 등이 구비될 수 있다.
패턴 매칭 및 영상 인식부(150)은 본 발명의 일실시예에 따른 수화 매칭 모드를 위한 수단으로서, 카메라(130)를 통하여 입력되는 수화 동영상을 소정 단위, 예를 들어, 비디오 프레임 단위로 처리하여 영상 패턴을 결정하고, 결정된 상기 영상 패턴과 매칭되는 수화 영상을 메모리(120)에서 검색하여 검색된 수화 영상과 대응된 음성 또는 텍스트를 추출할 수 있다. 이에 따라, 추출된 해당 음성을 음성 출력부(180)에서 출력할 수 있으며, 또는 추출된 해당 텍스트를 디스플레이부(170)에서 표시할 수 있다.
음성 인식부(160)는 본 발명의 일실시예에 따른 음성 매칭 모드를 위한 수단으로서, 마이크(140)를 통하여 입력되는 음성 데이터를 소정 단위, 예를 들어, 오디오 프레임 단위로 처리하여 음성 패턴을 결정하고, 결정된 상기 음성 패턴과 매칭되는 음성을 메모리(120)에서 검색하여 검색된 음성과 대응된 영상 또는 텍스트를 추출할 수 있다. 이에 따라, 추출된 해당 영상이나 텍스트를 디스플레이부(170)에서 표시할 수 있다.
이때, 소정의 키나 버튼을 이용하여 한국어 이외의 외국어를 선택할 수 있으며, 미국, 일본, 프랑스 등 외국어 선택이 있는 경우에, 패턴 매칭 및 영상 인식부(150)는 해당 외국어의 음성 또는 텍스트를 추출하여 해당 언어로 음성 또는 텍스트가 출력되도록 할 수 있으며, 음성 인식부(160)는 해당 외국어의 텍스트를 추출함으로써, 해당 언어로 텍스트가 출력되도록 할 수도 있다.
도 2는 본 발명의 일실시예에 따른 수화 번역기가 수화 동영상을 음성 또는 텍스트로 번역하는 과정(수화 매칭 모드)을 설명하기 위한 흐름도이다.
도 2의 과정은 수화 매칭 모드에서, 패턴 매칭 및 영상 인식부(150)를 통하여 카메라(130)로부터 입력되는 수화 동영상을 분석하여 해당 수화 동영상에 대응된 음성 또는 텍스트를 추출함으로써, 수화자에 대한 동영상으로부터 음성 또는 텍스트를 디스플레이부(170) 또는 음성 출력부(180)로 출력하여 일반인이 수화자의 의사를 이해할 수 있게 하는 과정을 수행한다.
먼저, 수화자와 대화하기 위한 일반인은 카메라(130)를 이용하여 도 4의 오른쪽 영상과 같이 수화자의 손의 움직임이 포함되는 수화 동영상을 촬영한다(S210). 일반인은 소형 휴대 단말의 카메라나 디지털 카메라 등 해당 동영상 데이터를 생성할 수 있는 촬영 수단을 이용할 수 있다.
이에 따라, 패턴 매칭 및 영상 인식부(150)는 카메라(130)를 통하여 입력되는 수화 동영상을 소정 단위, 예를 들어, 비디오 프레임 단위로 처리하여 영상 패턴을 결정할 수 있다(S220). 비디오 프레임은 보통 1분에 50, 60 등의 프레임으로 이루어질 수 있으며, 경우에 따라서는 해당도에 따라 다른 프레임의 수를 가질 수도 있다.
패턴 매칭 및 영상 인식부(150)는 위와 같이 비디오 프레임 단위로 결정된 영상 패턴과 매칭되는 수화 영상을 메모리(120)에서 검색할 수 있다(S230). 패턴 매칭 및 영상 인식부(150)는 메모리(120)에 저장된 영상과 비교하면서 가장 유사한 수화 동작을 가지는 영상을 메모리(120)에서 찾을 수 있다. 이때 매칭의 정확도를 위하여 에지 검출 알고리즘이나 영상의 분할 및 병합 알고리즘 등 다양한 알고리즘 이 수행될 수 있다.
패턴 매칭 및 영상 인식부(150)가 입력 영상에 대하여 메모리(120)로부터 가장 유사한 수화 동작을 가지는 영상을 검색하면, 해당 검색된 수화 영상과 대응된 음성 또는 텍스트를 메모리(120)로부터 추출할 수 있다(S240). 이와 같이 추출된 음성 또는 텍스트는 디스플레이부(170) 또는 음성 출력부(180)에서 출력하여 일반인이 수화자의 의사를 이해할 수 있도록 한다.
이와 같은 수화 매칭 모드 과정은 종료 시까지 입력 동영상에 대하여 다음 프레임으로 넘어가면서 지속적으로 수행될 수 있다(S250).
도 3은 본 발명의 일실시예에 따른 수화 번역기가 음성을 수화 동영상 또는 텍스트로 번역하는 과정(음성 매칭 모드)을 설명하기 위한 흐름도이다.
도 3의 과정은 음성 매칭 모드에서, 음성 인식부(160)를 통하여 마이크(140)로부터 입력되는 음성을 분석하여 해당 음성에 대응된 영상 또는 텍스트를 추출함으로써, 일반인의 음성을 디스플레이부(170)로 출력하여 수화자에게 동영상 또는 텍스트로 전달되어 수화자가 일반인의 의사를 이해할 수 있게 하는 과정을 수행한다.
먼저, 수화자와 대화하기 위한 일반인은 마이크(140)를 이용하여 수화자에게 전달하고 싶은 내용을 음성으로 표현한다(S310).
이에 따라, 음성 인식부(160)는 마이크(140)를 통하여 입력되는 음성 데이터를 소정 단위, 예를 들어, 오디오 프레임 단위로 처리하여 해당 음성 패턴을 결정할 수 있다(S320). 오디오 프레임은 보통 1초에 수 프레임으로 이루어질 수 있으 며, 비트율에 따라 다양한 프레임으로 구성될 수 있다.
음성 인식부(160)는 위와 같이 오디오 프레임 단위로 결정된 음성 패턴과 매칭되는 음성을 메모리(120)에서 검색할 수 있다(S330). 음성 인식부(160)는 메모리(120)에 저장된 음성과 비교하면서 가장 유사한 소리를 출력하는 음성을 메모리(120)에서 찾을 수 있다. 이때 음성 인식의 정확도를 위하여 특칭 추출 알고리즘이나 블록 매칭 알고리즘 등 다양한 알고리즘이 수행될 수 있다.
음성 인식부(160)가 입력 음성에 대하여 메모리(120)로부터 가장 유사한 소리를 출력하는 음성을 검색하면, 해당 검색된 음성과 대응된 영상 또는 텍스트를 메모리(120)로부터 추출할 수 있다(S340). 이와 같이 추출된 영상 또는 텍스트는 디스플레이부(170)에서 도 4의 왼쪽과 같이 수화 동영상 또는 텍스트로 출력하여 일반인의 음성 표현을 수화자가 이해할 수 있게 할 수 있다.
이와 같은 음성 매칭 모드 과정은 종료 시까지 입력 음성에 대하여 다음 프레임으로 넘어가면서 지속적으로 수행될 수 있다(S350).
이상에서와 같이 도면과 명세서에서 최적 실시예가 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
도 1은 본 발명의 일실시예에 따른 수화 번역기의 블록도이다.
도 2는 본 발명의 일실시예에 따른 수화 번역기가 수화 동영상을 음성 또는 텍스트로 번역하는 과정(수화 매칭 모드)을 설명하기 위한 흐름도이다.
도 3은 본 발명의 일실시예에 따른 수화 번역기가 음성을 수화 동영상 또는 텍스트로 번역하는 과정(음성 매칭 모드)을 설명하기 위한 흐름도이다.
도 4는 본 발명의 일실시예에 따른 수화 매칭 모드와 음성 매칭 모드에 대한 디스플레이 결과의 일례이다.

Claims (8)

  1. 수화 영상에 대응되는 음성과 텍스트를 저장하는 메모리;
    카메라를 통하여 입력되는 수화 동영상을 소정 단위로 처리하여 영상 패턴을 결정하고, 결정된 상기 영상 패턴과 매칭되는 수화 영상을 상기 메모리에서 검색하여 검색된 수화 영상과 대응된 음성 또는 텍스트를 추출하는 패턴 매칭 및 영상 인식부; 및
    추출된 상기 음성 또는 텍스트를 출력하는 음성 출력 수단 또는 디스플레이 수단을 포함하는 것을 특징으로 하는 수화 번역기.
  2. 제1항에 있어서,
    상기 수화 동영상을 생성하는 카메라
    를 더 포함하는 것을 특징으로 하는 수화 번역기.
  3. 제1항에 있어서,
    마이크, 및
    상기 마이크를 통하여 입력되는 음성 데이터를 소정 단위로 처리하여 음성 패턴을 결정하고, 결정된 상기 음성 패턴과 매칭되는 음성을 상기 메모리에서 검색하여 검색된 음성과 대응된 영상 또는 텍스트를 추출하는 음성 인식부
    를 더 포함하는 것을 특징으로 하는 수화 번역기.
  4. 제1항 또는 제3항에 있어서, 상기 메모리는,
    상기 수화 영상에 대응되는 적어도 하나 이상의 외국의 음성과 텍스트를 더 저장하며,
    외국어 선택이 있는 경우에,
    상기 패턴 매칭 및 영상 인식부는 해당 외국어의 음성 또는 텍스트를 추출하고, 상기 음성 인식부는 해당 외국어의 텍스트를 추출하는 것을 특징으로 하는 수화 번역기.
  5. 입력되는 수화 동영상을 분석하여 상기 수화 동영상에 대응된 음성 또는 텍스트를 추출하는 제1 수단을 이용하여,
    수화자에 대한 동영상으로부터 음성 또는 텍스트를 출력하여 일반인이 수화자의 의사를 이해할 수 있게 하는 것을 특징으로 하는 수화 번역기.
  6. 제5항에 있어서,
    입력되는 음성을 분석하여 상기 입력된 음성에 대응된 영상 또는 텍스트를 추출하는 제2 수단을 더 이용하여,
    일반인의 음성이 수화자에게 동영상 또는 텍스트로 전달되어 수화자가 일반인의 의사를 이해할 수 있게 하는 것을 특징으로 하는 수화 번역기.
  7. 입력되는 수화 동영상을 분석하여 상기 수화 동영상에 대응된 음성 또는 텍스트를 추출하는 단계를 포함하여,
    수화자에 대한 동영상으로부터 음성 또는 텍스트를 출력하여 일반인이 수화자의 의사를 이해할 수 있게 하는 것을 특징으로 하는 수화 번역 방법.
  8. 제7항에 있어서,
    입력되는 음성을 분석하여 상기 입력된 음성에 대응된 영상 또는 텍스트를 추출하는 단계를 더 포함하고,
    일반인의 음성이 수화자에게 동영상 또는 텍스트로 전달되어 수화자가 일반인의 의사를 이해할 수 있게 하는 것을 특징으로 하는 수화 번역 방법.
KR1020080085809A 2008-09-01 2008-09-01 수화 번역기 및 그 방법 KR20100026701A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080085809A KR20100026701A (ko) 2008-09-01 2008-09-01 수화 번역기 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080085809A KR20100026701A (ko) 2008-09-01 2008-09-01 수화 번역기 및 그 방법

Publications (1)

Publication Number Publication Date
KR20100026701A true KR20100026701A (ko) 2010-03-10

Family

ID=42178010

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080085809A KR20100026701A (ko) 2008-09-01 2008-09-01 수화 번역기 및 그 방법

Country Status (1)

Country Link
KR (1) KR20100026701A (ko)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101130276B1 (ko) * 2010-03-12 2012-03-26 주식회사 써드아이 수화 통역 시스템 및 방법
KR20170094668A (ko) * 2016-02-11 2017-08-21 한국전자통신연구원 양방향 수화 번역 장치 및 장치가 수행하는 양방향 수화 번역 방법
KR101869304B1 (ko) * 2016-10-21 2018-06-20 주식회사 네오펙트 컴퓨터를 이용한 수화어 인식시스템, 방법 및 인식프로그램
CN109919127A (zh) * 2019-03-20 2019-06-21 邱洵 一种哑语语言转换系统
KR20190121102A (ko) * 2018-04-17 2019-10-25 현대자동차주식회사 장애인을 위한 커뮤니케이션 시스템이 구비된 차량 및 장애인을 위한 커뮤니케이션 시스템 제어방법
KR102098734B1 (ko) 2019-08-06 2020-04-08 전자부품연구원 대화 상대의 외형을 반영한 수어 영상 제공 방법, 장치 및 단말
KR102178174B1 (ko) * 2019-12-09 2020-11-12 김경철 사용자 단말, 방송 장치, 이를 포함하는 방송 시스템 및 그 제어방법
KR102178175B1 (ko) * 2019-12-09 2020-11-12 김경철 사용자 단말 및 그 제어방법
KR102178176B1 (ko) * 2019-12-09 2020-11-12 김경철 사용자 단말, 화상 통화 장치, 화상 통화 시스템 및 그 제어방법
KR20210018028A (ko) 2019-08-05 2021-02-17 금오공과대학교 산학협력단 손동작 및 팔동작 학습기반 수화 번역 시스템 및 방법
KR102644927B1 (ko) * 2023-10-10 2024-03-06 한규범 수어 통역 서비스를 제공하는 온라인 다방향 소통 시스템

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101130276B1 (ko) * 2010-03-12 2012-03-26 주식회사 써드아이 수화 통역 시스템 및 방법
KR20170094668A (ko) * 2016-02-11 2017-08-21 한국전자통신연구원 양방향 수화 번역 장치 및 장치가 수행하는 양방향 수화 번역 방법
KR101869304B1 (ko) * 2016-10-21 2018-06-20 주식회사 네오펙트 컴퓨터를 이용한 수화어 인식시스템, 방법 및 인식프로그램
KR20190121102A (ko) * 2018-04-17 2019-10-25 현대자동차주식회사 장애인을 위한 커뮤니케이션 시스템이 구비된 차량 및 장애인을 위한 커뮤니케이션 시스템 제어방법
CN110390239A (zh) * 2018-04-17 2019-10-29 现代自动车株式会社 包括用于残疾人的通信系统的车辆及通信系统的控制方法
CN109919127A (zh) * 2019-03-20 2019-06-21 邱洵 一种哑语语言转换系统
CN109919127B (zh) * 2019-03-20 2021-12-17 胡海明 一种哑语语言转换系统
KR20210018028A (ko) 2019-08-05 2021-02-17 금오공과대학교 산학협력단 손동작 및 팔동작 학습기반 수화 번역 시스템 및 방법
KR102098734B1 (ko) 2019-08-06 2020-04-08 전자부품연구원 대화 상대의 외형을 반영한 수어 영상 제공 방법, 장치 및 단말
US11482134B2 (en) 2019-08-06 2022-10-25 Korea Electronics Technology Institute Method, apparatus, and terminal for providing sign language video reflecting appearance of conversation partner
WO2021118179A1 (ko) * 2019-12-09 2021-06-17 김경철 사용자 단말, 화상 통화 장치, 화상 통화 시스템 및 그 제어방법
KR102178175B1 (ko) * 2019-12-09 2020-11-12 김경철 사용자 단말 및 그 제어방법
WO2021118184A1 (ko) * 2019-12-09 2021-06-17 김경철 사용자 단말 및 그 제어방법
WO2021118180A1 (ko) * 2019-12-09 2021-06-17 김경철 사용자 단말, 방송 장치, 이를 포함하는 방송 시스템 및 그 제어방법
KR102178174B1 (ko) * 2019-12-09 2020-11-12 김경철 사용자 단말, 방송 장치, 이를 포함하는 방송 시스템 및 그 제어방법
CN115066908A (zh) * 2019-12-09 2022-09-16 金京喆 用户终端及其控制方法
KR102178176B1 (ko) * 2019-12-09 2020-11-12 김경철 사용자 단말, 화상 통화 장치, 화상 통화 시스템 및 그 제어방법
US20230015797A1 (en) * 2019-12-09 2023-01-19 Kyung Cheol Kim User terminal and control method therefor
JP2023506186A (ja) * 2019-12-09 2023-02-15 チョル キム、ギョン 使用者端末、ビデオ通話装置、ビデオ通話システム、及びその制御方法
JP2023506468A (ja) * 2019-12-09 2023-02-16 チョル キム、ギョン 使用者端末、放送装置、それを含む放送システム、及びその制御方法
JP2023506469A (ja) * 2019-12-09 2023-02-16 チョル キム、ギョン 使用者端末、及びその制御方法
KR102644927B1 (ko) * 2023-10-10 2024-03-06 한규범 수어 통역 서비스를 제공하는 온라인 다방향 소통 시스템

Similar Documents

Publication Publication Date Title
KR20100026701A (ko) 수화 번역기 및 그 방법
US10943158B2 (en) Translation and display of text in picture
US10176366B1 (en) Video relay service, communication system, and related methods for performing artificial intelligence sign language translation services in a video relay service environment
US20130079061A1 (en) Hand-held communication aid for individuals with auditory, speech and visual impairments
CN110781813B (zh) 图像识别方法及装置、电子设备和存储介质
KR100678201B1 (ko) 휴대단말기에서 메인언어를 설정하는 방법
CN108538284A (zh) 同声翻译结果的展现方法及装置、同声翻译方法及装置
CN116129931B (zh) 一种视听结合的语音分离模型搭建方法及语音分离方法
CN111640452B (zh) 一种数据处理方法、装置和用于数据处理的装置
CN112133295B (zh) 语音识别方法、装置及存储介质
CN113239707A (zh) 文本翻译方法、文本翻译装置及存储介质
CN111538998A (zh) 文本定密方法和装置、电子设备及计算机可读存储介质
JP2014149571A (ja) コンテンツ検索装置
KR20150060348A (ko) 장애인 사이의 의사소통 장치 및 방법
KR20110066628A (ko) 독순술을 이용한 휴대전화용 문자 입력 장치 및 방법
CN105913841B (zh) 语音识别方法、装置及终端
JP6401488B2 (ja) 外国語会話理解支援装置、外国語会話理解支援方法及びプログラム
CN111507115B (zh) 多模态语言信息人工智能翻译方法、系统和设备
JP2017134162A (ja) 音声認識装置、音声認識方法、及び音声認識プログラム
KR100703383B1 (ko) 휴대용 단말기의 전자사전서비스 방법
KR101364844B1 (ko) 화상통화기능을 갖는 이동통신단말기 및 그 제어방법
CN109284510B (zh) 一种文本处理方法、系统和一种用于文本处理的装置
KR20080034248A (ko) 휴대 단말기에서 얼굴인식을 통한 사진 검색 방법
JP2019080134A (ja) ドアホン親機および通知方法
EP3035207A1 (en) Speech translation device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application