KR100819251B1 - 방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법 - Google Patents

방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법 Download PDF

Info

Publication number
KR100819251B1
KR100819251B1 KR1020050008624A KR20050008624A KR100819251B1 KR 100819251 B1 KR100819251 B1 KR 100819251B1 KR 1020050008624 A KR1020050008624 A KR 1020050008624A KR 20050008624 A KR20050008624 A KR 20050008624A KR 100819251 B1 KR100819251 B1 KR 100819251B1
Authority
KR
South Korea
Prior art keywords
sign language
data
avatar
metadata
motion
Prior art date
Application number
KR1020050008624A
Other languages
English (en)
Other versions
KR20060087793A (ko
Inventor
김관래
박정록
최정석
심창섭
오윤제
고준호
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020050008624A priority Critical patent/KR100819251B1/ko
Priority to US11/331,989 priority patent/US20060174315A1/en
Priority to JP2006018662A priority patent/JP2006215553A/ja
Publication of KR20060087793A publication Critical patent/KR20060087793A/ko
Application granted granted Critical
Publication of KR100819251B1 publication Critical patent/KR100819251B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/02—Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00—Teaching, or communicating with, the blind, deaf or mute
    • G09B21/009—Teaching or communicating with deaf persons
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors

Abstract

본 발명은 멀티미디어 데이터를 송수신하는 송수신기를 구비하는 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 시스템에 관한 것이다.
상기 수화 비디오 데이터를 제공하는 시스템은 상기 멀티미디어 데이터에서 수화를 적용할 데이터를 추출하여 수화 동작 데이터로 전환하고 상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마로 변환하여 상기 수화 아바타 동작 스키마를 수화 메타 데이터로 전환하며 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 다중화하여 수신기로 전송하는 송신기를 포함한다. 그리고 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 수신하여 역다중화하고 상기 수화 메타 데이터를 사용하여 수화 아바타 동작 스키마를 추출하고 상기 수화 아바타 동작 스키마를 통해 수화 아바타의 동작을 제어하며 수화 비디오 데이터를 생성하고 상기 수화 비디오 데이터와 상기 멀티미디어 데이터를 다중화하고 이를 디스플레이 장치로 전송하는 수신기를 포함한다.
Figure R1020050008624
수화 아바타, 수화 데이터베이스, 수화 적응 엔진, 수화 동작 제어기, 멀티미디어 데이터

Description

방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 시스템 및 방법{SYSTEM AND METHOD FOR PROVIDING SIGN LANGUAGE VIDEO DATA IN A BROADCASTING AND TELECOMMUNICATION SYSTEM}
도 1은 본 발명의 실시예에 따른 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 송수신기의 구조를 개략적으로 도시한 도면
도 2는 본 발명의 실시예에 따른 수화 적응 엔진 구조를 개략적으로 도시한 도면
도 3은 본 발명의 다른 실시예에 따른 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 수신기의 구조를 개략적으로 도시한 도면
도 4는 본 발명의 실시예에 따른 송신기의 동작 과정을 개략적으로 도시한 순서도
도 5는 본 발명의 실시예에 따른 수신기의 동작 과정을 개략적으로 도시한 순서도
도 6은 본 발명의 다른 실시예에 따른 수신기의 동작 과정을 개략적으로 도시한 순서도
본 발명은 방송 통신 융합 시스템에 관한 것으로서, 특히 멀티미디어 데이터에 수화 아바타를 사용하여 상기 멀티미디어 데이터와 함께 수화 비디오 데이터를 제공하는 시스템에 관한 것이다.
상기 방송과 통신의 융합은 아날로그 기술을 대체하는 디지털 기술발전과 네트워크의 광대역화로부터 확산된다. 디지털 기술은 모든 정보를 디지털화하여 오디오 데이터, 비디오 데이터, 데이터의 구분을 무의미하게 하였다. 아울러 모든 데이터가 하나의 단일 네트워크화 되어 방송 네트워크와 통신 네트워크가 하나로 융합된다. 이와 더불어 상기 방송과 통신이 융합된 망에서의 멀티미디어 데이터의 양은 방송과 통신의 융합으로 인해서 더욱 방대하게 증가하였다.
하지만 상기 방송 통신 융합 시스템에서 상기 멀티미디어 데이터를 사용하는 사용자들 중에서도 특히, 청각 장애인들은 일반인들에 비해서 상기 멀티미디어 데이터를 정확히 수신하고 이를 활용하는데 많은 어려움을 겪고 있다. 이러한 청각 장애인들의 이해를 돕기 위해 상기 멀티미디어 데이터를 제공하는 방송국 등에서는 일부 멀티미디어 데이터에 자막 방송을 내보내는 등의 여러 가지 시도가 이루어지고 있다.
하지만 대부분의 청각 장애인들은 수화를 문자에 비해 훨씬 친근하게 느끼고 잘 이해하는 경향이 있다. 그래서 뉴스 등과 같은 상기 멀티미디어 데이터를 전송 하는 경우 사람이 직접 상기 멀티미디어 데이터에 대응하는 수화를 하여 이를 상기 멀티미디어 데이터와 동시에 전송하였다. 하지만 상기한 방법을 통해서 멀티미디어 데이터를 전송하는 경우, 상기 멀티미디어 데이터마다 모두 일일이 사람이 직접 수화를 해서 전송해야 했다. 상기한 전송 방법으로 인한 한계도 있었으나 이외에도 청각 장애인을 위한 멀티미디어 데이터 전송 방법에는 여러 가지 한계가 있었다.
따라서 상기한 청각 장애인들을 위해서 상기 방송 통신 융합 네트워크에서 멀티미디어 데이터를 전송하는 경우 청각 장애인들에게 수화 아바타 등을 사용하여 수화 비디오 데이터를 제공하는 시스템에 대한 필요성이 있었다.
따라서, 본 발명의 목적은 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 시스템을 제공함에 있다.
본 발명의 다른 목적은 방송 통신 융합 시스템에서 멀티미디어 데이터에 청각 장애인들을 위한 수화 비디오 데이터를 제공하는 시스템을 제공함에 있다.
본 발명의 또 다른 목적은 청각 장애인들에게 수화 아바타 등을 사용하여 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 시스템을 제공함에 있다.
본 발명의 또 다른 목적은 방송 통신 융합 네트워크에서 국외 수화와 자국 수화를 연계하여 수화 비디오 데이터를 제공하는 시스템을 제공함에 있다.
상기한 목적을 달성하기 위한 본 발명의 시스템은; 멀티미디어 데이터를 송수신하는 송수신기를 구비하는 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 시스템에 있어서, 상기 멀티미디어 데이터에서 수화를 적용할 데이터를 추출하여 수화 동작 데이터로 전환하고 상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마로 변환하여 상기 수화 아바타 동작 스키마를 수화 메타 데이터로 전환하며 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 다중화하여 수신기로 전송하는 송신기와, 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 수신하여 역다중화하고 상기 수화 메타 데이터를 사용하여 수화 아바타 동작 스키마를 추출하고 상기 수화 아바타 동작 스키마를 통해 수화 아바타의 동작을 제어하며 수화 비디오 데이터를 생성하고 상기 수화 비디오 데이터와 상기 멀티미디어 데이터를 다중화하고 이를 디스플레이 장치로 전송하는 수신기를 포함함을 특징으로 한다.
상기한 목적을 달성하기 위한 본 발명의 다른 시스템은; 멀티미디어 데이터를 송수신하는 송수신기를 구비하는 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 시스템에 있어서, 상기 멀티미디어 데이터를 수신하여 역다중화하고 상기 멀티미디어 데이터에서 수화를 적용할 데이터를 추출하여 수화 동작 데이터로 변환하고 상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마를 생성하여 상기 수화 아바타 동작 스키마를 통해서 수화 아바타의 동작을 제어하며 수화 비디오 데이터를 생성하고 상기 수화 비디오 데이터와 상기 멀티미디어 데이터를 다중화하고 이를 디스플레이 장치로 전송하는 수신기를 포함함을 특징으로 한다.
상기한 목적을 달성하기 위한 본 발명의 방법은; 멀티미디어 데이터를 송수신하는 송수신기를 구비하는 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 방법에 있어서, 상기 멀티미디어 데이터에서 수화를 적용할 데이터를 추출 하여 수화 동작 데이터로 변환하는 과정과, 상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마로 변환하여 상기 수화 아바타 동작 스키마를 수화 메타 데이터로 전환하는 과정과, 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 다중화하여 수신기로 전송하는 과정과, 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 수신하여 역다중화하는 과정과, 상기 수화 메타 데이터를 사용하여 수화 아바타 동작 스키마를 추출하는 과정과, 상기 수화 아바타 동작 스키마를 통해 수화 아바타의 동작을 제어하며 수화 비디오 데이터를 생성하는 과정과, 상기 수화 비디오 데이터와 상기 멀티미디어 데이터를 다중화하고 이를 디스플레이 장치로 전송하는 과정을 포함함을 특징으로 한다.
상기한 목적을 달성하기 위한 본 발명의 다른 방법은; 멀티미디어 데이터를 송수신하는 송수신기를 구비하는 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 방법에 있어서, 상기 멀티미디어 데이터를 수신하여 역다중화하고 상기 멀티미디어 데이터에서 수화를 적용할 데이터를 추출하여 수화 동작 데이터로 전환하는 과정과, 상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마를 생성하는 과정과, 상기 수화 아바타 동작 스키마를 통해서 수화 아바타의 동작을 제어하며 수화 비디오 데이터를 생성하는 과정과, 상기 수화 비디오 데이터와 상기 멀티미디어 데이터를 다중화하고 이를 디스플레이 장치로 전송하는 과정을 포함함을 특징으로 한다.
이하, 본 발명에 따른 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명에 따른 동작을 이해하는데 필요한 부분만이 설명되며 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
본 발명은 방송 통신 융합 시스템에서 멀티미디어 데이터에 수화를 적용할 데이터를 추출하고 이를 사용하여 수화 아바타 등의 동작을 제어하여 수화 비디오 데이터를 생성하며 이를 상기 멀티미디어 데이터와 동시에 디스플레이 하도록 하는 시스템 및 방법을 제안한다. 하기에 상기 방송 통신 융합 시스템에서 멀티미디어 데이터를 송수신하는 송수신기의 구조를 도 1을 참조하여 설명하기로 한다.
도 1은 본 발명의 실시예에 따른 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 송수신기의 구조를 개략적으로 도시한 도면이다.
상기 도 1을 참조하면, 상기 멀티미디어 데이터를 제공하는 송신기는 인코더(101)와 수화 적용 데이터 추출기(103), 수화 적응 엔진(105), 메타 데이터 생성기(107), 다중화기(109), 및 수화 데이터베이스(111)로 구성된다. 그리고 상기 수신기는 역다중화기(151), 디코더(153), 수화 아바타 동작 파서(155), 수화 아바타 동작 제어기(157), 수화 비디오 데이터 생성기(159) 및 다중화기(161)로 구성된다. 그리고 수화 데이터베이스(163)를 포함하여 수화 데이터베이스를 사용하거나 국외 수화 데이터베이스(165)와도 연동하여 동작을 수행한다.
본 발명의 구성에 따른 바람직한 실시예에 따른 상기 송신기의 동작을 살펴보면 다음과 같다. 상기 송신기에서는 비디오 데이터 및 오디오 데이터로 구성된 상기 멀티미디어 데이터를 각각 상기 인코더(encoder)(101)를 통해서 인코딩(edcoding)을 수행한다. 그리고 상기 수화 적용 데이터 추출기(103)에서는 상기 멀티미디어 데이터에서 수화를 적용하고자 하는 수화 적용 데이터, 예를 들면 오디오 데이터 및 텍스트 데이터를 추출한다. 그래서 상기 오디오 데이터 및 텍스트 데이터를 엠펙(MPEG : Motion Picture Experts Group)-21이 적용되어 있는 수화 적응 엔진(105)으로 출력한다. 여기서 상기 수화 적응 엔진(105)은 상기 엠펙-21 디지털 아이템 적응(Digital Item Adaption: 이하 'DIA'라 칭하기로 한다)의 적응 엔진이다. 그래서 상기 디지털 아이템 적응 엔진은 입력되는 디지털 데이터를 상기 엠펙-21 DIA 적응 엔진을 사용하여 자원(resource)의 적응 및 등급(description) 적응 처리를 수행한다.
그래서 상기 수화 적응 엔진(307)은 상기 수화 데이터베이스(111)와 연동하여 상기 디지털 데이터를 적응 데이터로 변환한다. 여기서 수화 적응 엔진(105)의 구조는 하기에 도 2를 참조하여 설명하기로 한다.
그래서 상기 수화 적응 엔진(105)에서는 상기 오디오 데이터 및 텍스트 데이터 등의 디지털 데이터를 복잡도가 감소한 적응 메타 데이터, 예를 들어 확장 마크업 언어(eXtensible Markup Language, 이하 'XML'라 칭하기로 한다) 등으로 구성된 수화 아바타 동작 스키마를 생성한다. 그래서 상기 수화 적응 엔진(105)에서는 상기 수화 아바타 동작 스키마를 메타 데이터 생성기(107)로 전송한다. 상기 메타 데이터 생성기에서는 상기 수화 아바타 동작 스키마를 메타 데이터 생성기로 생성한다. 이때 상기 메타 데이터는 상기 멀티미디어 데이터와 연관된 수화 아바타의 동 작을 제어하는 수화 아바타 동작 스키마를 포함한다. 그리고 상기 메타 데이터를 상기 멀티미디어 데이터를 인코딩한 상기 멀티미디어 데이터와 다중화하여 이를 방송 통신 네트워크를 통해 상기 수신기로 전송한다.
여기서 상기 수신기는 상기 송신기의 멀티미디어 데이터 및 메타 데이터를 수신하고 이를 역다중화기(151)를 사용하여 상기 멀티미디어 데이터와 메타 데이터를 분리한다.
여기서 상기 멀티미디어 데이터는 디코더(153)에서 디코딩을 수행하여 다중화기(161)로 출력한다. 여기서 상기 메타 데이터는 수화 아바타 동작 파서(155)에 입력되고 상기 수화 아바타 동작 파서(155)에서는 상기 메타 데이터를 해석하여 수화 아바타 동작 스키마를 추출한다. 여기에서도 상기한 엠펙-21 DIA 방식을 재적용하여 상기 수화 아바타 동작 스키마를 해석 및 추출하게 된다. 그리고 상기 수화 아바타 동작 스키마를 수화 아바타 동작 제어기(157)로 출력한다. 상기 수화 아바타 동작 제어기(157)에서는 상기 아바타 동작 스키마를 사용하여 아바타의 동작을 제어하게 된다. 상기 수화 아바타 동작 제어기(157)의 출력을 사용하여 상기 수화 영상 데이터 생성기(159)에서는 디스플레이 장치에서 디스플레이하는 수화 영상 데이터를 생성한다.
또한 상기 수신기에서는 국내 수화인 경우에는 상기 수신기의 구조만으로도 메타 데이터의 형태로 수화 아바타를 제어하는 아바타 동작 스키마를 통해 수화 아바타를 제어한다. 하지만 상기 수신기에서 자국의 수화가 아닌 국외 즉, 타국의 수화 메타 데이터가 수신되는 경우에는 상기 수화 아바타 동작 파서에서는 국내 수화 에 대한 정보를 가지고 있는 수화 데이터베이스(163)와 타국의 수화 데이터베이스(165)를 연동하여 상기 국외 수화 메타 데이터를 국내 수화 메타 데이터로 변환하고 이를 해석하여 국내 수화 아바타 동작 스키마를 생성하여 수화 아바타 동작 제어기(157)에서 제어하는 방법을 확장하여 적용하는 방법도 가능하다.
도 2는 본 발명의 실시예에 따른 수화 적응 엔진 구조를 개략적으로 도시한 도면이다.
상기 도 2를 참조하면, 상기 수화 적응 엔진(105)은 엠펙 21의 DIA가 적용되어 있다. 그리고 상기 수화 적응 엔진은 수화 동작 데이터 변환기(201)와 수화 아바타 동작 스키마 변환기(203)로 구성된다.
이때 상기 수화 적응 엔진(105)은 상기 수화 적용 데이터 추출기(103)에서 추출한 수화를 적용할 데이터, 예를 들면 오디오 데이터나 텍스트 데이터를 입력받는다. 그리고 상기 수화 동작 데이터 변환기(201)에서는 상기 오디오 데이터나 텍스트 데이터를 사용하여 이를 수화 동작 데이터로 전환한다. 예를 들어 '가다'라는 내용의 오디오 데이터나 텍스트 데이터일 경우, 상기 '가다'에 해당하는'오른손을 펴서 앞으로 밀어주는 동작'이 상기 수화 데이터베이스(111) 내부에 소정의 프로세스 과정을 거쳐 수화 동작 데이터의 형태로 저장되어 있다. 그래서 상기 수신한 수화 적용 데이터를 상기 수화 데이터베이스(111) 내부에 저장되어 있는 수화 동작 데이터로 변환한다. 이는 상기 수화 데이터베이스(111)에 수화를 적용할 데이터 즉, 오디오 데이터나 텍스트 데이터에 해당하는 수화 동작 데이터를 저장하고 있으며, 이를 사용하여 상기 수화 동작 데이터로 변환하는 것이다. 그리하여 수화 동작 데이터로 변환된 데이터를 수신한 상기 수화 아바타 동작 스키마 변환기(203)는 각 수화 동작 데이터에 해당하는 수화 아바타 동작 스키마로 변환한다. 상기 수화 데이터베이스(111)는 상기 수화 동작 데이터에 해당하는 수화 아바타 동작을 위한 수화 아바타 동작 스키마를 가지고 있다. 또한 여기서 상기 수화 아바타 동작 탬플릿의 경우 상기 XML 등의 언어로 표현될 수 있다. 상기 수화 아바타 동작 스키마는 수화 아바타 동작을 위한 데이터이며 상기 수신기에서는 이를 사용하여 수화 아바타의 동작을 제어한다. 상기 수화 적응 엔진(105) 상기 수화 적용 데이터를 각 수화 동작 데이터로 변환하고 이를 다시 수화 아바타 동작 스키마로 변환하는 과정은 MPEG-21을 사용한 것이다. 그러면 여기서 다른 실시예에 따른 수신기의 구조를 하기에 도 3을 참조하여 설명하기로 한다. 또한 상기 수화 적응 엔진이 수신측에 사용되는 경우에는 수신하는 멀티미디어 데이터의 특성에 따라서 국외의 데이터베이스 등과 연동하여 국내 아바타 동작 스키마를 생성하여 국내 아바타 동작을 제어한다.
도 3은 본 발명의 실시예에 따른 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 수신기의 구조를 개략적으로 도시한 도면이다.
상기 도 3을 참조하면, 수화 비디오 데이터를 제공하는 수신기의 구조를 도시하고 있으며 여기서 상기 수신기에 수신되는 멀티미디어 데이터를 생성하는 송신기의 구조는 일반적인 멀티미디어 데이터를 송신하는 송신기를 사용하므로 하기에 그 구조 및 설명은 생략하기로 한다.
상기 송신기로부터 멀티미디어 데이터를 수신하는 상기 수신기는 역다중화기 (301), 디코더(303), 수화 적용 데이터 추출기(305), 수화 적응 엔진(307), 수화 아바타 동작 제어기(309), 수화 영상 데이터 생성기(311) 및 다중화기(313)로 구성된다. 그리고 수화 데이터베이스(163)를 포함하여 수화 데이터베이스를 사용하거나 국외 수화 데이터베이스(165)와도 연동하여 동작을 수행한다.
상기 멀티미디어 데이터를 송신하는 송신기로부터 상기 멀티미디어 데이터를 수신한 수신기의 역다중화기(301)에서는 상기 수신한 멀티미디어 데이터를 역다중화한다. 이때 상기 디코더(303)는 상기 역다중화를 수행한 멀티미디어 데이터를 수신하여 상기 멀티미디어 데이터를 디코딩한다. 그래서 상기 디코더(303)는 상기 멀티미디어 데이터를 수신하고 이를 디코딩하여 다중화기(313)로 출력한다.
그리고 상기 역다중화기(301)의 멀티미디어 데이터를 수화 적용 데이터 추출기(305)는 수화 적용을 위해서 상기 멀티미디어 데이터 중의 일부 데이터를 추출한다. 이때 상기 멀티미디어 데이터의 오디오 데이터나 멀티미디어 데이터 등이 될 수 있다. 그리고 상기 수화 적용 데이터 추출기(307)에서는 상기 멀티미디어 데이터에서 수화를 적용하고자 하는 수화 적용 데이터, 예를 들면 오디오 데이터 및 텍스트 데이터를 추출한다. 그래서 상기 오디오 데이터 및 텍스트 데이터를 엠펙-21이 적용되어 있는 수화 적응 엔진(309)으로 출력한다. 여기서 상기 수화 적응 엔진(307)은 상기 엠펙-21 DIA의 적응 엔진이다. 그래서 상기 디지털 아이템 적응 엔진은 입력되는 디지털 데이터를 상기 적응 엔진을 사용하여 자원(resource)의 적응 및 등급(description) 적응 처리를 수행한다.
그래서 상기 수화 적응 엔진(307)은 상기 수화 데이터베이스(315)와 연동하 여 상기 디지털 데이터를 적응 데이터로 변환한다.
그래서 상기 수화 적응 엔진(309)에서는 상기 오디오 데이터 및 텍스트 데이터 등의 디지털 데이터를 복잡도가 감소한 적응 메타 데이터, 예를 들어 확장 마크업 언어(eXtensible Markup Language, 이하 'XML'라 칭하기로 한다)로 구성된 수화 아바타 동작 스키마를 생성한다.
여기서 상기 수화 적응 엔진(307)은 상기 도 2와 같은 구성을 가지며 상기한 바와 같이 엠펙-21 방식을 사용하여 상기 수화 아바타 동작 스키마를 생성하므로 그 구체적인 구성 및 동작에 대한 설명은 생략하기로 한다.
또한 상기 수화 적응 엔진(309)은 상기 도 1에서 서술한 송신기의 신호를 수신하는 것도 가능하다. 그리고 상기 수화 적응 엔진(309)은 상기 수화 아바타 동작 파서(155)의 기능을 포함할 수 있다. 그래서 상기 입력되는 멀티미디어 데이터가 국외의 멀티미디어 데이터여서 수화 아바타 동작 탬플릿을 포함하는 메타 데이터일 경우에는 국내 수화로 전환하기 위해서 상기 국외 수화 데이터베이스(317)와 연동하여 동작함으로서 국내의의 수화 아바타 스키마로 변환한다. 그리고 상기 수화 적응 엔진(307)에서는 수화 아바타 동작 스키마를 생성하고 이를 상기 수화 아바타 동작 제어기(311)로 출력한다. 상기 수화 아바타 동작 제어기(157)에서는 상기 아바타 동작 스키마를 입력받고 이를 사용하여 아바타의 동작을 제어하게 된다. 상기 수화 아바타 동작 제어기(157)의 출력을 사용하여 상기 수화 영상 데이터 생성기(159)에서는 디스플레이 장치에서 디스플레이하는 수화 영상 데이터를 생성한다.
그러면 여기서 상기 수화 비디오 데이터를 제공하는 송신기의 동작을 하기에 도면을 참조하여 설명하기로 한다.
도 4는 본 발명의 실시예에 따른 송신기의 동작 과정을 개략적으로 도시한 순서도이다.
상기 도 4를 참조하면, 멀티미디어 데이터에서 수화를 적용하고자 하는 수화 적용 데이터, 예를 들면 오디오 데이터 및 텍스트 데이터를 추출한다(401단계). 다음으로 상기 추출된 수화 적용 데이터를 수화 동작 데이터로 변환한다(403단계). 여기서 상기 수화 동작 데이터는 각 멀티미디어 데이터를 수화 아바타의 동작을 제어하기 위한 수화 동작을 사전에 데이터의 형태로 전환하여 저장한 데이터이다. 이후에 상기 수화 동작 데이터를 수화 아바타 동작 스키마로 전환하게 된다(405단계). 여기서 상기 수화 적용 데이터를 수화 동작 데이터로 변환한 뒤에 이를 수화 아바타의 동작 제어를 위해서 수화 아바타 동작 스키마로 전환하는 것이다. 이때 상기 수화 동작 데이터로 변환하고 수화 아바타 동작 스키마로 전환하는 과정은 상기 엠펙-21 DIA를 사용하여 적응 처리한다. 그리고 여기서 상기 아바타 동작 스키마는 예를 들어 XML 등으로 구성된 수화 아바타 동작 스키마가 생성된다. 그리고 상기 아바타 동작 스키마로 전환한 데이터를 메타 데이터로 생성한다(407단계). 이때 상기 메타 데이터는 상기 멀티미디어 데이터와 연관된 수화 아바타의 동작을 제어하는 수화 아바타 동작 스키마를 포함한다. 그리고 상기 메타 데이터를 인코딩을 수행한 멀티미디어 데이터와 함께 다중화하여 수신측, 즉 수신기로 전송하는 것이다. 그러면 여기서 상기 수화 메타 데이터와 멀티미디어 데이터를 수신하는 수신측의 동작을 하기에 도 5를 참조하여 살펴보기로 한다.
도 5는 본 발명의 실시예에 따른 수신기의 동작 과정을 개략적으로 도시한 순서도이다.
상기 도 5를 참조하면, 상기 메타 데이터와 멀티미디어 데이터를 수신하고 이를 역다중화 하여 상기 멀티미디어 데이터 중에서 메타 데이터를 분리한다(501단계). 그래서 상기 메타 데이터를 분리하면 상기 메타 데이터에서 아바타 동작 스키마를 추출해 낸다(503단계). 여기서 상기 아바타 동작 스키마는 송신측에서 엠펙 21 DIA를 사용하여 생성한 아바타 동작 스키마이므로 수신측에서도 상기 엠펙-21 DIA 방식을 사용하여 상기 아바타 동작 스키마를 해석하고 이를 추출하는 것이다. 그래서 상기 아바타 동작 스키마를 사용하여 수화 아바타의 동작을 제어하게 된다(505단계). 다음으로 상기 아바타 동작 제어를 통해서 상기 아바타를 사용하여 디스플레이를 위한 수화 영상 데이터를 생성한다(507단계). 여기서 상기 수화 영상 데이터를 생성한 이후에는 상기 수화 영상 데이터와 멀티미디어 데이터를 다중화한다(509단계). 다음으로 상기 다중화된 수화 영상 데이터를 디스플레이 장치로 전송한다(511단계). 그리하면 상기 멀티미디어 데이터와 수화 영상 데이터를 수신한 디스플레이 장치에서는 상기 멀티미디어 데이터와 수화 영상 데이터를 동시에 디스플레이를 수행하게 된다. 그리고 상기 메타 데이터가 국외 수화인 경우에는 상기 메타 데이터를 국외 수화 데이터베이스와 국내 수화 데이터베이스를 추가로 구성하고 있는 경우에는 상기 두 개의 데이터베이스를 연동하여 국내의 메타 데이터로 변환한다. 또한 상기 메타 데이터로부터 다시 국내의 수화 아바타 동작 스키마를 추출하는 방법을 추가 적용하는 것도 가능하다.
도 6은 본 발명의 다른 실시예에 따른 수신기의 동작 과정을 개략적으로 도시한 순서도이다.
상기 도 6을 참조하면, 멀티미디어 데이터를 수신하면 상기 멀티미디어 데이터에서 상기 수화 적용 데이터를 추출한다(601단계). 여기서도 상기 수화 적용 데이터, 예를 들면 오디오 데이터 및 텍스트 데이터 등이 될 수 있다. 다음으로 상기 추출된 수화 적용 데이터를 수화 동작 데이터로 변환한다(603단계). 여기서 상기 수화 동작 데이터는 각 멀티미디어 데이터를 수화 아바타의 동작을 제어하기 위한 수화 동작을 사전에 데이터의 형태로 전환하여 저장한 데이터이다. 이후에 상기 수화 동작 데이터를 수화 아바타 동작 스키마로 전환하게 된다(605단계). 여기서 상기 수화 적용 데이터를 수화 동작 데이터로 변환한 뒤에 이를 수화 아바타의 동작 제어를 위해서 수화 아바타 동작 스키마로 전환하는 것이다. 이때 상기 수화 동작 데이터로 변환하고 수화 아바타 동작 스키마로 전환하는 과정은 상기 엠펙-21 DIA를 사용하여 적응 처리한다. 그리고 여기서 상기 아바타 동작 스키마는 예를 들어 XML 등으로 구성된 수화 아바타 동작 스키마가 생성된다. 이때 생성된 상기 수화 아바타 동작 스키마를 사용하여 수화 아바타의 동작을 제어하게 된다(607단계). 다음으로 상기 수화 아바타 동작 제어를 통해서 상기 아바타를 사용하여 디스플레이를 위한 수화 영상 데이터를 생성한다(609단계). 여기서 상기 수화 영상 데이터를 생성한 이후에는 상기 수화 영상 데이터와 멀티미디어 데이터를 다중화한다(611단계). 다음으로 상기 다중화된 수화 영상 데이터를 디스플레이 장치로 전송한다(613단계). 그리하면 상기 멀티미디어 데이터와 수화 영상 데이터를 수신한 디스플레이 장치에서는 상기 멀티미디어 데이터와 수화 영상 데이터를 동시에 디스플레이를 수행하게 된다. 여기에서도 상기 수신한 데이터가 멀티미디어 데이터가 국외의 멀티미디어 데이터인 경우에는 수화 데이터베이스를 국외의 수화 데이터와 연동하여 동작하도록 제어하여 국외 수화 데이터베이스와 연동하여 국내 아바타 동작 스키마를 생성하여 국내 수화 아바타 동작을 제어하는 방법을 적용하는 것이 가능하다. 본 발명에서 상술한 국외 수화 데이터베이스에는 국외의 멀티미디어 데이터들에 대응하는 수화 동작 데이터, 수화 아바타 동작에 대한 정보, 수화 아바타 동작에 대한 메타 데이터 등을 포함한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
상술한 바와 같은 본 발명은, 상기 방송 통신 융합 시스템에서 멀티미디어 전송 시에 청각 장애인을 위한 수화 영상 데이터를 제공하는 시스템을 제안하였다. 그래서 상기 수화 영상 데이터를 제공하는 시스템의 송수신기를 사용하면 수화 아바타 등을 사용하여 상기 수신한 멀티미디어 데이터의 일부 정보를 디스플레이하는 것이 가능하다는 이점을 갖는다. 그래서 뉴스 등과 같이 사람이 하고 있는 수화 시 스템을 대체하는 것이 가능하고 해당언어에 관계되는 수화 데이터베이스가 구축되면, 타 언어에 상관없이 자국 언어에 맞는 수화 시스템으로의 변환이 가능하다는 이점을 갖는다. 또한 캡션 등의 기능이 지원되는 멀티미디어 데이터는 상기 자막과 같은 텍스트 정보를 사용한 수화 영상 데이터를 제공하는 것이 가능하다는 이점을 갖는다.

Claims (17)

  1. 멀티미디어 데이터를 송수신하는 송수신기를 구비하는 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 시스템에 있어서,
    상기 멀티미디어 데이터에서 수화를 적용할 데이터를 추출하여 수화 동작 데이터로 변환하고 상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마로 변환하여 상기 수화 아바타 동작 스키마를 수화 메타 데이터로 전환하며 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 다중화하여 수신기로 전송하는 송신기와,
    상기 멀티미디어 데이터와 상기 수화 메타 데이터를 수신하여 역다중화하고 상기 수화 메타 데이터를 사용하여 수화 아바타 동작 스키마를 추출하고 상기 수화 아바타 동작 스키마를 통해 수화 아바타의 동작을 제어하며 수화 비디오 데이터를 생성하고 상기 수화 비디오 데이터와 상기 멀티미디어 데이터를 다중화하고 이를 디스플레이 장치로 전송하는 수신기를 포함함을 특징으로 하는 수화 비디오 데이터를 제공하는 시스템.
  2. 제 1 항에 있어서,
    상기 송신기는 상기 멀티미디어 데이터에서 수화 적용 데이터를 추출하는 수화 적용 데이터 추출기와,
    상기 수화 적용 데이터를 추출하여 수화 동작 데이터로 전환하고 상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마를 생성하는 수화 적응 엔진과,
    상기 수화 적용 데이터에 대응하는 수화 동작 데이터 및 상기 수화에 대응하는 수화 아바타 동작 스키마에 대한 정보를 포함하고 상기 수화 적응 엔진과 연동하여 동작하는 수화 데이터베이스와,
    상기 수화 아바타 동작 스키마를 수화 메타 데이터로 전환하여 수화 메타 데이터를 생성하는 메타 데이터 생성기를 포함하며,
    상기 멀티미디어 데이터와 상기 수화 메타 데이터를 다중화하고 이를 상기 수신기로 전송하는 것을 특징으로 하는 수화 비디오 데이터를 제공하는 시스템.
  3. 제 2 항에 있어서,
    상기 수화 적응 엔진은 상기 수화 적용 데이터를 사용하여 상기 수화 데이터베이스의 수화 적용 데이터에 대응하는 수화 동작 데이터로 변환하는 수화 동작 데이터 변환기와,
    상기 데이터베이스의 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마로 변환하는 수화 아바타 동작 스키마 변환기를 포함함을 특징으로 하는 수화 비디오 데이터를 제공하는 시스템.
  4. 제 2항에 있어서,
    상기 수화 적응 엔진은 엠펙 21의 디지털 아이템 적응 방식을 적용하는 것을 특징으로 하는 수화 비디오 데이터를 제공하는 시스템.
  5. 제 1 항에 있어서,
    상기 수신기는 상기 멀티미디어 데이터와 상기 수화 메타 데이터를 수신하고 역다중화하는 역다중화기와,
    상기 수화 메타 데이터를 사용하여 수화 아바타 동작 스키마를 추출하는 아바타 동작 파서(Parser)와,
    상기 아바타 동작 스키마를 통해서 수화 아바타의 동작을 제어하는 수화 아바타 동작 제어기와,
    상기 수화 아바타의 동작을 통해서 수화 비디오 데이터를 생성하는 수화 비디오 데이터 생성기와,
    상기 멀티미디어 데이터와 상기 수화 비디오 데이터를 다중화하여 디스플레이 장치로 전송하는 다중화기를 포함함을 특징으로 하는 수화 비디오 데이터를 제공하는 시스템.
  6. 제 5항에 있어서,
    상기 수신기에서 수신하는 메타 데이터가 국외의 메타 데이터일 경우 수화 데이터베이스는 국외의 수화 데이터베이스와 연동하여 동작하는 수화 데이터베이스와,
    상기 수화 데이터베이스로부터 국내 아바타 동작 탬플릿을 생성하는 수화 아바타 동작 파서(Parser)를 더 포함함을 특징으로 하는 수화 비디오 데이터를 제공하는 시스템.
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 멀티미디어 데이터를 송수신하는 송수신기를 구비하는 방송 통신 융합 시스템에서 수화 비디오 데이터를 제공하는 방법에 있어서,
    상기 멀티미디어 데이터에서 수화를 적용할 데이터를 추출하여 수화 동작 데이터로 변환하는 과정과,
    상기 수화 동작 데이터를 사용하여 수화 아바타 동작 스키마로 변환하여 상기 수화 아바타 동작 스키마를 수화 메타 데이터로 전환하는 과정과,
    상기 멀티미디어 데이터와 상기 수화 메타 데이터를 다중화하여 수신기로 전송하는 과정과,
    상기 멀티미디어 데이터와 상기 수화 메타 데이터를 수신하여 역다중화하는 과정과,
    상기 수화 메타 데이터를 사용하여 수화 아바타 동작 스키마를 추출하는 과정과,
    상기 수화 아바타 동작 스키마를 통해 수화 아바타의 동작을 제어하며 수화 비디오 데이터를 생성하는 과정과,
    상기 수화 비디오 데이터와 상기 멀티미디어 데이터를 다중화하고 이를 디스플레이 장치로 전송하는 과정을 포함함을 특징으로 하는 상기 방법.
  13. 제 12항에 있어서,
    상기 수화 적용 데이터를 수화 동작 데이터로 변환하고 상기 수화 동작 데이터를 수화 아바타 동작 스키마로 변환하는 과정은 엠펙 21의 디지털 아이템 적응 방식을 적용하는 것을 특징으로 하는 상기 방법.
  14. 제 12항에 있어서,
    상기 수신한 메타 데이터가 국외의 메타 데이터일 경우 국외의 수화 데이터베이스와 연동하여 동작하는 국내 수화 데이터베이스를 사용하여 국내 아바타 동작 탬플릿을 생성하는 과정을 더 포함함을 특징으로 하는 상기 방법.
  15. 삭제
  16. 삭제
  17. 삭제
KR1020050008624A 2005-01-31 2005-01-31 방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법 KR100819251B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020050008624A KR100819251B1 (ko) 2005-01-31 2005-01-31 방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법
US11/331,989 US20060174315A1 (en) 2005-01-31 2006-01-13 System and method for providing sign language video data in a broadcasting-communication convergence system
JP2006018662A JP2006215553A (ja) 2005-01-31 2006-01-27 放送・通信融合システムにおける手話ビデオデータの提供システム及びその方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050008624A KR100819251B1 (ko) 2005-01-31 2005-01-31 방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20060087793A KR20060087793A (ko) 2006-08-03
KR100819251B1 true KR100819251B1 (ko) 2008-04-03

Family

ID=36758195

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050008624A KR100819251B1 (ko) 2005-01-31 2005-01-31 방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법

Country Status (3)

Country Link
US (1) US20060174315A1 (ko)
JP (1) JP2006215553A (ko)
KR (1) KR100819251B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9852130B2 (en) 2013-08-06 2017-12-26 Samsung Electronics Co., Ltd Mobile terminal and method for controlling the same

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007006090A1 (en) * 2005-07-08 2007-01-18 Smart Internet Technology Crc Pty Ltd Systems and methods for use in transforming electronic information into a format
DE102006053837A1 (de) * 2006-11-14 2008-05-15 Robert Bosch Gmbh Integrierter Schaltkreis
US9282377B2 (en) * 2007-05-31 2016-03-08 iCommunicator LLC Apparatuses, methods and systems to provide translations of information into sign language or other formats
US20090044112A1 (en) * 2007-08-09 2009-02-12 H-Care Srl Animated Digital Assistant
JP5213572B2 (ja) * 2008-07-28 2013-06-19 株式会社アステム 手話映像生成システム、サーバ、端末装置、情報処理方法、及びプログラム
US20110116608A1 (en) * 2009-11-18 2011-05-19 Gwendolyn Simmons Method of providing two-way communication between a deaf person and a hearing person
DE102010009738A1 (de) * 2010-03-01 2011-09-01 Institut für Rundfunktechnik GmbH Anordnung zum Übersetzen von Lautsprache in eine Gebärdensprache für Gehörlose
US9245369B2 (en) 2010-07-06 2016-01-26 Electronics And Telecommunications Research Institute Method and apparatus for generating an avatar
US20120144053A1 (en) * 2010-12-01 2012-06-07 Microsoft Corporation Light Weight Transformation for Media
KR101854382B1 (ko) 2011-03-16 2018-05-04 한국전자통신연구원 레프리젠테이션을 사용하는 스트리밍 콘텐츠 제공 장치 및 방법
US9536453B2 (en) * 2013-05-03 2017-01-03 Brigham Young University Computer-implemented communication assistant for the hearing-impaired
US9549060B2 (en) 2013-10-29 2017-01-17 At&T Intellectual Property I, L.P. Method and system for managing multimedia accessiblity
US9558756B2 (en) 2013-10-29 2017-01-31 At&T Intellectual Property I, L.P. Method and system for adjusting user speech in a communication session
US9355599B2 (en) 2014-03-06 2016-05-31 3M Innovative Properties Company Augmented information display
KR102552397B1 (ko) * 2016-03-18 2023-07-06 한국전자통신연구원 장애인방송 품질 평가 시스템 및 방법
KR102580592B1 (ko) * 2021-03-31 2023-09-21 한국전자통신연구원 수어 자막을 포함하는 방송 신호를 제공하는 방법 및 방송 신호 송수신 장치

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970057098A (ko) * 1995-12-29 1997-07-31 배순훈 티브이 음성신호를 수화로 표시하는 디스플레이장치
KR970057097A (ko) * 1995-12-29 1997-07-31 배순훈 수화id신호방송시 수화기능표시 티브이
KR970078580A (ko) * 1996-05-10 1997-12-12 배순훈 문자/수화처리기능을 갖춘 텔레비전
KR970078587A (ko) * 1996-05-10 1997-12-12 배순훈 수화처리기능을 갖춘 텔레비전
KR19990070056A (ko) * 1998-02-17 1999-09-06 남일수 영문 철자 및 숫자가 포함된 한글 문장을 수화로 통역하는 방법 및 장치
KR20010037009A (ko) * 1999-10-13 2001-05-07 김시중 3차원 실시간 수화 처리장치 및 그 방법
KR20010107877A (ko) * 2001-11-09 2001-12-07 이창선 음성인식을 통한 쓰리디 애니메이션 수화표현 시스템
KR20020036280A (ko) * 2000-11-09 2002-05-16 방혜경 유무선 네트웍 환경에서의 수화 전송방법 및 장치
KR20020041379A (ko) * 2002-05-07 2002-06-01 이금용 텍스트 기반 지화 및 수화 애니메이션 자동 생성 시스템
KR20030047472A (ko) * 2001-12-10 2003-06-18 삼성전자주식회사 수화 표시 기능을 갖는 텔레비젼 및 그 제어방법
KR20030077348A (ko) * 2002-03-26 2003-10-01 한국과학기술원 티브이 자막 신호에 기반한 3차원 수화 애니메이션 발생시스템

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3567596B2 (ja) * 1996-04-09 2004-09-22 株式会社日立製作所 手話アニメーション生成装置
JPH10222698A (ja) * 1997-02-12 1998-08-21 Matsushita Electric Ind Co Ltd ３次元仮想空間の通信装置、および通信方法
JPH11184370A (ja) * 1997-04-17 1999-07-09 Matsushita Electric Ind Co Ltd 手話情報提示装置
JPH10322617A (ja) * 1997-05-15 1998-12-04 Matsushita Electric Ind Co Ltd 映像音響機器
JP2000244886A (ja) * 1999-01-20 2000-09-08 Canon Inc コンピュータ会議システム、コンピュータ処理装置、コンピュータ会議を行う方法、コンピュータ処理装置における処理方法、ビデオ会議システム、ビデオ会議を行う方法、ヘッドホン
US7333507B2 (en) * 2001-08-31 2008-02-19 Philip Bravin Multi modal communications system
US20040012643A1 (en) * 2002-07-18 2004-01-22 August Katherine G. Systems and methods for visually communicating the meaning of information to the hearing impaired

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970057098A (ko) * 1995-12-29 1997-07-31 배순훈 티브이 음성신호를 수화로 표시하는 디스플레이장치
KR970057097A (ko) * 1995-12-29 1997-07-31 배순훈 수화id신호방송시 수화기능표시 티브이
KR970078580A (ko) * 1996-05-10 1997-12-12 배순훈 문자/수화처리기능을 갖춘 텔레비전
KR970078587A (ko) * 1996-05-10 1997-12-12 배순훈 수화처리기능을 갖춘 텔레비전
KR19990070056A (ko) * 1998-02-17 1999-09-06 남일수 영문 철자 및 숫자가 포함된 한글 문장을 수화로 통역하는 방법 및 장치
KR20010037009A (ko) * 1999-10-13 2001-05-07 김시중 3차원 실시간 수화 처리장치 및 그 방법
KR20020036280A (ko) * 2000-11-09 2002-05-16 방혜경 유무선 네트웍 환경에서의 수화 전송방법 및 장치
KR20010107877A (ko) * 2001-11-09 2001-12-07 이창선 음성인식을 통한 쓰리디 애니메이션 수화표현 시스템
KR20030047472A (ko) * 2001-12-10 2003-06-18 삼성전자주식회사 수화 표시 기능을 갖는 텔레비젼 및 그 제어방법
KR20030077348A (ko) * 2002-03-26 2003-10-01 한국과학기술원 티브이 자막 신호에 기반한 3차원 수화 애니메이션 발생시스템
KR20020041379A (ko) * 2002-05-07 2002-06-01 이금용 텍스트 기반 지화 및 수화 애니메이션 자동 생성 시스템

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9852130B2 (en) 2013-08-06 2017-12-26 Samsung Electronics Co., Ltd Mobile terminal and method for controlling the same

Also Published As

Publication number Publication date
KR20060087793A (ko) 2006-08-03
JP2006215553A (ja) 2006-08-17
US20060174315A1 (en) 2006-08-03

Similar Documents

Publication Publication Date Title
KR100819251B1 (ko) 방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법
KR100294677B1 (ko) 디지털 티브이 수신기의 캡션정보 처리장치 및 방법
CN100531298C (zh) 用于执行画中画功能的多媒体信号匹配系统和方法
KR101899588B1 (ko) 수어 애니메이션 데이터를 자동으로 생성하는 시스템과 이를 이용한 방송시스템 및 방송방법
US20120033133A1 (en) Closed captioning language translation
US8341670B2 (en) Method and system for providing application service
CN102273210A (zh) 3d字幕显示方法和实现该方法的3d显示装置
KR100606785B1 (ko) 네트워크를 통한 원격 멀티미디어 서비스 제공시스템에서의 동영상 및 이미지 데이터의 동기화 방법
JP2011091619A (ja) 送信装置、送信方法、受信装置、受信方法、プログラム、および放送システム
US10582270B2 (en) Sending device, sending method, receiving device, receiving method, information processing device, and information processing method
KR100436088B1 (ko) 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템
KR100461541B1 (ko) 방송 프로그램에 정보 제공을 위한 메타데이터 송/수신장치 및 그 방법
KR101834963B1 (ko) 수화 방송을 보기 위한 방송수신 장치, 이를 포함하는 수화 방송시스템 및 수화 방송방법
KR100438518B1 (ko) 엠펙-4 장면 기술자를 이용한 엠펙-2 비디오의 특정 영역활성화 장치 및 그 방법
JP2006211120A (ja) 文字情報表示機能を備えた映像表示システム
JP2003061098A (ja) 画像処理装置、画像処理方法、記録媒体及びプログラム
KR100740884B1 (ko) 음성 전자 프로그램 안내 정보 송수신 장치 및 그 방법
Ferreira et al. Providing support for sign languages in middlewares compliant with ITU J. 202
KR100854716B1 (ko) 시각정보의 음성 제공 시스템 및 그 방법
KR100619991B1 (ko) 영상 통신 단말기의 사용자 영상 차단 방법
KR20140039946A (ko) 영상처리장치 및 그 제어방법, 영상처리 시스템
JP2015230640A (ja) 手話ｃｇ生成装置及びそのプログラム
KR20130032655A (ko) 검색을 이용한 수화 방송 장치 및 방법
JPH0787472A (ja) テレビ会議システム
JPH10322617A (ja) 映像音響機器

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
AMND Amendment
E801 Decision on dismissal of amendment
B601 Maintenance of original decision after re-examination before a trial
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20070530

Effective date: 20080130

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130227

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20140227

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20150226

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20160226

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20170224

Year of fee payment: 10

LAPS Lapse due to unpaid annual fee