KR20040062369A - 멀티미디어 캡셔닝 및 오디오 디스크립션용 동기화 메카니즘 - Google Patents

멀티미디어 캡셔닝 및 오디오 디스크립션용 동기화 메카니즘 Download PDF

Info

Publication number
KR20040062369A
KR20040062369A KR1020030014785A KR20030014785A KR20040062369A KR 20040062369 A KR20040062369 A KR 20040062369A KR 1020030014785 A KR1020030014785 A KR 1020030014785A KR 20030014785 A KR20030014785 A KR 20030014785A KR 20040062369 A KR20040062369 A KR 20040062369A
Authority
KR
South Korea
Prior art keywords
media stream
supplemental
compiled
output
supplemental media
Prior art date
Application number
KR1020030014785A
Other languages
English (en)
Inventor
가네꼬마사히꼬
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Publication of KR20040062369A publication Critical patent/KR20040062369A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H04N5/06—Generation of synchronising signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/162—Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing
    • H04N7/165—Centralised control of user terminal ; Registering at central
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/087—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only
    • H04N7/088—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital
    • H04N7/0884—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of additional display-information, e.g. menu for programme or channel selection
    • H04N7/0885—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of additional display-information, e.g. menu for programme or channel selection for the transmission of subtitles

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Television Systems (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 주 미디어 스트림과 함께 보충 미디어 스트림을 출력하는 방법에 관한 것이다. 상기 방법은 트리거링 이벤트를 모니터링하고, 트리거링 이벤트를 검출할 때, 상기 방법으로 인해 트리거링 이벤트와 관련된 하나 이상의 보충 미디어 스트림이 출력되게 된다. 관련된 보충 미디어 스트림은 주 미디어 스트림과 동기 또는 비동기로 출력될 수 있다. 동기 보충 미디어 스트림은 주 미디어 스트림과 동시에 출력된다. 비동기 출력 보충 미디어 스트림은 주 미디어 스트림을 일시 중단시키는 동안, 상기 스트림이 출력되어 동시에 출력되는 임의의 보충 미디어 스트림을 종료시킨다. 보충 미디어 스트림으로 인해 조건부의 트리거링 이벤트가 제2 보충 미디어 스트림을 트리거하여 제1 보충 미디어 스트림이 동기로 출력된다. 관련된 보충 미디어 스트림과 제2 주 미디어 스트림은 제1 주 미디어 스트림과 함께 컴파일된 보충 미디어 스트림으로서 비동기로 출력될 수 있다.

Description

멀티미디어 캡셔닝 및 오디오 디스크립션용 동기화 메카니즘 {SYNCHRONIZATION MECHANISM FOR MULTIMEDIA CAPTIONING AND AUDIO DESCRIPTION}
본 발명은 시각 및 청각 장애자에게 도움이 되도록 설계된 보충(supplement) 미디어 스트림을 주(main) 멀티미디어 스트림과 함께 디스플레이하기 위한 방법에 관한 것이다.
사람들의 시각 또는 청각 등의 감각 중 하나의 감각의 손상으로 인해, 멀티미디어에 접속은 하지만 멀티미디어에 의해 전달된 콘텐츠를 전부 이해할 수는 없는 많은 사람들이 있다. 예를 들어, 청각이 손상된 사람은 비디오 및 오디오 양상을 모두 구비한 멀티미디어 콘텐츠 스트림에 접속할 수 있지만, 상기 콘텐츠 중 비디오 양상만을 인식할 수 있다. 마찬가지로, 시각 장애자는 비디오 및 오디오 양상을 모두 구비한 멀티미디어 콘텐츠 스트림에 접속하지만, 상기 콘텐츠 중 오디오 양상만을 인식할 수 있다.
캡셔닝(captioning)은 청각 장애자를 돕는데 유용한 보충 미디어 스트림이며, 수년 동안 텔레비젼 프로그램의 주요 산업이었다. 캡셔닝의 개념은 텔레비젼 방송을 넘어서 다른 플랫폼, 특히 컴퓨터 전달 멀티미디어 스트림으로 확장되었다. Apple 및 RealNetworks 등의 회사들은 콘텐츠 작성자(content author)가 소유하고 있는 캡셔닝 포멧을 이용하여 최종 제품에 보충 캡셔닝 스트림을 포함시키도록 할 수 있는 제품을 보유하고 있다. 이러한 포멧은 일반적으로 W3C's Synchronized Multimedia Integration Language에 기초한다.
주 멀티미디어 스트림과 보충 미디어 스트림을 통합하는 현 시스템의 하나의 주요한 결점은 주 미디어 스트림을 적절하게 보충할 필요가 있는 정보가 종종 주 미디어 스트림과 보조를 맞출 수 없다는 점이다. 보충 미디어 스트림의 본질로 인해, 주 미디어 스트림을 적절하게 보충하는데 필요한 모든 정보를 나타내기 위해서는 주 미디어 스트림이 허용하는 시간보다 많은 시간이 필요하다. 결과적으로, 주 미디어 스트림과 보조를 맞추기 위해서, 콘텐츠 작성자는 그렇지 않으면 보충 스트림에 포함될 일부 정보를 선택적으로 생략하여야 한다.
전술한 문제점의 일례로서, 캡셔닝은 통상적으로 스크린 상의 캐릭터의 대화를 문장 형식으로 디스플레이한다. 배경에서의 스크림(scream) 또는 충돌음 등, 캐릭터의 대사에 영향을 주어 오프-스크린을 발생시키는 이벤트 사운드는 등장 캐릭터의 모든 대화를 포착하기 위해서 생략될 필요가 있다. 이상적으로, 등장 캐릭터의 대사에 이러한 영향을 주는 사운드의 디스크립션이 존재할 것이다. 그러나, 캐릭터의 대화가 지속되기 때문에, 종종 이러한 디스크립션을 생략할 필요가 있다. 아울러, 하나의 장면으로부터의 보충 미디어는 종종 다음 장면으로 "넘쳐 흘러(spill over)", 주 미디어 스트림에서 현재 발생하고 있는 것에 약간의 혼동을 일으킨다.
주 미디어 스트림과 함께 보충 미디어 스트림을 공급하고 주 미디어 스트림을 선택적으로 일시 중단시켜 보충 미디어 스트림이 특정 이벤트에 관련된 콘텐츠를 전부 나타내도록 허용하는 시스템이 요구된다. 아울러, 상기 시스템은 보충 미디어 스트림의 타이밍이 주 미디어 스트림의 중단에 의해 영향을 받지 않도록 보충 미디어 스트림이 기초로 하는 주 미디어 스트림의 타이밍 모델을 일시 중단시키어야 한다.
도1은 본 발명을 위해 예시적 운영 환경을 제공하기에 적합한 컴퓨터 시스템의 블럭 다이어그램이다.
도2는 종래 기술에서 알려진 주 미디어 스트림과 동기로 출력된 보충 미디어 스트림을 설명하는 타이밍 다이어그램이다.
도3은 본 발명에 따른 주 미디어 스트림과 비동기로 출력된 보충 미디어 스트림을 설명하는 타이밍 다이어그램이다.
도4는 본 발명에 따른 주 미디어 스트림과 동기 및 비동기 모두로 출력된 다수의 보충 미디어 스트림을 설명하는 타이밍 다이어그램이다.
도5는 본 발명에 따른 주 미디어 스트림과 동기 및 비동기 모두로 출력된, 컴파일된 보충 미디어 스트림을 포함하는 다수의 보충 미디어 스트림을 설명하는 타이밍 다이어그램이다.
도6은 본 발명에 따른 주 미디어 스트림 및 보충 미디어 스트림을 출력하기 위한 예시적 출력 미디어 스트림 루틴을 설명하는 플로우 다이어그램이다.
도7a 내지 7c는 도6에 도시된 예시적 출력 미디어 스트림 루틴에서 사용하기 위한 출력 보충 스트림 서브루틴을 설명하는 플로우 다이어그램이다.
도8은 본 발명에 따라 형성된 예시적 출력 미디어 시스템을 설명하는 블럭 다이어그램이다.
<도면의 주요부분에 대한 간단한 설명>
102 : 개인용 컴퓨터
104 : 프로세싱 유닛
106 : 시스템 메모리
108 : 시스템 버스
110 : ROM
112 : RAM
114 : BIOS
116 : 하드 디스크 드라이브
118 : 자기 디스크 드라이브
120 : 분리 가능한 디스크
122 : 광학 디스크 드라이브
124 : CD-ROM 디스크
126 : 하드디스크 드라이브 인터페이스
128 : 자기 드라이브 인터페이스
130 : 광학 드라이브 인터페이스
132 : 오퍼레이팅 시스템
134 : 응용 프로그램
136 : 다른 프로그램 모듈
138 : 프로그램 데이터
140 : 키보드
142 : 마우스
144 : 사용자 입력 인터페이스
146 : 원격 컴퓨터
148 : LAN
152 : 네트워크 인터페이스
154 : 모뎀
156 : 그래픽 디스플레이 인터페이스
주 미디어 스트림과 함께 보충 미디어 스트림을 출력하는 방법이 제공된다. 상기 방법은 트리거링 이벤트를 모니터링하고, 이 방법으로 인해 트리거링 이벤트를 검출할 때, 트리거링 이벤트와 관련된 하나 이상의 보충 미디어 스트림이 출력되게 된다. 관련된 보충 미디어 스트림은 주 미디어 스트림과 동기 또는 비동기로 출력될 수 있다. 동기 보충 미디어 스트림은 주 미디어 스트림과 동시에 출력된다. 비동기로 출력된 보충 미디어 스트림은 출력되는 동안 주 미디어 스트림을 일시 정지시키고 동시에 출력되는 임의의 보충 미디어 스트림을 종료시킨다. 보충 미디어 스트림으로 인해 조건부의 트리거링 이벤트는 제2 보충 미디어 스트림을 트리거시켜 제1 보충 미디어 스트림과 동기하여 출력시킨다. 관련된 보충 미디어 스트림과 함께 제2 주 미디어 스트림은 제1 주 미디어 스트림과 함께 컴파일된 보충 미디어 스트림으로서 비동기로 출력될 수 있다.
전술한 설명으로부터 용이하게 이해되는 바와 같이, 본 발명은 주 미디어 스트림과 함께 보충 미디어 스트림을 출력하는 새롭고 개선된 방법을 제공한다. 따라서, 상기 방법은 시각 및 청각 장애자들에게 도움이 되도록 설계된 보충 미디어 스트림을 주 멀티미디어 스트림과 함께 디스플레이하기에 이상적이다.
본 발명의 전술한 양상과 많은 부수적인 이점은 첨부된 도면과 함께 이에 대한 다음의 상세한 설명을 참조로 보다 용이하게 이해될 것이다.
도1 및 이에 수반하는 논의는 본 발명의 다양한 특성을 수행하기에 적합한 컴퓨팅 시스템의 간략하고 일반적인 설명을 제공하게 된다. 컴퓨팅 시스템은 분산된 컴퓨팅 환경에서 사용될 수 있는 개인용 컴퓨터의 일반적인 정황에서 설명되며, 여기서 보완적인 태스크는 통신 네트워크를 통해 함께 링크된 원격 컴퓨팅 디바이스에 의해 수행되지만, 본 발명은 멀티프로세서 시스템, 미니컴퓨터, 메인프레임 컴퓨터 등을 포함하는 다른 다수의 컴퓨터 시스템 구성으로 실행될 수 있다는 것이 당업자에 의해 이해될 것이다. 본 발명은 근거리 네트워크(LAN) 또는 대안으로서, 물리적으로 원거리에 위치한 디바이스보다는 논리 디바이스를 이용하여 하나의 컴퓨터 상에서 실행될 수 있다. 아울러, 본 발명은 컴퓨터 시스템과 관련하여 기술되지만, 적절한 제어 시스템 변경을 통해 VCR 또는 DVD 플레이어 등의 다른 미디어 스트림 플레이어와 함께 사용될 수 있다는 것이 이해되어야 한다.
본 발명의 양상은 개인용 컴퓨터와 관련하여 오퍼레이팅 시스템 상에서 실행되는 응용 프로그램의 관점에서 기술되지만, 이러한 양상은 또한 다른 프로그램 모듈과 함께 수행될 수 있다는 것이 당업자에 의해 인식될 것이다. 일반적으로, 프로그램 모듈은 특정 태스크를 수행하거나 특정 압축 데이터 타입을 실행시키는 루틴, 프로그램, 컴포넌트, 데이터 구조 등을 포함한다.
도1에서, 본 발명을 수행하기 위한 예시적 시스템은 프로세싱 유닛(104), 시스템 메모리(106), 프로세싱 유닛(104)에 시스템 메모리를 결합시키는 시스템 버스(108)을 포함하는 통상의 개인용 컴퓨터(102)를 포함한다. 시스템 메모리(106)는 판독 전용 메모리(ROM)(110) 및 임의 액세스 메모리(RAM)(112)를 포함한다. 개시시에 개인용 컴퓨터(102) 내의 엘리먼트 사이에서 정보를 이동시키는데 도움이 되는 기본 루틴을 포함하는 기본 입/출력 시스템(BIOS)(114)은 ROM(110)에 저장된다. 개인용 컴퓨터(102)는 또한 하드 디스크 드라이브(116), 분리 가능한 디스크(120)로부터 판독하거나 상기 디스크에 기록하기 위한 자기 디스크 드라이브(118) 등 및 CD-ROM 디스크(124)를 판독하고 다른 광학 미디어로부터 판독하거나 상기 미디어에 기록하기 위한 광학 디스크 드라이브(122)를 포함한다. 하드 디스크 드라이브(116), 자기 디스크 드라이브(118) 및 광학 디스크 드라이브(122)는 하드 디스크 드라이브 인터페이스(126), 자기 디스크 드라이브 인터페이스(128) 및 광학 드라이브 인터페이스(130) 각각에 의해 시스템 버스(108)에 접속된다. 상기드라이브들 및 관련된 다른 컴퓨터-판독 가능한 미디어는 개인용 컴퓨터(102)에 대해 비휘발성 스토리지를 제공한다. 상기 컴퓨터-판독 가능한 미디어의 설명은 하드 디스크, 분리 가능한 자기 디스크 및 CD-ROM 디스크를 나타내지만, 자기 카세트, 플래쉬 메모리 카드, 디지털 비디오 디스크, Bernoulli 카트리지, ZIP 디스크 등의 컴퓨터에 의해 판독 가능한 다른 타입의 미디어 역시 전형적인 오퍼레이팅 환경에서 사용될 수 있다는 것이 당업자에 의해 인식되어야 한다.
다수의 프로그램 모듈들은 상기 드라이브들 및 오퍼레이팅 시스템(132), 하나 이상의 응용 프로그램(134), 다른 프로그램 모듈(136) 및 프로그램 데이터(138)를 포함하는 RAM(112)에 저장될 수 있다. 사용자는 키보드(140) 또는 마우스(142) 등의 입력 디바이스를 통해 개인용 컴퓨터(102)에 커맨드 및 정보를 입력할 수 있다. 다른 입력 디바이스(도시 생략)는 마이크, 터치패드, 조이스틱, 게임 패드, 위성 안테나, 스캐너 등을 포함할 수 있다. 이러한 입력 디바이스 및 다른 입력 디바이스는 종종 시스템 버스에 결합되는 사용자 입력 인터페이스(144)를 통해 프로세싱 유닛(104)에 접속되지만, 게임 포트 또는 범용 직렬 버스(USB) 등의 다른 인터페이스(도시 생략)에 의해 접속될 수도 있다. 디스플레이 디바이스(158) 또한 때때로 디스플레이 드라이버라고 하는, 통상적으로 그래픽 디스플레이 인터페이스(156) 및 코드 모듈을 포함하는 디스플레이 서브시스템을 통해 시스템 버스(108)에 접속되어, 그래픽 디스플레이 인터페이스와 인터페이싱된다. 아울러, 개인용 컴퓨터는 또한 통상적으로 스피커 또는 프린터 등의 다른 주변 출력 디바이스(도시 생략)를 포함한다.
개인용 컴퓨터(102)는 원격 컴퓨터(146) 등의 하나 이상의 원격 컴퓨터에 대한 논리 접속을 이용하여 네트워크 환경에서 동작할 수 있다. 원격 컴퓨터(146)는 서버, 라우터, 피어(peer) 디바이스 또는 다른 통신 네트워크 노드일 수 있으며, 통상적으로 개인용 컴퓨터(102)에 관련하여 기술된 다수 또는 모든 엘리먼트를 포함한다. 도1에 도시된 논리 접속부는 근거리 네트워크(LAN)(148) 및 광역 네트워크(WAN)(150)를 포함한다. 이러한 네트워크 환경은 사무실, 엔터프라이즈-와이드 컴퓨터 네트워크, 인트라넷 및 인터넷에서 보편적이다.
LAN 네트워크 환경에서 사용되는 경우, 개인용 컴퓨터(102)는 네트워크 인터페이스(102)를 통해 LAN(148)에 접속된다. WAN 네트워크 환경에서 사용되는 경우, 개인용 컴퓨터(102)는 통상적으로 인터넷 등의 WAN(150) 상에서 통신을 구현하기 위한 모뎀(154) 또는 다른 수단을 포함한다. 내장 또는 외장 모뎀(154)은 사용자 입력 인터페이스(144)를 통해 시스템 버스(108)에 접속된다. 네트워크 환경에서, 개인용 컴퓨터(102)에 관련하여 기술된 프로그램 모듈 또는 그 일부는 원격 메모리 스토리지 디바이스에 저장될 수 있다. 도시된 네트워크 접속부는 전형적이며 컴퓨터들 사이의 통신 링크를 구형하는 다른 수단이 사용될 수 있다는 것이 인식될 것이다. 아울러, LAN(148) 및 WAN(150)은 상기 시스템용 비휘발성 스토리지의 소스로서 사용될 수 있다.
도2는 종래 기술에서 알려진 바와 같이, 주 미디어 스트림(202)과 동기하여 출력된 보충 미디어 스트림(204)을 도시한 타이밍 다이어그램(200)이다. 타이밍 다이어그램(200)에서 도시된 바와 같이, 주 미디어 스트림(202)은 시간 T0에서 출력을 시작하여 중단없이 시간 T6까지 지속된다. 주 미디어 스트림(202)의 출력 동안, 시간 T1에서, 트리거링 이벤트(201)가 발생되어 보충 미디어 스트림(204)은 미디어 세그먼트(206)를 출력한다. 타이밍 다이어그램(200)으로부터 볼 수 있는 바와 같이, 미디어 세그먼트(206)는 시간 주기 DUR0 동안 주 미디어 스트림(202)과 동기하여 출력된다.
시간 T3에서, 제2 트리거링 이벤트(203)가 발생되어, 보충 미디어 스트림(204)가 제2 미디어 세그먼트(208)를 출력하게 된다. 종래 기술에서 알려진 바와 같이, 미디어 세그먼트(208) 역시 주 미디어 스트림(202)과 동기하여 출력된다. 도2에서 도시된 바와 같이, 미디어 세그먼트(208)는 시간 주기 DUR1 동안 출력된다. 상기 2개의 미디어 세그먼트들 모두 주 미디어 스트림(202)과 동기하여 출력되기 때문에, 주 미디어 스트림(202)과 관련된 보충 미디어 스트림(204) 모두의 총 표시 시간은 주 미디어 스트림 단독의 표시 시간과 동일한 T6이다.
이러한 타이밍 다이어그램(200)이 종래 기술에서 동작하는 방법의 일례로서, 주 미디어 스트림(202)은 디스플레이 디바이스(156)(도1 참조) 등의 디스플레이 디바이스 상에 디스플레이되는 멀티미디어 표시를 나타낼 수 있다. 보충 미디어 스트림(204)은 멀티미디어 표시 동안 발생되는 대화의 문자 디스크립션 스트림을 나타낼 수 있다. 트리거링 이벤트(201, 203)는 대화가 발생하거나 이미 발생한 멀티미디어 표시에 대하여 소정의 시간을 나타내며, 그 대화에 대한 문장 디스크립션이 청각 장애자들에게 유용하다. 종래 기술에서 알려진 바와 같이, 문장 디스크립션은 멀티미디어 표시와 동기하여 디스플레이된다. 그러나, 주 미디어 스트림과 보충 미디어 스트림을 동기하여 표시하는 것은 문장 디스크립션이 주 미디어 스트림과 동시에 표시할 정도로 충분히 짧은 경우에는 적절하지만, 이 시스템이 열화되는 방법을 아는 것은 쉽다. 예를 들어, 문장 디스크립션이 길 경우, 문장 디스크립션은 주 표시의 후속하는 정보 장면과 중첩되어, 문장 디스크립션에 의존하는 사람들에게 심각한 혼동을 야기시킬 수 있다. 대안으로서, 특정 시간 주기내에 문장 디스크립션이 "일치(fit)"하도록 하기 위하여, 보충 미디어 스트림의 작성자는 중요한 정보를 편집하여야 할 수도 있다. 전술한 바와 같이, 필요시 주 미디어 스트림을 중단시켜, 보충 미디어 스트림들이 주 미디어 스트림의 타이밍 시퀀스 내에서 보다 확실한 콘텐츠를 디스플레이할 수 있도록 하는 방법이 필요하다.
도3은 본 발명에 따른 주 미디어 스트림(302)과 비동기로 출력된 보충 미디어 스트림(304)을 도시한 타이밍 다이어그램(300)이다. 타이밍 다이어그램(300)에서 도시된 바와 같이, 주 미디어 스트림(302)은 시간 T0에서 출력을 시작하여 시간 T6에서 종료된다. 주 미디어 스트림(302)의 출력 동안, 시간 T1에서, 트리거링 이벤트(301)가 발생되어 보충 미디어 스트림(304)는 미디어 세그먼트(306)를 출력시키게 된다. 그러나, 도2에서의 보충 미디어 세그먼트의 동기 출력과는 달리, 미디어 세그먼트(306)는 주 미디어 스트림(302)과 비동기로 출력된다. 따라서, 주 미디어 스트림(302)은 중단(pause) 세그먼트(310)에 의해 표시되는 바와 같이 일시 중단된다. 주 미디어 스트림이 일시 중단되어야 하는 지의 여부를 결정하기 위한 정보는 트리거링 이벤트 또는 보충 미디어 세그먼트 타입에 의해 결정되거나, 보충 미디어 세그먼트에 의해 내부적으로 결정될 수 있다. 그러나, 본 발명은 주 미디어 스트림과 비동기로 보충 미디어 스트림을 출력할 지의 여부를 결정하기 위한 임의의 특정 메카니즘에 제한되어 구현되어서는 안된다.
타이밍 다이어그램(300)에서 도시된 바와 같이, 미디어 세그먼트(306)는 시간 주기 DUR2 동안 출력된다. 이러한 시간 주기 동안, 주 미디어 스트림(302)은 주 미디어 스트림의 시간을 포함하면서 일시 중단 상태로 유지된다. 미디어 세그먼트(306)가 완료될 때, 트리거링 이벤트(303)가 발생되어 주 미디어 스트림(306) 및 그 타이밍이 재개시된다. 트리거링 이벤트는 미디어 세그먼트(306) 자체, 보충 미디어 스트림(304) 또는 외부 모니터링 시스템에 의해 발생될 수 있다. 그러나, 본 발명은 일시 중단된 주 미디어 스트림(302)을 재개시하기 위한 임의의 특정 메카니즘에 제한되도록 구현되어서는 안된다.
시간 T3에서, 트리거링 이벤트(305)로 인해 보충 미디어 스트림(304)은 주 미디어 스트림(302)과 비동기로 다른 미디어 세그먼트(308)를 출력시키게 된다. 미디어 세그먼트(308)는 시간 주기 DUR3 동안, 즉 중단 세그먼트(312)에 의해 표시된 바와 같이 주 미디어 스트림(302)이 일시 중단되는 동안 출력된다. 미디어 세그먼트(308)가 종료된 후에, 또는 대안으로서, 종료 동작으로서, 트리거링 이벤트(307)로 인해 주 미디어 스트림(302)가 그 출력을 재개시하게 된다. 도시된 타이밍 다이어그램(300)에 따르면, 그 후에 주 미디어의 출력이 중단없이 지속되어 시간 T6에서 종료된다. 그러나, 주 미디어 스트림(302)의 출력 시간이 T6이지만, 미디어 세그먼트(306, 308)의 비동기 출력 시간의 일시 중단으로 인해, 주 미디어 스트림 및 보충 미디어 스트림(304) 모두를 출력하기 위한 총 표시 시간은 T6 +DUR2 + DUR3이다.
타이밍 다이어그램(300)에서 도시된 바와 같이, 보충 미디어 스트림의 세그먼트를 비동기로 출력함으로써, 콘텐츠 프로바이더는 주 미디어 스트림으로 표시될 수 있는 보충 정보의 수량 또는 품질에 제한되지 않는다. 아울러, 보충 정보는 보다 적시에 그리고 주 미디어 스트림과 동일한 방식으로 표시될 수 있다.
도4는 본 발명에 따라 주 미디어 스트림(402)과 동기 및 비동기 모두로 출력되는 다수의 보충 미디어 스트림을 도시한 타이밍 다이어그램(400)이다. 시간 T0에서 시작되어, 주 미디어 스트림(402)은 그 출력을 개시한다. 또한, 시간 T0에서 트리거링 이벤트(401)로 인해 보충 미디어 스트림(408)은 주 미디어 스트림(402)과 동기하여 미디어 세그먼트(410)를 출력하게 된다. 미디어 세그먼트(410)는 주 미디어 스트림(402)과 동기하여 출력되기 때문에, 미디어 세그먼트는 주 미디어 스트림 및 보충 미디어 스트림의 총 표시 시간에 영향을 받지 않는다.
종종 하나의 트리거링 이벤트와 관련된 다수의 보충 미디어 스트림이 존재할 수 있다. 본 발명에 따르면, 이러한 관련된 보충 미디어 스트림은 주 미디어 스트림과 동기 또는 비동기로 출력될 수 있다. 비동기 보충 미디어 스트림은 다른 모든 스트림을 일시 중단시키기 때문에, 하나의 트리거링 이벤트와 관련된 다수의 비동기 보충 미디어 스트림이 존재하는 경우, 관련된 스트림을 출력시키는 순서가 필요할 수 있다. 예를 들어, 콘텐츠 작성자는 제2 보충 미디어 스트림을 출력하기 전에 제1 보충 미디어 스트림을 출력할 필요가 있으며, 2개의 세그먼트들 모두 주 미디어 스트림의 출력을 개시하기 전에 출력되어야 한다고 생각할 수 있다. 본 발명의 양상에 따르면, 최우선 순위의 보충 미디어 스트림이 먼저 출력된다. 아울러, 제1 보충 미디어 스트림이 트리거링 이벤트와 관련된 미디어 세그먼트의 출력을 완료하는 경우, 이로 인해 제2의 관련된 미디어 스트림은 보충 미디어 세그먼트를 출력하게 된다. 본 발명의 일 양상에 따르면, 이것은 제2 보충 미디어 세그먼트에 트리거링 이벤트를 포워드하는 제1 보충 미디어 세그먼트에 의해 달성될 수 있다. 대안으로서, 제1 보충 미디어 세그먼트로 인해 제2 트리거링 이벤트가 발생되어 제2의 관련된 세그먼트 미디어 스트림이 미디어 세그먼트를 출력하게 될 수 있다. 그러나, 본 발명은 하나의 트리거링 이벤트와 관련된 복수의 보충 미디어 스트림을 반복하여 출력하기 위한 임의의 특정 메카니즘에 제한되도록 구현되어서는 안된다. 관련된 모든 비동기 보충 미디어 스트림이 완료될 경우, 임의의 비동기 미디어 세그먼트가 출력될 수 있으며 주 미디어 스트림이 재개시된다.
도시한 타이밍 다이어그램(400)에 따르면, 시간 T1에서, 보충 미디어 스트림(404) 및 보충 미디어 스트림(406)은 모두 트리거링 이벤트(403)에 관련된다. 소정의 순서에 따라서, 트리거링 이벤트(403)로 인해 보충 미디어 스트림(404)은 그 미디어 세그먼트(412)의 출력을 개시하게 된다. 미디어 세그먼트(412)가 비동기로 출력되기 때문에, 중단 세그먼트(418)에 의해 표시되는 바와 같이, 주 미디어 스트림(402)은 일시 중단된다. 미디어 세그먼트(412)가 종료될 때, 트리거링 이벤트(405)로 인해 보충 미디어 스트림(406)은 미디어 세그먼트(414)를 출력하게 된다.
콘텐츠 작성자가 제1 보충 미디어 스트림과 동시에 제2 보충 미디어 스트림을 조건부로 출력하길 바랄 수도 있는 여러 예가 있다. 예를 들어, 청각 장애 시청자가 수화(sign language)를 이해할 수 있는 능력을 표현하는 경우, 콘텐츠 작성자는 주 미디어 스트림의 문장 디스크립션과 함께 수화용(signing) 보충 미디어 세그먼트를 조건부로 출력하길 바랄 수도 있다. 이러한 환경하에서, 문장 디스크립션 보충 미디어 스트림은 외부 조건을 테스트하여, 관련된 수화용 보충 미디어 스트림을 동시에 출력하는 것이 적절한 지의 여부를 결정할 수 있다. 대안으로서, 조건부의 트리거링 이벤트가 발생되어 조건부의 보충 미디어 세그먼트가 외부 조건에 기초하여 출력될 지의 여부를 자체적으로 결정할 수 있다.
도4에서 도시된 바와 같이, 미디어 세그먼트(414)는 주 미디어 스트림(402)과 비동기로 출력된다. 그러나, 미디어 세그먼트(414)의 출력 동안, 조건부의 트리거링 이벤트(407)에 의해 도시된 바와 같이 조건부의 트리거링 이벤트가 발생된다. 조건부의 트리거링 이벤트(407)에 의해 표시된 바와 같이, 보충 미디어 스트림은 미디어 세그먼트(414)와 동기하여 미디어 세그먼트(416)를 출력한다. 예시적인 타이밍 다이어그램(400)에 따르면, 조건부의 미디어 세그먼트(416)는 미디어 세그먼트(414) 이전에 종료된다. 미디어 세그먼트(414)가 종료되는 경우, 상기 세그먼트(414)는 주 미디어 스트림(402)과 비동기로 출력되고 트리거링 이벤트(403)와 관련된 다른 어떠한 보충 미디어 스트림도 존재하지 않기 때문에, 트러거링 이벤트(409)로 인해 주 미디어 스트림은 출력을 재개시한다. 시간 T2에서, 트리거링 이벤트(411)가 발생되어 보충 미디어 스트림(408)은 미디어 세그먼트(420)를 동기하여 출력하게 된다.
본 발명의 다른 양상에 따르면(도시 생략), 트리거링 이벤트로 인해 제2 비동기 보충 미디어 스트림이 출력될 때 보충 미디어 스트림이 출력되는 경우, 제1 보충 미디어 스트림은 중단/종료된다. 예를 들어, 미디어 세그먼트(410)가 시간 T2까지 실행될 정도로 충분히 길었다면, 상기 세그먼트(410)는 미디어 세그먼트(412)가 비동기로 출력되기 때문에 시간 T1에서 중단/종료되었을 것이다. 대안으로서, 제2 보충 미디어 세그먼트(410)이 동기로 출력되어야 하는 경우 보충 미디어 스트림은 후속하는 트리거링 이벤트 후에 지속적으로 출력될 수 있다. 따라서, 상술한 예에 따르면, 미디어 세그먼트(412)가 마찬가지로 동기로 출력되어야 하는 경우 미디어 세그먼트(410)는 트리거링 이벤트(403)가 발생된 후에 지속적으로 출력될 것이다.
종래 기술에 대하여 본 발명에 의해 실현된 다른 이점은 제2 주 미디어 스트림에 대한 컴파일된 미디어 스트림으로서 주 미디어 스트림 및 보충 미디어 스트림의 편집물(compilation)을 사용할 수 있는 능력이다. 컴파일된 미디어 스트림은 내부적으로 자체의 타이밍을 사용하고, 관련된 보충 미디어 스트림은 컴파일된 주 미디어 스트림과 비동기로 출력될 수 있다. 도5는 컴파일된 보충 미디어 스트림의 사용을 도시하고 있다.
도5는 본 발명에 따라 주 미디어 스트림(502)과 동기 및 비동기 모두로 출력된, 컴파일된 미디어 스트림(506)을 포함하는 복수의 보충 미디어 스트림을 도시한 타이밍 다이어그램(500)이다. 시간 T0에서 시작되어, 주 미디어 스트림이 출력된다. 아울러, 시간 T0에서, 트리거링 이벤트(501)로 인해 보충 미디어 스트림(504)은 보충 미디어 세그먼트(512)를 동기하여 출력하게 된다. 시간 T1에서, 트리거링 이벤트(503)로 인해 컴파일된 미디어 스트림(506)은 중단 세그먼트(510)에 의해 도시된 바와 같이 컴파일된 미디어 세그먼트를 비동기로 출력하게 된다. 도5에서 도시된 바와 같이, 컴파일된 미디어 세그먼트(508)는 컴파일된 주 미디어 세그먼트(516) 및 컴파일된 보충 미디어 세그먼트(518)를 포함한다.
타이밍 다이어그램(500)에 따르면, 주 미디어 스트림(502)의 시간 T1에 대응하는 시간 C0에서, 컴파일된 주 미디어 스트림(516)이 출력된다. 시간 C1에서, 트리거링 이벤트(509)로 인해 컴파일된 보충 미디어 스트림(518)은 컴파일된 미디어 세그먼트(520)을 동기하여 출력하게 된다. 시간 C3에서, 트리거링 이벤트(511)로 인해 컴파일된 보충 미디어 스트림(518)은 컴파일된 미디어 세그먼트(522)를 비동기로 출력하게 된다. 컴파일된 미디어 세그먼트(522)가 비동기로 출력되기 때문에, 컴파일된 주 미디어 스트림(516)는 중단 세그먼트(524)에 의해 표시된 바와 같이 일시 중단된다. 컴파일된 미디어 세그먼트(522)가 완료될 때, 트리거링 이벤트(513)로 인해 컴파일된 주 미디어 스트림(516)은 재개시되게 된다. 시간 C4에서, 컴파일된 주 미디어 스트림(516)은 종료된다. 컴파일된 주 미디어 스트림(516)의 종료는 컴파일된 미디어 스트림(508)의 종료를 의미한다. 따라서, 트리거링 이벤트(505)가 발생되어 주 미디어 스트림(502)은 그 출력을 재개시하게 된다. 시간 T3에서, 트리거링 이벤트(507)가 발생되어 보충 미디어 스트림(504)은 미디어 세그먼트(514)를 동기하여 출력하게 된다.
도6은 본 발명에 따라 하나 이상의 보충 미디어 스트림과 함께 주 미디어 스트림을 출력하기 위한 예시적인 출력 미디어 스트림 루틴(600)을 도시하는 플로우 다이어그램이다. 블럭(602)에서 시작되어, 주 미디어 스트림이 출력된다. 주 미디어 스트림은 예시적 루틴(600)이 지속되는 동안 지속적으로 출력된다는 것이 당업자에 의해 인식될 것이다. 따라서, 주 미디어 스트림이 출력되는 동안, 블럭(604)에서, 이벤트가 발생하는 동안 루틴(600)은 트리거링 이벤트 또는 주 미디어 스트림의 끝을 나타내는 이벤트를 대기/모니터링한다. 이벤트를 수신한 후, 이벤트가 주 미디어 스트림의 끝을 나타내는 이벤트인 지의 여부가 결정 블럭(606)에서 결정된다. 이벤트가 주 미디어 스트림의 끝을 나타내는 경우, 루틴(600)은 종료된다.
결정 블럭(606)에서, 이벤트가 주 미디어 스트림의 끝을 나타내지 않는 경우, 이벤트는 보충 미디어 스트림에 대한 트리거링 이벤트이다. 블럭(608)에서, 트리거링 이벤트와 관련된 이러한 보충 미디어 스트림의 식별이 결정된다. 결정 블럭(610)에서, 출력되지 않은 관련된 임의의 보충 미디어 스트림이 존재하는 지의 여부가 결정된다. 처리할 보다 많은 보충 미디어 스트림이 존재하는 경우, 블럭(612)에서, 다음의 관련된 보충 미디어 스트림이 선택된다. 전술한 바와 같이, 보충 미디어 스트림을 출력하기 위한 소정의 순서가 구현될 수 있다. 대안으로서, 관련된 보충 미디어 스트림의 선택은 각각의 관련된 보충 미디어 스트림 또는 개별 보충 미디어 세그먼트의 우선 값에 기초할 수 있다. 관련된 보충 미디어 스트림 사이에서 다른 여러 선택 방법들이 존재하고, 본 발명은 예시적 용도로 기술된 것에 제한되어서는 안된다는 것이 당업자에 의해 인식될 것이다.
블럭(614)에서, 출력 보충 미디어 스트림 서브루틴은 선택된 보충 미디어 스트림을 출력하도록 요청된다. 도7a, 7b 및 7c에서 이러한 서브루틴에 대해 보다 상세하게 설명되어 있다.
도7a, 7b 및 7c는 도6에서 도시된 예시적 출력 미디어 스트림 루틴(600)에서 사용되는 출력 보충 미디어 스트림 서브루틴(700)을 도시한 플로우 다이어그램이다. 블럭(702)에서 시작되어(도7a), 주 미디어 스트림이 일시 중단되는 지의 여부, 즉 보충 미디어 스트림이 동기 또는 비동기로 출력되는 지의 여부가 결정된다. 주 미디어 스트림이 일시 중단되는 경우, 결정 블럭(704)에서 주 미디어 스트림이 이미 일시 중단되었는 지의 여부가 결정된다. 주 미디어 스트림이 아직 일시 중단되지 않은 경우(이러한 서브루틴(700)이 관련된 제1 보충 미디어 스트림의 출력 요청을 받는 경우일 수 있기 때문에), 블럭(706)에서 주 미디어 스트림이 일시 중단된다. 그 후에, 서브루틴(700)은 결정 블럭(712)으로 진행된다. 반대로, 결정 블럭(704)에서 주 미디어 스트림이 이미 일시 중단된 경우, 서브루틴(700)은 결정 블럭(712)로 직접 진행된다.
결정 블럭(702)에서 주 미디어 스트림이 일시 중단되지 않은 경우, 결정 블럭(708)에서 상기 주 스트림이 동시에 일시 중단되는 지의 여부가 결정된다. 주 미디어 스트림이 일시 중단된 경우(이러한 서브루틴(700)이 관련된 제2 보충 미디어 스트림의 출력을 요청받는 경우일 수 있기 때문에), 블럭(710)에서 주 미디어 스트림이 재개시된다. 다음으로, 서브루틴(700)은 결정 블럭(712)으로 진행된다. 반대로, 결정 블럭(708)에서 주 미디어 스트림이 일시 중단되지 않는 경우, 서브루틴(700)은 결정 블럭(712)으로 직접 진행된다.
결정 블럭(712)에서 보충 미디어 스트림이 컴파일된 미디어 스트림인 지의 여부가 결정된다. 보충 미디어 스트림이 컴파일된 미디어 스트림인 경우, 블럭(714)에서, 컴파일된 미디어 스트림이 출력된다. 도시된 서브루틴(700)에 따르면, 출력 미디어 스트림 루틴(600)(도6)은 컴파일된 미디어 스트림을 출력하도록 반복적으로 요청받는다. 컴파일된 미디어 스트림을 출력한 후에, 서브루틴(700)은 결정 블럭(728)(도7c)으로 진행된다.
결정 블럭(712)에서 보충 미디어 스트림이 컴파일된 미디어 스트림이 아닌 경우, 블럭(716)(도7b)에서 보충 미디어 스트림이 출력된다. 보충 미디어 스트림이 출력되는 동안, 블럭(718)에서 서브루틴(700)은 조건부 이벤트의 발생 또는 선택적으로 보충 미디어 스트림을 나타내는 이벤트의 출력의 종료를 위해 모니터링/대기된다. 결정 블럭(712)에서 검출된 이벤트가 조건부 이벤트인 지의 여부가 결정된다. 상기 이벤트가 조건부 이벤트가 아닌 경우, 블럭(722)에서 보충 미디어 스트림이 그 출력을 완료했는 지의 여부가 결정된다. 보충 미디어 스트림이 그 출력을 완료하지 않은 경우, 서브루틴(700)은 블럭(718)으로 복귀하여 다른 이벤트를 모니터링/대기한다. 그러나, 상기 이벤트가 보충 미디어 스트림이 그 출력을 완료하지 않은 것을 나타내는 경우, 서브루틴(700)은 결정 블럭(728)(도7c)으로 진행된다.
반대로, 결정 블럭(720)에서 상기 이벤트가 조건부 이벤트인 경우, 결정 블럭(724)에서 상기 조건이 일치하는 지의 여부가 결절된다. 상기 조건이 일치하는경우, 블럭(726)에서 조건부의 보충 미디어 스트림이 출력된다. 다음으로, 이 프로세스는 블럭(718)으로 복귀하여 다른 이벤트를 모니터링/대기한다. 그러나, 결정 블럭(724)에서 상기 조건이 일치하지 않는 경우, 조건부 이벤트는 무시되고 이 프로세스는 블럭(718)으로 복귀하여 다른 이벤트를 모니터링/대기한다.
결정 블럭(728)(도7c)에서 트리거링 이벤트와 관련된 임의의 보충의 보충 미디어 스트림이 존재하는 지의 여부가 결정된다. 보충의 관련된 보충 미디어 스트림이 존재하는 경우, 블럭(730)에서 이러한 출력 보충 스트림 서브루틴(700)을 요청함으로써 다음의 보충 스트림이 반복적으로 출력된다. 다음으로, 서브루틴(700)이 종료된다. 반대로, 결정 블럭(728)에서 관련된 보충 미디어 스트림이 그 뿐이라면, 결정 블럭(734)에서 주 미디어 스트림이 일시 중단되는 지의 여부가 결정된다. 주 미디어 스트림이 일시 중단되는 경우, 블럭(736)에서 상기 주 스트림이 재개시된다. 그 후에, 서브루틴(700)은 종료된다. 그러나, 결정 블럭(734)에서 주 미디어 스트림이 일시 중단되지 않는 경우, 서브루틴(700)은 종료된다.
도8은 본 발명에 따라 형성된 예시적 출력 미디어 시스템(800)을 도시한 블럭 다이어그램이다. 상기 시스템은 하나의 주 미디어 스트림 및 하나 이상의 보충 미디어 스트림을 출력하기 위한 주 미디어 스트림 출력 디바이스(802)를 포함한다. 이 다이어그램이 미디어 스트림의 시각적 묘사만을 나타낼 수 있지만, 이것은 설명을 위한 것일 뿐 본 발명에 제한되도록 구현되어서는 안된다. 하나의 실시예에 따르면, 미디어 스트림 출력 디바이스(802)는 시각 및 청각적 미디어 스트림 모두를 출력할 수 있다. 아울러, 미디어 스트림 출력 디바이스(802)는 디스플레이 디바이스 및 스피커 등의 다수의 컴포넌트로 구성될 수 있다.
일례에 따르면, 미디어 스트림 출력 디바이스(802)는 미디어 스트림 출력 제어기(804)에 접속된다. 미디어 스트림 출력 제어기(804)는 주 미디어 스트림(806) 및 관련된 보충 미디어 스트림(808, 810)을 얻어서, 이들을 상기 미디어 출력 디바이스(802)로 향하게 한다. 일례에 따르면, 미디어 스트림 출력 디바이스(802)는 디스플레이 뷰(812)에서 주 미디어 스트림(806)을 출력하지만, 보충 미디어 스트림(808, 810)은 보충 디스플레이 뷰(814, 816)에서 디스플레이된다. 일례에서 도시된 바와 같이, 보충 미디어 스트림(808, 810)은 동일한 디스플레이 뷰에서 디스플레이 되지 않는다. 그러나, 다른 실시예에 따르면, 이러한 스트림은 동일한 보충 디스플레이 뷰에서 디스플레이 될 수 있다. 아울러, 일례에 따르면, 주 미디어 스트림(806) 및 보충 미디어 스트림(808, 810)은 미디어 스트림 출력 제어기(804)에 입력되는 개별 스트림들로서 도시된다. 그러나, 이것은 단지 설명을 위한 것이자, 본 발명에 제한되도록 구현되어서는 안된다. 하나의 실시예에 따르면, 주 미디어 스트림 및 보충 미디어 스트림은 하나의 스트림으로서 미디어 스트림 출력 제어기(804)에 의해 얻어진다. 본 발명의 바람직한 실시예가 예시되고 기술되었지만, 본 발명의 기술적 사상 및 권리 범위 내에서 다양한 변화가 이루어질 수 있다는 것이 이해될 것이다.
본 발명은 주 미디어 스트림과 함께 보충 미디어 스트림을 공급하고 주 미디어 스트림을 선택적으로 일시 중단시켜 보충 미디어 스트림이 특정 이벤트에 관련된 콘텐츠를 전부 나타낼 수 있는 작용 효과를 나타냅니다.

Claims (32)

  1. 감각이 손상된 사람들에게 도움이 되도록 설계된 하나 이상의 보충 미디어 스트림을 주 미디어 스트림과 함께 출력하기 위한 방법에 있어서,
    상기 주 미디어 스트림을 출력하면서 트리거링 이벤트들을 반복하여 모니터링하고 검출하는 단계를 포함하며,
    상기 트리거링 이벤트 검출시,
    상기 하나 이상의 보충 미디어 스트림이 상기 트리거링 이벤트와 관련되는 지의 여부를 결정하는 단계;
    상기 관련된 보충 미디어 스트림 각각이 상기 주 미디어 스트림과 동기 또는 비동기로 출력되는 지의 여부를 상기 관련된 보충 미디어 스트림 각각에 대해 결정하는 단계; 및
    사전 결정의 결과에 따라 상기 주 미디어 스트림과 동기 또는 비동기로 상기 관련된 보충 미디어 스트림 각각을 반복하여 출력하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서, 상기 관련된 보충 미디어 스트림은 상기 관련된 보충 미디어 스트림들 사이에서 소정의 순서에 따라 반복적으로 출력되는 방법.
  3. 제2항에 있어서, 상기 관련된 보충 미디어 스트림들 사이의 상기 소정의 순서는 상기 각각의 보충 미디어 스트림과 관련된 우선값에 따라 구현되는 방법.
  4. 제1항에 있어서, 상기 관련된 보충 미디어 스트림이 비동기로 출력되는 동안 상기 주 미디어 스트림을 일시 중단시키는 단계를 더 포함하는 방법.
  5. 제4항에 있어서, 상기 관련된 보충 미디어 스트림이 비동기로 출력될 때 동시에 출력되는 제2 보충 미디어 스트림을 종료하는 단계를 더 포함하는 방법.
  6. 제4항에 있어서, 상기 관련된 보충 미디어 스트림을 비동기로 출력한 후에 상기 주 미디어 스트림의 출력을 재개시하는 단계를 더 포함하는 방법.
  7. 제6항에 있어서, 상기 주 미디어 스트림의 타이밍에 따라 상기 트리거링 이벤트 발생되는 방법.
  8. 제7항에 있어서, 상기 주 미디어 스트림이 일시 중단될 때 상기 주 미디어 스트림의 타이밍이 일시 중단되는 방법.
  9. 제1항에 있어서, 상기 제1의 관련된 보충 미디어 스트림이 그 출력을 종료할 때 제1의 관련된 보충 미디어 스트림이 반복적으로 제2의 관련된 보충 미디어 스트림이 출력되도록 하는 방법.
  10. 제1항에 있어서, 관련된 보충 미디어 스트림이 조건부 트리거링 이벤트를 발생시켜 조건부 보충 미디어 스트림이 상기 관련된 보충 미디어 스트림과 동기하여 출력되는 방법.
  11. 제10항에 있어서, 상기 관련된 보충 미디어 스트림에 대한 외부 조건에 따라 상기 관련된 보충 미디어 스트림이 상기 조건부 트리거링 이벤트를 선택적으로 발생시키는 방법.
  12. 제1항에 있어서, 상기 하나 이상의 보충 미디어 스트림이 상기 트리거링 이벤트와 관련되는 지의 여부를 결정하는 단계는, 외부 조건에 따라, 상기 트리거링 이벤트와 관련되지 않는 보충 미디어 스트림을 선택적으로 제외하는 단계를 포함하는 방법.
  13. 제12항에 있어서, 상기 외부 조건은 상기 타입의 보충 미디어 스트림을 선택적으로 제외되는 것을 확인하는 방법.
  14. 제1항에 있어서, 상기 보충 미디어 스트림은 오디오 디스크립션 스트림, 비쥬얼 디스크립션 스트림 또는 컴파일된 미디어 스트림을 포함하는 방법.
  15. 제14항에 있어서, 상기 컴파일된 미디어 스트림은 컴파일된 주 미디어 스트림 및 상기 컴파일된 미디어 스트림과 관련된 하나 이상의 컴파일된 보충 미디어 스트림을 포함하는 방법.
  16. 제15항에 있어서, 상기 컴파일된 미디어 스트림을 출력하는 단계는:
    상기 컴파일된 주 미디어 스트림을 출력하면서 컴파일된 트리거링 이벤트를 반복하여 모니터링하고 검출하는 단계를 포함하며,
    상기 컴파일된 트리거링 이벤트 검출시,
    상기 하나 이상의 컴파일된 보충 미디어 스트림들이 상기 컴파일된 트리거링 이벤트와 관련되는 지의 여부를 결정하는 단계;
    상기 관련된 컴파일된 보충 미디어 스트림 각각이 상기 컴파일된 주 미디어 스트림과 동기 또는 비동기로 출력되는 지의 여부를 상기 관련된 컴파일된 보충 미디어 스트림 각각에 대해 결정하는 단계; 및
    사전 결정의 결과에 따라 상기 컴파일된 주 미디어 스트림과 동기 또는 비동기로 상기 관련된 컴파일된 보충 미디어 스트림 각각을 반복하여 출력하는 단계
    를 포함하는 방법.
  17. 제16항에 있어서, 상기 컴파일된 보충 미디어 스트림은 오디오 디스크립션 스트림, 비쥬얼 디스크립션 스트림 또는 컴파일된 미디어 스트림을 포함하는 방법.
  18. 제16항에 있어서, 상기 컴파일된 주 미디어 스트림의 타이밍에 따라 상기 컴파일된 트리거링 이벤트가 발생되는 방법.
  19. 컴퓨터 판독 가능한 매체에 있어서,
    주 미디어 스트림을 출력하면서 트리거링 이벤트들을 반복하여 모니터링하고 검출하는 단계를 포함하며,
    상기 트리거링 이벤트 검출시,
    하나 이상의 보충 미디어 스트림이 상기 트리거링 이벤트와 관련되는 지의 여부를 결정하는 단계;
    상기 관련된 보충 미디어 스트림 각각이 상기 주 미디어 스트림과 동기 또는 비동기로 출력되는 지의 여부를 상기 관련된 보충 미디어 스트림 각각에 대해 결정하는 단계; 및
    사전 결정의 결과에 따라 상기 주 미디어 스트림과 동기 또는 비동기로 상기 각각의 관련된 보충 미디어 스트림을 반복하여 출력하는 단계
    를 포함하는 방법을 수행하기 위한, 컴퓨터에 의해 실행 가능한 명령을 갖는 컴퓨터 판독 가능한 매체.
  20. 제19항에 있어서, 상기 보충 미디어 스트림은 오디오 디스크립션 스트림, 비쥬얼 디스크립션 스트림 또는 컴파일된 미디어 스트림을 포함하고, 상기 컴파일된 미디어 스트림은 컴파일된 주 미디어 스트림 및 상기 컴파일된 미디어 스트림과 관련된 하나 이상의 컴파일된 보충 미디어 스트림을 포함하며, 상기 컴파일된 미디어 스트림을 출력하는 단계는:
    상기 컴파일된 주 미디어 스트림을 출력하면서 컴파일된 트리거링 이벤트를 반복하여 모니터링하고 검출하는 단계를 포함하며,
    상기 컴파일된 트리거링 이벤트 검출시,
    상기 하나 이상의 컴파일된 보충 미디어 스트림들이 상기 컴파일된 트리거링 이벤트와 관련되는 지의 여부를 결정하는 단계;
    관련된 컴파일된 보충 미디어 스트림 각각이 상기 컴파일된 주 미디어 스트림과 동기 또는 비동기로 출력되는 지의 여부를 상기 관련된 컴파일된 보충 미디어 스트림 각각에 대해 결정하는 단계; 및
    사전 결정의 결과에 따라 상기 컴파일된 주 미디어 스트림과 동기 또는 비동기로 상기 관련된 컴파일된 보충 미디어 스트림 각각을 반복하여 출력하는 단계
    를 포함하는 컴퓨터 판독 가능한 매체.
  21. 감각이 손상된 사람들에게 도움이 되도록 설계된 적어도 하나의 보충 미디어 스트림을 주 미디어 스트림과 함께 출력하기 위한 시스템에 있어서,
    상기 주 미디어 스트림 및 상기 적어도 하나의 보충 미디어 스트림을 출력하기 위한 미디어 스트림 출력 디바이스; 및
    상기 미디어 스트림 출력 디바이스에 통신 가능하게 결합되고, 상기 주 미디어 스트림 및 적어도 하나의 보충 미디어 스트림을 수신하고, 상기 미디어 스트림 출력 디바이스를 통해 상기 주 미디어 스트림을 출력하며, 상기 주 미디어 스트림의 출력과 관련된 트리커링 이벤트들을 모니터링하고 검출하기 위한 미디어 스트림 출력 제어기
    를 포함하며,
    상기 미디어 스트림 출력 제어기는, 상기 트리거링 이벤트 검출시,
    상기 적어도 하나의 보충 미디어 스트림들이 상기 검출된 트리거링 이벤트와 관련되는 지의 여부를 결정하는 단계;
    상기 관련된 보충 미디어 스트림 각각이 상기 주 미디어 스트림과 동기 또는 비동기로 출력되는 지의 여부를 상기 관련된 보충 미디어 스트림에 대해 결정하는 단계; 및
    사전 결정의 결과에 따라 상기 주 미디어 스트림과 동기 또는 비동기로, 상기 미디어 스트림 출력 장치를 통해 상기 관련된 보충 미디어 스트림 각각을 반복하여 출력하는 단계
    를 포함하는 시스템.
  22. 제21항에 있어서, 상기 관련된 보충 미디어 스트림이 상기 관련된 보충 미디어 스트림들 사이에서 소정의 순서에 따라 반복하여 출력되는 시스템.
  23. 제22항에 있어서, 각각의 보충 미디어 스트림에 할당된 우선값에 따라 상기 관련된 보충 미디어 스트림들 사이의 상기 소정의 순서가 구현되는 시스템.
  24. 제21항에 있어서, 상기 미디어 스트림 출력 제어기는 또한 상기 관련된 보충 미디어 스트림이 비동기로 출력되면서 상기 주 미디어 스트림을 일시 중단시키는 시스템.
  25. 제24항에 있어서, 상기 미디어 스트림 출력 제어기는 또한 상기 관련된 보충 미디어 스트림이 비동기로 출력될 때 동시에 출력되는 제2의 보충 미디어 스트림을 종료시키는 시스템.
  26. 제24항에 있어서, 상기 미디어 스트림 출력 제어기는 또한 상기 관련된 보충 미디어 스트림을 비동기로 출력한 후에 상기 주 미디어 스트림의 출력을 재개시하는 시스템.
  27. 제21항에 있어서, 제1의 관련된 보충 미디어 스트림에 의해, 그 출력이 종료될 때, 반복하여 제2의 관련된 보충 미디어 스트림이 출력되는 시스템.
  28. 제21항에 있어서, 상기 관련된 보충 미디어 스트림은 조건부 트리거링 이벤트를 발생시켜 조건부 보충 미디어 스트림이 상기 관련된 보충 미디어 스트림과 동기로 출력되게 되는 시스템.
  29. 제28항에 있어서, 상기 관련된 보충 미디어 스트림은 상기 관련된 보충 미디어 스트림에 대한 외부 조건에 따라 상기 조건부 트리거링 이벤트를 선택적으로 발생시키는 시스템.
  30. 제21항에 있어서, 상기 보충 미디어 스트림은 오디오 디스크립션 스트림, 비쥬얼 디스크립션 스트림 또는 컴파일된 미디어 스트림을 포함하는 시스템.
  31. 제30항에 있어서, 상기 컴파일된 미디어 스트림은 컴파일된 주 미디어 스트림 및 상기 컴파일된 미디어 스트림과 관련된 적어도 하나의 컴파일된 보충 미디어 스트림을 포함하는 시스템.
  32. 감각이 손상된 사람들에게 도움이 되도록 설계된 하나 이상의 보충 미디어 스트림들을 주 미디어 스트림과 함께 출력하기 위한 미디어 디스플레이 시스템에 있어서,
    상기 주 미디어 스트림을 출력하는 동안 관련된 트리거링 이벤트들을 모니터링하고 검출하기 위한 모니터링 수단;
    상기 하나 이상의 보충 미디어 스트림들이 검출된 트리거링 이벤트와 관련되는 지의 여부를 선택하기 위한 보충 미디어 스트림 선택 수단;
    상기 관련된 보충 미디어 스트림 각각이 상기 주 미디어 스트림과 동기 또는 비동기로 출력되는 지의 여부를 상기 관련된 보충 미디어 스트림 각각에 대해 결정하기 위한 결정 수단; 및
    상기 결정 수단에 의해 상기 결정 결과에 따라 상기 주 미디어 스트림과 동기 또는 비동기로 상기 관련된 보충 미디어 스트림 각각을 반복하여 출력하고, 상기 관련된 보충 미디어 스트림이 비동기로 출력될 때 동시에 출력되는 임의의 보충 미디어 스트림들을 종료시키며, 상기 관련된 보충 미디어 스트림이 비동기로 출력되는 동안 상기 주 미디어 스트림을 일시 중단시키기 위한 제어 수단
    을 포함하는 미디어 디스플레이 시스템.
KR1020030014785A 2002-12-26 2003-03-10 멀티미디어 캡셔닝 및 오디오 디스크립션용 동기화 메카니즘 KR20040062369A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/330,422 2002-12-26
US10/330,422 US7631326B2 (en) 2002-12-26 2002-12-26 Synchronization mechanism for multimedia captioning and audio description

Publications (1)

Publication Number Publication Date
KR20040062369A true KR20040062369A (ko) 2004-07-07

Family

ID=32469043

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030014785A KR20040062369A (ko) 2002-12-26 2003-03-10 멀티미디어 캡셔닝 및 오디오 디스크립션용 동기화 메카니즘

Country Status (11)

Country Link
US (1) US7631326B2 (ko)
EP (1) EP1434439B1 (ko)
JP (1) JP2004215217A (ko)
KR (1) KR20040062369A (ko)
CN (1) CN100504883C (ko)
AT (1) ATE496486T1 (ko)
BR (1) BR0300436A (ko)
CA (1) CA2420713A1 (ko)
DE (1) DE60335779D1 (ko)
MX (1) MXPA03002790A (ko)
RU (1) RU2301502C2 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100779117B1 (ko) * 2006-10-11 2007-11-27 (주)아이젠데이타시스템 장애인 시청각 지원 시스템
US11461806B2 (en) * 2016-09-12 2022-10-04 Sonobeacon Gmbh Unique audio identifier synchronization system

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7676737B2 (en) 2003-04-10 2010-03-09 Microsoft Corporation Synchronization mechanism and the implementation for multimedia captioning and audio descriptions
US20050203849A1 (en) * 2003-10-09 2005-09-15 Bruce Benson Multimedia distribution system and method
US7941483B2 (en) * 2007-03-28 2011-05-10 Sap Ag Low latency display methods for thin client devices
US8229748B2 (en) * 2008-04-14 2012-07-24 At&T Intellectual Property I, L.P. Methods and apparatus to present a video program to a visually impaired person
US20100091188A1 (en) * 2008-07-11 2010-04-15 Stmicroelectronics Pvt. Ltd. Synchronization of secondary decoded media streams with a primary media stream
US8169483B1 (en) * 2008-10-03 2012-05-01 The United States Of America As Represented By The Secretary Of Agriculture System and method for synchronizing waveform data with an associated video
US8497939B2 (en) * 2008-12-08 2013-07-30 Home Box Office, Inc. Method and process for text-based assistive program descriptions for television
US9185458B2 (en) * 2010-04-02 2015-11-10 Yahoo! Inc. Signal-driven interactive television
US8726305B2 (en) 2010-04-02 2014-05-13 Yahoo! Inc. Methods and systems for application rendering and management on internet television enabled displays
JP5518262B2 (ja) 2010-08-06 2014-06-11 エンパイア テクノロジー ディベロップメント エルエルシー 通信ネットワークの監視
US8707448B2 (en) 2010-11-09 2014-04-22 International Business Machines Corporation Secure distribution of media data
US8543623B2 (en) * 2010-11-09 2013-09-24 International Business Machines Corporation Secure distribution of media data
US8935719B2 (en) 2011-08-25 2015-01-13 Comcast Cable Communications, Llc Application triggering
US9414114B2 (en) 2013-03-13 2016-08-09 Comcast Cable Holdings, Llc Selective interactivity
US11076205B2 (en) * 2014-03-07 2021-07-27 Comcast Cable Communications, Llc Retrieving supplemental content
GB2541785B (en) 2014-05-08 2018-03-28 Mewt Ltd Synchronisation of audio and video playback
GB2525914B (en) 2014-05-08 2018-07-18 Mewt Ltd Synchronisation of audio and video playback
GB2525912B (en) 2014-05-08 2018-02-28 Mewt Ltd Synchronisation of audio and video playback
WO2019007477A1 (en) * 2017-07-03 2019-01-10 Telefonaktiebolaget Lm Ericsson (Publ) 360-DEGREE PERSONALIZED VIDEO DISTRIBUTION METHODS

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05292480A (ja) * 1992-01-16 1993-11-05 Sanyo Electric Co Ltd キャプションデコーダ
WO1995012275A1 (en) * 1993-10-29 1995-05-04 Time Warner Entertainment Co., L.P. System and method for controlling play of multiple versions of same motion picture stored on optical disk
JP2000253312A (ja) * 1999-02-26 2000-09-14 Telecommunication Advancement Organization Of Japan 字幕番組制作方法、及び字幕番組制作システム
JP2000278622A (ja) * 1999-03-23 2000-10-06 Telecommunication Advancement Organization Of Japan 字幕番組受信システム
JP2001339637A (ja) * 2000-05-25 2001-12-07 Canon Inc 画像処理装置及び方法並びに記憶媒体
JP2002010222A (ja) * 2000-06-27 2002-01-11 Toshiba Corp 文字多重放送受信装置
US6483568B1 (en) * 2001-06-29 2002-11-19 Harris Corporation Supplemental audio content system for a cinema and related methods

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020048448A1 (en) * 1993-03-29 2002-04-25 Microsoft Corporation Pausing the display of a television program as a signal including the television program is received
JPH08262965A (ja) * 1995-03-20 1996-10-11 Mitsubishi Electric Corp 語学学習用ポーズ機能付きクローズドキャプションデコーダ
US6240555B1 (en) * 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
US6637032B1 (en) * 1997-01-06 2003-10-21 Microsoft Corporation System and method for synchronizing enhancing content with a video program using closed captioning
US20020007493A1 (en) * 1997-07-29 2002-01-17 Laura J. Butler Providing enhanced content with broadcast video
US6324126B1 (en) * 1998-04-24 2001-11-27 Sony Corporation Method for recording an audio broadcast multiplexed with accompanying program information
US6698020B1 (en) * 1998-06-15 2004-02-24 Webtv Networks, Inc. Techniques for intelligent video ad insertion
JP2000270293A (ja) * 1999-03-18 2000-09-29 Toshiba Corp マルチメディア装置
US6460180B1 (en) * 1999-04-20 2002-10-01 Webtv Networks, Inc. Enabling and/or disabling selected types of broadcast triggers
US6621980B1 (en) 1999-04-23 2003-09-16 Monkeymedia, Inc. Method and apparatus for seamless expansion of media
US6393158B1 (en) * 1999-04-23 2002-05-21 Monkeymedia, Inc. Method and storage device for expanding and contracting continuous play media seamlessly
US7100193B2 (en) * 2000-03-29 2006-08-29 Intellocity Usa, Inc. Rate controlled insertion of asynchronous data into a synchronous stream
ES2431604T3 (es) * 2000-10-11 2013-11-27 United Video Properties, Inc. Sistemas y métodos para complementar multimedia a la carta
MX347698B (es) * 2001-02-21 2017-05-09 United Video Properties Inc Sistemas y metodos para guias de programa interactivas con caracteristicas de grabacion personal.
JP2002290919A (ja) * 2001-03-26 2002-10-04 Denon Ltd 光ディスク再生装置
WO2002093761A1 (en) * 2001-05-11 2002-11-21 Wildseed, Ltd. Method and system for playing boradcasts with a mobile telecommunication device that includes multiple tuners
US20030070169A1 (en) * 2001-10-09 2003-04-10 Beyers Robert J. Triggered media content in a subscriber television system

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05292480A (ja) * 1992-01-16 1993-11-05 Sanyo Electric Co Ltd キャプションデコーダ
WO1995012275A1 (en) * 1993-10-29 1995-05-04 Time Warner Entertainment Co., L.P. System and method for controlling play of multiple versions of same motion picture stored on optical disk
JP2000253312A (ja) * 1999-02-26 2000-09-14 Telecommunication Advancement Organization Of Japan 字幕番組制作方法、及び字幕番組制作システム
JP2000278622A (ja) * 1999-03-23 2000-10-06 Telecommunication Advancement Organization Of Japan 字幕番組受信システム
JP2001339637A (ja) * 2000-05-25 2001-12-07 Canon Inc 画像処理装置及び方法並びに記憶媒体
JP2002010222A (ja) * 2000-06-27 2002-01-11 Toshiba Corp 文字多重放送受信装置
US6483568B1 (en) * 2001-06-29 2002-11-19 Harris Corporation Supplemental audio content system for a cinema and related methods

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100779117B1 (ko) * 2006-10-11 2007-11-27 (주)아이젠데이타시스템 장애인 시청각 지원 시스템
US11461806B2 (en) * 2016-09-12 2022-10-04 Sonobeacon Gmbh Unique audio identifier synchronization system

Also Published As

Publication number Publication date
JP2004215217A (ja) 2004-07-29
CN1512409A (zh) 2004-07-14
DE60335779D1 (de) 2011-03-03
US20040128702A1 (en) 2004-07-01
CA2420713A1 (en) 2004-06-26
BR0300436A (pt) 2004-11-03
EP1434439B1 (en) 2011-01-19
EP1434439A1 (en) 2004-06-30
CN100504883C (zh) 2009-06-24
ATE496486T1 (de) 2011-02-15
AU2003200716A1 (en) 2004-07-15
US7631326B2 (en) 2009-12-08
MXPA03002790A (es) 2005-02-14
RU2301502C2 (ru) 2007-06-20

Similar Documents

Publication Publication Date Title
KR20040062369A (ko) 멀티미디어 캡셔닝 및 오디오 디스크립션용 동기화 메카니즘
US7676737B2 (en) Synchronization mechanism and the implementation for multimedia captioning and audio descriptions
US20170221371A1 (en) Facilitating Facial Recognition, Augmented Reality, and Virtual Reality in Online Teaching Groups
CN101950578B (zh) 一种视频信息添加方法及装置
US8732783B2 (en) Apparatus and method for providing additional information using extension subtitles file
US10397645B2 (en) Real time closed captioning or highlighting method and apparatus
KR102067446B1 (ko) 자막 생성 방법 및 시스템
CN111541913B (zh) 一种拼接屏的视频播放方法、装置、计算机设备和介质
JP5613978B2 (ja) プレゼンテーション制御システム
US20140043531A1 (en) Method and apparatus for synchronizing audio and video streams
US7730390B2 (en) Displaying text of video in browsers on a frame by frame basis
JPH09297748A (ja) メッセージング装置及びメッセージング方法
KR20130029055A (ko) 청각 장애인을 위해 음성 언어를 수화로 번역하기 위한 시스템
US20090006966A1 (en) Creating A Usability Observation Video For A Computing Device Being Studied For Usability
CN111818279A (zh) 字幕的生成方法、展示方法及交互方法
CN113986161A (zh) 一种音视频通信中实时提词的方法和装置
CN102572601A (zh) 一种视频信息显示方法及装置
JP2001268493A (ja) 映像再生装置および映像再生方法ならびに情報記録媒体
US20200026535A1 (en) Converting Presentations into and Making Presentations from a Universal Presentation Experience
CN117336563B (zh) 外挂字幕显示方法、装置、设备、介质及程序产品
CN113709551B (zh) 基于剧本的视频展示方法、装置和存储介质
KR102495597B1 (ko) 시각장애인을 위한 온라인 강의 콘텐츠 제공방법 및 그 사용자 단말
JP2001296852A (ja) 映像表示方法
US20020176692A1 (en) System and method of synchronizing playback of video and user agent content in an optical disc player
JP2000235564A (ja) 遠隔協調研修方法および講師端末と受講生端末の遠隔協調研修プログラムを記録した記録媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application