KR102181994B1 - 송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법 - Google Patents

송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법 Download PDF

Info

Publication number
KR102181994B1
KR102181994B1 KR1020157011985A KR20157011985A KR102181994B1 KR 102181994 B1 KR102181994 B1 KR 102181994B1 KR 1020157011985 A KR1020157011985 A KR 1020157011985A KR 20157011985 A KR20157011985 A KR 20157011985A KR 102181994 B1 KR102181994 B1 KR 102181994B1
Authority
KR
South Korea
Prior art keywords
display position
display
information
designation information
stream
Prior art date
Application number
KR1020157011985A
Other languages
English (en)
Other versions
KR20150090055A (ko
Inventor
이쿠오 츠카고시
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20150090055A publication Critical patent/KR20150090055A/ko
Application granted granted Critical
Publication of KR102181994B1 publication Critical patent/KR102181994B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362—Generation or processing of Service Information [SI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2355—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4821—End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows

Abstract

본 기술은, 화상의 표시 위치를 송신측이 주체적으로 제어 가능하게 한다. 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 송신한다. 컨테이너의 레이어에, 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입한다. 예를 들어 표시 위치 지정 정보는 표시 대상의 스크린을 지정하는 정보이다. 또한 예를 들어 표시 위치 지정 정보는 표시 대상의 스크린 상의 표시 단위를 지정하는 정보이다. 예를 들어 비디오 스트림의 레이어에, 표시 위치 지정 정보에서 지정된 표시 대상의 스크린 상의 표시 단위의 위치를 변경할지 여부를 나타내는 정보를 삽입해도 된다.

Description

송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법 {TRANSMISSION DEVICE, TRANSMISSION METHOD, RECEPTION DEVICE, RECEPTION METHOD, AND RECEPTION DISPLAY METHOD}
본 기술은 송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법에 관한 것이며, 특히 화상의 표시 위치를 송신측이 주체적으로 제어할 수 있도록 한 송신 장치 등에 관한 것이다.
방송이나 네트워크로부터의 복수의 스트림을 멀티 디코딩하고, 멀티 디코딩에 의하여 얻어진 복수의 화상을 하나의 디스플레이에 표시시키는 멀티 화면 표시에 관한 기술이 실현 또는 제안되어 있다.
예를 들어 소위 PinP(Picture in Picture)의 형태로 복수의 화상이 표시됨으로써, 유저는, 서브 화면에 작게 표시되는 다른 채널의 프로그램의 화상을 보면서, 메인 화면에 크게 표시되는 어느 채널의 프로그램의 화상을 볼 수 있다. 또한 예를 들어 디스플레이의 우측 절반과 좌측 절반에 상이한 채널의 프로그램의 화상이 나란히 표시됨으로써, 유저는 2개의 채널의 프로그램의 화상을 동시에 볼 수 있다. 예를 들어 특허문헌 1에는, 통상 표시의 상태에 있어서 멀티 화면의 표시가 지시되었을 경우, 멀티 화면으로의 표시의 전환을 신속히 행할 수 있도록 한 기술이 개시되어 있다.
일본 특허 공개 제2000-13712호 공보
종래의 멀티 화면 표시에 사용되는 스트림은 상이한 프로그램의 것인 것이 일반적이다. 예를 들어 상술한 PinP의 형태로의 멀티 화면 표시의 경우, 메인 화면에 표시되는 화상의 소스(source)가 되는 스트림과, 서브 화면에 표시되는 화상의 소스가 되는 스트림은 상이한 프로그램의 것인 경우가 많다.
즉, 메인 화면과 서브 화면에 각각 동일한 프로그램의, 상이한 각도에서 본 화상을 표시시키는 등, 복수의 스트림을 서로 연계시켜 화상을 표시시키는 것을 송신측이 지정하고, 이것에 의하여 유저에게 하나의 프로그램을 제공하는 등의 기능은 없다.
또한 종래의 PinP의 멀티 화면 표시로 하든, 좌측 절반과 우측 절반에 나란히 화상을 표시시키는 멀티 화면 표시로 하든, 그 표시의 방법은 표시 장치측의 실장에 의존하고 있으며, 제공측이 지정하는 것은 아니다.
향후, 풀 HD(High Definition) 이상의 해상도를 갖는 디스플레이가 보급되면, 하나의 디스플레이에 복수의 화상을 표시시킴으로써 하나의 프로그램을 제공하는 방송이 행해질 경우가 생각된다. 또한 이때, 화상의 표시 방법에 대하여 프로그램의 송신측이 주체적으로 제어를 행할 수 있게 하고 싶다는 등의 수요가 나올 것이라 생각된다.
본 기술의 목적은, 화상의 표시 위치를 송신측이 주체적으로 제어 가능하게 하는 데 있다.
본 기술의 개념은,
화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 송신하는 송신부와,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는 정보 삽입부를 구비하는
송신 장치에 있다.
본 기술에 있어서, 송신부에 의하여, 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너가 송신된다. 예를 들어 컨테이너는 디지털 방송 규격으로 채용되고 있는 트랜스포트 스트림(MPEG-2TS)이어도 된다. 또한 예를 들어 컨테이너는 인터넷의 배신(配信) 등에서 사용되는 MP4, 또는 그 이외의 포맷의 컨테이너여도 된다.
정보 삽입부에 의하여 컨테이너의 레이어에, 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입된다. 예를 들어 컨테이너는 트랜스포트 스트림이고, 정보 삽입부는 표시 위치 지정 정보를, 트랜스포트 스트림에 포함되는 프로그램 맵 테이블의 비디오 엘리멘터리 루프의 관리 하의 디스크립터에 삽입하도록 되어도 된다.
예를 들어 표시 위치 지정 정보는 표시 대상의 스크린을 지정하는 정보여도 된다. 또한 예를 들어 표시 위치 지정 정보는 표시 대상의 스크린 상의 표시 단위를 지정하는 정보여도 된다. 이 경우, 표시 위치 지정 정보에는, 표시 대상 스크린에서의 표시 해상도 모델을 나타내는 정보가 부가됨과 함께, 이 표시 해상도 모델에서 지정된 해상도 좌표에서의 표시 위치 정보가 부가되도록 되어도 된다.
그리고 예를 들어 정보 삽입부는 또한, 비디오 스트림의 레이어에, 표시 위치 지정 정보에서 지정된 표시 대상 스크린 상의 표시 단위의 위치를 변경할지 여부를 나타내는 정보와, 이 정보가 변경되는 것을 나타낼 때, 이 표시 단위의 표시 위치 정보를 삽입하도록 되어도 된다. 이 경우, 표시 대상의 스크린 상의 표시 단위를 다이나믹하게 변경하는 것이 가능해진다.
이와 같이 본 기술에 있어서는, 컨테이너의 레이어에, 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입되는 것이다. 그로 인하여, 화상의 표시 위치를 송신측이 주체적으로 제어하는 것이 가능해진다.
또한 본 기술에 있어서, 예를 들어 표시 위치 지정 정보에는, 이 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치에의 표시를 허용할지 여부를 나타내는 정보가 부가되도록 되어도 된다. 이 경우, 이 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치에의 표시를 허용할지 여부를 송신측이 주체적으로 제어하는 것이 가능해진다.
또한 본 기술에 있어서, 예를 들어 송신부가 송신하는 컨테이너에는 자막 데이터가 부호화되어 얻어진 자막 스트림이 더 포함되고, 정보 삽입부는 또한, 컨테이너의 레이어에, 자막 데이터에 의한 자막의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하도록 되어도 된다. 이 경우, 자막의 표시 위치를 송신측이 주체적으로 제어하는 것이 가능해진다.
또한 본 기술에 있어서, 예를 들어 송신부가 송신하는 컨테이너에는 전자 프로그램표 정보가 더 포함되고, 정보 삽입부는 또한, 컨테이너의 레이어에, 전자 프로그램표 정보에 의한 프로그램표의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하도록 되어도 된다. 이 경우, 프로그램표의 표시 위치를 송신측이 주체적으로 제어하는 것이 가능해진다.
또한 본 기술의 다른 개념은,
화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 수신하는 수신부를 구비하고,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입되어 있으며,
상기 화상 데이터에 의한 화상이 상기 표시 위치 지정 정보에서 지정된 표시 위치에 표시되도록 상기 비디오 스트림의 처리를 제어하는 표시 제어부를 더 구비하는
수신 장치에 있다.
본 기술에 있어서, 수신부에 의하여, 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너가 수신된다. 이 컨테이너의 레이어에는, 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입되어 있다. 예를 들어 컨테이너는 디지털 방송 규격으로 채용되고 있는 트랜스포트 스트림(MPEG-2TS), 인터넷의 배신 등에서 사용되는 MP4, 또는 그 이외의 포맷의 컨테이너여도 된다. 표시 제어부에 의하여, 화상 데이터에 의한 화상이 표시 위치 지정 정보에서 지정된 표시 위치에 표시되도록 비디오 스트림의 처리가 제어된다.
예를 들어 비디오 스트림을 복호화하여 비압축 화상 데이터를 얻는 복호화부와, 이 비압축 화상 데이터를, 표시 제어부의 제어에 의하여, 표시 위치 지정 정보에서 지정되는 표시 대상 스크린을 갖는 표시 기기에 송신하는 송신부를 더 구비하고, 송신부는 비압축 화상 데이터의 프레임마다의 헤더 정보에, 프레임 단위로 카운트하는 타임 코드를 삽입하도록 되어도 된다. 또한 예를 들어 컨테이너를, 표시 제어부의 제어에 의하여, 표시 위치 지정 정보에서 지정되는 표시 대상 스크린을 갖는 표시 기기에 송신하는 송신부를 더 구비하도록 되어도 된다.
이와 같이 본 기술에 있어서는, 화상 데이터에 의한 화상이 표시 위치 지정 정보에서 지정된 표시 위치에 표시되도록 비디오 스트림의 처리가 제어되는 것이다. 그로 인하여, 화상의 표시 위치는 송신측의 제어에 기초한 것으로 되어, 송신측이 의도한 표시 위치에 화상을 표시할 수 있다.
또한 본 기술의 또 다른 개념은,
화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 수신하고,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입되어 있으며,
적어도 상기 표시 위치 지정 정보를 포함하는 판단 정보에 기초하는 판단에 의하여, 상기 화상 데이터에 의한 화상을, 상기 표시 위치 지정 정보에서 지정되는 표시 위치, 또는 상기 표시 위치 지정 정보에서 지정된 표시 위치와는 상이한 표시 위치에 배치하는
수신 표시 방법에 있다.
본 기술에 의하면, 화상의 표시 위치를 송신측이 주체적으로 제어할 수 있다.
도 1은 본 기술의 실시 형태로서의 화상 송수신 시스템의 구성예를 도시하는 블록도이다.
도 2는 스크린 ID 테이블과, 스크린 ID(Screen ID)와 스트림 스크린 ID(Stream_screen_ID)의 대응 관계를 나타내는 테이블의 일례를 나타내는 도면이다.
도 3은 8개의 스크린 디바이스로 구성되는 기본 스크린의 배치예를 도시하는 도면이다.
도 4는 다중 배신 서비스의 스트림이 단일의 컨테이너에서 배신되는 경우의 화상 표시예를 도시하는 도면이다.
도 5는 다중 배신 서비스의 스트림이 단일의 컨테이너에서 배신되는 경우의 다른 화상 표시예를 도시하는 도면이다.
도 6은 다중 배신 서비스의 스트림이 단일의 컨테이너에서 배신되는 경우의 다른 화상 표시예를 도시하는 도면이다.
도 7은 다중 배신 서비스의 스트림이 단일의 컨테이너에서 배신되는 경우의 다른 화상 표시예를 도시하는 도면이다.
도 8은 윈도우 ID(window_id)에 의하여 스트림끼리의 표시 매칭이 행해지는 경우의 표시예를 도시하는 도면이다.
도 9는 윈도우 ID(window_id)에 의하여 스트림끼리의 표시 매칭이 행해지는 경우의 다른 표시예를 도시하는 도면이다.
도 10은 윈도우 ID(window_id)에 의하여 스트림끼리의 표시 매칭이 행해지는 경우의 다른 표시예를 도시하는 도면이다.
도 11은 표시 허용 정보가, 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치(스크린, 윈도우)에의 표시를 허용하는 것을 나타내고 있는 경우에 있어서의 표시 천이의 일례를 도시하는 도면이다.
도 12는 송신 장치의 트랜스포트 스트림 TS를 생성하는 송신 데이터 생성부의 구성예를 도시하는 블록도이다.
도 13은 표시 위치 지정 정보로서의 디스플레이 윈도우 포지셔닝 디스크립터(display_window_positioning descriptor)의 구조예(Syntax)를 나타내는 도면이다.
도 14는 디스플레이 윈도우 포지셔닝 디스크립터(display_window_positioning descriptor)의 구조예에 있어서의 주요한 정보의 내용(Semantics)을 나타내는 도면이다.
도 15는 배신 서비스 정보로서의 멀티 윈도우즈 서비스 디스크립터(multi_windows_service_descriptor)의 구조예(Syntax)와, 그 주요한 정보의 내용(Semantics)을 나타내는 도면이다.
도 16은 윈도우 애트리뷰트 SEI 메시지(window_attribute SEI message)가 액세스 유닛의 "SELs"의 부분에 삽입되는 것을 설명하기 위한 도면이다.
도 17은 「window_attribute SEI message」의 구조예(Syntax)를 나타내는 도면이다.
도 18은 「window_attribute_sei()」의 구조예(Syntax)를 나타내는 도면이다.
도 19는 「window_attribute_sei()」의 구조예에 있어서의 주요한 정보의 내용(Semantics)을 나타내는 도면이다.
도 20은 트랜스포트 스트림 TS의 구성예를 도시하는 도면이다.
도 21은 수신 장치의 구성예를 도시하는 블록도이다.
도 22는 화상 송수신 시스템의 다른 구성예를 도시하는 블록도이다.
도 23은 수신 장치 및 표시 기기의 구성예를 도시하는 블록도이다.
도 24는 화상 송수신 시스템의 다른 구성예를 도시하는 블록도이다.
도 25는 비압축 화상 데이터 등의 헤더 정보에 타임 코드를 삽입하는 것을 설명하기 위한 도면이다.
도 26은 수신 장치의 구성예를 도시하는 블록도이다.
도 27은 화상 송수신 시스템의 다른 구성예를 도시하는 블록도이다.
도 28은 표시 기기의 구성예를 도시하는 블록도이다.
도 29는 복수의 컨테이너에서 복수의 서비스 스트림이 공급되는 경우를 설명하기 위한 도면이다.
도 30은 복수의 컨테이너에서 복수의 서비스 스트림이 공급되는 경우를 설명하기 위한 도면이다.
도 31은 복수의 컨테이너에서 복수의 서비스 스트림이 공급되는 경우에 있어서의 화상 표시의 일례를 도시하는 도면이다.
이하, 발명을 실시하기 위한 구체적인 내용(이하, 「실시 형태」라고 함)에 대하여 설명한다. 또한 설명을 이하의 순서로 행한다.
1. 실시 형태
2. 변형예
<1. 실시 형태>
[화상 송수신 시스템의 구성예]
도 1은 실시 형태로서의 화상 송수신 시스템(10)의 구성예를 도시하고 있다. 이 화상 송수신 시스템(10)은 송신 장치(100), 수신 장치(200) 및 M개의 스크린 디바이스(300-1 내지 300-M)에 의하여 구성되어 있다.
송신 장치(100)는 방송국 등의 화상 데이터 송신측에 설치되는 장치이다. 송신 장치(100)는, 각각 화상 데이터가 부호화되어 얻어진 소정 수의 비디오 스트림을 포함하는 트랜스포트 스트림 TS를, 방송파를 통하거나 또는 네트워크를 통하여 송신한다. 여기서, 트랜스포트 스트림은 컨테이너를 구성하고 있다.
이 트랜스포트 스트림 TS의 레이어에, 비디오 스트림마다 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입된다. 이 표시 위치 지정 정보는, 예를 들어 표시 대상 스크린 및/또는 표시 대상 스크린 상의 표시 단위(윈도우)를 지정하는 정보이다. 이 표시 위치 지정 정보는, 예를 들어 트랜스포트 스트림 TS에 포함되는 프로그램 맵 테이블(PMT: Program Map Table)의 비디오 엘리멘터리 루프(Video ES loop)의 관리 하에 삽입된다. 이 표시 위치 지정 정보의 상세에 대해서는 후술한다.
여기서, 표시 대상 스크린 상의 표시 단위(윈도우)를 지정하는 정보가 삽입되는 경우, 이 표시 위치 지정 정보에는, 표시 대상 스크린에서의 표시 해상도 모델을 나타내는 정보가 부가됨과 함께, 이 표시 해상도 모델에서 지정된 해상도 좌표에서의 표시 위치 정보가 부가된다. 예를 들어 표시 해상도 모델로서 1920(H)*1080(V), 3840(H)*2160(V), 7680(H)*4320(V) 등이 나타난다. 또한 예를 들어 표시 위치 지정 정보에서는, 표시 단위(윈도우)의 개시 수평 수직 위치의 좌표와 종료 수평 수직 위치의 좌표가 나타난다.
또한 이 표시 위치 지정 정보에는, 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치(스크린, 윈도우)에의 표시를 허용할지 여부를 나타내는 표시 허용 정보가 부가된다.
또한 트랜스포트 스트림 TS의 레이어에, 소정의 비디오 스트림에 대응시켜 표시 대상 스크린 상의 표시 단위(윈도우)를 지정하는 표시 위치 지정 정보가 삽입되는 경우, 그 소정의 비디오 스트림의 레이어에, 그 표시 단위(윈도우)의 위치를 변경할지 여부를 나타내는 위치 변경 정보가 삽입된다. 이 경우, 이 위치 변경 정보가 변경되는 것을 나타낼 때, 표시 해상도 모델에서 지정된 해상도 좌표에서의 표시 위치 정보가 더 삽입된다. 이들 정보는, 예를 들어 비디오 스트림의 픽처 헤더 또는 시퀀스 헤더의 유저 데이터 영역에 삽입된다. 이들 정보의 상세에 대해서는 후술한다.
또한 트랜스포트 스트림 TS에 자막 데이터가 부호화되어 얻어진 자막 스트림이 더 포함된다. 그리고 이 트랜스포트 스트림 TS의 레이어에, 자막 데이터에 의한 자막의 표시 위치를 지정하는 표시 위치 지정 정보가 더 삽입된다. 또한 트랜스포트 스트림 TS에 전자 프로그램표 정보(EPG 정보)가 더 포함된다. 그리고 이 트랜스포트 스트림 TS의 레이어에, 전자 프로그램표 정보에 의한 프로그램표의 표시 위치를 지정하는 표시 위치 지정 정보가 더 삽입된다.
수신 장치(200)는 송신 장치(100)로부터 보내져 오는 트랜스포트 스트림 TS를, 방송파를 통하거나 또는 네트워크를 통하여 수신한다. 수신 장치(200)는, 이 트랜스포트 스트림 TS에 포함되는 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보에 대하여 디코딩 처리를 행하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시용 데이터를 취득한다. 이때, 수신 장치(200)는, 트랜스포트 스트림 TS의 레이어에 삽입되어 있는 비디오 스트림, 그래픽스 스트림, 전자 프로그램 정보에 대응한 표시 위치 지정 정보에 의하여 화상, 그래픽스, 프로그램표의 표시 위치(표시 대상 스크린, 표시 단위(윈도우))를 알 수 있다.
수신 장치(200)는 각 표시용 데이터를, 상술한 표시 위치 지정 정보에 기초하여 스크린 디바이스(300-1 내지 300-M) 중, 대응하는 스크린 디바이스에 선택적으로 공급한다. 이때, 수신 장치(200)는 표시 대상의 스크린 표시 단위(윈도우)에 화상이 정확하게 표시되도록, 표시 해상도 모델에서 지정된 표시 단위(윈도우)의 표시 위치 정보와, 스크린 디바이스의 수직, 수평의 화소 크기 정보에 따라, 화상 데이터에 대하여 적절히 스케일링 처리 등을 실시하여 표시용 화상 데이터를 생성한다.
이때, 수신 장치(200)는, 비디오 스트림의 레이어에 삽입되어 있는 표시 단위(윈도우)의 위치 변경 정보에 의하여, 표시 단위(윈도우)의 위치를 변경할지 여부를 알 수 있다. 그리고 변경하는 경우, 수신 장치(200)는, 이 위치 변경 정보에 부가되어 있는 표시 단위(윈도우)의 표시 위치 정보에 기초하여, 화상 데이터에 대하여 적절히 스케일링 처리 등을 실시하여 표시용 화상 데이터를 생성한다.
또한 수신 장치(200)는, 이 트랜스포트 스트림 TS에 포함되는 자막 스트림을 디코딩하여 표시용 자막 데이터(비트맵 데이터)를 취득한다. 이때, 수신 장치(200)는, 트랜스포트 스트림 TS의 레이어에 삽입되어 있는 자막 스트림에 대응한 표시 위치 지정 정보에 의하여, 자막을 표시하는 표시 대상 스크린 및 표시 단위(윈도우)를 알 수 있다.
수신 장치(200)는 자막 데이터를, 상술한 표시 위치 지정 정보에 기초하여 스크린 디바이스(300-1 내지 300-M) 중, 대응하는 스크린 디바이스에 선택적으로 공급한다. 이때, 수신 장치(200)는 표시 대상 스크린의 표시 단위(윈도우)에 자막이 정확하게 표시되도록, 표시 해상도 모델에서 지정된 표시 단위(윈도우)의 표시 위치 정보와, 스크린 디바이스의 수직, 수평의 화소 크기 정보에 따라, 자막 데이터에 대하여 적절히 스케일링 처리 등을 실시하여 표시용 자막 데이터(비트맵 데이터)를 생성한다.
또한 수신 장치(200)는, 이 트랜스포트 스트림 TS에 포함되는 전자 프로그램표 정보(EPG 정보)에 기초하여 표시용 프로그램표 데이터(비트맵 데이터)를 취득한다. 이때, 수신 장치(200)는, 트랜스포트 스트림 TS의 레이어에 삽입되어 있는 전자 프로그램표 정보에 대응한 표시 위치 지정 정보에 의하여, 전자 프로그램표를 표시하는 표시 대상 스크린 및 표시 단위(윈도우)를 알 수 있다.
수신 장치(200)는 프로그램표 데이터를, 상술한 표시 위치 정보에 기초하여 스크린 디바이스(300-1 내지 300-M) 중, 대응하는 스크린 디바이스에 선택적으로 공급한다. 이때, 수신 장치(200)는 표시 대상의 스크린 표시 단위(윈도우)에 프로그램표가 정확하게 표시되도록, 표시 해상도 모델에서 지정된 표시 단위(윈도우)의 표시 위치 정보와, 스크린 디바이스의 수직, 수평의 화소 크기 정보에 따라, 프로그램표 데이터에 대하여 적절히 스케일링 처리 등을 실시하여 표시용 프로그램표 데이터(비트맵 데이터)를 생성한다.
또한 수신 장치(200)는, 상술한 표시 위치 정보에 부가되어 있는 표시 허용 정보에 의하여, 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치(스크린, 윈도우)에의 표시를 허용할지 여부를 알 수 있다. 수신 장치(200)는, 예를 들어 유저 조작에 의하여, 소정의 스크린 또는 표시 단위(윈도우)에 표시되어 있는 화상 등을 다른 스크린 또는 표시 단위(윈도우)에 표시시키는 지시가 부여될 때, 표시 허용 정보가 허용을 나타낼 때는 표시 천이의 처리를 행한다.
스크린 디바이스(300-1 내지 300-M)는 각각 소정 위치에 배치되는 기본 스크린을 구성한다. 스크린 디바이스(300-1 내지 300-M)는 각각 액정 표시 패널, 유기 EL 표시 패널 등을 포함한다. 수신 장치(200)는 미리 각 기본 스크린에 스크린 ID(Screen ID)를 할당하여 스크린 ID 테이블(screen_id Table)을 작성한다.
도 2의 (a)는 스크린 ID 테이블의 일례를 나타내고 있다. 예를 들어 전방 중앙(Forward Center)에 배치되는 기본 스크린에 대해서는 「Screen ID=1」로 된다. 또한 예를 들어 전방 좌측(Forward Left)에 배치되는 기본 스크린에 대해서는 「Screen ID=2」로 된다. 또한 예를 들어 전방 우측(Forward Right)에 배치되는 기본 스크린에 대해서는 「Screen ID=3」으로 된다. 도 3은 8개의 스크린 디바이스로 구성되는 기본 스크린의 배치예를 도시하고 있다.
또한 수신 장치(200)는 스크린 ID(Screen ID)와, 트랜스포트 스트림 TS에 삽입되는 표시 위치 지정 정보로서의, 표시 대상 스크린을 지정하는 스트림 스크린 ID(Stream_screen_id)의 대응 관계를 나타내는 테이블을 구비한다. 도 2의 (b)는 그 테이블의 일례를 나타내고 있다. 수신 장치(200)는 이 테이블에 기초하여 화상 데이터, 자막 데이터, 프로그램표 데이터를, 각각 대응하는 기본 스크린에 선택적으로 공급한다.
도 4는 화상 표시의 일례를 도시하고 있다. 이 예는, 트랜스포트 스트림 TS에 3개의 비디오 스트림이 포함되는 경우의 예이다. 이 경우, 제1 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=1」이 삽입되어 있다. 그로 인하여, 이 제1 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=1」의 「스크린 디바이스 1」에 공급되고, 그 스크린에 화상 표시가 이루어진다.
또한 이 경우, 제2 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=2」가 삽입되어 있다. 그로 인하여, 이 제2 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=2」의 「스크린 디바이스 2」에 공급되고, 그 스크린에 화상 표시가 이루어진다.
또한 이 경우, 제3 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=3」이 삽입되어 있다. 그로 인하여, 이 제3 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=3」의 「스크린 디바이스 3」에 공급되고, 그 스크린에 화상 표시가 이루어진다.
도 5는 화상 표시의 다른 예를 도시하고 있다. 이 예는, 트랜스포트 스트림 TS에 5개의 비디오 스트림이 포함되는 경우의 예이다. 이 경우, 제1 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=1」, 「window_id=1」이 삽입되어 있다. 그로 인하여, 이 제1 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=1」의 「스크린 디바이스 1」에 공급되고, 그 스크린의 「w1」의 표시 단위(윈도우)에 화상 표시가 이루어진다.
또한 이 경우, 제2 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=1」, 「window_id=2」가 삽입되어 있다. 그로 인하여, 이 제2 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=1」의 「스크린 디바이스 1」에 공급되고, 그 스크린의 「w2」의 표시 단위(윈도우)에 화상 표시가 이루어진다.
또한 이 경우, 제3 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=1」, 「window_id=3」이 삽입되어 있다. 그로 인하여, 이 제3 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=1」의 「스크린 디바이스 1」에 공급되고, 그 스크린의 「w3」의 표시 단위(윈도우)에 화상 표시가 이루어진다.
또한 이 경우, 제4 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=2」, 「window_id=4」가 삽입되어 있다. 그로 인하여, 이 제4 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=2」의 「스크린 디바이스 2」에 공급되고, 그 스크린의 「w4」의 표시 단위(윈도우)에 화상 표시가 이루어진다.
또한 이 경우, 제5 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=3」, 「window_id=5」가 삽입되어 있다. 그로 인하여, 이 제5 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=3」의 「스크린 디바이스 3」에 공급되고, 그 스크린의 「w5」의 표시 단위(윈도우)에 화상 표시가 이루어진다.
도 6은 화상 표시의 또 다른 예를 도시하고 있다. 이 예는, 트랜스포트 스트림 TS에 4개의 비디오 스트림과, 1개의 자막 스트림(서브타이틀 스트림)이 포함되는 경우의 예이다. 제1 내지 제3 비디오 스트림에 대해서는, 상술한 도 5의 화상 표시예와 마찬가지이므로 그 설명은 생략한다.
이 경우, 자막 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=2」, 「window_id=4」가 삽입되어 있다. 그로 인하여, 이 자막 스트림을 디코딩하여 얻어진 자막 데이터(Subtitle data)는 「Screen ID=2」의 「스크린 디바이스 2」에 공급되고, 그 스크린의 「w4」의 표시 단위(윈도우)에 자막 표시가 이루어진다.
또한 이 경우, 제4 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=3」, 「window_id=5」가 삽입되어 있다. 그로 인하여, 이 제4 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=3」의 「스크린 디바이스 3」에 공급되고, 그 스크린의 「w5」의 표시 단위(윈도우)에 화상 표시가 이루어진다.
도 7은 화상 표시의 다른 예를 도시하고 있다. 이 예는, 트랜스포트 스트림 TS에 4개의 비디오 스트림과, 전자 프로그램표 정보(EPG 정보)가 포함되는 경우의 예이다. 제1 내지 제3 비디오 스트림에 대해서는, 상술한 도 5의 화상 표시예와 마찬가지이므로 그 설명은 생략한다.
이 경우, 전자 프로그램표 정보에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=2」, 「window_id=4」가 삽입되어 있다. 그로 인하여, 이 전자 프로그램표 정보로부터 얻어진 프로그램표 데이터(EPG data)는 「Screen ID=2」의 「스크린 디바이스 2」에 공급되고, 그 스크린의 「w4」의 표시 단위(윈도우)에 프로그램표 표시가 이루어진다.
또한 이 경우, 제4 비디오 스트림에 대응하여 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=3」, 「window_id=5」가 삽입되어 있다. 그로 인하여, 이 제4 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=3」의 「스크린 디바이스 3」에 공급되고, 그 스크린의 「w5」의 표시 단위(윈도우)에 화상 표시가 이루어진다.
또한 복수의 스트림에 대응한 윈도우 ID(window_id)가 동일한 경우, 각각의 스트림에 따른 화상 등은 동일한 표시 단위(윈도우)에 표시된다. 즉, 윈도우 ID(window_id)는 스트림끼리의 표시 매칭을 위하여 정의된다.
도 8은 윈도우 ID(window_id)에 의하여 스트림끼리의 표시 매칭이 행해지는 경우의 표시예를 도시하고 있다. 이 예는, 각각이 다른 뷰 데이터(view data)를 포함하는 복수의 비디오 스트림, 여기서는 2개의 비디오 스트림의 화상을 동일한 표시 영역, 즉, 동일한 표시 단위(윈도우)에 복수 표시시킴으로써, 입체(3D) 표시를 구성하는 경우를 도시하고 있다.
도 9는 윈도우 ID(window_id)에 의하여 스트림끼리의 표시 매칭이 행해지는 경우의 다른 표시예를 도시하고 있다. 이 예는, 하나의 화상을 복수의 비디오 스트림, 여기서는 2개의 비디오 스트림으로 나누어, 동일한 표시 영역, 즉, 동일한 표시 단위(윈도우)에 복수 표시시킴으로써, 고해상도 표시를 구성하는 경우를 나타내고 있다.
도 10은 윈도우 ID(window_id)에 의하여 스트림끼리의 표시 매칭이 행해지는 경우의 또 다른 표시예를 도시하고 있다. 이 예는, 비디오 스트림의 화상과 그래픽스 스트림, 예를 들어 자막 스트림의 자막을 동일한 표시 영역에 표시시키는 경우를 도시하고 있다.
도 11은 표시 허용 정보가, 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치(스크린, 윈도우)에의 표시를 허용하는 것을 나타내고 있는 경우에 있어서의 표시 천이의 일례를 도시하고 있다. 이 예는, 「Screen ID=1」의 「스크린 디바이스 1」의 「w2」의 표시 단위(윈도우)에 표시되어 있는 프로그램표를, 「Screen ID=3」의 「스크린 디바이스 3」의 「w5」의 표시 단위(윈도우)에 표시하도록 표시 천이를 하는 예이다.
예를 들어 표시 해상도 모델이 4K였지만, 「Screen ID=1」의 「스크린 디바이스 1」이 HD 해상도였을 때, 「w2」의 표시 단위(윈도우)에 표시되어 있는 프로그램표는 시청자에게 있어 매우 보이기 어려운 상태로 된다. 그러나 상술한 바와 같이 「스크린 디바이스 3」의 「w5」의 표시 단위(윈도우)에 표시시킴으로써, 프로그램표의 문자를 크기를 크게, 게다가 명료하게 할 수 있다.
또한 도시는 생략하지만, 표시 위치 지정 정보에서는, 복수의 비디오 스트림의 화상을 각각 별개의 스크린 디바이스에 표시시키도록 지정되어 있는 경우, 이들 복수의 화상을 하나의 스크린 디바이스에 통합하여 표시시키는 것도 생각된다. 예를 들어 복수의 스크린 디바이스의 설비가 없는 경우에 유효해진다.
도 12는 송신 장치(100)에 있어서, 상술한 트랜스포트 스트림 TS를 생성하는 송신 데이터 생성부(110)의 구성예를 도시하고 있다. 이 송신 데이터 생성부(110)는 화상 데이터 출력부(111-1 내지 111-N)와 비디오 인코더(112-1 내지 112-N)와 그래픽스 데이터 출력부(113)와 그래픽스 인코더(114)와 멀티플렉서(115)를 갖고 있다.
화상 데이터 출력부(111-1 내지 111-N)는 N개의 화상 데이터를 출력한다. 화상 데이터 출력부(111-1 내지 111-N)는, 예를 들어 피사체를 촬상하여 화상 데이터를 출력하는 카메라, 또는 기억 매체로부터 화상 데이터를 판독하여 출력하는 화상 데이터 판독부 등에 의하여 구성된다. 여기서, N개의 화상 데이터에는, 서로 관련된 소정 수의 화상 데이터를 포함하는 경우도 있다. 예를 들어 입체 화상을 구성하는 소정 수의 뷰의 화상 데이터, 또는 고해상도 화상을 구성하는 소정 수의 화상 데이터 등이다.
비디오 인코더(112-1 내지 112-N)는, 각각 화상 데이터 출력부(111-1 내지 111-N)로부터 출력되는 화상 데이터에 대하여 MPEG4-AVC(MVC), MPEG2video, 또는 HEVC 등의 부호화를 실시하여 부호화 화상 데이터를 얻는다. 또한 비디오 인코더(112-1 내지 112-N)는 각각 후단에 구비하는 스트림 포매터(도시하지 않음)에 의하여, 부호화 화상 데이터를 포함하는 비디오 스트림(비디오 엘리멘터리 스트림)을 생성한다.
그래픽스 데이터 출력부(113)는, 화상에 중첩되거나 또는 단독으로 표시되는 그래픽스(자막으로서의 서브타이틀도 포함함)의 데이터를 출력한다. 그래픽스 인코더(114)는, 그래픽스 데이터 출력부(113)로부터 출력된 그래픽스 데이터를 포함하는 그래픽스 스트림(그래픽스 엘리멘터리 스트림)을 생성한다. 여기서, 그래픽스는 중첩 정보를 구성하며, 예를 들어 로고, 자막 등이다.
멀티플렉서(115)는, 비디오 인코더(112-1 내지 112-N) 및 그래픽스 인코더(114)에서 생성된 각 엘리멘터리 스트림을 패킷화하여 다중화하여, 트랜스포트 스트림 TS를 생성한다. 이 경우, 각각의 PES(Packetized Elementary Stream)의 헤더에는, 수신측에 있어서의 동기 재생을 위하여 PTS(Presentation Time Stamp)가 삽입된다.
멀티플렉서(115)는 트랜스포트 스트림 TS의 레이어에, 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보 각각에 대응하여 표시 위치를 지정하는 표시 위치 지정 정보를 삽입한다. 여기서, 표시 위치 지정 정보는, 상술한 바와 같이, 예를 들어 표시 대상 스크린 및/또는 표시 대상 스크린 상의 표시 단위(윈도우)를 지정하는 정보이다.
비디오 스트림에 대응하는 표시 위치 지정 정보는, 트랜스포트 스트림 TS에 포함되는 프로그램 맵 테이블(PMT: Program Map Table)의 비디오 엘리멘터리 루프(Video ES loop)의 관리 하에 삽입된다. 또한 그래픽스 스트림에 대응하는 표시 위치 정보는, 트랜스포트 스트림 TS에 포함되는 프로그램 맵 테이블의 그래픽스 엘리멘터리 루프(Graphics ES loop)의 관리 하에 삽입된다.
전자 프로그램표 정보는, 이벤트 인포메이션 테이블(EIT: Event Information Table)의 관리 하에 삽입되는 컴포넌트 디스크립터(Component descriptor)에 포함된다. 전자 프로그램표 정보에 대응하는 표시 위치 지정 정보는 EIT의 관리 하에 삽입된다. 표시 위치 지정 정보의 상세에 대해서는 후술한다.
또한 트랜스포트 스트림 TS의 레이어에, 소정의 비디오 스트림에 대응시켜 표시 대상 스크린 상의 표시 단위(윈도우)를 지정하는 표시 위치 지정 정보가 삽입되는 경우가 있다. 그 경우, 그 소정의 스트림을 생성하는 비디오 인코더는 그 비디오 스트림의 레이어에, 그 표시 단위(윈도우)의 위치를 변경할지 여부를 나타내는 위치 변경 정보를 삽입한다.
또한 이 위치 변경 정보가 변경되는 것을 나타낼 때, 비디오 인코더는 또한, 표시 해상도 모델에서 지정된 해상도 좌표에서의 표시 위치 정보를 삽입한다. 이들 정보는, 예를 들어 비디오 스트림의 픽처 헤더 또는 시퀀스 헤더의 유저 데이터 영역에 삽입된다. 이들 정보의 상세에 대해서는 후술한다.
도 12에 도시하는 송신 데이터 생성부(110)의 동작을 간단히 설명한다. N개의 화상 데이터 출력부(111-1 내지 111-N)로부터 출력되는 N개의 화상 데이터는 각각 N개의 비디오 인코더(112-1 내지 112-N)에 공급된다. 각 비디오 인코더에서는, 화상 데이터에 대하여 MPEG4-AVC(MVC), MPEG2video, 또는 HEVC 등의 부호화가 실시되어 부호화 화상 데이터가 얻어진다. 그리고 각 비디오 인코더에서는, 이 부호화 화상 데이터를 포함하는 비디오 스트림(비디오 엘리멘터리 스트림)이 생성된다.
각 비디오 인코더에서는, 멀티플렉서(115)에 있어서 트랜스포트 스트림 TS의 레이어에, 자신의 출력 비디오 스트림에 대응시켜 표시 대상 스크린 상의 표시 단위(윈도우)를 지정하는 표시 위치 지정 정보가 삽입될 때, 그 출력 비디오 스트림의 레이어에, 그 표시 단위(윈도우)의 위치를 변경할지 여부를 나타내는 위치 변경 정보가 삽입된다. 그리고 각 비디오 인코더에서는 또한, 그 위치 변경 정보가 변경되는 것을 나타낼 때, 표시 해상도 모델에서 지정된 해상도 좌표에서의 표시 위치 정보가 삽입된다.
그래픽스 데이터 출력부(113)로부터 출력되는 그래픽스 데이터(서브타이틀 데이터도 포함함)는 그래픽스 인코더(114)에 공급된다. 그래픽스 인코더(114)에서는, 그래픽스 데이터를 포함하는 그래픽스 스트림(그래픽스 엘리멘터리 스트림)이 생성된다.
멀티플렉서(115)에서는, 각 인코더로부터 공급되는 엘리멘터리 스트림이 패킷화되어 다중화되어, 트랜스포트 스트림 TS가 생성된다. 이 경우, 각각의 PES 헤더에는, 수신측에 있어서의 동기 재생을 위하여 PTS가 삽입된다. 또한 멀티플렉서(115)에서는, 트랜스포트 스트림 TS의 레이어에, 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보 각각에 대응하여 표시 위치를 지정하는 표시 위치 지정 정보가 삽입된다.
[표시 위치 지정 정보 및 위치 변경 정보의 구조와 TS 구성]
상술한 바와 같이 트랜스포트 스트림 TS의 레이어에, 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보 각각에 대응하여 표시 위치를 지정하는 표시 위치 지정 정보가 삽입된다. 도 13은 이 표시 위치 지정 정보로서의 디스플레이 윈도우 포지셔닝 디스크립터(display_window_positioning descriptor)의 구조예(Syntax)를 나타내고 있다. 또한 도 14는 도 13에 나타내는 구조예에 있어서의 주요한 정보의 내용(Semantics)을 나타내고 있다.
「display_window_positioning_descriptor_tag」는 디스크립터 타입을 나타내는 8비트의 데이터이며, 여기서는, 디스플레이 윈도우 포지셔닝 디스크립터인 것을 나타낸다. 「display_window_positioning_descriptor_length」는 디스크립터의 길이(크기)를 나타내는 8비트의 데이터이다. 이 데이터는 디스크립터의 길이로서 이후의 바이트 수를 나타낸다.
「display_unconstraint_flag」의 1비트 필드는, 표시 시에 수신기측에서 표시 위치(스크린이나 윈도우)를 지정된 이외로 할 수 있는지 여부를 나타낸다. "1"은, 수신기측에서의 표시 위치의 렌더링에 자유도가 있는 것을 나타낸다. "0"은, 수신기측에서의 표시 위치의 렌더링에 자유도가 없으며, 이 디스크립터의 지시에 따를 것이 요구되는 것을 나타낸다.
「stream_screen_id」의 4비트 필드는 표시 대상 스크린을 지정(식별)하는 식별자이다. 「window_id」의 4비트 필드는 표시 대상의 스크린 상에서의 표시 단위(윈도우)를 지정(식별)하는 식별자이다.
「rendering_model」의 4비트 필드는 표시 대상 스크린에서의 표시 해상도 모델을 나타낸다. 예를 들어 「0001」은 풀 HD 해상도, 즉 1920(H)*1080(V)의 해상도인 것을 나타낸다. 또한 예를 들어 「0010」은 4K 해상도, 즉, 3840(H)*2160(V)의 해상도인 것을 나타낸다. 또한 예를 들어 「0100」은 8K 해상도, 즉, 7680(H)*4320(V)의 해상도인 것을 나타낸다.
「V_start_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 수직 위치를 나타낸다. 「V_end_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 종료 수직 위치를 나타낸다. 「H_start_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 수평 위치를 나타낸다. 「H_end_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 종료 수평 위치를 나타낸다.
또한 상술하지 않았지만, 트랜스포트 스트림 TS의 레이어에, 다중 배신 서비스인지 여부를 나타내는 배신 서비스 정보가 삽입된다. 도 15의 (a)는 이 배신 서비스 정보로서의 멀티 윈도우즈 서비스 디스크립터(multi_windows_service_descriptor)의 구조예(Syntax)를 나타내고 있다. 또한 도 15의 (b)는 도 15의 (a)에 나타내는 구조예에 있어서의 주요한 정보의 내용(Semantics)을 나타내고 있다.
「multi_windows_service_descriptor_tag」는 디스크립터 타입을 나타내는 8비트의 데이터이며, 여기서는, 멀티 윈도우즈 서비스 디스크립터인 것을 나타낸다. 「multi_windows_service_descriptor_length」는 디스크립터의 길이(크기)를 나타내는 8비트의 데이터이다. 이 데이터는 디스크립터의 길이로서 이후의 바이트 수를 나타낸다.
「multiple_stream_service_flag」의 1비트 필드는 다중 배신 서비스인지 여부를 나타낸다. "1"은 다중 배신 서비스인 것을 나타낸다. "0"은 비다중 배신 서비스인 것을 나타낸다. 「number_of_streams」의 4비트 필드는, 배신 서비스에 관여하는 스트림의 총수를 나타낸다. 예를 들어 「0001」은 1스트림을 나타내고, 「1111」은 15스트림을 나타낸다.
또한 상술한 바와 같이 비디오 스트림의 레이어에, 표시 단위(윈도우)의 위치를 변경할지 여부를 나타내는 위치 변경 정보가 삽입된다. 예를 들어 부호화 방식이 MPEG4-AVC(MVC)인 경우, 또는 HEVC과 같은, NAL 유닛 등의 부호화 구조가 비슷한 부호화 방식인 경우, 이 위치 변경 정보는 액세스 유닛(AU)의 "SEIs"의 부분에 SEI 메시지로서 삽입된다. 예를 들어 이 위치 변경 정보는 SEI 메시지(window_attribute SEI message)로서 삽입된다.
도 16의 (a)는 GOP(Group Of Pictures)의 선두의 액세스 유닛을 나타내고 있고, 도 16의 (b)는 GOP의 선두 이외의 액세스 유닛을 나타내고 있다. 위치 변경 정보가 GOP 단위로 삽입되는 경우, GOP의 선두의 액세스 유닛에만 「window_attribute SEI message」가 삽입된다.
도 17의 (a)는 「window_attribute SEI message」의 구조예(Syntax)를 나타내고 있다. 「uuid_iso_iec_11578」은 "ISO/IEC11578:1996 AnnexA."로 나타나는 UUID값을 갖는다. 「user_data_payload_byte」의 필드에 「window_attribute_data()」가 삽입된다. 도 17의 (b)는 「window_attribute_data()」의 구조예(Syntax)를 나타내고 있다. 이 중에 윈도우 애트리뷰트 SEI 「window_attribute_sei()」가 삽입된다. 「userdata_id」는, 부호 없이 16비트로 나타나는 「window_attribute_sei()」의 식별자이다.
도 18은 「window_attribute_sei()」의 구조예(Syntax)를 나타내고 있다. 또한 도 19는 도 18에 나타내는 구조예에 있어서의 주요한 정보의 내용(Semantics)을 나타내고 있다. 「window_position_change_flag」의 1비트 필드는, 표시 단위(윈도우)의 표시 위치를 변경할지 여부를 나타낸다. "1"은 표시 위치를 변경하는 것을 나타낸다. "0"은 표시 위치를 변경하지 않는 것을 나타낸다.
「rendering_model」의 4비트 필드는 표시 대상 스크린에서의 표시 해상도 모델을 나타낸다. 예를 들어 「0001」은 풀 HD 해상도, 즉, 1920(H)*1080(V)의 해상도인 것을 나타낸다. 또한 예를 들어 「0010」은 4K 해상도, 즉, 3840(H)*2160(V)의 해상도인 것을 나타낸다. 또한 예를 들어 「0100」은 8K 해상도, 즉, 7680(H)*4320(V)의 해상도인 것을 나타낸다.
「V_start_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 수직 위치를 나타낸다. 「V_end_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 종료 수직 위치를 나타낸다. 「H_start_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 수평 위치를 나타낸다. 「H_end_offset」의 16비트 필드는, 「rendering_model」에서 지정된 해상도 좌표에서의 표시 단위(윈도우)의 표시 종료 수평 위치를 나타낸다.
도 20은 트랜스포트 스트림 TS의 구성예를 도시하고 있다. 이 구성예는, 트랜스포트 스트림 TS에 2개의 비디오 스트림과 1개의 서브타이틀 스트림이 포함되는 경우를 도시하고 있다. 즉, 이 구성예에서는, 화상 데이터가 부호화되어 있는 비디오 스트림의 PES 패킷 「video PES1」, 「video PES2」와, 서브타이틀 데이터가 부호화되어 있는 서브타이틀 스트림의 PES 패킷 「subtitle PES3」이 포함되어 있다. 각 스트림에는, 표시 단위(윈도우)의 위치를 변경할지 여부를 나타내기 위하여, 상술한 윈도우 애트리뷰트 SEI(window_attribute_sei())가 삽입되어 있다.
또한 트랜스포트 스트림 TS에는 PSI(Program Specific Information)로서 PMT(Program Map Table)가 포함되어 있다. 이 PSI는, 트랜스포트 스트림에 포함되는 각 엘리멘터리 스트림이 어느 프로그램에 속해 있는지를 기재한 정보이다.
PMT에는, 프로그램 전체에 관련된 정보를 기술하는 프로그램 루프(Program loop)가 존재한다. 이 프로그램 루프의 관리 하에, 다중 배신 서비스인지 여부를 나타내기 위하여, 상술한 멀티 윈도우즈 서비스 디스크립터(multi_windows_service_descriptor)가 삽입되어 있다.
또한 PMT에는, 각 엘리멘터리 스트림에 관련된 정보를 갖는 엘리멘터리 루프가 존재한다. 이 구성예에서는, 비디오 엘리멘터리 루프(Video ES1 loop, Video ES2 loop)와 서브타이틀 엘리멘터리 루프(Subtitle ES3 Loop)가 존재한다. 각 엘리멘터리 루프에는, 각 엘리멘터리 스트림에 대응하여 스트림 타입, 패킷 식별자(PID) 등의 정보가 배치됨과 함께, 그 비디오 엘리멘터리 스트림에 관련된 정보를 기술하는 디스크립터도 배치된다.
이 디스크립터의 하나로서, 상술한 디스플레이 윈도우 포지셔닝 디스크립터(display_window_positioning descriptor)가 삽입되어 있다. 이것에 의하여, 각 비디오 스트림의 화상 표시 위치가 지정되고, 또한 서브타이틀 스트림의 서브타이틀(자막) 표시 위치가 지정된다.
또한 트랜스포트 스트림 TS에는, 이벤트(프로그램) 단위의 관리를 행하는 SI(Serviced Information)로서의 EIT(Event Information Table)가 포함되어 있다. 이 EIT의 관리 하에 컴포넌트 디스크립터(Component_descriptor)가 삽입되어 있다. 전자 프로그램표 정보는 이 컴포넌트 디스크립터에 포함되어 있다. 이 EIT의 관리 하에도, 전자 프로그램표의 표시 위치를 지정하기 위하여, 상술한 디스플레이 윈도우 포지셔닝 디스크립터(display_window_positioning descriptor)가 삽입되어 있다.
「수신 장치의 구성예」
도 21은 수신 장치(200)의 구성예를 도시하고 있다. 이 수신 장치(200)는 수신부(201)와 디멀티플렉서(202)와 표시 제어부(203)와 유저 조작부(205)와 M개의 정보 처리부(204-1 내지 204-M)를 갖고 있다.
수신부(201)는 송신 장치(100)로부터 보내져 오는 트랜스포트 스트림 TS를, 방송파를 통하거나 또는 네트워크를 통하여 수신한다. 수신부(201)는 디지털 튜너, 또는 네트워크 인터페이스 등으로 구성된다.
디멀티플렉서(202)는 이 트랜스포트 스트림 TS로부터 디스플레이 윈도우 포지셔닝 디스크립터(도 13 참조) 및 멀티 윈도우즈 서비스 디스크립터(도 15의 (a) 참조)를 추출하여 표시 제어부(203)로 보낸다.
표시 제어부(203)는 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 비디오 스트림에 의한 화상, 그래픽스 스트림에 의한 그래픽스, 전자 프로그램표 정보에 의한 프로그램표의 표시 위치 지정 정보(stream_screen_id, window_id)를 취득할 수 있다. 또한 표시 제어부(203)는 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터, 표시 시에 수신기측에서 표시 위치(스크린이나 윈도우)를 지정된 이외로 할 수 있는지 여부의 정보(display_unconstraint_flag)를 취득할 수 있다.
또한 표시 제어부(203)는 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 표시 대상 스크린에서의 표시 해상도 모델의 정보(rendering_model)를 취득할 수 있다. 또한 표시 제어부(203)는 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 표시 해상도 모델의 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 위치(수평, 수직), 표시 종료 위치(수평, 수직)의 정보(V_start_offset, V_end_offset, H_start_offset, H_end_offset)를 취득할 수 있다.
또한 표시 제어부(203)는 멀티 윈도우즈 서비스 디스크립터의 기술로부터, 다중 배신 서비스인지 여부를 나타내는 정보(multiple_stream_service_flag)와, 배신 서비스에 관여하는 스트림의 총수의 정보(number_of_streams)를 취득할 수 있다.
디멀티플렉서(202)는, 수신부(201)에서 수신된 트랜스포트 스트림 TS로부터 비디오 스트림, 그래픽스 스트림(서브타이틀 스트림을 포함함), 나아가 전자 프로그램표 정보를 추출하여 표시 제어부(203)의 제어 하에 정보 처리부(204-1 내지 204-M)로 선택적으로 보낸다.
디멀티플렉서(202)는 비디오 스트림에 대해서는, 이 비디오 스트림에 대응한 비디오 엘리멘터리 루프 관리 하의 디스플레이 윈도우 포지셔닝 디스크립터 내의 「stream_screen_id」에 기초하여 수신처(destination)의 정보 처리부를 선택한다. 즉, 디멀티플렉서(202)는, 기본적으로는 그 「stream_screen_id」에 대응한 「screen_id」를 갖는 스크린 디바이스에 접속되는 정보 처리부를 수신처로 한다.
또한 그래픽스 스트림에 대해서는, 이 그래픽스 스트림에 대응한 그래픽스 엘리멘터리 루프 관리 하의 디스플레이 윈도우 포지셔닝 디스크립터 내의 「stream_screen_id」에 기초하여 수신처의 정보 처리부를 선택한다. 즉, 디멀티플렉서(202)는, 「stream_screen_id」에 대응한 「screen_id」를 갖는 스크린 디바이스에 접속되는 정보 처리부를 수신처로 한다.
또한 전자 프로그램표 정보에 대해서는, EIT 관리 하의 디스플레이 윈도우 포지셔닝 디스크립터 내의 「stream_screen_id」에 기초하여 수신처의 정보 처리부를 선택한다. 즉, 디멀티플렉서(202)는, 「stream_screen_id」에 대응한 「screen_id」를 갖는 스크린 디바이스에 접속되는 정보 처리부를 수신처로 한다.
또한 디멀티플렉서(202)는, 상술한 바와 같이 기본적으로는 「stream_screen_id」에 기초하여 비디오 스트림, 그래픽스 스트림, 전자 프로그램 정보의 수신처로 되는 정보 처리부를 선택한다. 그러나 정보(display_unconstraint_flag)가 표시 위치(스크린이나 윈도우)의 변경을 허용하는 것을 나타내고, 유저의 표시 위치의 변경 조작이 있을 때는, 디멀티플렉서(202)는 그 표시 위치의 변경 조작에 기초하여 수신처의 정보 처리부를 선택한다. 또한 정보(display_unconstraint_flag)를 사용하지 않고 유저의 표시 위치의 변경 조작에만 기초하여 수신처의 정보 처리부를 선택하는 것도 생각된다. 또한 디멀티플렉서(202)는, 실제로 접속되는 스크린 디바이스의 상황에 따라 수신처의 정보 처리부를 선택하고, 「stream_screen_id」에 대응하는 스크린 디바이스의 접속이 없더라도 모든 정보가 표시되도록 하는 것도 생각된다.
정보 처리부(204-1 내지 204-M)는, 각각 디멀티플렉서(202)로부터 공급되는 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보를 처리하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시용 데이터를 생성한다. 그리고 정보 처리부(204-1 내지 204-M)는 이 표시용 데이터를 필요에 따라 스케일링 처리를 실시한 후에 스크린 디바이스(300-1 내지 300-M)로 보낸다.
각 정보 처리부는 디코더(204a) 및 스케일러(204b)를 구비한다. 디코더(204a)는, 디멀티플렉서(202)로부터 보내져 오는 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보를 처리하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시용 데이터를 생성한다.
또한 디코더(204a)는 비디오 및 그래픽스의 스트림으로부터 윈도우 애트리뷰트 SEI(도 18 참조)를 추출하여 표시 제어부(203)로 보낸다. 표시 제어부(203)는 윈도우 애트리뷰트 SEI의 기술로부터, 표시 단위(윈도우)의 표시 위치를 변경할지 여부를 나타내는 정보(window_position_change_flag)를 취득할 수 있다. 이 정보가 변경되는 것을 나타낼 때, 표시 제어부(203)는 또한, 윈도우 애트리뷰트 SEI의 기술로부터, 표시 대상 스크린에서의 표시 해상도 모델의 정보(rendering_model)와, 그 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 위치(수평, 수직), 표시 종료 위치(수평, 수직)의 정보를 취득할 수 있다.
스케일러(204b)는 표시 제어부(203)의 제어 하에, 디코더(204)에서 생성된 표시용 데이터에 대하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시가, 대응하는 표시 단위(윈도우)에 표시되도록 스케일링 처리 등을 실시한다. 이때, 표시 대상의 스크린 디바이스의 해상도가 표시 해상도 모델과 상이한 경우, 스케일러(204a)는 또한, 그 해상도 차를 조정하기 위한 스케일링 처리를 행한다.
또한 표시 단위(윈도우)의 표시 위치 정보로서는, 기본적으로는 트랜스포트 스트림 TS로부터 추출된 디스플레이 윈도우 포지셔닝 디스크립터 내의 것이 사용된다. 그러나 디코더(204a)에서 비디오나 그래픽스의 스트림으로부터 추출된 윈도우 애트리뷰트 SEI의 정보(window_position_change_flag)가 변경을 나타낼 때, 그 윈도우 애트리뷰트 SEI 내의 것이 사용된다. 이것에 의하여 표시 단위(윈도우)의 표시 위치의 다이나믹한 변경이 가능해진다.
도 21에 도시하는 수신 장치(200)의 동작을 간단히 설명한다. 수신부(201)에서는, 송신 장치(100)로부터 보내져 오는 트랜스포트 스트림 TS가 방송파를 통하거나 또는 네트워크를 통하여 수신된다. 이 트랜스포트 스트림 TS는 디멀티플렉서(202)에 공급된다.
디멀티플렉서(202)에서는, 트랜스포트 스트림 TS로부터 디스플레이 윈도우 포지셔닝 디스크립터(도 13 참조) 및 멀티 윈도우즈 서비스 디스크립터(도 15의 (a) 참조)가 추출되어 표시 제어부(203)로 보내진다. 표시 제어부(203)에서는, 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 표시 위치 지정 정보(stream_screen_id, window_id) 등의 다양한 정보가 취득된다.
디멀티플렉서(202)에서는, 트랜스포트 스트림 TS로부터 비디오 스트림, 그래픽스 스트림(서브타이틀 스트림을 포함함), 나아가 전자 프로그램표 정보가 추출되어 표시 제어부(203)의 제어 하에 정보 처리부(204-1 내지 204-M)로 선택적으로 보내진다. 이 경우, 디멀티플렉서(202)에서는, 기본적으로는 「stream_screen_id」에 대응한 「screen_id」를 갖는 스크린 디바이스에 접속되는 정보 처리부가 수신처로서 선택된다.
정보 처리부(204-1 내지 204-M)에서는, 각각 디멀티플렉서(202)로부터 공급되는 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보가 처리되어 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시용 데이터가 생성된다. 그리고 정보 처리부(204-1 내지 204-M)에서는, 이 표시용 데이터에 대하여 필요에 따라 스케일링 처리를 실시한 후에 스크린 디바이스(300-1 내지 300-M)로 보내는 것이 행해진다.
상술한 바와 같이 도 1에 도시하는 화상 송수신 장치(10)에 있어서는, 트랜스포트 스트림 TS의 레이어에, 화상, 그래픽스(자막을 포함함), 프로그램표의 표시 위치 지정 정보(stream_screen_id, window_id)가 삽입되는 것이다. 그로 인하여 화상, 그래픽스, 프로그램표 등의 표시 위치를 송신측이 주체적으로 제어하는 것이 가능해진다.
또한 도 1에 도시하는 화상 송수신 장치(10)에 있어서는, 표시 위치 지정 정보에는, 이 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치에의 표시를 허용할지 여부를 나타내는 정보가 부가되는 것이다. 그로 인하여, 이 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치에의 표시를 허용할지 여부를 송신측이 주체적으로 제어하는 것이 가능해진다.
또한 도 1에 도시하는 화상 송수신 장치(10)에 있어서는, 비디오나 그래픽스의 스트림 레이어에, 표시 위치 지정 정보에서 지정된 표시 대상의 스크린 상의 표시 단위(윈도우)의 위치를 변경할지 여부를 나타내는 정보와, 이 정보가 변경되는 것을 나타낼 때, 그 표시 단위의 위치 정보가 삽입되는 것이다. 그로 인하여, 표시 대상의 스크린 상의 표시 단위(윈도우)를 다이나믹하게 변경하는 것이 가능해진다.
<2. 변형예>
「변형예 1」
또한 도 1에 도시하는 화상 송수신 시스템(10)에서는, 수신 장치(200)가 디코더를 구비하고, 이 수신 장치(200)로부터 각 스크린 디바이스로 비압축의 화상 데이터 등의 표시용 데이터를 보내는 구성으로 되어 있다. 그러나 수신 장치로서 디코더를 구비하지 않고, 이 수신 장치로부터 각 스크린 디바이스로, 거기서의 표시에 관계된 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보가 포함된 파셜(partial) 트랜스포트 스트림 TS를 보내는 구성도 생각된다. 이 경우에는, 수신 장치에 디코더는 불필요해진다.
도 22는 그 경우에 있어서의 화상 송수신 시스템(10A)의 구성예를 도시하고 있다. 이 도 22에 있어서, 도 1과 대응하는 부분에는 동일 부호를 붙여, 적절히 그 상세 설명은 생략한다. 이 화상 송수신 시스템(10A)은 송신 장치(100), 수신 장치(200A) 및 M개의 표시 기기(400-1 내지 400-M)에 의하여 구성되어 있다. 표시 기기(400-1 내지 400-M)는 각각 스크린 디바이스(300-1 내지 300-M)를 갖고 있다.
수신 장치(200A)는, 송신 장치(100)로부터 보내져 오는 트랜스포트 스트림 TS를 방송파를 통하거나 또는 네트워크를 통하여 수신한다. 수신 장치(200A)는 이 트랜스포트 스트림 TS에 대하여 디멀티플렉스의 처리를 실시하고, 그 후에 리멀티플렉스 처리를 실시하여, 표시 기기(400-1 내지 400-M)로 보내는 파셜 트랜스포트 스트림 TS를 생성한다. 그리고 수신 장치(200A)는 표시 기기(400-1 내지 400-M)의 각각으로 파셜 트랜스포트 스트림 TS를 보낸다.
이때, 수신 장치(200A)는, 트랜스포트 스트림 TS의 레이어에 삽입되어 있는 비디오 스트림, 그래픽스 스트림, 전자 프로그램 정보에 대응한 표시 위치 지정 정보(표시 대상 스크린, 표시 단위(윈도우))를 취득한다. 수신 장치(200)는 이 표시 위치 지정 정보에 기초하여, 표시 기기(400-1 내지 400-M) 각각으로 보내는 파셜 트랜스포트 스트림 TS를 생성한다.
표시 기기(400-1 내지 400-M)는, 각각 수신 장치(200A)로부터 보내져 오는 파셜 트랜스포트 스트림 TS에 포함되는 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보에 대하여 디코딩 처리를 행하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시용 데이터를 취득한다. 그리고 표시 기기(400-1 내지 400-M)는 각각 스크린 디바이스(300-1 내지 300-M)에, 취득된 표시용 데이터에 의한 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시를 행한다.
도 23은 수신 장치(200A) 및 표시 기기(400-1 내지 400-M)의 구성예를 도시하고 있다. 이 도 23에 있어서, 도 21과 대응하는 부분에는 동일 부호를 붙여, 적절히 그 상세 설명은 생략한다. 수신 장치(200A)는 수신부(201)와 디멀티플렉서(202A)와 표시 제어부(203A)와 유저 조작부(205)와 리멀티플렉서(206)를 갖고 있다.
수신부(201)는, 송신 장치(100)로부터 보내져 오는 트랜스포트 스트림 TS를 방송파를 통하거나 또는 네트워크를 통하여 수신한다. 디멀티플렉서(202A)는, 수신부(201)에서 수신된 트랜스포트 스트림 TS로부터 비디오 스트림, 그래픽스 스트림(서브타이틀 스트림을 포함함), 나아가 전자 프로그램표 정보 등을 추출하여 리멀티플렉서(206)로 보낸다.
또한 디멀티플렉서(202A)는 이 트랜스포트 스트림 TS로부터 디스플레이 윈도우 포지셔닝 디스크립터(도 13 참조) 및 멀티 윈도우즈 서비스 디스크립터(도 15의 (a) 참조)를 추출하여 표시 제어부(203A)로 보낸다. 리멀티플렉서(206)는 표시 제어부(203A)의 제어 하에, 표시 기기(400-1 내지 400-M) 각각으로 보내는 파셜 트랜스포트 스트림 TS를 생성한다.
또한 리멀티플렉서(206)는, 기본적으로는 「stream_screen_id」에 기초하여, 비디오 스트림, 그래픽스 스트림, 전자 프로그램 정보의 수신처로 되는 표시 기기를 선택한다. 그러나 정보(display_unconstraint_flag)가 표시 위치(스크린이나 윈도우)의 변경을 허용하는 것을 나타내고, 유저의 표시 위치의 변경 조작이 있을 때는, 리멀티플렉서(206)는 그 표시 위치의 변경 조작에 기초하여 수신처의 표시 기기를 선택한다.
표시 기기(400)(400-1 내지 400-M)는 디멀티플렉서(401)와 디코더(402)와 스케일러(403)와 표시 제어부(404)와 스크린 디바이스(300)(300-1 내지 300-M)를 갖고 있다.
디멀티플렉서(401)는, 수신 장치(200A)로부터 보내져 오는 파셜 트랜스포트 스트림 TS로부터 비디오 스트림, 그래픽스 스트림(서브타이틀 스트림을 포함함), 나아가 전자 프로그램표 정보를 추출하여 디코더(402)로 보낸다. 또한 디멀티플렉서(401)는 이 파셜 트랜스포트 스트림 TS로부터 디스플레이 윈도우 포지셔닝 디스크립터(도 13 참조) 및 멀티 윈도우즈 서비스 디스크립터(도 15의 (a) 참조)을 추출하여 표시 제어부(404)로 보낸다.
표시 제어부(404)는 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 비디오 스트림에 의한 화상, 그래픽스 스트림에 의한 그래픽스, 전자 프로그램표 정보에 의한 프로그램표의 표시 위치 지정 정보(stream_screen_id, window_id)를 취득할 수 있다. 또한 표시 제어부(203)는 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 표시 대상 스크린에서의 표시 해상도 모델의 정보(rendering_model)를 취득할 수 있다. 또한 표시 제어부(203)는 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 표시 해상도 모델의 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 위치(수평, 수직), 표시 종료 위치(수평, 수직)의 정보(V_start_offset, V_end_offset, H_start_offset, H_end_offset)를 취득할 수 있다.
디코더(402)는, 디멀티플렉서(401)로부터 보내져 오는 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보를 처리하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시용 데이터를 생성한다.
또한 디코더(402)는 비디오 및 그래픽스의 스트림으로부터 윈도우 애트리뷰트 SEI(도 18 참조)를 추출하여 표시 제어부(404)로 보낸다. 표시 제어부(404)는 윈도우 애트리뷰트 SEI의 기술로부터, 표시 단위(윈도우)의 표시 위치를 변경할지 여부를 나타내는 정보(window_position_change_flag)를 취득할 수 있다. 이 정보가 변경되는 것을 나타낼 때, 표시 제어부(404)는 윈도우 애트리뷰트 SEI의 기술로부터 또한 표시 대상 스크린에서의 표시 해상도 모델의 정보(rendering_model)와, 그 해상도 좌표에서의 표시 단위(윈도우)의 표시 개시 위치(수평, 수직), 표시 종료 위치(수평, 수직)의 정보를 취득할 수 있다.
스케일러(403)는 표시 제어부(404)의 제어 하에, 디코더(402)에서 생성된 표시용 데이터에 대하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시가, 대응하는 표시 단위(윈도우)에 표시되도록 스케일링 처리 등을 실시한다. 이때, 표시 대상의 스크린 디바이스(300)의 해상도가 표시 해상도 모델과 상이한 경우, 스케일러(403)는 그 해상도 차를 조정하기 위한 스케일링 처리를 더 행한다. 스크린 디바이스(300)는, 스케일러(403)로부터 출력되는 표시용 데이터에 기초하여 화상, 그래픽스(자막을 포함함), 프로그램표 등을 표시한다.
또한 표시 단위(윈도우)의 표시 위치 정보로서는, 기본적으로는 파셜 트랜스포트 스트림 TS로부터 추출된 디스플레이 윈도우 포지셔닝 디스크립터 내의 것이 사용된다. 그러나 디코더(402)에서 비디오나 그래픽스의 스트림으로부터 추출된 윈도우 애트리뷰트 SEI의 정보(window_position_change_flag)가 변경을 나타낼 때, 그 윈도우 애트리뷰트 SEI 내의 것이 사용된다. 이것에 의하여 표시 단위(윈도우)의 표시 위치의 다이나믹한 변경이 가능해진다.
도 23에 도시하는 수신 장치(200A) 및 표시 기기(400)(400-1 내지 400-M)의 동작을 간단히 설명한다. 수신 장치(200A)에 있어서는, 수신부(201)에서, 송신 장치(100)로부터 보내져 오는 트랜스포트 스트림 TS가 방송파를 통하거나 또는 네트워크를 통하여 수신된다. 이 트랜스포트 스트림 TS는 디멀티플렉서(202A)에 공급된다.
디멀티플렉서(202A)에서는, 수신부(201)에서 수신된 트랜스포트 스트림 TS로부터 비디오 스트림, 그래픽스 스트림(서브타이틀 스트림을 포함함), 나아가 전자 프로그램표 정보 등이 추출되어 리멀티플렉서(206)에 공급된다.
또한 이 디멀티플렉서(202A)에서는, 트랜스포트 스트림 TS로부터 디스플레이 윈도우 포지셔닝 디스크립터(도 13 참조) 및 멀티 윈도우즈 서비스 디스크립터(도 15의 (a) 참조)가 추출되어 표시 제어부(203)로 보내진다. 표시 제어부(203)에서는, 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 표시 위치 지정 정보(stream_screen_id, window_id) 등의 다양한 정보가 취득된다.
리멀티플렉서(206)에서는, 표시 제어부(203A)의 제어 하에, 표시 기기(400-1 내지 400-M)의 각각으로 보내는 파셜 트랜스포트 스트림 TS가 생성된다. 그리고 리멀티플렉서(206)로부터 표시 기기(400-1 내지 400-M)로, 대응하는 파셜 트랜스포트 스트림 TS가 보내진다.
표시 기기(400)(400-1 내지 400-M)에 있어서는, 수신 장치(200)로부터 보내져 오는 파셜 트랜스포트 스트림 TS가 디멀티플렉서(401)에 공급된다. 이 디멀티플렉서(401)에서는, 파셜 트랜스포트 스트림 TS로부터 비디오 스트림, 그래픽스 스트림(서브타이틀 스트림을 포함함), 나아가 전자 프로그램표 정보가 추출되어 디코더(402)에 공급된다.
또한 디멀티플렉서(401)에서는, 파셜 트랜스포트 스트림 TS로부터 디스플레이 윈도우 포지셔닝 디스크립터(도 13 참조) 및 멀티 윈도우즈 서비스 디스크립터(도 15의 (a) 참조)가 추출되어 표시 제어부(404)로 보내진다. 표시 제어부(404)에서는, 디스플레이 윈도우 포지셔닝 디스크립터의 기술로부터 표시 위치 지정 정보(stream_screen_id, window_id) 등의 다양한 정보가 취득된다.
디코더(402)에서는, 디멀티플렉서(401)로부터 보내져 오는 비디오 스트림, 그래픽스 스트림, 전자 프로그램표 정보가 처리되어 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시용 데이터가 생성된다. 이 표시용 데이터는 스케일러(403)에 공급된다.
또한 디코더(402)에서는, 비디오 및 그래픽스의 스트림으로부터 윈도우 애트리뷰트 SEI(도 18 참조)가 추출되어 표시 제어부(404)로 보내진다. 표시 제어부(404)에서는, 윈도우 애트리뷰트 SEI의 기술로부터, 표시 단위(윈도우)의 표시 위치를 변경할지 여부를 나타내는 정보(window_position_change_flag) 등의 다양한 정보가 취득된다.
스케일러(403)에서는, 표시 제어부(404)의 제어 하에, 디코더(402)에서 생성된 표시용 데이터에 대하여 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시가, 대응하는 표시 단위(윈도우)에 표시되도록 스케일링 처리 등이 실시된다. 스케일러(403)로부터 출력되는 표시용 데이터는 스크린 디바이스(300)에 공급되고, 이 스크린 디바이스(300)에 화상, 그래픽스(자막을 포함함), 프로그램표 등이 표시된다.
「변형예 2」
또한 도 1에 도시하는 화상 송수신 시스템(10)에서는, 수신 장치(200)로부터 각 스크린 디바이스로 병렬적으로 비압축의 화상 데이터 등의 표시용 데이터를 보내는 구성으로 되어 있다. 그러나 수신 장치(200)로부터 특정한 스크린 디바이스로 모든 스크린 디바이스 분의 표시용 데이터를 보내고, 그 특정한 스크린 디바이스로부터 다른 스크린 디바이스에 표시용 데이터를 배신하는 구성도 생각된다.
도 24는 그 경우에 있어서의 화상 송수신 시스템(10B)의 구성예를 도시하고 있다. 이 도 24에 있어서, 도 1과 대응하는 부분에는 동일 부호를 붙여, 적절히 그 상세 설명은 생략한다. 이 화상 송수신 시스템(10B)은 송신 장치(100), 수신 장치(200B) 및 M개의 스크린 디바이스(300-1 내지 300-M)를 갖고 있다.
수신 장치(200B)는 특정한 스크린 디바이스, 여기서는 스크린 디바이스(300-1)로 모든 스크린 디바이스 분의 표시용 데이터를 보낸다. 스크린 디바이스(300-1)는 자신용 표시용 데이터에 기초하여 화상, 그래픽스, 프로그램표 등을 표시한다. 또한 스크린 디바이스(300-1)는 다른 스크린 디바이스 분의 표시용 화상 데이터를, 대응하는 스크린 디바이스에 배신(전송)한다.
이 경우, 스크린 디바이스(300-1)로부터 다른 스크린 디바이스에 표시용 데이터를 배신할 때 무작위로 지연이 발생할 우려가 있으며, 각 스크린 디바이스 간에서의 표시 동기가 흐트러지는 것도 생각된다. 그 때문에 수신 장치(200B)는, 도 25에 도시한 바와 같이 스크린 디바이스(300-1)로 보내는 각 스크린 디바이스의 표시용 데이터에 프레임 단위로 부가되는 헤더 정보에 타임 코드를 삽입한다. 이 경우, 수신 장치(200B)는, 예를 들어 트랜스포트 스트림 TS의 레이어에 삽입되어 있는 90㎑의 타임 스탬프로부터 29.97㎐의 타임 코드로의 환산을 행하여 타임 코드를 생성한다.
스크린 디바이스(300-1 내지 300-M)는 각각 타임 코드에 기초하여 표시 타이밍을 제어한다. 이 경우, 스크린 디바이스(300-1 내지 300-M)는 유선 또는 무선에 의하여 클럭(시간) 정보를 서로 교환함으로써, 상호의 표시 동기를 실현할 수 있다.
도 26은 수신 장치(200B)의 구성예를 도시하고 있다. 이 도 26에 있어서, 도 21과 대응하는 부분에는 동일 부호를 붙여, 적절히 그 상세 설명은 생략한다. 정보 처리부(204-1 내지 204-M)는 표시 제어부(203B)의 제어 하에, 스크린 디바이스(300-1)로 보내는 각 스크린 디바이스의 표시용 데이터에 프레임 단위로 부가되는 헤더 정보에 타임 코드를 삽입한다. 상세 설명은 생략하지만, 이 수신 장치(200B) 외에는 도 21에 도시하는 수신 장치(200)와 마찬가지이다.
「변형예 3」
또한 도 1에 도시하는 화상 송수신 시스템(10)에서는, 수신 장치(200)로부터 각 스크린 디바이스로 병렬적으로 비압축의 화상 데이터 등의 표시용 데이터를 보내는 구성으로 되어 있다. 그러나 특정한 스크린 디바이스를 갖는 표시 기기에서 모든 스크린 디바이스 분의 표시용 데이터를 생성하고, 다른 스크린 디바이스에는 그 표시 기기로부터 표시용 데이터를 배신하는 구성도 생각된다. 이 경우에는, 수신 장치는 불필요해진다.
도 27은 그 경우에 있어서의 화상 송수신 시스템(10C)의 구성예를 도시하고 있다. 이 도 27에 있어서, 도 1과 대응하는 부분에는 동일 부호를 붙여, 적절히 그 상세 설명은 생략한다. 이 화상 송수신 시스템(10C)은 송신 장치(100), 표시 기기(400C) 및 M-1개의 스크린 디바이스(300-2 내지 300-M)에 의하여 구성되어 있다. 표시 기기(400C)는 스크린 디바이스(300-1)를 구비하고 있다.
표시 기기(400C)는, 송신 장치(100)로부터 보내져 오는 트랜스포트 스트림 TS를 방송파를 통하거나 또는 네트워크를 통하여 수신한다. 표시 기기(400C)는 도 1에 있어서의 수신 장치(200)와 마찬가지의 기능을 가지며, 스크린 디바이스(300-1 내지 300-M)에 공급해야 하는 화상, 그래픽스(자막을 포함함), 프로그램표의 표시용 데이터를 생성한다. 그리고 표시 기기(400C)는, 자신에 구비하는 스크린 디바이스(300-1)에 표시용 데이터에 의한 화상, 그래픽스(자막을 포함함), 프로그램표 등의 표시를 행한다. 또한 표시 기기(400C)는 다른 스크린 디바이스(300-2 내지 300-M)로, 대응하는 표시용 데이터를 보낸다.
도 28은 표시 기기(400C)의 구성예를 도시하고 있다. 이 도 28에 있어서, 도 21과 대응하는 부분에는 동일 부호를 붙여 도시하고 있다. 상세 설명은 생략하지만, 표시 기기(400C)는, 스크린 디바이스(300-1)를 구비하는 것을 제외하면, 도 21에 도시하는 표시 장치(200)와 마찬가지로 구성되어 있다.
「그 외」
또한 상술한 실시 형태에 있어서는, 하나의 컨테이너에서 복수의 서비스 스트림이 공급되는 경우의 예를 나타내었다. 예를 들어 도 29의 (a)에 도시한 바와 같이 하나의 방송 서비스의 컨테이너에 프라이머리 스트림과 세컨더리 스트림이 포함되고, 수신측에서는, 이 컨테이너에 포함되는 각 스트림이 처리되고, 각 스트림의 내용이 지정된 스크린 및 표시 단위(윈도우)에 표시된다.
그러나 본 기술은, 복수의 컨테이너에서 복수의 서비스 스트림이 공급되는 경우에도 마찬가지로 적용할 수 있다. 예를 들어 도 29의 (b)에 도시한 바와 같이 제1 방송 서비스의 컨테이너에 프라이머리 스트림이 포함되고, 제2 방송 서비스의 컨테이너에 세컨더리 스트림이 포함되는 경우이다. 이 경우, 수신측에서는, 각 컨테이너에 포함되는 스트림이 각각 처리되고, 각 스트림의 내용이 지정된 스크린 및 표시 단위(윈도우)에 표시된다. 이 경우, 방송 서비스 간에 연동하는 메커니즘이 취해져 있다.
또한 예를 들어 도 30의 (a)에 도시한 바와 같이 방송 서비스의 컨테이너에 프라이머리 스트림이 포함되고, 네트워크 서비스의 컨테이너에 세컨더리 스트림이 포함되는 경우이다. 이 경우, 수신측에서는, 각 컨테이너에 포함되는 스트림이 각각 처리되고, 각 스트림의 내용이 지정된 스크린 및 표시 단위(윈도우)에 표시된다. 이 경우, 방송, 네트워크 서비스 간에 연동하는 메커니즘이 취해져 있다.
또한 예를 들어 도 30의 (b)에 도시한 바와 같이 제1 네트워크 서비스의 컨테이너에 프라이머리 스트림이 포함되고, 제2 네트워크 서비스의 컨테이너에 세컨더리 스트림이 포함되는 경우이다. 이 경우, 수신측에서는, 각 컨테이너에 포함되는 스트림이 각각 처리되고, 각 스트림의 내용이 지정된 스크린 및 표시 단위(윈도우)에 표시된다. 이 경우, 네트워크 서비스 간에 연동하는 메커니즘이 취해져 있다.
도 31은 복수의 컨테이너에서 복수의 서비스 스트림이 공급되는 경우에 있어서의 화상 표시의 일례를 도시하고 있다. 이 예는, 3개의 트랜스포트 스트림 TS에서 3개의 비디오 스트림이 공급되는 경우의 예이다. 이 경우, 제1 트랜스포트 스트림 TS에 포함되는 제1 비디오 스트림에 대응하여 이 제1 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=1」이 삽입되어 있다. 그로 인하여, 이 제1 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=1」의 「스크린 디바이스 1」에 공급되고, 그 스크린에 화상 표시가 이루어진다.
또한 이 경우, 제2 트랜스포트 스트림 TS에 포함되는 제2 비디오 스트림에 대응하여 이 제2 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=2」가 삽입되어 있다. 그로 인하여, 이 제2 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=2」의 「스크린 디바이스 2」에 공급되고, 그 스크린에 화상 표시가 이루어진다.
또한 이 경우, 제3 트랜스포트 스트림 TS에 포함되는 제3 비디오 스트림에 대응하여 이 제3 트랜스포트 스트림 TS에 표시 위치 지정 정보로서 「Stream_screen_ID=3」이 삽입되어 있다. 그로 인하여, 이 제3 비디오 스트림을 디코딩하여 얻어진 화상 데이터는 「Screen ID=3」의 「스크린 디바이스 3」에 공급되고, 그 스크린에 화상 표시가 이루어진다.
또한 상술한 실시 형태에 있어서는, 컨테이너가 트랜스포트 스트림(MPEG-2TS)인 예를 나타내었다. 그러나 본 기술은, 인터넷 등의 네트워크를 이용하여 수신 단말기에 배신되는 구성의 시스템에도 마찬가지로 적용할 수 있다. 인터넷의 배신에서는, MP4나 그 이외의 포맷의 컨테이너에서 배신되는 경우가 많다. 즉, 컨테이너로서는, 디지털 방송 규격으로 채용되고 있는 트랜스포트 스트림(MPEG-2TS), 인터넷 배신에서 사용되고 있는 MP4 등의 다양한 포맷의 컨테이너가 해당한다.
또한 본 기술은 이하와 같은 구성을 취할 수도 있다.
(1) 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 송신하는 송신부와,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는 정보 삽입부를 구비하는
송신 장치.
(2) 상기 표시 위치 지정 정보는 표시 대상 스크린을 지정하는 정보인,
상기 (1)에 기재된 송신 장치.
(3) 상기 표시 위치 지정 정보는 표시 대상 스크린 상의 표시 단위를 지정하는 정보인,
상기 (1) 또는 (2)에 기재된 송신 장치.
(4) 상기 표시 위치 지정 정보에는, 표시 대상 스크린에서의 표시 해상도 모델을 나타내는 정보가 부가됨과 함께, 상기 표시 해상도 모델에서 지정된 해상도 좌표에서의 표시 위치 정보가 부가되어 있는,
상기 (3)에 기재된 송신 장치.
(5) 상기 정보 삽입부는 또한, 상기 비디오 스트림의 레이어에, 상기 표시 위치 지정 정보에서 지정된 상기 표시 대상 스크린 상의 표시 단위의 위치를 변경할지 여부를 나타내는 정보와, 상기 정보가 변경되는 것을 나타낼 때, 상기 표시 단위의 표시 위치 정보를 삽입하는,
상기 (4)에 기재된 송신 장치.
(6) 상기 표시 위치 지정 정보에는, 상기 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치에의 표시를 허용할지 여부를 나타내는 정보가 부가되어 있는,
상기 (1) 내지 (5) 중 어느 하나에 기재된 송신 장치.
(7) 상기 송신부가 송신하는 컨테이너에는 자막 데이터가 부호화되어 얻어진 자막 스트림이 더 포함되고,
상기 정보 삽입부는 또한, 상기 컨테이너의 레이어에, 상기 자막 데이터에 의한 자막의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는,
상기 (1) 내지 (6) 중 어느 하나에 기재된 송신 장치.
(8) 상기 송신부가 송신하는 컨테이너에는 전자 프로그램표 정보가 더 포함되고,
상기 정보 삽입부는 또한, 상기 컨테이너의 레이어에, 상기 전자 프로그램표 정보에 의한 프로그램표의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는,
상기 (1) 내지 (7) 중 어느 하나에 기재된 송신 장치.
(9) 상기 컨테이너는 트랜스포트 스트림이고,
상기 정보 삽입부는 상기 표시 위치 지정 정보를, 상기 트랜스포트 스트림에 포함되는 프로그램 맵 테이블의 비디오 엘리멘터리 루프의 관리 하에 디스크립터에 삽입하는,
상기 (1) 내지 (8) 중 어느 하나에 기재된 송신 장치.
(10) 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 송신하는 스텝과,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는 스텝을 구비하는
송신 방법.
(11) 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 수신하는 수신부를 구비하고,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입되어 있으며,
상기 화상 데이터에 의한 화상이 상기 표시 위치 지정 정보에서 지정된 표시 위치에 표시되도록 상기 비디오 스트림의 처리를 제어하는 표시 제어부를 더 구비하는
수신 장치.
(12) 상기 비디오 스트림을 복호화하여 비압축 화상 데이터를 얻는 복호화부와,
상기 비압축 화상 데이터를, 상기 표시 제어부의 제어에 의하여, 상기 표시 위치 지정 정보에서 지정되는 표시 대상 스크린을 갖는 표시 기기에 송신하는 송신부를 더 구비하고,
상기 송신부는, 상기 비압축 화상 데이터의 프레임마다의 헤더 정보에, 프레임 단위로 카운트하는 타임 코드를 삽입하는,
상기 (11)에 기재된 수신 장치.
(13) 상기 컨테이너를, 상기 표시 제어부의 제어에 의하여, 상기 표시 위치 지정 정보에서 지정되는 표시 대상 스크린을 갖는 표시 기기에 송신하는 송신부를 더 구비하는,
상기 (11) 또는 (12)에 기재된 수신 장치.
(14) 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 수신하는 스텝을 구비하고,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입되어 있으며,
상기 화상 데이터에 의한 화상이 상기 표시 위치 지정 정보에서 지정된 표시 위치에 표시되도록 상기 비디오 스트림의 처리를 제어하는 스텝을 더 구비하는
수신 방법.
(15) 화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 소정 포맷의 컨테이너를 수신하고,
상기 컨테이너의 레이어에, 상기 화상 데이터에 의한 화상의 표시 위치를 지정하는 표시 위치 지정 정보가 삽입되어 있으며,
적어도 상기 표시 위치 지정 정보를 포함하는 판단 정보에 기초하는 판단에 의하여, 상기 화상 데이터에 의한 화상을, 상기 표시 위치 지정 정보에서 지정되는 표시 위치, 또는 상기 표시 위치 지정 정보에서 지정된 표시 위치와는 상이한 표시 위치에 배치하는
수신 표시 방법.
(16) 상기 판단 정보에는 유저 조작에 의한 표시 위치 변경 정보가 더 포함되는,
상기 (15)에 기재된 수신 표시 방법.
(17) 상기 표시 위치 지정 정보에는, 상기 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치에의 표시를 허용할지 여부를 나타내는 정보가 부가되어 있고,
상기 판단 정보에는 상기 부가 정보가 더 포함되는,
상기 (16)에 기재된 수신 표시 방법.
본 기술의 주된 특징은, 트랜스포트 스트림 TS 등의 컨테이너의 레이어에 화상, 그래픽스(자막을 포함함) 등의 표시 위치 지정 정보(stream_screen_id, window_id)를 삽입함으로써, 화상, 그래픽스 등의 표시 위치를 송신측이 주체적으로 제어하는 것을 가능하게 한 것이다(도 5 참조).
10, 10A 내지 10C: 화상 송수신 시스템
100: 송신 장치
110: 송신 데이터 생성부
111-1 내지 111-N: 화상 데이터 출력부
112-1 내지 112-N: 비디오 인코더
113: 그래픽스 데이터 출력부
114: 그래픽스 인코더
115: 멀티플렉서
200, 200A, 200B: 수신 장치
201: 수신부
202, 202A: 디멀티플렉서
203: 표시 제어부
204-1 내지 204-M: 정보 처리부
204a: 디코더
204b: 스케일러
205: 유저 조작부
206: 리멀티플렉서
300, 300-1 내지 300-M: 스크린 디바이스
400-1 내지 400-M, 400C: 표시 기기
401: 디멀티플렉서
402: 디코더
403: 스케일러
404: 표시 제어부

Claims (20)

  1. 송신 장치로서,
    화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 컨테이너를 송신하는 송신부와,
    상기 컨테이너의 레이어에, 상기 화상 데이터에 따라 표시될 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는 정보 삽입부
    를 포함하고,
    상기 표시 위치 지정 정보는 표시 대상 스크린을 식별하는 정보를 포함하고,
    상기 표시 위치 지정 정보는 복수의 비디오 스트림 각각에 대한 상기 컨테이너의 레이어 내에 포함되고, 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 지정하는 정보를 포함하고, 플래그는 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있을지 여부를 나타내고,
    상기 플래그가, 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있다고 나타내는 경우, 상기 플래그는 상기 복수의 비디오 스트림 각각의 상기 화상 데이터에 의한 상기 화상이 상기 복수의 비디오 스트림 각각에 대한 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치에 있게끔 표시에 있어서의 변경을 허용하도록 상기 수신 장치가 상기 복수의 비디오 스트림의 처리를 제어하게 하는, 송신 장치.
  2. 제1항에 있어서,
    상기 표시 위치 지정 정보는 표시 대상 스크린 상의 표시 단위를 지정하는 정보를 포함하는, 송신 장치.
  3. 제2항에 있어서,
    상기 표시 위치 지정 정보는 표시 대상 스크린에서의 표시 해상도 모델을 나타내는 정보 및 상기 표시 해상도 모델에서 지정된 해상도 좌표에서의 표시 위치 정보를 포함하는, 송신 장치.
  4. 제1항 또는 제2항에 있어서,
    상기 정보 삽입부는 또한, 상기 비디오 스트림의 레이어에, 상기 표시 위치 지정 정보에서 지정된 상기 표시 대상 스크린 상의 표시 단위의 위치를 변경할지 여부를 나타내는 정보와, 상기 정보가 변경되는 것을 나타낼 때, 상기 표시 단위의 표시 위치 정보를 삽입하는, 송신 장치.
  5. 제1항 또는 제2항에 있어서,
    상기 표시 위치 지정 정보는 상기 표시 위치 지정 정보에서 지정된 표시 위치 이외의 표시 위치에의 표시를 허용할지 여부를 나타내는 정보를 포함하는, 송신 장치.
  6. 제1항 또는 제2항에 있어서,
    상기 송신부가 송신하는 컨테이너는 자막 데이터가 부호화되어 얻어진 자막 스트림을 포함하고,
    상기 정보 삽입부는 또한, 상기 컨테이너의 레이어에, 상기 자막 데이터에 따라 표시될 자막의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는, 송신 장치.
  7. 제1항 또는 제2항에 있어서,
    상기 송신부가 송신하는 상기 컨테이너는 전자 프로그램표 정보를 포함하고,
    상기 정보 삽입부는 상기 컨테이너의 레이어에, 상기 전자 프로그램표 정보에 따라 표시될 프로그램표의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는, 송신 장치.
  8. 제1항 또는 제2항에 있어서,
    상기 컨테이너는 트랜스포트 스트림이고,
    상기 정보 삽입부는 상기 표시 위치 지정 정보를, 상기 트랜스포트 스트림에 포함되는 프로그램 맵 테이블의 비디오 엘리멘터리 루프의 관리 하의 디스크립터에 삽입하는, 송신 장치.
  9. 송신 방법으로서,
    화상 데이터가 부호화되어 얻어진 비디오 스트림을 포함하는 컨테이너를 송신하는 스텝과,
    상기 컨테이너의 레이어에, 상기 화상 데이터에 따라 표시될 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 삽입하는 스텝을 포함하고,
    상기 표시 위치 지정 정보는 표시 대상 스크린을 식별하는 정보를 포함하고,
    상기 표시 위치 지정 정보는 복수의 비디오 스트림 각각에 대한 상기 컨테이너의 레이어 내에 포함되고, 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 지정하는 정보를 포함하고, 플래그는 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있을지 여부를 나타내고,
    상기 플래그가, 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있다고 나타내는 경우, 상기 플래그는 상기 복수의 비디오 스트림 각각의 상기 화상 데이터에 의한 상기 화상이 상기 복수의 비디오 스트림 각각에 대한 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치에 있게끔 표시에 있어서의 변경을 허용하도록 상기 수신 장치가 상기 복수의 비디오 스트림의 처리를 제어하게 하는, 송신 방법.
  10. 수신 장치로서,
    부호화된 화상 데이터를 포함하는 비디오 스트림을 포함하는 컨테이너를 수신하는 수신부를 포함하고,
    상기 컨테이너의 레이어는 상기 화상 데이터에 따라 표시될 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 포함하고,
    상기 수신 장치는 상기 표시 위치 지정 정보에 의해 지정된 표시 대상 스크린 상의 화상의 표시를 제어하는 표시 제어부를 포함하고,
    상기 표시 위치 지정 정보는 상기 표시 대상 스크린을 식별하는 정보를 포함하고,
    상기 표시 위치 지정 정보는 복수의 비디오 스트림 각각에 대한 상기 컨테이너의 레이어 내에 포함되고, 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 지정하는 정보를 포함하고, 플래그는 상기 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있을지 여부를 나타내고,
    상기 플래그가, 상기 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있다고 나타내는 경우, 상기 표시 제어부는 상기 복수의 비디오 스트림 각각의 상기 화상 데이터에 의한 상기 화상이 상기 복수의 비디오 스트림 각각에 대한 상기 표시 위치 지정 정보에 의해 지정된 상기 표시 위치와는 상이한 표시 위치에 있게끔 표시에 있어서의 변경을 허용하도록 상기 복수의 비디오 스트림의 처리를 제어하도록 구성되는, 수신 장치.
  11. 제10항에 있어서,
    상기 비디오 스트림을 복호화하여 복호화된 화상 데이터를 획득하는 복호화부와,
    상기 복호화된 화상 데이터를 상기 표시 위치 지정 정보에 의해 지정된 표시 대상 스크린에 송신하는 송신부를 더 포함하는 수신 장치.
  12. 제11항에 있어서,
    상기 송신부는 상기 복호화된 화상 데이터의 프레임마다의 헤더 정보에, 프레임 단위로 카운트하는 타임 코드를 삽입하는, 수신 장치.
  13. 제10항 또는 제11항에 있어서,
    상기 컨테이너를, 상기 표시 위치 지정 정보에 의해 지정된 표시 대상 스크린과 연관된 표시 제어부로 송신하는 송신부를 더 포함하는, 수신 장치.
  14. 제10항 또는 제11항에 있어서, 스크린을 포함하는, 수신 장치.
  15. 제10항 또는 제11항에 있어서, 상기 표시 위치 지정 정보는 스크린 식별자 및 윈도우 식별자를 포함하는 세트에 속하는 식별자를 적어도 포함하는, 수신 장치.
  16. 제10항 또는 제11항에 있어서, 상기 컨테이너는 적어도 하나의 자막 스트림 및 적어도 하나의 비디오 스트림을 포함하고, 상기 적어도 하나의 자막 스트림은 특정 표시 위치 지정 정보 식별자와 연관되는, 수신 장치.
  17. 제10항 또는 제11항에 있어서, 상기 컨테이너는 적어도 프로그램표 정보 및 적어도 하나의 비디오 스트림을 포함하고, 상기 프로그램표 정보는 특정 표시 위치 지정 정보 식별자와 연관되는, 수신 장치.
  18. 제10항 또는 제11항에 있어서, 동일한 표시 영역 내의 적어도 2개의 상이한 비디오 스트림과 연관된 콘텐츠를 표시하는 디스플레이를 포함하는 수신 장치.
  19. 수신 방법으로서,
    부호화된 화상 데이터를 포함하는 비디오 스트림을 포함하는 컨테이너를 수신하는 단계를 포함하고,
    상기 컨테이너의 레이어는 상기 화상 데이터에 따라 표시될 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 포함하고,
    상기 수신 방법은 상기 표시 위치 지정 정보에 의해 지정된 표시 대상 스크린 상의 화상의 표시를 제어하는 단계를 포함하고,
    상기 표시 위치 지정 정보는 표시 대상 스크린을 식별하는 정보를 포함하고,
    상기 표시 위치 지정 정보는 복수의 비디오 스트림 각각에 대한 상기 컨테이너의 레이어 내에 포함되고, 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 지정하는 정보를 포함하고, 플래그는 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있을지 여부를 나타내고,
    상기 플래그가, 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있다고 나타내는 경우, 상기 제어하는 단계는 상기 복수의 비디오 스트림 각각의 상기 화상 데이터에 의한 상기 화상이 상기 복수의 비디오 스트림 각각에 대한 상기 표시 위치 지정 정보에 의해 지정된 상기 표시 위치와는 상이한 표시 위치에 있게끔 표시에 있어서의 변경을 허용하도록 상기 복수의 비디오 스트림의 처리를 제어하는 것을 포함하는, 수신 방법.
  20. 수신 표시 방법으로서,
    부호화된 화상 데이터를 포함하는 비디오 스트림을 포함하는 컨테이너를 수신하는 단계를 포함하고,
    상기 컨테이너의 레이어는 상기 화상 데이터에 따라 표시될 화상의 표시 위치를 지정하는 표시 위치 지정 정보를 포함하고,
    상기 수신 표시 방법은 적어도 상기 표시 위치 지정 정보를 포함하는 결정 정보에 기초하는 결정에 의해, 상기 표시 위치 지정 정보에 의해 지정된 표시 위치 또는 상기 표시 위치 지정 정보에 의해 지정된 상기 표시 위치와 다른 표시 위치에 상기 화상을 배열하고,
    상기 표시 위치 지정 정보는 표시 대상 스크린을 식별하는 정보를 포함하고,
    상기 표시 위치 지정 정보는 복수의 비디오 스트림 각각에 대한 상기 컨테이너의 레이어 내에 포함되고, 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 지정하는 정보를 포함하고, 플래그는 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있을지 여부를 나타내고,
    상기 플래그가, 수신 장치가 상기 복수의 비디오 스트림 각각에 대한 표시 위치를 상기 표시 위치 지정 정보에 의해 지정된 표시 위치와는 상이한 표시 위치가 되도록 설정할 수 있다고 나타내는 경우, 상기 수신 표시 방법은 상기 복수의 비디오 스트림 각각의 상기 화상 데이터에 의한 상기 화상이 상기 복수의 비디오 스트림 각각에 대한 상기 표시 위치 지정 정보에 의해 지정된 상기 표시 위치와는 상이한 표시 위치에 있게끔 표시에 있어서의 변경을 허용하도록 상기 복수의 비디오 스트림의 처리를 제어하는 것을 포함하는, 수신 표시 방법.
KR1020157011985A 2012-11-26 2013-11-19 송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법 KR102181994B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2012-258028 2012-11-26
JP2012258028 2012-11-26
PCT/JP2013/081104 WO2014080879A1 (ja) 2012-11-26 2013-11-19 送信装置、送信方法、受信装置、受信方法および受信表示方法

Publications (2)

Publication Number Publication Date
KR20150090055A KR20150090055A (ko) 2015-08-05
KR102181994B1 true KR102181994B1 (ko) 2020-11-24

Family

ID=50776061

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157011985A KR102181994B1 (ko) 2012-11-26 2013-11-19 송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법

Country Status (9)

Country Link
US (1) US10123069B2 (ko)
EP (1) EP2925001B1 (ko)
JP (1) JP6479473B2 (ko)
KR (1) KR102181994B1 (ko)
CN (1) CN105052158A (ko)
BR (1) BR112015011487A2 (ko)
RU (1) RU2633385C2 (ko)
SG (1) SG11201504103WA (ko)
WO (1) WO2014080879A1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5641090B2 (ja) 2013-03-14 2014-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
US10021205B2 (en) * 2013-10-22 2018-07-10 Salesforce.Com, Inc. Rules-based multipoint routing of real-time information using client-server architecture
CN104270665A (zh) * 2014-09-18 2015-01-07 乐视网信息技术（北京）股份有限公司 一种视频辅助信息的显示方法及装置
JP2016092769A (ja) * 2014-11-11 2016-05-23 シャープ株式会社 受信機
JP6868776B2 (ja) * 2015-10-28 2021-05-12 ソニーグループ株式会社 送信装置、送信方法、受信装置および受信方法
TWI728061B (zh) * 2016-03-15 2021-05-21 日商新力股份有限公司 送訊裝置及收訊裝置
JP6741784B2 (ja) * 2016-04-08 2020-08-19 ヴィズビット インコーポレイテッド ビューを意識した３６０度ビデオストリーミング
JP6969541B2 (ja) * 2016-04-12 2021-11-24 ソニーグループ株式会社 送信装置および送信方法
CN110536151B (zh) * 2019-09-11 2021-11-19 广州方硅信息技术有限公司 虚拟礼物特效的合成方法和装置、直播系统
WO2021174389A1 (zh) * 2020-03-02 2021-09-10 深圳市大疆创新科技有限公司 视频的处理方法和装置
CN111541930B (zh) * 2020-04-27 2023-04-25 广州酷狗计算机科技有限公司 直播画面的显示方法、装置、终端及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009118166A (ja) * 2007-11-06 2009-05-28 Sharp Corp テレビジョン受像機
KR101006330B1 (ko) * 2003-04-08 2011-01-06 마이크로소프트 코포레이션 멀티 디스플레이 시스템, 방법, 컴퓨터 판독가능 기록매체, 및 멀티 디스플레이 출력 분할기

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1023348A (ja) 1996-05-02 1998-01-23 Matsushita Electric Ind Co Ltd テレビ放送番組送信装置，受信装置
US5995146A (en) 1997-01-24 1999-11-30 Pathway, Inc. Multiple video screen display system
JP2000013712A (ja) 1998-06-25 2000-01-14 Toshiba Corp マルチ画面表示装置
JP2000347638A (ja) 1999-06-07 2000-12-15 Hitachi Ltd Ｏｓｄ装置及びこれを用いた符号化ビデオ復号装置並びにこの復号装置を用いたディジタル放送受信装置
JP2001134504A (ja) * 1999-11-02 2001-05-18 Funai Electric Co Ltd ネットワーク装置
US7028327B1 (en) * 2000-02-02 2006-04-11 Wink Communication Using the electronic program guide to synchronize interactivity with broadcast programs
KR20040104500A (ko) * 2002-03-08 2004-12-10 다이니폰 인사츠 가부시키가이샤 정보 제공 시스템 및 페이퍼형 표시 매체
US20050149988A1 (en) * 2004-01-06 2005-07-07 Sbc Knowledge Ventures, L.P. Delivering interactive television components in real time for live broadcast events
US8165448B2 (en) * 2004-03-24 2012-04-24 Hollinbeck Mgmt. Gmbh, Llc System using multiple display screens for multiple video streams
KR20060134398A (ko) * 2005-06-22 2006-12-28 삼성전자주식회사 전자 프로그램 가이드 정보를 표시하는 방송수신장치 및 그방법
US20090073255A1 (en) 2005-07-11 2009-03-19 Kenichiroh Yamamoto Video Transmitting Apparatus, Video Display Apparatus, Video Transmitting Method and Video Display Method
CN102752641B (zh) 2005-07-18 2016-06-29 汤姆森许可贸易公司 使用元数据来处理多个视频流的方法和设备
JP4408845B2 (ja) * 2005-07-27 2010-02-03 シャープ株式会社 映像合成装置及びプログラム
US8320819B2 (en) * 2005-11-01 2012-11-27 Nokia Corporation Mobile TV channel and service access filtering
JP4229178B2 (ja) * 2006-12-01 2009-02-25 船井電機株式会社 放送受信装置
JP4218724B2 (ja) * 2006-12-28 2009-02-04 船井電機株式会社 放送受信装置
US9712833B2 (en) 2007-06-26 2017-07-18 Nokia Technologies Oy System and method for indicating temporal layer switching points
JP4798184B2 (ja) * 2008-08-04 2011-10-19 ソニー株式会社 番組表の表示制御装置、番組表の表示装置、及び、番組表の表示制御方法
JP5350871B2 (ja) * 2009-04-20 2013-11-27 シャープ株式会社 情報表示装置および情報表示方法
KR20110053160A (ko) 2009-11-13 2011-05-19 삼성전자주식회사 비디오 부가 재생 정보의 3차원 깊이감 조절을 위한 멀티미디어 스트림 생성 방법과 그 장치, 및 수신 방법과 그 장치
KR20110088334A (ko) * 2010-01-28 2011-08-03 삼성전자주식회사 3차원 멀티미디어 서비스를 제공하기 위한 데이터스트림 생성 방법 및 장치, 3차원 멀티미디어 서비스를 제공하기 위한 데이터스트림 수신 방법 및 장치
US8737811B2 (en) 2010-08-06 2014-05-27 Panasonic Corporation Playback device, integrated circuit, playback method, and program
CN101986707A (zh) 2010-11-02 2011-03-16 深圳市同洲电子股份有限公司 可支持显示墙输出的解码器系统及方法
WO2013021643A1 (ja) * 2011-08-11 2013-02-14 パナソニック株式会社 放送通信連携システム、データ生成装置及び受信装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101006330B1 (ko) * 2003-04-08 2011-01-06 마이크로소프트 코포레이션 멀티 디스플레이 시스템, 방법, 컴퓨터 판독가능 기록매체, 및 멀티 디스플레이 출력 분할기
JP2009118166A (ja) * 2007-11-06 2009-05-28 Sharp Corp テレビジョン受像機

Also Published As

Publication number Publication date
RU2015118755A (ru) 2016-12-10
BR112015011487A2 (pt) 2017-07-11
RU2633385C2 (ru) 2017-10-12
JP6479473B2 (ja) 2019-03-06
EP2925001B1 (en) 2020-11-04
SG11201504103WA (en) 2015-06-29
US10123069B2 (en) 2018-11-06
US20150296248A1 (en) 2015-10-15
KR20150090055A (ko) 2015-08-05
CN105052158A (zh) 2015-11-11
JPWO2014080879A1 (ja) 2017-01-05
EP2925001A4 (en) 2016-07-13
EP2925001A1 (en) 2015-09-30
WO2014080879A1 (ja) 2014-05-30

Similar Documents

Publication Publication Date Title
KR102181994B1 (ko) 송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법
US9030526B2 (en) Transmitting apparatus, transmitting method, receiving apparatus, and receiving method
US10015467B2 (en) Digital broadcasting reception method capable of displaying stereoscopic image, and digital broadcasting reception apparatus using same
US11438567B2 (en) Reception device, display control method, transmission device, and transmission method for program content type
KR20120036848A (ko) 방송 송신기, 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
US20140078248A1 (en) Transmitting apparatus, transmitting method, receiving apparatus, and receiving method
KR20120095865A (ko) 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
WO2012081874A2 (ko) 스테레오스코픽 비디오 서비스 위한 시그널링 방법 및 이러한 방법을 사용하는 장치
US20140125762A1 (en) Transmission device, transmission method, reception apparatus, and reception method
US20130215240A1 (en) Receiver apparatus and output method
US20140327740A1 (en) Transmission apparatus, transmisson method, receiver and receiving method
KR20140000136A (ko) 화상 데이터 송신 장치, 화상 데이터 송신 방법, 화상 데이터 수신 장치 및 화상 데이터 수신 방법
US20140232823A1 (en) Transmission device, transmission method, reception device and reception method
EP2579604A1 (en) Receiving device and output method

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant