KR20140053189A - 영상처리시스템, 송신장치, 수신장치, 송신방법, 수신방법 및 컴퓨터 프로그램 - Google Patents
영상처리시스템, 송신장치, 수신장치, 송신방법, 수신방법 및 컴퓨터 프로그램 Download PDFInfo
- Publication number
- KR20140053189A KR20140053189A KR1020147003748A KR20147003748A KR20140053189A KR 20140053189 A KR20140053189 A KR 20140053189A KR 1020147003748 A KR1020147003748 A KR 1020147003748A KR 20147003748 A KR20147003748 A KR 20147003748A KR 20140053189 A KR20140053189 A KR 20140053189A
- Authority
- KR
- South Korea
- Prior art keywords
- program
- video stream
- image
- unit
- important
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims abstract description 124
- 238000000034 method Methods 0.000 title claims description 107
- 238000004590 computer program Methods 0.000 title claims description 13
- 230000005540 biological transmission Effects 0.000 claims abstract description 101
- 230000008569 process Effects 0.000 claims description 33
- 238000004891 communication Methods 0.000 claims description 29
- 238000012546 transfer Methods 0.000 claims description 24
- 230000010365 information processing Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 25
- 230000006870 function Effects 0.000 description 22
- 230000008859 change Effects 0.000 description 18
- 230000009467 reduction Effects 0.000 description 9
- 230000006866 deterioration Effects 0.000 description 7
- 239000011521 glass Substances 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 239000000284 extract Substances 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 108091026890 Coding region Proteins 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
- H04N21/43635—HDMI
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4385—Multiplex stream processing, e.g. multiplex stream decrypting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0613—The adjustment depending on the type of the information to be displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2360/00—Aspects of the architecture of display systems
- G09G2360/02—Graphics controller able to handle multiple formats, e.g. input or output formats
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
- G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
- G09G5/005—Adapting incoming signals to the display format of the display terminal
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
- G09G5/006—Details of the interface to the display terminal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
송신장치와 수신장치를 포함하는 영상처리시스템으로, 상기 송신장치는 입력된 3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와, 상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와, 상기 영상 스트림을 송신하는 스트림 송신부와, 상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 구비하며, 상기 수신장치는 상기 정보를 수신하는 정보 수신부와, 상기 영상 스트림을 수신하는 스트림 수신부와, 상기 영상 스트림을 복호하고, 상기 정보를 이용해 중요프로그램을 특정하여, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 같은 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호처리부를 구비한다.
Description
본 발명은 디지털방송기술에 관한 것으로, 특히, 3D 프로그램과 2D 프로그램이 혼재한 방송프로그램을 송수신하는 기술에 관한 것이다.
텔레비전방송의 디지털화 이행이 진행되고 있고, 방송프로그램은 고화질화하고 있다. 또, 최근에는 3D 프로그램도 방송되게 되었다. 현재, 3D 프로그램은 사이드 바이 사이드 방식으로 부호화되어 있다. 사이드 바이 사이드 방식에서는 좌측 눈 화상과 우측 눈 화상을 각각 가로방향으로 1/2의 사이즈로 축소하고, 이들을 합성하며 1매의 화상으로 하여 종래의 2D 프로그램과 동일한 압축 부호화방식(예를 들어 MPEG-2, H.264/MPEG-4 AVC 등)으로 부호화한다. 이와 같이 사이드 바이 사이드 방식에서는 좌측 눈 화상과 우측 눈 화상을 축소하므로 화질이 열화 한다.
화질의 열화가 발생하기 어려운 부호화방식으로 H.264 MVC(Multi View Coding)가 있다(비 특허문헌 1 참조).
H.264 MVC에서는 예를 들어 좌측 눈 화상은 종래의 2D 프로그램과 마찬가지로 H.264/MPEG-4 AVC를 이용하여 부호화하고, 우측 눈 화상은 동일 시각에 표시되는 좌측 눈 화상의 프레임을 참조하여 부호화한다. H.264 MVC는 사이드 바이 사이드 방식과 비교해 화질의 열화가 적고, 또, 좌측 눈 화상을 참조하여 우측 눈 화상을 부호화하므로 압축 효율이 좋다.
이와 같은 새로운 부호화방식의 등장에 의해 금후에는 2D 프로그램과 3D 프로그램이 혼재하여 방송될 것으로 예상된다.
비 특허문헌 1 : ISO/IEC 14496-10:2009
2D 프로그램과 3D 프로그램이 혼재하고 있는 경우 수신장치는 2D 프로그램과 3D 프로그램이 전환될 때마다 복호방식을 전환할 필요가 있다. 또, 수신장치와 표시장치가 HDMI 케이블로 접속되어 있는 경우 2D 프로그램과 3D 프로그램이 전환될 때마다 수신장치와 표시장치 사이에 HDMI(High-Definition Multimedia Interface) 케이블의 통신 모드를 재설정하고 전송 레이트를 변경할 필요가 있다. 통신 모드의 재설정에는 수초 간을 필요로 하므로 그 사이에 표시장치의 화면이 깜깜해져서 프로그램이 정상적으로 표시되지 않을 가능성이 있다.
예를 들어 본편이 3D 프로그램이고 커머셜이 2D 프로그램이라고 하면, 커머셜로 전환되는 순간 텔레비전 화면이 깜깜해지며 커머셜의 최초의 부분이 표시되지 않을 가능성이 있다. 이것은 커머셜을 방송함으로써 수익을 얻고 있는 방송국에 있어서는 큰 문제이다.
그래서 본 발명은 상기의 문제점을 감안하여 이루어진 것이며, 2D 프로그램과 3D 프로그램이 혼재하고 있는 경우라도 표시장치에서 중요한 프로그램을 정상적으로 표시하는 것이 가능한 영상처리시스템, 송신장치, 수신장치, 송신방법, 수신방법 및 컴퓨터 프로그램을 제공하는 것을 목적으로 한다.
상기의 목적을 달성하기 위해 본 발명의 한 형태의 영상처리시스템은, 송신장치와 수신장치를 포함하는 영상처리시스템으로, 상기 송신장치는 입력된 3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와, 상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와, 상기 영상 스트림을 송신하는 스트림 송신부와, 상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 구비하며, 상기 수신장치는 상기 정보를 수신하는 정보 수신부와, 상기 영상 스트림을 수신하는 스트림 수신부와, 상기 영상 스트림을 복호하고, 상기 정보를 이용해서 중요프로그램을 특정하여, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 동일 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호처리부를 구비하는 것을 특징으로 한다.
상기 구성에 의하면 중요프로그램을 선행프로그램의 전송 레이트와 동일한 전송 레이트로 출력할 수 있으므로, 수신장치와 표시장치 사이에 통신 모드의 재설정을 실행할 필요가 없어진다. 그러므로 표시장치에 있어서 중요한 프로그램을 정상적으로 표시하는 것이 가능해진다.
도 1은 영상처리시스템(1)의 구성을 나타내는 시스템 구성도,
도 2는 송신장치(10)의 구성을 나타내는 블록도,
도 3은 H.264 방식 및 H.264 MVC 방식에 대해 설명하기 위한 도면,
도 4는 3D 부호화부(103)의 상세 구성을 나타내는 도면,
도 5는 부가정보(1400)의 데이터 구성을 나타내는 도면,
도 6은 프로그램정보(1500)의 데이터 구성을 나타내는 도면,
도 7은 송신장치(10)의 동작을 나타내는 플로차트,
도 8은 BD 리코더(20) 및 디지털 텔레비전(30)의 구성을 나타내는 블록도,
도 9는 BD 리코더(20) 및 디지털 텔레비전(30)의 구성을 나타내는 블록도,
도 10은 복호처리부(204)의 내부 구성을 나타내는 블록도,
도 11은 표시 모드와 전송 레이트에 대해 설명하기 위한 도면,
도 12는 BD 리코더(20)의 동작을 나타내는 플로차트,
도 13은 BD 리코더(20) 및 디지털 텔레비전(30)의 동작을 나타내는 플로차트,
도 14는 송신장치(10a)의 구성을 나타내는 블록도,
도 15는 송신장치(10a)의 동작을 나타내는 플로차트,
도 16은 BD 리코더(20a) 및 디지털 텔레비전(30a)의 구성을 나타내는 블록도,
도 17은 복호처리부(204a) 및 HDMI 송신부(205a)의 내부 구성을 나타내는 블록도,
도 18은 BD 리코더(20a)의 동작을 나타내는 플로차트,
도 19는 BD 리코더(20a) 및 디지털 텔레비전(30a)의 동작을 나타내는 플로차트,
도 20은 송신장치(10b)의 구성을 나타내는 블록도,
도 21은 송신장치(10b)의 동작을 나타내는 플로차트,
도 22는 BD 리코더(20b) 및 디지털 텔레비전(30b)의 구성을 나타내는 블록도,
도 23은 BD 리코더(20b)의 동작을 나타내는 플로차트,
도 24는 영상처리시스템(2)의 구성을 나타내는 시스템 구성도이다.
도 2는 송신장치(10)의 구성을 나타내는 블록도,
도 3은 H.264 방식 및 H.264 MVC 방식에 대해 설명하기 위한 도면,
도 4는 3D 부호화부(103)의 상세 구성을 나타내는 도면,
도 5는 부가정보(1400)의 데이터 구성을 나타내는 도면,
도 6은 프로그램정보(1500)의 데이터 구성을 나타내는 도면,
도 7은 송신장치(10)의 동작을 나타내는 플로차트,
도 8은 BD 리코더(20) 및 디지털 텔레비전(30)의 구성을 나타내는 블록도,
도 9는 BD 리코더(20) 및 디지털 텔레비전(30)의 구성을 나타내는 블록도,
도 10은 복호처리부(204)의 내부 구성을 나타내는 블록도,
도 11은 표시 모드와 전송 레이트에 대해 설명하기 위한 도면,
도 12는 BD 리코더(20)의 동작을 나타내는 플로차트,
도 13은 BD 리코더(20) 및 디지털 텔레비전(30)의 동작을 나타내는 플로차트,
도 14는 송신장치(10a)의 구성을 나타내는 블록도,
도 15는 송신장치(10a)의 동작을 나타내는 플로차트,
도 16은 BD 리코더(20a) 및 디지털 텔레비전(30a)의 구성을 나타내는 블록도,
도 17은 복호처리부(204a) 및 HDMI 송신부(205a)의 내부 구성을 나타내는 블록도,
도 18은 BD 리코더(20a)의 동작을 나타내는 플로차트,
도 19는 BD 리코더(20a) 및 디지털 텔레비전(30a)의 동작을 나타내는 플로차트,
도 20은 송신장치(10b)의 구성을 나타내는 블록도,
도 21은 송신장치(10b)의 동작을 나타내는 플로차트,
도 22는 BD 리코더(20b) 및 디지털 텔레비전(30b)의 구성을 나타내는 블록도,
도 23은 BD 리코더(20b)의 동작을 나타내는 플로차트,
도 24는 영상처리시스템(2)의 구성을 나타내는 시스템 구성도이다.
<1. 실시형태 1>
여기서는 본 발명의 실시형태 1인 영상처리시스템(1)에 대해 도면을 참조하면서 설명한다.
<1-1. 시스템의 개요>
도 1은 영상처리시스템(1)의 시스템 구성을 나타내는 도면이다.
동 도면에 나타내는 것과 같이 영상처리시스템(1)은 송신장치(10), BD(Blu-ray Disc) 리코더(20), 디지털 텔레비전(30), HDMI(High-Definition Multimedia Interface) 케이블(40), 리모컨(50) 및 3D 안경(60)으로 구성된다. 또, 송신장치(10), BD 리코더(20) 및 디지털 텔레비전(30)은 각각 본 발명에 관한 송신장치, 수신장치 및 표시장치의 일례이다.
송신장치(10)는 디지털 방송의 방송국에 설치된 장치이다. 송신장치(10)는 2D 프로그램 또는 3D 프로그램인 복수의 프로그램으로 구성되는 방송프로그램을 부호화하여 디지털 방송파에 실어서 송신한다. 송신장치(10)는 방송프로그램을 복호 할 때에 당해 방송프로그램의 프로그램정보를 참조하여 각 프로그램(2D 프로그램 또는 3D 프로그램)이 중요프로그램인가 여부를 판단한다. 그리고, 중요프로그램인 경우 수신 측에서 표시 모드의 전환이 발생하는 것을 억제하기 위한 정보인 중요플래그를 생성한다.
본 실시형태에서 「수신 측」은 BD 리코더(20) 및 디지털 텔레비전(30)을 가리킨다. 또, 본 실시형태에서 「표시 모드」는 「2D 표시 모드」 및 「3D 표시 모드」 중 어느 한쪽이며, 「2D 표시 모드」는 수신 측에서 2D 프로그램을 표시하는 모드를 가리키고, 「3D 표시 모드」는 수신 측에서 3D 프로그램을 표시하는 모드를 가리킨다.
BD 리코더(20)는 부호화된 방송프로그램을 수신하여 복호 해서 HDMI 케이블(40)을 개재하여 디지털 텔레비전(30)에 출력한다. 여기서, HDMI 케이블은 HDMI 규격에 준거한 통신방식으로 디지털신호를 전송한다.
BD 리코더(20)는 방송프로그램을 디지털 텔레비전(30)에 출력할 때에 복호한 방송프로그램에 포함되는 각 프로그램(2D 프로그램 또는 3D 프로그램)에 대해 중요프로그램인가 여부를 판단한다. 그리고, 중요프로그램이면서, 당해 중요프로그램의 표시 모드와 직전에 출력된 선행프로그램의 표시 모드가 다른 경우 BD 리코더(20)는 중요프로그램의 표시 모드를 변경한다. 즉, 2D 프로그램을 3D 프로그램으로 변환하거나 3D 프로그램을 2D 프로그램으로 변환하거나 한다. 그러므로 BD 리코더(20)로부터 디지털 텔레비전(30)에 중요프로그램을 출력할 때에는 표시 모드의 전환이 발생하지 않는다.
리모컨(50)은 BD 리코더(20)에 각종의 지시를 입력하기 위한 입력 디바이스이다. 사용자는 리모컨(50)을 조작함으로써 원하는 채널의 선택 등, BD 리코더(20)에 대해서 각종의 지시를 입력할 수 있다.
디지털 텔레비전(30)은 3D 표시 모드일 때 우측 눈 용 화상과 좌측 눈 용 화상을 교대로 디스플레이에 출력한다. 사용자는 액정셔터를 구비하는 3D 안경(60)을 장착함으로써 입체적인 3D 프로그램을 시청할 수 있다.
<1-2. 송신장치(10)의 구성>
도 2는 송신장치(10)의 구성을 나타내는 블록도이다. 동 도면에 나타내는 것과 같이, 송신장치(10)는 입력부(101), 2D 부호화부(102), 3D 부호화부(103), 중요플래그 생성부(104), 다중화부(105) 및 스트림 송신부(106)로 구성된다.
송신장치(10)는 도시되어 있지 않은 프로세서, RAM(Random Access Memory), ROM(Read Only Memory), 하드디스크를 포함한다. 또, 송신장치(10)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
입력부(101)는 도시하고 있지 않은 프로그램 제작장치에서 제작된 방송프로그램 및 당해 방송프로그램의 구성이 기재된 프로그램정보를 수신한다. 입력부(101)가 수신하는 방송프로그램은 2D 표시용의 2D 프로그램 및 3D 표시용의 3D 프로그램을 복수 포함하여 구성된다.
2D 프로그램은 약 60 프레임/초(frame/sec)의 인터레이스 화상(이하, 2D 원화상이라고 한다)이 시간적으로 연속한 것이다. 3D 프로그램은 좌측 눈 용 및 우측 눈 용 각각에 대해 약 60 프레임/초의 인터레이스 화상(이하, 좌측 눈 용 원화상 및 우측 눈 용 원화상이라고 한다)이 시간적으로 연속한 것이다.
입력부(101)는 2D 프로그램을 2D 부호화부(102)에 출력하고, 3D 프로그램을 3D 부호화부(103)에 출력하며, 프로그램정보를 중요플래그 생성부(104)에 출력한다.
2D 부호화부(102)는 2D 프로그램을 수신하고, 수신한 2D 프로그램을 2D 부호화방식(예를 들어 H.264 방식)을 이용하여 부호화한다.
3D 부호화부(103)는 3D 프로그램을 수신하고, 수신한 3D 프로그램을 3D 부호화방식(예를 들어 H.264 MVC 방식)을 이용하여 부호화한다.
중요플래그 생성부(104)는 프로그램정보를 수신하고, 수신한 프로그램정보를 참조하여 현재 2D 부호화부(102) 또는 3D 부호화부(103)에서 부호화처리 중인 프로그램이 중요프로그램인가 여부를 판단한다. 중요플래그 생성부(104)는 부호화처리 중인 프로그램이 중요프로그램이라고 판단하면 중요플래그 「1」을 다중화부(105)에 출력한다. 한편, 중요플래그 생성부(104)는 부호화되어 있는 프로그램이 중요프로그램이 아니고 통상프로그램이라고 판단하면 중요플래그 「0」을 다중화부(105)에 출력한다. 프로그램정보에 대해서는 후술한다.
다중화부(105)는 2D 부호화부(102)로부터 부호화된 2D 프로그램을 수신하고, 3D 부호화부(103)로부터 부호화된 3D 프로그램과 후술하는 부가정보를 수신한다. 또, 다중화부(105)는 도시하고 있지 않은 음성 부호화부로부터 음성 스트림을 수신한다.
다중화부(105)는 중요플래그 생성부(104)로부터 수신한 중요플래그와 3D 부호화부(103)로부터 수신한 부가정보를 PSI(Program Specific Information)에 기재한다. 또, 다중화부(105)는 방송프로그램에 포함되는 각 프로그램이 2D 프로그램인가 3D 프로그램인가를 나타내는 3D 플래그를 PSI에 기재한다. 본 실시형태에서는 일례로 3D 플래그 「0」이 2D 프로그램을 나타내고, 3D 플래그 「1」이 3D 프로그램을 나타내는 것으로 한다.
다중화부(105)는 부호화된 2D 프로그램 및 부호화된 3D 프로그램을 포함하는 영상 스트림, 음성 스트림, PSI 및 그 외의 멀티미디어 스트림 등을 다중화하여 트랜스포트 스트림(TS)을 생성한다. 다중화부(105)는 생성한 트랜스포트 스트림을 스트림 송신부(106)에 출력한다.
스트림 송신부(106)는 다중화부(105)에서 생성된 트랜스포트 스트림을 디지털 방송파에 중첩하여 송신한다.
도 2에 기재의 TS(1100)는 스트림 송신부(106)로부터 송신되는 트랜스포트 스트림을 간략화하여 기재한 것이다. 3D 프로그램(1102)이 선두의 프로그램이다. 3D 프로그램(1102)에 이어, 2D 프로그램(1104), 2D 프로그램(1106), …의 순으로 송신된다. 중요플래그(1101)는 3D 프로그램(1102)에 대응한다. 중요플래그(1101)의 값은 「0」이므로 3D 프로그램(1102)은 통상프로그램이다. 중요플래그(1103)는 2D 프로그램(1104)에 대응한다. 중요플래그(1103)의 값은 「1」이므로 2D 프로그램(1104)은 중요프로그램이다. 중요플래그(1105)는 2D 프로그램(1106)에 대응한다. 중요플래그(1104)의 값은 「0」이므로 2D 프로그램(1106)은 통상프로그램이다.
<1-3. 부호화방식의 상세>
여기에서는 2D 부호화부(102) 및 3D 부호화부(103)의 상세에 대해 설명한다.
도 3 (a)는 2D 부호화부(102)에서 2D 부호화방식을 이용하여 부호화된 스트림의 프레임 참조관계를 나타낸 도면이다. 여기서, 「프레임」이란 부호화의 단위이다. 2D 부호화방식으로 부호화된 스트림은 참조 프레임을 이용하지 않고 프레임 내 예측부호화를 실시하는 I프레임과 이미 처리된 1매의 프레임을 참조하여 프레임 간 예측부호화를 실시하는 P프레임과 이미 처리된 2매의 프레임을 동시에 참조해 프레임 간 예측부호화를 실시하는 B프레임을 포함한다. 이와 같이 2D 부호화부(102)는 2D 부호화방식으로 시간방향의 상관특성을 이용한 프레임 간 예측부호화를 이용한다. 일례로 H.264/MPEG-4 AVC이다.
도 3 (b)는 3D 부호화부(103)에서 3D 부호화방식을 이용하여 부호화된 스트림의 프레임 참조관계를 나타낸 도면이다. 도 3 (b)의 상단은 좌측 눈 용 원화상을 부호화함으로써 얻어지는 레프트 뷰 비디오 스트림이다. 한편, 도 3 (b)의 하단은 우측 눈 용 원화상을 부호화함으로써 얻어지는 라이트 뷰 비디오 스트림이다.
레프트 뷰 비디오 스트림은 도 3 (a)의 2D 부호화방식과 동일한 참조구조를 가지고 있다.
라이트 뷰 비디오 스트림은 시간방향의 상관특성을 이용한 프레임 간 예측부호화에 더하여 시점 간의 상관특성을 이용한 프레임 간 예측부호화에 의해 압축되어 있다. 즉, 라이트 뷰 비디오 스트림의 프레임은 레프트 뷰 비디오 스트림의 동일 표시시각의 프레임을 참조해 압축되어 있다.
레프트 뷰 비디오 스트림과 같이 단일체로 복호 가능한 스트림을 「베이스 뷰 비디오 스트림」이라고 한다. 한편, 라이트 뷰 비디오 스트림과 같이 베이스 뷰 비디오 스트림을 구성하는 프레임을 참조하고 있고 베이스 뷰 비디오 스트림이 복호된 후에 복호 가능한 스트림을 「애디셔널 뷰 스트림」 또는 「디펜던트 뷰 스트림」이라고 한다.
이어서, 도 4를 이용하여 3D 부호화부(103)에 의한 부호화처리에 대해 보다 상세하게 설명한다.
부호화부(1302)는 좌측 눈 용 원화상(1301)을 부호화하여 좌측 눈 화상(1303)을 출력한다. 부호화부(1302)로부터 순차 출력되는 좌측 눈 화상(1303)을 나열한 부호화 열이 레프트 뷰 비디오 스트림이다. 본 실시형태에서는 레프트 뷰 비디오 스트림이 베이스 뷰 비디오 스트림에 상당한다.
상술한 것과 같이 우측 눈 용 원화상(1304)은 동 시각에 표시되는 좌측 눈 용 원화상(1301)과의 차분을 부호화한다. 거기서 먼저 복호부(1305)는 부호화된 좌측 눈 화상(1303)을 복호하여 복호된 좌측 눈 화상(1306)을 얻는다. 그리고, 압축율을 높이기 위해 화상 압축부(1307)는 좌측 눈 화상(1306)을 축소하여 해상도를 떨어뜨려서 축소화상(1308)을 생성한다. 또, 화상 압축부(1307)는 우측 눈 용 원화상(1304)을 축소하여 축소화상(1309)을 생성한다. 화상 압축부(1307)는 좌측 눈 화상(1306) 및 우측 눈 용 원화상(1304)의 세로방향만을 축소해도 좋고, 가로방향만을 축소해도 좋으며, 세로방향 및 가로방향 모두 축소해도 좋다.
차분 산출기(1310)는 좌측 눈 용의 축소화상(1308)과 우측 눈 용의 축소화상(1309)의 차분을 산출한다. 부호화부(1311)는 산출된 차분을 부호화한다. 부호화부(1311)로부터 순차 출력되는 부호화된 차분(1312)을 나열한 부호화 열이 라이트 뷰 비디오 스트림이다. 본 실시형태에서는 라이트 뷰 비디오 스트림이 애디셔널 뷰 비디오 스트림에 상당한다.
부가정보 생성부(1313)는 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림의 각각에 대해 화상 압축부(1307)에 의한 축소 정도 등을 기재한 부가정보를 생성한다. 부가정보는 3D 부호화부(103)로부터 다중화부(105)에 출력되고, 다중화부(105)에 의해 PSI의 PMT(Program Map Table) 내에 기재된다.
<1-4. 부가정보에 대해>
여기에서는 부가정보의 데이터 구성 및 이용방법에 대해 설명한다.
먼저, 3D 부호화부(103)에서 생성된 애디셔널 뷰 비디오 스트림의 복호 처리에 대해 간단하게 설명한다. BD 리코더(20)는 애디셔널 뷰 비디오 스트림을 복호 할 때 부호화의 역의 동작을 실행하면 좋다. 즉, BD 리코더(20)는 먼저 부호화된 차분을 복호한다. 다음에, 복호된 베이스 뷰 비디오 스트림을 축소하여 해상도를 떨어뜨린 축소화상을 생성한다. 그리고, 복호한 차분과 축소화상을 가산함으로써 축소된 복호 화상을 생성한다. 마지막으로, BD 리코더(20)는 축소된 복호 화상을 신장함으로써 표시할 우측 눈 용 화상을 얻는다.
이와 같이 3D 부호화부(103)에 의한 부호화방식으로는 복호된 우측 눈 용 화상은 좌측 눈 용 화상에 비해 해상도가 저하하고 있다. 그러나 사용자는 좌측 눈 용 화상과 우측 눈 용 화상을 교대로 보므로 사용자의 뇌 내에서 좌측 눈 용 화상과 우측 눈 용 화상이 합성되기 때문에 우측 눈 용 화상의 해상도의 저하는 그다지 인식되지 않는다.
그런데, 상술한 것과 같이 BD 리코더(20)가 중요프로그램의 표시 모드를 바로 옆의 선행프로그램의 표시 모드에 맞추기 위해 3D 프로그램을 2D 프로그램으로 변환하는 경우 좌측 눈 용 화상을 파기하고 해상도가 저하한 우측 눈 용 화상만 선택해서 출력하면 화질의 열화가 확실해져서 사용자에게 위화감을 준다. 그래서 BD 리코더(20)가 3D 프로그램을 2D 프로그램으로 변환할 때에 적절한 화상을 선택할 수 있도록 부가정보 생성부(1313)는 부가정보를 생성한다.
부가정보의 데이터 구성의 일례를 도 5에 나타낸다. 도 5에 기재의 부가정보(1400)는 대상 스트림(부가정보(1400)가 부여되어 있는 스트림)이 베이스 뷰 비디오 스트림인가 애디셔널 뷰 비디오 스트림인가를 나타내는 플래그(1401) 및 대상 스트림이 애디셔널 뷰 비디오 스트림인 경우에 레프트 뷰 비디오 스트림인가 라이트 뷰 비디오 스트림인가를 나타내는 플래그(1402)와 가로방향의 축소 정도(1403)와 세로방향의 축소 정도(1404)와 2D 표시 모드로 출력할 때에 이용할 것인가 여부를 나타내는 플래그(1405)를 포함한다.
부가정보 생성부(1313)는 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림의 생성시에 각각의 스트림에 대해 도 5의 부가정보(1400)에 값을 기술해 부가정보(1400)를 완성한다.
BD 리코더(20)에서 3D 프로그램을 2D 프로그램으로 변환할 때의 화질의 열화를 방지하기 위해 가로방향의 축소 정도(1403) 또는 세로방향의 축소 정도(1404) 중 어느 한쪽에 「50%」 등 축소되어 있다는 것을 나타내는 값이 기재되어 있는 경우 부가정보 생성부(1313)는 플래그(1405)의 값을 「거짓(False)」으로 설정한다. 한편, 가로방향의 축소 정도(1403) 및 세로방향의 축소 정도(1404)가 모두 「100%」 등과 같이 원화상을 축소하고 있지 않은 것을 나타내는 값이 기재되어 있는 경우 부가정보 생성부(1313)는 플래그(1405)의 값을 「참(True)」로 설정한다.
도 4에서 설명한 것과 같이 부호화처리를 하는 경우 부가정보 생성부(1313)는 애디셔널 뷰 비디오 스트림에 부여하는 부가정보(1400)의 플래그(1405)를 「거짓」로 설정한다.
<1-5. 프로그램정보의 데이터 구성>
도 6은 프로그램정보(1500)의 데이터 구성을 나타내는 도면이다. 프로그램정보(1500)는 방송프로그램마다 생성되어 있고, 방송프로그램을 구성하는 각 프로그램에 관한 정보를 기재한 것이다. 일례로 프로그램정보(1500)는 각 프로그램의 프로그램 ID, 프로그램 내용, 중요도 및 표시형태를 포함한다.
프로그램 ID는 각 프로그램의 송신 순서를 나타내는 번호이다. 프로그램 내용은 「본편」 또는 「커머셜」의 어느 하나이다. 중요도는 「통상」 또는 「중요」 중 어느 하나이다. 상술한 것과 같이 방송국에 있어서는 스폰서 기업과의 관계상, 본편이 정상적으로 표시되지 않는 경우보다 커머셜이 정상적으로 표시되지 않는 경우가 문제가 된다. 그래서, 본 실시형태에서는 일례로 커머셜을 「중요프로그램」으로 규정하고, 중요도를 「중요」로 설정한다. 또, 본편을 「통상프로그램」으로 규정하고, 중요도를 「통상」으로 설정한다. 표시형태는 프로그램이 2D 프로그램인가 3D 프로그램인가를 나타내는 정보이다.
<1-6. 송신장치(10)의 동작>
도 7은 송신장치(10)의 동작을 나타내는 플로차트이다.
입력부(101)는 처리 대상인 프로그램(여기에서는 「대상프로그램」이라고 한다)의 입력을 수신한다(스텝 S1). 대상프로그램이란 방송프로그램을 구성하는 2D 프로그램 또는 3D 프로그램이다. 입력부(101)는 스텝 S1의 전에 당해 방송프로그램에 대응하는 프로그램정보의 입력을 수신하고 수신한 프로그램정보를 중요플래그 생성부(104)에 인계하고 있는 것으로 한다.
스텝 S1에서 입력된 대상프로그램이 2D 프로그램인 경우(스텝 S2에서 「2D」) 입력부(101)는 대상프로그램을 2D 부호화부(102)에 출력한다. 그리고, 2D 부호화부(102)는 대상프로그램을 부호화한다(스텝 S3). 2D 부호화부(102)는 부호화된 2D 프로그램을 다중화부(105)에 출력한다.
대상프로그램이 3D 프로그램인 경우(스텝 S2로 「3D」) 입력부(101)는 대상프로그램을 3D 부호화부(103)에 출력한다. 그리고, 3D 부호화부(103)는 대상프로그램을 부호화하여 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림을 생성한다(스텝 S4). 또, 이하에서는 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림의 조를 「부호화된 3D 프로그램」이라고 기재하는 경우가 있다.
이어서, 3D 부호화부(103)는 스텝 S4에서 생성한 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림 각각에 대해 부가정보를 생성한다(스텝 S5). 3D 부호화부(103)는 부호화된 3D 프로그램 및 부가정보를 다중화부(105)에 출력한다.
중요플래그 생성부(104)는 입력부(101)로부터 수신한 프로그램정보를 참조하여(스텝 S6) 대상프로그램이 중요프로그램인가 여부를 판단한다. 여기서, 중요플래그 생성부(104)는 대상프로그램을 프로그램 ID에 의해 식별할 수 있다. 그래서 중요플래그 생성부(104)는 프로그램정보로부터 대상프로그램의 프로그램 ID에 대응하는 중요도를 추출한다. 중요도가 「중요」로 설정되어 있는 경우 대상프로그램은 중요프로그램이다. 중요도가 「통상」으로 설정되어 있는 경우 대상프로그램은 중요프로그램이 아니다.
대상프로그램이 중요프로그램인 경우(스텝 S7로 YES), 중요플래그 생성부(104)는 중요플래그로 「1」을 생성하여(스텝 S8) 다중화부(105)에 출력한다.
대상프로그램이 중요프로그램이 아닌 경우(스텝 S7로 NO), 중요플래그 생성부(104)는 중요플래그로 「0」을 생성하여(스텝 S9) 다중화부(105)에 출력한다.
또, 스텝 S6~스텝 S9의 처리는 스텝 S3 및 스텝 S4와 병렬로 해도 좋다.
다중화부(105)는 부호화된 2D 프로그램, 부호화된 3D 프로그램, PSI, 음성 스트림, 그 외의 멀티미디어 스트림을 수신하고, 이들을 다중화해 트랜스포트 스트림을 생성한다(스텝 S10).
스트림 송신부(106)는 다중화부(105)에서 생성된 트랜스포트 스트림을 디지털 방송파에 중첩하여 송신한다(스텝 S11).
<1-7. BD 리코더(20)의 구성>
도 8은 BD 리코더(20) 및 디지털 텔레비전(30)의 구성을 나타내는 블록도이다.
도 8에 나타내는 것과 같이, BD 리코더(20)는 튜너(201), 다중 분리부(202), 제어정보 관리부(203), 복호처리부(204) 및 HDMI 송신부(205)로 구성된다.
BD 리코더(20)는 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, BD 리코더(20)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로 실현된다.
튜너(201)는 디지털 방송파를 수신해서 복조하여 트랜스포트 스트림(TS)을 얻는다.
다중 분리부(202)는 트랜스포트 스트림을 디 멀티플렉스 하여 PSI 등의 제어정보 스트림, 사용자에 의해 선택된 프로그램에 대응하는 영상 스트림, 음성 스트림 등을 분리한다. 다중 분리부(202)는 제어정보 스트림을 제어정보 관리부(203)에 출력하고, 영상 스트림을 복호처리부(204)에 출력한다.
제어정보 관리부(203)는 리모컨(50)을 개재하여 사용자로부터 프로그램의 선택을 수신한다. 또, 제어정보 관리부(203)는 다중 분리부(202)로부터 제어정보 스트림을 수신한다. 제어정보 스트림에는 선택된 프로그램이 포함되는 엘리멘터리 스트림을 지정하기 위한 스트림 정보(예를 들면 ID)가 기재되어 있다. 그래서 제어정보 관리부(203)는 선택된 프로그램이 포함되는 엘리멘터리 스트림의 ID를 다중 분리부(202)에 통지함으로써 다중 분리부(202)에 통지한 ID가 부여된 엘리멘터리 스트림의 디 멀티플렉스를 의뢰한다. 또, 제어정보 관리부(203)는 제어정보 스트림에서 선택된 프로그램에 대응하는 중요플래그 및 부가정보를 추출하여 복호처리부(204)에 출력한다.
복호처리부(204)는 도 10에 나타내는 것과 같이 2D/3D 판단부(211), 전환부(212), 2D 복호부(213), 3D 복호부(214) 및 출력제어부(215)를 포함한다.
2D/3D 판단부(211)는 다중 분리부(202)로부터 수신한 영상 스트림에 포함되는 각 프로그램을 2D 복호부(213) 및 3D 복호부(214)에 배분하기 위해 각 프로그램의 3D 플래그를 참조하여 각 프로그램이 2D 프로그램인가 3D 프로그램인가를 판단한다. 2D/3D 판단부(211)는 각 프로그램을 판단 결과와 함께 전환부(212)에 출력한다.
전환부(212)는 2D/3D 판단부(211)의 접속처를 2D 복호부(213) 또는 3D 복호부(214)로 전환하는 기능을 갖는다. 전환부(212)는 2D/3D 판단부(211)에서 2D 프로그램을 수신하면 2D/3D 판단부(211)와 2D 복호부(213)를 접속하여 수신한 2D 프로그램을 2D 복호부(213)에 출력한다. 전환부(212)는 2D/3D 판단부(211)에서 3D 프로그램을 수신하면 2D/3D 판단부(211)와 3D 복호부(214)를 접속하여 수신한 3D 프로그램을 3D 복호부(214)에 출력한다.
2D 복호부(213)는 송신장치(10)의 2D 부호화부(102)에 의한 부호화처리에 대응하는 복호 처리를 실행한다.
3D 복호부(214)는 송신장치(10)의 3D 부호화부(103)에 의한 부호화처리에 대응하는 복호 처리를 실행한다.
출력제어부(215)는 2D 복호부(213)로부터 복호된 2D 프로그램을 수신한다. 또, 출력제어부(215)는 3D 복호부(214)로부터 복호된 3D 프로그램을 수신한다. 출력제어부(215)는 수신한 2D 프로그램 및 3D 프로그램에 대응하는 중요플래그의 값을 참조한다. 수신한 프로그램이 중요프로그램이고, 또한, 중요프로그램의 표시 모드가 직전에 출력한 선행프로그램의 표시 모드와 다른 경우 출력제어부(215)는 중요프로그램의 표시 모드를 변경한다. 즉, 출력제어부(215)는 2D 프로그램을 3D 프로그램으로 변환하거나 복호한 3D 프로그램을 2D 프로그램으로 변환한다.
HDMI 송신부(205)는 HDMI 케이블(40)을 접속 가능한 HDMI 연결기를 포함하여 구성된다. HDMI 송신부(205)는 복호처리부(204)로부터 복수의 2D 프로그램 및/또는 3D 프로그램을 포함하는 출력프로그램을 수신하면 수신한 출력프로그램을 HDMI 케이블(40)을 개재하여 디지털 텔레비전(30)에 송신한다.
여기서, 도 11을 이용하여 출력제어부(215)에 의한 표시 모드의 변경에 대해 설명한다. 또, 도 11의 횡축은 시간이다.
(a)는 2D 프로그램을 2D 표시 모드로 표시할 때의 프레임 레이트(frame rate)를 나타내고 있다. HDMI 케이블(40)은 2D 프로그램을 구성하는 각 프레임(2D)을 60fps로 전송한다.
(b)는 3D 프로그램을 3D 표시 모드로 표시할 때의 프레임 레이트를 나타내고 있다. 3D 프로그램을 2D 프로그램과 같은 프레임 레이트로 표시하기 위해 HDMI 케이블(40)은 3D 프로그램을 구성하는 좌측 눈 용 프레임(L)과 우측 눈 용 프레임(R)을 교대로 120fps로 전송한다. 즉, 3D 표시 모드에서는 2D 표시 모드의 2배의 프레임 레이트로 프레임이 전송된다.
(a)의 2D 프로그램을 3D 표시 모드로 변경하는 경우 출력제어부(215)는 (c)에 나타내는 것과 같이 2D 프로그램을 구성하고 있는 각 프레임(2D)을 카피하여 데이터량을 2배로 해서 시차가 없는 3D 프로그램을 생성한다. HDMI 케이블(40)은 오리지널 프레임(2D)과 카피한 프레임(2D)을 교대로 120fps로 전송한다.
(b)의 3D 프로그램을 2D 표시 모드로 변경하는 경우 출력제어부(215)는 (d)에 나타내는 것과 같이 3D 프로그램을 구성하고 있는 좌측 눈 용의 프레임(L)을 선택하며, 우측 눈 용의 프레임을 파기하여 데이터량을 1/2배로 해서 2D 프로그램을 생성한다. HDMI 케이블(40)은 좌측 눈 용의 프레임(L)을 60fps로 전송한다.
<1-8. 디지털 텔레비전(30)의 구성>
도 8에 나타내는 것과 같이 디지털 텔레비전(30)은 HDMI 수신부(301), 영상표시 처리부(302) 및 표시부(303)로 구성된다.
디지털 텔레비전(30)은 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, 디지털 텔레비전(30)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
HDMI 수신부(301)는 HDMI 케이블(40)을 접속 가능한 HDMI 연결기를 포함하여 구성된다. HDMI 수신부(301)는 HDMI 케이블(40)을 개재하여 HDMI 송신부(205)로부터 송신된 출력프로그램을 수신한다. 또, HDMI 송신부(205) 및 HDMI 수신부(301)는 송수신하고 있는 출력프로그램에서 표시 모드의 전환이 발생하면 출력프로그램의 송수신을 정지하고, 제어신호를 송수신하여 통신 모드의 재설정을 실행하며, 전송 레이트를 변경한다.
영상표시 처리부(302)는 내부에 프레임 버퍼를 포함하며, HDMI 수신부(301)로부터 출력프로그램을 수신하면 출력프로그램에 포함되는 프레임을 프레임 버퍼에 저장한다. 여기서, 프레임 버퍼는 2D 표시용 버퍼 및 3D 표시용 버퍼를 포함하고, 또, 3D 표시용 버퍼는 좌측 눈 용 버퍼 및 우측 눈 용 버퍼를 포함한다.
영상표시 처리부(302)는 2D 프로그램의 프레임을 2D 표시용 버퍼에 저장한다. 또, 영상표시 처리부(302)는 3D 프로그램의 좌측 눈 용 프레임을 좌측 눈 용 버퍼에 저장하고, 우측 눈 용 프레임을 우측 눈 용 버퍼에 저장한다.
또, 도 11 (c)와 같이 2D 프로그램으로부터 시차가 없는 3D 프로그램을 생성하며, 3D 표시 모드로 변경한 경우 영상표시 처리부(302)는 오리지널의 프레임을 좌측 눈 용 버퍼에 저장하고, 카피한 프레임을 우측 눈 용 버퍼에 저장한다. 또, 도 11 (d)와 같이 3D 프로그램으로부터 2D 프로그램을 생성하며, 2D 표시 모드로 변경한 경우 영상표시 처리부(302)는 좌측 눈 용 프레임을 2D 표시용 버퍼에 저장한다.
표시부(303)는 일례로 액정 디스플레이이다. 2D 표시 모드일 때 표시부(303)는 2D 프로그램용 버퍼로부터 프레임을 판독하고, 판독한 프레임을 표시주기 60㎐로 표시한다. 3D 표시 모드일 때는 표시부(303)는 좌측 눈 용 버퍼 및 우측 눈 용 버퍼로부터 교대로 좌측 눈 용 프레임 및 우측 눈 용 프레임을 판독하고, 판독한 좌측 눈 용 프레임 및 우측 눈 용 프레임을 표시주기 120㎐로 교대로 표시한다.
<1-9. BD 리코더(20) 및 디지털 텔레비전(30)의 동작>
도 12 및 도 13은 BD 리코더(20) 및 디지털 텔레비전(30)의 동작을 나타내는 플로차트이다.
튜너(201)는 방송프로그램을 수신하여 TS에 복조한다. 다중 분리부(202)는 TS를 디 멀티플렉스 한다(스텝 S20). 다중 분리부(202)는 분리한 영상 스트림(프로그램)을 순차 복호처리부(204)에 출력한다.
복호처리부(204)의 2D/3D 판단부(211)는 3D 플래그를 참조하여 처리 대상인 프로그램(여기에서는 「대상프로그램」이라고 한다)이 2D 프로그램인가 3D 프로그램인가 판단한다(스텝 S21). 3D 플래그가 「0」인 경우 대상프로그램은 2D 프로그램이다. 3D 플래그가 「1」인 경우 대상프로그램은 3D 프로그램이다.
대상프로그램이 2D 프로그램인 경우(스텝 S22로 「2D」) 2D 복호부(213)에서 복호 처리를 실행한다(스텝 S23). 대상프로그램이 3D 프로그램인 경우(스텝 S22로 「3D」) 3D 복호부(214)에서 복호 처리를 실행한다(스텝 S24).
출력제어부(215)는 선행프로그램과 대상프로그램에서 표시 모드의 전환이 발생하는가 여부를 판단한다. 예를 들어 선행프로그램이 2D 프로그램이고 대상프로그램이 3D 프로그램인 경우 및 선행프로그램이 3D 프로그램이고 대상프로그램이 2D 프로그램인 경우에는 표시 모드의 전환이 발생한다.
표시 모드의 전환이 발생하지 않는 경우(스텝 S25로 NO) 스텝 S45로 진행된다.
표시 모드의 전환이 발생하는 경우(스텝 S25로 YES) 출력제어부(215)는 대상프로그램의 중요플래그를 참조하여(스텝 S26) 대상프로그램이 중요프로그램인가 여부를 판단한다. 구체적으로, 중요플래그가 「1」인 경우 대상프로그램은 중요프로그램이다. 한편, 중요플래그가 「0」인 경우 대상프로그램은 중요프로그램이 아니다.
대상프로그램이 중요프로그램이 아닌 경우(스텝 S27로 NO)에는 스텝 S41로 진행된다.
대상프로그램이 중요프로그램이고(스텝 S27로 YES) 또한 2D 프로그램인 경우(스텝 S28로 「2D」) 출력제어부(215)는 대상프로그램에 포함되는 오리지널의 2D 화상을 카피하여(스텝 S29) 3D 표시 모드로 출력 가능한, 시차가 없는 3D 프로그램을 생성한다(스텝 S30). 그 후 스텝 S45로 진행된다.
대상프로그램이 중요프로그램이고(스텝 S27에서 YES) 또한 3D 프로그램인 경우(스텝 S28로 「3D」) 출력제어부(215)는 대상프로그램에 대응하는 부가정보(1400)를 참조하여(스텝 S31) 좌측 눈 용의 프레임 및 우측 눈 용 프레임 중 어느 한쪽을 선택한다(스텝 S32). 애디셔널 뷰 비디오 스트림에 부여된 부가정보(1400)의 플래그(1402)가 라이트 뷰 비디오 스트림을 나타내고 또한 플래그(1405)가 「거짓」으로 설정되어 있는 경우 출력제어부(215)는 좌측 눈 용의 프레임을 선택한다. 출력제어부(215)는 스텝 S32에서 선택된 일방의 프레임만 HDMI 송신부(205)에 출력하고, 선택되지 않은 타방의 프레임을 파기함으로써 2D 표시 모드로 출력 가능한 2D 프로그램을 생성한다(스텝 S33). 그 후 스텝 S34로 진행된다.
표시 모드의 전환이 발생하고 또한 대상프로그램이 중요프로그램이 아닌 경우에는 HDMI 송신부(205)는 통신 모드의 재설정을 실행하여 전송 레이트를 변경한다(스텝 S41). 그리고, HDMI 송신부(205)는 디지털 텔레비전(30)의 HDMI 수신부(301)에 대해서 전송 레이트의 변경통지를 송신한다(스텝 S42).
HDMI 수신부(301)는 변경통지를 수신하면 통신 모드의 재설정을 실행하여 전송 레이트를 변경한다(스텝 S43). 그리고, HDMI 송신부(205)에 대해서 전송 레이트 변경의 완료통지를 송신한다(스텝 S44).
HDMI 송신부(205)는 완료통지를 수신하면 HDMI 케이블(40)에 대상프로그램을 출력한다(스텝 S45). HDMI 수신부(301)는 HDMI 케이블(40)을 개재하여 대상프로그램을 수신한다(스텝 S46). 영상표시 처리부(302)는 HDMI 수신부(301)로부터 대상프로그램을 수신하면 표시부(303)에 출력한다. 표시부(303)는 대상프로그램을 표시한다(스텝 S47).
여기서, 구체적으로, 도 8에 기재의 TS(1100)를 수신한 때의 BD 리코더(20)의 처리에 대해 설명한다.
복호처리부(204)는 먼저 선두의 3D 프로그램(1102)을 복호한다. 그 결과 출력프로그램(1600)의 구간(401)과 같은 화상 열이 된다. 다음에, 복호처리부(204)는 2D 프로그램(1104)을 복호한다. 중요플래그(1103)의 값은 「1」이므로 2D 프로그램(1104)은 중요프로그램이다. 2D 프로그램(1104)을 그대로의 상태로 출력하면 선행프로그램인 3D 프로그램(1102)과의 사이에 표시 모드의 전환이 발생한다. 그래서 출력제어부(215)는 2D 프로그램(1104)을 구성하는 2D 화상을 카피하여 시차가 없는 3D 프로그램을 생성한다. 그 결과 출력프로그램(1600)의 구간(402)과 같은 화상 열이 된다. 다음에, 복호처리부(204)는 2D 프로그램(1106)을 복호한다. 중요플래그(1105)의 값은 「0」이므로 2D 프로그램(1106)은 중요프로그램이 아니다. 그래서 2D 프로그램(1106)은 2D 표시 모드로 출력한다. 그 결과 출력프로그램(1600)의 구간(403)과 같은 화상 열이 된다.
출력프로그램(1600)의 구간(401)과 구간(402)에서는 프레임 레이트가 같다. 그래서 HDMI 송신부(205)와 HDMI 수신부(301) 사이에 통신 모드의 재설정을 실행할 필요가 없다.
출력프로그램(1600)의 구간(402)과 구간(403)은 프레임 레이트가 다르다. 그러므로 프레임 레이트가 전환될 때 HDMI 송신부(205)와 HDMI 수신부(301) 사이에 통신 모드의 재설정을 실행한다. 이에 의해 HDMI 케이블(40)에 의한 데이터 전송처리는 몇 초간 중단되며, 2D 프로그램(1106)의 선두의 일부는 표시부(303)에 표시되지 않을 가능성이 있다.
이어서, 도 9에 기재된 TS(1200)를 수신한 때의 BD 리코더(20)의 처리에 대해 설명한다.
복호처리부(204)는 먼저 선두의 2D 프로그램(1202)을 복호한다. 그 결과 출력프로그램(1700)의 구간(411)과 같은 화상 열이 된다. 다음에, 복호처리부(204)는 3D 프로그램(1204)을 복호한다. 중요플래그(1203)의 값은 「1」이므로 3D 프로그램(1204)은 중요프로그램이다. 3D 프로그램(1204)을 그대로의 상태로 출력하면 선행프로그램인 2D 프로그램(1202)과의 사이에 표시 모드의 전환이 발생한다. 그래서 출력제어부(215)는 3D 프로그램(1204)을 구성하는 좌측 눈 화상 및 우측 눈 화상 중 좌측 눈 화상만 선택하여 2D 프로그램을 생성한다. 그 결과 출력프로그램(1700)의 구간(412)과 같은 화상 열이 된다. 다음에, 복호처리부(204)는 3D 프로그램(1206)을 복호한다. 중요플래그(1205)의 값은 「0」이므로 3D 프로그램(1106)은 중요프로그램은 아니다. 그래서 3D 프로그램(1206)은 3D 표시 모드로 출력한다. 그 결과 출력프로그램(1700)의 구간(413)과 같은 화상 열이 된다.
출력프로그램(1700)의 구간(411)과 구간(412)은 프레임 레이트가 같다. 그래서 HDMI 송신부(205)와 HDMI 수신부(301) 사이에 통신 모드의 재설정을 실행할 필요가 없다.
출력프로그램(1700)의 구간(412)과 구간(413)은 프레임 레이트가 다르다. 그러므로 프레임 레이트가 전환될 때 HDMI 송신부(205)와 HDMI 수신부(301) 사이에 통신 모드의 재설정을 실행한다. 이에 의해 HDMI 케이블(40)에 의한 데이터 전송 처리는 몇 초간 중단되며, 3D 프로그램(1206)의 선두의 일부는 표시부(303)에 표시되지 않을 가능성이 있다.
<2. 실시형태 2>
여기에서는 본 발명의 실시형태 2인 영상처리시스템에 대해 도면을 참조하면서 설명한다.
<2-1. 시스템의 개요>
실시형태 2에 관한 영상처리시스템은 송신장치(10a), BD 리코더(20a), 디지털 텔레비전(30a), HDMI 케이블(40), 리모컨(50) 및 3D 안경(60)으로 구성된다.
상기 실시형태 1에서는 중요프로그램을 송신할 때에 HDMI 케이블(40)의 전송 레이트의 변환이 발생하는 것을 억제하기 위해 BD 리코더(20)가 2D 프로그램을 3D 프로그램으로 변환하거나 3D 프로그램을 2D 프로그램으로 변환하는 기능을 가지고 있었다. 이에 대해 실시형태 2에서는 송신장치(10a)가 2D 프로그램을 3D 프로그램으로 변환하거나 3D 프로그램을 2D 프로그램으로 변환하는 기능을 갖는다.
<2-2. 송신장치(10a)의 구성>
도 14는 송신장치(10a)의 구성을 나타내는 블록도이다. 동 도에 나타내는 것과 같이 송신장치(10a)는 입력부(101), 제어부(120), 2D 부호화부(102), 3D 부호화부(103a), 다중화부(105) 및 스트림 송신부(106)로 구성된다. 또, 3D 부호화부(103a)는 2D 플래그 생성부(130)를 포함한다. 여기서, 실시형태 1의 송신장치(10)와 동일한 기능을 가지는 구성요소에는 송신장치(10)와 동일한 부호를 부여하고 있다.
또, 송신장치(10a)는 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, 송신장치(10a)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
제어부(120)는 입력부(101)에서 2D 프로그램 및 3D 프로그램을 복수 포함하는 방송프로그램과 당해 방송프로그램의 구성이 기재된 프로그램정보를 수신한다.
제어부(120)는 프로그램정보를 참조하여 중요프로그램을 특정하고, 특정한 중요프로그램의 표시형태와 직전에 출력되는 선행프로그램의 표시형태를 확인한다. 제어부(120)는 중요프로그램의 표시형태와 선행프로그램의 표시형태가 다른 경우에는 수신 측에서 중요프로그램을 표시할 때에 표시 모드의 전환이 발생하는 것을 억제하기 위해 2D 프로그램을 3D 프로그램으로 변경하거나 3D 프로그램을 2D 프로그램으로 변경하는 기능을 갖는다.
2D 부호화부(102)는 제어부(120)에서 2D 프로그램을 수신하고, 수신한 2D 프로그램을 2D 부호화방식을 이용하여 부호화한다. 여기서, 2D 부호화부(102)가 부호화하는 2D 프로그램에는 프로그램 제작장치에 의해 생성된 2D 프로그램과 제어부(120)에 의해 3D 프로그램으로부터 생성된 2D 프로그램이 포함된다.
3D 부호화부(103a)는 제어부(120)로부터 3D 프로그램을 수신하고, 수신한 3D 프로그램을 3D 부호화방식을 이용하여 부호화한다. 여기서, 3D 부호화부(103a)가 부호화하는 3D 프로그램에는 프로그램 제작장치에 의해 생성된 3D 프로그램과 제어부(120)에 의해 2D 프로그램으로부터 생성된 시차가 없는 3D 프로그램이 포함된다. 3D 부호화부(103a)는 제어부(120)로부터 3D 프로그램을 수신한 당해 3D 프로그램이 2D 프로그램으로부터 생성된 시차가 없는 것인 경우에는 제어부(120)로부터 그 취지가 통지된다.
2D 플래그 생성부(130)는 3D 부호화부(103a)에 의해 부호화된 3D 프로그램이 2D 프로그램으로부터 생성된 시차가 없는 것인가 여부를 나타내는 2D 플래그를 생성한다. 2D 플래그 생성부(130)는 부호화된 3D 프로그램이 2D 프로그램으로부터 생성된 시차가 없는 것인 경우에는 2D 플래그 「1」을 생성한다. 한편, 2D 플래그 생성부(130)는 부호화된 3D 프로그램이 2D 프로그램으로부터 생성된 것이 아닌 경우에는 2D 플래그 「0」을 생성한다. 2D 플래그는 수신 측에서 용장한 프레임을 삭제하기 위해서 이용된다.
3D 부호화부(103a)는 부호화된 3D 프로그램에 2D 플래그를 부가하여 다중화부(105)에 출력한다.
또, 실시형태 2 및 후술하는 실시형태 3에서는 수신 측에서 3D 프로그램을 3D 프로그램으로 변환하는 처리가 이루어지는 일은 없으므로 3D 부호화부(103a)는 부가정보(1400)를 생성할 필요는 없다.
도 14에 기재된 TS(2100)는 스트림 송신부(106)로부터 송신되는 트랜스포트 스트림을 간략화하여 기재한 것이다. 2D 프로그램(2101)이 선두의 프로그램이다. 2D 프로그램(2101)에 이어 3D 프로그램(2103), 2D 프로그램(2105), …의 순으로 송신된다. 2D 플래그(2102)는 3D 프로그램(2103)에 대응한다. 2D 플래그(2102)의 값은 「1」이므로 3D 프로그램(2103)은 본래는 2D 프로그램이나 제어부(120)에 의해 생성된 시차가 없는 3D 프로그램이다. 2D 플래그(2104)는 3D 프로그램(2105)에 대응한다. 2D 플래그(2104)의 값은 「0」이므로 3D 프로그램(2105)은 제어부(120)에 의해 2D 프로그램으로부터 생성된 시차가 없는 3D 프로그램은 아니다.
<2-3. 송신장치(10a)의 동작>
여기에서는 도 15에 나타내는 플로차트를 이용하여 송신장치(10a)의 동작에 대해 설명한다.
입력부(101)는 처리 대상인 프로그램(여기에서는 「대상프로그램」이라고 기재한다)의 입력을 수신한다(스텝 S51). 대상프로그램이란 방송프로그램을 구성하는 2D 프로그램 또는 3D 프로그램이다. 입력부(101)는 수신한 대상프로그램을 제어부(120)에 인계한다. 또, 입력부(101)는 스텝 S51의 전에 당해 방송프로그램에 대응하는 프로그램정보의 입력을 수신하고, 수신한 프로그램정보를 제어부(120)에 인계하고 있는 것으로 한다.
제어부(120)는 대상프로그램을 수신하면 프로그램정보의 「표시형태」를 참조하여 대상프로그램이 2D 프로그램인가 3D 프로그램인가 판단한다.
대상프로그램이 2D 프로그램인 경우(스텝 S52로 「2D」) 제어부(120)는 프로그램정보의 「표시형태」를 참조하여 대상프로그램의 직전에 출력되는 선행프로그램이 2D 프로그램인가 3D 프로그램인가 판단한다. 또, 제어부(120)는 판단 결과에 따라서 수신 측에서 표시 모드의 전환이 발생하는가 여부를 판단한다.
선행프로그램이 2D 프로그램인 경우 수신 측에서 표시 모드의 전환은 발생하지 않는다(스텝 S53로 NO). 그래서 제어부(120)는 대상프로그램을 그대로 2D 부호화부(102)에 출력한다. 그 후 스텝 S60으로 진행된다.
선행프로그램이 3D 프로그램인 경우 수신 측에서 표시 모드의 전환이 발생한다(스텝 S53로 YES). 그래서 제어부(120)는 프로그램정보의 「중요도」를 참조하여 대상프로그램이 중요프로그램인가 여부를 판단한다.
대상프로그램이 중요프로그램이 아닌 경우(스텝 S55로 NO) 표시 모드의 전환이 발생해도 문제없다. 그래서 제어부(120)는 대상프로그램을 2D 부호화부(102)에 출력한다. 그 후 스텝 S60으로 진행된다.
대상프로그램이 중요프로그램인 경우(스텝 S55로 YES) 표시 모드의 전환이 발생하면 문제이다. 그래서 제어부(120)는 대상프로그램에 포함되는 2D 화상을 카피하여(스텝 S56) 3D 표시 모드로 출력 가능한 시차가 없는 3D 프로그램을 생성한다(스텝 S57). 제어부(120)는 시차가 없는 3D 프로그램을 3D 부호화부(103a)에 출력한다.
3D 부호화부(103a)는 대상프로그램을 수신하면 수신한 대상프로그램을 부호화하여 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림을 생성한다(스텝 S58). 이어서, 2D 플래그 생성부(130)는 2D 플래그로 「1」을 생성하여(스텝 S58) 부호화된 3D 프로그램에 부가한다. 그 후는 실시형태 1의 스텝 S10 이후와 같다.
2D 부호화부(102)는 대상프로그램을 수신하고, 수신한 대상프로그램을 부호화한다(스텝 S60). 그 후는 실시형태 1의 스텝 S10 이후와 같다.
대상프로그램이 3D 프로그램인 경우(스텝 S52로 「3D」) 제어부(120)는 프로그램정보의 「표시형태」를 참조하여 대상프로그램의 직전에 출력되는 선행프로그램이 2D 프로그램인가 3D 프로그램인가 판단한다. 또, 제어부(120)는 판단 결과에 따라서 수신 측에서 표시 모드의 전환이 발생하는가 여부를 판단한다.
선행프로그램이 2D 프로그램인 경우 수신 측에서 표시 모드의 전환이 발생한다(스텝 S61로 YES). 그래서 제어부(120)는 프로그램정보의 「중요도」를 참조하여 대상프로그램이 중요프로그램인가 여부를 판단한다.
대상프로그램이 중요프로그램이 아닌 경우(스텝 S63로 NO) 표시 모드의 전환이 발생해도 문제없다. 그래서 제어부(120)는 대상프로그램을 3D 부호화부(102)에 출력한다. 그 후 스텝 S67에 진행된다.
대상프로그램이 중요프로그램인 경우(스텝 S63로 YES) 표시 모드의 전환이 발생하면 문제이다. 그래서 제어부(120)는 대상프로그램에 포함되는 좌측 눈 용 화상만을 선택하여 2D 부호화부(102)에 출력한다.
2D 부호화부(102)는 제어부(120)로부터 좌측 눈 용 화상을 수신하고, 수신한 좌측 눈 용 화상을 부호화한다(스텝 S65). 그 후는 실시형태 1의 스텝 S10 이후와 같다.
선행프로그램이 3D 프로그램인 경우 수신 측에서 표시 모드의 전환은 발생하지 않는다(스텝 S61로 NO). 그래서 제어부(120)는 대상프로그램을 그대로 3D 부호화부(103a)에 출력한다.
3D 부호화부(103a)는 대상프로그램을 부호화하여 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림을 생성한다(스텝 S66). 이어서, 2D 플래그 생성부(130)는 2D 플래그로 「0」을 생성하여(스텝 S67) 부호화된 3D 프로그램에 부가한다. 그 후는 실시형태 1의 스텝 S10 이후와 같다.
<2-4. BD 리코더(20a)의 구성>
도 16은 BD 리코더(20a) 및 디지털 텔레비전(30a)의 구성을 나타내는 블록도이다.
도 16에 나타내는 것과 같이, BD 리코더(20a)는 튜너(201), 다중 분리부(202), 제어정보 관리부(203), 복호처리부(204a) 및 HDMI 송신부(205a)로 구성된다.
BD 리코더(20a)는 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, BD 리코더(20a)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
튜너(201), 다중 분리부(202), 제어정보 관리부(203)는 각각 실시형태 1과 같다.
여기에서는 도 17을 이용하여 복호처리부(204a) 및 HDMI 송신부(205a)에 대해 설명한다. 복호처리부(204a)는 도 17에 나타내는 것과 같이 2D/3D 판단부(211), 전환부(212), 2D 복호부(213), 3D 복호부(214) 및 출력부(215a)를 포함한다. 또, HDMI 송신부(205a)는 용장플래그(redundant flag) 생성부(216)를 포함한다.
2D/3D 판단부(211), 전환부(212), 2D 복호부(213) 및 3D 복호부(214)는 실시형태 1과 같다.
실시형태 1의 출력제어부(215)는 2D 프로그램을 3D 프로그램으로 변환하거나 복호한 3D 프로그램을 2D 프로그램으로 변환하는 기능을 가지고 있었다. 그러나 실시형태 2에서는 송신장치(10a)에 의해 이미 2D 프로그램을 3D 프로그램으로 변환하거나 3D 프로그램을 2D 프로그램으로 변환하는 처리가 이루어져 있다. 따라서, 실시형태 2의 출력부(215a)는 2D 복호부(213)에 의해 복호된 2D 프로그램을 3D 프로그램으로 변환하거나 3D 복호부(214)에 의해 복호된 3D 프로그램을 2D 프로그램으로 변환하는 기능을 갖지 않는다. 출력부(215a)는 단지 2D 복호부(213)로부터 수신하는 2D 프로그램 및 3D 복호부(214)로부터 수신하는 3D 프로그램을 HDMI 송신부(205a)에 출력하는 기능을 갖는다.
실시형태 2의 HDMI 송신부(205a)는 실시형태 1의 HDMI 송신부(205)와 마찬가지로 HDMI 케이블(40)에 의해 접속된 디지털 텔레비전(30a)에 복호된 프레임을 송신하는 기능을 갖는다. 그때, 용장플래그 생성부(216)는 송신하는 프레임이 2D 프로그램의 프레임 레이트를 2배로 하기 위해 오리지널의 2D 화상을 카피하여 생성된 프레임인 경우에는 본래는 디지털 텔레비전(30a)에서 표시할 필요가 없는 용장한 프레임이라는 것을 나타내는 용장 플래그를 부여한다.
구체적으로, 용장플래그 생성부(216)는 3D 프로그램에 부여된 2D 플래그를 이용해 용장한 프레임과 그 이외의 프레임을 판별한다. 그리고, 용장플래그 생성부(216)는 용장한 프레임에 용장 플래그 「1」을 부여하고, 그 외의 프레임에 용장 플래그 「0」을 부여한다. 용장 플래그는 예를 들어 HDMI 규격에 준거한 통신방식의 프레임의 헤더 등에 저장되어 디지털 텔레비전(30a)에 송신된다.
<2-5. 디지털 텔레비전(30a)의 구성>
도 16에 나타내는 것과 같이, 디지털 텔레비전(30a)은 HDMI 수신부(301), 영상표시 처리부(302a) 및 표시부(303)로 구성된다.
디지털 텔레비전(30a)은 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, 디지털 텔레비전(30a)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
HDMI 수신부(301) 및 표시부(303)는 실시형태 1과 같다.
영상표시 처리부(302a)는 실시형태 1의 영상표시 처리부(302)와 마찬가지로 내부에 프레임 버퍼를 포함하며, HDMI 수신부(301)로부터 출력프로그램을 수신하면 출력프로그램에 포함되는 프레임을 프레임 버퍼에 저장하는 기능을 갖는다.
실시형태 2에서는 각 프레임의 헤더에 용장 플래그가 저장되어 있다. 그래서 영상표시 처리부(302a)는 수신한 프레임의 용장 플래그의 값이 「1」인 경우에는 본래는 디지털 텔레비전(30a)에서 표시할 필요가 없는 용장한 프레임인 것이므로 수신한 프레임을 프레임 버퍼에 저장하지 않고 삭제하는 기능을 갖는다.
<2-6. BD 리코더(20a) 및 디지털 텔레비전(30a)의 동작>
도 18 및 도 19는 BD 리코더(20a) 및 디지털 텔레비전(30a)의 동작을 나타내는 플로차트이다.
튜너(201)는 방송프로그램을 수신하여 TS로 복조한다. 다중 분리부(202)는 TS를 디 멀티플렉스 한다(스텝 S70). 다중 분리부(202)는 분리한 영상 스트림(프로그램)을 순차 복호처리부(204)에 출력한다.
복호처리부(204a)의 2D/3D 판단부(211)는 3D 플래그를 참조하여 처리 대상인 프로그램(여기에서는 「대상프로그램」이라고 한다)이 2D 프로그램인가 3D 프로그램인가 판단한다(스텝 S71). 3D 플래그가 「0」인 경우 대상프로그램은 2D 프로그램이다. 3D 플래그가 「1」인 경우 대상프로그램은 3D 프로그램이다.
대상프로그램이 2D 프로그램인 경우(스텝 S72로 「2D」) 2D 복호부(213)에서 복호 처리를 실행한다(스텝 S73). 그 후 스텝 S79로 진행된다.
대상프로그램이 3D 프로그램인 경우(스텝 S72로 「3D」) 3D 복호부(214)에서 복호 처리를 실행한다(스텝 S74). HDMI 송신부(205a)는 출력부(215a)를 개재하여 복호된 대상프로그램을 수신하면 해당 대상프로그램에 부여된 2D 플래그의 값을 판독한다(스텝 S75).
2D 플래그의 값이 「1」인 경우(스텝 S76로 「1」) 대상프로그램은 본래는 2D 프로그램이며, 용장한 프레임을 포함하는 3D 프로그램이다. 그래서 HDMI 송신부(205a)는 대상프로그램을 구성하는 복수의 프레임에 대해 선두의 프레임에서부터 순서대로 용장 플래그 「0」, 「1」, 「0」, 「1」, …과 같이 교대로 부여한다(스텝 S77). 그 후 스텝 S79로 진행된다.
2D 플래그의 값이 「0」인 경우(스텝 S76로 「0」) 대상프로그램은 용장한 프레임을 포함하지 않는 3D 프로그램이다. 그래서 HDMI 송신부(205a)는 대상프로그램에 포함되는 모든 프레임에 용장 플래그 「0」을 부여한다(스텝 S78).
HDMI 송신부(205a)는 표시 모드의 전환이 발생하는가 여부를 판단한다. 선행프로그램이 2D 프로그램이며 대상프로그램이 3D 프로그램인 경우 및 선행프로그램이 3D 프로그램이며 대상프로그램이 2D 프로그램인 경우에는 표시 모드의 전환이 발생한다.
표시 모드의 전환이 발생하지 않는 경우(스텝 79로 NO) 스텝 S84로 진행된다.
표시 모드의 전환이 발생하는 경우(스텝 S79에서 YES) HDMI 송신부(205a)는 통신 모드의 재설정을 실행하여 전송 레이트를 변경한다(스텝 S80). 그리고, HDMI 송신부(205a)는 디지털 텔레비전(30a)의 HDMI 수신부(301)에 대해 전송 레이트의 변경통지를 송신한다(스텝 S81).
HDMI 수신부(301)는 변경통지를 수신하면 통신 모드의 재설정을 실행하여 전송 레이트를 변경한다(스텝 S82). 그리고, HDMI 송신부(205a)에 대해서 전송 레이트 변경의 완료통지를 송신한다(스텝 S83).
HDMI 송신부(205a)는 완료통지를 수신하면 대상프로그램을 HDMI 케이블(40)에 출력한다(스텝 S84). HDMI 수신부(301)는 HDMI 케이블(40)을 개재하여 대상프로그램을 수신한다(스텝 S85).
영상표시 처리부(302a)는 HDMI 수신부(301)로부터 대상프로그램을 수신하면 대상프로그램을 구성하는 각 프레임의 헤더에 용장 플래그가 저장되어 있는가 여부를 판단한다. 대상프로그램이 2D 프로그램인 경우 프레임의 헤더에는 용장 플래그는 저장되어 있지 않다. 대상프로그램이 3D 프로그램인 경우 프레임의 헤더에는 용장 플래그가 저장되어 있다.
헤더에 용장 플래그가 저장되어 있지 않은 경우(스텝 S86로 NO) 영상표시 처리부(302a)는 대상프로그램을 프레임 버퍼에 저장한다.
헤더에 용장 플래그가 저장되어 있는 경우(스텝 S86로 YES) 영상표시 처리부(302a)는 대상프로그램을 구성하는 각 프레임에 대해 스텝 S87 및 스텝 S88의 처리를 반복한다.
용장 플래그의 값이 「0」인 경우 즉, 용장한 프레임이 아니면 영상표시 처리부(302a)는 해당 프레임을 프레임 버퍼에 저장한다. 용장 플래그의 값이 「1」인 경우 즉, 용장한 프레임이면 영상표시 처리부(302a)는 해당 프레임을 프레임 버퍼에 저장하지 않고 삭제한다(스텝 S88).
표시부(303)는 프레임 버퍼에 저장된 프레임을 순차 표시한다(스텝 S89).
여기서, 구체적으로, 도 16에 기재의 TS(2100)를 수신한 때의 BD 리코더(20a) 및 디지털 텔레비전(30a)의 처리에 대해 설명한다.
TS(2100)는 3D 프로그램(2103) 및 3D 프로그램(2105)을 포함하며, 3D 프로그램(2103), 3D 프로그램(2105), …의 순으로 디지털 텔레비전(30a)에 출력된다. 2D 플래그(2102)는 3D 프로그램(2103)에 대응한다. 2D 플래그(2102)의 값은 「1」이므로 3D 프로그램(2103)은 선행프로그램인 3D 프로그램(2101)(도 14 참조)과의 관계에서 표시 모드의 변경이 발생하는 것을 억제하기 위해 2D 프로그램으로부터 생성된 시차가 없는 3D 프로그램이다. 3D 프로그램(2103)은 용장한 프레임을 포함한다. 2D 플래그(2104)는 3D 프로그램(2105)에 대응한다. 2D 플래그(2104)의 값은 「0」이므로 3D 프로그램(2105)는 용장한 프레임을 포함하지 않는다.
HDMI 송신부(205a)는 복호처리부(204a)로부터 복호된 3D 프로그램(2103)을 수신한다. 2D 플래그(2102)의 값은 「1」이므로 HDMI 송신부(205a)는 용장 플래그 「0」과 「1」을 교대로 부여한다. 그래서 3D 프로그램(2103)은 출력프로그램(2200)의 구간(421)과 같은 화상 열이 된다. 선두의 프레임에 부여된 용장 플래그(431)의 값은 「0」이며, 2번째의 프레임에 부여된 용장 플래그(432)의 값은 「1」이다.
다음에, HDMI 송신부(205a)는 복호처리부(204a)로부터 복호된 3D 프로그램(2105)을 수신한다. 2D 플래그(2104)의 값은 「0」이므로 HDMI 송신부(205a)는 용장 플래그 「0」을 부여한다. 그래서 3D 프로그램(2105)은 출력프로그램(2200)의 구간(422)과 같은 화상 열이 된다.
영상표시 처리부(302a)는 출력프로그램(2200)을 수신하면 용장 플래그 「1」이 부여된 프레임을 삭제한다. 그 결과, 표시부(303)는 도 16에 나타내는 것과 같은 표시 프로그램(2300)을 표시한다. 표시 프로그램(2300)의 구간(441)은 2D 프로그램으로서 표시주기 60㎐로 표시된다. 구간(442)은 3D 프로그램으로서 표시주기 120㎐로 표시된다.
이와 같이 실시형태 2에서는 송신장치(10a)가 2D 플래그를 부여함으로써 수신 측에서 용장한 프레임을 삭제하는 것이 가능해진다. 이에 의해 시차가 없는 3D 프로그램을 표시할 때에 발생하는 「깜박거림」을 방지할 수 있다. 또, 디지털 텔레비전(30a)의 소비전력을 억제할 수 있다.
<3. 실시형태 3>
여기에서는 본 발명의 실시형태 3인 영상처리시스템에 대해 도면을 참조하면서 설명한다.
<3-1. 시스템의 개요>
실시형태 3에 관한 영상처리시스템은 송신장치(10b), BD 리코더(20b), 디지털 텔레비전(30b), HDMI 케이블(40), 리모컨(50) 및 3D 안경(60)으로 구성된다.
실시형태 3에서는 상기 실시형태 2와 마찬가지로 중요프로그램을 송신할 때에 HDMI 케이블(40)의 전송 레이트의 변환이 발생하는 것을 억제하기 위해 송신장치(10a)가 2D 프로그램을 3D 프로그램으로 변환하거나 3D 프로그램을 2D 프로그램으로 변환하는 기능을 갖는다. 그리고, 송신장치(10b)는 송신장치(10a)와 마찬가지로 2D 플래그를 생성하는 기능을 갖는다.
또, 실시형태 3에서는 상기 실시형태 1과 마찬가지로 송신장치(10b)는 방송프로그램의 프로그램정보를 참조하여 각 프로그램(2D 프로그램 또는 3D 프로그램)이 중요프로그램인가 여부를 판단하여 중요플래그를 생성하는 기능을 가지지만, 실시형태 3에서는 수신 측에서의 중요플래그의 이용방법이 실시형태 1과는 다르다.
BD 리코더(20b)는 실시형태 2의 BD 리코더(20a)와 마찬가지로 HDMI 프레임을 디지털 텔레비전(30b)에 송신할 때에 용장 플래그를 생성한다. 이때, BD 리코더(20b)는 2D 플래그 및 중요플래그의 양방 이용하여 용장 플래그의 값을 결정한다. 실시형태 3에서는 2D 프로그램으로부터 생성되어 용장한 프레임을 포함하는 시차가 없는 3D 프로그램이라도 중요한 프로그램이면 용장한 프레임을 삭제하지 않고 디지털 텔레비전(30b)에 표시시키도록 제어한다.
<3-2. 송신장치(10b)의 구성>
도 20은 송신장치(10b)의 구성을 나타내는 블록도이다. 동 도에 나타내는 것과 같이 송신장치(10b)는 입력부(101), 제어부(120), 2D 부호화부(102), 3D 부호화부(103a), 중요플래그 생성부(104), 다중화부(105) 및 스트림 송신부(106)로 구성된다. 또, 3D 부호화부(103a)는 2D 플래그 생성부(130)를 포함한다.
여기서, 실시형태 1의 송신장치(10)와 동일한 기능을 가지는 구성요소에는 송신장치(10)와 동일한 부호를 부여하고 있다. 또, 실시형태 2의 송신장치(10a)와 동일한 기능을 가지는 구성요소에는 송신장치(10a)와 동일한 부호를 부여하고 있다.
또, 송신장치(10b)는 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, 송신장치(10b)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
도 20에 기재의 TS(3100)는 스트림 송신부(106)로부터 송신되는 트랜스포트 스트림을 간략화하여 기재한 것이다. 3D 프로그램(3103)이 선두의 프로그램이다. 3D 프로그램(3103)에 이어 3D 프로그램(3106), 3D 프로그램(3109), …의 순으로 송신된다.
중요플래그(3101) 및 2D 플래그(3102)는 3D 프로그램(3103)에 대응한다. 중요플래그(3101)의 값은 「0」이므로 3D 프로그램(3101)은 중요한 프로그램은 아니다. 2D 플래그(3102)의 값은 「0」이므로 3D 프로그램(3101)은 제어부(120)에 의해 2D 프로그램으로부터 생성된 3D 프로그램은 아니다.
중요플래그(3104) 및 2D 플래그(3105)는 3D 프로그램(3106)에 대응한다. 중요플래그(3104)의 값은 「1」이므로 3D 프로그램(3106)은 중요한 프로그램이다. 2D 플래그(3105)의 값은 「1」이므로 3D 프로그램(3106)은 본래는 2D 프로그램이지만 제어부(120)에 의해 생성된 3D 프로그램이다.
중요플래그(3107) 및 2D 플래그(3108)는 3D 프로그램(3109)에 대응한다. 중요플래그(3107)의 값은 「0」이므로 3D 프로그램(3106)은 중요한 프로그램은 아니다. 2D 플래그(3108)의 값은 「1」이므로 3D 프로그램(3109)은 본래는 2D 프로그램이지만 제어부(120)에 의해 생성된 3D 프로그램이다.
<3-3. 송신장치(10b)의 동작>
여기에서는 도 21에 나타내는 플로차트를 이용하여 송신장치(10b)의 동작에 대해 설명한다.
송신장치(10b)는 도 15의 스텝 S51에서부터 스텝 S59, 스텝 S60, 스텝 S65 및 스텝 S67까지 실시형태 2의 송신장치(10a)와 동일한 처리를 실행한다. 그 후 도 21의 스텝 S91로 진행된다.
중요플래그 생성부(104)는 제어부(120)로부터 수신한 프로그램정보를 참조하여(스텝 S91) 대상프로그램이 중요프로그램인가 여부를 판단한다. 여기서, 중요플래그 생성부(104)는 대상프로그램을 프로그램 ID에 의해 식별할 수 있다. 그래서 중요플래그 생성부(104)는 프로그램정보로부터 대상프로그램의 프로그램 ID에 대응하는 중요도를 추출한다. 중요도가 「중요」로 설정되어 있는 경우 대상프로그램은 중요프로그램이다. 중요도가 「통상」으로 설정되어 있는 경우 대상프로그램은 중요프로그램은 아니다.
대상프로그램이 중요프로그램인 경우(스텝 S92로 YES) 중요플래그 생성부(104)는 중요플래그로 「1」을 생성하여(스텝 S93) 다중화부(105)에 출력한다.
대상프로그램이 중요프로그램이 아닌 경우(스텝 S92로 NO) 중요플래그 생성부(104)는 중요플래그로 「0」을 생성하여(스텝 S93), 다중화부(105)에 출력한다.
다중화부(105)는 부호화된 2D 프로그램, 부호화된 3D 프로그램, PSI, 음성 스트림, 그 외의 멀티미디어 스트림을 수신하고, 이들을 다중화해 트랜스포트 스트림을 생성한다(스텝 S95).
스트림 송신부(106)는 다중화부(105)에서 생성된 트랜스포트 스트림을 디지털 방송파에 중첩하여 송신한다(스텝 S96).
<3-4. BD 리코더(20b)의 구성>
도 22는 BD 리코더(20b) 및 디지털 텔레비전(30b)의 구성을 나타내는 블록도이다.
도 22에 나타내는 것과 같이 BD 리코더(20b)는 튜너(201), 다중 분리부(202), 제어정보 관리부(203), 복호처리부(204a) 및 HDMI 송신부(205b)로 구성된다.
BD 리코더(20b)는 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, BD 리코더(20b)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
튜너(201), 다중 분리부(202) 및 제어정보 관리부(203)는 각각 실시형태 1과 같다. 또, 복호처리부(204a)는 실시형태 2와 같다.
HDMI 송신부(205b)는 실시형태 2와 마찬가지로 용장 플래그 생성부를 포함한다. 실시형태 3의 용장 플래그 생성부는 3D 프로그램의 프레임에 용장 플래그를 부여할 때에 중요플래그 및 2D 플래그를 이용한다.
구체적으로, HDMI 송신부(205b)는 2D 플래그를 이용해 용장한 프레임과 그 이외의 프레임을 판별할 수 있다. 또, HDMI 송신부(205b)는 중요플래그를 이용하여 중요한 프로그램을 특정할 수 있다. 그래서 HDMI 송신부(205b)는 용장한 프레임을 포함하고 있지만 중요한 프로그램인 경우에는 디지털 텔레비전(30b)에서 표시주기의 변환이 발생하는 것을 억제하기 위해 굳이 장황 프레임을 삭제하지 않도록 모든 프레임의 용장 플래그를 「0」으로 설정한다.
<3-5. 디지털 텔레비전(30b)의 구성>
도 22에 나타내는 것과 같이 디지털 텔레비전(30b)은 HDMI 수신부(301), 영상표시 처리부(302a) 및 표시부(303)로 구성된다.
디지털 텔레비전(30b)은 도시되어 있지 않은 프로세서, RAM, ROM, 하드디스크를 포함한다. 또, 디지털 텔레비전(30b)의 각 기능 블록은 하드웨어로 구성되어 있거나, 혹은 프로세서가 ROM이나 하드디스크에 기억되어 있는 컴퓨터 프로그램을 실행함으로써 실현된다.
HDMI 수신부(301) 및 표시부(303)는 실시형태 1과 같다. 영상표시 처리부(302a)는 실시형태 2와 같다.
<3-6. BD 리코더(20b) 및 디지털 텔레비전(30b)의 동작>
도 23은 BD 리코더(20b) 및 디지털 텔레비전(30b)의 동작을 나타내는 플로차트이다.
튜너(201)는 방송프로그램을 수신하여 TS에 복조한다. 다중 분리부(202)는 TS를 디 멀티플렉스 한다(스텝 S100). 다중 분리부(202)는 분리한 영상 스트림(프로그램)을 순차 복호처리부(204a)에 출력한다.
복호처리부(204a)의 2D/3D 판단부(211)는 3D 플래그를 참조하여 처리 대상인 프로그램(여기에서는 「대상프로그램」이라고 한다)이 2D 프로그램인가 3D 프로그램인가 판단한다(스텝 S101). 3D 플래그가 「0」인 경우 대상프로그램은 2D 프로그램이다. 3D 플래그가 「1」인 경우 대상프로그램은 3D 프로그램이다.
대상프로그램이 2D 프로그램인 경우(스텝 S102로 「2D」) 2D 복호부(213)에서 복호 처리를 실행한다(스텝 S103). 그 후는 실시형태 2와 같으며, 도 18의 스텝 S79으로 진행된다.
대상프로그램이 3D 프로그램인 경우(스텝 S102로 「3D」) 3D 복호부(214)에서 복호 처리를 실행한다(스텝 S104).
HDMI 송신부(205b)는 출력부(215a)를 개재하여 복호된 대상프로그램을 수신하면 대상프로그램에 부여된 2D 플래그의 값을 판독한다(스텝 S105). 2D 플래그의 값이 「0」인 경우(스텝 S106로 「0」) 대상프로그램은 용장한 프레임을 포함하지 않는 3D 프로그램이므로 스텝 S109로 진행된다.
2D 플래그의 값이 「1」인 경우(스텝 S106로 「1」) 대상프로그램은 본래는 2D 프로그램이며 용장한 프레임을 포함하는 3D 프로그램이다. 이어서, HDMI 송신부(205b)는 대상프로그램에 부여된 중요플래그의 값을 판독한다(스텝 S107).
중요플래그의 값이 「1」이며 대상프로그램이 중요프로그램인 경우(스텝 108에서 YES) HDMI 송신부(205b)는 대상프로그램에 포함되는 모든 프레임에 용장 플래그 「0」을 부여한다(스텝 S109). 그 후는 실시형태 2와 같으며, 도 18의 스텝 S79로 진행된다.
중요플래그의 값이 「0」이며 대상프로그램이 중요프로그램이 아닌 경우(스텝 108으로 NO) HDMI 송신부(205b)는 대상프로그램을 구성하는 복수의 프레임에 대해 선두의 프레임에서부터 순서대로 용장 플래그 「0」, 「1」, 「0」, 「1」, …와 같이 교대로 부여한다(스텝 S110). 그 후는 실시형태 2와 같으며, 도 18의 스텝 S79로 진행된다.
여기서, 구체적으로, 도 22에 기재의 TS(3100)를 수신한 때의 BD 리코더(20b) 및 디지털 텔레비전(30b)의 처리에 대해 설명한다.
HDMI 송신부(205b)는 복호처리부(204a)로부터 복호된 3D 프로그램(3103)을 수신한다. 2D 플래그(3102)의 값은 「0」이므로 HDMI 송신부(205b)는 용장 플래그 「0」을 부여한다. 그래서 3D 프로그램(3103)은 출력프로그램(3200)의 구간(451)과 같은 화상 열이 된다.
다음에, HDMI 송신부(205b)는 복호처리부(204a)로부터 복호된 3D 프로그램(3106)을 수신한다. 2D 플래그(3105)의 값은 「1」이며 중요플래그(3104)의 값은 「1」이므로 HDMI 송신부(205b)는 용장 플래그 「0」을 부여한다. 그래서 3D 프로그램(3106)은 출력프로그램(3200)의 구간(452)과 같은 화상 열이 된다.
다음에, HDMI 송신부(205b)는 복호처리부(204a)로부터 복호된 3D 프로그램(3109)을 수신한다. 2D 플래그(3108)의 값은 「1」이며 중요플래그(3107)의 값은 「0」이므로 HDMI 송신부(205b)는 용장 플래그 「0」과 「1」을 교대로 부여한다. 그래서 3D 프로그램(3109)은 출력프로그램(3200)의 구간(453)과 같은 화상 열이 된다.
영상표시 처리부(302a)는 출력프로그램(3200)을 수신하면 용장 플래그 「1」이 부여된 프레임을 삭제한다. 그 결과, 표시부(303)는 도 22에 나타내는 것과 같은 표시 프로그램(3300)을 표시한다. 표시 프로그램(3300)의 구간(471)은 3D 프로그램으로서 표시주기 120㎐로 표시된다. 중요한 구간(472)은 시차가 없는 3D 프로그램으로서 표시주기 120㎐로 표시된다. 구간(473)은 2D 프로그램으로서 표시주기 60㎐로 표시된다.
즉, 실시형태 3에서는 중요한 구간(472)을 표시할 때에 디지털 텔레비전(30b)의 내부에서 표시주기의 변환은 발생하지 않는다. 그러브로 실시형태 3에서는 표시주기의 변환에 의해 일순간이라도 화면이 블랙아웃 하는 것을 억제하므로 중요한 프로그램을 완벽하게 표시할 수 있다.
<4. 그 외의 변형 예>
이상, 본 발명에 관한 영상처리시스템의 실시형태를 설명하였으나, 예시한 영상처리시스템을 이하와 같이 변형하는 것도 가능하고, 본 발명이 상술한 실시형태에서 설명한 것과 같은 영상처리시스템에 한정되지 않는 것은 물론이다.
(1) 상기 실시형태에서 방송프로그램은 디지털 방송파에 의해 송신되는 것으로 하였으나, 본 발명은 그러한 구성으로 한정되는 것은 아니다. 방송프로그램은 인터넷 등의 네트워크를 개재하여 송신되고, 그것을 디지털 텔레비전, BD 리코더, 퍼스널컴퓨터 등의 기기가 수신하여 재생하는 구성이라도 좋다.
(2) 상기 실시형태 2 및 실시형태 3에서 2D 플래그는 H.264 규격에서 규정되는 SEI(Supplemental Enhancement Information) 부에 저장되어도 좋고, MPEG2 규격에서 규정되는 UserData부에 저장되어도 좋으며, TS의 부가정보에 저장되어도 좋고, 프로그램정보에 저장되어도 좋다.
(3) 상기 실시형태에서는 중요플래그 및 2D 플래그는 방송프로그램의 영상 스트림과 동일한 트랜스포트 스트림으로 송신되는 것으로 하였으나, 본 발명은 그러한 구성으로 한정되는 것은 아니다. 중요플래그 및 2D 플래그는 방송프로그램의 트랜스포트 스트림과는 별도 경로로 송신되는 구성이라도 좋다.
(4) 상기 실시형태에서는 중요프로그램의 표시 모드와 당해 중요프로그램의 직전에 출력되는 선행프로그램의 표시 모드를 맞추기 위해 중요프로그램의 표시 모드를 변경하는 구성을 가지고 있었다. 그러나 본 발명은 이 구성으로 한정되지 않는다. 본 발명은 중요프로그램의 표시 모드와 당해 중요프로그램의 직전에 출력되는 선행프로그램의 표시 모드를 맞추기 위해 선행프로그램의 표시 모드를 변경하는 구성이라도 좋다.
실시형태 1과 같이 수신 측에서 표시 모드의 변경을 실행하는 경우에는 BD 리코더는 선행프로그램을 출력하기 전에 당해 선행프로그램의 직후에 출력되는 프로그램이 중요프로그램인가 여부를 판단할 필요가 있다. 후속하는 프로그램이 중요프로그램인 경우이면서 선행프로그램의 표시 모드와 중요프로그램의 표시 모드가 다른 경우에는 BD 리코더는 선행프로그램을 3D 프로그램으로 변경하거나 2D 프로그램으로 변경하는 처리를 실행한다.
실시형태 2 및 실시형태 3과 같이 송신 측에서 표시 모드의 변경을 실행하는 경우에는 송신장치는 프로그램정보를 참조하여 선행프로그램의 직후에 출력되는 프로그램의 중요도가 「중요」로 설정되어 있으면서 선행프로그램의 표시형태와 중요프로그램의 표시형태가 다른 경우에는 선행프로그램을 2D 프로그램으로부터 3D 프로그램으로 변경하거나 3D 프로그램으로부터 2D 프로그램으로 변경한다. 그 후 송신장치는 선행프로그램의 부호화처리를 실행한다.
(5) 도 6에 기재한 프로그램정보(1500)의 구성은 일례이다. 예를 들어 송신장치가 「프로그램 내용」 난을 보아서 중요한가 여부의 판단을 실행하는 것이 가능하면 「중요도」 난을 마련할 필요는 없다.
(6) 상기 실시형태에서는 일례로 커머셜을 「중요프로그램」으로 규정하고 본편을 「통상프로그램」으로 규정하였으나, 본 발명에서의 중요프로그램은 커머셜로 한정되지 않는 것은 물론이다. 수신 측에서 중단되거나 하지 않고 정상적으로 표시시키고 싶은 프로그램이면 어떤 프로그램을 중요프로그램으로 규정해도 좋다.
(7) 상기 실시형태에서는 일례로 통상의 텔레비전 방송에서의 「7시 뉴스」 등의 하나의 콘텐츠에 포함되는 「본편」 및 「커머셜」을 각각 하나의 「프로그램」으로 정의했다. 그러나 이것은 일례이다. 본 발명에서의 「프로그램」은 하나의 콘텐츠 자체를 가리켜도 좋고, 어느 임의의 시간대에 방송되는 복수의 콘텐츠를 가리켜도 좋다. 예를 들어 오전 중에만 3D의 프로그램이 방송될 가능성이 있는 경우에는 오전 중에 방송되는 모든 콘텐츠를 본 발명의 「프로그램」으로 정의해도 좋다.
(8) 상기 실시형태에서는 중요플래그 및 2D 플래그는 프로그램 단위로 부여되어 있었다. 그러나 이것은 일례이다. 중요플래그 및 2D 플래그는 프레임마다 부여되어도 좋고, 임의의 수의 프레임 매수마다 부여되어 있어도 좋으며, 임의의 길이의 재생 시간마다 부여되어 있어도 좋다.
(9) 상기 실시형태 1에서는 3D 프로그램을 부호화할 때 애디셔널 뷰 비디오 스트림은 항상 축소하여 해상도를 떨어뜨리고 있으므로 수신 측에서 3D 프로그램을 2D 프로그램으로 변환하기 위해서는 항상 베이스 뷰 비디오 스트림이 선택되는 구성을 가지고 있었다.
그러나 3D 프로그램을 제작하는 단계에서의 촬영 조건(앵글 등) 등에 따라서, 수신 측에서 3D 프로그램을 2D 프로그램으로 변환할 때에 베이스 뷰 비디오 스트림을 이용해야 하는 것이 아닌 경우에는 축소화상인 애디셔널 뷰 비디오 스트림을 이용해 2D 표시를 실행하도록 구성해도 좋다.
또, 애디셔널 뷰 비디오 스트림이 축소되어 있어도 부가정보(1400)의 가로방향의 축소 정도(1403) 및/또는 세로방향의 축소 정도(1404)의 값이 크고, 축소의 영향을 무시할 수 있는 것과 같은 경우에는 송신장치(10)는 애디셔널 뷰 스트림의 부가정보(1400)의 플래그(1405)를 「참」으로 설정해도 좋다.
상기 실시형태에서는 애디셔널 뷰 스트림의 부가정보(1400)의 플래그(1405)가 「거짓」인 경우 BD 리코더(20)는 2D 표시를 실시할 때에 베이스 뷰 비디오 스트림을 이용한다. 또, 애디셔널 뷰 스트림의 부가정보(1400)의 플래그(1405)가 「참」인 경우 BD 리코더(20)는 2D 표시를 실행할 때 베이스 뷰 비디오 스트림을 이용해도 좋고, 애디셔널 뷰 비디오 스트림을 이용해도 좋다.
또, BD 리코더(20)는 반드시 부가정보(1400)의 플래그(1405)를 이용하여 2D 표시 시에 애디셔널 뷰 비디오 스트림을 이용하는가 여부를 결정할 필요는 없다. 예를 들어 2D 표시 모드일 때 플래그(1405)를 이용해 선택되는 화상이 단기간에 좌측 눈 용, 우측 눈 용, 좌측 눈 용, …으로 전환되면 화면의 흔들림의 원인이 되어 바람직하지 않다.
그래서 일단 애디셔널 뷰 비디오 스트림을 이용해 2D 표시를 개시한 후에는, 그 후는 부가정보(1400)의 플래그(1405)의 값에 의존하지 않으며, 애디셔널 뷰 비디오 스트림을 계속 사용해도 좋다.
또, 일단 베이스 뷰 비디오 스트림을 이용해 2D 표시를 개시한 후에는, 그 후는 부가정보(1400)의 플래그(1405)의 값에 의존하지 않고 베이스 뷰 비디오 스트림을 계속 사용해도 좋다.
(10) 상기 실시형태 1에서는 BD 리코더(20)는 3D 프로그램을 2D 표시할 때에 부가정보(1400)를 이용하여 베이스 뷰 비디오 스트림 및 애디셔널 뷰 비디오 스트림의 어느 쪽을 이용하는가를 선택하였다.
여기서, BD 리코더(20)가 부가정보(1400)를 이용해 이하와 동일한 처리를 실행하는 경우도 본 발명에 포함된다.
예를 들어 디지털 텔레비전(30)이 3D 표시 기능을 구비하고 있지 않은 경우 BD 리코더(20)는 수신한 3D 프로그램에 부여된 부가정보(1400)를 이용하여 우측 눈 화상 및 좌측 눈 화상의 어느 쪽을 디지털 텔레비전(30)에 출력하는가를 결정해도 좋다.
또, 디지털 텔레비전(30)은 3D 표시 기능을 구비하고 있으나, 사용자가 3D 표시 기능을 금지로 하고 있는 경우 BD 리코더(20)는 수신한 3D 프로그램에 부여된 부가정보(1400)를 이용하여 우측 눈 화상 및 좌측 눈 화상의 어느 쪽을 디지털 텔레비전(30)에 출력하는가를 결정해도 좋다.
이와 같이 BD 리코더(20)는 부가정보(1400)를 이용해 우측 눈 화상 및 좌측 눈 화상의 어느 쪽인가를 선택하는 구성이면 좋다.
(11) 상기 실시형태에서는 BD 리코더와 디지털 텔레비전은 HDMI 케이블로 접속되어 있으나, 이것은 일례이다. BD 리코더와 디지털 텔레비전은 HDMI 규격에 준거한 통신방식으로 디지털신호의 전송을 실행하는 기능을 가지면 무선접속이라도 좋다.
(12) 상기 실시형태에서는 영상처리시스템은 송신장치, BD 리코더 및 디지털 텔레비전를 포함하는 구성이었다.
여기에서는 변형 예인 영상처리시스템(2)에 대해서 도 24를 이용해 설명한다. 영상처리시스템(2)은 송신장치(10a), 디지털 텔레비전(70), 리모컨(50) 및 3D 안경(60)으로 구성된다.
송신장치(10a)는 실시형태 2(도 14)와 동일한 기능을 갖는다. 디지털 텔레비전(70)은 도 16에 기재된 튜너(201), 다중 분리부(202), 제어정보 관리부(203), 복호처리부(204a), 영상표시 처리부(302a) 및 표시부(303)로 구성된다. 즉, 디지털 텔레비전(70)은 수신장치와 표시장치가 일체가 된 장치이다. 영상처리시스템(2)은 HDMI 케이블을 개재하여 프로그램이 전송되는 구성이 아니므로 HDMI의 통신 모드의 재설정은 발생하지 않는다.
그러나 2D 프로그램과 3D 프로그램이 혼재하고 있는 경우에는 디지털 텔레비전(70)의 복호처리부(204a)에서 복호방식의 전환이 발생한다. 복호방식의 전환에 의해 복호 처리가 중단되어 표시부(303)에 의한 프로그램의 표시가 지연될 가능성이 있다.
그래서 송신장치(10a)는 실시형태 2와 마찬가지로 2D 프로그램을 3D 프로그램으로 변환하거나 3D 프로그램을 2D 프로그램으로 변환한다. 이에 의해 중요프로그램과 당해 중요프로그램의 직전에 출력되는 선행프로그램에서 복호방식의 변환이 발생하는 것을 억제하여 표시부(303)에 의한 중요프로그램의 표시가 지연될 가능성을 회피할 수 있다.
(13) 상기 실시형태에서는 3D 부호화방식의 일례로 H.264 MVC를 이용했으나, 본 발명에서의 3D 부호화방식은 H.264 MVC로 한정되지 않는다. 송신장치는 3D 부호화방식으로 좌측 눈 화상 및 우측 눈 화상을 좌우로 배열하는 Side-by-Side 방식이나, 좌측 눈 화상 및 우측 눈 화상을 상하로 배열하는 Top and Bottom 방식이나, 픽쳐 내의 1라인마다 좌측 눈 화상 및 우측 눈 화상을 교대로 배치하는 Line Alternative방식 등을 이용해도 좋다. 이 경우 수신 측에서 이용되는 복호방식은 송신장치에서 이용하는 부호화방식에 대응한 것이면 좋다.
(14) 상기 실시형태에서 설명한 송신처리, 수신처리, 표시처리를 송신장치(10), BD 리코더(20), 디지털 텔레비전(30)의 프로세서 및 그 프로세서에 접속된 각종 회로에 실행시키기 위한 기계어 혹은 고급언어의 프로그램 코드로 이루어지는 제어프로그램을 기록매체에 기록하거나, 또는 각종 통신로 등을 개재하여 유통시켜서 반포할 수도 있다. 이와 같은 기록매체에는 IC카드, 하드디스크, 광디스크, ㅍ플렉시블 디스크, ROM, 플래시메모리 등이 있다. 유통, 반포된 제어프로그램은 프로세서에 판독될 수 있고 메모리 등에 저장됨으로써 이용에 제공되며, 그 프로세서가 그 제어프로그램을 실행함으로써 상기 실시형태에서 설명한 것과 같은 각 기능이 실현되게 된다. 또, 프로세서는 제어프로그램을 직접 실행하는 것 외에, 컴파일하여 실행하거나 혹은 인터프리터에 의해 실행해도 좋다.
(15) 상기 실시형태에서 설명한 각 기능 구성요소(입력부(101), 2D 부호화부(102), 3D 부호화부(103), 중요플래그 생성부(104), 다중화부(105), 스트림 송신부(106), 튜너(201), 다중 분리부(202), 제어정보 관리부(203), 복호처리부(204), HDMI 송신부(205), HDMI 수신부(301), 영상표시 처리부(302) 및 표시부(303) 등)는 그 기능을 실행하는 회로로서 실현되어도 좋고, 1 또는 복수의 프로세서에 의해 프로그램을 실행함으로써 실현되어도 좋다. 또, 실시형태 1~3에서 설명한 송신장치, BD 리코더, 디지털 텔레비전은 IC, LSI나 기타 집적회로의 패키지로서 구성되는 것으로 해도 좋다. 이 패키지는 각종 장치에 내장되어 이용에 제공되며, 이에 의해 각종 장치는 각 실시형태에서 설명한 것과 같은 각 기능을 실현하게 된다.
(16) 상기 실시형태 및 상기의 변형 예를 적절하게 조합해도 좋다.
<5. 보충>
이하, 본 발명의 일 실시형태로서의 영상처리시스템, 송신장치 및 수신장치의 구성 및 그 변형 예와 효과에 대해 더 설명한다.
(a) 영상처리시스템 송신장치와 수신장치를 포함하는 영상처리시스템으로, 상기 송신장치는 입력된 3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와, 상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와, 상기 영상 스트림을 송신하는 스트림 송신부와, 상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 구비하며, 상기 수신장치는 상기 정보를 수신하는 정보 수신부와, 상기 영상 스트림을 수신하는 스트림 수신부와, 상기 영상 스트림을 복호하며, 상기 정보를 이용해 중요프로그램을 특정하고, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 같은 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호처리부를 구비하는 것을 특징으로 한다.
이 구성에 의하면 중요프로그램을 선행프로그램의 전송 레이트와 같은 전송 레이트로 출력할 수 있으므로 수신장치와 표시장치 사이에 통신 모드의 재설정을 실행할 필요가 없어진다. 그 때문에 표시장치에서 중요한 프로그램을 정상적으로 표시하는 것이 가능해진다.
(b) 여기서, 상기 송신장치는 2D 원화상 또는 3D 원화상으로 구성되는 프로그램을 복수 수신하는 입력부와 입력된 2D 화상을 2D 부호화방식으로 부호화하여 2D 프로그램을 생성하는 2D 부호화부를 구비하며, 상기 3D 부호화부는 입력된 3D 화상을 3D 부호화방식으로 부호화하고, 상기 스트림 생성부는 상기 2D 부호화부에서 생성된 2D 프로그램을 포함하는 상기 영상 스트림을 생성하며, 상기 복호처리부는 상기 선행프로그램 및 상기 중요프로그램의 어느 일방에 대해 복호된 2D 화상을 3D 화상으로 변환하여 데이터량을 2배로 하거나, 또는 복호된 3D 화상을 2D 화상으로 변환하여 데이터량을 1/2배로 함으로써 상기 선행프로그램과 상기 중요프로그램의 전송 레이트를 동일하게 하는 것을 특징으로 한다.
이 구성에 의하면 2D 프로그램과 3D 프로그램이 혼재하고 있는 경우라도 중요프로그램을 선행프로그램의 전송 레이트와 같은 전송 레이트로 출력할 수 있으므로 수신장치와 표시장치 사이에 통신 모드의 재설정을 실행할 필요가 없어진다. 그러므로 표시장치에서 중요한 프로그램을 정상적으로 표시하는 것이 가능해진다.
(c) 송신장치로, 입력된 3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와, 상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와, 상기 영상 스트림을 송신하는 스트림 송신부와, 상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 출력하는 선행프로그램의 전송 레이트와 같은 전송 레이트로 당해 송신장치에 대응하는 수신장치와 표시장치 사이의 접속에 이용되는 전송로에 출력될 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 구비하는 것을 특징으로 한다.
이 구성에 의하면 당해 송신장치에 대응하는 수신장치는 중요프로그램을 선행프로그램의 전송 레이트와 같은 전송 레이트로 출력할 수 있으므로, 수신장치와 표시장치 사이에 통신 모드의 재설정을 실행할 필요가 없어진다. 그러므로 표시장치에서 중요한 프로그램을 정상적으로 표시하는 것이 가능해진다.
(d) 상기 3D 부호화부에 의해 생성되는 상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고, 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고, 상기 3D 부호화부는 상기 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 상기 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보를 생성하는 부가정보 생성부라고 상기 부가정보를 상기 애디셔널 뷰 비디오 스트림에 대응시켜서 출력하는 출력부를 포함하는 것을 특징으로 한다.
이 구성에 의하면 수신장치는 3D 화상을 2D 화상으로 변환하는 경우에는 부가정보를 이용함으로써 적절한 화상을 선택할 수 있다.
(e) 송신장치로, 입력된 3D 원화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와, 상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와, 상기 영상 스트림을 송신하는 스트림 송신부를 구비하며, 상기 3D 부호화부에 의해 생성되는 상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하고, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고, 상기 3D 부호화부는 상기 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 상기 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보를 생성하는 부가정보 생성부와, 상기 부가정보를 상기 애디셔널 뷰 비디오 스트림에 대응시켜서 출력하는 출력부를 포함하는 것을 특징으로 한다.
이 구성에 의하면 수신장치는 3D 화상을 2D 화상으로 변환하는 경우에는 부가정보를 이용함으로써 적절한 화상을 선택할 수 있다.
(f) 송신장치로, 2D 원화상 또는 3D 원화상으로 구성된 프로그램을 복수 수신하는 입력부와, 입력된 2D 화상을 2D 부호화방식으로 부호화하여 2D 프로그램을 생성하는 2D 부호화부와 입력된 3D 화상을 3D 부호화방식으로 부호화하여 3D 프로그램을 생성하는 3D 부호화부와, 상기 입력부가 수신한 프로그램이 중요프로그램인 경우 상기 중요프로그램과 상기 중요프로그램의 직전에 송신되는 선행프로그램이 동일한 부호화방식으로 부호화되도록 제어하는 제어부와, 적어도 상기 2D 부호화부에 의해 생성된 2D 프로그램 또는 상기 3D 부호화부에 의해 생성된 3D 프로그램을 포함하는 영상 스트림을 생성하는 스트림 생성부와, 상기 영상 스트림을 송신하는 송신부를 구비하는 것을 특징으로 한다.
이 구성에 의하면 2D 프로그램과 3D 프로그램이 혼재하고 있는 경우라도 중요프로그램을 선행프로그램의 전송 레이트와 같은 전송 레이트로 출력할 수 있으므로 수신장치와 표시장치 사이에 통신 모드의 재설정을 실행할 필요가 없어진다. 그러므로 표시장치에서 중요한 프로그램을 정상적으로 표시하는 것이 가능해진다.
(g) 상기 중요프로그램이 2D 원화상으로 구성되고, 상기 선행프로그램이 3D 원화상으로 구성되는 경우에 상기 입력부는 상기 선행프로그램을 구성하는 3D 원화상을 상기 3D 화상으로서 상기 3D 부호화부에 입력하며, 상기 제어부는 상기 중요프로그램을 구성하는 2D 원화상으로부터 3D 화상을 생성하고, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하며, 상기 영상 스트림 생성부는 상기 3D 부호화부에 의해 생성된 3D 프로그램인 상기 중요프로그램 및 3D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 한다.
이 구성에 의하면 본래는 2D 프로그램인 중요프로그램을 선행프로그램의 표시 모드에 맞춰서 3D 프로그램으로 변환함으로써 수신 측에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(h) 상기 제어부는 상기 중요프로그램을 구성하는 2D 원화상을 복제함으로써 시차가 없는 3D 화상을 생성하고, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하며, 상기 송신장치는 상기 3D 부호화부에 의해 생성된 시차가 없는 3D 프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 더 구비하는 것을 특징으로 한다.
시차가 없는 3D 프로그램은 본래는 표시할 필요가 없는 용장한 프레임을 포함한다. 그러므로 시차가 없는 3D 프로그램을 표시하면 표시장치의 소비전력이 증대한다고 하는 문제가 있다. 그래서 상기 구성에 의하면 상기 송신장치로부터 시차가 없는 3D 프로그램을 특정하기 위한 정보를 수신한 수신장치는 표시장치에 대해서 용장한 프레임의 삭제를 지시하는 것이 가능해진다. 이에 의해 표시장치의 소비전력이 증대하는 것을 억제할 수 있다.
(i) 상기 정보 송신부는 상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 표시되는 선행프로그램의 표시주기와 동일한 표시주기로 당해 송신장치에 대응하는 수신장치와 접속된 표시장치에서 표시될 중요프로그램을 특정하기 위한 정보를 더 송신하는 것을 특징으로 한다.
표시장치에서 2D 표시 모드와 3D 표시 모드를 전환하는 경우에 표시주기를 변경할 필요가 있다. 표시주기의 변경에 수반해 화면이 블랙아웃 할 가능성이 있다. 그래서 상기 구성에 의하면 상기 송신장치로부터 상기 중요프로그램을 특정하기 위한 정보를 수신한 수신장치는 표시장치에 대해 선행프로그램과 동일한 표시주기에 상기 중요프로그램을 표시하도록 지시하는 것이 가능하므로 표시장치에 대해 표시주기의 변경이 발생하지 않고, 화면이 블랙아웃 하는 것을 억제할 수 있다.
(j) 상기 중요프로그램이 2D 원화상으로 구성되고, 상기 선행프로그램이 3D 원화상으로 구성되는 경우에 상기 입력부는 상기 중요프로그램을 구성하는 2D 원화상을 상기 2D 화상으로서 상기 2D 부호화부에 입력하고, 상기 제어부는 상기 선행프로그램을 구성하는 3D 원화상으로부터 2D 화상을 생성하며, 생성한 상기 2D 화상을 상기 2D 부호화부에 입력하고, 상기 영상 스트림 생성부는 상기 2D 부호화부에 의해 생성된 2D 프로그램인 상기 중요프로그램 및 2D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 한다.
이 구성에 의하면 본래는 3D 프로그램인 선행프로그램을 중요프로그램의 표시 모드에 맞추어 2D 프로그램으로 변환함으로써 수신 측에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(k) 상기 중요프로그램이 3D 원화상으로 구성되고, 상기 선행프로그램이 2D 원화상으로 구성되는 경우에 상기 입력부는 상기 선행프로그램을 구성하는 2D 원화상을 상기 2D 화상으로서 상기 2D 부호화부에 입력하고, 상기 제어부는 상기 중요프로그램을 구성하는 3D 원화상으로부터 2D 화상을 생성하며, 생성한 상기 2D 화상을 상기 2D 부호화부에 입력하고, 상기 영상 스트림 생성부는 상기 2D 부호화부에 의해 생성된 2D 프로그램인 상기 중요프로그램 및 2D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 한다.
이 구성에 의하면 본래는 3D 프로그램인 중요프로그램을 선행프로그램의 표시 모드에 맞추어 2D 프로그램으로 변환함으로써 수신 측에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(l) 상기 중요프로그램이 3D 원화상으로 구성되고, 상기 선행프로그램이 2D 원화상으로 구성되는 경우에 상기 입력부는 상기 중요프로그램을 구성하는 3D 원화상을 상기 3D 화상으로서 상기 3D 부호화부에 입력하고, 상기 제어부는 상기 선행프로그램을 구성하는 2D 원화상으로부터 3D 화상을 생성하며, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하고, 상기 영상 스트림 생성부는 상기 3D 부호화부에 의해 생성된 3D 프로그램인 상기 중요프로그램 및 3D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 한다.
이 구성에 의하면 본래는 2D 프로그램인 선행프로그램을 중요프로그램의 표시 모드에 맞추어 3D 프로그램으로 변환함으로써 수신 측에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(m) 상기 제어부는 상기 선행프로그램을 구성하는 2D 원화상을 복제함으로써 시차가 없는 3D 화상을 생성하여, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하며, 상기 송신장치는 상기 3D 부호화부에 의해 생성된 시차가 없는 3D 프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 더 구비하는 것을 특징으로 한다.
시차가 없는 3D 프로그램은 본래는 표시할 필요가 없는 용장한 프레임을 포함한다. 그러므로 시차가 없는 3D 프로그램을 표시하면 표시장치의 소비전력이 증대한다고 하는 문제가 있다. 그래서 상기 구성에 의하면 상기 송신장치로부터 시차가 없는 3D 프로그램을 특정하기 위한 정보를 수신한 수신장치는 표시장치에 대해 용장한 프레임의 삭제를 지시하는 것이 가능해진다. 이에 의해 표시장치의 소비전력이 증대하는 것을 억제할 수 있다.
(n) 상기 정보 송신부는 상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 표시되는 선행프로그램의 표시주기와 동일한 표시주기로 당해 송신장치에 대응하는 수신장치와 접속된 표시장치에서 표시될 중요프로그램을 특정하기 위한 정보를 더 송신하는 것을 특징으로 한다.
표시장치에서 2D 표시 모드와 3D 표시 모드를 전환하는 경우 표시주기를 변경할 필요가 있다. 표시주기의 변경에 수반해 화면이 블랙아웃 할 가능성이 있다. 그래서 상기 구성에 의하면 상기 송신장치로부터 상기 중요프로그램을 특정하기 위한 정보를 수신한 수신장치는 표시장치에 대해 선행프로그램과 동일한 표시주기에 상기 중요프로그램을 표시하도록(듯이) 지시하는 것이 가능한가들 , 표시장치에 대해 표시주기의 변경이 발생하지 않고, 화면이 블랙아웃 하는 것을 억제할 수 있다.
(o) 수신장치로, 3D 부호화방식으로 부호화된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 수신하는 스트림 수신부와, 상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 수신하는 정보 수신부와, 상기 영상 스트림을 복호하며, 상기 정보를 이용해 중요프로그램을 특정하고, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 같은 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호처리부를 구비하는 것을 특징으로 한다.
이 구성에 의하면 중요프로그램을 선행프로그램의 전송 레이트와 같은 전송 레이트로 출력할 수 있으므로 수신장치와 표시장치 사이에 통신 모드의 재설정을 실행할 필요가 없어진다. 그러므로 표시장치에서 중요한 프로그램을 정상적으로 표시하는 것이 가능해진다.
(p) 상기 영상 스트림은 2D 부호화방식으로 부호화된 2D 프로그램을 더 포함하며, 상기 복호처리부는 상기 선행프로그램 및 상기 중요프로그램의 어느 일방에 대해 복호된 2D 화상을 3D 화상으로 변환하여 데이터량을 2배로 하거나, 또는 복호된 3D 화상을 2D 화상으로 변환하여 데이터량을 1/2배로 함으로써 상기 선행프로그램과 상기 중요프로그램의 전송 레이트를 동일하게 하는 것을 특징으로 한다.
이 구성에 의하면 2D 프로그램과 3D 프로그램이 혼재하고 있는 경우라도 중요프로그램을 선행프로그램의 전송 레이트와 같은 전송 레이트로 출력할 수 있으므로 수신장치와 표시장치 사이에 통신 모드의 재설정을 실행할 필요가 없어진다. 그러므로 표시장치에서 중요한 프로그램을 정상적으로 표시하는 것이 가능해진다.
(q) 상기 중요프로그램이 2D 프로그램이고, 상기 선행프로그램이 3D 프로그램인 경우에 상기 복호처리부는 상기 중요프로그램을 복호하여 얻어지는 2D 화상을 복제함으로써 시차가 없는 3D 화상을 생성하고, 상기 선행프로그램을 복호하여 얻어지는 3D 화상과 상기 복제에 의해 생성한 시차가 없는 3D 화상을 출력하는 것을 특징으로 한다.
이 구성에 의하면 본래는 2D 프로그램인 중요프로그램을 선행프로그램의 표시 모드에 맞추어 3D 프로그램으로 변환함으로써 표시장치에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(r) 상기 수신장치와 상기 표시장치는 HDMI(High-Definition Multimedia Interface) 규격에 준거한 전송로로 접속되어 있고, 상기 수신장치는 복호된 2D 화상 및 3D 화상을 HDMI 규격에 준거한 통신방식으로 상기 표시장치에 송신하는 HDMI 송신부를 더 구비하며, 상기 HDMI 송신부는 시차가 없는 3D 화상을 송신할 때에 시차가 없다는 것을 나타내는 용장 플래그를 상기 3D 화상에 부가하는 것을 특징으로 한다.
시차가 없는 3D 화상은 본래는 표시할 필요가 없는 용장한 프레임이다. 그러므로 시차가 없는 3D 화상을 표시하면 표시장치의 소비전력이 증대한다고 하는 문제가 있다. 그래서 상기 수신장치는 용장한 프레임의 헤더 등에 용장 플래그를 저장하여 표시장치에 송신함으로써 표시장치는 용장한 프레임을 삭제하는 것이 가능해진다. 이에 의해 표시장치의 소비전력이 증대하는 것을 억제할 수 있다.
(s) 상기 중요프로그램이 2D 프로그램이고, 상기 선행프로그램이 3D 프로그램인 경우에 상기 복호처리부는 상기 선행프로그램을 복호하여 얻어지는 좌측 눈 용 화상 및 우측 눈 용 화상의 일방을 선택하여 출력하고, 상기 중요프로그램을 복호하여 얻어지는 2D 화상을 출력하는 것을 특징으로 한다.
이 구성에 의하면 본래는 3D 프로그램인 선행프로그램을 중요프로그램의 표시 모드에 맞추어 2D 프로그램으로 변환함으로써 표시장치에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(t) 상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고, 상기 애디셔널 뷰 비디오 스트림에는 당해 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 당해 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보가 부가되어 있고, 상기 복호처리부는 상기 부가정보를 이용하여 상기 선행프로그램을 복호하여 얻어지는 상기 좌측 눈 용 화상 및 상기 우측 눈 용 화상의 어느 쪽을 선택하는가를 결정하는 것을 특징으로 한다.
애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는 경우 애디셔널 뷰 비디오 스트림의 화상을 2D 표시 모드로 이용하면 화질의 열화가 분명하며, 시청자에게 위화감을 줄 가능성이 크다. 그래서 상기 구성을 구비함으로써 수신장치는 3D 프로그램인 선행프로그램을 중요프로그램의 표시 모드에 맞추어 2D 프로그램으로 변환할 때에 부가정보를 이용함으로써 적절한 화상을 선택할 수 있다.
(u) 상기 선행프로그램이 2D 프로그램이고, 상기 중요프로그램이 3D 프로그램인 경우에 상기 복호처리부는 상기 선행프로그램을 복호하여 얻어지는 2D 화상을 출력하고, 상기 중요프로그램을 복호하여 얻어지는 좌측 눈 용 화상 및 우측 눈 용 화상의 일방을 선택해서 출력하는 것을 특징으로 한다.
이 구성에 의하면 본래는 3D 프로그램인 중요프로그램을 선행프로그램의 표시 모드에 맞추어 2D 프로그램으로 변환함으로써 표시장치에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(v) 상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고, 상기 애디셔널 뷰 비디오 스트림에는 당해 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 당해 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보가 부가되어 있고, 상기 복호처리부는 상기 부가정보를 이용하여 상기 중요프로그램을 복호하여 얻어지는 상기 좌측 눈 용 화상 및 상기 우측 눈 용 화상의 어느 쪽을 선택하는가를 결정하는 것을 특징으로 한다.
애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는 경우 애디셔널 뷰 비디오 스트림의 화상을 2D 표시 모드로 이용하면 화질의 열화가 분명하고 시청자에게 위화감을 줄 가능성이 크다. 그래서 상기 구성을 구비함으로써 수신장치는 3D 프로그램인 중요프로그램을 선행프로그램의 표시 모드에 맞추어 2D 프로그램으로 변환할 때에 부가정보를 이용함으로써 적절한 화상을 선택할 수 있다.
(w) 상기 중요프로그램이 3D 프로그램이고, 상기 선행프로그램이 2D 프로그램인 경우에 상기 복호처리부는 상기 선행프로그램을 복호하여 얻어지는 2D 화상을 복제함으로써 시차가 없는 3D 화상을 생성하여, 생성한 시차가 없는 3D 화상과 상기 중요프로그램을 복호하여 얻어지는 3D 화상을 출력하는 것을 특징으로 한다.
이 구성에 의하면 본래는 2D 프로그램인 선행프로그램을 중요프로그램의 표시 모드에 맞추어 3D 프로그램으로 변환함으로써 표시장치에서는 표시 모드로 전환이 발생하지 않는다. 그러므로 커머셜 등의 중요프로그램의 최초의 부분이 표시되지 않는다고 하는 사태를 회피하는 것이 가능해진다.
(x) 상기 수신장치와 상기 표시장치는 HDMI(High-Definition Multimedia Interface) 규격에 준거한 전송로로 접속되어 있고, 상기 수신장치는 복호된 2D 화상 및 3D 화상을 HDMI 규격에 준거한 통신방식으로 상기 표시장치에 송신하는 HDMI 송신부를 더 구비하며, 상기 HDMI 송신부는 시차가 없는 3D 화상을 송신할 때에 시차가 없다는 것을 나타내는 용장 플래그를 상기 3D 화상에 부가하는 것을 특징으로 한다.
시차가 없는 3D 화상은 본래는 표시할 필요가 없는 용장한 프레임이다. 그러므로 시차가 없는 3D 화상을 표시하면 표시장치의 소비전력이 증대한다고 하는 문제가 있다. 그래서 상기 수신장치는 예를 들어 용장한 프레임의 헤더 등에 용장 플래그를 저장하여 표시장치에 송신함으로써 표시장치는 용장한 프레임을 삭제하는 것이 가능해진다. 이에 의해 표시장치의 소비전력이 증대하는 것을 억제할 수 있다.
(y) 수신장치로, 2D 부호화방식으로 부호화된 2D 프로그램과 3D 부호화방식으로 부호화된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 수신하는 스트림 수신부와, 시차가 없는 3D 프로그램을 특정하기 위한 정보를 수신하는 정보 수신부와, 수신한 상기 영상 스트림을 복호하는 복호처리부와, 복호된 2D 화상 및 3D 화상을 HDMI 규격에 준거한 통신방식으로 표시장치에 송신하는 HDMI 송신부를 구비하며, 상기 HDMI 송신부는 시차가 없는 3D 화상을 송신할 때에 시차가 없다는 것을 나타내는 용장 플래그를 상기 3D 화상에 부가하는 것을 특징으로 한다.
시차가 없는 3D 화상은 본래는 표시할 필요가 없는 용장한 프레임이다. 그러므로 시차가 없는 3D 화상을 표시하면 표시장치의 소비전력이 증대한다고 하는 문제가 있다. 그래서 상기 수신장치는 예를 들어 용장한 프레임의 헤더 등에 용장 플래그를 저장하여 표시장치에 송신함으로써 표시장치는 용장한 프레임을 삭제하는 것이 가능해진다. 이에 의해 표시장치의 소비전력이 증대하는 것을 억제할 수 있다.
(z) 상기 정보 수신부는 상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 표시되는 선행프로그램의 표시주기와 동일한 표시주기로 당해 송신장치에 대응하는 수신장치와 접속된 표시장치에서 표시될 중요프로그램을 특정하기 위한 정보를 더 수신하고, 상기 HDMI 송신부는 상기 시차가 없는 3D 화상이 상기 중요프로그램인 경우에는 상기 용장 플래그를 상기 3D 화상에 부가하는 처리를 억제하는 것을 특징으로 한다.
표시장치에서 2D 표시 모드와 3D 표시 모드를 전환하는 경우 표시주기를 변경할 필요가 있다. 표시주기의 변경에 수반해 화면이 블랙아웃 할 가능성이 있다. 그래서 상기 수신장치는 상기 용장 플래그를 상기 3D 화상에 부가하는 처리를 억제하므로 표시장치에 대해 표시주기의 변경이 발생하지 않고, 화면이 블랙아웃 하는 것을 억제할 수 있다.
(A) 수신장치로, 3D 부호화방식으로 부호화된 영상 스트림을 수신하는 스트림 수신부와, 상기 영상 스트림을 복호하는 3D 복호부와, 복호된 3D 화상을 2D 화상으로 변환하여 출력하는 출력제어부를 구비하는 수신장치이며, 상기 영상 스트림은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하고, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고, 상기 애디셔널 뷰 비디오 스트림에는 당해 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 당해 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보가 부가되어 있으며, 상기 출력제어부는 3D 화상을 2D 화상으로 변환할 때에 상기 부가정보를 이용하여 상기 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 판단하는 것을 특징으로 한다.
애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는 경우 애디셔널 뷰 비디오 스트림의 화상을 2D 표시 모드로 이용하면 화질의 열화가 분명하고, 시청자에게 위화감을 줄 가능성이 크다. 그래서 상기 구성을 구비함으로써 수신장치는 3D 화상을 2D 화상으로 변환할 때에 부가정보를 이용함으로써 적절한 화상을 선택할 수 있다.
본 발명의 한 형태인 영상처리시스템에 의하면 송신장치, BD 리코더, 디지털 텔레비전 등을 제조 및 판매하는 산업에서 2D 프로그램과 3D 프로그램이 혼재하고 있는 경우라도 디지털 텔레비전에서 중요한 프로그램을 정상적으로 표시하는 것이 가능한 기술로서 이용할 수 있다.
1, 2 영상처리시스템
10, 10a, 10b 송신장치
20, 20a, 20b BD 리코더
30, 30a, 30b, 70 디지털 텔레비전
40 HDMI 케이블
50 리모컨
60 3D안경
101 입력부
102 2D 부호화부
103, 103a 3D 부호화부
104 중요플래그 생성부
105 다중화부
106 스트림 송신부
120 제어부
130 2D 플래그 생성부
201 튜너
202 다중 분리부
203 제어정보 관리부
204, 204a 복호처리부
205, 205a, 205b HDMI 송신부
211 2D/3D 판단부
212 전환부
213 2D 복호부
214 3D 복호부
215 출력제어부
215a 출력부
216 용장 플래그 생성부
301 HDMI 수신부
302, 302a 영상표시 처리부
303 표시부
10, 10a, 10b 송신장치
20, 20a, 20b BD 리코더
30, 30a, 30b, 70 디지털 텔레비전
40 HDMI 케이블
50 리모컨
60 3D안경
101 입력부
102 2D 부호화부
103, 103a 3D 부호화부
104 중요플래그 생성부
105 다중화부
106 스트림 송신부
120 제어부
130 2D 플래그 생성부
201 튜너
202 다중 분리부
203 제어정보 관리부
204, 204a 복호처리부
205, 205a, 205b HDMI 송신부
211 2D/3D 판단부
212 전환부
213 2D 복호부
214 3D 복호부
215 출력제어부
215a 출력부
216 용장 플래그 생성부
301 HDMI 수신부
302, 302a 영상표시 처리부
303 표시부
Claims (31)
- 송신장치와 수신장치를 포함하는 영상처리시스템으로,
상기 송신장치는,
입력된 3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와,
상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와,
상기 영상 스트림을 송신하는 스트림 송신부와,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 구비하고,
상기 수신장치는,
상기 정보를 수신하는 정보 수신부와,
상기 영상 스트림을 수신하는 스트림 수신부와,
상기 영상 스트림을 복호하고, 상기 정보를 이용해 중요프로그램을 특정하여, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 같은 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호처리부를 구비하는 것을 특징으로 하는 영상처리시스템. - 청구항 1에 있어서,
상기 송신장치는,
2D 원화상 또는 3D 원화상으로 구성되는 프로그램을 복수 수신하는 입력부와,
입력된 2D 화상을 2D 부호화방식으로 부호화하여 2D 프로그램을 생성하는 2D 부호화부를 더 구비하며,
상기 3D 부호화부는 입력된 3D 화상을 3D 부호화방식으로 부호화하고,
상기 스트림 생성부는 상기 2D 부호화부에서 생성된 2D 프로그램을 포함하는 상기 영상 스트림을 생성하며,
상기 복호처리부는 상기 선행프로그램 및 상기 중요프로그램의 어느 일방에 대해 복호된 2D 화상을 3D 화상으로 변환하여 데이터량을 2배로 하거나, 또는 복호된 3D 화상을 2D 화상으로 변환하여 데이터량을 1/2배로 함으로써 상기 선행프로그램과 상기 중요프로그램의 전송 레이트를 동일하게 하는 것을 특징으로 하는 영상처리시스템. - 입력된 3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와,
상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와,
상기 영상 스트림을 송신하는 스트림 송신부와,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 출력하는 선행프로그램의 전송 레이트와 같은 전송 레이트로 당해 송신장치에 대응하는 수신장치와 표시장치 사이의 접속에 이용되는 전송로에 출력될 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 구비하는 것을 특징으로 하는 송신장치. - 청구항 3에 있어서,
상기 3D 부호화부에 의해 생성되는 상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고,
상기 3D 부호화부는,
상기 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 상기 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보를 생성하는 부가정보 생성부와,
상기 부가정보를 상기 애디셔널 뷰 비디오 스트림에 대응시켜서 출력하는 출력부를 포함하는 것을 특징으로 하는 송신장치. - 입력된 3D 원화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화부와,
상기 3D 부호화부에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성부와,
상기 영상 스트림을 송신하는 스트림 송신부를 구비하며,
상기 3D 부호화부에 의해 생성되는 상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고,
상기 3D 부호화부는,
상기 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 상기 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보를 생성하는 부가정보 생성부와,
상기 부가정보를 상기 애디셔널 뷰 비디오 스트림에 대응시켜서 출력하는 출력부를 포함하는 것을 특징으로 하는 송신장치. - 2D 원화상 또는 3D 원화상으로 구성된 프로그램을 복수 수신하는 입력부와,
입력된 2D 화상을 2D 부호화방식으로 부호화하여 2D 프로그램을 생성하는 2D 부호화부와,
입력된 3D 화상을 3D 부호화방식으로 부호화하여 3D 프로그램을 생성하는 3D 부호화부와,
상기 입력부가 수신한 프로그램이 중요프로그램인 경우 상기 중요프로그램과 상기 중요프로그램의 직전에 송신되는 선행프로그램이 동일한 부호화방식으로 부호화되도록 제어하는 제어부와,
적어도 상기 2D 부호화부에 의해 생성된 2D 프로그램 또는 상기 3D 부호화부에 의해 생성된 3D 프로그램을 포함하는 영상 스트림을 생성하는 스트림 생성부와,
상기 영상 스트림을 송신하는 송신부를 구비하는 것을 특징으로 하는 송신장치. - 청구항 6에 있어서,
상기 중요프로그램이 2D 원화상으로 구성되고, 상기 선행프로그램이 3D 원화상으로 구성되는 경우에,
상기 입력부는 상기 선행프로그램을 구성하는 3D 원화상을 상기 3D 화상으로서 상기 3D 부호화부에 입력하고,
상기 제어부는 상기 중요프로그램을 구성하는 2D 원화상으로부터 3D 화상을 생성하여, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하며,
상기 영상 스트림 생성부는 상기 3D 부호화부에 의해 생성된 3D 프로그램인 상기 중요프로그램 및 3D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 하는 송신장치. - 청구항 7에 있어서,
상기 제어부는 상기 중요프로그램을 구성하는 2D 원화상을 복제함으로써 시차가 없는 3D 화상을 생성하고, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하며,
상기 송신장치는,
상기 3D 부호화부에 의해 생성된 시차가 없는 3D 프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 더 구비하는 것을 특징으로 하는 송신장치. - 청구항 8에 있어서,
상기 정보 송신부는,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 표시되는 선행프로그램의 표시주기와 동일한 표시주기로 당해 송신장치에 대응하는 수신장치와 접속된 표시장치에서 표시될 중요프로그램을 특정하기 위한 정보를 송신하는 것을 특징으로 하는 송신장치. - 청구항 6에 있어서,
상기 중요프로그램이 2D 원화상으로 구성되고, 상기 선행프로그램이 3D 원화상으로 구성되는 경우에,
상기 입력부는 상기 중요프로그램을 구성하는 2D 원화상을 상기 2D 화상으로서 상기 2D 부호화부에 입력하고,
상기 제어부는 상기 선행프로그램을 구성하는 3D 원화상으로부터 2D 화상을 생성하여, 생성한 상기 2D 화상을 상기 2D 부호화부에 입력하며,
상기 영상 스트림 생성부는 상기 2D 부호화부에 의해 생성된 2D 프로그램인 상기 중요프로그램 및 2D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 하는 송신장치. - 청구항 6에 있어서,
상기 중요프로그램이 3D 원화상으로 구성되고, 상기 선행프로그램이 2D 원화상으로 구성되는 경우에,
상기 입력부는 상기 선행프로그램을 구성하는 2D 원화상을 상기 2D 화상으로서 상기 2D 부호화부에 입력하고,
상기 제어부는 상기 중요프로그램을 구성하는 3D 원화상으로부터 2D 화상을 생성하여, 생성한 상기 2D 화상을 상기 2D 부호화부에 입력하며,
상기 영상 스트림 생성부는 상기 2D 부호화부에 의해 생성된 2D 프로그램인 상기 중요프로그램 및 2D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 하는 송신장치. - 청구항 6에 있어서,
상기 중요프로그램이 3D 원화상으로 구성되고, 상기 선행프로그램이 2D 원화상으로 구성되는 경우에,
상기 입력부는 상기 중요프로그램을 구성하는 3D 원화상을 상기 3D 화상으로서 상기 3D 부호화부에 입력하고,
상기 제어부는 상기 선행프로그램을 구성하는 2D 원화상으로부터 3D 화상을 생성하여, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하며,
상기 영상 스트림 생성부는 상기 3D 부호화부에 의해 생성된 3D 프로그램인 상기 중요프로그램 및 3D 프로그램인 상기 선행프로그램을 포함하는 상기 영상 스트림을 생성하는 것을 특징으로 하는 송신장치. - 청구항 12에 있어서,
상기 제어부는 상기 선행프로그램을 구성하는 2D 원화상을 복제함으로써 시차가 없는 3D 화상을 생성하고, 생성한 상기 3D 화상을 상기 3D 부호화부에 입력하며,
상기 송신장치는,
상기 3D 부호화부에 의해 생성된 시차가 없는 3D 프로그램을 특정하기 위한 정보를 송신하는 정보 송신부를 더 구비하는 것을 특징으로 하는 송신장치. - 청구항 13에 있어서,
상기 정보 송신부는,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 표시되는 선행프로그램의 표시주기와 동일한 표시주기로 당해 송신장치에 대응하는 수신장치와 접속된 표시장치에서 표시될 중요프로그램을 특정하기 위한 정보를 더 송신하는 것을 특징으로 하는 송신장치. - 3D 부호화방식으로 부호화된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 수신하는 스트림 수신부와,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 수신하는 정보 수신부와,
상기 영상 스트림을 복호하고, 상기 정보를 이용해 중요프로그램을 특정하여, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 같은 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호처리부를 구비하는 것을 특징으로 하는 수신장치. - 청구항 15에 있어서,
상기 영상 스트림은 2D 부호화방식으로 부호화된 2D 프로그램을 더 포함하고,
상기 복호처리부는 상기 선행프로그램 및 상기 중요프로그램의 어느 일방에 대해 복호된 2D 화상을 3D 화상으로 변환하여 데이터량을 2배로 하거나, 또는 복호된 3D 화상을 2D 화상으로 변환하여 데이터량을 1/2배로 함으로써 상기 선행프로그램과 상기 중요프로그램과의 전송 레이트를 동일하게 하는 것을 특징으로 하는 수신장치. - 청구항 16에 있어서,
상기 중요프로그램이 2D 프로그램이고, 상기 선행프로그램이 3D 프로그램인 경우에,
상기 복호처리부는 상기 중요프로그램을 복호하여 얻어지는 2D 화상을 복제함으로써 시차가 없는 3D 화상을 생성하고, 상기 선행프로그램을 복호하여 얻어지는 3D 화상과 상기 복제에 의해 생성한 시차가 없는 3D 화상을 출력하는 것을 특징으로 하는 수신장치. - 청구항 17에 있어서,
상기 수신장치와 상기 표시장치는 HDMI(High-Definition Multimedia Interface) 규격에 준거한 전송로로 접속되어 있고,
상기 수신장치는 복호된 2D 화상 및 3D 화상을 HDMI 규격에 준거한 통신방식으로 상기 표시장치에 송신하는 HDMI 송신부를 더 구비하며,
상기 HDMI 송신부는 시차가 없는 3D 화상을 송신할 때에 시차가 없다는 것을 나타내는 용장 플래그를 상기 3D 화상에 부가하는 것을 특징으로 하는 수신장치. - 청구항 16에 있어서,
상기 중요프로그램이 2D 프로그램이고, 상기 선행프로그램이 3D 프로그램인 경우에,
상기 복호처리부는 상기 선행프로그램을 복호하여 얻어지는 좌측 눈 용 화상 및 우측 눈 용 화상의 일방을 선택해서 출력하고, 상기 중요프로그램을 복호하여 얻어지는 2D 화상을 출력하는 것을 특징으로 하는 수신장치. - 청구항 19에 있어서,
상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고,
상기 애디셔널 뷰 비디오 스트림에는 당해 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 당해 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보가 부가되어 있으며,
상기 복호처리부는 상기 부가정보를 이용하여 상기 선행프로그램을 복호하여 얻어지는 상기 좌측 눈 용 화상 및 상기 우측 눈 용 화상의 어느 쪽을 선택하는가를 결정하는 것을 특징으로 하는 수신장치. - 청구항 16에 있어서,
상기 선행프로그램이 2D 프로그램이고, 상기 중요프로그램이 3D 프로그램인 경우에,
상기 복호처리부는 상기 선행프로그램을 복호하여 얻어지는 2D 화상을 출력하고, 상기 중요프로그램을 복호하여 얻어지는 좌측 눈 용 화상 및 우측 눈 용 화상의 일방을 선택해서 출력하는 것을 특징으로 하는 수신장치. - 청구항 21에 있어서,
상기 3D 프로그램은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함하며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고,
상기 애디셔널 뷰 비디오 스트림에는 당해 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에, 당해 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보가 부가되어 있으며,
상기 복호처리부는 상기 부가정보를 이용하여 상기 중요프로그램을 복호하여 얻어지는 상기 좌측 눈 용 화상 및 상기 우측 눈 용 화상의 어느 쪽을 선택하는가를 결정하는 것을 특징으로 하는 수신장치. - 청구항 16에 있어서,
상기 중요프로그램이 3D 프로그램이고, 상기 선행프로그램이 2D 프로그램인 경우에,
상기 복호처리부는 상기 선행프로그램을 복호하여 얻어지는 2D 화상을 복제함으로써 시차가 없는 3D 화상을 생성하고, 생성한 시차가 없는 3D 화상과 상기 중요프로그램을 복호하여 얻어지는 3D 화상을 출력하는 것을 특징으로 하는 수신장치. - 청구항 23에 있어서,
상기 수신장치와 상기 표시장치는 HDMI(High-Definition Multimedia Interface) 규격에 준거한 전송로로 접속되어 있고,
상기 수신장치는 복호된 2D 화상 및 3D 화상을 HDMI 규격에 준거한 통신방식으로 상기 표시장치에 송신하는 HDMI 송신부를 더 구비하며,
상기 HDMI 송신부는 시차가 없는 3D 화상을 송신할 때에 시차가 없다는 것을 나타내는 용장 플래그를 상기 3D 화상에 부가하는 것을 특징으로 하는 수신장치. - 2D 부호화방식으로 부호화된 2D 프로그램과 3D 부호화방식으로 부호화된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 수신하는 스트림 수신부와,
시차가 없는 3D 프로그램을 특정하기 위한 정보를 수신하는 정보 수신부와,
수신한 상기 영상 스트림을 복호하는 복호처리부와,
복호된 2D 화상 및 3D 화상을 HDMI 규격에 준거한 통신방식으로 표시장치에 송신하는 HDMI 송신부를 구비하며,
상기 HDMI 송신부는 시차가 없는 3D 화상을 송신할 때에 시차가 없다는 것을 나타내는 용장 플래그를 상기 3D 화상에 부가하는 것을 특징으로 하는 수신장치. - 청구항 25에 있어서,
상기 정보 수신부는,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 표시되는 선행프로그램의 표시주기와 동일한 표시주기로 당해 송신장치에 대응하는 수신장치와 접속된 표시장치에서 표시될 중요프로그램을 특정하기 위한 정보를 더 수신하며,
상기 HDMI 송신부는 상기 시차가 없는 3D 화상이 상기 중요프로그램인 경우에는 상기 용장 플래그를 상기 3D 화상에 부가하는 처리를 억제하는 것을 특징으로 하는 수신장치. - 3D 부호화방식으로 부호화된 영상 스트림을 수신하는 스트림 수신부와,
상기 영상 스트림을 복호하는 3D 복호부와,
복호된 3D 화상을 2D 화상으로 변환하여 출력하는 출력제어부를 구비하는 수신장치로,
상기 영상 스트림은 레프트 뷰 비디오 스트림 및 라이트 뷰 비디오 스트림을 포함며, 상기 레프트 뷰 비디오 스트림 및 상기 라이트 뷰 비디오 스트림의 어느 일방이 베이스 뷰 비디오 스트림이고 타방이 애디셔널 뷰 비디오 스트림이며, 상기 애디셔널 뷰 비디오 스트림은 상기 베이스 뷰 비디오 스트림에 의거하여 생성된 것이고,
상기 애디셔널 뷰 비디오 스트림에는 당해 애디셔널 뷰 비디오 스트림을 생성하는 과정에서 3D 원화상을 축소하고 있는가 여부에 따라서, 수신장치에서 3D 화상을 2D 화상으로 변환하는 경우에 당해 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 나타내는 부가정보가 부가되어 있으며,
상기 출력제어부는 3D 화상을 2D 화상으로 변환할 때에 상기 부가정보를 이용하여 상기 애디셔널 뷰 비디오 스트림을 사용하는가 여부를 판단하는 것을 특징으로 하는 수신장치. - 송신장치에서 이용되는 송신방법으로,
3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화스텝과,
상기 3D 부호화스텝에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성스텝과,
상기 영상 스트림을 송신하는 스트림 송신스텝과,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 출력하는 선행프로그램의 전송 레이트와 같은 전송 레이트로 당해 송신장치에 대응하는 수신장치와 표시장치 사이의 접속에 이용되는 전송로에 출력될 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신스텝을 포함하는 것을 특징으로 하는 송신방법. - 송신장치에서 이용되는 컴퓨터 프로그램으로,
3D 화상을 부호화하여 3D 프로그램을 생성하는 3D 부호화스텝과,
상기 3D 부호화스텝에서 생성된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 생성하는 스트림 생성스텝과,
상기 영상 스트림을 송신하는 스트림 송신스텝과,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 직전에 출력하는 선행프로그램의 전송 레이트와 같은 전송 레이트로 당해 송신장치에 대응하는 수신장치와 표시장치 사이의 접속에 이용되는 전송로에 출력될 중요프로그램을 특정하기 위한 정보를 송신하는 정보 송신스텝을 상기 송신장치에 실행시키는 것을 특징으로 하는 컴퓨터 프로그램. - 수신장치에서 이용되는 수신방법으로,
3D 부호화방식으로 부호화된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 수신하는 스트림 수신스텝과,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 수신하는 정보 수신스텝과,
상기 영상 스트림을 복호하고, 상기 정보를 이용해 중요프로그램을 특정하여, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 같은 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호처리스텝을 포함하는 것을 특징으로 하는 수신방법. - 수신장치에서 이용되는 컴퓨터 프로그램으로,
3D 부호화방식으로 부호화된 3D 프로그램을 포함하는 복수 프로그램으로 이루어지는 영상 스트림을 수신하는 스트림 수신스텝과,
상기 영상 스트림에 포함되는 복수 프로그램 중에서 중요프로그램을 특정하기 위한 정보를 수신하는 정보 수신스텝과,
상기 영상 스트림을 복호하고, 상기 정보를 이용해 중요프로그램을 특정하여, 특정한 상기 중요프로그램을 당해 중요프로그램의 직전에 출력되는 선행프로그램의 전송 레이트와 같은 전송 레이트로 표시장치와의 접속에 이용되는 전송로에 출력되도록 제어하는 복호 처리 스텝을 상기 수신장치에 실행시키는 것을 특징으로 하는 컴퓨터 프로그램.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161527858P | 2011-08-26 | 2011-08-26 | |
US61/527,858 | 2011-08-26 | ||
PCT/JP2012/005306 WO2013031156A1 (ja) | 2011-08-26 | 2012-08-24 | 映像処理システム、送信装置、受信装置、送信方法、受信方法及びコンピュータプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20140053189A true KR20140053189A (ko) | 2014-05-07 |
Family
ID=47755685
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020147003748A KR20140053189A (ko) | 2011-08-26 | 2012-08-24 | 영상처리시스템, 송신장치, 수신장치, 송신방법, 수신방법 및 컴퓨터 프로그램 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20150062295A1 (ko) |
JP (1) | JPWO2013031156A1 (ko) |
KR (1) | KR20140053189A (ko) |
CA (1) | CA2844599A1 (ko) |
MX (1) | MX2014001917A (ko) |
WO (1) | WO2013031156A1 (ko) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8555201B2 (en) * | 2008-06-05 | 2013-10-08 | Qualcomm Incorporated | Wireless communication device having deterministic control of foreground access of the user interface |
ITTO20120647A1 (it) * | 2012-07-24 | 2014-01-25 | St Microelectronics Srl | Procedimenti e sistemi per il trattamento di immagini stereoscopiche, prodotti informatici e supporto relativi |
US9300944B2 (en) * | 2013-10-04 | 2016-03-29 | Amlogic Co., Ltd. | Methods and systems for processing 3D video data |
JP5948508B2 (ja) | 2014-05-08 | 2016-07-06 | オリンパス株式会社 | ビデオプロセッサ、ビデオプロセッサの作動方法 |
JP6707437B2 (ja) * | 2016-11-15 | 2020-06-10 | 株式会社東芝 | 放送マスターシステム、同システムにおける切替方法、およびプログラム |
US20180287943A1 (en) * | 2017-03-31 | 2018-10-04 | Microsoft Technology Licensing, Llc | Combining Multiple Data Streams at a Receiver for QoS Balance in Asymmetric Communications |
JP7051408B2 (ja) * | 2017-12-07 | 2022-04-11 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用内視鏡装置、および医療用観察システム |
KR102398931B1 (ko) * | 2020-05-11 | 2022-05-17 | 성균관대학교산학협력단 | 포인트 오토인코더, 듀얼 오토인코더, 및 이를 이용한 포인트 클라우드의 차원 변환 방법 |
JP7544661B2 (ja) | 2021-05-26 | 2024-09-03 | Tvs Regza株式会社 | 放送受信装置 |
WO2023242978A1 (ja) * | 2022-06-15 | 2023-12-21 | マクセル株式会社 | 情報表示装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0899955A3 (en) * | 1997-08-27 | 2001-01-31 | Matsushita Electric Industrial Co., Ltd. | Control information generating apparatus for broadcast system |
JP2003110980A (ja) * | 2001-09-28 | 2003-04-11 | Hitachi Ltd | 受信装置及び課金システム |
EP1550254B1 (en) * | 2002-09-30 | 2009-11-18 | Koninklijke Philips Electronics N.V. | Transmission method and apparatus |
JP5407968B2 (ja) * | 2009-06-29 | 2014-02-05 | ソニー株式会社 | 立体画像データ送信装置および立体画像データ受信装置 |
US20110012993A1 (en) * | 2009-07-14 | 2011-01-20 | Panasonic Corporation | Image reproducing apparatus |
JP5604827B2 (ja) * | 2009-08-21 | 2014-10-15 | ソニー株式会社 | 送信装置、受信装置、プログラム、及び通信システム |
JP5450118B2 (ja) * | 2010-01-14 | 2014-03-26 | ソニー株式会社 | 映像伝送装置、映像表示装置、映像表示システム、映像伝送方法及びコンピュータプログラム |
JP5492583B2 (ja) * | 2010-01-29 | 2014-05-14 | 日立コンシューマエレクトロニクス株式会社 | 映像処理装置及び映像処理方法 |
US20130215240A1 (en) * | 2010-05-28 | 2013-08-22 | Sadao Tsuruga | Receiver apparatus and output method |
EP2587810A4 (en) * | 2010-06-23 | 2015-09-30 | Panasonic Corp | CONTENT DISTRIBUTION SYSTEM, PLAYING DEVICE, DISTRIBUTION SERVER, PLAYING PROCEDURE AND DISTRIBUTION PROCESS |
JP4707766B1 (ja) * | 2010-07-21 | 2011-06-22 | 株式会社プランネット・アソシエイツ | 三次元ビデオストリームへの映像変換方法 |
-
2012
- 2012-08-24 CA CA2844599A patent/CA2844599A1/en not_active Abandoned
- 2012-08-24 US US14/239,559 patent/US20150062295A1/en not_active Abandoned
- 2012-08-24 JP JP2013531063A patent/JPWO2013031156A1/ja active Pending
- 2012-08-24 WO PCT/JP2012/005306 patent/WO2013031156A1/ja active Application Filing
- 2012-08-24 KR KR1020147003748A patent/KR20140053189A/ko not_active Application Discontinuation
- 2012-08-24 MX MX2014001917A patent/MX2014001917A/es not_active Application Discontinuation
Also Published As
Publication number | Publication date |
---|---|
MX2014001917A (es) | 2014-04-14 |
WO2013031156A1 (ja) | 2013-03-07 |
JPWO2013031156A1 (ja) | 2015-03-23 |
CA2844599A1 (en) | 2013-03-07 |
US20150062295A1 (en) | 2015-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20140053189A (ko) | 영상처리시스템, 송신장치, 수신장치, 송신방법, 수신방법 및 컴퓨터 프로그램 | |
US10051226B2 (en) | Transmitter for enabling switching involving a 3D video signal | |
JP6648783B2 (ja) | 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム | |
CA2823288C (en) | Video encoder, video encoding method, video encoding program, video reproduction device, video reproduction method, and video reproduction program | |
US9473788B2 (en) | Frame-compatible full resolution stereoscopic 3D compression and decompression | |
JPWO2012111325A1 (ja) | 映像符号化装置、映像符号化方法、映像符号化プログラム、映像再生装置、映像再生方法及び映像再生プログラム | |
US20140089962A1 (en) | Image playback device, image playback method, image playback program, image transmission device, image transmission method and image transmission program | |
US20140078256A1 (en) | Playback device, transmission device, playback method and transmission method | |
WO2012169204A1 (ja) | 送信装置、受信装置、送信方法及び受信方法 | |
JP5390016B2 (ja) | 映像処理装置 | |
WO2012029293A1 (ja) | 映像処理装置、映像処理方法、コンピュータプログラム及び配信方法 | |
KR20140057242A (ko) | 부호화 장치 및 부호화 방법과 복호 장치 및 복호 방법 | |
JP5390017B2 (ja) | 映像処理装置 | |
Coll et al. | 3D TV at home: Status, challenges and solutions for delivering a high quality experience | |
JP5238528B2 (ja) | 符号化装置および方法、ならびに、復号装置および方法 | |
JP6008292B2 (ja) | ビデオストリームの映像のデータ作成装置及び再生装置 | |
KR20130042429A (ko) | 비디오 신호의 보조 데이터 공간에 동기 정보를 추가하여 영상을 동기화하는 장치 및 방법 | |
US20120008920A1 (en) | Recording apparatus, recording method, reproducing apparatus, reproducing method, program, and recording/producing apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |