KR102558213B1 - 재생 장치, 재생 방법, 프로그램, 및 기록 매체 - Google Patents

재생 장치, 재생 방법, 프로그램, 및 기록 매체 Download PDF

Info

Publication number
KR102558213B1
KR102558213B1 KR1020207010290A KR20207010290A KR102558213B1 KR 102558213 B1 KR102558213 B1 KR 102558213B1 KR 1020207010290 A KR1020207010290 A KR 1020207010290A KR 20207010290 A KR20207010290 A KR 20207010290A KR 102558213 B1 KR102558213 B1 KR 102558213B1
Authority
KR
South Korea
Prior art keywords
metadata
stream
picture
display
information
Prior art date
Application number
KR1020207010290A
Other languages
English (en)
Other versions
KR20200077513A (ko
Inventor
고우이치 우치무라
Original Assignee
소니그룹주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니그룹주식회사 filed Critical 소니그룹주식회사
Publication of KR20200077513A publication Critical patent/KR20200077513A/ko
Application granted granted Critical
Publication of KR102558213B1 publication Critical patent/KR102558213B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/793—Processing of colour television signals in connection with recording for controlling the level of the chrominance signal, e.g. by means of automatic chroma control circuits
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/12—Formatting, e.g. arrangement of data block or words on the record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42646—Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2541—Blu-ray discs; Blue laser DVR discs

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

본 기술은, 비디오에 중첩해서 다른 정보를 표시시키는 경우의 부자연스러운 휘도의 변화를 방지할 수 있도록 하는 재생 장치, 재생 방법, 프로그램, 및 기록 매체에 관한 것이다. 본 기술의 일 측면의 재생 장치는, 픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하고, 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 비디오 스트림을 구성하는 픽처에, 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 메타데이터를 부가하여, 메타데이터를 부가한 픽처를 표시 장치에 출력한다. 본 기술은, Blu-ray(등록상표) Disc 플레이어에 적용할 수 있다.

Description

재생 장치, 재생 방법, 프로그램, 및 기록 매체
본 기술은, 재생 장치, 재생 방법, 프로그램, 및 기록 매체에 관한 것으로, 특히, 비디오에 중첩해서 다른 정보를 표시시키는 경우의 부자연스러운 휘도의 변화를 방지할 수 있도록 한 재생 장치, 재생 방법, 프로그램, 및 기록 매체에 관한 것이다.
Ultra HD Blu-ray(등록상표) Disc(UHD BD)는, 다이내믹 레인지를 확장한 비디오인 HDR(High Dynamic Range) 비디오의 수록에 대응한 BD 규격이다. SDR(Standard Dynamic Range) 비디오의 최고 휘도가 100nits(100cd/㎡)인 데 비해, HDR 비디오의 최고 휘도는, 그것을 초과하는, 예를 들어 10000nits이다.
HDR 비디오 스트림의 메타데이터로서, 픽처(프레임) 단위의 휘도 정보를 포함하는 메타데이터인 Dynamic metadata가 SMPTE ST 2094로 규정되어 있다. Dynamic metadata를 부가한 HDR 비디오 스트림의 재생 시, 플레이어측으로부터 TV측으로는, 각 픽처와 함께 Dynamic metadata가 전송된다.
TV측에 있어서는, 디스플레이의 최고 휘도가 HDR 비디오의 휘도보다 낮은 경우, BD 플레이어로부터 전송되어 온 Dynamic metadata에 기초하여, HDR 비디오의 휘도를 압축하기 위한 처리가 행해진다.
일본 특허공개 제2017-139052호 공보
HDR 비디오의 재생 중에, 메뉴, 자막, OSD(On Screen Display) 등의 표시가 유저에 의해 지시되는 경우가 있다. 예를 들어 메뉴의 표시가 지시된 경우, BD 플레이어에 있어서는, HDR 비디오의 각 픽처에 메뉴의 화상이 합성되고, 메뉴의 화상이 합성된 HDR 비디오가 TV에 대해서 출력된다.
Dynamic metadata를 사용한 휘도 압축을 메뉴의 화상이 합성된 HDR 비디오에 대해서 행한 경우, HDR 비디오의 휘도와 함께, 메뉴의 화상 휘도도 압축된다. 따라서, 예를 들어 휘도의 변화가 심한 씬(scene)에서 메뉴의 표시가 지시된 경우, 메뉴의 휘도 변화도 심하게 되어, 이것에 의해, 유저에게 위화감을 주게 되는 경우가 있다.
본 기술은 이러한 상황을 감안하여 이루어진 것으로, 비디오에 중첩해서 다른 정보를 표시시키는 경우의 부자연스러운 휘도의 변화를 방지할 수 있도록 하는 것이다.
본 기술의 일 측면의 재생 장치는, 픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하는 수신부와, 상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터를 부가하고, 상기 메타데이터를 부가한 상기 픽처를 표시 장치에 출력하는 출력 제어부를 구비한다.
본 기술의 다른 측면의 기록 매체는, 픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림의 제1 파일과, 상기 픽처에 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그가 기술된 제2 파일이 기록된 기록 매체이다.
본 기술에 있어서는, 픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림이 수신되고, 상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터가 부가되고, 상기 메타데이터가 부가된 상기 픽처가 표시 장치에 출력된다.
본 기술에 의하면, 비디오에 중첩해서 다른 정보를 표시시키는 경우의 부자연스러운 휘도의 변화를 방지할 수 있다.
또한, 여기에 기재된 효과는 반드시 한정되는 것이 아니라, 본 개시 중에 기재된 어느 효과여도 된다.
도 1은 HDR 콘텐츠의 재생 시스템의 구성예를 나타내는 도면이다.
도 2는 HDR 비디오의 휘도 압축에 사용되는 톤 커브의 예를 나타내는 도면이다.
도 3은 SMPTE ST 2094-40에서 규정되는 Dynamic metadata를 나타내는 도면이다.
도 4는 BD의 파일 구조를 나타내는 도면이다.
도 5는 AV 스트림의 구조예를 나타내는 도면이다.
도 6은 Dynamic metadata의 전송예를 나타내는 도면이다.
도 7은 메뉴 표시 시의 휘도 압축의 예를 나타내는 도면이다.
도 8은 광디스크에 준비되는 메타데이터의 예를 나타내는 도면이다.
도 9는 휘도 압축 후의 표시를 나타내는 도면이다.
도 10은 본 기술의 일 실시 형태에 따른 재생 장치를 나타내는 도면이다.
도 11은 메타데이터의 전송예를 나타내는 도면이다.
도 12는 BD-ROM 포맷에 있어서의 AV 스트림의 관리 구조의 예를 나타내는 도면이다.
도 13은 Main Path와 Sub Path의 구조를 나타내는 도면이다.
도 14는 파일의 관리 구조의 예를 나타내는 도면이다.
도 15는 PlayList 파일의 신택스를 나타내는 도면이다.
도 16은 도 15의 PlayList()의 신택스를 나타내는 도면이다.
도 17은 도 16의 PlayItem()의 신택스를 나타내는 도면이다.
도 18은 도 17의 STN_table()의 신택스를 나타내는 도면이다.
도 19는 IG 스트림에 관한 stream_attributes()의 기술의 예를 나타내는 도면이다.
도 20은 재생 장치의 구성예를 나타내는 블록도이다.
도 21은 도 20의 컨트롤러의 기능 구성예를 나타내는 블록도이다.
도 22는 도 20의 복호 처리부의 구성예를 나타내는 블록도이다.
도 23은 재생 장치의 재생 처리에 대하여 설명하는 흐름도이다.
도 24는 재생 장치의 재생 처리에 대하여 설명하는, 도 23에 이은 흐름도이다.
도 25는 디스플레이 세트의 예를 나타내는 도면이다.
도 26은 ICS의 신택스를 나타내는 도면이다.
도 27은 interactive_composition()의 신택스를 나타내는 도면이다.
도 28은 TV의 구성예를 나타내는 블록도이다.
도 29는 TV의 표시 처리에 대하여 설명하는 흐름도이다.
도 30은 기록 장치의 구성예를 나타내는 블록도이다.
도 31은 도 30의 컨트롤러의 기능 구성예를 나타내는 블록도이다.
도 32는 기록 장치의 기록 처리에 대하여 설명하는 흐름도이다.
도 33은 HDR 콘텐츠의 다른 재생 시스템의 구성예를 나타내는 도면이다.
도 34는 재생 장치의 다른 구성예를 나타내는 도면이다.
도 35는 HDR 콘텐츠의 또 다른 재생 시스템의 구성예를 나타내는 도면이다.
도 36은 컴퓨터의 구성예를 나타내는 블록도이다.
이하, 본 기술을 실시하기 위한 형태에 대하여 설명한다. 설명은 이하의 순서로 행한다.
1. HDR 비디오용 메타데이터
2. 메뉴 표시 시의 휘도 변화
3. 메뉴 표시용 메타데이터
4. BD 포맷
5. 실시 형태 1: PlayList에 플래그를 기술하는 예
6. 실시 형태 2: IG 스트림에 플래그를 기술하는 예
7. 다른 장치의 구성과 동작
8. 재생 시스템의 다른 구성예
9. 그 밖의 예
<<1. HDR 비디오용 메타데이터>>
도 1은, HDR 콘텐츠의 재생 시스템의 구성예를 나타내는 도면이다.
도 1의 재생 시스템은, 재생 장치(1)와 TV(텔레비전 수상기)(2)가, HDMI(등록상표)(High-Definition Multimedia Interface) 2.0a, HDMI 2.1 등의 소정의 규격의 케이블로 접속됨으로써 구성된다. 재생 장치(1)와 TV(2)가, 무선의 인터페이스를 통해 접속되게 해도 된다.
재생 장치(1)는, UHD BD 플레이어 등의, HDR 콘텐츠의 재생에 대응한 장치이다. 재생 장치(1)의 드라이브에는, HDR 콘텐츠를 기록한 BD가 장착된다. 재생 장치(1)가 재생하는 콘텐츠에는, HDR 비디오의 데이터 외에, 오디오 데이터도 포함된다.
TV(2)는, 방송파나 네트워크를 전송로로 하여 전송되어 온 프로그램을 수신하여 표시하는 기능 외에, 외부로부터 입력된 비디오를 표시하는 기능을 갖는다. TV(2)가 갖는 표시 디바이스는, 휘도가 100nits를 초과하는 HDR 비디오의 표시에 대응한 디스플레이이다.
HDR 콘텐츠의 전송을 개시하기 전, 재생 장치(1)와 TV(2)는, 각각의 성능에 관한 정보를 송수신하거나 하여, HDMI의 전송 설정(configuration)을 행한다. 예를 들어, 재생 장치(1)로부터 TV(2)에 대해서는, HDR 비디오의 전송을 행하는 것이 통지된다. 또한, TV(2)로부터 재생 장치(1)에 대해서는, TV(2)의 디스플레이의 최고 휘도가 통지된다.
전송 설정 후, 재생 장치(1)는, BD로부터 판독한 HDR 비디오 스트림을 디코드하여, HDR 비디오의 각 픽처를 TV(2)에 출력한다. TV(2)는, 재생 장치(1)로부터 전송되어 온 각 픽처를 수신하여, 표시시킨다.
이때, TV(2)에 있어서는, 디스플레이의 성능에 따라서, 적절히 재생 장치(1)로부터 전송되어 온 HDR 비디오의 휘도를 조정(압축)하는 처리가 행해진다. 휘도 압축은, 재생 장치(1)가 출력하는 HDR 비디오의 휘도가, TV(2)의 디스플레이의 최고 휘도보다 높은 경우에 행해진다.
도 1의 예에 있어서는, 재생 장치(1)가 출력하는 HDR 비디오의 휘도가 1000nits이며, TV(2)의 디스플레이의 최고 휘도가 500nits인 것으로 되어 있다.
도 2는, HDR 비디오의 휘도 압축에 사용되는 톤 커브의 예를 나타내는 도면이다.
도 2의 횡축은 입력 신호의 휘도를 나타내고, 종축은 출력(표시)의 휘도를 나타낸다. 예를 들어, SMPTE ST 2084로 규정되는 PQ(Perceptual Quantization) 커브를 사용한 EOTF(Electro-Optical Transfer Function) 처리가 TV(2)측에서 행해지고, HDR 비디오의 휘도가, 디스플레이의 최고 휘도인 500nits의 범위에 들도록 압축된다.
또한, 도 2에 있어서 화살표의 끝에 나타낸, 명암의 표현이 리니어가 아니게 되는 포인트가, knee point라 불린다.
이와 같이, 도 1의 재생 시스템에 있어서는, 재생 장치(1)가 출력하는 HDR 비디오의 휘도에 비해서 TV(2)의 디스플레이가 충분한 휘도를 갖지 않은 경우, TV(2)측에서 휘도 압축이 행해진다.
재생 장치(1)로부터 TV(2)에 대해서는, 휘도 압축을 위한 보조 정보로서, 콘텐츠의 휘도 정보를 포함하는 메타데이터가 전송된다. 예를 들어, Dynamic metadata가 재생 장치(1)로부터 TV(2)에 대해서 전송된다.
Dynamic metadata는, 콘텐츠의 휘도 정보를 픽처 단위로 동적으로 표현하는 메타데이터이며, SMPTE ST 2094로서 표준화되어 있다.
도 3은, SMPTE ST 2094-40에서 규정되는 Dynamic metadata를 나타내는 도면이다.
도 3의 1행째에 나타낸 바와 같이, Dynamic metadata에는, 프레임에 설정된 Window의 정보가 기술된다. Window는, 프레임 내에 설정된 직사각형 영역이다. 1 프레임 내에 최대 세 Window를 설정하는 것이 가능해진다.
2 내지 14행째에 나타낸 각 파라미터가, 프레임에 설정된 Window별로 기술된다.
Window size, Window location은, Window의 사이즈와 위치를 나타낸다.
Internal Ellipse size, Internal Ellipse location은, Window 내에 설정된 두 타원 중 내측 타원의 사이즈와 위치를 나타낸다. Window 내에 타원을 설정하여, 타원 내의 휘도를 지정할 수 있게 되어 있다.
External Ellipse size, External Ellipse location은, Window 내에 설정된 두 타원 중 외측 타원의 사이즈와 위치를 나타낸다.
Rotation angle은, Window 내에 설정된 두 타원의 기울기를 나타낸다.
Overlap process option은, 타원 내의 화소의 처리 방법을 나타낸다.
maxscl은, Window 중 가장 밝은 픽셀의 RGB값을 나타낸다.
average max rgb는, Window 중 각 픽셀의 R, G, B 중 가장 큰 값의 평균을 나타낸다.
Distribution max rgb percentages는, Window 중 밝은 휘도의 랭킹을 퍼센티지에 의해 나타낸다.
Distribution max rgb percentiles는, Window 중 밝은 휘도의 랭킹을 순위(퍼센타일)에 의해 나타낸다.
Fraction bright pixels는, 씬 내의 최대의 휘도값이 출력되는 정도를 나타낸다.
Knee point는, 상술한 knee point의 휘도값을 나타낸다.
Bezier curve anchors는, knee point를 초과하는 밝기의 샘플 x, y를 나타낸다.
Color saturation weight는, 상정하는 디스플레이(Target display)에 있어서 휘도 압축을 행했을 때 변화한 RGB값의 보정에 사용하는 값을 나타낸다.
Target System display max luminance는, 상정하는 디스플레이의 휘도를 나타낸다. Target System display max luminance에 의해, 이러한 디스플레이로 표시되는 것을 상정하여 콘텐츠를 만들었다는 것이 지정된다.
Local display luminance는, 디스플레이를 종횡 2×2로부터 25×25까지의 에어리어로 분할한 경우의, 각각의 에어리어의 최대의 휘도값을 나타낸다.
Local mastering display luminance는, mastering display를 종횡 2×2로부터 25×25까지의 에어리어로 분할한 경우의, 각각의 에어리어의 최대의 휘도값을 나타낸다.
이와 같이, Dynamic metadata에 있어서는, 1 내지 15행째의 파라미터에 의해 프레임(프레임 내의 Window)의 속성이 나타난다. 또한, 16행째와 17행째의 파라미터에 의해, 상정하는 디스플레이의 속성이 나타나고, 18행째의 파라미터에 의해, 콘텐츠의 작성에 사용된 디스플레이의 속성이 나타난다.
도 4는, BD의 파일 구조를 나타내는 도면이다.
상세에 대해서는 후술하지만, BDMV 디렉토리 아래에 설정되는 STREAM 디렉토리에는, m2ts라는 확장자가 설정된 AV 스트림 파일이 저장된다.
AV 스트림 파일은, HDR 비디오 스트림, 오디오 스트림, 자막 스트림 등을 MPEG-2로 다중화하여 얻어진 MPEG-2 TS의 파일이다. 도 4의 예에 있어서는, 「01000.m2ts」, 「02000.m2ts」, 「03000.m2ts」라는 AV 스트림 파일이 STREAM 디렉토리에 저장되어 있다.
HDR 비디오 스트림은, 예를 들어 HEVC(High Efficiency Video Coding)의 부호화 스트림이다. Dynamic metadata는, HEVC의 SEI(Supplemental Enhancement Information) 메시지로서 HDR 비디오 스트림에 포함된다.
도 5는, 도 4에 있어서 프레임 F1로 둘러싸서 나타내는 「03000.m2ts」라는 AV 스트림의 구조예를 나타내는 도면이다.
도 5의 최상단에 나타낸 바와 같이, 「03000.m2ts」라는 AV 스트림은, 비디오, 오디오, 자막 등의 각각의 데이터를 저장하는 TS packet으로 구성된다. 비디오의 TS packet을 모아서 Video Elementary stream이 구성된다.
Video Elementary stream은 Access Unit의 배열로 구성되고, 하나의 Access Unit이, HDR 비디오의 1픽처의 데이터로 된다. 각각의 Access Unit에는, AU delimiter에 계속해서, SPS, PPS 등의 파라미터가 포함됨과 함께, 프레임 F11로 둘러싸서 나타낸 바와 같이, SEI 메시지가 포함된다.
SEI 메시지에, 상술한 Dynamic metadata가 포함된다. 또한, SEI 메시지의 다음으로는, HDR 비디오의 데이터가 Picture data로서 포함된다.
이와 같이, BD에 있어서는, Dynamic metadata는, 각 픽처에 부가하는 형태로 HDR 비디오 스트림에 포함되고, 오디오 스트림 등과 함께 다중화된다.
도 6은, Dynamic metadata의 전송예를 나타내는 도면이다.
도 6에 도시한 바와 같이, Dynamic metadata는, HDR 비디오 스트림을 디코드하여 얻어진 각 픽처에 관련지어서, 재생 장치(1)로부터 TV(2)로 전송된다. TV(2)에 있어서는, 각 픽처의 휘도 압축이, 각 픽처와 함께 전송되어 온 Dynamic metadata에 기초하여 행해진다.
<<2. 메뉴 표시 시의 휘도 변화>>
도 7은, 메뉴 표시 시의 휘도 압축의 예를 나타내는 도면이다.
또한, 이하에 있어서는, HDR 비디오에 메뉴를 중첩해서 표시시키는 경우에 대하여 설명하지만, 자막, OSD 등의 다른 정보를 HDR 비디오에 중첩해서 표시시키는 경우도 마찬가지이다.
도 7의 횡축은 시각을 나타낸다. 픽처 #1, #2, #3의 순으로 재생 장치(1)로부터 TV(2)로 전송되고, TV(2)에 있어서 휘도 압축이 행해진다.
픽처 #1, #2, #3의 각각에는, 예를 들어 유저에 의해 메뉴의 표시가 지시됨에 따라서, 메뉴의 화상이 재생 장치(1)에 있어서 합성된다. 도 7에 있어서, 픽처 #1, #2, #3에 겹쳐 나타내는, 「여기에 메뉴가 표시된다」라는 문자와 문자를 둘러싼 프레임은, 그 영역에, 버튼 등의, 메뉴를 구성하는 화상이 합성되어 있음을 나타낸다.
예를 들어, 픽처 #2가, 픽처 #1, #3보다도 고휘도의 씬을 구성하는 픽처인 것으로 한다.
메뉴의 화상이 합성된 픽처 #1의 휘도 압축은, 픽처 #1과 함께 전송된 Dynamic metadata에 의해 표시되는 톤 커브 C1에 기초하여 행해진다. 메뉴의 화상이 합성된 픽처 #2의 휘도 압축은, 픽처 #2와 함께 전송된 Dynamic metadata에 의해 표시되는 톤 커브 C2에 기초하여 행해진다. 메뉴의 화상이 합성된 픽처 #3의 휘도 압축은, 픽처 #3과 함께 전송된 Dynamic metadata에 의해 표시되는 톤 커브 C3에 기초하여 행해진다.
고휘도의 씬을 구성하는 픽처 #2의 휘도 압축에 사용되는 톤 커브 C2는, 픽처 #1의 휘도 압축에 사용되는 톤 커브 C1, 픽처 #3의 휘도 압축에 사용되는 톤 커브 C3과 비교하여, 휘도를 강하게 압축하는 것으로 된다. 픽처 #2 위의 메뉴의 휘도도, 픽처 #1, #3 위의 메뉴의 휘도보다 강하게 압축된다.
따라서, 휘도 압축 후의 각 픽처의 메뉴의 외관을 비교한 경우, 도 7에 도시한 바와 같이, 픽처 #2 위의 메뉴는, 픽처 #1, #3 위의 메뉴보다 휘도가 낮은 상태로 표시된다. 도 7에 있어서, 픽처 #2 위의 메뉴를 옅은 색을 입혀 나타내고 있는 것은, 픽처 #1, #3 위의 메뉴보다 휘도가 낮음을 나타낸다.
픽처 #1 내지 #3이 순서대로 표시된 경우, 픽처 #2의 표시의 타이밍에, 메뉴의 휘도가 한 단계 낮아져서, 휘도의 압축 정도에 따라서는 부자연스러운 외관이 된다. 예를 들어, 휘도의 변화가 큰 씬이 연속되는 경우, 메뉴가 점멸하여 보이게 되어버린다.
도 8은, 광디스크에 준비되는 메타데이터의 예를 나타내는 도면이다.
상술한 바와 같은 부자연스러운 외관을 방지하기 위해서, 도 8에 도시한 바와 같이, 메뉴의 표시시용 메타데이터인 디폴트 메타데이터를 광디스크(11)에 준비해 두는 것이 생각된다. 광디스크(11)는 BD이다.
디폴트 메타데이터는, 예를 들어 도 3을 참조하여 설명한 Dynamic metadata의 파라미터와 마찬가지의 파라미터를 포함하는 메타데이터이다. 각 파라미터에는 고정값이 설정된다. Dynamic metadata에 포함되는 파라미터의 값이 비디오의 외관을 우선시킨 값인 데 비하여, 디폴트 메타데이터에 포함되는 파라미터의 값은, 예를 들어 메뉴의 외관을 우선시킨 값이다.
재생 장치(1)는, HDR 콘텐츠의 재생을 개시한 경우, HDR 비디오 스트림을 디코드하여 얻어진 각 픽처에 Dynamic metadata를 관련지어 출력한다.
또한, 재생 장치(1)는, 메뉴의 표시가 지시된 경우, HDR 비디오 스트림을 디코드하여 얻어진 각 픽처에 메뉴의 화상을 합성하여, 메뉴의 화상을 합성한 픽처에 디폴트 메타데이터를 관련지어 출력한다.
TV(2)에 있어서는, 메뉴의 화상을 합성한 픽처에 대해서, 디폴트 메타데이터를 사용한 휘도 압축이 행해지고, 휘도 압축 후의 픽처가 표시된다. 메뉴의 휘도도, 디폴트 메타데이터에 의해 표시되는 톤 커브에 따라서 압축된다.
디폴트 메타데이터에 포함되는 파라미터의 값이 고정값이기 때문에, 디폴트 메타데이터가 관련지어진 픽처의 휘도에 관계없이, 메뉴의 휘도는 일정해진다.
도 9는, 휘도 압축 후의 표시를 나타내는 도면이다.
예를 들어, 도 9의 좌측에 도시한 바와 같이 높은 휘도의 씬이 표시되고 있는 상태에서 메뉴의 표시가 지시된 경우, Dynamic metadata가 아니라 디폴트 메타데이터를 사용한 휘도 압축이 행해지고, 화살표 A2의 끝에 나타낸 바와 같이 HDR 비디오의 휘도가 낮아진다. 즉, Dynamic metadata를 사용한 휘도 압축 후의 휘도가 화살표 A1의 끝에 나타낸 HDR 비디오의 본래의 휘도라고 하면, 본래의 휘도보다 어두운 HDR 비디오가 표시된다.
메뉴용 값이 설정된 메타데이터이기 때문에, 디폴트 메타데이터를 사용한 휘도 압축에 의해, 화살표 A2의 끝에 나타낸 바와 같이, 메뉴의 휘도는 적합한 것으로 된다.
도 7을 참조하여 설명한 처리의 경우, 비디오에 맞춘 휘도 압축이 메뉴에 대해서 실시됨으로써, 비디오의 휘도 압축에 소위 끌려가는 형태로, 메뉴가 어두워진다.
이에 반하여, 도 8, 도 9를 참조하여 설명한 디폴트 메타데이터를 사용한 처리의 경우, 메뉴에 맞춘 휘도 압축이 비디오에 대해서 실시됨으로써, 메뉴의 휘도 압축에 소위 끌려가는 형태로, 비디오가 어두워진다. 메뉴의 사이즈가 작은 경우처럼, 메뉴에 맞춘 휘도 압축에 의해 비디오를 어둡게 해버리는 것보다, 비디오에 맞춘 휘도 압축에 의해 비디오의 휘도를 유지한 쪽이, 외견의 부자연스러움이 억제되는 경우도 있다.
본 기술에 있어서는, 메뉴를 표시시키는 경우에, Dynamic metadata를 사용하여 휘도 압축이 행해지도록 할지, 메뉴 표시용 메타데이터를 사용하여 휘도 압축이 행해지도록 할지를, 콘텐츠의 제작자가 지정하는 것이 가능해진다.
<<3. 메뉴 표시용 메타데이터>>
도 10은, 본 기술의 1 실시 형태에 따른 재생 장치(101)와, 재생 장치(101)에 장착되는 광디스크(111)를 나타내는 도면이다.
재생 장치(101)는, 도 1의 재생 장치(1)에 대응하는 플레이어이다. 재생 장치(101)에는, HDMI 케이블 등을 통하여, TV(2)에 대응하는 TV(102)가 접속된다(도 11). 상술한 설명과 중복되는 설명에 대해서는 적절히 생략한다.
도 10의 말풍선에 나타낸 바와 같이, 광디스크(111)에는, 메뉴를 표시시키는 동안의 TV측에 있어서의 휘도 조정에, Dynamic metadata와 메뉴 표시용 메타데이터 중 어느 메타데이터를 사용하는지를 나타내는 플래그가 기록되어 있다.
메뉴 표시용 메타데이터는, 도 8의 디폴트 메타데이터에 대응하는 메타데이터이며, 예를 들어 Dynamic metadata의 파라미터와 마찬가지의 파라미터를 갖는다. 메뉴 표시용 메타데이터의 각 파라미터에는 고정값이 설정된다. 메뉴 표시용 메타데이터는, 예를 들어 재생 장치(101) 내의 메모리에 기억되는 형태로, 재생 장치(101)에 미리 준비되어 있다.
휘도 조정에 사용하는 메타데이터를 나타내는 플래그가 기록되어 있는 점을 제외하고, 광디스크(111)는, 상술한 광디스크(11)와 마찬가지이다. 광디스크(111)에는, HDR 비디오 스트림을 포함하는 각 데이터가, 예를 들어 BD-ROM 포맷으로 기록되어 있다.
도 10의 재생 장치(101)는, 휘도 조정에 사용하는 메타데이터를 나타내는 플래그의 값을 참조하여, 상술한 재생 장치(1)의 처리와 마찬가지의 처리를 행한다.
도 11은, 메타데이터의 전송예를 나타내는 도면이다.
예를 들어, HDR 비디오가 TV(102)에 표시되고 있는 상태에서 메뉴의 표시가 지시된 경우, 재생 장치(101)는, 플래그의 값을 참조하여, Dynamic metadata와 메뉴 표시용 메타데이터 중 어느 메타데이터를 사용할지를 특정한다.
메뉴 표시용 메타데이터를 사용하는 것이 플래그에 의해 표시되고 있는 경우, 재생 장치(101)는, HDR 비디오의 각 픽처에 메뉴의 화상을 합성하여, 도 11에 도시한 바와 같이, 메뉴의 화상을 합성한 픽처에 메뉴 표시용 메타데이터를 관련지어 출력한다.
TV(102)에 있어서는, 각 픽처의 휘도 압축이, 각 픽처와 함께 전송되어 온 표시용 메타데이터에 기초하여 행해져, 휘도 압축 후의 HDR 비디오가 표시된다. 디스플레이에는, HDR 비디오에 겹쳐서 메뉴가 표시된다.
표시용 메타데이터는 각 파라미터에 고정값이 설정된 메타데이터이기 때문에, 표시용 메타데이터를 사용한 휘도 압축 후의 HDR 비디오에 중첩되는 메뉴의 휘도는 일정해지게 된다.
한편, Dynamic metadata를 사용하는 것이 플래그에 의해 표시되고 있는 경우, 재생 장치(101)는, HDR 비디오의 각 픽처에 메뉴의 화상을 합성하여, 메뉴의 화상을 합성한 픽처에 Dynamic metadata를 관련지어 출력한다.
TV(102)에 있어서는, 각 픽처의 휘도 압축이, 각 픽처와 함께 전송되어 온 Dynamic metadata에 기초하여 행해지고, 휘도 압축 후의 HDR 비디오가 표시된다. 디스플레이에는, HDR 비디오에 겹쳐서 메뉴가 표시된다.
또한, 메뉴의 표시가 지시되지 않은 경우도 마찬가지로, 도 6을 참조하여 설명하는 바와 같이, Dynamic metadata가 관련지어진 픽처가 재생 장치(101)로부터 TV(102)에 출력된다. TV(102)에 있어서는, 각 픽처에 관련지어 전송되어 온 Dynamic metadata에 기초하여, 각 픽처의 휘도 압축이 행해진다.
이와 같이, 콘텐츠의 제작자는, 메뉴를 표시시키는 경우에 Dynamic metadata와 메뉴 표시용 메타데이터 중 어느 메타데이터를 사용하여 휘도 압축이 행해지도록 할 것인지를 플래그를 사용하여 지정할 수 있다.
이상과 같은 재생 장치(101)의 일련 처리에 대해서는 흐름도를 참조하여 후술한다.
<<4. BD 포맷>>
여기서, BD-ROM 포맷에 대하여 설명한다.
<4-1. 데이터의 관리 구조>
도 12는, BD-ROM 포맷에 있어서의 AV 스트림의 관리 구조의 예를 나타내는 도면이다.
AV 스트림의 관리는, PlayList와 Clip의 두 레이어를 사용하여 행해진다. AV 스트림은, 광디스크(111)뿐만 아니라, 재생 장치(101)의 로컬 스토리지에 기록되는 경우도 있다.
하나의 AV 스트림과, 그에 부수되는 정보인 Clip Information의 페어가 하나의 오브젝트로서 관리된다. AV 스트림과 Clip Information의 페어를 Clip이라 한다.
AV 스트림은 시간축 상에 전개되고, 각 Clip의 액세스 포인트는, 주로 타임 스탬프로 PlayList에 있어서 지정된다. Clip Information은, AV 스트림 중의 디코드를 개시해야 할 어드레스를 찾기 위해서 등에 사용된다.
PlayList는 AV 스트림의 재생 구간의 집합이다. AV 스트림 중의 하나의 재생 구간은 PlayItem이라 불린다. PlayItem은, 시간축 상의 재생 구간의 IN점과 OUT점의 페어로 표시된다. 도 12에 도시한 바와 같이, PlayList는 하나 또는 복수의 PlayItem에 의해 구성된다.
도 12의 좌로부터 1번째의 PlayList는 두 PlayItem으로 구성되고, 그 2 개의 PlayItem에 의해, 좌측의 Clip에 포함되는 AV 스트림의 전반 부분과 후반 부분이 각각 참조된다.
좌로부터 2번째의 PlayList는 하나의 PlayItem으로 구성되고, 그에 의해, 우측의 Clip에 포함되는 AV 스트림 전체가 참조된다.
좌로부터 3번째의 PlayList는 두 PlayItem으로 구성되고, 그 두 PlayItem에 의해, 좌측의 Clip에 포함되는 AV 스트림이 있는 부분과, 우측의 Clip에 포함되는 AV 스트림이 있는 부분이 각각 참조된다.
예를 들어, 좌로부터 1번째의 PlayList에 포함되는 좌측의 PlayItem이 재생 대상으로서 디스크 내비게이션 프로그램에 의해 지정된 경우, 그 PlayItem이 참조하는, 좌측의 Clip에 포함되는 AV 스트림의 전반 부분의 재생이 행해진다.
PlayList 중에서, 하나 이상의 PlayItem의 배열에 의해 만들어지는 재생 패스를 메인 패스(Main Path)라 한다. 또한, PlayList 중에서, Main Path에 병행하여, 하나 이상의 SubPlayItem의 배열에 의해 만들어지는 재생 패스를 서브 패스(Sub Path)라 한다.
도 13은, Main Path와 Sub Path의 구조를 나타내는 도면이다.
PlayList는, 하나의 Main Path와 하나 이상의 Sub Path를 갖는다. 도 13의 PlayList는, 세 PlayItem의 배열에 의해 만들어지는 하나의 Main Path와 세 Sub Path를 갖는다.
Main Path를 구성하는 PlayItem에는, 선두로부터 차례로 각각 ID가 설정된다. Sub Path에도, 선두로부터 차례로 Subpath_id=0, Subpath_id=1, 및 Subpath_id=2의 ID가 설정된다.
도 13의 예에 있어서는, Subpath_id=0의 Sub Path에는 하나의 SubPlayItem이 포함되고, Subpath_id=1의 Sub Path에는 두 SubPlayItem이 포함된다. 또한, Subpath_id=2의 Sub Path에는 하나의 SubPlayItem이 포함된다.
하나의 PlayItem이 참조하는 AV 스트림에는, 적어도 비디오 스트림이 포함된다. AV 스트림에는, AV 스트림에 포함되는 비디오 스트림과 동일한 타이밍에(동기하여) 재생되는 오디오 스트림이 하나 이상 포함되어도 되고, 포함되지 않아도 된다.
AV 스트림에는, AV 스트림에 포함되는 비디오 스트림과 동기하여 재생되는 비트맵의 자막(PG(Presentation Graphic))의 스트림이 하나 이상 포함되어도 되고, 포함되지 않아도 된다.
AV 스트림에는, AV 스트림 파일에 포함되는 비디오 스트림과 동기하여 재생되는 IG(Interactive Graphic)의 스트림이 하나 이상 포함되어도 되고, 포함되지 않아도 된다. IG의 스트림은, 유저에 의해 조작되는 버튼 등의 그래픽을 표시시키기 위해서 사용된다.
하나의 PlayItem이 참조하는 AV 스트림에는, 비디오 스트림과, 그것과 동기하여 재생되는 오디오 스트림, PG 스트림, 및 IG 스트림이 다중화된다.
또한, 하나의 SubPlayItem은, PlayItem이 참조하는 AV 스트림과는 다른 스트림인, 비디오 스트림, 오디오 스트림, PG 스트림 등을 참조한다.
상술한 바와 같이 하여 HDR 비디오에 중첩되는 정보 중, 메뉴는, 예를 들어 IG 스트림을 디코드함으로써 취득된다. 또한, 자막은, 예를 들어 PG 스트림을 디코드함으로써 취득된다.
이와 같이, AV 스트림의 재생은 PlayList와 Clip Information을 사용하여 행해진다. 콘텐츠로서의 AV 스트림의 재생을 관리하기 위해서 사용되는 재생 제어 정보인 PlayList와 Clip Information을, 적절히 Data Base 정보라 한다.
<4-2. 디렉토리 구조>
도 14는, 광디스크(111)에 기록되는 파일의 관리 구조의 예를 나타내는 도면이다.
광디스크(111)에 기록되는 각 파일은 디렉토리 구조에 의해 계층적으로 관리된다. 광디스크(111)상에는 하나의 root 디렉토리가 작성된다.
root 디렉토리 아래에는 BDMV 디렉토리가 놓인다.
BDMV 디렉토리 아래에는, 「Index.bdmv」라는 이름이 설정된 파일인 Index table 파일과, 「MovieObject.bdmv」라는 이름이 설정된 파일인 MovieObject 파일이 저장된다. Index table 파일에는 Index table이 기술된다.
BDMV 디렉토리 아래에는, PLAYLIST 디렉토리, CLIPINF 디렉토리, STREAM 디렉토리 등이 마련된다.
PLAYLIST 디렉토리에는, PlayList를 기술한 PlayList 파일이 저장된다. 각 PlayList 파일에는, 5자리 숫자와 확장자 「.mpls」를 조합한 이름이 설정된다. 도 14에 도시한 세 PlayList 파일에는 「00000.mpls」, 「00001.mpls」, 「00002.mpls」라는 파일명이 설정되어 있다.
CLIPINF 디렉토리에는 Clip Information 파일이 저장된다. 각 Clip Information 파일에는, 5자리 숫자와 확장자 「.clpi」를 조합한 이름이 설정된다. 도 14의 세 Clip Information 파일에는, 각각, 「01000.clpi」, 「02000.clpi」, 「03000.clpi」라는 파일명이 설정되어 있다.
STREAM 디렉토리에는, 상술한 AV 스트림의 파일이 저장된다. 각 AV 스트림 파일에는, 5자리 숫자와 확장자 「.m2ts」를 조합한 이름이 설정된다. 도 14의 세 AV 스트림 파일에는, 각각, 「01000.m2ts」, 「02000.m2ts」, 「03000.m2ts」라는 파일명이 설정되어 있다.
동일한 5자리 숫자가 파일명으로 설정되어 있는 Clip Information 파일과 AV 스트림 파일이 하나의 Clip을 구성하는 파일로 된다. 「01000.m2ts」라는 AV 스트림 파일의 재생 시에는 「01000.clpi」라는 Clip Information 파일이 사용되고, 「02000.m2ts」라는 AV 스트림 파일의 재생 시에는 「02000.clpi」라는 Clip Information 파일이 사용된다.
<<5. 실시 형태 1: PlayList에 플래그를 기술하는 예>>
<5-1. PlayList의 기술>
PlayList에 포함되는 기술 중 주된 기술에 대하여 설명한다.
도 15는, PlayList 파일의 신택스를 나타내는 도면이다.
PlayList 파일은, 도 14의 PLAYLIST 디렉토리에 저장되는, 확장자 「.mpls」가 설정되는 파일이다.
AppInfoPlayList()에는, 재생 제한 등의, PlayList의 재생 컨트롤에 관한 파라미터가 저장된다.
PlayList()에는, Main Path나 Sub Path에 관한 파라미터가 저장된다.
PlayListMark()에는, PlayList의 마크 정보, 즉, 챕터 점프 등을 명령하는 유저 오퍼레이션 또는 커맨드 등에 있어서의 점프처(점프 포인트)인 마크에 관한 정보가 저장된다.
도 16은, 도 15의 PlayList()의 신택스를 나타내는 도면이다.
number_of_PlayItems는, PlayList 중에 있는 PlayItem의 수를 나타낸다. 도 13의 예의 경우, PlayItem의 수는 3으로 된다. PlayItem_id의 값은, PlayList 중에서 PlayItem()가 나타나는 차례로 0부터 할당된다.
number_of_SubPaths는, PlayList 중에 있는 Sub Path의 수를 나타낸다. 도 13의 예의 경우, Sub Path의 수는 3이다. SubPath_id의 값은, PlayList 중에서SubPath()가 나타나는 차례로 0부터 할당된다.
도 16에 도시한 바와 같이, PlayList()에는, PlayItem의 수만큼 PlayItem()가 기술되고, Sub Path의 수만큼 SubPath()가 기술된다.
도 17은, 도 16의 PlayItem()의 신택스를 나타내는 도면이다.
Clip_Information_file_name[0]은, PlayItem이 참조하는 Clip의 Clip Information 파일의 이름을 나타낸다. Clip_codec_identifier[0]은 Clip의 코덱 방식을 나타낸다.
IN_time은 PlayItem의 재생 구간의 개시 위치를 나타내고, OUT_time은 종료 위치를 나타낸다. OUT_time의 후에는 UO_mask_table(), PlayItem_random_access_mode, still_mode가 포함된다.
STN_table()에는, PlayItem이 참조하는 AV 스트림을 구성하는 각각의 Elementary stream의 속성 정보가 포함된다. PlayItem과 관련지어 재생되는 Sub Path가 있는 경우, STN_table()에는, 그 Sub Path를 구성하는 SubPlayItem이 참조하는 AV 스트림을 구성하는 각각의 Elementary stream의 속성 정보도 포함된다.
도 18은, 도 17의 STN_table()의 신택스를 나타내는 도면이다.
number_of_video_stream_entries는, STN_table()에 엔트리되는(등록되는) 비디오 스트림 수를 나타낸다. number_of_audio_stream_entries는, STN_table()에 엔트리되는 1st 오디오 스트림의 스트림 수를 나타낸다. number_of_audio_stream2_entries는, STN_table()에 엔트리되는 2nd 오디오 스트림의 스트림 수를 나타낸다.
number_of_PG_textST_stream_entries는, STN_table()에 엔트리되는 PG_textST 스트림 수를 나타낸다. PG_textST 스트림은, 비트맵 자막을 런 렝스 부호화한 PG(Presentation Graphics) 스트림과 텍스트 자막 파일(textST)이다. number_of_IG_stream_entries는, STN_table()에 엔트리되는 IG(Interactive Graphics) 스트림 수를 나타낸다.
STN_table()에는, 각각의 비디오 스트림, 1st 오디오 스트림, 2nd 오디오 스트림, PG_textST 스트림, IG 스트림의 정보인 stream_entry()와 stream_attributes()가 기술된다. stream_entry()에는 스트림의 PID가 포함되고, stream_attributes()에는 스트림의 속성 정보가 포함된다.
도 19는, IG 스트림에 관한 stream_attributes()의 기술의 예를 나타내는 도면이다. 상술한 바와 같이, IG 스트림은 메뉴 데이터의 전송에 사용되는 스트림이다.
stream_coding_type의 값이 0x91인 경우, stream_attributes()에는 IG 스트림에 관한 정보가 기술된다. 예를 들어, 도 19에 도시한 바와 같이, IG_language_code와, 1비트의 플래그인 Fixed_Dynamic_medatada_during_PopUp_flag와, stream_attributes()에 기술된다.
Fixed_Dynamic_medatada_during_PopUp_flag는, IG 스트림에 기초하여 메뉴를 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그(도 10의 플래그)이다.
예를 들어, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 0b인 것은, 휘도 조정에 Dynamic metadata를 사용하는 것을 나타낸다. 또한, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 1b인 것은, 휘도 조정에 메뉴 표시용 메타데이터를 사용하는 것을 나타낸다.
Fixed_Dynamic_medatada_during_PopUp_flag의 값이 0b인 것이 휘도 조정에 메뉴 표시용 메타데이터를 사용하는 것을 나타내고, 1b인 것이 휘도 조정에 Dynamic metadata를 사용하는 것을 나타내게 해도 된다.
이와 같이, PlayList 파일의 STN_table() 중의 IG 스트림에 관한 stream_attributes()에는, 메뉴를 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그가 기술된다.
<5-2. 재생 장치의 구성>
여기서, 재생 장치(101)의 구성에 대하여 설명한다.
도 20은, 재생 장치(101)의 구성예를 나타내는 블록도이다.
재생 장치(101)는, 컨트롤러(151), 디스크 드라이브(152), 메모리(153), 로컬 스토리지(154), 통신부(155), 복호 처리부(156), 조작 입력부(157), 및 외부 출력부(158)로 구성된다.
컨트롤러(151)는, CPU(Central Processing Unit), ROM(Read Only Memory), RAM(Random Access Memory) 등에 의해 구성된다. 컨트롤러(151)는, 소정의 프로그램을 실행하고, 재생 장치(101)의 전체 동작을 제어한다.
디스크 드라이브(152)는, 광디스크(111)에 기록되어 있는 데이터를 판독하여, 컨트롤러(151), 메모리(153), 또는 복호 처리부(156)에 출력한다. 예를 들어, 디스크 드라이브(152)는, 광디스크(111)로부터 판독한 Data Base 정보를 컨트롤러(151)에 출력하고, AV 스트림을 복호 처리부(156)에 출력한다.
메모리(153)는, 컨트롤러(151)가 실행하는 프로그램 등의, 컨트롤러(151)가 각종 처리를 실행함에 있어서 필요한 데이터를 기억한다. 메모리(153)에는 메뉴 표시용 메타데이터 기억부(153A)가 형성된다.
메뉴 표시용 메타데이터 기억부(153A)는 메뉴 표시용 메타데이터를 기억한다. 메뉴 표시용 메타데이터 기억부(153A)에 기억되어 있는 메뉴 표시용 메타데이터가, Fixed_Dynamic_medatada_during_PopUp_flag의 값에 따라서 적절히 사용된다.
로컬 스토리지(154)는, HDD(Hard Disk Drive), SSD(Solid State Drive) 등의 기록 매체에 의해 구성된다. 로컬 스토리지(154)에는, 서버로부터 다운로드된 스트림 등이 기록된다.
통신부(155)는, 무선 LAN, 유선 LAN 등의 인터페이스이다. 예를 들어, 통신부(155)는, 인터넷 등의 네트워크를 통해 서버와 통신을 행하고, 서버로부터 다운로드한 데이터를 로컬 스토리지(154)에 공급한다.
복호 처리부(156)는, 디스크 드라이브(152)로부터 공급된 AV 스트림에 다중화되어 있는 HDR 비디오 스트림을 복호하고, 복호하여 얻어진 HDR 비디오의 데이터를 외부 출력부(158)에 출력한다.
또한, 복호 처리부(156)는, AV 스트림에 다중화되어 있는 오디오 스트림을 복호하고, 복호하여 얻어진 오디오 데이터를 외부 출력부(158)에 출력한다. 비디오의 재생에 대하여 주로 설명하고 있지만, 이와 같이, 재생 장치(101)가 재생하는 HDR 콘텐츠에는 오디오 데이터도 포함된다.
조작 입력부(157)는, 버튼, 터치 패널 등의 입력 디바이스나, 리모트 컨트롤러로부터 송신되는 적외선 등의 신호를 수신하는 수신부에 의해 구성된다. 조작 입력부(157)는 유저의 조작을 검출하고, 검출한 조작의 내용을 나타내는 신호를 컨트롤러(151)에 공급한다.
외부 출력부(158)는, HDMI 등의 외부 출력의 인터페이스이다. 외부 출력부(158)는, HDMI 케이블을 통해 TV(102)와 통신을 행하고, TV(102)가 갖는 디스플레이의 성능에 관한 정보를 취득하여 컨트롤러(151)에 출력한다. 또한, 외부 출력부(158)는, 복호 처리부(156)로부터 공급된 HDR 비디오의 데이터를 수신하고, TV(102)에 출력한다. 외부 출력부(158)는, 복호 처리부(156)로부터 공급된 HDR 비디오의 데이터 스트림을 수신하는 수신부로서 기능한다.
도 21은, 컨트롤러(151)의 기능 구성예를 나타내는 블록도이다.
컨트롤러(151)에 있어서는, Data Base 정보 해석부(171), 출력 제어부(172), 및 메뉴 표시용 메타데이터 생성부(173)가 실현된다. 도 21에 도시한 기능부 중 적어도 일부는, 컨트롤러(151)의 CPU에 의해 소정의 프로그램이 실행됨으로써 실현된다.
Data Base 정보 해석부(171)는, 디스크 드라이브(152)로부터 공급된 Data Base 정보를 해석한다.
예를 들어, Data Base 정보 해석부(171)는, PlayList를 해석하고, PlayList의 기술에 따라서 HDR 콘텐츠를 재생한다. 또한, Data Base 정보 해석부(171)는, PlayList에 포함되는 Fixed_Dynamic_medatada_during_PopUp_flag의 값을 참조함으로써, 메뉴를 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 특정하고, 특정한 메타데이터의 정보를 출력 제어부(172)에 출력한다.
출력 제어부(172)는, 복호 처리부(156)와 외부 출력부(158)를 제어함으로써, HDR 콘텐츠의 출력을 제어한다.
예를 들어, 출력 제어부(172)는, HDR 비디오 스트림을 복호 처리부(156)에 디코드시킨다. 또한, 출력 제어부(172)는, 외부 출력부(158)를 제어하고, HDR 비디오 스트림을 디코드하여 얻어진 각 픽처에, Dynamic metadata를 부가하여 출력시킨다.
출력 제어부(172)는, 메뉴의 표시가 지시된 경우, HDR 비디오 스트림과 IG 스트림을 복호 처리부(156)에 디코드시켜, HDR 비디오의 각 픽처에, IG 스트림을 디코드함으로써 얻어진 메뉴의 화상을 합성시킨다.
출력 제어부(172)는, 외부 출력부(158)를 제어하고, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 0b인 경우에는, 메뉴의 화상이 합성된 각 픽처에 Dynamic metadata를 부가하여 출력시킨다. 또한, 출력 제어부(172)는, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 1b인 경우에는, 메뉴의 화상이 합성된 각 픽처에 메뉴 표시용 메타데이터를 부가하여 출력시킨다.
메뉴 표시용 메타데이터 생성부(173)는, 예를 들어 PlayList에 Fixed_Dynamic_medatada_during_PopUp_flag가 포함되는 경우, 각 파라미터의 값으로서 고정값을 설정함으로써 메뉴 표시용 메타데이터를 생성한다. 메뉴 표시용 메타데이터 생성부(173)는, 각 파라미터에 설정하는 고정값의 정보를 갖고 있다. 메뉴 표시용 메타데이터 생성부(173)는, 생성한 메뉴 표시용 메타데이터를 메모리(153)에 출력하여, 메뉴 표시용 메타데이터 기억부(153A)에 기억시킨다.
이와 같이, 메뉴 표시용 메타데이터가 재생 장치(101) 내에서 생성되도록 해도 된다. 또한, 메뉴 표시용 메타데이터가, 재생 장치(101)의 제조 시 등의 타이밍에 메뉴 표시용 메타데이터 기억부(153A)에 기억되고, 재생 장치(101)에 미리 준비되도록 해도 된다.
메뉴 표시용 메타데이터의 각 파라미터에 설정하는 값을 유저가 지정할 수 있도록 해도 된다. 이 경우, 예를 들어 재생 장치(101)의 설정 화면을 사용하여, 각 파라미터의 값의 설정이 행해진다. 또한, TV(102)의 설정 화면을 사용하여, TV(102)측에서 메뉴 표시용 메타데이터를 참조할지 무시할지를 유저가 선택할 수 있도록 해도 된다.
또한, 메뉴 표시용 메타데이터의 각 파라미터에 설정하는 값이 서버로부터 취득되도록 해도 된다.
이 경우, 서버에는, 예를 들어 광디스크(111)에 기록되어 있는 HDR 콘텐츠에 대응지어서, 메뉴 표시용 메타데이터의 각 파라미터에 설정하는 값의 정보가 준비된다. 메뉴 표시용 메타데이터 생성부(173)는, 서버로부터 취득된 값을 각 파라미터의 값으로서 설정함으로써, 광디스크(111)에 기록되어 있는 HDR 콘텐츠용 메뉴 표시용 메타데이터를 생성하게 된다.
또한, 메뉴 표시용 메타데이터가 서버로부터 다운로드되게 해도 된다. 다운로드되어, 통신부(155)에 의해 수신된 메뉴 표시용 메타데이터는, 메모리(153)에 출력되고, 메뉴 표시용 메타데이터 기억부(153A)에 기억된다.
도 22는, 복호 처리부(156)의 구성예를 나타내는 블록도이다.
복호 처리부(156)는, 비디오 디코더(181), 그래픽용 디코더(182), 및 합성부(183)로 구성된다. 디스크 드라이브(152)에 의해 판독된 AV 스트림에 포함되는 HDR 비디오 스트림은 비디오 디코더(181)에 입력되고, IG 스트림은 그래픽용 디코더(182)에 입력된다.
비디오 디코더(181)는, HDR 비디오 스트림을 디코드하여, HDR 비디오의 각 픽처를 합성부(183)에 출력한다. 또한, 비디오 디코더(181)는, HDR 비디오 스트림을 디코드함으로써 Dynamic metadata를 취득하고, 컨트롤러(151)에 출력한다.
그래픽용 디코더(182)는, 메뉴의 표시가 유저에 의해 지시된 경우, IG 스트림을 디코드하여, 메뉴의 화상을 합성부(183)에 출력한다.
합성부(183)는, 메뉴를 표시시키는 경우, 비디오 디코더(181)로부터 공급된 HDR 비디오의 각 픽처에 그래픽용 디코더(182)로부터 공급된 메뉴의 화상을 합성하여, HDR 비디오의 각 픽처를 외부 출력부(158)에 출력한다. 합성부(183)는, 메뉴를 표시시키지 않는 경우, 비디오 디코더(181)로부터 공급된 HDR 비디오의 각 픽처를 그대로 외부 출력부(158)에 출력한다.
또한, 상술한 바와 같이, 메뉴 이외에, 자막이나 OSD 등도 HDR 비디오에 겹쳐 표시된다.
예를 들어 자막을 표시시키는 경우, PG 스트림의 디코드가 그래픽용 디코더(182)에 의해 행해진다. PG 스트림을 디코드함으로써 얻어진 자막의 정보는, 합성부(183)에 공급되어, HDR 비디오의 각 픽처에 합성된다.
또한, OSD를 표시시키는 경우, 컨트롤러(151)로부터 합성부(183)에 대해서, OSD의 표시에 사용하는 데이터인 OSD 데이터가 공급된다. 컨트롤러(151)에는, 유저의 조작 등에 따라서 OSD 데이터를 생성하는 기능부도 마련된다. 합성부(183)에 있어서는, 컨트롤러(151)로부터 공급된 OSD 데이터가 HDR 비디오의 각 픽처에 합성된다.
<5-3. 재생 장치의 동작>
다음으로, 도 23, 도 24의 흐름도를 참조하여, HDR 콘텐츠를 재생하는 재생 장치(101)의 처리에 대하여 설명한다.
도 23, 도 24의 처리는, 예를 들어 재생 장치(101)의 디스크 드라이브(152)에 광디스크(111)가 장착되고, HDR 콘텐츠의 재생이 지시되었을 때 개시된다.
스텝 S1에 있어서, 디스크 드라이브(152)는, PlayList 파일을 포함하는, Data Base 정보의 파일을 광디스크(111)로부터 판독한다.
스텝 S2에 있어서, 컨트롤러(151)의 Data Base 정보 해석부(171)는, PlayList 파일을 해석하여, 재생 대상이 되는 AV 스트림의 특정 등을 행한다. 또한, Data Base 정보 해석부(171)는, PlayList 파일의 STN_table() 중의, IG 스트림에 관한 stream_attributes()에 기술되는 Fixed_Dynamic_medatada_during_PopUp_flag의 값을 특정한다.
스텝 S3에 있어서, 디스크 드라이브(152)는, 재생 대상이 되는 HDR 비디오 스트림을 포함하는 AV 스트림의 파일을 광디스크(111)로부터 판독한다.
스텝 S4에 있어서, 복호 처리부(156)의 비디오 디코더(181)는, 디스크 드라이브(152)로부터 공급된 AV 스트림에 포함되는 HDR 비디오 스트림을 디코드하여, 각 픽처의 데이터를, 합성부(183)를 통해 외부 출력부(158)에 출력한다. HDR 비디오 스트림에 포함되는 Dynamic metadata는 비디오 디코더(181)로부터 컨트롤러(151)에 공급된다.
스텝 S5에 있어서, 외부 출력부(158)는, 복호 처리부(156)로부터 공급된 HDR 비디오의 각 픽처에, 컨트롤러(151)로부터 공급된 Dynamic metadata를 부가하여 TV(102)에 출력한다.
스텝 S6에 있어서, 컨트롤러(151)의 출력 제어부(172)는, 메뉴의 표시가 지시되었는지 여부를 판정한다. 메뉴의 표시가 지시되지 않았다고 스텝 S6에 있어서 판정된 경우, 스텝 S5로 되돌아가, HDR 비디오의 각 픽처의 출력이 계속된다.
한편, 스텝 S6에 있어서, 메뉴의 표시가 지시되었다고 판정된 경우, 스텝 S7에 있어서, 그래픽용 디코더(182)는, IG 스트림을 디코드하여, 메뉴의 화상을 합성부(183)에 출력한다.
스텝 S8에 있어서, 합성부(183)는, 비디오 디코더(181)로부터 공급된 HDR 비디오의 각 픽처에, 그래픽용 디코더(182)로부터 공급된 메뉴의 화상을 합성하여, HDR 비디오의 각 픽처를 외부 출력부(158)에 출력한다.
스텝 S9에 있어서, 출력 제어부(172)는, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 0b인지 여부를 판정한다.
Fixed_Dynamic_medatada_during_PopUp_flag의 값이 0b라고 스텝 S9에 있어서 판정된 경우, 스텝 S10에 있어서, 출력 제어부(172)는, 외부 출력부(158)를 제어하고, 메뉴의 화상이 합성된 각 픽처에 Dynamic metadata를 부가하여 출력시킨다.
TV(102)에 있어서는, 메뉴의 화상이 합성된 HDR 비디오의 각 픽처의 휘도 압축이 Dynamic metadata에 기초하여 행해지고, 휘도 압축 후의 HDR 비디오가 표시된다.
한편, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 1b라고 스텝 S9에 있어서 판정된 경우, 스텝 S11에 있어서, 출력 제어부(172)는, 메뉴 표시용 메타데이터를 메뉴 표시용 메타데이터 기억부(153A)로부터 판독해서 취득한다. 출력 제어부(172)는, 취득한 메뉴 표시용 메타데이터를 외부 출력부(158)에 출력한다.
스텝 S12에 있어서, 출력 제어부(172)는, 외부 출력부(158)를 제어하고, 메뉴의 화상이 합성된 각 픽처에, 표시용 메타데이터를 부가하여 출력시킨다.
TV(102)에 있어서는, 메뉴의 화상이 합성된 HDR 비디오의 각 픽처의 휘도 압축이 메뉴 표시용 메타데이터에 기초하여 행해져, 휘도 압축 후의 HDR 비디오가 표시된다.
스텝 S10 또는 스텝 S12의 처리는, 메뉴의 표시를 종료할 때까지 계속된다. 메뉴의 표시를 종료하는 경우, 스텝 S5로 되돌아가, 그 이후의 처리가 반복된다.
이상의 처리에 의해, 재생 장치(101)는, 메뉴를 표시시키는 동안, Fixed_Dynamic_medatada_during_PopUp_flag의 값에 의해 지정되는 메타데이터를 TV(102)로 전송하여, 휘도 조정을 행하게 할 수 있다.
콘텐츠의 제작자는, Dynamic metadata와 메뉴 표시용 메타데이터 중, 휘도 조정 후의 HDR 비디오나 메뉴의 외관이 부자연스러워지지 않는 쪽의 메타데이터를 Fixed_Dynamic_medatada_during_PopUp_flag의 값에 의해 지정할 수 있다.
콘텐츠의 제작자는, 예를 들어 메뉴로서 표시시키는 버튼 등의 화상이 작기 때문에 HDR 비디오의 휘도를 우선시키는 경우에는, Dynamic metadata를 사용한 휘도 조정이 행해지도록 Fixed_Dynamic_medatada_during_PopUp_flag의 값을 설정한다.
또한, 콘텐츠의 제작자는, 휘도의 변화가 심한 씬이 많기 때문에 메뉴의 휘도를 우선시키는 경우에는, 메뉴 표시용 메타데이터를 사용한 휘도 조정이 행해지도록 Fixed_Dynamic_medatada_during_PopUp_flag의 값을 설정한다.
이와 같이 적절한 메타데이터를 지정함으로써, 콘텐츠의 제작자는, 메뉴 등의 다른 정보를 HDR 비디오에 중첩해서 표시시키는 경우의 부자연스러운 휘도의 변화를 방지하는 것이 가능해진다.
<<6. 실시 형태 2: IG 스트림에 플래그를 기술하는 예>>
Fixed_Dynamic_medatada_during_PopUp_flag가, PlayList 이외의 영역에 기술되도록 해도 된다.
여기에서는, Fixed_Dynamic_medatada_during_PopUp_flag가 IG 스트림 중에 기술되는 경우에 대하여 설명한다.
IG 스트림을 구성하는 PES 패킷에는 세그먼트라 불리는 단위의 데이터가 저장된다. 메뉴의 표시는, 메뉴 데이터의 세그먼트를 사용하여 행해진다.
도 25는, 메뉴 데이터의 세그먼트를 포함하는 디스플레이 세트의 예를 나타내는 도면이다.
도 25에 도시한 바와 같이, 메뉴 데이터의 디스플레이 세트는, 1화면분의 메뉴 화상(버튼)의 세그먼트인 ICS, PDS1 내지 PDSn, ODS1 내지 ODSn, END Segment에 의해 구성된다.
ICS(Interactive Composition Segment)는, 디스플레이 세트의 선두를 나타내고, 메뉴 버튼별 ID 등의, 메뉴에 관한 속성 정보를 포함하는 세그먼트이다.
PDS(Palette Definition Segment)는, 메뉴의 색으로서 사용 가능한 색의 정보를 포함하는 세그먼트이다.
ODS(Object Definition Segment)는, 메뉴의 형상을 나타내는 정보를 포함하는 세그먼트이다.
END Segment는, 디스플레이 세트의 종단을 나타내는 세그먼트이다.
도 26은, ICS의 신택스를 나타내는 도면이다.
ICS에는, segment_descriptor(), video_descriptor(), composition_descriptor(), sequence_descriptor(), interactive_composition_data_fragment()가 기술된다. interactive_composition_data_fragment()에는 interactive_composition()이 포함된다.
도 27은, interactive_composition_data_fragment()에 포함되는 interactive_composition()의 신택스를 나타내는 도면이다.
도 27에 도시한 바와 같이, interactive_composition()에는, stream_model, user_interface_model이 기술된다. stream_model은, ICS와 관련 정보의 다중화 방식을 나타낸다. user_interface_model은, 메뉴가 Pop-Up 형식으로 표시되는지, Always-On 형식으로 표시되는지를 나타낸다.
또한, interactive_composition()에는, Fixed_Dynamic_medatada_during_PopUp_flag가 기술된다.
이와 같이, Fixed_Dynamic_medatada_during_PopUp_flag가, IG 스트림을 구성하는 ICS의 interactive_composition()에 기술되도록 하는 것이 가능하다.
IG 스트림에 기술되는 Fixed_Dynamic_medatada_during_PopUp_flag를 사용한 처리도, 기본적으로, Fixed_Dynamic_medatada_during_PopUp_flag가 PlayList에 기술되는 경우의 처리와 마찬가지이다.
즉, 그래픽용 디코더(182)는, IG 스트림을 디코드했을 때, Fixed_Dynamic_medatada_during_PopUp_flag의 정보를 컨트롤러(151)에 출력한다. 컨트롤러(151)의 출력 제어부(172)는, 상술한 바와 같이 하여, HDR 비디오의 각 픽처와 함께 출력하는 메타데이터를, Fixed_Dynamic_medatada_during_PopUp_flag의 값에 기초하여 전환한다.
이것에 의해서도, 재생 장치(101)는, Fixed_Dynamic_medatada_during_PopUp_flag의 값에 의해 지정되는 메타데이터를 TV(102)로 전송하여, 휘도 조정을 행하게 할 수 있다.
자막의 스트림인 PG 스트림도 IG 스트림과 마찬가지의 구성을 갖는다. Fixed_Dynamic_medatada_during_PopUp_flag가 PG 스트림에 기술되도록 해도 된다.
이와 같이, 그래픽 스트림(IG 스트림, PG 스트림) 중에 Fixed_Dynamic_medatada_during_PopUp_flag가 기술되도록 할 수 있다.
<<7. 다른 장치의 구성과 동작>>
<7-1. TV(102)의 구성과 동작>
도 28은, TV(102)의 구성예를 나타내는 블록도이다.
TV(102)는, 컨트롤러(201), 외부 입력부(202), 신호 처리부(203), 디스플레이(204), 방송 수신부(205), 복호 처리부(206), 및 통신부(207)로 구성된다.
컨트롤러(201)는, CPU, ROM, RAM 등에 의해 구성된다. 컨트롤러(201)는, 소정의 프로그램을 실행하여, TV(102)의 전체 동작을 제어한다.
예를 들어, 컨트롤러(201)는, 디스플레이(204)의 성능을 나타내는 정보를 관리한다. 컨트롤러(201)는, HDMI의 전송 설정 시, 디스플레이(204)의 성능을 나타내는 정보를 외부 입력부(202)에 출력하고, 재생 장치(101)에 송신한다.
또한, 컨트롤러(201)는, 신호 처리부(203)에 의한 HDR 비디오의 처리를 제어한다. 예를 들어, 컨트롤러(201)는, HDR 콘텐츠의 재생 시에 재생 장치(101)로부터 전송되어 온 Dynamic metadata 또는 메뉴 표시용 메타데이터에 기초하여, HDR 비디오의 휘도 압축을 신호 처리부(203)에 행하게 한다.
외부 입력부(202)는, HDMI 등의 외부 입력의 인터페이스이다. 외부 입력부(202)는, HDMI 케이블을 통해 재생 장치(101)와 통신을 행하고, 재생 장치(101)로부터 전송되어 온 HDR 비디오의 각 픽처의 데이터를 수신하여 신호 처리부(203)에 출력한다. 또한, 외부 입력부(202)는, HDR 비디오의 각 픽처에 부가하여 전송되어 온 Dynamic metadata 또는 메뉴 표시용 메타데이터를 수신하여, 컨트롤러(201)에 출력한다.
신호 처리부(203)는, 외부 입력부(202)로부터 공급된 HDR 비디오의 처리를 행하여, 영상을 디스플레이(204)에 표시시킨다. 신호 처리부(203)는, 컨트롤러(201)에 의한 제어에 따라서, 적절히 디스플레이(204)가 표시 가능한 범위에 들도록, HDR 비디오의 휘도 압축을 행한다.
신호 처리부(203)는, 복호 처리부(206)로부터 공급된 데이터에 기초하여, 프로그램의 영상을 디스플레이(204)에 표시시키는 처리 등도 행한다.
디스플레이(204)는, 유기 EL(Electroluminescence) 디스플레이나 LCD(Liquid Crystal Display) 등의 표시 디바이스이다. 디스플레이(204)는, 신호 처리부(203)로부터 공급된 비디오 신호에 기초하여, HDR 콘텐츠의 영상이나 프로그램의 영상을 표시한다.
방송 수신부(205)는, 안테나로부터 공급된 신호로부터 소정의 채널의 방송 신호를 추출하고, 복호 처리부(206)에 출력한다. 방송 수신부(205)에 의한 방송 신호의 추출은, 컨트롤러(201)에 의한 제어에 따라서 행해진다.
복호 처리부(206)는, 방송 수신부(205)로부터 공급된 방송 신호에 대해서 복호 등의 처리를 실시하여, 프로그램의 비디오 데이터를 신호 처리부(203)에 출력한다.
통신부(207)는, 무선 LAN, 유선 LAN 등의 인터페이스이다. 통신부(207)는, 인터넷을 통해 서버와 통신을 행한다.
도 29의 흐름도를 참조하여, TV(102)의 표시 처리에 대하여 설명한다.
도 29의 처리는, HDR 비디오 스트림을 디코드하여 얻어진 픽처의 전송이 개시되었을 때 행해진다. 재생 장치(101)로부터 전송되어 오는 픽처에는, Dynamic metadata 또는 메뉴 표시용 메타데이터가 부가되어 있다.
스텝 S21에 있어서, TV(102)의 외부 입력부(202)는, 재생 장치(101)로부터 전송되어 온 HDR 콘텐츠의 각 픽처의 데이터와, 그것에 부가하여 전송되어 온 Dynamic metadata 또는 메뉴 표시용 메타데이터를 수신한다.
메뉴의 표시가 지시되지 않은 경우, 또는 메뉴의 표시가 지시되었지만 Fixed_Dynamic_medatada_during_PopUp_flag의 값이 0b인 경우, 여기에서는, 각 픽처와 Dynamic metadata가 수신된다.
또한, 재생 장치(101)에 있어서 메뉴의 표시가 지시되고, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 1b인 경우, 여기에서는, 각 픽처와 메뉴 표시용 메타데이터가 수신된다.
외부 입력부(202)에 의해 수신된 각 픽처의 데이터는 신호 처리부(203)에 공급되고, 메타데이터(Dynamic metadata 또는 표시용 메타데이터)는 컨트롤러(201)에 공급된다.
스텝 S22에 있어서, 신호 처리부(203)는, 컨트롤러(201)에 의한 제어에 따라서, HDR 비디오의 각 픽처의 휘도 압축을 행한다. 각 픽처와 함께 전송되어 온 메타데이터가 Dynamic metadata인 경우에는 Dynamic metadata에 기초하여 휘도 압축이 행해진다. 또한, 각 픽처와 함께 전송되어 온 메타데이터가 메뉴 표시용 메타데이터인 경우에는 메뉴 표시용 메타데이터에 기초하여 휘도 압축이 행해진다.
스텝 S23에 있어서, 신호 처리부(203)는, 휘도 압축을 행한 HDR 비디오를 디스플레이(204)에 표시시킨다. HDR 비디오의 표시는, HDR 콘텐츠의 재생이 종료될 때까지 계속된다.
<7-2. 기록 장치의 구성과 동작>
도 30은, 기록 장치(251)의 구성예를 나타내는 블록도이다.
상술한 바와 같은 BD인 광디스크(111)가, 도 30의 기록 장치(251)에 있어서 작성된다.
기록 장치(251)는, 컨트롤러(261), 부호화 처리부(262), 및 디스크 드라이브(263)로 구성된다. 마스터로 되는 비디오가 부호화 처리부(262)에 입력된다.
컨트롤러(261)는, CPU, ROM, RAM 등에 의해 구성된다. 컨트롤러(261)는, 소정의 프로그램을 실행하여, 기록 장치(251)의 전체 동작을 제어한다.
부호화 처리부(262)는, 마스터의 비디오 부호화를 행하고, HDR 비디오 스트림을 생성한다. HDR 비디오 스트림의 생성 시에 각 픽처에 부가되어, SEI 메시지로서 부호화되는 Dynamic metadata는 컨트롤러(261)로부터 공급된다.
또한, 부호화 처리부(262)는, 메뉴의 화상 부호화를 행함으로써 IG 스트림을 생성하고, 자막 데이터의 부호화를 행함으로써 PG 스트림을 생성한다. 부호화 처리부(262)에 대해서는, 메뉴의 화상이나 자막 데이터 등의 정보도 입력된다.
부호화 처리부(262)는, 부호화를 행함으로써 얻어진 HDR 비디오 스트림, IG 스트림, PG 스트림을, 오디오 스트림 등과 함께 다중화함으로써, Clip을 구성하는 AV 스트림을 생성한다. 부호화 처리부(262)는, 생성한 AV 스트림을 디스크 드라이브(263)에 출력한다.
디스크 드라이브(263)는, 컨트롤러(261)로부터 공급된 Data Base 정보의 각 파일과, 부호화 처리부(262)로부터 공급된 AV 스트림의 파일을 도 14의 디렉토리 구조에 따라서 광디스크(111)에 기록한다.
도 31은, 컨트롤러(261)의 기능 구성예를 나타내는 블록도이다.
컨트롤러(261)에 있어서는, Dynamic metadata 생성부(271), 부호화 제어부(272), Data Base 정보 생성부(273), 및 기록 제어부(274)가 실현된다. 도 31에 도시한 기능부 중 적어도 일부는, 컨트롤러(261)의 CPU에 의해 소정의 프로그램이 실행됨으로써 실현된다.
Dynamic metadata 생성부(271)는, 콘텐츠의 제작자에 의한 입력에 따라서 각 파라미터의 값을 설정하여, Dynamic metadata를 생성한다. Dynamic metadata 생성부(271)는, 생성한 Dynamic metadata를 부호화 제어부(272)에 출력한다.
부호화 제어부(272)는, Dynamic metadata 생성부(271)에 의해 생성된 Dynamic metadata를 부호화 처리부(262)에 출력하고, HDR 비디오의 각 픽처의 부호화를 행하게 한다. 또한, 부호화 제어부(272)는, 메뉴 데이터, 자막 데이터의 부호화를 부호화 처리부(262)에 행하게 한다.
또한, Fixed_Dynamic_medatada_during_PopUp_flag가 그래픽 스트림에 기술 되는 경우, 부호화 제어부(272)는, Fixed_Dynamic_medatada_during_PopUp_flag의 정보를 부호화 처리부(262)에 출력하고, 메뉴 데이터, 자막 데이터의 부호화를 행하게 한다.
Data Base 정보 생성부(273)는, Index table, PlayList, Clip Information 등의 Data Base 정보를 생성한다.
예를 들어, Data Base 정보 생성부(273)는, Fixed_Dynamic_medatada_during_PopUp_flag의 값을 콘텐츠의 제작자에 의한 입력에 따라서 설정하고, Fixed_Dynamic_medatada_during_PopUp_flag를 포함하는 PlayList를 생성한다.
Data Base 정보 생성부(273)는, 생성한 Data Base 정보의 파일을 기록 제어부(274)에 출력한다.
기록 제어부(274)는, Data Base 정보 생성부(273)에 의해 생성된 Data Base 정보의 파일을 디스크 드라이브(263)에 출력하고, 광디스크(111)에 기록시킨다.
도 32의 흐름도를 참조하여, 이상과 같은 구성을 갖는 기록 장치(251)의 기록 처리에 대하여 설명한다.
도 32의 처리는, 예를 들어 마스터로 되는 비디오 데이터가 입력되었을 때 개시된다.
스텝 S31에 있어서, 컨트롤러(261)의 Dynamic metadata 생성부(271)는, 콘텐츠의 제작자에 의한 입력에 따라서 각 파라미터의 값을 설정하고, Dynamic metadata를 생성한다.
스텝 S32에 있어서, 부호화 처리부(262)는, 마스터의 비디오 부호화를 행하고, HDR 비디오 스트림을 생성한다. 또한, 부호화 처리부(262)는, 메뉴의 화상이나 자막 데이터의 부호화를 행하여, IG 스트림과 PG 스트림을 생성한다. 부호화 처리부(262)는, 생성한 스트림을 다중화함으로써 AV 스트림을 생성한다.
스텝 S33에 있어서, Data Base 정보 생성부(273)는, Fixed_Dynamic_medatada_during_PopUp_flag를 포함하는 PlayList 등의 Data Base 정보를 생성한다.
스텝 S34에 있어서, 디스크 드라이브(263)는, 컨트롤러(261)로부터 공급된 Data Base 정보의 파일과, 부호화 처리부(262)로부터 공급된 AV 스트림의 파일을 기록시킴으로써 광디스크(111)를 생성한다. 그 후, 처리는 종료된다.
이상의 처리에 의해, 기록 장치(251)는, Fixed_Dynamic_medatada_during_PopUp_flag를 포함하는 PlayList가 기록된 광디스크(111)를 생성하는 것이 가능해진다.
<<8. 재생 시스템의 다른 구성예>>
<8-1. 제1 구성예>
HDR 콘텐츠가 광디스크(111)에 기록되어 있는 경우에 대하여 설명하였지만, 네트워크를 통해 배신되는 HDR 콘텐츠를 재생하는 경우에도, 이상의 처리를 적용하는 것이 가능하다.
도 33은, HDR 콘텐츠의 다른 재생 시스템의 구성예를 나타내는 도면이다.
도 33의 재생 시스템은, 재생 장치(101)와 콘텐츠 배신 서버(301)가, 인터넷 등의 네트워크(302)를 통해 접속됨으로써 구성된다. 재생 장치(101)에는, HDMI 케이블 등을 통해 TV(102)가 접속된다. 재생 장치(101)가 재생하는 HDR 콘텐츠의 영상은 TV(102)에 표시된다.
콘텐츠 배신 서버(301)는, HDR 콘텐츠의 배신 서비스를 제공하는 사업자가 관리하는 서버이다. 도 33의 말풍선에 나타낸 바와 같이, 콘텐츠 배신 서버(301)가 배신하는 콘텐츠는 HDR 콘텐츠이다.
각각의 HDR 콘텐츠는, Dynamic metadata를 포함하는 HDR 비디오 스트림의 파일과, 재생 제어 정보의 파일을 대응지음으로써 구성된다. 재생 제어 정보는 예를 들어 XML에 의해 기술되는 정보이다. 재생 제어 정보에는, Fixed_Dynamic_medatada_during_PopUp_flag에 대응하는 정보가 포함된다.
예를 들어, 유저가 재생 장치(101)를 조작하여 콘텐츠 배신 서버(301)에 액세스한 경우, TV(102)에는, HDR 콘텐츠의 선택 화면이 표시된다. 유저는, 소정의 HDR 콘텐츠를 선택하고, 시청의 개시를 콘텐츠 배신 서버(301)에 요구할 수 있다.
HDR 콘텐츠가 선택된 경우, 콘텐츠 배신 서버(301)는, 선택된 HDR 콘텐츠를 재생 장치(101)에 송신한다.
재생 장치(101)는, 콘텐츠 배신 서버(301)로부터 송신되어 온 HDR 콘텐츠를 수신하고, 상술한 재생 처리와 마찬가지의 처리를 행함으로써, HDR 콘텐츠의 재생을 행한다.
즉, 재생 장치(101)로부터 TV(102)에 대해서는, HDR 비디오 스트림을 디코드함으로써 얻어진 각 픽처와 함께 Dynamic metadata가 전송되고, Dynamic metadata에 기초하여 휘도 압축이 행해진다.
또한, 메뉴의 표시가 지시되고, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 1b인 경우, HDR 콘텐츠의 각 픽처와 함께 메뉴 표시용 메타데이터가 전송되고, TV(102)에 있어서, 메뉴 표시용 메타데이터에 기초하여 휘도 압축이 행해진다. 재생 장치(101)에는 메뉴 표시용 메타데이터가 준비되어 있다.
이와 같이, 콘텐츠 배신 서버(301)가 배신하는 콘텐츠를 재생하는 경우에도, Fixed_Dynamic_medatada_during_PopUp_flag를 사용한 처리가 행해지도록 하는 것이 가능하다.
도 34는, 재생 장치(101)의 다른 구성예를 나타내는 도면이다.
도 34에 도시한 바와 같이, 재생 장치(101)가, 소위 스틱형 단말기여도 된다. 도 34에 도시한 재생 장치(101)의 하우징에는 HDMI 단자가 마련되어 있다. 하우징에 마련되어 있는 HDMI 단자를 TV(102)의 HDMI 단자에 꽂음으로써, 재생 장치(101)와 TV(102)가 접속된다.
이 경우, 도 20에 도시한 구성 중, 예를 들어 디스크 드라이브(152) 이외의 구성이 재생 장치(101)에 마련된다. 재생 장치(101)는, 상술한 처리와 마찬가지의 처리를 행함으로써, 콘텐츠 배신 서버(301)가 배신하는 HDR 콘텐츠의 재생을 행한다.
이와 같이, 재생 장치(101)의 형태로서 각종 형태를 채용하는 것이 가능하다. 예를 들어, 스마트폰이나 태블릿 단말기 등의 휴대형의 단말기에 재생 장치(101)의 기능이 탑재되도록 해도 되고, PC 등의 단말기에 재생 장치(101)의 기능이 탑재되도록 해도 된다.
<8-2. 제2 구성예>
재생 장치(101)의 기능이 TV(102)에 탑재되도록 해도 된다.
도 35는, HDR 콘텐츠의 또 다른 재생 시스템의 구성예를 나타내는 도면이다.
도 35의 재생 시스템은, 재생 장치(101)의 기능을 탑재한 TV(102)와 콘텐츠 배신 서버(301)가 네트워크(302)를 통해 접속됨으로써 구성된다. 중복되는 설명에 대해서는 적절히 생략한다.
TV(102)는, 콘텐츠 배신 서버(301)로부터 송신되어 온 정보에 기초하여 HDR 콘텐츠의 선택 화면을 표시시킨다.
유저에 의해 소정의 HDR 콘텐츠가 선택된 경우, 콘텐츠 배신 서버(301)는, 선택된 HDR 콘텐츠를 TV(102)에 송신한다.
TV(102)는, 콘텐츠 배신 서버(301)로부터 송신되어 온 HDR 콘텐츠를 수신하고, HDR 콘텐츠의 재생을 행한다.
즉, TV(102)는, HDR 비디오의 각 픽처의 휘도 압축을 Dynamic metadata에 기초하여 행한다.
또한, 메뉴의 표시가 지시되고, Fixed_Dynamic_medatada_during_PopUp_flag의 값이 1b인 경우, TV(102)는, HDR 비디오의 각 픽처의 휘도 압축을 메뉴 표시용 메타데이터에 기초하여 행한다. TV(102)에는 메뉴 표시용 메타데이터가 준비되어 있다.
이와 같이, 재생 장치(101)의 기능이 TV(102)에 마련되고, TV(102)에 있어서, 상술한 바와 같은 Fixed_Dynamic_medatada_during_PopUp_flag를 사용한 처리가 행해지게 해도 된다.
<<9. 그 밖의 예>>
HDR 콘텐츠가 기록되어 있는 기록 매체가 광디스크인 것으로 하였지만, 플래시 메모리 등의 다른 기록 매체여도 된다.
Fixed_Dynamic_medatada_during_PopUp_flag가, PlayList 또는 그래픽 스트림에 기술되는 것으로 하였지만, Clip Information 등의 다른 정보에 기술되도록 해도 된다.
Dynamic metadata 또는 메뉴 표시용 메타데이터에 기초하여 비디오에 대해서 행해지는 처리가 휘도 압축인 것으로 하였지만, 휘도 신장이 TV(102)에 있어서 행해지게 해도 된다. 이 경우, Dynamic metadata 또는 메뉴 표시용 메타데이터에는, 휘도 신장에 사용되는 톤 커브의 정보가 기술되게 된다.
재생 장치(101)에 입력되는 비디오 스트림이 소정의 방식으로 부호화된 비디오 스트림인 것으로 하였지만, Dynamic metadata가 부가된 픽처로 구성되고, 부호화되지 않은 비디오 스트림이 재생 장치(101)에 입력되게 해도 된다.
<컴퓨터의 구성예>
상술한 일련의 처리는, 하드웨어에 의해 실행할 수도 있고, 소프트웨어에 의해 실행할 수도 있다. 일련의 처리를 소프트웨어에 의해 실행하는 경우에는, 그 소프트웨어를 구성하는 프로그램이, 전용의 하드웨어에 내장되어 있는 컴퓨터, 또는 범용의 퍼스널 컴퓨터 등에, 프로그램 기록 매체로부터 인스톨된다.
도 36은, 상술한 일련의 처리를 프로그램에 의해 실행하는 컴퓨터의 하드웨어의 구성예를 나타내는 블록도이다.
CPU(Central Processing Unit)(1001), ROM(Read Only Memory)(1002), RAM(Random Access Memory)(1003)은, 버스(1004)에 의해 서로 접속되어 있다.
버스(1004)에는, 추가로 입출력 인터페이스(1005)가 접속되어 있다. 입출력 인터페이스(1005)에는, 키보드, 마우스 등을 포함하는 입력부(1006), 디스플레이, 스피커 등을 포함하는 출력부(1007)가 접속된다. 또한, 입출력 인터페이스(1005)에는, 하드디스크나 불휘발성 메모리 등을 포함하는 기억부(1008), 네트워크 인터페이스 등을 포함하는 통신부(1009), 리무버블 미디어(1011)를 구동하는 드라이브(1010)가 접속된다.
이상과 같이 구성되는 컴퓨터에서는, CPU(1001)가, 예를 들어 기억부(1008)에 기억되어 있는 프로그램을 입출력 인터페이스(1005) 및 버스(1004)를 통해 RAM(1003)에 로드하여 실행함으로써, 상술한 일련의 처리가 행해진다.
CPU(1001)가 실행하는 프로그램은, 예를 들어 리무버블 미디어(1011)에 기록하여, 혹은 로컬 에어리어 네트워크, 인터넷, 디지털 방송과 같은, 유선 또는 무선의 전송 매체를 통해 제공되어, 기억부(1008)에 인스톨된다.
또한, 컴퓨터가 실행하는 프로그램은, 본 명세서에서 설명하는 순서를 따라 시계열로 처리가 행해지는 프로그램이어도 되고, 병렬로, 혹은 호출이 행해졌을 때 등의 필요한 타이밍에 처리가 행해지는 프로그램이어도 된다.
본 기술의 실시 형태는, 상술한 실시 형태에 한정되는 것은 아니며, 본 기술의 요지를 일탈하지 않는 범위에 있어서 다양한 변경이 가능하다.
예를 들어, 본 기술은, 하나의 기능을 네트워크를 통해 복수의 장치로 분담, 공동으로 처리하는 클라우드 컴퓨팅의 구성을 취할 수 있다.
또한, 상술한 흐름도에서 설명한 각 스텝은, 하나의 장치에서 실행하는 외에, 복수의 장치에서 분담하여 실행할 수 있다.
또한, 하나의 스텝에 복수의 처리가 포함되는 경우에는, 그 하나의 스텝에 포함되는 복수의 처리는, 하나의 장치에서 실행하는 외에, 복수의 장치에서 분담하여 실행할 수 있다.
본 명세서에 있어서, 시스템이란, 복수의 구성 요소(장치, 모듈(부품) 등)의 집합을 의미하고, 모든 구성 요소가 동일 하우징 중에 있는지 여부는 따지지 않는다. 따라서, 별개의 하우징에 수납되고, 네트워크를 통해 접속되어 있는 복수의 장치, 및 하나의 하우징 중에 복수의 모듈이 수납되어 있는 하나의 장치는, 모두 시스템이다.
본 명세서에 기재된 효과는 어디까지나 예시이지 한정되는 것이 아니며, 또 다른 효과가 있어도 된다.
<구성의 조합예>
본 기술은, 이하와 같은 구성을 취할 수도 있다.
(1)
픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하는 수신부와,
상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터를 부가하고, 상기 메타데이터를 부가한 상기 픽처를 표시 장치에 출력하는 출력 제어부
를 구비하는 재생 장치.
(2)
상기 비디오 스트림을 디코드하는 디코드부를 추가로 구비하고,
상기 출력 제어부는, 상기 비디오 스트림을 디코드함으로써 얻어진 상기 픽처에 상기 메타데이터를 부가하는
상기 (1)에 기재된 재생 장치.
(3)
상기 비디오 스트림은, HDR 비디오의 스트림인
상기 (1)에 기재된 재생 장치.
(4)
상기 플래그는, 상기 동적 메타데이터, 또는 상기 소정의 정보 표시용 상기 메타데이터인 표시용 메타데이터를 나타내는
상기 (1) 내지 (3) 중 어느 것에 기재된 재생 장치.
(5)
상기 출력 제어부는, 상기 동적 메타데이터를 상기 휘도 조정에 사용하는 것이 상기 플래그에 의해 표시되어 있는 경우, 각각의 상기 픽처에 상기 동적 메타데이터를 부가하는
상기 (4)에 기재된 재생 장치.
(6)
상기 출력 제어부는, 상기 표시용 메타데이터를 상기 휘도 조정에 사용하는 것이 상기 플래그에 의해 표시되어 있는 경우, 각각의 상기 픽처에, 상기 재생 장치에 준비된 상기 표시용 메타데이터를 부가하는
상기 (5)에 기재된 재생 장치.
(7)
미리 준비된 고정값을 각 파라미터의 값으로 설정함으로써 상기 표시용 메타데이터를 생성하는 메타데이터 생성부를 추가로 구비하는
상기 (6)에 기재된 재생 장치.
(8)
상기 비디오 스트림의 재생에 사용되는 재생 제어 정보를 해석하고, 상기 재생 제어 정보에 기술되는 상기 플래그의 값을 특정하는 제어부를 추가로 구비하는
상기 (1) 내지 (7) 중 어느 것에 기재된 재생 장치.
(9)
상기 재생 제어 정보의 파일과 상기 비디오 스트림의 파일을 기록 매체로부터 판독하는 판독부를 추가로 구비하는
상기 (8)에 기재된 재생 장치.
(10)
상기 소정의 정보를 전송하는 그래픽 스트림을 구성하는 속성 정보를 해석하고, 상기 속성 정보에 기술되는 상기 플래그의 값을 특정하는 제어부를 추가로 구비하는
상기 (1) 내지 (7) 중 어느 것에 기재된 재생 장치.
(11)
상기 그래픽 스트림을 디코드하는 디코드부와,
상기 그래픽 스트림을 디코드함으로써 얻어진 상기 소정의 정보를 상기 픽처에 합성하는 합성부
를 추가로 구비하는 상기 (10)에 기재된 재생 장치.
(12)
상기 그래픽 스트림의 파일과 상기 비디오 스트림의 파일을 기록 매체로부터 판독하는 판독부를 추가로 구비하는
상기 (11)에 기재된 재생 장치.
(13)
재생 장치가,
픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하고,
상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터를 부가하고,
상기 메타데이터를 부가한 상기 픽처를 표시 장치에 출력하는
재생 방법.
(14)
컴퓨터에,
픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하고,
상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터를 부가하고,
상기 메타데이터를 부가한 상기 픽처를 표시 장치에 출력하는
처리를 실행시키기 위한 프로그램.
(15)
픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림의 제1 파일과,
상기 픽처에 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그가 기술된 제2 파일
이 기록된 기록 매체.
(16)
상기 제2 파일은, 상기 비디오 스트림의 재생에 사용되는 재생 제어 정보의 파일인
상기 (15)에 기재된 기록 매체.
(17)
상기 제2 파일은, 상기 플래그가 기술된 속성 정보를 포함하는, 상기 소정의 정보를 전송하는 그래픽 스트림의 파일인
상기 (15)에 기재된 기록 매체.
(18)
상기 기록 매체는, BD-ROM의 디스크인
상기 (15) 내지 (17) 중 어느 것에 기재된 기록 매체.
101: 재생 장치
102: TV
151: 컨트롤러
152: 디스크 드라이브
153: 메모리
154: 로컬 스토리지
155: 통신부
156: 복호 처리부
157: 조작 입력부
158: 외부 출력부
171: Data Base 정보 해석부
172: 메뉴 표시용 메타데이터 생성부
173: 출력 제어부

Claims (18)

  1. 픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하는 수신부와,
    표시 장치가 상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터를 부가하고, 상기 메타데이터를 부가한 상기 픽처를 표시 장치에 출력하는 출력 제어부
    를 구비하며,
    상기 비디오 스트림은 HDR 비디오의 스트림이고,
    상기 플래그는 수신된 상기 동적 메타데이터, 또는 상기 소정의 정보 표시용 상기 메타데이터인 표시용 메타데이터 중 하나를 나타내며,
    상기 표시용 메타데이터는 상기 동적 메타데이터의 파라미터와 유사하지만 고정값을 갖는 휘도 정보를 포함하는, 재생 장치.
  2. 제1항에 있어서,
    상기 비디오 스트림을 디코드하는 디코드부를 추가로 구비하고,
    상기 출력 제어부는, 상기 비디오 스트림을 디코드함으로써 얻어진 상기 픽처에 상기 메타데이터를 부가하는, 재생 장치.
  3. 삭제
  4. 삭제
  5. 제1항에 있어서,
    상기 출력 제어부는, 상기 동적 메타데이터를 상기 휘도 조정에 사용하는 것이 상기 플래그에 의해 표시되어 있는 경우, 각각의 상기 픽처에 상기 동적 메타데이터를 부가하는, 재생 장치.
  6. 제5항에 있어서,
    상기 출력 제어부는, 상기 표시용 메타데이터를 상기 휘도 조정에 사용하는 것이 상기 플래그에 의해 표시되어 있는 경우, 각각의 상기 픽처에, 상기 재생 장치에 준비된 상기 표시용 메타데이터를 부가하는, 재생 장치.
  7. 제6항에 있어서,
    미리 준비된 고정값을 각 파라미터의 값으로 설정함으로써 상기 표시용 메타데이터를 생성하는 메타데이터 생성부를 추가로 구비하는, 재생 장치.
  8. 제1항에 있어서,
    상기 비디오 스트림의 재생에 사용되는 재생 제어 정보를 해석하고, 상기 재생 제어 정보에 기술되는 상기 플래그의 값을 특정하는 제어부를 추가로 구비하는, 재생 장치.
  9. 제8항에 있어서,
    상기 재생 제어 정보의 파일과 상기 비디오 스트림의 파일을 기록 매체로부터 판독하는 판독부를 추가로 구비하는, 재생 장치.
  10. 제1항에 있어서,
    상기 소정의 정보를 전송하는 그래픽 스트림을 구성하는 속성 정보를 해석하고, 상기 속성 정보에 기술되는 상기 플래그의 값을 특정하는 제어부를 추가로 구비하는, 재생 장치.
  11. 제10항에 있어서,
    상기 그래픽 스트림을 디코드하는 디코드부와,
    상기 그래픽 스트림을 디코드함으로써 얻어진 상기 소정의 정보를 상기 픽처에 합성하는 합성부
    를 추가로 구비하는, 재생 장치.
  12. 제11항에 있어서,
    상기 그래픽 스트림의 파일과 상기 비디오 스트림의 파일을 기록 매체로부터 판독하는 판독부를 추가로 구비하는, 재생 장치.
  13. 재생 장치가,
    픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하고,
    표시 장치가 상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터를 부가하고,
    상기 메타데이터를 부가한 상기 픽처를 표시 장치에 출력하고,
    상기 비디오 스트림은 HDR 비디오의 스트림이고,
    상기 플래그는 수신된 상기 동적 메타데이터, 또는 상기 소정의 정보 표시용 상기 메타데이터인 표시용 메타데이터 중 하나를 나타내며,
    상기 표시용 메타데이터는 상기 동적 메타데이터의 파라미터와 유사하지만 고정값을 갖는 휘도 정보를 포함하는, 재생 방법.
  14. 컴퓨터에,
    픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림을 수신하고,
    표시 장치가 상기 픽처에 소정의 정보를 중첩해서 표시시키는 경우, 수신된 상기 비디오 스트림을 구성하는 상기 픽처에, 상기 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그에 의해 표시되는 상기 메타데이터를 부가하고,
    상기 메타데이터를 부가한 상기 픽처를 표시 장치에 출력하는
    처리를 실행시키기 위한 프로그램이 저장된 컴퓨터 판독 가능한 기록 매체로서,
    상기 비디오 스트림은 HDR 비디오의 스트림이고,
    상기 플래그는 수신된 상기 동적 메타데이터, 또는 상기 소정의 정보 표시용 상기 메타데이터인 표시용 메타데이터 중 하나를 나타내며,
    상기 표시용 메타데이터는 상기 동적 메타데이터의 파라미터와 유사하지만 고정값을 갖는 휘도 정보를 포함하는,
    프로그램이 저장된 컴퓨터 판독 가능한 기록 매체.
  15. 픽처의 휘도 정보를 포함하는 동적 메타데이터가 부가된 비디오 스트림의 제1 파일과,
    표시 장치가 상기 픽처에 소정의 정보를 중첩해서 표시시키는 동안의 휘도 조정에 사용하는 메타데이터를 나타내는 플래그가 기술된 제2 파일
    이 기록된 기록 매체로서,
    상기 비디오 스트림은 HDR 비디오의 스트림이고,
    상기 플래그는 상기 동적 메타데이터, 또는 상기 소정의 정보 표시용 상기 메타데이터인 표시용 메타데이터 중 하나를 나타내고,
    상기 표시용 메타데이터는 상기 동적 메타데이터의 파라미터와 유사하지만 고정값을 갖는 휘도 정보를 포함하는, 기록 매체.
  16. 제15항에 있어서,
    상기 제2 파일은, 상기 비디오 스트림의 재생에 사용되는 재생 제어 정보의 파일인, 기록 매체.
  17. 제15항에 있어서,
    상기 제2 파일은, 상기 플래그가 기술된 속성 정보를 포함하는, 상기 소정의 정보를 전송하는 그래픽 스트림의 파일인, 기록 매체.
  18. 제15항에 있어서,
    상기 기록 매체는, BD-ROM의 디스크인, 기록 매체.
KR1020207010290A 2017-10-31 2018-10-17 재생 장치, 재생 방법, 프로그램, 및 기록 매체 KR102558213B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2017-210411 2017-10-31
JP2017210411 2017-10-31
PCT/JP2018/038587 WO2019087775A1 (ja) 2017-10-31 2018-10-17 再生装置、再生方法、プログラム、および記録媒体

Publications (2)

Publication Number Publication Date
KR20200077513A KR20200077513A (ko) 2020-06-30
KR102558213B1 true KR102558213B1 (ko) 2023-07-24

Family

ID=66331742

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207010290A KR102558213B1 (ko) 2017-10-31 2018-10-17 재생 장치, 재생 방법, 프로그램, 및 기록 매체

Country Status (6)

Country Link
US (1) US11153548B2 (ko)
EP (1) EP3706412B1 (ko)
JP (1) JP7251480B2 (ko)
KR (1) KR102558213B1 (ko)
CN (1) CN111345034B (ko)
WO (1) WO2019087775A1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015198553A1 (ja) * 2014-06-26 2015-12-30 パナソニックＩｐマネジメント株式会社 データ出力装置、データ出力方法及びデータ生成方法
WO2015198552A1 (ja) 2014-06-25 2015-12-30 パナソニックＩｐマネジメント株式会社 コンテンツデータ生成方法、映像ストリーム伝送方法及び映像表示方法
WO2016125691A1 (ja) * 2015-02-03 2016-08-11 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
JP2017005472A (ja) 2015-06-09 2017-01-05 ソニー株式会社 受信装置、受信方法、送信装置および送信方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5685969B2 (ja) * 2011-02-15 2015-03-18 ソニー株式会社 表示制御方法、表示制御装置
KR101993593B1 (ko) * 2013-02-21 2019-06-28 돌비 레버러토리즈 라이쎈싱 코오포레이션 오버레이 그래픽스를 합성하기 위한 어피어런스 매핑을 위한 시스템들 및 방법들
EP3163888A4 (en) * 2014-06-30 2017-05-31 Panasonic Intellectual Property Management Co., Ltd. Data reproduction method and reproduction device
EP3193333B1 (en) 2014-09-08 2020-12-23 Sony Corporation Information processing device, information recording medium, information processing method, and program
JP7117627B2 (ja) 2017-06-21 2022-08-15 パナソニックＩｐマネジメント株式会社 映像表示システム及び映像表示方法
US10939158B2 (en) * 2017-06-23 2021-03-02 Samsung Electronics Co., Ltd. Electronic apparatus, display apparatus and control method thereof
WO2019038848A1 (ja) 2017-08-23 2019-02-28 三菱電機株式会社 映像コンテンツ媒体および映像再生装置
WO2019069483A1 (ja) * 2017-10-06 2019-04-11 パナソニックＩｐマネジメント株式会社 映像表示装置及び映像表示方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015198552A1 (ja) 2014-06-25 2015-12-30 パナソニックＩｐマネジメント株式会社 コンテンツデータ生成方法、映像ストリーム伝送方法及び映像表示方法
WO2015198553A1 (ja) * 2014-06-26 2015-12-30 パナソニックＩｐマネジメント株式会社 データ出力装置、データ出力方法及びデータ生成方法
WO2016125691A1 (ja) * 2015-02-03 2016-08-11 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
JP2017005472A (ja) 2015-06-09 2017-01-05 ソニー株式会社 受信装置、受信方法、送信装置および送信方法

Also Published As

Publication number Publication date
US11153548B2 (en) 2021-10-19
JPWO2019087775A1 (ja) 2020-11-19
US20200358995A1 (en) 2020-11-12
WO2019087775A1 (ja) 2019-05-09
EP3706412A4 (en) 2020-11-04
CN111345034B (zh) 2022-08-26
CN111345034A (zh) 2020-06-26
JP7251480B2 (ja) 2023-04-04
KR20200077513A (ko) 2020-06-30
EP3706412B1 (en) 2023-03-15
EP3706412A1 (en) 2020-09-09

Similar Documents

Publication Publication Date Title
US11516428B2 (en) Reproduction device, reproduction method, and recording medium
US11812046B2 (en) Reproduction device reproduction method, and recording medium
US9832440B2 (en) Reproduction device, reproduction method, and recording medium that display graphics based on tone mapping
US9706184B2 (en) Reproduction device, reproduction method, and recording medium
US8237741B2 (en) Image processing apparatus, image processing method, and image processing program
JP2024045366A (ja) 情報処理装置、情報処理方法、記録媒体、再生装置、再生方法、およびプログラム
KR102614338B1 (ko) 재생 장치, 재생 방법, 프로그램, 및 기록 매체
KR102558213B1 (ko) 재생 장치, 재생 방법, 프로그램, 및 기록 매체

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant