WO2017047014A1 - 映像受信方法、映像送信方法、映像受信装置及び映像送信装置 - Google Patents

映像受信方法、映像送信方法、映像受信装置及び映像送信装置 Download PDF

Info

Publication number
WO2017047014A1
WO2017047014A1 PCT/JP2016/003947 JP2016003947W WO2017047014A1 WO 2017047014 A1 WO2017047014 A1 WO 2017047014A1 JP 2016003947 W JP2016003947 W JP 2016003947W WO 2017047014 A1 WO2017047014 A1 WO 2017047014A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
signal
dynamic range
information
transfer characteristic
Prior art date
Application number
PCT/JP2016/003947
Other languages
English (en)
French (fr)
Inventor
遠間 正真
西 孝啓
賀敬 井口
Original Assignee
パナソニックIpマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2016101979A external-priority patent/JP6820507B2/ja
Application filed by パナソニックIpマネジメント株式会社 filed Critical パナソニックIpマネジメント株式会社
Priority to CN201680052302.0A priority Critical patent/CN108028878B/zh
Priority to EP16845892.5A priority patent/EP3352163B1/en
Priority to EP20170302.2A priority patent/EP3700211A1/en
Publication of WO2017047014A1 publication Critical patent/WO2017047014A1/ja
Priority to US15/917,008 priority patent/US10629162B2/en
Priority to US16/819,308 priority patent/US11972741B2/en

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0271Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping
    • G09G2320/0276Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping for the purpose of adaptation to the characteristics of a display device, i.e. gamma correction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0613The adjustment depending on the type of the information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0673Adjustment of display parameters for control of gamma adjustment, e.g. selecting another gamma curve
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0428Gradation resolution change
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/04Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals

Definitions

  • the present disclosure relates to a video reception method, a video transmission method, a video reception device, and a video transmission device.
  • the brightness range with the maximum brightness value expanded to express bright light such as specular reflection light that cannot be expressed with the current TV signal with more realistic brightness while maintaining the dark gradation in the conventional video HDR has attracted attention as a method that has been adopted.
  • the method of the luminance range supported by conventional TV signals is called SDR (Standard Dynamic Range), and the maximum luminance value was 100 nits, whereas in HDR the maximum is 1000 nits or more. It is assumed that the luminance value is enlarged.
  • one aspect of the present disclosure provides a video reception method, a video transmission method, a video reception device, or a video transmission device that can display an appropriate video in transmission or reception of a video signal corresponding to a plurality of luminance dynamic ranges.
  • a video reception method is a video reception method in a video reception apparatus including a display unit, which receives a reception signal in which a video signal and an audio signal are multiplexed, and demultiplexes the reception signal.
  • a display unit which receives a reception signal in which a video signal and an audio signal are multiplexed, and demultiplexes the reception signal.
  • To acquire the video signal and transfer characteristic information for specifying a transfer function corresponding to the luminance dynamic range of the video signal for each random access unit, and decoding the acquired video signal Then, the video data is acquired, and the video data is displayed while controlling the luminance dynamic range of the display unit for each random access unit according to the transfer characteristic information.
  • a video transmission method generates a video signal by encoding video data, and multiplexes the generated video signal and an audio signal, thereby obtaining a luminance dynamic range of the video signal.
  • a transmission signal including the transmission characteristic information for specifying a transfer function corresponding to the above for each random access unit is generated, and the transmission signal is transmitted.
  • This disclosure relates to transmission or reception of video signals corresponding to a plurality of luminance dynamic ranges.
  • a video receiving method, a video transmitting method, a video receiving device, or a video transmitting device capable of displaying an appropriate video can be provided.
  • FIG. 1 is a block diagram of a video receiving apparatus according to the first embodiment.
  • FIG. 2 is a flowchart of processing performed by the display control unit according to the first embodiment.
  • FIG. 3 is a flowchart of the video reception process according to the first embodiment.
  • FIG. 4 is a diagram illustrating an operation when a transfer characteristic is changed according to the first embodiment.
  • FIG. 5 is a diagram illustrating an operation when a transfer characteristic is changed according to the first embodiment.
  • FIG. 6 is a block diagram of the video transmission apparatus according to the first embodiment.
  • FIG. 7 is a diagram illustrating a flowchart of the video transmission process according to the first embodiment.
  • FIG. 8 is a diagram illustrating an abnormal operation when a transfer characteristic is changed according to the second embodiment.
  • FIG. 9 is a block diagram of a video receiving apparatus according to the second embodiment.
  • FIG. 10 is a diagram illustrating a flowchart of processing performed by the display control unit according to the first embodiment.
  • FIG. 11 is a diagram illustrating an example of a time stamp descriptor according to the third embodiment.
  • FIG. 12 is a diagram illustrating an example of the extended time stamp descriptor according to the third embodiment.
  • FIG. 13 is a diagram illustrating an example of a video component descriptor according to the third embodiment.
  • FIG. 14 is a diagram illustrating a flowchart of processing by the display control unit according to the third embodiment.
  • FIG. 15 is a diagram illustrating a flowchart of the video reception process according to the third embodiment.
  • the OETF (Optical-Electron Transfer Function: photoelectric transfer function) or EOTF (Electro-Optical Transfer Function) of a video signal is, for example, the video encoding standard ITU-T H.264. H.265
  • VUI Video Usability Information
  • SPS Sequence Parameter Set
  • the video receiver determines a control method for the video display unit based on the transfer characteristics.
  • Transfer characteristics are ITU-R BT. 2020 (hereinafter referred to as BT.2020), ARIB STD-B67 (hereinafter referred to as STD-B67), SMPTE ST2084 (hereinafter referred to as ST2084), and the like.
  • STD-B67 and ST2084 are known as a conventional BT.
  • Video signals including high brightness 10 to 100 times higher than 2020 can be handled.
  • conventional BT. 2020 and the like are called standard dynamic range (SDR).
  • HDR and SDR may be mixed for each program or each commercial.
  • the video receiving apparatus needs to operate by switching the control of the display unit according to the HDR or SDR.
  • a video reception method is a video reception method in a video reception device including a display unit, the reception step of receiving a reception signal in which a video signal and an audio signal are multiplexed, and the reception signal
  • a demultiplexing step for acquiring the video signal and transfer characteristic information for specifying a transfer function corresponding to a luminance dynamic range of the video signal for each random access unit.
  • the video receiving apparatus can acquire the transfer characteristic prior to decoding of the video signal by using the transfer characteristic information included in the multiplexing layer, the transfer characteristic switching process can be easily performed.
  • the transfer characteristic information may be included in control information for each random access unit included in the received signal.
  • the transfer characteristic information may be included in control information of a program including a plurality of random access units included in the received signal.
  • the transfer characteristic information includes first information for specifying a current transfer function, second information indicating whether or not the transfer function is switched in the program, and a transfer function after switching. Third information and fourth information for specifying a random access unit for switching the transfer function may be included.
  • the transfer characteristic information is information for specifying a first transfer function corresponding to the first luminance dynamic range or a second transfer function corresponding to a second dynamic range wider than the first luminance dynamic range with frame accuracy.
  • the luminance dynamic range of the display unit may be switched between the first luminance dynamic range and the second luminance dynamic range.
  • the video reception method further includes a determination step of determining whether the video data has been correctly acquired in the reception step, and the display step is determined to have failed to acquire the video data correctly in the determination step.
  • the luminance dynamic range of the display unit may be set to the first luminance dynamic range.
  • the determination step it may be determined whether the intra-coded frame has been correctly decoded.
  • the video signal is a video signal having a first resolution or a second resolution higher than the first resolution
  • the video receiving method further includes a resolution of the video signal between the first resolution and the second resolution.
  • a conversion step of converting the first resolution video signal into the second resolution video signal may be included.
  • the video reception method may further include a conversion step of converting the resolution of the video signal to the maximum resolution when the resolution of the video signal is lower than the maximum resolution defined by the broadcast service of the reception signal. Good.
  • the video transmission method includes an encoding step of generating video signals by encoding video data, and multiplexing the generated video signals and audio signals, A multiplexing step for generating a transmission signal including the transfer characteristic information for specifying a transfer function corresponding to the luminance dynamic range of the video signal for each random access unit; and a transmission step for transmitting the transmission signal.
  • the video receiving apparatus that receives the signal generated by the video transmission method can control the luminance dynamic range of the display unit for each random access unit, and can display more appropriate video.
  • the video receiving apparatus can acquire the transfer characteristic prior to decoding of the video signal by using the transfer characteristic information included in the multiplexing layer, the transfer characteristic switching process can be easily performed.
  • the transfer characteristic information may be included in control information for each random access unit included in the transmission signal.
  • the transfer characteristic information may be included in control information for each of a plurality of random access units included in the transmission signal.
  • the transfer characteristic information specifies first information for specifying a current transfer function, second information indicating whether or not the transfer function is switched in the plurality of random access units, and a transfer function after switching. And third information for specifying a random access unit for performing transfer function switching may be included.
  • the transfer characteristic information is information for specifying a first transfer function corresponding to the first luminance dynamic range or a second transfer function corresponding to a second dynamic range wider than the first luminance dynamic range with frame accuracy.
  • the luminance dynamic range of the display unit may be switched between the first luminance dynamic range and the second luminance dynamic range.
  • the video reception device includes a reception unit that receives a reception signal in which a video signal and an audio signal are multiplexed; and the video signal by demultiplexing the reception signal; Demultiplexing unit for acquiring transfer characteristic information for specifying a transfer function corresponding to the luminance dynamic range of the video signal for each random access unit, and acquiring the video data by decoding the acquired video signal And a display unit that displays the video data while controlling a luminance dynamic range for each random access unit according to the transfer characteristic information.
  • the video receiving apparatus can control the luminance dynamic range of the display unit for each random access unit, and can display more appropriate video.
  • the video receiving apparatus can acquire the transfer characteristic prior to decoding of the video signal by using the transfer characteristic information included in the multiplexing layer, the transfer characteristic switching process can be easily performed.
  • the video transmission device includes an encoding unit that generates video signals by encoding video data, and the generated video signals and audio signals.
  • a multiplexing unit for generating a transmission signal including transmission characteristic information before specifying a transfer function corresponding to the luminance dynamic range of the video signal for each random access unit; and a transmission unit for transmitting the transmission signal.
  • the video receiving apparatus that receives the signal generated by the video transmitting apparatus can control the luminance dynamic range of the display unit for each random access unit, and can display more appropriate video.
  • the video receiving apparatus can acquire the transfer characteristic prior to decoding of the video signal by using the transfer characteristic information included in the multiplexing layer, the transfer characteristic switching process can be easily performed.
  • the video receiving apparatus controls the luminance dynamic range of the display unit with the frame accuracy using the transfer characteristic information indicating the transfer characteristic with the frame accuracy. Thereby, the video receiving apparatus can display a more appropriate video.
  • FIG. 1 is a block diagram of a video receiving apparatus 100 according to the present embodiment.
  • the video receiving device 100 is, for example, a television or the like, receives a reception signal 111 transmitted by a broadcast wave, and displays a video based on the received reception signal 111.
  • the video receiving device 100 includes a receiving unit 101, a demultiplexing unit 102, a video decoding unit 103, a display control unit 104, and a display unit 105.
  • the receiving unit 101 receives the reception signal 111.
  • the reception signal 111 is a system stream in which a video signal and an audio signal are multiplexed.
  • the demultiplexing unit 102 demultiplexes the received signal 111 (system decoding) to generate a video signal 112 that is a video stream. Further, the demultiplexing unit 102 outputs the transfer characteristic acquired from the descriptor or the like included in the received signal 111 as the first transfer characteristic information 113. That is, the first transfer characteristic information 113 is included in a multiplexing layer.
  • the video decoding unit 103 generates video data 114 by decoding the video signal 112.
  • the video decoding unit 103 outputs the transfer characteristic acquired from the SPS as the second transfer characteristic information 115.
  • the second transfer characteristic information 115 is included in the video coding layer (Video Coding Layer).
  • the second transfer characteristic information 115 is information for specifying a transfer function (OETF or EOTF) with frame accuracy corresponding to the luminance dynamic range of the video data 114.
  • the second transfer characteristic information 115 is the first transfer function corresponding to the first luminance dynamic range (SDR) or the second transfer function corresponding to the second dynamic range (HDR) wider than the first luminance dynamic range. Is information for identifying the frame with frame accuracy. That is, the second transfer characteristic information 115 indicates whether the video data 114 is SDR or HDR.
  • the second transfer characteristic information 115 may indicate which type of HDR. That is, the second transfer characteristic information 115 indicates the luminance dynamic range of the video data 114, for example, any one of a plurality of predetermined luminance dynamic ranges.
  • SPS is control information in sequence units (multiple frame units) included in the video signal 112.
  • the display control unit 104 generates control information 116 for controlling the display unit 105 according to the first transfer characteristic information 113 and the second transfer characteristic information 115.
  • the display unit 105 displays the video data 114 while controlling the luminance dynamic range with frame accuracy according to the control information 116 (that is, the first transfer characteristic information 113 and the second transfer characteristic information 115).
  • the display unit 105 includes a video characteristic conversion unit 106 and a display device 107.
  • the video characteristic converter 106 generates the input signal 117 by converting the video data 114 in accordance with the control information 116. Specifically, the video characteristic conversion unit 106 converts the video data 114 into the input signal 117 using a transfer function indicated by the first transfer characteristic information 113 or the second transfer characteristic information 115.
  • the display device 107 is, for example, a liquid crystal panel, and changes the luminance dynamic range of the video to be displayed according to the control information 116. For example, when the display device 107 is a liquid crystal panel, the display device 107 changes the maximum luminance of the backlight.
  • FIG. 1 a configuration using both the first transfer characteristic information 113 and the second transfer characteristic information 115 is described, but at least the second transfer characteristic information 115 may be used.
  • the control using the second transfer characteristic information 115 will be described in detail.
  • FIG. 2 is a flowchart of display control processing by the display control unit 104. The process shown in FIG. 2 is performed every frame or whenever the second transfer characteristic information 115 is changed.
  • the display control unit 104 determines whether SDR or HDR is indicated by the second transfer characteristic information 115 (S101).
  • the display control unit 104 When HDR is indicated by the second transfer characteristic information 115 (Yes in S101), the display control unit 104 outputs control information 116 for HDR display (S102). Thereby, the display unit 105 displays an image with a luminance dynamic range corresponding to HDR.
  • the display control unit 104 outputs control information 116 for SDR display (S103). Thereby, the display unit 105 displays an image with a luminance dynamic range corresponding to SDR.
  • the switching of the transfer characteristic and the control of the display unit 105 can be synchronized with the frame accuracy.
  • the HDR display control information 116 may include identification information of the HDR method. Thereby, the display unit 105 can display an image with the luminance dynamic range of the corresponding method.
  • FIG. 3 is a flowchart of video reception processing by the video reception device 100.
  • the receiving unit 101 receives a received signal 111 (S111).
  • the demultiplexer 102 generates the video signal 112 by demultiplexing the received signal 111 (S112).
  • the video decoding unit 103 generates the video data 114 by decoding the video signal 112, and acquires the second transfer characteristic information 115 (S113).
  • the display control unit 104 controls the luminance dynamic range of the display unit 105 according to the second transfer characteristic information 115. Specifically, the display control unit 104 determines whether each frame is HDR or SDR with frame accuracy based on the second transfer characteristic information 115 (S114). In the case of HDR (Yes in S114), the display unit 105 displays an image with an HDR luminance dynamic range (S115). When it is SDR (No in S114), the display unit 105 displays an image with the luminance dynamic range of SDR (S116).
  • FIG. 4 is a diagram showing a state when switching from the SDR program to the HDR program.
  • FIG. 5 is a diagram showing a state when switching from the HDR program to the SDR program. As shown in FIGS. 4 and 5, the above processing can appropriately switch between SDR and HDR with frame accuracy.
  • FIG. 6 is a block diagram of video transmission apparatus 200 according to the present embodiment.
  • a video transmission apparatus 200 illustrated in FIG. 6 includes a generation unit 201 and a transmission unit 202.
  • the generating unit 201 generates a transmission signal 212 including video data and second transfer characteristic information for specifying a transfer function corresponding to the luminance dynamic range of the video data with frame accuracy.
  • the generation unit 201 includes a video encoding unit 203 and a multiplexing unit 204.
  • FIG. 7 is a flowchart of video transmission processing by the video transmission device 200.
  • the video encoding unit 203 generates the video signal 211 by encoding the video data and the second transfer characteristic information (S201).
  • the second transfer characteristic information corresponds to the above-described second transfer characteristic information 115, the first transfer function corresponding to the first luminance dynamic range (for example, SDR), or the second dynamic range wider than the first luminance dynamic range. This is information for specifying the second transfer function corresponding to (for example, HDR) with frame accuracy.
  • the second transfer characteristic information is stored in the SPS included in the video signal 211.
  • the multiplexing unit 204 generates the transmission signal 212 by multiplexing the encoded video signal 211 and audio signal (S202).
  • the transmission unit 202 transmits the generated transmission signal 212 (S203).
  • the video transmission device 200 generates the transmission signal 212 including the second transfer characteristic information for specifying the transfer function with frame accuracy.
  • the video receiving apparatus that receives the transmission signal 212 can control the luminance dynamic range of the display unit with frame accuracy, and can display a more appropriate video.
  • FIG. 8 is a diagram illustrating a situation when a reception error occurs due to radio wave interference or the like.
  • the video decoding unit 103 continues to display the previous frame for error concealment. That is, the SDR program frame is repeatedly displayed.
  • the luminance dynamic range of the display unit is set to HDR, so the frame of the SDR program is displayed in the HDR luminance dynamic range. As a result, there is a problem in that an image with higher brightness than the original intention is displayed.
  • FIG. 9 is a block diagram of video receiving apparatus 100A according to the present embodiment.
  • Video receiving apparatus 100A shown in FIG. 9 further includes abnormality detecting unit 108 and message superimposing unit 109 in display unit 105A, compared to video receiving apparatus 100 shown in FIG. A function is added to the display control unit 104A.
  • the abnormality detection unit 108 determines whether the video data 114 (video signal 112) has been correctly acquired. Specifically, the anomaly detection unit 108 detects packet loss based on the sequence number of the packet, analyzes the payload of the packet and acquires the start position of the frame data, thereby acquiring all the frame data. It is determined whether (normal) or only part of the frame data has been acquired (abnormal). In addition, the abnormality detection unit 108 outputs abnormality notification information 118 indicating the determination result to the display control unit 104A. That is, information indicating that an abnormality has occurred or information for specifying a frame in which an abnormality has occurred is notified to the display control unit 104A.
  • the display control unit 104A generates control information 116 and a message 119 according to the abnormality notification information 118 in addition to the first transfer characteristic information 113 and the second transfer characteristic information 115. Specifically, when there is an abnormality, the display control unit 104A generates a message 119 indicating that there is an abnormality and also generates control information 116 for SDR display.
  • the message superimposing unit 109 generates the input signal 120 by superimposing the message 119 on the video data (input signal 117) according to the control information 116 and the message 119, and outputs the generated input signal 120 to the display device 107.
  • a message such as “an error has occurred” is displayed on the display device 107, so that it is possible to inform the viewer that the device is not malfunctioning.
  • FIG. 10 is a flowchart of a display control process performed by the display control unit 104A.
  • the display control unit 104A determines whether the second transfer characteristic information 115 has been updated (S121).
  • the display control unit 104A starts to determine whether to switch display control.
  • the display control unit 104A determines whether the video data has been acquired correctly. Specifically, the display control unit 104A determines whether the intra-coded frame has been normally decoded based on the abnormality notification information 118 (S122). When the intra-coded frame is not normally decoded (No in S122), the display control unit 104A outputs the control information 116 for SDR display (S123). Thereby, the display unit 105 displays an image with a luminance dynamic range corresponding to SDR. That is, when it is determined that the video data has not been acquired correctly, the display control unit 104A sets the luminance dynamic range of the display unit 105 to SDR (first luminance dynamic range).
  • the displayed frame may include the pixels of the frame before switching.
  • the display control is set for SDR display, so that the SDR program frame can be suppressed from being displayed with the HDR high brightness setting.
  • the display control unit 104A determines whether SDR or HDR is indicated by the updated second transfer characteristic information 115 (S124). When HDR is indicated by the second transfer characteristic information 115 (Yes in S124), the display control unit 104A outputs control information 116 for HDR display (S125). On the other hand, when SDR is indicated by the second transfer characteristic information 115 (No in S124), the display control unit 104A outputs the control information 116 for SDR display (S126).
  • the video receiving device 100A can suppress the display of an excessively bright video when an error occurs by displaying the video with the SDR luminance dynamic range when the error occurs.
  • the PTS and DTS of an access unit (corresponding to a picture) that is the head in decoding order in a random access unit called MPU (Media Processing Unit) can be transmitted by a descriptor (descriptor).
  • MPU Media Processing Unit
  • the PTS of the MPU head access unit or the MPU head access unit The DTS and the DTS and PTS of the subsequent access unit are transmitted as program control information.
  • FIG. 11 is a diagram illustrating a syntax example of an MPU time stamp descriptor (MPU_Timestamp_Descriptor) including the HDR identification information 301.
  • FIG. 12 is a diagram illustrating a syntax example of an MPU extended time stamp descriptor (MPU_Extended_Timestamp_Descriptor) including the HDR identification information 301.
  • the EOTF of the access unit constituting the MPU is set to HDR or the transmission signal 212 (reception signal 111).
  • HDR identification information 301 (mpu_hdr_indicator) indicating which of the SDRs can be added.
  • HDR identification information 301 may include information for identifying the type of HDR EOTF. .
  • other descriptors may be used as long as EOTF identification information in units of MPU can be transmitted.
  • 13818-1 AMD6 Delivery of Timeline for External Data
  • EOTF identification information in random access units may be stored using descriptors as in the case of MMT, or EOTF identification information in random access units may be signaled using header information of PES or TS.
  • the first transfer characteristic information 113 is included in the control information for each random access unit included in the transmission signal 212 (reception signal 111).
  • the random access unit is a unit composed of a plurality of access units (frames) for which arbitrary access is guaranteed.
  • the first transfer characteristic information 113 may be stored not in MPU unit information such as an MPU time stamp descriptor but in program unit information including a plurality of MPUs.
  • MPU unit information such as an MPU time stamp descriptor
  • program unit information including a plurality of MPUs.
  • video component descriptor which is information in units of programs. Therefore, the first transfer characteristic information 113 can also be stored in this video component descriptor.
  • the information in the program unit is periodically transmitted such as every 0.5 seconds or 0.1 seconds, the information may not be updated in the frame unit or the random access unit. Therefore, in this case, transfer characteristic information that will be effective in the future is stored together with transfer characteristic information that is currently effective.
  • FIG. 13 is a diagram illustrating a syntax example of a video component descriptor.
  • Current_EOTF first information indicates an EOTF (transfer function) that is currently valid
  • EOTF_update_flag second information indicates whether the EOTF will be switched in the future. That is, EOTF_update_flag (second information) indicates whether or not the transfer function is switched in the program.
  • the video component descriptor When the EOTF_update_flag (second information) indicates that the EOTF is switched, the video component descriptor includes a new_EOTF (third information) indicating the EOTF after switching, and an MPU sequence in which the EOTF after the switching becomes valid.
  • New_EOTF_start_mpu_sequence_number (fourth information) indicating the number. That is, new_EOTF_start_mpu_sequence_number (fourth information) is information for specifying a random access unit for performing EOTF switching.
  • the new_EOTF field may be omitted.
  • the video receiving apparatus can be based on only the information of the multiplexing layer (the attribute information of the multiplexed AV data and the header information of the packet storing the AV data).
  • the transfer characteristic of the access unit that constitutes can be acquired.
  • STD System in the packet with the same ID
  • This method can also be applied to seamless switching between multiple audio codecs.
  • video receiving apparatus 100A is different from that of Embodiment 2 in that a function is added to display control unit 104A in the configuration shown in FIG.
  • the demultiplexing unit 102 acquires the above-described transfer characteristics (HDR identification information 301 and the like) from the information of the multiplexed layer, and specifies the acquired transfer characteristics.
  • the transfer characteristic information 113 is output to the display control unit 104A.
  • the video receiving apparatus 100A can acquire the first transfer characteristic information 113 prior to decoding of the video signal 112, the first transfer characteristic information 113 is acquired earlier in time than the second transfer characteristic information 115. it can. Therefore, the period from when the display control unit 104A acquires the transfer characteristic information to when the video characteristic conversion unit 106 and the display device 107 are actually controlled can be lengthened.
  • the time margin decreases as the frame rate increases, so transmission from the multiplexing layer in advance. The effect of acquiring characteristics is high.
  • FIG. 14 is a flowchart of the display control process performed by the display control unit 104A. The process shown in FIG. 14 differs from the process shown in FIG. 10 in steps S121A and S124A.
  • step S121A the display control unit 104A determines whether or not the first transfer characteristic information 113 is updated in addition to the second transfer characteristic information 115. Further, since the head access unit of the MPU is an intra-coded frame, in step S122, the display control unit 104A sets the sequence number (mpu_sequence_number) of the same MPU when operating based on the first transfer characteristic information 113. It operates based on the corresponding first transfer characteristic information 113 and the decoding result of the intra-coded frame. In step S124A, the display control unit 104A operates based on the first transfer characteristic information 113 or the second transfer characteristic information 115.
  • FIG. 14 shows an example in which both the first transfer characteristic information 113 and the second transfer characteristic information 115 are used, only the first transfer characteristic information 113 may be used.
  • FIG. 15 is a flowchart of video reception processing by the video reception device 100A according to the present embodiment.
  • the receiving unit 101 receives a received signal 111 (S111).
  • the demultiplexing unit 102 demultiplexes the received signal 111 to generate the video signal 112 and acquire the first transfer characteristic information 113 (S112A).
  • the first transfer characteristic information 113 is information for specifying a transfer function (OETF or EOTF) corresponding to the luminance dynamic range of the video data 114 (video signal 112) for each random access unit (MPU unit).
  • the first transfer characteristic information 113 includes the first transfer function corresponding to the first luminance dynamic range (SDR) or the first transfer function corresponding to the second dynamic range (HDR) wider than the first luminance dynamic range. Is information for identifying each random access unit. That is, the first transfer characteristic information 113 indicates whether the video data 114 is SDR or HDR. Further, when there are a plurality of formats in HDR, the first transfer characteristic information 113 may indicate which type of HDR. That is, the first transfer characteristic information 113 indicates the luminance dynamic range of the video data 114, for example, any one of a plurality of predetermined luminance dynamic ranges.
  • the video decoding unit 103 generates video data 114 by decoding the video signal 112 (S113).
  • the display control unit 104A controls the luminance dynamic range of the display unit 105 according to the first transfer characteristic information 113. Specifically, the display control unit 104A determines whether each MPU is an HDR or an SDR based on the first transfer characteristic information 113 (S114A). In the case of HDR (Yes in S114), the display unit 105 displays an image with an HDR luminance dynamic range (S115). When it is SDR (No in S114), the display unit 105 displays an image with the luminance dynamic range of SDR (S116).
  • the video receiving device 100A can control the luminance dynamic range of the display unit 105 for each random access unit, and thus can display a more appropriate video.
  • the video receiving device 100A can acquire the transfer characteristic prior to decoding of the video signal 112 by using the first transfer characteristic information 113 included in the multiplexing layer, so that the transfer characteristic switching process can be easily performed. Can do.
  • the configuration and operation of the video transmission apparatus 200 that generates the transmission signal 212 corresponding to the reception signal 111 described above are substantially the same as those of the first embodiment described above.
  • step S202 shown in FIG. 7 the multiplexing unit 204 generates a transmission signal 212 including the first transfer characteristic information 113.
  • the video transmission device 200 generates the transmission signal 212 including the first transfer characteristic information for specifying the transfer function for each random access unit.
  • the video receiving apparatus that receives the transmission signal 212 can control the luminance dynamic range of the display unit for each random access unit, and thus can display a more appropriate video.
  • the video reception device since the first transfer characteristic information 113 is included in the multiplexing layer, the video reception device can easily perform the transfer characteristic switching process.
  • HDMI registered trademark
  • an image receiving device that is a STB (Set Top Box), DVD device, or Blu-ray (registered trademark) device
  • the video receiver and the display device are connected via the protocol.
  • HDMI registered trademark
  • a protocol re-authentication procedure occurs when the resolution of a stream is switched.
  • the video reception device when a resolution change such as 2K (1920 ⁇ 1080 pixels, etc.) and 4K (3840 ⁇ 2160 pixels, etc.) can occur, the video reception device outputs a video signal in accordance with the maximum resolution at the start of reproduction. It is desirable to do. That is, when 2K and 4K coexist, the reception apparatus upconverts the 2K stream to 4K and outputs it when starting playback from the 2K stream. By doing so, even when the signal is switched to 4K in the middle, the resolution remains 4K, and the switching of the resolution does not occur. For example, when switching between 2K SDR and 4K HDR occurs, the video reception device converts the 2K SDR into a 4K SDR and outputs the converted 4K SDR.
  • the video signal (video data 114) is a video signal having a first resolution or a second resolution higher than the first resolution.
  • the video receiving device 100A converts the video signal having the first resolution into a video signal having the second resolution.
  • identification information of the maximum resolution allowed in the broadcasting service is indicated by a descriptor or the like, so that the video receiving apparatus operates so that the output signal to HDMI (registered trademark) always matches the maximum resolution. May be.
  • the maximum resolution is defined as either 4K or 8K.
  • the multiplexing method is TS, the maximum resolution is defined as 2K, and when it is MMT, the maximum resolution is defined as 4K. In this way, the video receiving apparatus may always convert the video signal to the maximum resolution according to the multiplexing method and output it.
  • the video reception device 100A converts the resolution of the video signal to the maximum resolution.
  • the video reception device and the video transmission device according to the embodiment of the present disclosure have been described.
  • the present disclosure is not limited to this embodiment.
  • each processing unit included in the video reception device and the video transmission device according to the above-described embodiments is typically realized as an LSI that is an integrated circuit. These may be individually made into one chip, or may be made into one chip so as to include a part or all of them.
  • circuits are not limited to LSI, and may be realized by a dedicated circuit or a general-purpose processor.
  • An FPGA Field Programmable Gate Array
  • reconfigurable processor that can reconfigure the connection and setting of circuit cells inside the LSI may be used.
  • each component may be configured by dedicated hardware or may be realized by executing a software program suitable for each component.
  • Each component may be realized by a program execution unit such as a CPU or a processor reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory.
  • the present disclosure may be realized as a video reception method or a video transmission method executed by a video reception device or a video transmission device.
  • division of functional blocks in the block diagram is an example, and a plurality of functional blocks can be realized as one functional block, a single functional block can be divided into a plurality of functions, or some functions can be transferred to other functional blocks. May be.
  • functions of a plurality of functional blocks having similar functions may be processed in parallel or time-division by a single hardware or software.
  • the video reception device and the video transmission device have been described based on the embodiment, but the present disclosure is not limited to this embodiment. Unless it deviates from the gist of the present disclosure, various modifications conceived by those skilled in the art have been made in this embodiment, and forms constructed by combining components in different embodiments are also within the scope of one or more aspects. May be included.
  • the present disclosure can be applied to a video reception device and a video transmission device such as a TV.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Library & Information Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Picture Signal Circuits (AREA)

Abstract

表示部を備える映像受信装置における映像受信方法であって、映像信号と音声信号とが多重化された受信信号を受信し、受信信号を逆多重化することで、映像信号と、映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための第1伝達特性情報を取得し、取得された映像信号を復号することで映像データを取得し、第1伝達特性情報に応じてランダムアクセス単位毎に表示部の輝度ダイナミックレンジを制御しながら映像データを表示する。

Description

映像受信方法、映像送信方法、映像受信装置及び映像送信装置
 本開示は、映像受信方法、映像送信方法、映像受信装置及び映像送信装置に関する。
 従来の映像における暗部階調を維持しつつ、現行のTV信号では表現不能な鏡面反射光などの明るい光を、より現実に近い明るさで表現するために最大輝度値を拡大した輝度範囲に対応させた方式として、HDR(High Dynamic Range)が注目されている。具体的には、これまでのTV信号が対応している輝度範囲の方式は、SDR(Standard Dynamic Range)と呼ばれ、最大輝度値が100nitであったのに対して、HDRでは1000nit以上まで最大輝度値を拡大することが想定されている。
ARIB STANDARD ARIB STD-B67 Version 1.0 July 3, 2015
 このような、複数の輝度ダイナミックレンジに対応した映像信号の送信又は受信においては、受信装置において、より適切な映像を表示できることが望まれている。
 そこで、本開示の一態様は、複数の輝度ダイナミックレンジに対応した映像信号の送信又は受信において、適切な映像を表示できる映像受信方法、映像送信方法、映像受信装置又は映像送信装置を提供する。
 本開示の一態様に係る映像受信方法は、表示部を備える映像受信装置における映像受信方法であって、映像信号と音声信号とが多重化された受信信号を受信し、前記受信信号を逆多重化することで、前記映像信号と、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報とを取得し、取得された前記映像信号を復号することで映像データを取得し、前記伝達特性情報に応じてランダムアクセス単位毎に前記表示部の輝度ダイナミックレンジを制御しながら前記映像データを表示する。
 本開示の一態様に係る映像送信方法は、映像データを符号化することで映像信号を生成し、生成された前記映像信号と音声信号とを多重化することで、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報前を含む送信信号を生成し、前記送信信号を送信する。
 なお、これらの全般的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なCD-ROMなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。
 本開示は、複数の輝度ダイナミックレンジに対応した映像信号の送信又は受信において。適切な映像を表示できる映像受信方法、映像送信方法、映像受信装置又は映像送信装置を提供できる。
図1は、実施の形態1に係る映像受信装置のブロック図である。 図2は、実施の形態1に係る表示制御部による処理のフローチャートを示す図である。 図3は、実施の形態1に係る映像受信処理のフローチャートを示す図である。 図4は、実施の形態1に係る伝達特性変化時の動作を示す図である。 図5は、実施の形態1に係る伝達特性変化時の動作を示す図である。 図6は、実施の形態1に係る映像送信装置のブロック図である。 図7は、実施の形態1に係る映像送信処理のフローチャートを示す図である。 図8は、実施の形態2に係る伝達特性変化時の異常動作を示す図である。 図9は、実施の形態2に係る映像受信装置のブロック図である。 図10は、実施の形態1に係る表示制御部による処理のフローチャートを示す図である。 図11は、実施の形態3に係るタイムスタンプ記述子の一例を示す図である。 図12は、実施の形態3に係る拡張タイムスタンプ記述子の一例を示す図である。 図13は、実施の形態3に係る映像コンポーネント記述子の一例を示す図である。 図14は、実施の形態3に係る表示制御部による処理のフローチャートを示す図である。 図15は、実施の形態3に係る映像受信処理のフローチャートを示す図である。
 (本開示の基礎となった知見)
 映像信号のOETF(Optical-Electro Transfer Function:光電伝達関数)又はEOTF(Electro-Optical Transfer Function:電光伝達関数)は、例えば、映像符号化標準のITU-T H.265|ISO/IEC 23008-2 HEVCでは、Sequence Parameter Set(SPS)中のVideo Usability Information(VUI)において、transfer characteristics(伝達特性)というシンタクスにより通知される。このSPSの伝達特性を用いると、フレーム精度で伝達特性(伝達関数)の切り替わりを通知することができる。映像受信装置は伝達特性に基づいて、映像表示部の制御方法を決定する。
 テレビ放送など映像信号と音響信号とを多重化して伝送する際に用いられるMPEG-2 TS(トランスポートストリーム)標準では、上記SPSに含まれるパラメータ及びパラメータに関連する情報を、Program-specific information(PSI)のDescriptor(記述子)に記載し、より上位の層で映像受信装置の動作に関係する情報を通知する方法が知られている。伝達特性についても、PSIの記述子を利用することで、映像受信装置はより簡単に映像表示部の制御方法を決定できる。一般的に、PSIは一定周期で多重化ストリームに挿入されるため、映像信号のフレームとは同期していない。なお、MPEG-H MMT標準では、PSIと同様の仕組みがMMT-SIとして規定されている。
 伝達特性は、ITU-R BT.2020(以下、BT.2020)、ARIB STD-B67(以下、STD-B67)、及びSMPTE ST2084(以下、ST2084)などで規定されている。STD-B67及びST2084は、高ダイナミックレンジ(HDR)と呼ばれる、従来のBT.2020より10倍から100倍の高輝度を含む映像信号を扱うことができる。HDRに対し、従来のBT.2020などは標準ダイナミックレンジ(SDR)と呼ばれる。
 HDRに対応したテレビ放送では、番組毎又はコマーシャル毎にHDRとSDRとが混在する可能性がある。このため映像受信装置は、HDRかSDRかに応じて表示部の制御を切り替えて動作する必要がある。
 本開示の一態様に係る映像受信方法は、表示部を備える映像受信装置における映像受信方法であって、映像信号と音声信号とが多重化された受信信号を受信する受信ステップと、前記受信信号を逆多重化することで、前記映像信号と、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報とを取得する逆多重化ステップと、取得された前記映像信号を復号することで映像データを取得する復号ステップと、前記伝達特性情報に応じてランダムアクセス単位毎に前記表示部の輝度ダイナミックレンジを制御しながら前記映像データを表示する表示ステップとを含む。
 これにより、ランダムアクセス単位毎に表示部の輝度ダイナミックレンジを制御できるので、より適切な映像を表示できる。また、映像受信装置は、多重化レイヤに含まれる伝達特性情報を用いることで、映像信号の復号に先立って伝達特性を取得できるので、伝達特性の切り替え処理を容易に行うことができる。
 例えば、前記伝達特性情報は、前記受信信号に含まれるランダムアクセス単位毎の制御情報に含まれてもよい。
 例えば、前記伝達特性情報は、前記受信信号に含まれる、複数のランダムアクセス単位を含むプログラムの制御情報に含まれてもよい。
 例えば、前記伝達特性情報は、現在の伝達関数を特定するための第1情報と、前記プログラム内において伝達関数が切り替わるか否かを示す第2情報と、切り替わり後の伝達関数を特定するための第3情報と、伝達関数の切り替えを行うランダムアクセス単位を特定するための第4情報とを含んでもよい。
 例えば、前記伝達特性情報は、第1輝度ダイナミックレンジに対応した第1伝達関数、又は、第1輝度ダイナミックレンジより広い第2ダイナミックレンジに対応した第2伝達関数をフレーム精度で特定するための情報であり、前記表示ステップでは、前記表示部の輝度ダイナミックレンジを前記第1輝度ダイナミックレンジと前記第2輝度ダイナミックレンジとで切り替えてもよい。
 例えば、前記映像受信方法は、さらに、前記受信ステップにおいて、映像データを正しく取得できたかを判定する判定ステップを含み、前記表示ステップでは、前記判定ステップにおいて映像データを正しく取得できなかったと判定された場合、前記表示部の輝度ダイナミックレンジを前記第1輝度ダイナミックレンジに設定してもよい。
 これにより、エラー発生時に過度に明るい映像が表示されることを抑制できる。
 例えば、前記判定ステップでは、前記判定として、イントラ符号化フレームを正しく復号できたかを判定してもよい。
 例えば、前記映像信号は、第1解像度又は前記第1解像度より高い第2解像度の映像信号であり、前記映像受信方法は、さらに、前記映像信号の解像度が第1解像度と第2解像度との間で切り替わる場合には、前記第1解像度の映像信号を前記第2解像度の映像信号に変換する変換ステップを含んでもよい。
 これにより、解像度の切り替わりの発生を抑制できる。
 例えば、前記映像受信方法は、さらに、前記映像信号の解像度が前記受信信号の放送サービスで規定されている最大解像度より低い場合、当該映像信号の解像度を前記最大解像度に変換する変換ステップを含んでもよい。
 これにより、解像度の切り替わりの発生を抑制できる。
 また、本開示の一態様に係る映像送信方法は、映像データを符号化することで映像信号を生成する符号化ステップと、生成された前記映像信号と音声信号とを多重化することで、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報前を含む送信信号を生成する多重化ステップと、前記送信信号を送信する送信ステップとを含む。
 これにより、当該映像送信方法により生成された信号を受信する映像受信装置は、ランダムアクセス単位毎に表示部の輝度ダイナミックレンジを制御できるので、より適切な映像を表示できる。また、映像受信装置は、多重化レイヤに含まれる伝達特性情報を用いることで、映像信号の復号に先立って伝達特性を取得できるので、伝達特性の切り替え処理を容易に行うことができる。
 例えば、前記伝達特性情報は、前記送信信号に含まれるランダムアクセス単位毎の制御情報に含まれてもよい。
 例えば、前記伝達特性情報は、前記送信信号に含まれる複数ランダムアクセス単位毎の制御情報に含まれてもよい。
 例えば、前記伝達特性情報は、現在の伝達関数を特定するための第1情報と、当該複数ランダムアクセス単位において伝達関数が切り替わるか否かを示す第2情報と、切り替わり後の伝達関数を特定するための第3情報と、伝達関数の切り替えを行うランダムアクセス単位を特定するための第4情報とを含んでもよい。
 例えば、前記伝達特性情報は、第1輝度ダイナミックレンジに対応した第1伝達関数、又は、第1輝度ダイナミックレンジより広い第2ダイナミックレンジに対応した第2伝達関数をフレーム精度で特定するための情報であり、前記表示ステップでは、前記表示部の輝度ダイナミックレンジを前記第1輝度ダイナミックレンジと前記第2輝度ダイナミックレンジとで切り替えてもよい。
 また、本開示の一態様に係る映像受信装置は、映像信号と音声信号とが多重化された受信信号を受信する受信部と、前記受信信号を逆多重化することで、前記映像信号と、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報とを取得する逆多重化部と、取得された前記映像信号を復号することで映像データを取得する復号部と、前記伝達特性情報に応じてランダムアクセス単位毎に輝度ダイナミックレンジを制御しながら前記映像データを表示する表示部とを備える。
 これにより、映像受信装置は、ランダムアクセス単位毎に表示部の輝度ダイナミックレンジを制御できるので、より適切な映像を表示できる。また、映像受信装置は、多重化レイヤに含まれる伝達特性情報を用いることで、映像信号の復号に先立って伝達特性を取得できるので、伝達特性の切り替え処理を容易に行うことができる。
 また、本開示の一態様に係る映像送信装置は、映像データを符号化することで映像信号を生成する符号化部と、生成された前記映像信号と音声信号とを多重化することで、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報前を含む送信信号を生成する多重化部と、前記送信信号を送信する送信部とを備える。
 これにより、当該映像送信装置により生成された信号を受信する映像受信装置は、ランダムアクセス単位毎に表示部の輝度ダイナミックレンジを制御できるので、より適切な映像を表示できる。また、映像受信装置は、多重化レイヤに含まれる伝達特性情報を用いることで、映像信号の復号に先立って伝達特性を取得できるので、伝達特性の切り替え処理を容易に行うことができる。
 以下、実施の形態について、図面を参照しながら具体的に説明する。
 なお、以下で説明する実施の形態は、いずれも本開示の一具体例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
 (実施の形態1)
 本実施の形態に係る映像受信装置は、フレーム精度で伝達特性を示す伝達特性情報を用いて、フレーム精度で表示部の輝度ダイナミックレンジの制御を行う。これにより、当該映像受信装置は、より適切な映像を表示できる。
 まず、本実施の形態に係る映像受信装置の構成を説明する。図1は、本実施の形態に係る映像受信装置100のブロック図である。映像受信装置100は、例えば、テレビ等であり、放送波により送信された受信信号111を受信し、受信した受信信号111に基づく映像を表示する。映像受信装置100は、受信部101と、逆多重化部102と、映像復号部103と、表示制御部104と、表示部105とを備える。
 受信部101は、受信信号111を受信する。受信信号111は、映像信号と音声信号とが多重化されたシステムストリームである。
 逆多重化部102は、受信信号111を逆多重化(システム復号)することで、映像ストリームである映像信号112を生成する。また、逆多重化部102は、受信信号111に含まれるデスクリプタ等から取得した伝達特性を、第1伝達特性情報113として出力する。つまり、第1伝達特性情報113は、多重化レイヤ(Multiplexing Layer)に含まれる。
 映像復号部103は、映像信号112を復号することで映像データ114を生成する。また、映像復号部103は、SPSから取得した伝達特性を、第2伝達特性情報115として出力する。つまり、第2伝達特性情報115は、映像符号化レイヤ(Video Coding Layer)に含まれる。
 この第2伝達特性情報115は、映像データ114の輝度ダイナミックレンジに対応するフレーム精度での伝達関数(OETF又はEOTF)を特定するための情報である。例えば、この第2伝達特性情報115は、第1輝度ダイナミックレンジ(SDR)に対応した第1伝達関数、又は、第1輝度ダイナミックレンジより広い第2ダイナミックレンジ(HDR)に対応した第2伝達関数をフレーム精度で特定するための情報である。つまり、第2伝達特性情報115は、映像データ114がSDRであるかHDRであるかを示す。また、HDRに複数の形式が存在する場合には、第2伝達特性情報115は、どの形式のHDRであるかを示してもよい。つまり、第2伝達特性情報115は、映像データ114の輝度ダイナミックレンジを示し、例えば、予め定められた複数の輝度ダイナミックレンジのうちのいずれかを示す。
 また、SPSとは、映像信号112に含まれる、シーケンス単位(複数フレーム単位)の制御情報である。
 表示制御部104は、第1伝達特性情報113及び第2伝達特性情報115に応じて、表示部105を制御する制御情報116を生成する。
 表示部105は、制御情報116(つまり第1伝達特性情報113及び第2伝達特性情報115)に応じてフレーム精度で輝度ダイナミックレンジを制御しながら映像データ114を表示する。この表示部105は、映像特性変換部106と、表示デバイス107とを備える。
 映像特性変換部106は、制御情報116に応じて、映像データ114を変換することで入力信号117を生成する。具体的には、映像特性変換部106は、第1伝達特性情報113又は第2伝達特性情報115で示される伝達関数を用いて、映像データ114を入力信号117に変換する。
 表示デバイス107は、例えば、液晶パネルであり、制御情報116に応じて、表示する映像の輝度ダイナミックレンジを変更する。例えば、表示デバイス107が液晶パネルの場合には、表示デバイス107は、バックライトの最高輝度を変更する。
 次に、映像受信装置100の動作を説明する。なお、図1では、第1伝達特性情報113及び第2伝達特性情報115の両方を用いる構成を記載しているが、少なくとも第2伝達特性情報115が用いられればよい。以下、第2伝達特性情報115を用いた制御について詳細に説明する。
 図2は、表示制御部104による表示制御処理のフローチャートである。なお、図2に示す処理は、フレーム単位、又は第2伝達特性情報115が変更される毎に行われる。
 まず、表示制御部104は、第2伝達特性情報115によりSDR及びHDRのいずれか示されるかを判定する(S101)。
 第2伝達特性情報115によりHDRが示される場合(S101でYes)、表示制御部104は、HDR表示用の制御情報116を出力する(S102)。これにより、表示部105は、HDRに対応する輝度ダイナミックレンジで映像を表示する。
 一方、第2伝達特性情報115によりSDRが示される場合(S101でNo)、表示制御部104は、SDR表示用の制御情報116を出力する(S103)。これにより、表示部105は、SDRに対応する輝度ダイナミックレンジで映像を表示する。
 このように、フレーム精度で通知される第2伝達特性情報115に応じて制御情報116を切り替えることで、伝達特性の切り替わりと表示部105の制御とをフレーム精度で同期できる。
 なお、複数のHDR方式(例えば、STD-B67及びST2084)が存在する場合には、HDR表示用の制御情報116に、HDR方式の識別情報が含まれてもよい。これにより、表示部105は、対応する方式の輝度ダイナミックレンジで映像を表示できる。
 図3は、映像受信装置100による映像受信処理のフローチャートである。まず、受信部101は、受信信号111を受信する(S111)。次に、逆多重化部102は、受信信号111を逆多重化することで、映像信号112を生成する(S112)。次に、映像復号部103は、映像信号112を復号することで映像データ114を生成するとともに、第2伝達特性情報115を取得する(S113)。
 次に、表示制御部104は、第2伝達特性情報115に応じて表示部105の輝度ダイナミックレンジを制御する。具体的には、表示制御部104は、第2伝達特性情報115に基づき、各フレームがHDRであるかSDRであるかをフレーム精度で判定する(S114)。HDRである場合には(S114でYes)、表示部105はHDRの輝度ダイナミックレンジで映像を表示する(S115)。SDRである場合には(S114でNo)、表示部105はSDRの輝度ダイナミックレンジで映像を表示する(S116)。
 図4は、SDR番組からHDR番組への切り替え時の様子を示す図である。図5は、HDR番組からSDR番組への切り替え時の様子を示す図である。図4及び図5に示すように、上記処理により、フレーム精度でSDRとHDRとの切り替えを適切に行うことができる。
 以下、上述した受信信号111に対応する送信信号212を生成する映像送信装置200について説明する。図6は、本実施の形態に係る映像送信装置200のブロック図である。図6に示す映像送信装置200は、生成部201と、送信部202とを備える。
 生成部201は、映像データと、当該映像データの輝度ダイナミックレンジに対応する伝達関数をフレーム精度で特定するための第2伝達特性情報とを含む送信信号212を生成する。生成部201は、映像符号化部203と、多重化部204とを含む。
 図7は、映像送信装置200による映像送信処理のフローチャートである。まず、映像符号化部203は、映像データと第2伝達特性情報とを符号化することで映像信号211を生成する(S201)。この第2伝達特性情報は、上述した第2伝達特性情報115に対応し、第1輝度ダイナミックレンジ(例えばSDR)に対応した第1伝達関数、又は、第1輝度ダイナミックレンジより広い第2ダイナミックレンジ(例えばHDR)に対応した第2伝達関数をフレーム精度で特定するための情報である。また、第2伝達特性情報は、映像信号211に含まれるSPS内に格納される。
 次に、多重化部204は、符号化された映像信号211と音声信号とを多重化することで送信信号212を生成する(S202)。次に、送信部202は、生成された送信信号212を送信する(S203)。
 以上により、映像送信装置200は、フレーム精度で伝達関数を特定するための第2伝達特性情報を含む送信信号212を生成する。これにより、送信信号212を受信する映像受信装置は、フレーム精度で表示部の輝度ダイナミックレンジを制御できるので、より適切な映像を表示できる。
 (実施の形態2)
 TV放送では、地上波又は衛星などの電波状況によってエラーが発生する場合がある。図8は、電波障害等のより受信エラーが発生した場合の様子を示す図である。図8に示すように、SDRからHDRへの切り替わり時において、映像受信装置がSPS内の第2伝達特性情報115を取得後に、電波障害等により、映像ストリームが欠落し、HDRの最初のフレームが取得できない場合を想定する。この場合、映像復号部103は、エラー隠蔽のために直前のフレームを引き続き表示する。つまり、SDR番組のフレームが繰り返し表示される。
 この場合、このフレームが後続のフレームから参照されることで、後続の映像として、過去の番組の映像が混じった異常な映像が表示されてしまう。
 また、切り替え直後においては、表示部の輝度ダイナミックレンジがHDRに設定されるため、SDR番組のフレームがHDRの輝度ダイナミックレンジで表示されてしまう。これにより、本来の意図よりも高輝度の映像が表示されるという問題がある。
 本実施の形態ではこの問題に対応した映像受信装置について説明する。図9は、本実施の形態に係る映像受信装置100Aのブロック図である。図9に示す映像受信装置100Aは、図1に示す映像受信装置100に対して、さらに、異常検知部108と、表示部105A内のメッセージ重畳部109とを備える。また、表示制御部104Aに機能が追加されている。
 異常検知部108は、映像データ114(映像信号112)を正しく取得できたかを判定する。具体的には、異常検知部108は、パケットのシーケンス番号に基づいてパケットロスを検出するとともに、パケットのペイロードを解析してフレームデータの開始位置を取得することで、フレームデータを全て取得したか(正常)、フレームデータの一部のみを取得したか(異常)を判定する。また、異常検知部108は、判定結果を示す異常通知情報118を表示制御部104Aに出力する。つまり、異常が発生したこと、又は、異常が発生したフレームを特定するための情報が表示制御部104Aに通知される。
 表示制御部104Aは、第1伝達特性情報113及び第2伝達特性情報115に加え、異常通知情報118に応じて、制御情報116及びメッセージ119を生成する。具体的には、表示制御部104Aは、異常がある場合に、異常があることを示すメッセージ119を生成するとともに、SDR表示用の制御情報116を生成する。
 メッセージ重畳部109は、制御情報116及びメッセージ119に応じて、映像データ(入力信号117)にメッセージ119を重畳することで入力信号120を生成し、生成した入力信号120を表示デバイス107に出力する。これにより、例えば、「エラーが発生しました」などのメッセージが表示デバイス107に表示されることで、機器の故障でないことを視聴者に伝えることができる。
 図10は、表示制御部104Aのよる表示制御処理のフローチャートである。まず、表示制御部104Aは、第2伝達特性情報115が更新されたかを判定する(S121)。第2伝達特性情報115が更新された場合(S121でYes)、表示制御部104Aは、表示制御の切り替えの判断を開始する。
 まず、表示制御部104Aは、映像データを正しく取得できたかを判定する。具体的には、表示制御部104Aは、異常通知情報118に基づきイントラ符号化フレームが正常に復号されたかを判定する(S122)。イントラ符号化フレームが正常に復号されていない場合(S122でNo)、表示制御部104Aは、表示制御部104は、SDR表示用の制御情報116を出力する(S123)。これにより、表示部105は、SDRに対応する輝度ダイナミックレンジで映像を表示する。つまり、表示制御部104Aは、映像データを正しく取得できなかったと判定された場合、表示部105の輝度ダイナミックレンジをSDR(第1輝度ダイナミックレンジ)に設定する。
 切り替え時においてエラーが発生した場合には、表示されるフレームに切替え前のフレームの画素が含まれる可能性がある。これに対して、本実施の形態では、このような場合に、表示制御をSDR表示用に設定することで、SDR番組のフレームがHDRの高輝度設定で表示されることを抑制できる。
 また、HEVCのIDR又はCRAなど、飛び込み再生を保証しているイントラ符号化フレームが正常に復号された場合(S122でYes)、実施の形態1と同様に表示制御を切り替える。つまり、表示制御部104Aは、更新後の第2伝達特性情報115によりSDR及びHDRのいずれか示されるかを判定する(S124)。第2伝達特性情報115によりHDRが示される場合(S124でYes)、表示制御部104Aは、HDR表示用の制御情報116を出力する(S125)。一方、第2伝達特性情報115によりSDRが示される場合(S124でNo)、表示制御部104Aは、SDR表示用の制御情報116を出力する(S126)。
 このように、本実施の形態に係る映像受信装置100Aは、エラー発生時にSDRの輝度ダイナミックレンジで映像を表示することで、エラー発生時に過度に明るい映像が表示されることを抑制できる。
 (実施の形態3)
 本実施の形態では、第1伝達特性情報113の詳細及び第1伝達特性情報113を用いた処理について説明する。まず、逆多重化部102において取得する伝達特性の例を説明する。
 多重化方式としてMMTを用いる場合、MPU(Media Processing Unit)と呼ばれるランダムアクセス単位において復号順で先頭となるアクセスユニット(ピクチャに相当)のPTS及びDTSは、記述子(デスクリプタ)により伝送できる。例えば、ARIB(Association of Radio Industries and Business)のSTD-B60においては、MPUタイムスタンプ記述子又はMPU拡張タイムスタンプ記述子を用いて、MPUの先頭アクセスユニットのPTS、又は、MPUの先頭アクセスユニットのDTS及び後続アクセスユニットのDTSとPTSとが、それぞれプログラムの制御情報として伝送される。
 図11は、HDR識別情報301を含むMPUタイムスタンプ記述子(MPU_Timestamp_Discriptor)のシンタックス例を示す図である。図12は、HDR識別情報301を含むMPU拡張タイムスタンプ記述子(MPU_Extended_Timestamp_Discriptor)のシンタックス例を示す図である。
 図11又は図12に示すように、MPUタイムスタンプ記述子、又はMPU拡張タイムスタンプ記述子を拡張することで、送信信号212(受信信号111)に、MPUを構成するアクセスユニットのEOTFがHDR又はSDRのどちらであるかを示すHDR識別情報301(mpu_hdr_indicator)を付加することができる。なお、STD-B67とSMPTE ST2084とが共に使用可能である場合など、HDRのEOTFが複数存在する際には、HDR識別情報301は、HDRのEOTFの種類を識別するための情報を含んでもよい。また、MPU単位のEOTF識別情報が伝送できれば、他の記述子を用いてもよい。
 多重化方式としてMPEG-2 TSを用いる場合は、13818-1 AMD6( Delivery of Timeline for External Data )を拡張して、アクセスユニットのPTS又はDTSと、EOTFの識別情報とを関連付けてもよい。あるいは、MMTと同様に記述子を用いてランダムアクセス単位のEOTF識別情報を格納してもよいし、PES又はTSのヘッダ情報を用いてランダムアクセス単位のEOTF識別情報をシグナリングしてもよい。
 このように、第1伝達特性情報113は、送信信号212(受信信号111)に含まれるランダムアクセス単位毎の制御情報に含まれる。ここでランダムアクセス単位とは任意のアクセスが保証されている複数のアクセスユニット(フレーム)で構成される単位である。
 第1伝達特性情報113は、MPUタイムスタンプ記述子などMPU単位の情報としてではなく、複数のMPUを含むプログラム単位の情報に格納されてもよい。ARIBでは、プログラム単位の情報である映像コンポーネント記述子に、ビデオストリームの解像度、アスペクト比、及びフレームレートなどが格納される。よって、第1伝達特性情報113もこの映像コンポーネント記述子に格納できる。しかしながら、プログラム単位の情報は0.5秒又は0.1秒ごとなど周期的に伝送されることから、フレーム単位又はランダムアクセス単位では情報を更新できない場合がある。従って、この場合には、現在有効な伝達特性情報と共に、将来有効になる伝達特性情報が格納される。
 図13は、映像コンポーネント記述子のシンタックス例を示す図である。Current_EOTF(第1情報)は現在有効なEOTF(伝達関数)を示し、EOTF_update_flag(第2情報)は将来EOTFが切り替わるかどうかを示す。つまり、EOTF_update_flag(第2情報)は、当該プログラム内において伝達関数が切り替わるか否かを示す。
 EOTF_update_flag(第2情報)により、EOTFが切り替わることが示される場合には、映像コンポーネント記述子は、切り替わり後のEOTFを示すnew_EOTF(第3情報)と、切り替わり後のEOTFが有効になるMPUのシーケンス番号を示すnew_EOTF_start_mpu_sequence_number(第4情報)とを含む。つまり、new_EOTF_start_mpu_sequence_number(第4情報)は、EOTFの切り替えを行うランダムアクセス単位を特定するための情報である。
 なお、HDRが1種類である場合には、HDRかSDRであるかのみが分かればよい。つまり、EOTF_update_flagのみにより切り替わり後のEOTFが決定できるため、new_EOTFのフィールドは省略してもよい。
 以上のように伝達特性を伝送することで、映像受信装置は、多重化レイヤ(多重化されるAVデータの属性情報、及びAVデータを格納するパケットのヘッダ情報)の情報のみに基づいて、MPUを構成するアクセスユニットの伝達特性を取得することができる。さらに、従来のARIBにおけるシームレス接続では、解像度などの切り替わり前後でビデオストリームを格納するTSパケットのPID又はMMTパケットのアッセットID(あるいはパケットID)が切り替えられるため、同一IDのパケットにおけるSTD(System Target Decoder)バッファの管理が困難である、又は、切り替え点において送出側のデータ供給が一時的に途絶えるなどのデメリットがあった。これに対して、本手法を用いることで、この課題を解決できる。
 なお、本手法は、複数のオーディオコーデックをシームレスに切り替える場合にも適用できる。
 また、本実施の形態に係る映像受信装置100Aの構成は、図9に示す構成において、表示制御部104Aに機能が追加されている点が実施の形態2と異なる。
 まず、逆多重化部102は、映像信号112の復号に先立って、多重化レイヤの情報から上述した伝達特性(HDR識別情報301等)を取得し、取得した伝達特性を特定するための第1伝達特性情報113を表示制御部104Aに出力する。
 このように、映像受信装置100Aは、第1伝達特性情報113を映像信号112の復号に先立って取得できるため、第2伝達特性情報115よりも時間的に先に第1伝達特性情報113を取得できる。よって、表示制御部104Aが伝達特性情報を取得してから実際に映像特性変換部106、及び表示デバイス107を制御するまでの期間を長くすることができる。特に、アクセスユニット単位での伝達特性の切り替えを想定すると、復号結果に基づいて伝達特性を取得する場合には、フレームレートが増加するほど時間的な余裕が少なくなるため、多重化レイヤから前もって伝達特性を取得することの効果が高い。
 図14は、表示制御部104Aのよる表示制御処理のフローチャートである。図14に示す処理は、図10に示す処理に対して、ステップS121A及びS124Aが異なる。
 ステップS121Aでは、表示制御部104Aは、第2伝達特性情報115に加えて、第1伝達特性情報113が更新されたかどうかを判定する。また、MPUの先頭アクセスユニットはイントラ符号化フレームであるため、ステップS122では、表示制御部104Aは、第1伝達特性情報113に基づいて動作する際には、同一MPUのシーケンス番号(mpu_sequence_number)に対応する第1伝達特性情報113と、イントラ符号化フレームの復号結果とに基づいて動作する。また、ステップS124Aにおいて、表示制御部104Aは、第1伝達特性情報113又は第2伝達特性情報115に基づいて動作する。
 なお、図14では、第1伝達特性情報113と第2伝達特性情報115との両方が用いられる例を示すが第1伝達特性情報113のみが用いられてもよい。
 図15は、本実施の形態に係る映像受信装置100Aによる映像受信処理のフローチャートである。まず、受信部101は、受信信号111を受信する(S111)。次に、逆多重化部102は、受信信号111を逆多重化することで、映像信号112を生成するとともに、第1伝達特性情報113を取得する(S112A)。
 ここで、第1伝達特性情報113は、映像データ114(映像信号112)の輝度ダイナミックレンジに対応する伝達関数(OETF又はEOTF)をランダムアクセス単位(MPU単位)毎に特定するための情報である。例えば、この第1伝達特性情報113は、第1輝度ダイナミックレンジ(SDR)に対応した第1伝達関数、又は、第1輝度ダイナミックレンジより広い第2ダイナミックレンジ(HDR)に対応した第1伝達関数をランダムアクセス単位毎に特定するための情報である。つまり、第1伝達特性情報113は、映像データ114がSDRであるかHDRであるかを示す。また、HDRに複数の形式が存在する場合には、第1伝達特性情報113は、どの形式のHDRであるかを示してもよい。つまり、第1伝達特性情報113は、映像データ114の輝度ダイナミックレンジを示し、例えば、予め定められた複数の輝度ダイナミックレンジのうちのいずれかを示す。
 次に、映像復号部103は、映像信号112を復号することで映像データ114を生成する(S113)。
 次に、表示制御部104Aは、第1伝達特性情報113に応じて表示部105の輝度ダイナミックレンジを制御する。具体的には、表示制御部104Aは、第1伝達特性情報113に基づき、各MPUがHDRであるかSDRであるかをMPU単位で判定する(S114A)。HDRである場合には(S114でYes)、表示部105はHDRの輝度ダイナミックレンジで映像を表示する(S115)。SDRである場合には(S114でNo)、表示部105はSDRの輝度ダイナミックレンジで映像を表示する(S116)。
 以上により、映像受信装置100Aは、ランダムアクセス単位毎に表示部105の輝度ダイナミックレンジを制御できるので、より適切な映像を表示できる。また、映像受信装置100Aは、多重化レイヤに含まれる第1伝達特性情報113を用いることで、映像信号112の復号に先立って伝達特性を取得できるので、伝達特性の切り替え処理を容易に行うことができる。
 また、上述した受信信号111に対応する送信信号212を生成する映像送信装置200の構成及び動作は、上述した実施の形態1と概ね同様である。
 具体的には、図7に示すステップS202において、多重化部204は、第1伝達特性情報113を含む送信信号212を生成する。
 このように、映像送信装置200は、ランダムアクセス単位毎に伝達関数を特定するための第1伝達特性情報を含む送信信号212を生成する。これにより、送信信号212を受信する映像受信装置は、ランダムアクセス単位毎に表示部の輝度ダイナミックレンジを制御できるので、より適切な映像を表示できる。また、また、多重化レイヤに第1伝達特性情報113が含まれることで、映像受信装置は、伝達特性の切り替え処理を容易に行うことができる。
 以下、本実施の形態の変形例について説明する。
 システムストリームをSTB(Set Top Box)、DVD機器又はBlu-ray(登録商標)機器である映像受信装置が受信して、テレビなどの表示デバイスに出力するケースでは、HDMI(登録商標)などの通信プロトコルを介して映像受信装置と表示デバイスとが接続される。ここで、HDMI(登録商標)などにおいては、ストリームの解像度などが切り替わるとプロトコルの再認証手続きが発生する。
 従って、2K(1920×1080画素など)と4K(3840×2160画素など)となどの解像度の切り替わりが発生し得る場合には、映像受信装置は再生開始時に最大の解像度に合わせて映像信号を出力することが望ましい。つまり、2Kと4Kとが混在する場合には、受信装置は、2Kのストリームから再生開始する際にも、当該2Kのストリームを4Kにアップコンバートして出力する。こうすることで、途中で信号が4Kに切り替わった場合にも解像度は4Kのままとなり、解像度の切り替わりは発生しない。例えば、2KのSDRと4KのHDRとの間の切り替わりが発生する場合には、映像受信装置は、2KのSDRを4KのSDRに変換して出力する。
 つまり、映像信号(映像データ114)は、第1解像度又は第1解像度より高い第2解像度の映像信号である。映像受信装置100Aは、映像信号の解像度が第1解像度と第2解像度との間で切り替わる場合には、第1解像度の映像信号を第2解像度の映像信号に変換する。
 また、放送においては、放送サービスにおいて許容される最大解像度の識別情報がデスクリプタなどにより示されるため、映像受信装置は、HDMI(登録商標)への出力信号を、常に最大解像度に合わせるように動作してもよい。例えば、UHD(Ultra High Definition)サービスであれば最大解像度が4K又は8Kのいずれかであると規定される。また、多重化方式がTSである場合には最大解像度が2Kに規定され、MMTである場合には最大解像度が4Kに規定される。このように、映像受信装置は、多重化方式に応じた最大解像度に映像信号を常に変換し、出力してもよい。
 つまり、映像受信装置100Aは、映像信号(映像データ114)の解像度が受信信号111の放送サービスで規定されている最大解像度より低い場合、当該映像信号の解像度を上記最大解像度に変換する。
 以上、本開示の実施の形態に係る映像受信装置及び映像送信装置について説明したが、本開示は、この実施の形態に限定されるものではない。
 また、上記実施の形態に係る映像受信装置及び映像送信装置に含まれる各処理部は典型的には集積回路であるLSIとして実現される。これらは個別に1チップ化されてもよいし、一部又は全てを含むように1チップ化されてもよい。
 また、集積回路化はLSIに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。LSI製造後にプログラムすることが可能なFPGA(Field Programmable Gate Array)、又はLSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。
 また、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPUまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。
 また、本開示は、映像受信装置又は映像送信装置により実行される映像受信方法又は映像送信方法として実現されてもよい。
 また、ブロック図における機能ブロックの分割は一例であり、複数の機能ブロックを一つの機能ブロックとして実現したり、一つの機能ブロックを複数に分割したり、一部の機能を他の機能ブロックに移してもよい。また、類似する機能を有する複数の機能ブロックの機能を単一のハードウェア又はソフトウェアが並列又は時分割に処理してもよい。
 また、フローチャートにおける各ステップが実行される順序は、本開示を具体的に説明するために例示するためのものであり、上記以外の順序であってもよい。また、上記ステップの一部が、他のステップと同時(並列)に実行されてもよい。
 以上、一つまたは複数の態様に係る映像受信装置及び映像送信装置について、実施の形態に基づいて説明したが、本開示は、この実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、一つまたは複数の態様の範囲内に含まれてもよい。
 本開示は、TV等の映像受信装置及び映像送信装置に適用できる。
 100,100A 映像受信装置
 101 受信部
 102 逆多重化部
 103 映像復号部
 104,104A 表示制御部
 105,105A 表示部
 106 映像特性変換部
 107 表示デバイス
 108 異常検知部
 109 メッセージ重畳部
 111 受信信号
 112,211 映像信号
 113 第1伝達特性情報
 114 映像データ
 115 第2伝達特性情報
 116 制御情報
 117,120 入力信号
 118 異常通知情報
 119 メッセージ
 200 映像送信装置
 201 生成部
 202 送信部
 203 映像符号化部
 204 多重化部
 212 送信信号
 301 HDR識別情報

Claims (16)

  1.  表示部を備える映像受信装置における映像受信方法であって、
     映像信号と音声信号とが多重化された受信信号を受信し、
     前記受信信号を逆多重化することで、前記映像信号と、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報とを取得し、
     取得された前記映像信号を復号することで映像データを取得し、
     前記伝達特性情報に応じてランダムアクセス単位毎に前記表示部の輝度ダイナミックレンジを制御しながら前記映像データを表示する
     映像受信方法。
  2.  前記伝達特性情報は、前記受信信号に含まれるランダムアクセス単位毎の制御情報に含まれる
     請求項1記載の映像受信方法。
  3.  前記伝達特性情報は、前記受信信号に含まれる、複数のランダムアクセス単位を含むプログラムの制御情報に含まれる
     請求項1記載の映像受信方法。
  4.  前記伝達特性情報は、
     現在の伝達関数を特定するための第1情報と、
     前記プログラム内において伝達関数が切り替わるか否かを示す第2情報と、
     切り替わり後の伝達関数を特定するための第3情報と、
     伝達関数の切り替えを行うランダムアクセス単位を特定するための第4情報とを含む
     請求項3記載の映像受信方法。
  5.  前記伝達特性情報は、第1輝度ダイナミックレンジに対応した第1伝達関数、又は、第1輝度ダイナミックレンジより広い第2ダイナミックレンジに対応した第2伝達関数をフレーム精度で特定するための情報であり、
     前記映像データの表示では、前記表示部の輝度ダイナミックレンジを前記第1輝度ダイナミックレンジと前記第2輝度ダイナミックレンジとで切り替える
     請求項1に記載の映像受信方法。
  6.  前記映像受信方法は、さらに、
     前記受信信号の受信において、映像データを正しく取得できたかを判定し、
     前記映像データの表示では、前記映像データを正しく取得できなかったと判定された場合、前記表示部の輝度ダイナミックレンジを前記第1輝度ダイナミックレンジに設定する
     請求項5記載の映像受信方法。
  7.  前記判定では、イントラ符号化フレームを正しく復号できたかを判定する
     請求項6記載の映像受信方法。
  8.  前記映像信号は、第1解像度又は前記第1解像度より高い第2解像度の映像信号であり、
     前記映像受信方法は、さらに、
     前記映像信号の解像度が第1解像度と第2解像度との間で切り替わる場合には、前記第1解像度の映像信号を前記第2解像度の映像信号に変換する
     請求項1に記載の映像受信方法。
  9.  前記映像受信方法は、さらに、
     前記映像信号の解像度が前記受信信号の放送サービスで規定されている最大解像度より低い場合、当該映像信号の解像度を前記最大解像度に変換する
     請求項1に記載の映像受信方法。
  10.  映像データを符号化することで映像信号を生成しと、
     生成された前記映像信号と音声信号とを多重化することで、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報前を含む送信信号を生成し、
     前記送信信号を送信する
     映像送信方法。
  11.  前記伝達特性情報は、前記送信信号に含まれるランダムアクセス単位毎の制御情報に含まれる
     請求項10記載の映像送信方法。
  12.  前記伝達特性情報は、前記送信信号に含まれる複数ランダムアクセス単位毎の制御情報に含まれる
     請求項11記載の映像送信方法。
  13.  前記伝達特性情報は、
     現在の伝達関数を特定するための第1情報と、
     当該複数ランダムアクセス単位において伝達関数が切り替わるか否かを示す第2情報と、
     切り替わり後の伝達関数を特定するための第3情報と、
     伝達関数の切り替えを行うランダムアクセス単位を特定するための第4情報とを含む
     請求項12記載の映像送信方法。
  14.  前記伝達特性情報は、第1輝度ダイナミックレンジに対応した第1伝達関数、又は、第1輝度ダイナミックレンジより広い第2ダイナミックレンジに対応した第2伝達関数をフレーム精度で特定するための情報であり、
     表示部の輝度ダイナミックレンジを前記第1輝度ダイナミックレンジと前記第2輝度ダイナミックレンジとで切り替える
     請求項10に記載の映像送信方法。
  15.  映像信号と音声信号とが多重化された受信信号を受信する受信部と、
     前記受信信号を逆多重化することで、前記映像信号と、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報とを取得する逆多重化部と、
     取得された前記映像信号を復号することで映像データを取得する復号部と、
     前記伝達特性情報に応じてランダムアクセス単位毎に輝度ダイナミックレンジを制御しながら前記映像データを表示する表示部とを備える
     映像受信装置。
  16.  映像データを符号化することで映像信号を生成する符号化部と、
     生成された前記映像信号と音声信号とを多重化することで、前記映像信号の輝度ダイナミックレンジに対応する伝達関数をランダムアクセス単位毎に特定するための伝達特性情報前を含む送信信号を生成する多重化部と、
     前記送信信号を送信する送信部とを備える
     映像送信装置。
PCT/JP2016/003947 2015-09-14 2016-08-30 映像受信方法、映像送信方法、映像受信装置及び映像送信装置 WO2017047014A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201680052302.0A CN108028878B (zh) 2015-09-14 2016-08-30 影像接收方法、影像发送方法、影像接收装置以及影像发送装置
EP16845892.5A EP3352163B1 (en) 2015-09-14 2016-08-30 Video reception method, video transmission method, video reception device, and video transmission device
EP20170302.2A EP3700211A1 (en) 2015-09-14 2016-08-30 Video reception method, video transmission method, video reception device, and video transmission device
US15/917,008 US10629162B2 (en) 2015-09-14 2018-03-09 Video reception method, video transmission method, video reception apparatus, and video transmission apparatus
US16/819,308 US11972741B2 (en) 2015-09-14 2020-03-16 Decoding device for decoding a coded video in a system stream with a transfer characteristic if the transfer characteristic is provided in the system stream

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201562218023P 2015-09-14 2015-09-14
US62/218,023 2015-09-14
JP2016-101979 2016-05-20
JP2016101979A JP6820507B2 (ja) 2015-09-14 2016-05-20 映像受信方法、映像送信方法、映像受信装置及び映像送信装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/917,008 Continuation US10629162B2 (en) 2015-09-14 2018-03-09 Video reception method, video transmission method, video reception apparatus, and video transmission apparatus

Publications (1)

Publication Number Publication Date
WO2017047014A1 true WO2017047014A1 (ja) 2017-03-23

Family

ID=58288449

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/003947 WO2017047014A1 (ja) 2015-09-14 2016-08-30 映像受信方法、映像送信方法、映像受信装置及び映像送信装置

Country Status (2)

Country Link
JP (3) JP6982814B2 (ja)
WO (1) WO2017047014A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015005977A (ja) * 2013-06-18 2015-01-08 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 送信方法および受信方法
JP2015019287A (ja) * 2013-07-11 2015-01-29 キヤノン株式会社 画像復号装置及びその制御方法
WO2015111467A1 (ja) * 2014-01-24 2015-07-30 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015005977A (ja) * 2013-06-18 2015-01-08 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 送信方法および受信方法
JP2015019287A (ja) * 2013-07-11 2015-01-29 キヤノン株式会社 画像復号装置及びその制御方法
WO2015111467A1 (ja) * 2014-01-24 2015-07-30 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Also Published As

Publication number Publication date
JP2022023986A (ja) 2022-02-08
JP2021061619A (ja) 2021-04-15
JP7496536B2 (ja) 2024-06-07
JP2023053091A (ja) 2023-04-12
JP7233029B2 (ja) 2023-03-06
JP6982814B2 (ja) 2021-12-17

Similar Documents

Publication Publication Date Title
JP7108864B2 (ja) 映像送信方法、映像受信方法、映像送信装置及び映像受信装置
US11972741B2 (en) Decoding device for decoding a coded video in a system stream with a transfer characteristic if the transfer characteristic is provided in the system stream
JP7281759B2 (ja) 映像送信方法、映像受信方法、映像送信装置及び映像受信装置
JP7289075B2 (ja) 映像受信方法及び映像受信装置
JP7233029B2 (ja) 映像受信方法、映像送信方法、映像受信装置及び映像送信装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16845892

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE