WO2018042722A1 - 画像処理装置、テレビジョン受像機、画像処理プログラム、記録媒体、および映像提供装置 - Google Patents

画像処理装置、テレビジョン受像機、画像処理プログラム、記録媒体、および映像提供装置 Download PDF

Info

Publication number
WO2018042722A1
WO2018042722A1 PCT/JP2017/008553 JP2017008553W WO2018042722A1 WO 2018042722 A1 WO2018042722 A1 WO 2018042722A1 JP 2017008553 W JP2017008553 W JP 2017008553W WO 2018042722 A1 WO2018042722 A1 WO 2018042722A1
Authority
WO
WIPO (PCT)
Prior art keywords
metadata
video
video data
image processing
data
Prior art date
Application number
PCT/JP2017/008553
Other languages
English (en)
French (fr)
Inventor
尚昭 柴本
高倉 英一
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Publication of WO2018042722A1 publication Critical patent/WO2018042722A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4425Monitoring of client processing errors or hardware failure

Definitions

  • One embodiment of the present invention relates to an image processing device, a television receiver, an image processing program, a recording medium, and a video providing device.
  • HDR video signal high dynamic range video signal
  • SDR video signal standard dynamic range video signal
  • Metadata representing the maximum luminance or maximum average luminance of video is added to video data obtained by encoding an HDR video signal.
  • this metadata is used to perform luminance conversion suitable for reproduction of the video on the reproduction device side (for example, selecting an EOTF (electro-optic conversion function) suitable for reproduction of the video on the reproduction device side).
  • EOTF electro-optic conversion function
  • Patent Document 1 discloses a technique for storing information for adjusting luminance as content additional information such as video inside a content playback device.
  • Patent Document 2 discloses a technique for analyzing the content video signal, extracting feature point information of the content video, and adjusting the output image quality of the content video when the content is played back. .
  • Japanese Patent Publication Japanese Patent Laid-Open No. 2003-319324 (published on November 7, 2003)”
  • Metadata is not always added to video data, and metadata added to video data is not always normal. That is, there may be a case where metadata is not added (missed) to video data, or a value of metadata added to video data is abnormal. In this case, there arises a problem that luminance conversion suitable for reproduction of the video cannot be executed on the reproduction apparatus side.
  • One embodiment of the present invention has been made in view of the above problems, and an object of the present invention is to perform image processing capable of performing appropriate luminance conversion on video data even when there is an abnormality in metadata. It is to be realized.
  • an image processing apparatus includes a determination unit that determines whether there is an abnormality in metadata that is added to video data and is used for luminance conversion of the video data. And a luminance conversion unit that performs luminance conversion on the video data using alternative data different from the metadata when the determination unit determines that there is an abnormality.
  • the video providing apparatus includes a determination unit that determines whether there is an abnormality in the metadata related to the luminance of the video represented by the video data, which is added to the video data, and the determination unit has no abnormality.
  • a multiplexing unit that multiplexes the metadata into the video data when determined, and multiplexes alternative data different from the metadata into the video data when the determination unit determines that there is an abnormality. ing.
  • FIG. 1 is a functional block diagram of an image processing apparatus according to Embodiment 1 of the present invention. It is a flowchart of the control in the image processing apparatus which concerns on Embodiment 2 of this invention. It is a functional block diagram of the image processing apparatus which concerns on Embodiment 2 of this invention. It is a flowchart of the control in the image processing apparatus which concerns on Embodiment 3 of this invention. It is a functional block diagram of the image processing apparatus which concerns on Embodiment 3 of this invention.
  • Embodiment 1 Hereinafter, embodiments of the present invention will be described in detail with reference to FIGS.
  • FIG. 1 is a diagram illustrating an appearance of a television receiver 100 including the image processing apparatus 1 according to the present embodiment.
  • the television receiver 100 includes a display unit 10 and an audio output unit 14 included in the image processing apparatus 1, and a tuner (not shown) for acquiring video data.
  • FIG. 2 is a functional block diagram showing an outline of the image processing apparatus 1 according to the present embodiment.
  • the image processing apparatus 1 is equipped with HDMI (High-Definition Multimedia Interface: registered trademark), and has an HDMI receiving unit 11, an audio control unit 13, an audio output unit 14, a luminance conversion unit 15, a display control unit 16, and a display unit. 10, a determination unit 17, and a storage unit 18.
  • HDMI High-Definition Multimedia Interface: registered trademark
  • the HDMI receiving unit 11 receives the multiplexed audio data 12A, video data 12B, and metadata 12C via the HDMI cable.
  • the HDMI receiving unit 11 can be connected to an AV device such as a player, a recorder, or a tuner via an HDMI cable.
  • the HDMI receiving unit 11 has a Demux (demultiplexer) function, performs demultiplexing processing on the received data, supplies the audio data 12A to the audio control unit 13, and converts the luminance of the video data 12B.
  • the data is distributed to the unit 15 and the metadata 12C is supplied to the determination unit 17.
  • the metadata 12C is data relating to the brightness of the video represented by the video data 12B, which is added to the video data 12B.
  • the metadata 12C has the maximum luminance of the video represented by the video data 12B as a value.
  • the maximum brightness may be the maximum value of the maximum brightness of each frame, such as MaxCLL (Maximum Content Light Light Level) added to the HDR video signal.
  • the maximum luminance may be the maximum value of the average luminance of each frame, such as MaxFALL (Maximum Frame Average Light Level) added to the HDR video signal.
  • MaxCLL Maximum Content Light Light Level
  • MaxFALL Maximum Frame Average Light Level
  • the sound control unit 13 controls the sound output unit 14 so that sound corresponding to the sound data 12A is output.
  • the determination unit 17 determines whether or not the metadata 12C is abnormal, and determines that there is an abnormality when the metadata 12C is missing or when the value of the metadata 12C is abnormal. If the determination unit 17 determines that the value of the metadata 12C is not abnormal, the determination unit 17 provides the luminance conversion unit 15 with the metadata 12C acquired from the HDMI reception unit 11. If the determination unit 17 determines that the metadata 12C is abnormal, the determination unit 17 provides the luminance conversion unit 15 with the substitute data 12D read from the storage unit 18 instead of the metadata 12C acquired from the HDMI reception unit 11. To do.
  • the storage unit 18 stores metadata acquired in the past from the HDMI receiving unit 11 and determined to be normal by the determination unit 17, and video data to which the metadata is added.
  • the determination unit 17 described above is added to video data representing a video having the same content as the video represented by the video data 12B among the metadata stored in the storage unit 18.
  • the stored metadata is read from the storage unit 18 as alternative data 12D.
  • the luminance conversion unit 15 represents the metadata 12C (when the metadata 12C is abnormal) or the alternative data 12D (when the metadata 12C is abnormal) acquired from the determination unit 17 with respect to the video data 12B. Performs brightness conversion according to the maximum brightness. For example, luminance conversion is performed on the video data 12B using EOTF corresponding to the maximum luminance represented by the metadata 12C or the alternative data 12D acquired from the determination unit 17.
  • the display control unit 16 controls the display unit 10 so that a video corresponding to the video data whose luminance has been converted is displayed on the luminance conversion unit 15.
  • the HDMI receiving unit 11 receives the multiplexed audio data 12A, video data 12B, and metadata 12C. Also, the HDMI receiving unit 11 performs a demultiplexing process on the received data.
  • step S12 the determination unit 17 determines whether the metadata 12C is missing or the value of the metadata 12C is abnormal. As described above, the determination unit 17 determines that there is an abnormality when the metadata 12C is missing or when the value of the metadata 12C is abnormal.
  • the determination unit 17 may determine that there is an abnormality when, for example, the maximum luminance value of the video represented by the video data 12B included in the metadata 12C is outside a predetermined range.
  • step S12 determines that there is an abnormality in step S12 (that is, YES)
  • the process proceeds to step S14.
  • the determination unit 17 determines that there is no abnormality in Step S12 (that is, NO)
  • the process proceeds to Step S16.
  • step S14 the determination unit 17 uses the metadata added to the video data representing the video having the same content as the video represented by the video data 12B in the metadata accumulated in the storage unit 18 for the luminance conversion.
  • step S16 the determination unit 17 sets the metadata 12C received and demultiplexed by the HDMI receiving unit 11 as data used for luminance conversion.
  • step S18 the luminance conversion unit 15 performs luminance conversion on the video data 12B using the alternative data or the metadata 12C.
  • step S18 when the determination unit 17 determines that there is an abnormality, the luminance conversion unit 15 performs luminance conversion on the video data 12B using alternative data associated with the video data 12B, which is different from the metadata 12C. .
  • step S18 the luminance conversion unit 15 performs luminance conversion on the video data 12B using the metadata 12C when the determination unit 17 determines that there is no abnormality.
  • step S20 the display control unit 16 controls the display unit 10 so that a video corresponding to the video data subjected to the luminance conversion is displayed on the luminance conversion unit 15.
  • the HDMI receiving unit 11 converts the video to be displayed next, that is, video data representing a future video in time, rather than the video represented by the video data 12B whose metadata 12C has been determined by the determination unit 17.
  • the added metadata may be acquired together with video data representing the video to be displayed next and the metadata.
  • the luminance conversion unit 15 uses the metadata added to the video data representing the future video in time as the substitute data, and uses the video data 12B. May be subjected to luminance conversion.
  • the metadata 12C may have the maximum luminance of each period constituting the video represented by the video data 12B as a value.
  • the period may be a frame, a scene composed of a plurality of frames, or a chapter composed of a plurality of scenes.
  • the maximum brightness of each period usually changes slowly. Therefore, when the maximum brightness of each period included as a value in the metadata 12C changes rapidly, it can be considered that the metadata 12C is abnormal. Therefore, a configuration in which the determination unit 17 determines that there is an abnormality when the difference in maximum luminance between two temporally adjacent periods out of the periods constituting the video represented by the video data 12B exceeds a predetermined threshold value. If it is adopted, it is possible to appropriately detect the metadata 12C or more.
  • the image processing apparatus 2 of the present embodiment is different from that of the first embodiment in that it includes a generation unit 27 as shown in FIG.
  • the image processing apparatus 2 is equipped with HDMI as in the first embodiment, and includes an HDMI receiving unit 11, an audio control unit 13, an audio output unit 14, a luminance conversion unit 15, a display control unit 16, a display unit 10, and a generation unit. 27, a storage unit 28, and a determination unit 29.
  • the generating unit 27 acquires the video data 12B supplied from the HDMI receiving unit 11.
  • the generation unit 27 analyzes the video data 12B to generate metadata 12D related to the luminance of the video data 12B.
  • the generation unit 27 accumulates the generated metadata 12D in the storage unit 28 together with the video data 12B corresponding to the metadata 12D.
  • the determination unit 29 displays the video represented by the video data 12B among the metadata generated by the generation unit 27 and accumulated in the storage unit 28 as alternative data. Is obtained from the storage unit 28 as alternative data 12D.
  • step S12 determines that there is an abnormality in step S12 (that is, YES)
  • the process proceeds to step S30.
  • step S30 the determination unit 29 performs luminance conversion on the metadata obtained by analyzing the video data representing the video having the same content as the video represented by the video data 12B among the metadata accumulated in the storage unit 28. Substitute data used for.
  • the generation unit 27 not only generates data used for luminance conversion for video data representing all continuous videos, but also includes a plurality of data, for example, for each chapter, for each scene change, for each frame, for each equal timetable, etc. Data used for luminance conversion may be generated.
  • the image processing apparatus 3 according to the present embodiment is different from the first embodiment in that the storage unit is not provided and the input receiving unit 31 is provided.
  • the image processing apparatus 3 is equipped with HDMI as in the first embodiment, and includes an HDMI receiving unit 11, an audio control unit 13, an audio output unit 14, a luminance conversion unit 15, a display control unit 16, a display unit 10, and input reception.
  • a unit 31 and a determination unit 32 are provided.
  • the input receiving unit 31 receives input of data having a brightness value designated by the user.
  • step S12 determines that there is an abnormality in step S12 (that is, YES)
  • the process proceeds to step S40.
  • step S40 the input receiving unit 31 receives input of data having a luminance value designated by the user. Then, the determination unit 32 uses the data related to the brightness designated by the user as the substitute data 12D used for the brightness conversion.
  • FIG. 8 is a diagram showing an appearance of the video providing apparatus 4 according to the present embodiment.
  • the video providing device 4 includes an insertion port 40 for inserting a recording medium (not shown) such as a hard disk, a Blu-ray disc, or a DVD disc into the video providing device 4.
  • a recording medium such as a hard disk, a Blu-ray disc, or a DVD disc
  • the encoded audio data, video data, and metadata are recorded on the recording medium.
  • FIG. 9 is a functional block diagram showing an outline of the video providing apparatus 4 according to the present embodiment.
  • the video providing apparatus 4 is equipped with HDMI, and includes a reading unit 41, a decoder 42, a determination unit 44, a storage unit 45, a multiplexer (Mux) 47, and an HDMI transmission unit 48.
  • the reading unit 41 reads encoded audio data, video data, and metadata from the recording medium inserted into the insertion slot 40.
  • the decoder 42 decodes the encoded audio data, video data, and metadata, supplies the audio data 43A to the Mux 47, distributes the video data 43B to the Mux 47, and determines the metadata 43C as the determination unit 44 and the storage unit 45. To supply.
  • the metadata 43C is data relating to the brightness of the video represented by the video data 43B, which is added to the video data 43B. Also in the present embodiment, as in the first embodiment, the metadata 43C has the maximum luminance of the video represented by the video data 43B as a value.
  • the determination unit 44 determines whether or not the metadata 43C is abnormal, and determines that there is an abnormality when the metadata 43C is missing or when the value of the metadata 43C is abnormal. If the determination unit 44 determines that the value of the metadata 43C is abnormal, the determination unit 44 provides the metadata 43C acquired from the decoder 42 to the Mux 47. If the determination unit 44 determines that the metadata 43C is abnormal, the determination unit 44 provides the Mux 47 with the alternative data 43D read from the storage unit 45 instead of the metadata 43C acquired from the decoder 42.
  • the storage unit 45 stores metadata obtained in the past from the decoder 42 and determined to be normal by the determination unit 44, and video data to which the metadata is added.
  • the determination unit 44 described above represents a video having the same content as the video represented by the video data 43B among the metadata accumulated in the storage unit 45 as the alternative data 43D.
  • the metadata added to the video data is read from the storage unit 45 as alternative data 43D.
  • Mux 47 multiplexes audio data 43A, video data 43B, and metadata. Which metadata is multiplexed depends on the determination of the determination unit 44.
  • the HDMI transmission unit 48 transmits the multiplexed data to an image processing apparatus having a mechanism for performing luminance conversion processing.
  • step S50 the reading unit 41 reads the encoded audio data, video data, and metadata.
  • step S52 the decoder 42 decodes the encoded audio data, video data, and metadata.
  • step S54 the determination unit 44 determines whether the metadata 43C is missing or the value of the metadata 43C is abnormal. As described above, the determination unit 44 determines that there is an abnormality when the metadata 43C is missing or when the value of the metadata 43C is abnormal. The determination unit 44 may determine the metadata 43C using the same method as in the first embodiment.
  • step S54 determines that there is an abnormality in step S54 (that is, YES)
  • the process proceeds to step S56.
  • the determination unit 44 determines that there is no abnormality in Step S54 (that is, NO)
  • the process proceeds to Step S58.
  • step S56 the determination unit 44 uses the substitute data 43D added to the video data representing the video having the same content as the video represented by the video data 43B in the metadata accumulated in the storage unit 45 for luminance conversion. Data.
  • step S58 the determination unit 44 uses the metadata 43C decoded by the decoder 42 as data used for luminance conversion.
  • step S60 the Mux 47 multiplexes the audio data 43A, the video data 43B, and the metadata.
  • step S60 the Mux 47 multiplexes the substitute data 43D associated with the video data 43B, which is different from the metadata 43C, when the determination unit 44 determines that there is an abnormality.
  • step S60 the Mux 47 multiplexes using the metadata 43C when the determination unit 44 determines that there is no abnormality.
  • step S62 the HDMI transmission unit 48 transmits the data multiplexed by the Mux 47 to the reception unit of the image processing apparatus.
  • a single recording medium records a plurality of video data.
  • metadata added to each of the plurality of video data is also recorded on the recording medium.
  • the determination unit 44 adds it to another video data recorded on the same recording medium.
  • the metadata that has been determined may be used for luminance conversion as alternative data for metadata that has been determined to be abnormal. This is because video data recorded on the same recording medium is highly likely to have the same metadata.
  • the data adopted by the determination unit 44 as data used for luminance conversion is data that the determination unit 44 has determined that there is no abnormality.
  • the video data to which abnormal metadata is added is data of a broadcast program
  • the channel information of the broadcast program, the program title, the program genre (drama, news, variety, movie, etc.), and the program Similar broadcast program data may be retrieved from performers, program presenters, and the like.
  • the broadcast network information is stored in the storage unit 45 in advance, and the abnormal network metadata is obtained from the broadcast network information stored in the storage unit 45. Broadcast program data similar to the video data to which is added may be searched.
  • the reading unit 41 is added to video data representing a future video in terms of time, rather than the video to be displayed next, that is, the video represented by the video data 43B for which the determination unit determines 44 metadata.
  • the metadata may be acquired together with the video data 43B representing the video to be displayed next and the metadata 43C. Then, when the determination unit 44 determines that the metadata 43C has an abnormality, the Mux 47 performs multiplexing processing using the metadata added to the video data representing the future video in terms of time as alternative data. May be.
  • the video providing apparatus 5 of the present embodiment is different from the fourth embodiment in that it includes a generation unit 52 as shown in FIG.
  • the video providing device 5 is equipped with HDMI as in the fourth embodiment, and includes a reading unit 41, a decoder 42, a generation unit 52, a storage unit 53, a determination unit 54, a multiplexer (Mux) 47, and an HDMI transmission unit 48. I have.
  • the generation unit 52 acquires the video data 43B supplied from the decoder 42.
  • the generation unit 52 analyzes the video data 43B to generate metadata 43D related to the luminance of the video data 43B.
  • the generation unit 52 accumulates the generated metadata 43D in the storage unit 53 together with the video data 43B corresponding to the metadata 43D.
  • the storage unit 53 stores metadata 43D generated by the generation unit 52 analyzing the video data in the past, and video data corresponding to the metadata 43D.
  • the determination unit 54 of the present embodiment represents the video data 43B among the metadata generated by the generation unit 52 and accumulated in the storage unit 53 as alternative data. Metadata obtained by analyzing the video is read from the storage unit 53 as alternative data 43D.
  • step S54 determines that there is an abnormality in step S54 (that is, YES)
  • the process proceeds to step S70.
  • step S ⁇ b> 70 the determination unit 54 analyzes the video data representing the video having the same content as the video represented by the video data 43 ⁇ / b> B generated in advance by the generation unit 52 in the metadata accumulated in the storage unit 53.
  • the metadata 43D obtained by the above is used as alternative data used for luminance conversion.
  • the video providing apparatus 6 is equipped with HDMI as in the fourth embodiment, and includes a reading unit 41, a decoder 42, an input receiving unit 61, a determining unit 62, a multiplexer (Mux) 47, and an HDMI transmitting unit 48. .
  • the metadata determination apparatus is different from the first embodiment in that the metadata determination apparatus according to the present embodiment does not include a storage unit and includes an input reception unit 61 as illustrated in FIG.
  • the input reception unit 61 receives input of data having a luminance value designated by the user.
  • step S54 determines that there is an abnormality in step S54 (that is, YES)
  • the process proceeds to step S80.
  • step S80 the input receiving unit 61 receives an input of data having a luminance value designated by the user. Then, the determination unit 62 uses the data related to the brightness designated by the user as substitute data 43D used for brightness conversion.
  • the data used for luminance conversion when it is determined that the metadata is abnormal, the data used for luminance conversion is replaced according to the video data to which the metadata is added.
  • the present invention is not limited to this, and data used for luminance conversion may be replaced according to the display capability of the display unit that displays video.
  • Embodiments 1 and 2 video data and metadata are stored in the storage unit provided in the image processing apparatus, and in Embodiments 4 and 5 are stored in the storage unit provided in the video providing apparatus. Also good.
  • the video of the video after the point determined to be abnormal is determined according to the metadata acquired before the time point determined to be abnormal Luminance conversion may be performed on the data.
  • control blocks (especially the determination units 17, 29, and 32 and the luminance conversion unit 15) of the image processing apparatuses 1, 2, and 3 may be realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like. Alternatively, it may be realized by software using a CPU (Central Processing Unit).
  • a logic circuit hardware
  • IC chip integrated circuit
  • CPU Central Processing Unit
  • the metadata determination apparatus includes a CPU that executes instructions of a program that is software that realizes each function, and a ROM (Read Only Memory) in which the program and various data are recorded so as to be readable by a computer (or CPU).
  • a storage device (these are referred to as “recording media”), a RAM (Random Access Memory) for expanding the program, and the like are provided.
  • the computer or CPU
  • the recording medium a “non-temporary tangible medium” such as a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • the program may be supplied to the computer via an arbitrary transmission medium (such as a communication network or a broadcast wave) that can transmit the program.
  • an arbitrary transmission medium such as a communication network or a broadcast wave
  • one embodiment of the present invention can also be realized in the form of a data signal embedded in a carrier wave, in which the program is embodied by electronic transmission.
  • the image processing apparatuses 1, 2, and 3 are metadata 12C relating to the luminance of the video represented by the video data 12B, which is added to the video data 12B, and converts the luminance of the video data 12B.
  • the determination units 17, 29, and 32 that determine whether or not the metadata 12 ⁇ / b> C used is abnormal and when the metadata 12 ⁇ / b> C is missing or when the value of the metadata 12 ⁇ / b> C is abnormal
  • the alternative data is different from the metadata 12C and is associated with the video data 12B.
  • a luminance conversion unit that performs luminance conversion on the video data 12B using alternative data.
  • the metadata may have the maximum luminance of the video as a value.
  • the determination units 17, 29, and 32 are such that the maximum luminance value of the video is outside a predetermined range. In some cases, it may be determined that there is an abnormality.
  • the metadata has the maximum luminance of each period constituting the video as a value, and the determination units 17, 29 , 32 may be determined to be abnormal when the difference between the maximum luminance values of two periods that are temporally adjacent to each other exceeds a predetermined threshold.
  • the image processing apparatus 1 acquires video data, and stores the metadata added to the acquired video data in the storage unit 18 (The HDMI receiving unit 11), and the substitute data is a video having the same content as the video in the metadata stored in the storage unit 18 when the determination unit 17 determines that there is an abnormality. It may be metadata added to video data representing.
  • the image processing apparatus 2 is the image processing apparatus 2 according to any one of the aspects 1 to 4, wherein the acquisition unit (HDMI reception unit 11) that acquires video data and the acquisition unit (HDMI reception unit 11) include By analyzing the acquired video data, metadata relating to the luminance of the video data is generated, and a generation unit 27 that accumulates the generated metadata in the storage unit 28 is further provided. May be metadata obtained by analyzing video data representing video having the same content as the video among the metadata stored in the storage unit 28 when it is determined that there is an abnormality.
  • luminance conversion can be performed on video data by using appropriate metadata obtained by analyzing the video data.
  • the substitute data may be data relating to brightness of a video represented by the video data designated by a user.
  • the luminance conversion for displaying the video desired by the user can be performed on the video data.
  • a television receiver includes the image processing device according to any one of aspects 1 to 7 and a tuner for acquiring the video data.
  • the video providing devices 4, 5, 6 determine whether there is an abnormality in the metadata 43 ⁇ / b> C related to the brightness of the video represented by the video data 43 ⁇ / b> B added to the video data 43 ⁇ / b> B.
  • the determination unit 44, 54, 62 that determines that there is an abnormality when the metadata 43C is missing or the value of the metadata 43C is abnormal, and the determination unit 44,
  • the metadata 43C is multiplexed with the video data 43B.
  • the determination units 44, 54, 62 determine that there is an abnormality
  • alternative data different from the metadata is used.
  • a multiplexing unit (Mux 47) is provided that multiplexes the substitute data associated with the video data 43B into the video data 43B.
  • the metadata determination apparatus may be realized by a computer.
  • the metadata determination apparatus is operated by causing the computer to operate as each unit (software element) included in the metadata determination apparatus.
  • a metadata determination program for a metadata determination apparatus that realizes the above in a computer and a computer-readable recording medium on which the metadata determination program is recorded also fall within the category of one aspect of the present invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Receiver Circuits (AREA)

Abstract

メタデータに異常がある場合にも、映像データに適切な輝度変換を施すことが可能な画像処理を実現する。映像データ(12B)に付加された、映像データ(12B)の輝度変換に用いられるメタデータ(12C)の異常の有無を判定する判定部(17)と、判定部(17)が異常有と判定した場合に、メタデータ(12C)とは異なる代替データ(12D)を用いて映像データ(12B)に輝度変換を施す輝度変換部(15)とを備える。

Description

画像処理装置、テレビジョン受像機、画像処理プログラム、記録媒体、および映像提供装置
 本発明の一態様は画像処理装置、テレビジョン受像機、画像処理プログラム、記録媒体、および映像提供装置に関する。
 近年、従来使われている標準ダイナミックレンジ映像信号(SDR映像信号)よりも大幅に広い範囲の輝度を表現することができる高ダイナミックレンジ映像信号(以下、HDR映像信号)が提案されている。
 HDR映像信号を符号化して得られる映像データには、映像の最大輝度または最大平均輝度等を表すメタデータを付加する場合が多い。この場合、このメタデータは、その映像の再生に適した輝度変換を再生装置側で実行する(例えば、その映像の再生に適したEOTF(電気光変換関数)を再生装置側で選択する)ために利用される。
 特許文献1には、輝度調節するための情報を、映像等のコンテンツの付加情報として、コンテンツの再生機の内部に記憶する技術が開示されている。また、特許文献2には、コンテンツの映像信号を解析し、コンテンツの映像の特徴点情報を抽出して、コンテンツを再生するときに、コンテンツの映像の出力画質を調整する技術が開示されている。
日本国公開特許公報「特開2003-319324号公報(2003年11月7日公開)」 日本国公開特許公報「特開2009-194550号公報(2009年8月27日公開)」
 しかしながら、映像データに常にメタデータが付加されているとは限らないし、映像データに付加されているメタデータが常に正常であるとは限らない。すなわち、映像データにメタデータが付加されていない(欠落している)場合、または、映像データに付加されているメタデータの値が異常である場合もあり得る。この場合、その映像の再生に適した輝度変換を再生装置側で実行できない、という問題が生じる。
 本発明の一態様は、前記の問題点に鑑みてなされたものであり、その目的は、メタデータに異常がある場合にも、映像データに適切な輝度変換を施すことが可能な画像処理を実現することにある。
 上記の課題を解決するために、本発明の一態様に係る画像処理装置は、映像データに付加された、上記映像データの輝度変換に用いられるメタデータの異常の有無を判定する判定部と、上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを用いて上記映像データに輝度変換を施す輝度変換部とを備えている。
 また、本発明の一態様に係る映像提供装置は、映像データに付加された、上記映像データが表す映像の輝度に関するメタデータの異常の有無を判定する判定部と、上記判定部が異常無と判定した場合に、上記メタデータを上記映像データに多重化し、上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを上記映像データに多重化する多重化部とを備えている。
 本発明の一態様によれば、メタデータに異常がある場合にも、映像データに適切な輝度変換を施すことができる、という効果を奏する。
本発明の実施形態1に係る画像処理装置を搭載したテレビジョン受像機の外観を示す図である。 本発明の実施形態1に係る画像処理装置における制御のフローチャートである。 本発明の実施形態1に係る画像処理装置の機能ブロック図である。 本発明の実施形態2に係る画像処理装置における制御のフローチャートである。 本発明の実施形態2に係る画像処理装置の機能ブロック図である。 本発明の実施形態3に係る画像処理装置における制御のフローチャートである。 本発明の実施形態3に係る画像処理装置の機能ブロック図である。 本発明の実施形態4に係る画像処理装置を搭載したプレーヤーの外観を示す図である。 本発明の実施形態4に係る画像処理装置における制御のフローチャートである。 本発明の実施形態4に係る画像処理装置の機能ブロック図である。 本発明の実施形態5に係る画像処理装置における制御のフローチャートである。 本発明の実施形態5に係る画像処理装置の機能ブロック図である。 本発明の実施形態6に係る画像処理装置における制御のフローチャートである。 本発明の実施形態6に係る画像処理装置の機能ブロック図である。
 〔実施形態1〕
 以下、本発明の実施の形態について、図1~図3に基づいて詳細に説明する。
 図1は、本実施形態に係る画像処理装置1を備えたテレビジョン受像機100の外観を示す図である。テレビジョン受像機100は、画像処理装置1に含まれる表示部10、および音声出力部14と、映像データを取得するためのチューナー(不図示)とを備えている。
 図2は、本実施形態に係る画像処理装置1の概要を示す機能ブロック図である。
 画像処理装置1は、HDMI(High-Definition Multimedia Interface:登録商標)を搭載しており、HDMI受信部11、音声制御部13、音声出力部14、輝度変換部15、表示制御部16、表示部10、判定部17、および記憶部18を備えている。
 HDMI受信部11は、HDMIケーブルを介して、多重化されている音声データ12A、映像データ12B、およびメタデータ12Cを受信する。HDMI受信部11は、HDMIケーブルを介して、プレーヤー、レコーダ、チューナー等のAV機器等に接続可能である。
 HDMI受信部11は、Demux(デマルチプレクサ)機能を有しており、受信したデータに対して、逆多重化処理を施し、音声データ12Aを音声制御部13に供給し、映像データ12Bを輝度変換部15に配給し、メタデータ12Cを判定部17に供給する。
 メタデータ12Cは、映像データ12Bに付加された、映像データ12Bが表す映像の輝度に関するデータである。本実施形態において、メタデータ12Cは、映像データ12Bが表す映像の最大輝度を値として持つ。ここで、最大輝度は、HDR映像信号に付加されるMaxCLL(Maximum Content Light Level)のように、各フレームの最大輝度の最大値であってもよい。また最大輝度は、HDR映像信号に付加されるMaxFALL(Maximum Frame Average Light Level)のように、各フレームの平均輝度の最大値であってもよい。参考までに、MaxCLLの定義を下記表1に示し、MaxFALLの定義を下記表2に示す。
Figure JPOXMLDOC01-appb-T000001
Figure JPOXMLDOC01-appb-T000002
 音声制御部13は、音声データ12Aに応じた音声が出力されるよう、音声出力部14を制御する。
 判定部17は、メタデータ12Cの異常の有無を判定し、メタデータ12Cが欠落している場合、または、メタデータ12Cの値が異常である場合に異常有と判定する。判定部17は、メタデータ12Cの値が異常無であると判定すると、HDMI受信部11から取得したメタデータ12Cを輝度変換部15に提供する。また、判定部17は、メタデータ12Cが異常有であると判定すると、HDMI受信部11から取得したメタデータ12Cの代わりに、記憶部18から読みだした代替データ12Dを輝度変換部15に提供する。
 記憶部18には、過去にHDMI受信部11から取得され、判定部17に異常無であると判定されたメタデータ、および当該メタデータが付加されている映像データが蓄積されている。上述した判定部17は、メタデータ12Cの値が異常無である場合、記憶部18に蓄積されているメタデータのうち、映像データ12Bが表す映像と同一内容の映像を表す映像データに付加されていたメタデータを、代替データ12Dとして記憶部18から読みだす。
 輝度変換部15は、映像データ12Bに対して、判定部17から取得したメタデータ12C(メタデータ12Cが異常無である場合)または代替データ12D(メタデータ12Cが異常有である場合)が表す最大輝度に応じた輝度変換を行う。例えば、判定部17から取得したメタデータ12Cまたは代替データ12Dが表す最大輝度に応じたEOTFを用いて、映像データ12Bに対する輝度変換を行う。
 表示制御部16は、輝度変換部15に輝度変換された映像データに応じた映像が表示されるよう、表示部10を制御する。
 続いて、図3のフローチャートを参照して、本実施形態に係る画像処理装置1における制御の一例を説明する。
 ステップ10において、HDMI受信部11は、多重化されている音声データ12A、映像データ12B、およびメタデータ12Cを受信する。また、HDMI受信部11は、受信したデータに逆多重化処理を施す。
 ステップS12において、判定部17は、メタデータ12Cが欠落しているか、またはメタデータ12Cの値が異常であるかを判定する。上述の通り、判定部17は、メタデータ12Cが欠落している場合、または、メタデータ12Cの値が異常である場合に異常有と判定する。
 判定部17は、例えば、メタデータ12Cに含まれる、映像データ12Bが表す映像の最大輝度の値が予め定められた範囲外にある場合に、異常有と判定してもよい。
 ステップS12において判定部17が異常有と判定した場合(すなわち、YES)は、ステップS14に移行する。ステップS12において判定部17が異常無と判定した場合(すなわち、NO)は、ステップS16に移行する。
 ステップS14において、判定部17は、記憶部18に蓄積されたメタデータの中で、映像データ12Bが表す映像と同一内容の映像を表す映像データに付加されたメタデータを輝度変換に用いる代替データとする。
 ステップS16において、判定部17は、HDMI受信部11が受信し、逆多重化したメタデータ12Cを輝度変換に用いるデータとする。
 ステップS18において、輝度変換部15は、代替データまたはメタデータ12Cを用いて映像データ12Bに輝度変換を施す。
 すなわち、ステップS18において輝度変換部15は、判定部17が異常有と判定した場合に、メタデータ12Cとは異なる、映像データ12Bに関連付けられた代替データを用いて映像データ12Bに輝度変換を施す。また、ステップS18において輝度変換部15は、判定部17が異常無と判定した場合に、メタデータ12Cを用いて映像データ12Bに輝度変換を施す。
 ステップS20において、表示制御部16は、輝度変換部15に輝度変換された映像データに応じた映像が表示されるよう、表示部10を制御する。
 なお、HDMI受信部11は、次に表示対象となる映像、すなわち、判定部17にメタデータ12Cを判定されている映像データ12Bが表す映像よりも、時間的に未来の映像を表す映像データに付加されたメタデータを、次に表示対象となる映像を表す映像データ、およびメタデータと共に取得してもよい。そして、輝度変換部15は、判定部17がメタデータ12Cに異常有と判定した場合に、代替データとして、時間的に未来の映像を表す映像データに付加されたメタデータを用いて映像データ12Bに輝度変換を施してもよい。
 また、メタデータ12Cは、映像データ12Bが表す映像を構成する各期間の最大輝度を値として持っていてもよい。ここで、期間は、フレームであってもよいし、複数のフレームからなるシーンであってもよいし、複数のシーンからなるチャプターであってもよい。各期間の最大輝度は、通常、ゆっくり変化する。したがって、メタデータ12Cに値として含まれる各期間の最大輝度が急激に変化する場合には、メタデータ12Cが異常であると見做すことができる。したがって、映像データ12Bが表す映像を構成する期間のうち、時間的に隣接する2つの期間の最大輝度の差が予め定められた閾値を超える場合に、判定部17が異常有と判定する構成を採用すれば、メタデータ12Cの以上を適切に検出することが可能である。
 〔実施形態2〕
 本発明の他の実施形態について、図4~図5に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 本実施形態の画像処理装置2は、図4に示されるように、生成部27を備える点で実施形態1と異なる。
 画像処理装置2は、実施形態1と同様にHDMIを搭載しており、HDMI受信部11、音声制御部13、音声出力部14、輝度変換部15、表示制御部16、表示部10、生成部27、記憶部28、および判定部29を備えている。
 生成部27は、HDMI受信部11が供給する映像データ12Bを取得する。生成部27は、映像データ12Bを解析することによって、映像データ12Bの輝度に関するメタデータ12Dを生成する。生成部27は、生成したメタデータ12Dを、メタデータ12Dに対応する映像データ12Bと共に記憶部28に蓄積させる。
 記憶部28には、過去に生成部27が映像データを解析することによって生成したメタデータ12D、および当該メタデータ12Dと対応する映像データが蓄積されている。本実施形態の判定部29は、メタデータ12Cの値が異常無である場合、代替データとして、生成部27により生成され記憶部28に蓄積されているメタデータのうち、映像データ12Bが表す映像を解析することにより得られたメタデータを、代替データ12Dとして記憶部28から読みだす。
 続いて、図5のフローチャートを参照して、本実施形態に係る画像処理装置2における制御の、実施形態1に係る画像処理装置1における制御と異なる点を説明する。
 ステップS12において判定部29が異常有と判定した場合(すなわち、YES)は、ステップS30に移行する。
 ステップS30において、判定部29は、記憶部28に蓄積されたメタデータの中で、映像データ12Bが表す映像と同一内容の映像を表す映像データを解析することにより得られたメタデータを輝度変換に用いる代替データとする。
 なお、生成部27は、連続する映像全てを表す映像データに対して輝度変換に用いるデータを生成するだけでなく、例えばチャプター毎、シーンチェンジ毎、フレーム単位毎、均等時間割毎等で、複数の輝度変換に用いるデータを生成してもよい。
 〔実施形態3〕
 本発明の他の実施形態について、図6~図7に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 本実施形態の画像処理装置3は、図6に示されるように、記憶部を備えず、入力受付部31を備える点で実施形態1と異なる。
 画像処理装置3は、実施形態1と同様にHDMIを搭載しており、HDMI受信部11、音声制御部13、音声出力部14、輝度変換部15、表示制御部16、表示部10、入力受付部31、および判定部32を備えている。
 入力受付部31は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。
 続いて、図7のフローチャートを参照して、本実施形態に係る画像処理装置3における制御の、実施形態1に係る画像処理装置1における制御と異なる点を説明する。
 ステップS12において判定部32が異常有と判定した場合(すなわち、YES)は、ステップS40に移行する。
 ステップS40において、入力受付部31は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。そして判定部32は、ユーザに指定された輝度に関するデータを輝度変換に用いる代替データ12Dとする。
 〔実施形態4〕
 本発明の他の実施の形態について、図8~図10に基づいて詳細に説明する。
 図8は、本実施形態に係る映像提供装置4の外観を示す図である。映像提供装置4は、ハードディスク、ブルーレイディスク、DVDディスク等の記録媒体(不図示)を映像提供装置4内に挿入するための挿入口40を備えている。
 記録媒体には、エンコードされている音声データ、映像データ、およびメタデータが記録されている。
 図9は、本実施形態に係る映像提供装置4の概要を示す機能ブロック図である。
 映像提供装置4は、HDMIを搭載しており、読取部41、デコーダ42、判定部44、記憶部45、マルチプレクサ(Mux)47、およびHDMI送信部48を備えている。
 読取部41は、挿入口40に挿入された記録媒体から、エンコードされている音声データ、映像データ、およびメタデータを読み取る。
 デコーダ42は、エンコードされている音声データ、映像データ、およびメタデータをデコードし、音声データ43AをMux47に供給し、映像データ43BをMux47に配給し、メタデータ43Cを判定部44および記憶部45に供給する。
 メタデータ43Cは、映像データ43Bに付加された、映像データ43Bが表す映像の輝度に関するデータである。本実施形態においても、実施形態1と同様に、メタデータ43Cは、映像データ43Bが表す映像の最大輝度を値として持つ。
 判定部44は、メタデータ43Cの異常の有無を判定し、メタデータ43Cが欠落している場合、または、メタデータ43Cの値が異常である場合に異常有と判定する。判定部44は、メタデータ43Cの値が異常無であると判定すると、デコーダ42から取得したメタデータ43CをMux47に提供する。また、判定部44は、メタデータ43Cが異常有であると判定すると、デコーダ42から取得したメタデータ43Cの代わりに、記憶部45から読みだした代替データ43DをMux47に提供する。
 記憶部45には、過去にデコーダ42から取得され、判定部44に異常無であると判定されたメタデータ、および当該メタデータが付加されている映像データが蓄積されている。上述した判定部44は、メタデータ43Cの値が異常無である場合、代替データ43Dとして、記憶部45に蓄積されているメタデータのうち、映像データ43Bが表す映像と同一内容の映像を表す映像データに付加されていたメタデータを、代替データ43Dとして記憶部45から読みだす。
 Mux47は、音声データ43A、映像データ43B、およびメタデータを多重化する。どのメタデータを多重化するかは判定部44の判定による。
 HDMI送信部48は、多重化されたデータを、輝度変換処理をする機構を有する画像処理装置へ送信する。
 続いて、図10のフローチャートを参照して、本実施形態に係る映像提供装置4における制御の一例を説明する。
 ステップS50において、読取部41は、エンコードされている音声データ、映像データ、およびメタデータを読み取る。
 ステップS52において、デコーダ42は、エンコードされている音声データ、映像データ、およびメタデータをデコードする。
 ステップS54において、判定部44は、メタデータ43Cが欠落しているか、またはメタデータ43Cの値が異常であるかを判定する。上述の通り、判定部44は、メタデータ43Cが欠落している場合、または、メタデータ43Cの値が異常である場合に異常有と判定する。判定部44は、メタデータ43Cの判定を、実施形態1と同様の方法で行ってよい。
 ステップS54において判定部44が異常有と判定した場合(すなわち、YES)は、ステップS56に移行する。ステップS54において判定部44が異常無と判定した場合(すなわち、NO)は、ステップS58に移行する。
 ステップS56において、判定部44は、記憶部45に蓄積されたメタデータの中で、映像データ43Bが表す映像と同一内容の映像を表す映像データに付加された代替データ43Dを輝度変換に用いる代替データとする。
 ステップS58において、判定部44は、デコーダ42がデコードしたメタデータ43Cを輝度変換に用いるデータとする。
 ステップS60において、Mux47は、音声データ43A、映像データ43B、およびメタデータを多重化する。
 すなわち、ステップS60においてMux47は、判定部44が異常有と判定した場合に、メタデータ43Cとは異なる、映像データ43Bに関連付けられた代替データ43Dを多重化する。また、ステップS60においてMux47は、判定部44が異常無と判定した場合に、メタデータ43Cを用いて多重化する。
 ステップS62において、HDMI送信部48は、Mux47が多重化したデータを、画像処理装置の受信部へ送信する。
 また、1枚の記録媒体が、複数の映像データを記録しているときがある。このときには、複数の映像データの各々に付加されるメタデータもそれぞれ記録媒体に記録されている。このようなときにおいて、何れかの映像データに付加されたメタデータが判定部44に異常有と判定された場合は、判定部44は、同じ記録媒体に記録されている別の映像データに付加されたメタデータを、異常有と判定されたメタデータの代替データとして、輝度変換に用いてもよい。同じ記録媒体に記録されている映像データ同士は、同様のメタデータが付加される可能性が高いからである。
 なお、判定部44が、輝度変換に用いるデータとして採用するデータは、判定部44が異常無と判定したデータである。
 また、例えば異常有のメタデータが付加された映像データが、放送番組のデータであった場合は、放送番組のチャンネル情報、番組タイトル、番組ジャンル(ドラマ、ニューズ、バラエティ、映画等)、番組への出演者、番組の司会者等から、類似した放送番組のデータを検索してもよい。
 また、映像データが、放送番組のデータであった場合は、放送のネットワーク情報を予め記憶部45に蓄積しておき、記憶部45に蓄積されている放送のネットワーク情報から、異常有のメタデータが付加された映像データに類似した放送番組のデータを検索してもよい。
 なお、読取部41は、次に表示対象となる映像、すなわち、判定部が44メタデータを判定している映像データ43Bが表す映像よりも、時間的に未来の映像を表す映像データに付加されたメタデータを、次に表示対象となる映像を表す映像データ43B、およびメタデータ43Cと共に取得してもよい。そして、Mux47は、判定部44がメタデータ43Cに異常有と判定した場合に、代替データとして、時間的に未来の映像を表す映像データに付加されたメタデータを用いて多重化処理を実施してもよい。
 〔実施形態5〕
 本発明の他の実施形態について、図11~図12に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 本実施形態の映像提供装置5は、図11に示されるように、生成部52を備える点で実施形態4と異なる。
 映像提供装置5は、実施形態4と同様にHDMIを搭載しており、読取部41、デコーダ42、生成部52、記憶部53、判定部54、マルチプレクサ(Mux)47、およびHDMI送信部48を備えている。
 生成部52は、デコーダ42が供給する映像データ43Bを取得する。生成部52は、映像データ43Bを解析することによって、映像データ43Bの輝度に関するメタデータ43Dを生成する。生成部52は、生成したメタデータ43Dを、メタデータ43Dに対応する映像データ43Bと共に記憶部53に蓄積させる。
 記憶部53には、過去に生成部52が映像データを解析することによって生成したメタデータ43D、および当該メタデータ43Dと対応する映像データが蓄積されている。本実施形態の判定部54は、メタデータ43Cの値が異常無である場合、代替データとして、生成部52により生成され、記憶部53に蓄積されているメタデータのうち、映像データ43Bが表す映像を解析することにより得られたメタデータを、代替データ43Dとして記憶部53から読みだす。
 続いて、図12のフローチャートを参照して、本実施形態に係る映像提供装置5における制御の、実施形態4に係る映像提供装置4における制御と異なる点を説明する。
 ステップS54において判定部54が異常有と判定した場合(すなわち、YES)は、ステップS70に移行する。
 ステップS70において、判定部54は、記憶部53に蓄積されたメタデータの中で、生成部52によって予め生成された、映像データ43Bが表す映像と同一内容の映像を表す映像データを解析することにより得られたメタデータ43Dを輝度変換に用いる代替データとする。
 〔実施形態6〕
 本発明の他の実施形態について、図13~図14に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 映像提供装置6は、実施形態4と同様にHDMIを搭載しており、読取部41、デコーダ42、入力受付部61、判定部62、マルチプレクサ(Mux)47、およびHDMI送信部48を備えている。
 本実施形態のメタデータ判定装置は、図13に示されるように、記憶部を備えず、入力受付部61を備える点で実施形態1と異なる。
 入力受付部61は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。
 続いて、図14のフローチャートを参照して、本実施形態に係る映像提供装置6における制御の、実施形態4に係るにおける映像提供装置4における制御と異なる点を説明する。
 ステップS54において判定部62が異常有と判定した場合(すなわち、YES)は、ステップS80に移行する。
 ステップS80において、入力受付部61は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。そして判定部62は、ユーザに指定された輝度に関するデータを輝度変換に用いる代替データ43Dとする。
 なお、上記実施形態1~6では、メタデータに異常有と判定された場合、メタデータが付加されている映像データに応じて、輝度変換に用いるデータを置き換えている。しかしながら、これに限らず、映像を表示する表示部の表示能力に応じて輝度変換に用いるデータを置き換えてもよい。
 また、上記実施形態1~2では画像処理装置に備わる記憶部に、上記実施形態4~5では映像提供装置に備わる記憶部に映像データおよびメタデータを蓄積するが、外部のサーバに蓄積してもよい。
 また、映像の再生途中に、メタデータに異常有と判定された場合には、異常有と判定される時点以前に取得したメタデータに応じて、異常有と判定された時点後の映像の映像データに対して輝度変換を施してもよい。
 〔ソフトウェアによる実現例〕
 画像処理装置1,2,3の制御ブロック(特に判定部17,29,32および輝度変換部15)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェアによって実現してもよい。
 後者の場合、メタデータ判定装置は、各機能を実現するソフトウェアであるプログラムの命令を実行するCPU、上記プログラムおよび各種データがコンピュータ(またはCPU)で読み取り可能に記録されたROM(Read Only Memory)または記憶装置(これらを「記録媒体」と称する)、上記プログラムを展開するRAM(Random Access Memory)などを備えている。そして、コンピュータ(またはCPU)が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の一態様の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体(通信ネットワークや放送波等)を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
 〔まとめ〕
 本発明の態様1に係る画像処理装置1,2,3は、映像データ12Bに付加された、上記映像データ12Bが表す映像の輝度に関するメタデータ12Cであって、上記映像データ12Bの輝度変換に用いられるメタデータ12Cの異常の有無を判定する判定部17,29,32であって、上記メタデータ12Cが欠落している場合、または、上記メタデータ12Cの値が異常である場合に異常有と判定する判定部17,29,32と、上記判定部17,29,32が異常有と判定した場合に、上記メタデータ12Cとは異なる代替データであって、上記映像データ12Bに関連付けられた代替データを用いて上記映像データ12Bに輝度変換を施す輝度変換部とを備えている。
 上記の構成によれば、映像データに付加されたメタデータの値が異常である場合にも、映像データに適切な輝度変換を施すことができる。
 本発明の態様2に係る画像処理装置1,2,3は、上記態様1において、上記メタデータは、上記映像の最大輝度を値として持っていてもよい。
 上記の構成によれば、メタデータ12Cの値の異常の判定が容易になる。
 本発明の態様3に係る画像処理装置1,2,3は、上記態様1または2において、上記判定部17,29,32は、上記映像の最大輝度の値が予め定められた範囲外にある場合に、異常有と判定してもよい。
 上記の構成によれば、メタデータ12Cの値の異常の判定が容易になる。
 本発明の態様4に係る画像処理装置1,2,3は、上記態様1または2において、上記メタデータは、上記映像を構成する各期間の最大輝度を値として持ち、上記判定部17,29,32は、上記映像を構成する期間のうち、時間的に隣接する2つの期間の最大輝度の値の差が予め定められた閾値を超える場合に、異常有と判定してもよい。
 上記の構成によれば、メタデータ12Cの値の異常の判定が容易になる。
 本発明の態様5に係る画像処理装置1は、上記態様1~4の何れか1態様において、映像データを取得すると共に、取得した映像データに付加されたメタデータを記憶部18に蓄積する取得部(HDMI受信部11)を更に備え、上記代替データは、上記判定部17が異常有と判定した場合に、上記記憶部18に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データに付加されたメタデータであってもよい。
 上記の構成によれば、過去に取得した適切なメタデータによって、映像データに輝度変換を施すことができる。
 本発明の態様6に係る画像処理装置2は、上記態様1~4の何れか1態様において、映像データを取得する取得部(HDMI受信部11)と、上記取得部(HDMI受信部11)が取得した映像データを解析することによって、該映像データの輝度に関するメタデータを生成すると共に、生成したメタデータを記憶部28に蓄積する生成部27を更に備え、上記代替データは、上記判定部29が異常有と判定した場合に、上記記憶部28に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データを解析することにより得られたメタデータであってもよい。
 上記の構成によれば、映像データを解析することにより得られた適切なメタデータによって、映像データに輝度変換を施すことができる。
 本発明の態様7に係る画像処理装置は、上記態様1~4の何れか1態様において、上記代替データは、ユーザに指定された上記映像データが表す映像の輝度に関するデータであってもよい。
 上記の構成によれば、ユーザが希望する映像を表示するための輝度変換を映像データに施すことができる。
 本発明の態様8に係るテレビジョン受像機は、上記態様1~7の何れか1態様に記載の画像処理装置と、上記映像データを取得するためのチューナーとを備えている。
 本発明の態様9に係る映像提供装置4,5,6は、映像データ43Bに付加された、上記映像データ43Bが表す映像の輝度に関するメタデータ43Cの異常の有無を判定する判定部44,54,62であって、上記メタデータ43Cが欠落している場合、または、上記メタデータ43Cの値が異常である場合に異常有と判定する判定部44,54,62と、上記判定部44,54,62が異常無と判定した場合に、上記メタデータ43Cを上記映像データ43Bに多重化し、上記判定部44,54,62が異常有と判定した場合に、上記メタデータとは異なる代替データであって、上記映像データ43Bに関連付けられた代替データを上記映像データ43Bに多重化する多重化部(Mux47)とを備えている。
 上記の構成によれば、映像データに付加されたメタデータの値が異常である場合にも、映像データに適切な輝度変換を施すことができる。
 本発明の各態様に係るメタデータ判定装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記メタデータ判定装置が備える各部(ソフトウェア要素)として動作させることにより上記メタデータ判定装置をコンピュータにて実現させるメタデータ判定装置のメタデータ判定プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の一態様の範疇に入る。
 本発明の一態様は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の一態様の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。
 100 テレビジョン受像機
 1,2,3 画像処理装置
 4,5,6 映像提供装置
 11 HDMI受信部(取得部)
 15 輝度変換部
 17,29,32,44,54,62 判定部
 18,28 記憶部
 27 生成部
 47 マルチプレクサ(多重化部)

Claims (12)

  1.  映像データに付加された、上記映像データの輝度変換に用いられるメタデータの異常の有無を判定する判定部と、
     上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを用いて上記映像データに輝度変換を施す輝度変換部と
    を備えることを特徴とする画像処理装置。
  2.  上記判定部は、上記メタデータが欠落している場合、または、上記メタデータの値が異常である場合に異常有と判定する
    ことを特徴とする請求項1に記載の画像処理装置。
  3.  上記メタデータは、上記映像データが表す映像の輝度に関するメタデータであって
     上記メタデータは、上記映像の最大輝度を値として持つ
    ことを特徴とする請求項1または2に記載の画像処理装置。
  4.  上記判定部は、上記映像の最大輝度の値が予め定められた範囲外にある場合に、異常有と判定する
    ことを特徴とする請求項3に記載の画像処理装置。
  5.  上記メタデータは、上記映像データが表す映像の輝度に関するメタデータであって
     上記メタデータは、上記映像を構成する各期間の最大輝度を値として持ち、
     上記判定部は、上記映像を構成する期間のうち、時間的に隣接する2つの期間の最大輝度の差が予め定められた閾値を超える場合に、異常有と判定する
    ことを特徴とする請求項1または2に記載の画像処理装置。
  6.  映像データを取得すると共に、取得した映像データに付加されたメタデータを記憶部に蓄積する取得部を更に備え、
     上記代替データは、上記判定部が異常有と判定した場合に、上記記憶部に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データに付加されたメタデータである、ことを特徴とする請求項1~5の何れか1項に記載の画像処理装置。
  7.  映像データを取得する取得部と、
     上記取得部が取得した映像データを解析することによって、該映像データの輝度に関するメタデータを生成すると共に、生成したメタデータを記憶部に蓄積する生成部を更に備え、
     上記代替データは、上記判定部が異常有と判定した場合に、上記記憶部に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データを解析することにより得られたメタデータである、ことを特徴とする請求項1~5の何れか1項に記載の画像処理装置。
  8.  上記代替データは、ユーザに指定された輝度の値を持つデータである
    ことを特徴とする請求項1~5の何れか1項に記載の画像処理装置。
  9.  請求項1~8の何れか1項に記載の画像処理装置と、上記映像データを取得するためのチューナーとを備えることを特徴とするテレビジョン受像機。
  10.  請求項1に記載の画像処理装置としてコンピュータを機能させるための画像処理プログラムであって、上記判定部、および上記輝度変換部としてコンピュータを機能させるための画像処理プログラム。
  11.  請求項10に記載の画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
  12.  映像データに付加された、上記映像データが表す映像の輝度に関するメタデータの異常の有無を判定する判定部と、
     上記判定部が異常無と判定した場合に、上記メタデータを上記映像データに多重化し、上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを上記映像データに多重化する多重化部と
    を備えることを特徴とする映像提供装置。
PCT/JP2017/008553 2016-09-02 2017-03-03 画像処理装置、テレビジョン受像機、画像処理プログラム、記録媒体、および映像提供装置 WO2018042722A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016172308A JP6276815B1 (ja) 2016-09-02 2016-09-02 画像処理装置、テレビジョン受像機、画像処理システム、画像処理プログラム、記録媒体、および映像提供装置
JP2016-172308 2016-09-02

Publications (1)

Publication Number Publication Date
WO2018042722A1 true WO2018042722A1 (ja) 2018-03-08

Family

ID=61158307

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/008553 WO2018042722A1 (ja) 2016-09-02 2017-03-03 画像処理装置、テレビジョン受像機、画像処理プログラム、記録媒体、および映像提供装置

Country Status (2)

Country Link
JP (1) JP6276815B1 (ja)
WO (1) WO2018042722A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014532195A (ja) * 2011-09-27 2014-12-04 コーニンクレッカ フィリップス エヌ ヴェ 画像のダイナミックレンジ変換のための装置及び方法
JP2017069937A (ja) * 2015-10-01 2017-04-06 日立マクセル株式会社 放送受信装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6986670B2 (ja) * 2015-09-11 2021-12-22 パナソニックIpマネジメント株式会社 映像受信方法及び映像受信装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014532195A (ja) * 2011-09-27 2014-12-04 コーニンクレッカ フィリップス エヌ ヴェ 画像のダイナミックレンジ変換のための装置及び方法
JP2017069937A (ja) * 2015-10-01 2017-04-06 日立マクセル株式会社 放送受信装置

Also Published As

Publication number Publication date
JP2018038019A (ja) 2018-03-08
JP6276815B1 (ja) 2018-02-07

Similar Documents

Publication Publication Date Title
US11140354B2 (en) Method for generating control information based on characteristic data included in metadata
US10291881B2 (en) Conversion method and conversion apparatus
CN111836047B (zh) 显示装置
JP5577415B2 (ja) ビットストリームに埋め込まれたメタデータを用いたレンダリング制御を備えるビデオ表示
JP7117558B2 (ja) 映像表示装置及び映像表示方法
JP2007295519A (ja) マルチメディアコンテンツの複数の映像角度を表示装置で同時に再生するシステム及び方法
RU2668549C2 (ru) Устройство сервера, устройство клиент, способ распределения содержания и компьютерная программа
CN107736017B (zh) 影像再现装置和影像再现方法
JP6276815B1 (ja) 画像処理装置、テレビジョン受像機、画像処理システム、画像処理プログラム、記録媒体、および映像提供装置
JP6928885B2 (ja) 表示装置、表示方法及びコンピュータプログラム
JP6641230B2 (ja) 映像再生装置及び映像再生方法
JP5692255B2 (ja) コンテンツ再生装置およびコンテンツ処理方法
JP6868797B2 (ja) 変換方法及び変換装置
JP6646561B2 (ja) 電子機器及び表示制御方法
JP2021153299A (ja) 再生装置
CN115943625A (zh) 广播接收装置、服务器设备、信息记录播放装置及显示系统
JP2022096398A (ja) 放送受信装置、サーバ装置、情報記録再生装置、第1表示システム、及び第2表示システム
JP2008211771A (ja) デジタルプログラム録画装置及び方法、そしてその方法によりプログラム付加情報を保存する記録媒体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17845733

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17845733

Country of ref document: EP

Kind code of ref document: A1