JP6276815B1 - Image processing apparatus, television receiver, image processing system, image processing program, recording medium, and video providing apparatus - Google Patents

Image processing apparatus, television receiver, image processing system, image processing program, recording medium, and video providing apparatus Download PDF

Info

Publication number
JP6276815B1
JP6276815B1 JP2016172308A JP2016172308A JP6276815B1 JP 6276815 B1 JP6276815 B1 JP 6276815B1 JP 2016172308 A JP2016172308 A JP 2016172308A JP 2016172308 A JP2016172308 A JP 2016172308A JP 6276815 B1 JP6276815 B1 JP 6276815B1
Authority
JP
Japan
Prior art keywords
metadata
video
video data
image processing
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016172308A
Other languages
Japanese (ja)
Other versions
JP2018038019A (en
Inventor
尚昭 柴本
尚昭 柴本
高倉 英一
英一 高倉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2016172308A priority Critical patent/JP6276815B1/en
Priority to PCT/JP2017/008553 priority patent/WO2018042722A1/en
Application granted granted Critical
Publication of JP6276815B1 publication Critical patent/JP6276815B1/en
Publication of JP2018038019A publication Critical patent/JP2018038019A/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4425Monitoring of client processing errors or hardware failure

Abstract

【課題】メタデータに異常がある場合にも、映像データに適切な輝度変換を施すことが可能な画像処理を実現する。【解決手段】映像データ(12B)に付加された、映像データ(12B)の輝度変換に用いられるメタデータ(12C)の異常の有無を判定する判定部(17)と、判定部(17)が異常有と判定した場合に、メタデータ(12C)とは異なる代替データ(12D)を用いて映像データ(12B)に輝度変換を施す輝度変換部(15)とを備える。【選択図】図2Image processing capable of performing appropriate luminance conversion on video data even when there is an abnormality in metadata is realized. A determination unit (17) for determining presence / absence of abnormality of metadata (12C) added to video data (12B) and used for luminance conversion of the video data (12B), and a determination unit (17) A luminance conversion unit (15) that performs luminance conversion on the video data (12B) using alternative data (12D) different from the metadata (12C) when it is determined that there is an abnormality. [Selection] Figure 2

Description

本発明は画像処理装置、テレビジョン受像機、画像処理システム、画像処理プログラム、記録媒体、および映像提供装置に関する。   The present invention relates to an image processing device, a television receiver, an image processing system, an image processing program, a recording medium, and a video providing device.

近年、従来使われている標準ダイナミックレンジ映像信号(SDR映像信号)よりも大幅に広い範囲の輝度を表現することができる高ダイナミックレンジ映像信号(以下、HDR映像信号)が提案されている。   In recent years, there has been proposed a high dynamic range video signal (hereinafter, HDR video signal) capable of expressing a luminance in a significantly wider range than a conventionally used standard dynamic range video signal (SDR video signal).

HDR映像信号を符号化して得られる映像データには、映像の最大輝度または最大平均輝度等を表すメタデータを付加する場合が多い。この場合、このメタデータは、その映像の再生に適した輝度変換を再生装置側で実行する(例えば、その映像の再生に適したEOTF(電気光変換関数)を再生装置側で選択する)ために利用される。   In many cases, metadata representing the maximum luminance or maximum average luminance of video is added to video data obtained by encoding an HDR video signal. In this case, this metadata is used to perform luminance conversion suitable for reproduction of the video on the reproduction device side (for example, selecting an EOTF (electro-optic conversion function) suitable for reproduction of the video on the reproduction device side). Used for

特許文献1には、輝度調節するための情報を、映像等のコンテンツの付加情報として、コンテンツの再生機の内部に記憶する技術が開示されている。また、特許文献2には、コンテンツの映像信号を解析し、コンテンツの映像の特徴点情報を抽出して、コンテンツを再生するときに、コンテンツの映像の出力画質を調整する技術が開示されている。   Patent Document 1 discloses a technique for storing information for adjusting luminance as content additional information such as video inside a content player. Patent Document 2 discloses a technique for analyzing the content video signal, extracting feature point information of the content video, and adjusting the output image quality of the content video when the content is played back. .

特開2003−319324号公報(2003年11月7日公開)JP 2003-319324 A (published November 7, 2003) 特開2009−194550号公報(2009年8月27日公開)JP 2009-194550 A (released on August 27, 2009)

しかしながら、映像データに常にメタデータが付加されているとは限らないし、映像データに付加されているメタデータが常に正常であるとは限らない。すなわち、映像データにメタデータが付加されていない(欠落している)場合、または、映像データに付加されているメタデータの値が異常である場合もあり得る。この場合、その映像の再生に適した輝度変換を再生装置側で実行できない、という問題が生じる。   However, metadata is not always added to video data, and metadata added to video data is not always normal. That is, there may be a case where metadata is not added (missed) to video data, or a value of metadata added to video data is abnormal. In this case, there arises a problem that luminance conversion suitable for reproduction of the video cannot be executed on the reproduction apparatus side.

本発明は、前記の問題点に鑑みてなされたものであり、その目的は、メタデータに異常がある場合にも、映像データに適切な輝度変換を施すことが可能な画像処理を実現することにある。   The present invention has been made in view of the above-mentioned problems, and an object thereof is to realize image processing capable of performing appropriate luminance conversion on video data even when there is an abnormality in metadata. It is in.

上記の課題を解決するために、本発明の一態様に係る画像処理装置は、映像データに付加された、上記映像データの輝度変換に用いられるメタデータの異常の有無を判定する判定部と、上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを用いて上記映像データに輝度変換を施す輝度変換部とを備えている。   In order to solve the above problems, an image processing apparatus according to an aspect of the present invention includes a determination unit that determines whether there is an abnormality in metadata that is added to video data and is used for luminance conversion of the video data. And a luminance conversion unit that performs luminance conversion on the video data using alternative data different from the metadata when the determination unit determines that there is an abnormality.

また、本発明の一態様に係る映像提供装置は、映像データに付加された、上記映像データが表す映像の輝度に関するメタデータの異常の有無を判定する判定部と、上記判定部が異常無と判定した場合に、上記メタデータを上記映像データに多重化し、上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを上記映像データに多重化する多重化部とを備えている。   In addition, the video providing apparatus according to one aspect of the present invention includes a determination unit that determines whether there is an abnormality in the metadata related to the luminance of the video represented by the video data, which is added to the video data, and the determination unit has no abnormality. A multiplexing unit that multiplexes the metadata into the video data when determined, and multiplexes alternative data different from the metadata into the video data when the determination unit determines that there is an abnormality. ing.

本発明の一態様によれば、メタデータに異常がある場合にも、映像データに適切な輝度変換を施すことができる、という効果を奏する。   According to one aspect of the present invention, it is possible to perform appropriate luminance conversion on video data even when there is an abnormality in metadata.

本発明の実施形態1に係る画像処理装置を搭載したテレビジョン受像機の外観を示す図である。It is a figure which shows the external appearance of the television receiver which mounts the image processing apparatus which concerns on Embodiment 1 of this invention. 本発明の実施形態1に係る画像処理装置における制御のフローチャートである。4 is a flowchart of control in the image processing apparatus according to the first embodiment of the present invention. 本発明の実施形態1に係る画像処理装置の機能ブロック図である。1 is a functional block diagram of an image processing apparatus according to Embodiment 1 of the present invention. 本発明の実施形態2に係る画像処理装置における制御のフローチャートである。It is a flowchart of the control in the image processing apparatus which concerns on Embodiment 2 of this invention. 本発明の実施形態2に係る画像処理装置の機能ブロック図である。It is a functional block diagram of the image processing apparatus which concerns on Embodiment 2 of this invention. 本発明の実施形態3に係る画像処理装置における制御のフローチャートである。It is a flowchart of the control in the image processing apparatus which concerns on Embodiment 3 of this invention. 本発明の実施形態3に係る画像処理装置の機能ブロック図である。It is a functional block diagram of the image processing apparatus which concerns on Embodiment 3 of this invention. 本発明の実施形態4に係る画像処理装置を搭載したプレーヤーの外観を示す図である。It is a figure which shows the external appearance of the player carrying the image processing apparatus which concerns on Embodiment 4 of this invention. 本発明の実施形態4に係る画像処理装置における制御のフローチャートである。It is a flowchart of the control in the image processing apparatus which concerns on Embodiment 4 of this invention. 本発明の実施形態4に係る画像処理装置の機能ブロック図である。It is a functional block diagram of the image processing apparatus which concerns on Embodiment 4 of this invention. 本発明の実施形態5に係る画像処理装置における制御のフローチャートである。It is a flowchart of the control in the image processing apparatus which concerns on Embodiment 5 of this invention. 本発明の実施形態5に係る画像処理装置の機能ブロック図である。It is a functional block diagram of the image processing apparatus which concerns on Embodiment 5 of this invention. 本発明の実施形態6に係る画像処理装置における制御のフローチャートである。It is a flowchart of the control in the image processing apparatus which concerns on Embodiment 6 of this invention. 本発明の実施形態6に係る画像処理装置の機能ブロック図である。It is a functional block diagram of the image processing apparatus which concerns on Embodiment 6 of this invention.

〔実施形態1〕
以下、本発明の実施の形態について、図1〜図3に基づいて詳細に説明する。
Embodiment 1
Hereinafter, embodiments of the present invention will be described in detail with reference to FIGS.

図1は、本実施形態に係る画像処理装置1を備えたテレビジョン受像機100の外観を示す図である。テレビジョン受像機100は、画像処理装置1に含まれる表示部10、および音声出力部14と、映像データを取得するためのチューナー(不図示)とを備えている。   FIG. 1 is a diagram illustrating an appearance of a television receiver 100 including an image processing apparatus 1 according to the present embodiment. The television receiver 100 includes a display unit 10 and an audio output unit 14 included in the image processing apparatus 1, and a tuner (not shown) for acquiring video data.

図2は、本実施形態に係る画像処理装置1の概要を示す機能ブロック図である。   FIG. 2 is a functional block diagram showing an overview of the image processing apparatus 1 according to the present embodiment.

画像処理装置1は、HDMI(High-Definition Multimedia Interface:登録商標)を搭載しており、HDMI受信部11、音声制御部13、音声出力部14、輝度変換部15、表示制御部16、表示部10、判定部17、および記憶部18を備えている。   The image processing apparatus 1 is equipped with HDMI (High-Definition Multimedia Interface: registered trademark), and has an HDMI receiving unit 11, an audio control unit 13, an audio output unit 14, a luminance conversion unit 15, a display control unit 16, and a display unit. 10, a determination unit 17, and a storage unit 18.

HDMI受信部11は、HDMIケーブルを介して、多重化されている音声データ12A、映像データ12B、およびメタデータ12Cを受信する。HDMI受信部11は、HDMIケーブルを介して、プレーヤー、レコーダ、チューナー等のAV機器等に接続可能である。   The HDMI receiving unit 11 receives the multiplexed audio data 12A, video data 12B, and metadata 12C via the HDMI cable. The HDMI receiving unit 11 can be connected to an AV device such as a player, a recorder, or a tuner via an HDMI cable.

HDMI受信部11は、Demux(デマルチプレクサ)機能を有しており、受信したデータに対して、逆多重化処理を施し、音声データ12Aを音声制御部13に供給し、映像データ12Bを輝度変換部15に配給し、メタデータ12Cを判定部17に供給する。   The HDMI receiving unit 11 has a Demux (demultiplexer) function, performs demultiplexing processing on the received data, supplies the audio data 12A to the audio control unit 13, and converts the luminance of the video data 12B. The data is distributed to the unit 15 and the metadata 12C is supplied to the determination unit 17.

メタデータ12Cは、映像データ12Bに付加された、映像データ12Bが表す映像の輝度に関するデータである。本実施形態において、メタデータ12Cは、映像データ12Bが表す映像の最大輝度を値として持つ。ここで、最大輝度は、HDR映像信号に付加されるMaxCLL(Maximum Content Light Level)のように、各フレームの最大輝度の最大値であってもよいし、HDR映像信号に付加されるMaxFALL(Maximum Frame Average Light Level)のように、各フレームの平均輝度の最大値であってもよい。参考までに、MaxCLLの定義を下記表1に示し、MaxFALLの定義を下記表2に示す。   The metadata 12C is data relating to the luminance of the video represented by the video data 12B, which is added to the video data 12B. In the present embodiment, the metadata 12C has the maximum luminance of the video represented by the video data 12B as a value. Here, the maximum luminance may be the maximum value of the maximum luminance of each frame, such as MaxCLL (Maximum Content Light Level) added to the HDR video signal, or MaxFALL (Maximum) added to the HDR video signal. (Frame Average Light Level) may be the maximum value of the average luminance of each frame. For reference, the definition of MaxCLL is shown in Table 1 below, and the definition of MaxFALL is shown in Table 2 below.

Figure 0006276815
Figure 0006276815

Figure 0006276815
Figure 0006276815

音声制御部13は、音声データ12Aに応じた音声が出力されるよう、音声出力部14を制御する。   The sound control unit 13 controls the sound output unit 14 so that sound corresponding to the sound data 12A is output.

判定部17は、メタデータ12Cの異常の有無を判定し、メタデータ12Cが欠落している場合、または、メタデータ12Cの値が異常である場合に異常有と判定する。判定部17は、メタデータ12Cの値が異常無であると判定すると、HDMI受信部11から取得したメタデータ12Cを輝度変換部15に提供し、メタデータ12Cが異常有であると判定すると、HDMI受信部11から取得したメタデータ12Cの代わりに、記憶部18から読みだした代替データ12Dを輝度変換部15に提供する。   The determination unit 17 determines whether or not the metadata 12C is abnormal, and determines that there is an abnormality when the metadata 12C is missing or when the value of the metadata 12C is abnormal. If the determination unit 17 determines that the value of the metadata 12C is normal, the determination unit 17 provides the metadata 12C acquired from the HDMI reception unit 11 to the luminance conversion unit 15, and determines that the metadata 12C is abnormal. Instead of the metadata 12C acquired from the HDMI receiving unit 11, the alternative data 12D read from the storage unit 18 is provided to the luminance conversion unit 15.

記憶部18には、過去にHDMI受信部11から取得され、判定部17に異常無であると判定されたメタデータ、および当該メタデータが付加されている映像データが蓄積されている。上述した判定部17は、メタデータ12Cの値が異常無である場合、記憶部18に蓄積されているメタデータのうち、映像データ12Bが表す映像と同一内容の映像を表す映像データに付加されていたメタデータを、代替データ12Dとして記憶部18から読みだす。   The storage unit 18 stores metadata acquired in the past from the HDMI receiving unit 11 and determined to be normal by the determination unit 17, and video data to which the metadata is added. When the value of the metadata 12C is normal, the determination unit 17 described above is added to video data representing a video having the same content as the video represented by the video data 12B among the metadata stored in the storage unit 18. The stored metadata is read from the storage unit 18 as alternative data 12D.

輝度変換部15は、映像データ12Bに対して、判定部17から取得したメタデータ12C(メタデータ12Cが異常無である場合)または代替データ12D(メタデータ12Cが異常有である場合)が表す最大輝度に応じた輝度変換を行う。例えば、判定部17から取得したメタデータ12Cまたは代替データ12Dが表す最大輝度に応じたEOTFを用いて、映像データ12Bに対する輝度変換を行う。   The luminance conversion unit 15 represents the metadata 12C (when the metadata 12C is abnormal) or the alternative data 12D (when the metadata 12C is abnormal) acquired from the determination unit 17 with respect to the video data 12B. Performs brightness conversion according to the maximum brightness. For example, luminance conversion is performed on the video data 12B using EOTF corresponding to the maximum luminance represented by the metadata 12C or the alternative data 12D acquired from the determination unit 17.

表示制御部16は、輝度変換部15に輝度変換された映像データに応じた映像が表示されるよう、表示部10を制御する。   The display control unit 16 controls the display unit 10 so that a video corresponding to the video data subjected to luminance conversion is displayed on the luminance conversion unit 15.

続いて、図3のフローチャートを参照して、本実施形態に係る画像処理装置1における制御の一例を説明する。   Next, an example of control in the image processing apparatus 1 according to the present embodiment will be described with reference to the flowchart in FIG.

ステップ10において、HDMI受信部11は、多重化されている音声データ12A、映像データ12B、およびメタデータ12Cを受信する。また、HDMI受信部11は、受信したデータに逆多重化処理を施す。   In step 10, the HDMI receiving unit 11 receives the multiplexed audio data 12A, video data 12B, and metadata 12C. Also, the HDMI receiving unit 11 performs a demultiplexing process on the received data.

ステップS12において、判定部17は、メタデータ12Cが欠落しているか、またはメタデータ12Cの値が異常であるかを判定する。上述の通り、判定部17は、メタデータ12Cが欠落している場合、または、メタデータ12Cの値が異常である場合に異常有と判定する。   In step S12, the determination unit 17 determines whether the metadata 12C is missing or the value of the metadata 12C is abnormal. As described above, the determination unit 17 determines that there is an abnormality when the metadata 12C is missing or when the value of the metadata 12C is abnormal.

判定部17は、例えば、メタデータ12Cに含まれる、映像データ12Bが表す映像の最大輝度の値が予め定められた範囲外にある場合に、異常有と判定してもよい。   For example, the determination unit 17 may determine that there is an abnormality when the maximum luminance value of the video represented by the video data 12B included in the metadata 12C is outside a predetermined range.

ステップS12において判定部17が異常有と判定した場合(すなわち、YES)は、ステップS14に移行する。ステップS12において判定部17が異常無と判定した場合(すなわち、NO)は、ステップS16に移行する。   If the determination unit 17 determines that there is an abnormality in step S12 (that is, YES), the process proceeds to step S14. When the determination unit 17 determines that there is no abnormality in Step S12 (that is, NO), the process proceeds to Step S16.

ステップS14において、判定部17は、記憶部18に蓄積されたメタデータの中で、映像データ12Bが表す映像と同一内容の映像を表す映像データに付加されたメタデータを輝度変換に用いる代替データとする。   In step S14, the determination unit 17 uses the metadata added to the video data representing the video having the same content as the video represented by the video data 12B in the metadata accumulated in the storage unit 18 for the luminance conversion. And

ステップS16において、判定部17は、HDMI受信部11が受信し、逆多重化したメタデータ12Cを輝度変換に用いるデータとする。   In step S16, the determination unit 17 uses the metadata 12C received by the HDMI receiving unit 11 and demultiplexed as data used for luminance conversion.

ステップS18において、輝度変換部15は、代替データまたはメタデータ12Cを用いて映像データ12Bに輝度変換を施す。   In step S18, the luminance conversion unit 15 performs luminance conversion on the video data 12B using the alternative data or the metadata 12C.

すなわち、ステップS18において輝度変換部15は、判定部17が異常有と判定した場合に、メタデータ12Cとは異なる、映像データ12Bに関連付けられた代替データを用いて映像データ12Bに輝度変換を施し、判定部17が異常無と判定した場合に、メタデータ12Cを用いて映像データ12Bに輝度変換を施す。   That is, when the determination unit 17 determines that there is an abnormality in step S18, the luminance conversion unit 15 performs luminance conversion on the video data 12B using alternative data associated with the video data 12B, which is different from the metadata 12C. When the determination unit 17 determines that there is no abnormality, the video data 12B is subjected to luminance conversion using the metadata 12C.

ステップS20において、表示制御部16は、輝度変換部15に輝度変換された映像データに応じた映像が表示されるよう、表示部10を制御する。   In step S <b> 20, the display control unit 16 controls the display unit 10 so that a video corresponding to the video data whose luminance has been converted is displayed on the luminance conversion unit 15.

なお、HDMI受信部11は、次に表示対象となる映像、すなわち、判定部17にメタデータ12Cを判定されている映像データ12Bが表す映像よりも、時間的に未来の映像を表す映像データに付加されたメタデータを、次に表示対象となる映像を表す映像データ、およびメタデータと共に取得してもよい。そして、輝度変換部15は、判定部17がメタデータ12Cに異常有と判定した場合に、代替データとして、時間的に未来の映像を表す映像データに付加されたメタデータを用いて映像データ12Bに輝度変換を施してもよい。   Note that the HDMI receiving unit 11 converts the video to be displayed next, that is, video data representing a future video in time, rather than the video represented by the video data 12B whose metadata 12C has been determined by the determination unit 17. The added metadata may be acquired together with video data representing the video to be displayed next and the metadata. Then, when the determination unit 17 determines that the metadata 12C has an abnormality, the luminance conversion unit 15 uses the metadata added to the video data representing the future video in time as the substitute data, and uses the video data 12B. May be subjected to luminance conversion.

また、メタデータ12Cは、映像データ12Bが表す映像を構成する各期間の最大輝度を値として持っていてもよい。ここで、期間は、フレームであってもよいし、複数のフレームからなるシーンであってもよいし、複数のシーンからなるチャプターであってもよい。各期間の最大輝度は、通常、ゆっくり変化する。したがって、メタデータ12Cに値として含まれる各期間の最大輝度が急激に変化する場合には、メタデータ12Cが異常であると見做すことができる。したがって、映像データ12Bが表す映像を構成する期間のうち、時間的に隣接する2つの期間の最大輝度の差が予め定められた閾値を超える場合に、判定部17が異常有と判定する構成を採用すれば、メタデータ12Cの以上を適切に検出することが可能である。   Further, the metadata 12C may have the maximum luminance of each period constituting the video represented by the video data 12B as a value. Here, the period may be a frame, a scene composed of a plurality of frames, or a chapter composed of a plurality of scenes. The maximum brightness of each period usually changes slowly. Therefore, when the maximum brightness of each period included as a value in the metadata 12C changes rapidly, it can be considered that the metadata 12C is abnormal. Therefore, a configuration in which the determination unit 17 determines that there is an abnormality when the difference in maximum luminance between two temporally adjacent periods out of the periods constituting the video represented by the video data 12B exceeds a predetermined threshold value. If it is adopted, it is possible to appropriately detect the metadata 12C or more.

〔実施形態2〕
本発明の他の実施形態について、図4〜図5に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
[Embodiment 2]
The following will describe another embodiment of the present invention with reference to FIGS. For convenience of explanation, members having the same functions as those described in the embodiment are given the same reference numerals, and descriptions thereof are omitted.

本実施形態の画像処理装置2は、図4に示されるように、生成部27を備える点で実施形態1と異なる。   As shown in FIG. 4, the image processing apparatus 2 of the present embodiment is different from the first embodiment in that it includes a generation unit 27.

画像処理装置2は、実施形態1と同様にHDMIを搭載しており、HDMI受信部11、音声制御部13、音声出力部14、輝度変換部15、表示制御部16、表示部10、生成部27、記憶部28、および判定部29を備えている。   The image processing apparatus 2 is equipped with HDMI as in the first embodiment, and includes an HDMI receiving unit 11, an audio control unit 13, an audio output unit 14, a luminance conversion unit 15, a display control unit 16, a display unit 10, and a generation unit. 27, a storage unit 28, and a determination unit 29.

生成部27は、HDMI受信部11が供給する映像データ12Bを取得する。生成部27は、映像データ12Bを解析することによって、映像データ12Bの輝度に関するメタデータ12Dを生成する。生成部27は、生成したメタデータ12Dを、メタデータ12Dに対応する映像データ12Bと共に記憶部28に蓄積させる。   The generation unit 27 acquires the video data 12B supplied from the HDMI reception unit 11. The generation unit 27 analyzes the video data 12B to generate metadata 12D related to the luminance of the video data 12B. The generation unit 27 accumulates the generated metadata 12D in the storage unit 28 together with the video data 12B corresponding to the metadata 12D.

記憶部28には、過去に生成部27が映像データを解析することによって生成したメタデータ12D、および当該メタデータ12Dと対応する映像データが蓄積されている。本実施形態の判定部29は、メタデータ12Cの値が異常無である場合、代替データとして、生成部27により生成され記憶部28に蓄積されているメタデータのうち、映像データ12Bが表す映像を解析することにより得られたメタデータを、代替データ12Dとして記憶部28から読みだす。   The storage unit 28 stores metadata 12D generated by the generation unit 27 analyzing the video data in the past, and video data corresponding to the metadata 12D. When the value of the metadata 12C is not abnormal, the determination unit 29 according to the present embodiment displays the video represented by the video data 12B among the metadata generated by the generation unit 27 and accumulated in the storage unit 28 as alternative data. Is obtained from the storage unit 28 as alternative data 12D.

続いて、図5のフローチャートを参照して、本実施形態に係る画像処理装置2における制御の、実施形態1に係る画像処理装置1における制御と異なる点を説明する。   Next, with reference to the flowchart of FIG. 5, a description will be given of differences between the control in the image processing apparatus 2 according to the present embodiment and the control in the image processing apparatus 1 according to the first embodiment.

ステップS12において判定部29が異常有と判定した場合(すなわち、YES)は、ステップS30に移行する。   If the determination unit 29 determines in step S12 that there is an abnormality (that is, YES), the process proceeds to step S30.

ステップS30において、判定部29は、記憶部28に蓄積されたメタデータの中で、映像データ12Bが表す映像と同一内容の映像を表す映像データを解析することにより得られたメタデータを輝度変換に用いる代替データとする。   In step S30, the determination unit 29 performs luminance conversion on the metadata obtained by analyzing the video data representing the video having the same content as the video represented by the video data 12B among the metadata accumulated in the storage unit 28. Substitute data used for.

なお、生成部27は、連続する映像全てを表す映像データに対して輝度変換に用いるデータを生成するだけでなく、例えばチャプター毎、シーンチェンジ毎、フレーム単位毎、均等時間割毎等で、複数の輝度変換に用いるデータを生成してもよい。   The generation unit 27 not only generates data used for luminance conversion for video data representing all continuous videos, but also includes a plurality of data, for example, for each chapter, for each scene change, for each frame, for each equal timetable, etc. Data used for luminance conversion may be generated.

〔実施形態3〕
本発明の他の実施形態について、図6〜図7に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
[Embodiment 3]
The following will describe another embodiment of the present invention with reference to FIGS. For convenience of explanation, members having the same functions as those described in the embodiment are given the same reference numerals, and descriptions thereof are omitted.

本実施形態の画像処理装置3は、図6に示されるように、記憶部を備えず、入力受付部31を備える点で実施形態1と異なる。   As illustrated in FIG. 6, the image processing apparatus 3 according to the present embodiment is different from the first embodiment in that the storage unit is not provided and the input receiving unit 31 is provided.

画像処理装置3は、実施形態1と同様にHDMIを搭載しており、HDMI受信部11、音声制御部13、音声出力部14、輝度変換部15、表示制御部16、表示部10、入力受付部31、および判定部32を備えている。   The image processing apparatus 3 is equipped with HDMI as in the first embodiment, and includes an HDMI receiving unit 11, an audio control unit 13, an audio output unit 14, a luminance conversion unit 15, a display control unit 16, a display unit 10, and input reception. A unit 31 and a determination unit 32 are provided.

入力受付部31は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。   The input receiving unit 31 receives input of data having a brightness value designated by the user.

続いて、図7のフローチャートを参照して、本実施形態に係る画像処理装置3における制御の、実施形態1に係る画像処理装置1における制御と異なる点を説明する。   Next, with reference to the flowchart in FIG. 7, a description will be given of differences between the control in the image processing apparatus 3 according to the present embodiment and the control in the image processing apparatus 1 according to the first embodiment.

ステップS12において判定部32が異常有と判定した場合(すなわち、YES)は、ステップS40に移行する。   When the determination unit 32 determines that there is an abnormality in step S12 (that is, YES), the process proceeds to step S40.

ステップS40において、入力受付部31は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。そして判定部32は、ユーザに指定された輝度に関するデータを輝度変換に用いる代替データ12Dとする。   In step S40, the input receiving unit 31 receives an input of data having a luminance value designated by the user. Then, the determination unit 32 uses the data related to the brightness designated by the user as the substitute data 12D used for the brightness conversion.

〔実施形態4〕
本発明の他の実施の形態について、図8〜図10に基づいて詳細に説明する。
[Embodiment 4]
Another embodiment of the present invention will be described in detail with reference to FIGS.

図8は、本実施形態に係る映像提供装置4の外観を示す図である。映像提供装置4は、ハードディスク、ブルーレイディスク、DVDディスク等の記録媒体(不図示)を映像提供装置4内に挿入するための挿入口40を備えている。   FIG. 8 is a diagram illustrating an appearance of the video providing apparatus 4 according to the present embodiment. The video providing device 4 includes an insertion port 40 for inserting a recording medium (not shown) such as a hard disk, a Blu-ray disc, or a DVD disc into the video providing device 4.

記録媒体には、エンコードされている音声データ、映像データ、およびメタデータが記録されている。   Encoded audio data, video data, and metadata are recorded on the recording medium.

図9は、本実施形態に係る映像提供装置4の概要を示す機能ブロック図である。   FIG. 9 is a functional block diagram showing an overview of the video providing apparatus 4 according to the present embodiment.

映像提供装置4は、HDMIを搭載しており、読取部41、デコーダ42、判定部44、記憶部45、マルチプレクサ(Mux)47、およびHDMI送信部48を備えている。   The video providing device 4 is equipped with HDMI, and includes a reading unit 41, a decoder 42, a determination unit 44, a storage unit 45, a multiplexer (Mux) 47, and an HDMI transmission unit 48.

読取部41は、挿入口40に挿入された記録媒体から、エンコードされている音声データ、映像データ、およびメタデータを読み取る。   The reading unit 41 reads encoded audio data, video data, and metadata from the recording medium inserted into the insertion slot 40.

デコーダ42は、エンコードされている音声データ、映像データ、およびメタデータをデコードし、音声データ43AをMux47に供給し、映像データ43BをMux47に配給し、メタデータ43Cを判定部44および記憶部45に供給する。   The decoder 42 decodes the encoded audio data, video data, and metadata, supplies the audio data 43A to the Mux 47, distributes the video data 43B to the Mux 47, and determines the metadata 43C as the determination unit 44 and the storage unit 45. To supply.

メタデータ43Cは、映像データ43Bに付加された、映像データ43Bが表す映像の輝度に関するデータである。本実施形態においても、実施形態1と同様に、メタデータ43Cは、映像データ43Bが表す映像の最大輝度を値として持つ。   The metadata 43C is data relating to the luminance of the video represented by the video data 43B, which is added to the video data 43B. Also in the present embodiment, as in the first embodiment, the metadata 43C has the maximum luminance of the video represented by the video data 43B as a value.

判定部44は、メタデータ43Cの異常の有無を判定し、メタデータ43Cが欠落している場合、または、メタデータ43Cの値が異常である場合に異常有と判定する。判定部44は、メタデータ43Cの値が異常無であると判定すると、デコーダ42から取得したメタデータ43CをMux47に提供し、メタデータ43Cが異常有であると判定すると、デコーダ42から取得したメタデータ43Cの代わりに、記憶部45から読みだした代替データ43DをMux47に提供する。   The determination unit 44 determines whether or not the metadata 43C is abnormal, and determines that there is an abnormality when the metadata 43C is missing or when the value of the metadata 43C is abnormal. If the determination unit 44 determines that the value of the metadata 43C is abnormal, the determination unit 44 provides the Mux 47 with the metadata 43C acquired from the decoder 42. If the determination unit 44 determines that the metadata 43C is abnormal, the determination unit 44 acquires the metadata 43C from the decoder 42. Instead of the metadata 43C, the substitute data 43D read from the storage unit 45 is provided to the Mux 47.

記憶部45には、過去にデコーダ42から取得され、判定部44に異常無であると判定されたメタデータ、および当該メタデータが付加されている映像データが蓄積されている。上述した判定部44は、メタデータ43Cの値が異常無である場合、代替データ43Dとして、記憶部45に蓄積されているメタデータのうち、映像データ43Bが表す映像と同一内容の映像を表す映像データに付加されていたメタデータを、代替データ43Dとして記憶部45から読みだす。   The storage unit 45 stores metadata that has been acquired from the decoder 42 in the past and has been determined to be normal by the determination unit 44, and video data to which the metadata is added. When the value of the metadata 43C is abnormal, the determination unit 44 described above represents a video having the same content as the video represented by the video data 43B among the metadata accumulated in the storage unit 45 as the alternative data 43D. The metadata added to the video data is read from the storage unit 45 as alternative data 43D.

Mux47は、音声データ43A、映像データ43B、およびメタデータを多重化する。どのメタデータを多重化するかは判定部44の判定による。   Mux 47 multiplexes audio data 43A, video data 43B, and metadata. Which metadata is multiplexed depends on the determination of the determination unit 44.

HDMI送信部48は、多重化されたデータを、輝度変換処理をする機構を有する画像処理装置へ送信する。   The HDMI transmission unit 48 transmits the multiplexed data to an image processing apparatus having a mechanism for performing luminance conversion processing.

続いて、図10のフローチャートを参照して、本実施形態に係る映像提供装置4における制御の一例を説明する。   Next, an example of control in the video providing apparatus 4 according to the present embodiment will be described with reference to the flowchart in FIG.

ステップS50において、読取部41は、エンコードされている音声データ、映像データ、およびメタデータを読み取る。   In step S50, the reading unit 41 reads the encoded audio data, video data, and metadata.

ステップS52において、デコーダ42は、エンコードされている音声データ、映像データ、およびメタデータをデコードする。   In step S52, the decoder 42 decodes the encoded audio data, video data, and metadata.

ステップS54において、判定部44は、メタデータ43Cが欠落しているか、またはメタデータ43Cの値が異常であるかを判定する。上述の通り、判定部44は、メタデータ43Cが欠落している場合、または、メタデータ43Cの値が異常である場合に異常有と判定する。判定部44は、メタデータ43Cの判定を、実施形態1と同様の方法で行ってよい。   In step S54, the determination unit 44 determines whether the metadata 43C is missing or the value of the metadata 43C is abnormal. As described above, the determination unit 44 determines that there is an abnormality when the metadata 43C is missing or when the value of the metadata 43C is abnormal. The determination unit 44 may determine the metadata 43C using the same method as in the first embodiment.

ステップS54において判定部44が異常有と判定した場合(すなわち、YES)は、ステップS56に移行する。ステップS54において判定部44が異常無と判定した場合(すなわち、NO)は、ステップS58に移行する。   If the determination unit 44 determines that there is an abnormality in step S54 (that is, YES), the process proceeds to step S56. When the determination unit 44 determines that there is no abnormality in Step S54 (that is, NO), the process proceeds to Step S58.

ステップS56において、判定部44は、記憶部45に蓄積されたメタデータの中で、映像データ43Bが表す映像と同一内容の映像を表す映像データに付加された代替データ43Dを輝度変換に用いる代替データとする。   In step S56, the determination unit 44 uses the substitute data 43D added to the video data representing the video having the same content as the video represented by the video data 43B in the metadata accumulated in the storage unit 45 for luminance conversion. Data.

ステップS58において、判定部44は、デコーダ42がデコードしたメタデータ43Cを輝度変換に用いるデータとする。   In step S58, the determination unit 44 uses the metadata 43C decoded by the decoder 42 as data used for luminance conversion.

ステップS60において、Mux47は、音声データ43A、映像データ43B、およびメタデータを多重化する。   In step S60, the Mux 47 multiplexes the audio data 43A, the video data 43B, and the metadata.

すなわち、ステップS60においてMux47は、判定部44が異常有と判定した場合に、メタデータ43Cとは異なる、映像データ43Bに関連付けられた代替データ43Dを多重化し、判定部44が異常無と判定した場合に、メタデータ43Cを用いて多重化する。   That is, in step S60, when the determination unit 44 determines that there is an abnormality, the Mux 47 multiplexes the substitute data 43D associated with the video data 43B, which is different from the metadata 43C, and the determination unit 44 determines that there is no abnormality. In this case, the metadata 43C is used for multiplexing.

ステップS62において、HDMI送信部48は、Mux47が多重化したデータを、画像処理装置の受信部へ送信する。   In step S62, the HDMI transmission unit 48 transmits the data multiplexed by the Mux 47 to the reception unit of the image processing apparatus.

また、1枚の記録媒体が、複数の映像データを記録しているときがある。このときには、複数の映像データの各々に付加されるメタデータもそれぞれ記録媒体に記録されている。このようなときにおいて、何れかの映像データに付加されたメタデータが判定部44に異常有と判定された場合は、判定部44は、同じ記録媒体に記録されている別の映像データに付加されたメタデータを、異常有と判定されたメタデータの代替データとして、輝度変換に用いてもよい。同じ記録媒体に記録されている映像データ同士は、同様のメタデータが付加される可能性が高いからである。   In some cases, one recording medium records a plurality of video data. At this time, metadata added to each of the plurality of video data is also recorded on the recording medium. In such a case, when the metadata added to any of the video data is determined to be abnormal by the determination unit 44, the determination unit 44 adds it to another video data recorded on the same recording medium. The metadata that has been determined may be used for luminance conversion as alternative data for metadata that has been determined to be abnormal. This is because video data recorded on the same recording medium is highly likely to have the same metadata.

なお、判定部44が、輝度変換に用いるデータとして採用するデータは、判定部44が異常無と判定したデータである。   Note that the data adopted by the determination unit 44 as data used for luminance conversion is data that the determination unit 44 has determined to be normal.

また、例えば異常有のメタデータが付加された映像データが、放送番組のデータであった場合は、放送番組のチャンネル情報、番組タイトル、番組ジャンル(ドラマ、ニューズ、バラエティ、映画等)、番組への出演者、番組の司会者等から、類似した放送番組のデータを検索してもよい。   For example, if the video data to which abnormal metadata is added is data of a broadcast program, the channel information of the broadcast program, the program title, the program genre (drama, news, variety, movie, etc.), and the program Similar broadcast program data may be retrieved from performers, program presenters, and the like.

また、映像データが、放送番組のデータであった場合は、放送のネットワーク情報を予め記憶部45に蓄積しておき、記憶部45に蓄積されている放送のネットワーク情報から、異常有のメタデータが付加された映像データに類似した放送番組のデータを検索してもよい。   If the video data is broadcast program data, the broadcast network information is stored in the storage unit 45 in advance, and the abnormal network metadata is obtained from the broadcast network information stored in the storage unit 45. Broadcast program data similar to the video data to which is added may be searched.

なお、読取部41は、次に表示対象となる映像、すなわち、判定部が44メタデータを判定している映像データ43Bが表す映像よりも、時間的に未来の映像を表す映像データに付加されたメタデータを、次に表示対象となる映像を表す映像データ43B、およびメタデータ43Cと共に取得してもよい。そして、Mux47は、判定部44がメタデータ43Cに異常有と判定した場合に、代替データとして、時間的に未来の映像を表す映像データに付加されたメタデータを用いて多重化処理を実施してもよい。   Note that the reading unit 41 is added to video data representing a future video in terms of time, rather than the video to be displayed next, that is, the video represented by the video data 43B for which the determination unit determines 44 metadata. The metadata may be acquired together with the video data 43B representing the video to be displayed next and the metadata 43C. Then, when the determination unit 44 determines that the metadata 43C has an abnormality, the Mux 47 performs multiplexing processing using the metadata added to the video data representing the future video in terms of time as alternative data. May be.

〔実施形態5〕
本発明の他の実施形態について、図11〜図12に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
[Embodiment 5]
The following will describe another embodiment of the present invention with reference to FIGS. For convenience of explanation, members having the same functions as those described in the embodiment are given the same reference numerals, and descriptions thereof are omitted.

本実施形態の映像提供装置5は、図11に示されるように、生成部52を備える点で実施形態4と異なる。   As shown in FIG. 11, the video providing apparatus 5 according to the present embodiment is different from the fourth embodiment in that a generation unit 52 is provided.

映像提供装置5は、実施形態4と同様にHDMIを搭載しており、読取部41、デコーダ42、生成部52、記憶部53、判定部54、マルチプレクサ(Mux)47、およびHDMI送信部48を備えている。   The video providing device 5 is equipped with HDMI as in the fourth embodiment, and includes a reading unit 41, a decoder 42, a generation unit 52, a storage unit 53, a determination unit 54, a multiplexer (Mux) 47, and an HDMI transmission unit 48. I have.

生成部52は、デコーダ42が供給する映像データ43Bを取得する。生成部52は、映像データ43Bを解析することによって、映像データ43Bの輝度に関するメタデータ43Dを生成する。生成部52は、生成したメタデータ43Dを、メタデータ43Dに対応する映像データ43Bと共に記憶部53に蓄積させる。   The generation unit 52 acquires the video data 43B supplied from the decoder 42. The generation unit 52 analyzes the video data 43B to generate metadata 43D related to the luminance of the video data 43B. The generation unit 52 accumulates the generated metadata 43D in the storage unit 53 together with the video data 43B corresponding to the metadata 43D.

記憶部53には、過去に生成部52が映像データを解析することによって生成したメタデータ43D、および当該メタデータ43Dと対応する映像データが蓄積されている。本実施形態の判定部54は、メタデータ43Cの値が異常無である場合、代替データとして、生成部52により生成され、記憶部53に蓄積されているメタデータのうち、映像データ43Bが表す映像を解析することにより得られたメタデータを、代替データ43Dとして記憶部53から読みだす。   The storage unit 53 stores metadata 43D generated by the generation unit 52 analyzing the video data in the past, and video data corresponding to the metadata 43D. When the value of the metadata 43C is normal, the determination unit 54 of the present embodiment represents the video data 43B among the metadata generated by the generation unit 52 and accumulated in the storage unit 53 as alternative data. Metadata obtained by analyzing the video is read from the storage unit 53 as alternative data 43D.

続いて、図12のフローチャートを参照して、本実施形態に係る映像提供装置5における制御の、実施形態4に係る映像提供装置4における制御と異なる点を説明する。   Next, with reference to a flowchart of FIG. 12, a description will be given of differences between the control in the video providing apparatus 5 according to the present embodiment and the control in the video providing apparatus 4 according to the fourth embodiment.

ステップS54において判定部54が異常有と判定した場合(すなわち、YES)は、ステップS70に移行する。   If the determination unit 54 determines that there is an abnormality in step S54 (that is, YES), the process proceeds to step S70.

ステップS70において、判定部54は、記憶部53に蓄積されたメタデータの中で、生成部52によって予め生成された、映像データ43Bが表す映像と同一内容の映像を表す映像データを解析することにより得られたメタデータ43Dを輝度変換に用いる代替データとする。   In step S <b> 70, the determination unit 54 analyzes the video data representing the video having the same content as the video represented by the video data 43 </ b> B generated in advance by the generation unit 52 in the metadata accumulated in the storage unit 53. The metadata 43D obtained by the above is used as alternative data used for luminance conversion.

〔実施形態6〕
本発明の他の実施形態について、図13〜図14に基づいて説明すれば、以下のとおりである。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
[Embodiment 6]
The following will describe another embodiment of the present invention with reference to FIGS. For convenience of explanation, members having the same functions as those described in the embodiment are given the same reference numerals, and descriptions thereof are omitted.

映像提供装置6は、実施形態4と同様にHDMIを搭載しており、読取部41、デコーダ42、入力受付部61、判定部62、マルチプレクサ(Mux)47、およびHDMI送信部48を備えている。   The video providing apparatus 6 is equipped with HDMI as in the fourth embodiment, and includes a reading unit 41, a decoder 42, an input receiving unit 61, a determining unit 62, a multiplexer (Mux) 47, and an HDMI transmitting unit 48. .

本実施形態のメタデータ判定装置は、図13に示されるように、記憶部を備えず、入力受付部61を備える点で実施形態1と異なる。   As shown in FIG. 13, the metadata determination apparatus according to the present embodiment is different from the first embodiment in that the storage unit is not provided and the input receiving unit 61 is provided.

入力受付部61は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。   The input receiving unit 61 receives input of data having a luminance value designated by the user.

続いて、図14のフローチャートを参照して、本実施形態に係る映像提供装置6における制御の、実施形態4に係るにおける映像提供装置4における制御と異なる点を説明する。   Next, with reference to the flowchart of FIG. 14, a description will be given of differences between the control in the video providing apparatus 6 according to the present embodiment and the control in the video providing apparatus 4 according to the fourth embodiment.

ステップS54において判定部62が異常有と判定した場合(すなわち、YES)は、ステップS80に移行する。   If the determination unit 62 determines that there is an abnormality in step S54 (that is, YES), the process proceeds to step S80.

ステップS80において、入力受付部61は、ユーザに指定された輝度の値を持つデータの入力を受け付ける。そして判定部62は、ユーザに指定された輝度に関するデータを輝度変換に用いる代替データ43Dとする。   In step S80, the input receiving unit 61 receives an input of data having a brightness value designated by the user. Then, the determination unit 62 uses the data related to the brightness designated by the user as substitute data 43D used for brightness conversion.

なお、上記実施形態1〜6では、メタデータに異常有と判定された場合、メタデータが付加されている映像データに応じて、輝度変換に用いるデータを置き換えているが、これに限らず、映像を表示する表示部の表示能力に応じて輝度変換に用いるデータを置き換えてもよい。   In the first to sixth embodiments, when it is determined that there is an abnormality in the metadata, the data used for the luminance conversion is replaced according to the video data to which the metadata is added. Data used for luminance conversion may be replaced according to the display capability of the display unit that displays video.

また、上記実施形態1〜2では画像処理装置に備わる記憶部に、上記実施形態4〜5では映像提供装置に備わる記憶部に映像データおよびメタデータを蓄積するが、外部のサーバに蓄積してもよい。   In Embodiments 1 and 2, video data and metadata are stored in the storage unit provided in the image processing apparatus, and in Embodiments 4 and 5 are stored in the storage unit provided in the video providing apparatus. Also good.

また、映像の再生途中に、メタデータに異常有と判定された場合には、異常有と判定される時点以前に取得したメタデータに応じて、異常有と判定された時点後の映像の映像データに対して輝度変換を施してもよい。   In addition, if it is determined that the metadata is abnormal during the playback of the video, the video of the video after the point determined to be abnormal is determined according to the metadata acquired before the time point determined to be abnormal Luminance conversion may be performed on the data.

〔ソフトウェアによる実現例〕
画像処理装置1,2,3の制御ブロック(特に判定部17,29,32および輝度変換部15)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェアによって実現してもよい。
[Example of software implementation]
The control blocks (especially the determination units 17, 29, and 32 and the luminance conversion unit 15) of the image processing apparatuses 1, 2, and 3 may be realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like. Alternatively, it may be realized by software using a CPU (Central Processing Unit).

後者の場合、メタデータ判定装置は、各機能を実現するソフトウェアであるプログラムの命令を実行するCPU、上記プログラムおよび各種データがコンピュータ(またはCPU)で読み取り可能に記録されたROM(Read Only Memory)または記憶装置(これらを「記録媒体」と称する)、上記プログラムを展開するRAM(Random Access Memory)などを備えている。そして、コンピュータ(またはCPU)が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体(通信ネットワークや放送波等)を介して上記コンピュータに供給されてもよい。なお、本発明は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。   In the latter case, the metadata determination device includes a CPU that executes instructions of a program that is software that realizes each function, and a ROM (Read Only Memory) in which the program and various data are recorded so as to be readable by a computer (or CPU). Alternatively, a storage device (these are referred to as “recording media”), a RAM (Random Access Memory) that expands the program, and the like are provided. And the objective of this invention is achieved when a computer (or CPU) reads the said program from the said recording medium and runs it. As the recording medium, a “non-temporary tangible medium” such as a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used. The program may be supplied to the computer via an arbitrary transmission medium (such as a communication network or a broadcast wave) that can transmit the program. The present invention can also be realized in the form of a data signal embedded in a carrier wave in which the program is embodied by electronic transmission.

〔まとめ〕
本発明の態様1に係る画像処理装置1,2,3は、映像データ12Bに付加された、上記映像データ12Bが表す映像の輝度に関するメタデータ12Cであって、上記映像データ12Bの輝度変換に用いられるメタデータ12Cの異常の有無を判定する判定部17,29,32であって、上記メタデータ12Cが欠落している場合、または、上記メタデータ12Cの値が異常である場合に異常有と判定する判定部17,29,32と、上記判定部17,29,32が異常有と判定した場合に、上記メタデータ12Cとは異なる代替データであって、上記映像データ12Bに関連付けられた代替データを用いて上記映像データ12Bに輝度変換を施す輝度変換部とを備えている。
[Summary]
The image processing apparatuses 1, 2, and 3 according to the aspect 1 of the present invention are metadata 12C relating to the luminance of the video represented by the video data 12B, which is added to the video data 12B, and converts the luminance of the video data 12B. The determination units 17, 29, and 32 that determine whether or not the metadata 12 </ b> C used is abnormal and when the metadata 12 </ b> C is missing or when the value of the metadata 12 </ b> C is abnormal When the determination units 17, 29, and 32 and the determination units 17, 29, and 32 determine that there is an abnormality, the alternative data is different from the metadata 12C and is associated with the video data 12B. A luminance conversion unit that performs luminance conversion on the video data 12B using alternative data.

上記の構成によれば、映像データに付加されたメタデータの値が異常である場合にも、映像データに適切な輝度変換を施すことができる。   According to the above configuration, even when the value of the metadata added to the video data is abnormal, appropriate luminance conversion can be performed on the video data.

本発明の態様2に係る画像処理装置1,2,3は、上記態様1において、上記メタデータは、上記映像の最大輝度を値として持っていてもよい。   In the image processing apparatuses 1, 2, and 3 according to aspect 2 of the present invention, in the aspect 1, the metadata may have the maximum luminance of the video as a value.

上記の構成によれば、メタデータ12Cの値の異常の判定が容易になる。   According to said structure, determination of abnormality of the value of metadata 12C becomes easy.

本発明の態様3に係る画像処理装置1,2,3は、上記態様1または2において、上記判定部17,29,32は、上記映像の最大輝度の値が予め定められた範囲外にある場合に、異常有と判定してもよい。   In the image processing apparatuses 1, 2, and 3 according to the third aspect of the present invention, in the first or second aspect, the determination units 17, 29, and 32 are such that the maximum luminance value of the video is outside a predetermined range. In some cases, it may be determined that there is an abnormality.

上記の構成によれば、メタデータ12Cの値の異常の判定が容易になる。   According to said structure, determination of abnormality of the value of metadata 12C becomes easy.

本発明の態様4に係る画像処理装置1,2,3は、上記態様1または2において、上記メタデータは、上記映像を構成する各期間の最大輝度を値として持ち、上記判定部17,29,32は、上記映像を構成する期間のうち、時間的に隣接する2つの期間の最大輝度の値の差が予め定められた閾値を超える場合に、異常有と判定してもよい。   In the image processing apparatuses 1, 2, and 3 according to the aspect 4 of the present invention, in the aspect 1 or 2, the metadata has the maximum luminance of each period constituting the video as a value, and the determination units 17, 29 , 32 may be determined to be abnormal when the difference between the maximum luminance values of two periods that are temporally adjacent to each other exceeds a predetermined threshold.

上記の構成によれば、メタデータ12Cの値の異常の判定が容易になる。   According to said structure, determination of abnormality of the value of metadata 12C becomes easy.

本発明の態様5に係る画像処理装置1は、上記態様1〜4の何れか1態様において、映像データを取得すると共に、取得した映像データに付加されたメタデータを記憶部18に蓄積する取得部(HDMI受信部11)を更に備え、上記代替データは、上記判定部17が異常有と判定した場合に、上記記憶部18に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データに付加されたメタデータであってもよい。   The image processing apparatus 1 according to the fifth aspect of the present invention is the image processing apparatus 1 according to any one of the first to fourth aspects, wherein the video data is acquired and the metadata added to the acquired video data is accumulated in the storage unit 18. (The HDMI receiving unit 11), and the substitute data is a video having the same content as the video in the metadata stored in the storage unit 18 when the determination unit 17 determines that there is an abnormality. It may be metadata added to video data representing.

上記の構成によれば、過去に取得した適切なメタデータによって、映像データに輝度変換を施すことができる。   According to the above configuration, luminance conversion can be performed on video data using appropriate metadata acquired in the past.

本発明の態様6に係る画像処理装置2は、上記態様1〜4の何れか1態様において、映像データを取得する取得部(HDMI受信部11)と、上記取得部(HDMI受信部11)が取得した映像データを解析することによって、該映像データの輝度に関するメタデータを生成すると共に、生成したメタデータを記憶部28に蓄積する生成部27を更に備え、上記代替データは、上記判定部29が異常有と判定した場合に、上記記憶部28に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データを解析することにより得られたメタデータであってもよい。   The image processing device 2 according to aspect 6 of the present invention is the image processing apparatus 2 according to any one of the aspects 1 to 4, wherein the acquisition unit (HDMI reception unit 11) that acquires video data and the acquisition unit (HDMI reception unit 11) include By analyzing the acquired video data, metadata relating to the luminance of the video data is generated, and a generation unit 27 that accumulates the generated metadata in the storage unit 28 is further provided. May be metadata obtained by analyzing video data representing video having the same content as the video among the metadata stored in the storage unit 28 when it is determined that there is an abnormality.

上記の構成によれば、映像データを解析することにより得られた適切なメタデータによって、映像データに輝度変換を施すことができる。   According to the above configuration, it is possible to perform luminance conversion on video data using appropriate metadata obtained by analyzing the video data.

本発明の態様7に係る画像処理装置は、上記態様1〜4の何れか1態様において、上記代替データは、ユーザに指定された上記映像データが表す映像の輝度に関するデータであってもよい。   The image processing device according to aspect 7 of the present invention is the image processing apparatus according to any one of the aspects 1 to 4, wherein the substitute data may be data relating to luminance of a video represented by the video data designated by a user.

上記の構成によれば、ユーザが希望する映像を表示するための輝度変換を映像データに施すことができる。   According to the above configuration, the luminance conversion for displaying the video desired by the user can be performed on the video data.

本発明の態様8に係るテレビジョン受像機は、上記態様1〜7の何れか1態様に記載の画像処理装置と、上記映像データを取得するためのチューナーとを備えている。   A television receiver according to an eighth aspect of the present invention includes the image processing device according to any one of the first to seventh aspects and a tuner for acquiring the video data.

本発明の態様9に係る映像提供装置4,5,6は、映像データ43Bに付加された、上記映像データ43Bが表す映像の輝度に関するメタデータ43Cの異常の有無を判定する判定部44,54,62であって、上記メタデータ43Cが欠落している場合、または、上記メタデータ43Cの値が異常である場合に異常有と判定する判定部44,54,62と、上記判定部44,54,62が異常無と判定した場合に、上記メタデータ43Cを上記映像データ43Bに多重化し、上記判定部44,54,62が異常有と判定した場合に、上記メタデータとは異なる代替データであって、上記映像データ43Bに関連付けられた代替データを上記映像データ43Bに多重化する多重化部(Mux47)とを備えている。   The video providing devices 4, 5, 6 according to the ninth aspect of the present invention determine whether there is an abnormality in the metadata 43 </ b> C related to the brightness of the video represented by the video data 43 </ b> B added to the video data 43 </ b> B. 62, the determination unit 44, 54, 62 that determines that there is an abnormality when the metadata 43C is missing or the value of the metadata 43C is abnormal, and the determination unit 44, When it is determined that there is no abnormality in 54, 62, the metadata 43C is multiplexed with the video data 43B. When the determination units 44, 54, 62 determine that there is an abnormality, alternative data different from the metadata is used. In addition, a multiplexing unit (Mux 47) is provided that multiplexes the substitute data associated with the video data 43B into the video data 43B.

上記の構成によれば、映像データに付加されたメタデータの値が異常である場合にも、映像データに適切な輝度変換を施すことができる。   According to the above configuration, even when the value of the metadata added to the video data is abnormal, appropriate luminance conversion can be performed on the video data.

本発明の各態様に係るメタデータ判定装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記メタデータ判定装置が備える各部(ソフトウェア要素)として動作させることにより上記メタデータ判定装置をコンピュータにて実現させるメタデータ判定装置のメタデータ判定プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。   The metadata determination apparatus according to each aspect of the present invention may be realized by a computer. In this case, the metadata determination apparatus is operated by causing the computer to operate as each unit (software element) included in the metadata determination apparatus. A metadata determination program for a metadata determination apparatus that realizes the above in a computer and a computer-readable recording medium on which the metadata determination program is recorded also fall within the scope of the present invention.

本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。   The present invention is not limited to the above-described embodiments, and various modifications are possible within the scope shown in the claims, and embodiments obtained by appropriately combining technical means disclosed in different embodiments. Is also included in the technical scope of the present invention. Furthermore, a new technical feature can be formed by combining the technical means disclosed in each embodiment.

100 テレビジョン受像機
1,2,3 画像処理装置
4,5,6 映像提供装置
11 HDMI受信部(取得部)
15 輝度変換部
17,29,32,44,54,62 判定部
18,28 記憶部
27 生成部
47 マルチプレクサ(多重化部)
100 Television receiver 1, 2, 3 Image processing device 4, 5, 6
15 luminance conversion unit 17, 29, 32, 44, 54, 62 determination unit 18, 28 storage unit 27 generation unit 47 multiplexer (multiplexing unit)

Claims (11)

映像データに付加された、上記映像データの輝度変換に用いられるメタデータの異常の有無を判定する判定部と、
上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを用いて上記映像データに輝度変換を施す輝度変換部と
を備え
上記メタデータは、上記映像データが表す映像の輝度に関するメタデータであって
上記メタデータは、上記映像を構成する各期間の最大輝度を値として持ち、
上記判定部は、上記映像を構成する期間のうち、時間的に隣接する2つの期間の最大輝度の差が予め定められた閾値を超える場合に、異常有と判定することを特徴とする画像処理装置。
A determination unit that determines whether or not there is an abnormality in the metadata that is added to the video data and is used for luminance conversion of the video data;
A luminance conversion unit that performs luminance conversion on the video data using alternative data different from the metadata when the determination unit determines that there is an abnormality ,
The metadata is metadata relating to the brightness of the video represented by the video data.
The metadata has the maximum brightness of each period constituting the video as a value,
The determination unit determines that there is an abnormality when a difference in maximum luminance between two temporally adjacent periods out of the periods constituting the video exceeds a predetermined threshold. apparatus.
上記判定部は、上記メタデータが欠落している場合、または、上記メタデータの値が異常である場合に異常有と判定する
ことを特徴とする請求項1に記載の画像処理装置。
The image processing apparatus according to claim 1, wherein the determination unit determines that there is an abnormality when the metadata is missing or when the value of the metadata is abnormal.
上記判定部は、上記映像の最大輝度の値が予め定められた範囲外にある場合に、異常有と判定する
ことを特徴とする請求項に記載の画像処理装置。
The image processing apparatus according to claim 1 , wherein the determination unit determines that there is an abnormality when the maximum luminance value of the video is outside a predetermined range.
映像データを取得すると共に、取得した映像データに付加されたメタデータを記憶部に蓄積する取得部を更に備え、
上記代替データは、上記判定部が異常有と判定した場合に、上記記憶部に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データに付加されたメタデータである、ことを特徴とする請求項1〜の何れか1項に記載の画像処理装置。
The image processing apparatus further includes an acquisition unit that acquires video data and accumulates metadata added to the acquired video data in a storage unit,
The alternative data is metadata added to video data representing video having the same content as the video among the metadata accumulated in the storage unit when the determination unit determines that there is an abnormality. the image processing apparatus according to any one of claim 1 to 3, characterized in that.
映像データを取得する取得部と、
上記取得部が取得した映像データを解析することによって、該映像データの輝度に関するメタデータを生成すると共に、生成したメタデータを記憶部に蓄積する生成部を更に備え、
上記代替データは、上記判定部が異常有と判定した場合に、上記記憶部に蓄積されたメタデータの中で、上記映像と同一内容の映像を表す映像データを解析することにより得られたメタデータである、ことを特徴とする請求項1〜の何れか1項に記載の画像処理装置。
An acquisition unit for acquiring video data;
Analyzing the video data acquired by the acquisition unit to generate metadata related to the luminance of the video data, and further includes a generation unit that accumulates the generated metadata in a storage unit,
The alternative data is obtained by analyzing video data representing video having the same content as the video in the metadata accumulated in the storage unit when the determination unit determines that there is an abnormality. the data, the image processing apparatus according to any one of claim 1 to 3, characterized in that.
上記代替データは、ユーザに指定された輝度の値を持つデータである
ことを特徴とする請求項1〜の何れか1項に記載の画像処理装置。
Said substitute data is image processing apparatus according to any one of claim 1 to 3, characterized in that the data having the value of luminance specified by the user.
請求項1〜の何れか1項に記載の画像処理装置と、上記映像データを取得するためのチューナーとを備えることを特徴とするテレビジョン受像機。 Television receiver comprising: the image processing device; and a tuner for obtaining the image data to any one of claims 1-6. 請求項1に記載の画像処理装置としてコンピュータを機能させるための画像処理プログラムであって、上記判定部、および上記輝度変換部としてコンピュータを機能させるための画像処理プログラム。   An image processing program for causing a computer to function as the image processing apparatus according to claim 1, wherein the image processing program causes the computer to function as the determination unit and the luminance conversion unit. 請求項に記載の画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。 A computer-readable recording medium on which the image processing program according to claim 8 is recorded. 映像データに付加された、上記映像データが表す映像の輝度に関するメタデータの異常の有無を判定する判定部と、
上記判定部が異常無と判定した場合に、上記メタデータを上記映像データに多重化し、上記判定部が異常有と判定した場合に、上記メタデータとは異なる代替データを上記映像データに多重化する多重化部と
を備え
上記メタデータは、上記映像データが表す映像の輝度に関するメタデータであって
上記メタデータは、上記映像を構成する各期間の最大輝度を値として持ち、
上記判定部は、上記映像を構成する期間のうち、時間的に隣接する2つの期間の最大輝度の差が予め定められた閾値を超える場合に、異常有と判定することを特徴とする映像提供装置。
A determination unit that determines whether or not there is an abnormality in the metadata related to the luminance of the video represented by the video data, which is added to the video data;
When the determination unit determines that there is no abnormality, the metadata is multiplexed with the video data, and when the determination unit determines that there is an abnormality, alternative data different from the metadata is multiplexed with the video data. and a multiplexing unit for,
The metadata is metadata relating to the brightness of the video represented by the video data.
The metadata has the maximum brightness of each period constituting the video as a value,
The video providing unit characterized in that the determination unit determines that there is an abnormality when a difference in maximum brightness between two temporally adjacent periods out of the time periods constituting the video exceeds a predetermined threshold value. apparatus.
上記判定部は、上記映像の最大輝度の値が予め定められた範囲外にある場合に、異常有と判定するThe determination unit determines that there is an abnormality when the maximum luminance value of the video is out of a predetermined range.
ことを特徴とする請求項10に記載の映像提供装置。The video providing apparatus according to claim 10.
JP2016172308A 2016-09-02 2016-09-02 Image processing apparatus, television receiver, image processing system, image processing program, recording medium, and video providing apparatus Expired - Fee Related JP6276815B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016172308A JP6276815B1 (en) 2016-09-02 2016-09-02 Image processing apparatus, television receiver, image processing system, image processing program, recording medium, and video providing apparatus
PCT/JP2017/008553 WO2018042722A1 (en) 2016-09-02 2017-03-03 Image processing device, television receiver, image processing program, recording medium, and video provision device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016172308A JP6276815B1 (en) 2016-09-02 2016-09-02 Image processing apparatus, television receiver, image processing system, image processing program, recording medium, and video providing apparatus

Publications (2)

Publication Number Publication Date
JP6276815B1 true JP6276815B1 (en) 2018-02-07
JP2018038019A JP2018038019A (en) 2018-03-08

Family

ID=61158307

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016172308A Expired - Fee Related JP6276815B1 (en) 2016-09-02 2016-09-02 Image processing apparatus, television receiver, image processing system, image processing program, recording medium, and video providing apparatus

Country Status (2)

Country Link
JP (1) JP6276815B1 (en)
WO (1) WO2018042722A1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014532195A (en) * 2011-09-27 2014-12-04 コーニンクレッカ フィリップス エヌ ヴェ Apparatus and method for dynamic range conversion of images
WO2017043046A1 (en) * 2015-09-11 2017-03-16 パナソニックIpマネジメント株式会社 Video reception method, video transmission method, video reception apparatus, and video transmission apparatus
JP2017069937A (en) * 2015-10-01 2017-04-06 日立マクセル株式会社 Broadcast receiver

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014532195A (en) * 2011-09-27 2014-12-04 コーニンクレッカ フィリップス エヌ ヴェ Apparatus and method for dynamic range conversion of images
WO2017043046A1 (en) * 2015-09-11 2017-03-16 パナソニックIpマネジメント株式会社 Video reception method, video transmission method, video reception apparatus, and video transmission apparatus
JP2017069937A (en) * 2015-10-01 2017-04-06 日立マクセル株式会社 Broadcast receiver

Also Published As

Publication number Publication date
WO2018042722A1 (en) 2018-03-08
JP2018038019A (en) 2018-03-08

Similar Documents

Publication Publication Date Title
US11140354B2 (en) Method for generating control information based on characteristic data included in metadata
JP6566320B2 (en) Data output device and data output method
JP7117558B2 (en) Video display device and video display method
US20180220204A1 (en) Information processing device, content requesting method, and computer program
JP2018007194A (en) Video recording device and video reproducing device
RU2668549C2 (en) Server device, client device, content distribution method and computer program
CN107736017B (en) Video playback device and video playback method
JP7435704B2 (en) Playback device, playback method, program, information processing system
JP6276815B1 (en) Image processing apparatus, television receiver, image processing system, image processing program, recording medium, and video providing apparatus
JP6928885B2 (en) Display device, display method and computer program
JP2017139511A (en) Content data generation method, image stream transmission method, and image display method
JP6868797B2 (en) Conversion method and conversion device
JP6751893B2 (en) Reproduction method, reproduction device, display method and display device
JP6646561B2 (en) Electronic device and display control method
JP2021153299A (en) Playback unit
JP2022096398A (en) Broadcast receiving device, server device, information recording/playback device, first display system, and second display system
CN115943625A (en) Broadcast receiving apparatus, server device, information recording/playing apparatus, and display system
JP2008211771A (en) Method and apparatus for recording digital program and storage medium storing program supplementary information by using the method

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180112

R150 Certificate of patent or registration of utility model

Ref document number: 6276815

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees