WO2018003644A1

WO2018003644A1 - 映像処理装置、送信装置、制御プログラム及び記録媒体

Info

Publication number: WO2018003644A1
Application number: PCT/JP2017/022956
Authority: WO
Inventors: 涼二櫻井; 鈴木　秀樹; 智夫西垣; 吉山　和良; 尚昭柴本; 靖手塚
Original assignee: シャープ株式会社
Priority date: 2016-07-01
Filing date: 2017-06-22
Publication date: 2018-01-04
Also published as: US10419709B2; CN109314756A; JPWO2018003644A1; US20190052832A1; JP6602977B2; CN109314756B

Abstract

コンテンツの切り替え時に視聴者の明るさの感じ方が大きく変化することを防ぐ技術を提供する。送信装置（１）は、送信用映像信号の映像特徴量を算出する算出部（１２）と、第１の映像信号の後にミュート映像を生成するミュート映像生成部（１３）と、を備え、前記ミュート映像の輝度は、前記第１の映像信号に係る映像特徴量の値に応じた輝度である。

Description

映像処理装置、送信装置、制御プログラム及び記録媒体

　本発明は、映像処理装置、送信装置、制御プログラム及び記録媒体に関する。

　音声に関する技術では、人が感じる音の大きさであるラウドネスを用いて、コンテンツ毎の音の大きさに対する視聴者の感じ方を均一化する技術が知られている。また、映像に関する技術では、ＨＤＲ等の高輝度の表示が可能となり、コンテンツ毎で視聴者による明るさの感じ方が大きく変わる機会が多くなってきている。

特開２００９－２７５５０号公報（２００９年２月５日公開）

　コンテンツ毎で視聴者による明るさの感じ方が大きく変化すると、視聴者の心理的負担が大きくなる場合がある。例えば、映像が表示出来ないタイミングであるチャンネル切り替え時またはコンテンツ切り替え時において、通常、黒画面を表示する。しかし、ＳＤＲに比べて、ＨＤＲは輝度の変動幅が大きいことから、切り替え前のコンテンツの輝度が高い場合、黒画面を表示すると、輝度差が大きく、視聴者が違和感を持つことがある。

　本発明は、上記の問題点に鑑みてなされたものであり、その目的は、コンテンツの切り替え時に視聴者の明るさの感じ方が大きく変化することを防ぐ技術を提供することである。

　上記の課題を解決するために、本発明の一態様に係る映像処理装置は、送信用映像信号の映像特徴量を算出する算出部と、前記映像信号に挿入されるミュート映像を生成するミュート映像生成部と、を備え、前記ミュート映像生成部は、前記ミュート映像の輝度を、前記ミュート映像よりも時間的に前に表示される映像信号の映像特徴量に応じた値となるように設定する。

　本発明の一態様によれば、コンテンツの切り替え時に視聴者の明るさの感じ方が大きく変わることがなくなり、視聴者の無用な心理的負担を軽減することができる。

本発明の実施形態１に係る送信装置の構成を示すブロック図である。本発明の実施形態１に係るミュート映像生成方法を説明するフローチャートである。ミュート映像の輝度値の変化を示す図であり、（ａ）及び（ｃ）は、従来の表示装置における輝度値を示し、（ｂ）及び（ｄ）は、本発明の実施形態１に係る表示装置における輝度値を示している。表示映像の輝度値の経時変化を示すグラフであり、（ａ）は、従来の表示装置を示し、（ｂ）は、本発明の実施形態１に係る送信装置を示している。ＭａｘＦＡＬＬを算出するための疑似コードの一例である。本発明の実施形態１における感覚輝度値を算出するための疑似コードの一例である。本発明の実施形態１における感覚輝度値を算出するための疑似コードの一例である。本発明の実施形態１に係る感覚輝度値の算出方法の一例を説明するための図であり、（ａ）及び（ｂ）は、所定範囲の輝度値を除外する前の図であり、（ｃ）及び（ｄ）は、所定範囲の輝度値を除外した後の図である。表示映像の輝度値の経時変化を示すグラフであり、（ａ）は、従来の表示装置の輝度値の経時変化を示し、（ｂ）は、本発明の実施形態２に係る送信装置の輝度値の経時変化を示している。表示映像の輝度値の経時変化を示すグラフであり、（ａ）は、従来の表示装置の輝度値の経時変化を示し、（ｂ）は、本発明の実施形態３に係る送信装置の輝度値の経時変化を示している。表示映像の輝度値の経時変化を示すグラフであり、（ａ）は、従来の表示装置の輝度値の経時変化を示し、（ｂ）は、本発明の実施形態４に係る送信装置の輝度値の経時変化を示している。表示映像の輝度値の経時変化を示すグラフであり、（ａ）は、従来の表示装置の輝度値の経時変化を示し、（ｂ）は、本発明の実施形態５に係る送信装置の輝度値の経時変化を示している。表示映像の色度の経時変化を示すグラフであり、（ａ）は従来の映像処理装置における色度の経時変化を示すグラフであり、（ｂ）、（ｃ）及び（ｄ）は、本実施形態に係る映像処理装置における色度の経時変化の一例を示すグラフである。

　以下、本発明の実施形態について、詳細に説明する。ただし、本実施形態に記載されている構成は、特に特定的な記載がない限り、この発明の範囲をそれのみに限定する趣旨ではなく、単なる説明例にすぎない。

　本発明の映像処理装置は、送信用映像信号の映像特徴量を算出する算出部と、映像信号に挿入されるミュート映像を生成するミュート映像生成部と、を備え、ミュート映像生成部は、ミュート映像の輝度を、ミュート映像よりも時間的に前に表示される映像信号の映像特徴量に応じた値となるように設定する。

　ここで、映像特徴量とは、映像の感覚的な明るさを示す指標である。映像特徴量の例として、感覚輝度値等を挙げることができる。感覚輝度値とは、映像信号における輝度値から算出される明るさの感覚を表す指標である。感覚輝度値の例として、平均輝度値、最大輝度値、輝度値ヒストグラムの中央値、ＭａｘＦＡＬＬ（Ｍａｘｉｍｕｍ　Ｆｒａｍｅ　Ａｖｅｒａｇｅ　Ｌｉｇｈｔ　Ｌｅｖｅｌ）及びそれらの組み合わせ等を挙げることができる。なお、映像特徴量は、感覚輝度値のように映像信号における輝度値から算出される指標のみではなく、映像信号における色度から算出される指標も含む。

　本明細書において、「ミュート映像」とは、２つの異なるコンテンツの間またはコンテンツにおけるシーン切り替え等のタイミングにおいて、表示映像に挿入される映像データ、又は当該映像データによって表される画像のことを指す。

　〔実施形態１〕
　（送信装置）
　本実施形態１に係る映像処理装置１０を備えた送信装置１について図１を参照して説明する。図１は、本実施形態に係る映像処理装置１０を備えた送信装置１の構成を示すブロック図である。送信装置１は、映像処理装置１０、メタ情報生成部２０、エンコーダ３０及び送信部４０を備えている。

　送信装置１の外部の構成として、例えば、カメラ５０及びレコーダ６０が挙げられる。カメラ５０は、映像を撮影し、撮影した映像の映像信号をレコーダ６０へ出力する。レコーダ６０は、入力された映像信号を記録し、記録された映像信号を送信装置１へ出力する。送信装置１は、入力された映像信号を、映像処理装置１０とメタ情報生成部２０で取得する。なお、映像信号は、レコーダ６０を介さずに、カメラ５０から直接送信装置１に出力されてもよい。

　（映像処理装置）
　映像処理装置１０は、映像信号を復号することにより映像を構成する複数のフレームを順次出力する装置であり、取得部１１、算出部１２、ミュート映像生成部１３及びミュート映像挿入部１４が含まれる。

　取得部１１は、レコーダ６０またはカメラ５０から入力される映像信号を取得する。取得部１１は、取得した映像信号を、算出部１２及びミュート映像挿入部１４へ出力する。

　算出部１２は、入力された映像信号のうち、映像データの平均輝度、最大輝度、輝度値の中央値、及びＭＡＸＦＡＬＬの少なくとも何れかを参照して、映像信号に含まれる各コンテンツ（番組及びＣＭ）における映像特徴量を算出する。換言すれば、算出部１２は、映像信号に係る映像特徴量を算出する。ここで、輝度値の中央値としては、１フレームあたりの輝度値の中央値を複数フレームに亘って平均した平均中央値、または１フレームあたりの平均輝度値に基づく、複数フレームに亘るヒストグラムの中央値、の何れであってもよい。なお、映像特徴量の算出例については後述する。

　算出部１２は、入力された映像信号に含まれる複数のフレームにおいて、フレーム毎の平均輝度値である第２の平均輝度値をそれぞれ算出し、当該複数のフレームについて当該第２の平均輝度値を平均することにより、第１の平均輝度値を算出し、当該第１の平均輝度値を映像特徴量としてもよい。なお、算出部１２は、第２の平均輝度値を算出する際に、後述するように、所定値以上の輝度値を除外したアクティブ画像領域において、第２の平均輝度値を算出してもよい。

　算出部１２は、算出された映像特徴量をミュート映像生成部１３に出力する。なお、映像特徴量の具体的説明は後述する。

　ミュート映像生成部１３は、入力された各コンテンツの映像特徴量に応じた値となるように、ミュート映像の輝度値を設定し、当該輝度値を有するミュート映像を生成する。またミュート映像生成部１３は、映像信号に含まれる最後のコンテンツの後に挿入されるミュート映像については、当該ミュート映像が最後のコンテンツの映像特徴量に応じた値となるように、ミュート映像の輝度値を設定し、当該輝度値を有するミュート映像を生成する。例えば、ミュート映像生成部１３は、
　（１－１）ミュート映像の輝度と、
　（１－２）ミュート映像よりも時間的に前に表示される映像信号の感覚輝度値と、
の差異が所定の範囲内となるように、ミュート映像の輝度を設定する。ここで、「ミュート映像よりも時間的に前に」とは、例えばミュート映像の直前のことである。

　なお、本明細書において、「ミュート映像よりも時間的に前に表示される映像信号」のことを、「第１の映像信号」とも呼称する。ここで、「第１の映像信号の後に」とは、例えば第１の映像信号の直後のことであるがこれに限定されるものではない。また、「ミュート映像よりも後に表示される映像信号」のことを、「第２の映像信号」とも呼称する。また、「第１の」及び「第２の」を付けずに用いられる「映像信号」との表現は、上述の第１の映像信号及び第２の映像信号の少なくとも何れかを含むものとして用いられることがある。

　また、「所定の範囲内となるように」とは、
　　ミュート映像の輝度値＝映像データの感覚輝度値
となる場合も含まれるし、
　　｜ミュート映像の輝度値－感覚輝度値｜／感覚輝度値　≦　Ａ（例えばＡ＝０．１）と表される場合も含まれる（ここで、表記｜Ｘ｜は、Ｘの絶対値を示す）。また、所定の映像データの範囲は適宜設定することもできる。また、所定の範囲には、丸め込み等に起因した計算誤差に伴う値の変動も含まれる。

　ミュート映像生成部１３は、生成されたミュート映像をミュート映像挿入部１４に出力する。

　ミュート映像挿入部１４は、取得部１１から入力された映像信号とミュート映像生成部１３から入力されたミュート映像とを用いて、映像信号に含まれる各コンテンツの間にミュート映像を挿入する。ミュート映像挿入部１４は、ミュート映像が挿入された映像信号をエンコーダ３０へ出力する。

　（その他部材）
　メタ情報生成部２０は、入力された映像信号に基づき、映像信号のメタ情報を生成する。メタ情報生成部２０は、生成したメタ情報を送信部４０へ出力する。メタ情報には、各コンテンツの輝度値を示す平均輝度、最大輝度、輝度値の中央値、及びＭＡＸＦＡＬＬ等が含まれる。

　エンコーダ３０は、映像処理装置１０からミュート映像が挿入された映像信号を出力される。エンコーダ３０は、入力された映像信号を符号し、映像データを生成する。エンコーダ３０は、生成した映像データを送信部４０へ出力する。

　送信部４０は、
　（１－３）メタ情報生成部２０から入力されたメタ情報と、
　（１－４）エンコーダ３０から入力された映像データと、
を送信用映像信号に含ませて、当該送信用映像信号を表示装置へ送信する。

　ここで、送信部４０が送信する送信用映像信号は、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface：高精細度マルチメディアインターフェース）規格に基づくＨＤＭＩ信号、Ｔｕｎｅｒ信号（チューナーによって受信した信号）及びＣＶＢＳ（Composite Video, Blanking, and Sync：コンポジット映像信号）信号等のＨＤＲ信号であり得る。

　（表示装置）
　表示装置は、受信部、映像制御部、操作受付部、パネル制御部及び表示パネルを備えている。受信部は、送信装置１から送信される送信用映像信号を受信し、映像制御部に出力する。映像制御部は、入力された映像信号を復号し、復号した映像データをパネル制御部へ出力する。パネル制御部は、映像制御部から入力された映像データをトーンマッピングすることにより、映像データを適切な輝度で表示パネルにおいて表示できるようにする。トーンマッピングとは、映像信号に含まれる輝度情報を、表示パネルで表現できるどの輝度に割り振るかを決定するものである。操作受付部は、ユーザによる操作を受け付ける。操作受付部が受け付ける操作の一例として、映像の表示を開始する操作、及び表示映像を停止する操作等が挙げられる。

　（ミュート映像生成処理）
　本実施形態に係る映像処理装置１０により実行されるミュート映像生成処理の流れを、図２を参照して説明する。図２は、ミュート映像生成処理の流れを示すフローチャートである。

　本実施形態に係る映像処理装置１０は、以下に説明するステップＳ０～Ｓ４を実行することによって、輝度値を設定したミュート映像を生成する。

　まず、取得部１１は、映像信号を取得する（ステップＳ０）。取得部１１は、取得した映像信号を、算出部１２及びミュート映像挿入部１４へ出力する。

　次に、算出部１２は、取得部１１から入力された映像信号より、映像信号に含まれる各コンテンツに対応する映像特徴量を特定する（ステップＳ１）。

　次に、ミュート映像生成部１３は、算出部１２から映像特徴量を取得する。ミュート映像生成部１３は、各コンテンツの間に挿入するミュート映像に対して、取得した映像特徴量に応じた値となるように、ミュート映像の輝度値を設定する。ミュート映像生成部１３は、当該輝度値を有するミュート映像を生成する（ステップＳ２）。

　次に、ミュート映像挿入部１４は、取得部１１から入力された映像信号へ、ミュート映像生成部１３から入力されたミュート映像を挿入する。ミュート映像挿入部１４は、当該ミュート映像を、映像信号に含まれる各コンテンツの間及び最後のコンテンツの後に挿入する（ステップＳ３）。

　次に、ミュート映像挿入部１４は、ミュート映像を挿入した映像信号を、エンコーダ３０へ出力する。エンコーダ３０は、当該映像信号を符号し、映像データを生成する。エンコーダ３０は、当該映像データを送信部４０へ出力する。送信部４０は、メタ情報生成部２０から、当該映像信号のメタ情報を取得する。送信部４０は、当該映像データと当該メタ情報とを送信用映像信号に含ませ、当該送信用映像信号を表示装置へ送信する（ステップＳ４）。

　以上のように、本実施形態に係るミュート映像生成処理では、ミュート映像の輝度値を、ミュート映像よりも時間的に前に表示される映像信号の感覚輝度値に応じた値とするため、ミュート映像とミュート映像の前に表示される映像信号との輝度値の差異を低減することができる。これにより、輝度差によるユーザへの心理的負担を軽減することができる。

　次に、図３及び４を参照して、本実施形態に係る輝度値を設定したミュート映像生成処理の一例についてより具体的に説明する。

　図３の（ａ）及び（ｃ）は、従来の表示装置においてミュート映像の輝度値を設定した際の輝度値の変化を示し、図３の（ｂ）及び（ｄ）は、本発明の実施形態１に係る送信装置においてミュート映像の輝度値を設定した際の輝度値の変化を示している。

　図３の（ａ）及び（ｃ）に示すように、ミュート映像の輝度値が０ｎｉｔであり、ミュート映像とミュート映像の前後のコンテンツとの輝度値の差異が大きい。本実施形態に係るミュート映像生成部１３は、図３の（ｂ）及び（ｄ）に示すように、ミュート映像とミュート映像よりも時間的に前に表示されるコンテンツとの輝度値の差異が所定の範囲内となるように、ミュート映像の輝度値を設定する。その結果、図３の（ｂ）及び（ｄ）に示すように、図３の（ａ）及び（ｃ）と比較して、コンテンツの切り替え時におけるミュート映像とミュート映像の前後のコンテンツとの輝度値の差異が低減される。

　図４は、表示映像（コンテンツ及びミュート映像）の輝度値の経時変化を示している。図４の（ａ）は、従来の表示装置においてミュート映像の輝度値を設定した際の輝度値の変化を示し、図４の（ｂ）は、本実施形態に係る送信装置１においてミュート映像の輝度値を設定した際の輝度値の変化を示している。図４の（ａ）に示すように、従来の表示装置では、ミュート映像とミュート映像の前後のコンテンツとの輝度値の差異が大きくなる。一方、図４の（ｂ）に示すように、本実施形態に係る映像処理装置１０では、ミュート画像生成部１３は、
　（１－１）ミュート映像の輝度と、
　（１－２）ミュート映像よりも時間的に前に表示される映像信号の感覚輝度値と、
の差異が所定の範囲となるように、ミュート映像の輝度値を設定する。その結果、図４の（ｂ）では、図４の（ａ）と比較して、ミュート映像とミュート映像の前後のコンテンツとの輝度値の差異が低減する。

　なお、本実施形態では、ミュート映像を各コンテンツの間に挿入する場合を例として挙げたが、ミュート映像が挿入される位置は特に限定されておらず、映像信号に含まれる最後のコンテンツの後にミュート映像を挿入してもよい。

　このように、本実施形態に係る映像処理装置１０では、ミュート映像の輝度値を、ミュート映像よりも時間的に前に表示される映像データの感覚輝度値から所定の範囲の値とするため、ミュート映像とミュート映像の前に表示される映像データとの輝度値の差異を低減することができ、輝度差によるユーザへの心理的負担を軽減することができる。

　（映像特徴量の算出例）
　以下では、図５及び６を参照して、算出部１２による映像特徴量の算出例について説明する。

　本明細書において、映像特徴量とは、対象となる映像の明るさに関連した特徴量のことを指す。映像特徴量の一例として、以下に具体的に説明する感覚輝度値（CPL: Contents Perceptual Luminance）を挙げることができる。なお、以下の説明はあくまで感覚輝度値の算出の例であり、これによって本願明細書の記載を限定しようとするものではない。

　（例１：ＭａｘＦＡＬＬを用いる算出方法）
　本例では、算出部１２は、最大フレーム平均輝度ＭａｘＦＡＬＬ（Maximum Frame Average Light Level）を算出し、算出したＭａｘＦＡＬＬを感覚輝度値として設定する。ここで、ＭａｘＦＡＬＬとは、映像を構成する全フレーム中の平均輝度の最大値であり、CEA861．3によってアルゴリズムは規定されている。図６に、ＭａｘＦＡＬＬを算出するための疑似コードを示す。

　図５に示すように、算出部１２は、あるフレームにおけるアクティブ画像領域（activeimage area）に含まれる１画素毎に、非線形画素値である（Ｒ’，Ｇ’，Ｂ’）を、ｃｄ／ｍ²（カンデラ毎平方メートル）を単位とする線形輝度値である（Ｒ，Ｇ，Ｂ）に変換する。そして（Ｒ，Ｇ，Ｂ）のうちの最大値を、当該画素における最大輝度値maxRGBとして設定する。

　そして、算出部１２は、アクティブ画像領域に含まれる全ての画素の最大輝度値maxRGBの平均を当該フレームにおける平均輝度flameAverageLightLevelとして設定する。

　さらに、算出部１２は、映像シーケンスに含まれる全てのフレームのうち、最大の平均輝度flameAverageLightLevelをMaxFALLに設定し、このMaxFALLを、対象映像の感覚輝度値に設定する。

　なお、アクティブ画像領域とは、例えば、後述するように、対象のフレームから所定の輝度値以上の領域を除外することによって得られる領域のことを指すが、これに限定されるものではなく、適宜設定することもできる。

　（例２：黒画面及び白画面を除外する方法）
　映像シーケンスに含まれる全てのフレームの中に、白画面（平均輝度が閾値Wt（Bk＜Wt）以上の画面）を有するフレームが含まれている場合、MaxFALLの値が非常に大きい値となるため、算出部２３において算出する映像特徴量が、当該映像シーケンス全体の特徴として適していないことがある。

　本例では、算出部１２は、黒画面（平均輝度が閾値Bk以下の画面）、及び白画面（平均輝度が閾値Wt（Bk＜Wt）以上の画面）のうち少なくともいずれか一方を除外することにより、感覚輝度値を算出する。感覚輝度値の算出に本例を用いることによってより好適な感覚輝度値を算出することができる。

　図６に、算出部１２が本例に係る感覚輝度値を算出するための疑似コードを示す。図６に示すように、算出部１２は、あるフレームにおけるアクティブ画像領域（active imagearea）に含まれる１画素毎に、当該ピクセルの線形輝度値Ｙ（linear luminance value Y）を算出する。線形輝度値Ｙの算出は、図６の点線枠内に示した疑似コードによって行う。より具体的には、算出部１２は、当該画素の画素値（Ｒｉｎ，Ｇｉｎ，Ｂｉｎ）に対してＥＯＴＦ（Electro-Optical Transfer Function）変換を適用することにより、輝度値（Ｒ，Ｇ，Ｂ）を算出し、更に、
　　Y = 0.2627R + 0.6780G + 0.0593B
によって輝度値Ｙを算出する。

　そして、算出部１２は、図６に示すように、アクティブ画像領域に含まれる全ての画素の輝度値Ｙの平均を当該フレームにおける平均輝度flameAverageLuminanceとして設定する。

　更に、算出部１２は、図６に示すように、映像シーケンスに含まれる全てのフレームのうち、黒画面（平均輝度が閾値Bk以下の画面）、及び白画面（平均輝度が閾値Wt（Bk＜Wt）以上の画面）のうち少なくともいずれか一方を除外したうえで、平均輝度flameAverageLuminanceの平均を取ることにより、対象映像の感覚輝度値を算出する。なお、閾値Ｂｋ（第１の閾値）及びＷｔ（第２の閾値）の具体的値は本実施形態を限定するものではないが、例えばＢｋ＝５０、Ｗｔ＝２０００とすればよい。

　（アクティブ画像領域）
　以下では、上記の説明に登場したアクティブ画像領域についてより具体的に説明する。

　算出部１２は、１フレームあたりのフレーム輝度値を算出する際、所定の閾値以上の輝度を有する領域を除外して、当該フレーム輝度値を算出することが好ましい。ここで、所定の閾値以上の輝度を有する領域を除外した画像領域をアクティブ画像領域と称する。

　アクティブ画像領域の一例として、表示パネルの表示可能最大輝度が１０００ｎｉｔであり、所定の閾値を２００ｎｉｔとした場合の算出部１２の処理について図７を参照して説明する。

　図７の（ａ）及び（ｂ）に示す例では、ラインＬ１に沿った輝度において、２００ｎｉｔを超える輝度が存在する。算出部１２は、図７の（ａ）に示すラインＬ１に沿って輝度の平均を算出しようとする場合、所定の輝度である２００ｎｉｔ以上の高輝度領域については、当該領域の輝度値を用いることなく、フレーム輝度値を算出する。

　より具体的には、算出部１２は、図７（ｃ）に示すように、所定の閾値以上の輝度を有する領域を除外領域とし、図７（ｄ）に示すように、当該除外領域に含まれる輝度をフレーム輝度値の算出に用いない。換言すれば、算出部１２は、除外領域以外の領域に含まれる輝度を参照して、フレーム輝度値を算出する。

　〔実施形態２〕
　本実施形態２に係る映像処理装置１０を備えた送信装置１について、図８を参照して以下に説明する。以下の説明では、上記実施形態において既に説明した事項については説明を省略し、上記実施形態とは異なる点について説明を行う。

　本実施形態に係る送信装置１は、上記実施形態１に係る送信装置１が備えるミュート画像生成部１３に代えて、ミュート画像生成部１３ａを備えている。

　図８は、表示映像の輝度値の経時変化を示している。図８の（ａ）は、従来の表示装置においてミュート映像の輝度値を設定した際の輝度値の変化を示し、図８の（ｂ）は、本実施形態に係る送信装置１においてミュート映像の輝度値を設定した際の輝度値の変化を示している。図８の（ｂ）に示すように、本実施形態に係る映像処理装置１０は、ミュート映像の輝度値を徐々に低下させる構成となる。

　ここで、本明細書において、輝度値を徐々に低下とは、
　・輝度値を段階的に低下させること
　・輝度値を線形的又は非線形的に低下させること
を含む。また、本実施形態において、輝度値を低下させる割合は、ミュート映像の表示時間の長さや低下させるべき輝度値等に応じて適宜設定することができる。

　より具体的には、本実施形態に係るミュート画像生成部１３ａは、
　（２－１）ミュート映像の輝度と、
　（２－２）ミュート映像よりも時間的に前に表示される映像信号（第１の映像信号）の感覚輝度値と、
の差異が所定の範囲となるように、ミュート映像の輝度の初期値を設定し、当該ミュート映像の輝度の初期値より、時系列に沿って低下するように、ミュート映像の輝度値を設定する。その結果、図８の（ｂ）では、ミュート映像の輝度値を徐々に低下させる構成となっており、輝度値の急激な変動を抑制する。これにより、輝度差によるユーザへの心理的負担を軽減することができる。

　なお、本実施形態では、ミュート映像を各コンテンツの間に挿入する場合を例として挙げたが、ミュート映像が挿入される位置は特に限定されておらず、映像信号に含まれる最後のコンテンツの後にミュート映像を挿入してもよい。また、輝度値を低下させる低下率は、本実施形態を限定するものではなく、適宜設定することができる。

　〔実施形態３〕
　本実施形態３に係る映像処理装置１０を備えた送信装置１について、図９を参照して以下に説明する。以下の説明では、上記実施形態において既に説明した事項については説明を省略し、上記実施形態とは異なる点について説明を行う。

　本実施形態に係る送信装置１は、上記実施形態１に係る送信装置１が備えるミュート画像生成部１３に代えて、ミュート画像生成部１３ｂを備えている。

　図９は、表示映像の輝度値の経時変化を示している。図９の（ａ）は、従来の表示装置においてミュート映像の輝度値を設定した際の輝度値の変化を示し、図９の（ｂ）は、本実施形態に係る送信装置１においてミュート映像の輝度値を設定した際の輝度値の変化を示している。図９の（ｂ）に示すように、本実施形態に係るミュート映像生成部２４ｂは、
　（３－１）あるコンテンツの映像特徴量と、
　（３－２）次コンテンツの映像特徴量と、
に応じた値になるように、ミュート映像の輝度値として設定し、ミュート映像を生成する。換言すれば、ミュート映像の輝度値は、第１の映像信号及び第２の映像信号に係る映像特徴量に応じた輝度である。例えば、ミュート映像生成部２４ｂは、上記（３－１）と上記（３－２）との平均値をミュート映像の輝度値として設定する。なお、「あるコンテンツ」とは、ミュート映像より時間的に前に表示される映像信号（第１の映像信号）に対応するものであり、「次コンテンツ」とは、ミュート映像より時間的に後に表示される映像信号（第２の映像信号）に対応するものである。

　図９（ｂ）に示すように、本実施形態に係る映像処理装置１０では、ミュート映像の前後のコンテンツの輝度値の平均値をミュート映像の輝度値に設定するので、ミュート映像とミュート映像の前後のコンテンツとの輝度値の差異が低減される。

　このように、本実施形態に係る映像処理装置１０では、ミュート映像とミュート映像の前に表示される映像データとの輝度値の差異を低減するだけでなく、ミュート映像とミュート映像の後に表示される映像データとの輝度値の際を低減することができる。これにより、輝度差によるユーザへの心理的負担を軽減することができる。

　〔実施形態４〕
　本実施形態４に係る映像処理装置１０を備えた送信装置１について、図１０を参照して以下に説明する。以下の説明では、上記実施形態において既に説明した事項については説明を省略し、上記実施形態とは異なる点について説明を行う。

　本実施形態に係る送信装置１は、上記実施形態１に係る送信装置１が備えるミュート映像生成部１３に代えて、ミュート映像生成部１３ｃを備えている。

　図１０は、表示映像の輝度値の経時変化を示している。なお、図１０（ａ）は、従来の表示装置においてミュート映像の輝度値を設定した際の輝度値の変化を示し、図１０（ｂ）は、本実施形態に係る映像処理装置１０においてミュート映像の輝度値を設定した際の輝度値の変化を示している。図１０（ｂ）に示すように、本実施形態に係るミュート映像生成部１３ｃは、ミュート映像の輝度値を、時系列に沿って、あるコンテンツの映像特徴量から、次コンテンツの映像特徴量へと変化するように設定し、ミュート映像を生成する。

　このように、本実施形態に係る映像処理装置１０では、ミュート映像の輝度値を、ミュート映像の前に表示される映像信号（第１の映像信号）の輝度値からミュート映像の後に表示される映像信号（第２の映像信号）の輝度値へと徐々に変化させており、輝度値の急激な変動を抑制する。これにより、輝度差によるユーザへの心理的負担を軽減することができる。

　〔実施形態５〕
　本実施形態５に係る映像処理装置１０を備えた送信装置１について、図１１を参照して以下に説明する。以下の説明では、上記実施形態において既に説明した事項については説明を省略し、上記実施形態とは異なる点について説明を行う。

　本実施形態に係る送信装置１は、上記実施形態に係る送信装置１が備える算出部１２及びミュート映像生成部１３に代えて、算出部１２ｄ及びミュート映像生成部１３ｄを備えている。

　図１１は、表示映像の輝度値の経時変化を示している。なお、図１１（ａ）は、従来の表示装置においてミュート映像の輝度値を設定した際の輝度値の変化を示し、図１１（ｂ）は、本実施形態に係る映像処理装置１０においてミュート映像の輝度値を設定した際の輝度値の変化を示している。図１１（ｂ）に示すように、本実施形態に係る映像処理装置１０では、ミュート映像の輝度値を、ミュート映像の前後のコンテンツの所定期間内の映像特徴量に基づき設定する。ここで、ｔ_１は、ミュート映像の前のコンテンツの末尾の所定期間を示しており、ｔ_２は、ミュート映像の後のコンテンツの冒頭の所定期間を示している。

　算出部１２ｄは、各コンテンツの映像特徴量を算出する際に、実施形態１で算出した各コンテンツの映像特徴量に加えて、
　・ミュート映像よりも時間的に前の所定期間内の映像信号の映像特徴量
　・ミュート映像よりも時間的に後の所定期間内の映像信号の映像特徴量
を算出する。算出部１２ｄは、当該映像特徴量をミュート映像生成部１３へ出力する。ここで、より具体的には「ミュート映像よりも時間的に前の」とは「ミュート映像の直前の」ことであり、「ミュート映像よりも時間的に後の」とは「ミュート映像の直後の」ことである。また、「所定期間」は、例えば、１秒、３秒、１０秒のように適宜設定することができる。また、映像信号に含まれるコンテンツに応じて所定期間を設定してもよい。

　ミュート映像生成部１３ｄは、
　（５－１）あるコンテンツ（第１の映像信号）の映像特徴量と、
　（５－２）次コンテンツ（第２の映像信号）の映像特徴量と、
に応じた値になるように、ミュート映像の輝度値として設定する。ここで、ミュート映像生成部１３ｄは、上記（５－１）及び（５－２）の映像特徴量の少なくとも何れか１つを上述した所定期間内の映像信号の映像特徴量とし、ミュート映像の輝度値を設定する。

　なお、本実施形態に係るミュート映像生成部１３ｄは、映像特徴量を上述した所定期間内の映像信号の映像特徴量とした以外は、実施形態１～４と同様の処理でミュート映像の輝度値を設定することができる。

　このように、本実施形態に係る映像処理装置１０では、ミュート映像の近傍の映像特徴量に基づき、ミュート映像の輝度値を設定することができるため、ミュート映像とミュート映像の前後に表示される映像データとの輝度値の差異をより低減することができる。これにより、輝度差によるユーザへの心理的負担を軽減することができる。

　〔実施形態６〕
　本実施形態６に係る映像処理装置１０を備えた送信装置１について、図１２を参照して以下に説明する。以下の説明では、上記実施形態において既に説明した事項については説明を省略し、上記実施形態とは異なる点について説明を行う。

　本実施形態に係る送信装置１は、上記実施形態に係る送信装置１が備える算出部１２及びミュート映像生成部１３に代えて、算出部１２ｅ及びミュート映像生成部１３ｅを備えている。

　算出部１２ｅは、取得部１１から入力された映像データの平均色度、最大色度、色度値の中央値、及びＭＡＸＦＡＬＬ等の色域情報のうち少なくとも何れかを参照して、映像信号に含まれる各コンテンツにおける感覚色度値を算出する。

　算出部１２ｅは、算出された感覚色度値をミュート映像生成部１３ｅに出力する。ミュート映像生成部１３ｅは、入力された感覚色度値に応じた値となるように、ミュート映像の色度値を設定し、当該色度値を有するミュート映像を生成する。

　ミュート映像生成部１３ｅが設定する色域としては、ITU-R BT.2020又はITU-R BT.709に準拠した色域を用いればよい。

　このように本実施形態は、上記実施形態において、ミュート映像の輝度値に代えてミュート映像の色度を設定し、ミュート映像を生成することができる。

　図１２は、表示映像の色度値の経時変化を示している。なお、図１２（ａ）は従来の映像処理装置における色度値の経時変化を示しており、図１２（ｂ）、（ｃ）及び（ｄ）は、本実施形態に係る映像処理装置１０における色度値の経時変化の一例を示している。なお、図１２では色度値の経時変化の一例として、現時点のコンテンツの色を緑、次コンテンツの色を青とした際の経時変化を示している。

　従来の映像処理装置では、色度及び輝度の値が０となるため、図１２（ａ）に示すように、ミュート映像の色は黒となる。また、ミュート映像とミュート映像の前後のコンテンツとの色度値の差異が大きくなる。

　図１２（ｂ）に示すように、本実施形態に係る映像処理装置１０の一例では、ミュート映像の色をシアンとする。即ち本例では、ミュート映像の色度値を、ミュート映像の前後のコンテンツの色度値の平均値とする。これにより、ミュート映像とミュート映像の前後のコンテンツとの色度値の差異が低減することができる。

　図１２（ｃ）に示すように、本実施形態に係る映像処理装置１０の一例では、ミュート映像の色を緑から青へと徐々に変化させる。すなわち、本例では、ミュート映像の色度値を、ミュート映像の前に表示される表示映像の色度値からミュート映像の後に表示される表示映像の色度値へと徐々に変化させる。これにより、色度値の急激な変動を抑制することができる。

　図１２（ｄ）に示すように、本実施形態に係る映像処理装置１０の一例では、ミュート映像の色を緑からグレーへ徐々に変化させ、その後グレーから青へ徐々に変化させる。すなわち、本例では、ミュート映像の色度値を、ミュート映像の前に表示される表示映像の色度値から０に徐々に変化させ、その後０からミュート映像の後に表示される表示映像の色度値へと徐々に変化させる。これにより、色度値の急激な変動を抑制する際に、ミュート映像前後のコンテンツの色による影響を軽減することができる。

　このように、本実施形態に係る映像処理装置１０は、色度差によるユーザへの心理的負担を軽減することができる。

　〔ソフトウェアによる実現例〕
　映像処理装置１０の制御ブロック（特に算出部１２、ミュート映像生成部１３及びミュート映像挿入部１４）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ＣＰＵ（Central Processing Unit）を用いてソフトウェアによって実現してもよい。

　後者の場合、映像処理装置１０は、各機能を実現するソフトウェアであるプログラムの命令を実行するＣＰＵ、上記プログラム及び各種データがコンピュータ（またはＣＰＵ）で読み取り可能に記録されたＲＯＭ（Read Only Memory）または記憶装置（これらを「記録媒体」と称する）、上記プログラムを展開するＲＡＭ（Random Access Memory）などを備えている。そして、コンピュータ（またはＣＰＵ）が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。

　〔付記事項〕
　本明細書において、「算出」とは、導出、演算、計算、誘導等を含む。

　また、本明細書において、「生成」とは、作成、作製、作出、創成、創造等を含む。

　また、本明細書において、「挿入」とは、導入、挟み込む、差し込む、組み込む等を含む。

　また、本明細書における「感覚輝度値」とは、視覚輝度、視覚補正輝度、感性輝度、官能輝度等を含む。

　〔まとめ〕
　本発明の態様１に係る送信装置１は、送信用映像信号の映像特徴量を算出する算出部１２と、第１の映像信号の後にミュート映像を生成するミュート映像生成部１３と、を備え、前記ミュート映像の輝度は、前記映像特徴量の値に応じた輝度である。

　前記構成によれば、ミュート映像の輝度値を、ミュート映像よりも時間的に前に表示される映像信号の感覚輝度値に対して所定の範囲の値とするため、ミュート映像とミュート映像の前に表示される映像信号との輝度値の差異を低減することができる。

　本発明の態様２に係る送信装置１は、前記態様１において、前記ミュート映像生成部１３は、第２の映像信号の前に前記ミュート映像を生成し、前記ミュート映像の輝度は、前記第１の映像信号の映像特徴量、及び前記第２の映像信号の映像特徴量の値に応じた輝度である。

　前記構成によれば、ミュート映像とミュート映像の前に表示される映像信号との輝度値の差異を低減するだけでなく、ミュート映像とミュート映像の後に表示される映像信号との輝度値の際を低減することができる。

　本発明の態様３に係る送信装置１は、前記態様１または２の態様において、前記第１の映像信号に係る映像特徴量は、前記第１の映像信号の所定期間内の映像特徴量であり、前記第２の映像信号に係る映像特徴量は、前記第２の映像信号の所定期間内の映像特徴量である。

　前記構成によれば、ミュート映像の輝度値を、ミュート映像の前に表示される映像信号の輝度値からミュート映像の後に表示される映像信号の輝度値へと徐々に変化させており、輝度値の急激な変動を抑制することができる。

　本発明の態様４に係る送信装置１は、前記態様１から３の何れかの態様において、前記映像特徴量が、明るさの感覚を表す感覚輝度値である。

　本発明の態様５に係る送信装置１は、前記態様４において、前記算出部１２は、前記感覚輝度値を、前記映像信号の平均輝度、最大輝度、輝度値の中央値、及びＭＡＸＦＡＬＬの少なくとも何れかを参照して算出する。

　本発明の態様６に係る送信装置１は、前記態様４または５において、前記算出部１２は、前記映像信号の表す表示映像のうち、平均輝度が第１の閾値以下の画面と、平均輝度が第２の閾値以上の画面と、のうち少なくともいずれか一方を除外し、前記感覚輝度値を算出し、当該第１の閾値は、黒画面における閾値であり、当該第２の閾値は、白画面における閾値である。

　本発明の態様１～６に係る送信装置１は、コンピュータによって実現してもよく、この場合には、コンピュータを前記映像処理装置２０が備える各部（ソフトウェア要素）として動作させることにより前記映像処理装置２０をコンピュータにて実現させる映像処理装置２０の制御プログラム、及びそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。

　本発明の態様９に係る送信装置１は、第１の映像信号の後に生成する前記ミュート映像の輝度が、前記第１の映像信号に係る映像特徴量に応じた値である。

　本発明の態様１０に係る送信装置１は、前記態様９において、第２の映像信号の前に前記ミュート映像を生成し、前記ミュート映像の輝度が、前記第１の映像信号の映像特徴量、及び前記第２の映像信号の映像特徴量の値に応じた輝度である。

　本発明の態様１１に係る送信装置１は、前記態様９または１１の態様において、前記第１の映像信号に係る映像特徴量は、前記第１の映像信号の所定期間内の映像特徴量であり、前記第２の映像信号に係る映像特徴量は、前記第２の映像信号の所定期間内の映像特徴量である。

　本発明の態様２に係る送信装置１は、前記態様９から１１の何れかの態様において、前記映像特徴量が、明るさの感覚を表す感覚輝度値である。

　本発明の態様１３に係る送信装置１は、前記態様１２において、前記感覚輝度値を、前記映像信号の平均輝度、最大輝度、輝度値の中央。値、及びＭＡＸＦＡＬＬの少なくとも何れかを参照して算出する
　本発明の態様１４に係る送信装置１は、前記態様１２または１３において、前記映像信号の表す表示映像のうち、平均輝度が第１の閾値以下の画面と、平均輝度が第２の閾値以上の画面と、のうち少なくともいずれか一方を除外して、前記感覚輝度値を算出する。

　本発明の態様９～１４に係る送信装置１は、コンピュータによって実現してもよく、この場合には、コンピュータを前記映像処理装置２０が備える各部（ソフトウェア要素）として動作させることにより前記映像処理装置２０をコンピュータにて実現させる映像処理装置２０の制御プログラム、及びそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。

　本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。

　　１　送信装置
　１０　映像処理装置
　１１　取得部
　１２　算出部
　１３　ミュート映像生成部
　１４　ミュート映像挿入部
　２０　メタ情報生成部
　３０　エンコーダ
　４０　送信部
　５０　カメラ
　６０　レコーダ

Claims

　送信用映像信号の映像特徴量を算出する算出部と、
　第１の映像信号の後にミュート映像を生成するミュート映像生成部と、
を備え、
　前記ミュート映像の輝度は、前記第１の映像信号に係る映像特徴量の値に応じた輝度であることを特徴とする送信装置。
　前記ミュート映像生成部は、第２の映像信号の前に前記ミュート映像を生成し、
　前記ミュート映像の輝度は、前記第１の映像信号の映像特徴量、及び前記第２の映像信号の映像特徴量の値に応じた輝度であることを特徴とする請求項１に記載の送信装置。
　前記第１の映像信号に係る映像特徴量は、前記第１の映像信号の所定期間内の映像特徴量であり、
　前記第２の映像信号に係る映像特徴量は、前記第２の映像信号の所定期間内の映像特徴量であることを特徴とする、請求項２に記載の送信装置。
　前記映像特徴量は、明るさの感覚を表す感覚輝度値であることを特徴とする請求項１から３の何れか１項に記載の送信装置。
　前記算出部は、前記感覚輝度値を、前記映像信号の平均輝度、最大輝度、輝度値の中央値、及びＭＡＸＦＡＬＬの少なくとも何れかを参照して算出することを特徴とする請求項４に記載の送信装置。
　前記算出部は、前記映像信号の表す表示映像のうち、
　　平均輝度が第１の閾値以下の画面と、
　　平均輝度が第２の閾値以上の画面と、
のうち少なくともいずれか一方を除外して、前記感覚輝度値を算出することを特徴とする請求項４または５に記載の送信装置。
　請求項１から６に記載の送信装置としてコンピュータを機能させるためのミュート映像生成プログラムであって、前記算出部及び前記ミュート映像生成部としてコンピュータを機能させるための制御プログラム。
　請求項７に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。