JP5074864B2 - データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 - Google Patents

Description

本発明は、映像表示装置に映像を表示する際に、その映像の撮影シーンの雰囲気や場面設定に適応させて、映像表示装置の周囲の照明光を制御することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法に関するものである。

例えば、テレビジョン受像機のような映像表示装置により映像表示を行う場合や、プロジェクタ装置を用いて映像を投影表示させるような場合に、その周囲の照明光を表示映像に合わせて調整することにより臨場感を高めるなどの視聴演出効果を付与するようにした技術が知られている。

また、特許文献１には、映像制作者の意図する撮影シーンの雰囲気や場面設定に適応させて、視聴環境の照明光を適切に制御することにより、視聴者に臨場感を与えてより高度な映像効果を得るために、映像データの各シーンの区切り位置を示すシーン区切り位置情報を、前記映像データに付加して送信するものが提案されている。

これによると、視聴環境照明装置は、シーン区切り位置情報に基づいて、表示すべき映像データにおける同一シーン内では、表示装置の周辺に設置された照明装置の照明光を略一定に保持することが可能となり、視聴環境の照明光を適切なタイミングで切替制御して、最適な視聴環境の照明制御を実現することができる。
ＷＯ２００７／０５２３９５

ドラマや時代劇では、映像制作者（脚本家や演出家など）の意図により、番組内の異なったシーンの画面を切り換える方法として、カット切り替えであるカットイン、カットアウト、視覚的な効果を加えたフェードイン、フェードアウト、またそれらを組み合わせたフェードイン・フェードアウト、カットアウトフェードイン、フェードアウトカットイン、ディゾルブ等のスイッチング技法が使用されている。映像制作者は、これらのスイッチング技法をシーンの表現意図によって使い分けることで、番組を盛り上げるように映像の編集を行う。

しかしながら、上述した従来の技術においては、一つの画面から別の画面に瞬間的に切り替える技法であるカット切り替えされた映像と連動した照明制御を行うことはできるが、フェードイン、フェードアウトなどの徐々に映像信号の利得レベルを変更して画面を切り替えるようなスイッチング技法が使用された映像と連動した照明制御を行うことは困難である。

このため、番組内での異なったシーンでの画面切り替え時に瞬間的に照明光の状態が変化することで、視聴者に対して違和感を与えてしまう可能性があり、上述のようなスイッチング技法を用いて編集された映像表示時においては、視聴環境の臨場感を逆に阻害してしまいかねないという問題がある。

本発明は、上記課題に鑑みてなされたものであり、映像シーンの切替え時に使用されている画面のスイッチング技法に応じた、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。

本願の第１の発明は、視聴環境制御装置において、表示装置に表示すべき映像データと、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報と、前記セグメント単位で前記映像データに付加された、前記セグメント間の映像切替え方法を示す映像切替え方法情報とを受信する受信手段と、前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段とを備えたことを特徴とする。
本願の第２の発明は、視聴環境制御装置において、表示装置に表示すべき映像データを受信する映像受信手段と、前記映像データとは別に送信された、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報、並びに前記セグメント間の映像切替え方法を示す映像切替え方法情報を受信する情報受信手段と、前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段を備えたことを特徴とする。

本願の第３の発明は、前記制御手段が、前記照明装置の照明光を、前記セグメント単位で切替え制御することを特徴とする。

本願の第４の発明は、前記制御手段が、前記映像データの特徴量を用いて、前記照明装置の照明光を制御することを特徴とする。

本願の第５の発明は、前記視聴環境制御装置と、該視聴環境制御装置によって視聴環境照明光を制御される照明装置とを備えることを特徴とする。

本願の第６の発明は、視聴環境制御方法において、表示装置に表示すべき映像データと、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報と、前記セグメント単位で前記映像データに付加された、前記セグメント間の映像切替え方法を示す映像切替え方法情報とを受信し、前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする。
本願の第７の発明は、視聴環境制御方法において、表示装置に表示すべき映像データを受信すると共に、前記映像データとは別に送信された、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報、並びに前記セグメント間の映像切替え方法を示す映像切替え方法情報を受信し、前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする。

本発明によれば、映像制作者の意図する映像シーンの切替え時に使用されている画面のスイッチング技法に適応させて、視聴環境の照明光を適切に制御することが可能となり、視聴者に臨場感を与えてより高度な映像効果を得ることができる。

＜第１の実施形態＞
以下、本発明の視聴環境制御システムの第１実施形態について、図１乃至図２５とともに詳細に説明する。ここで、図１は本実施形態の視聴環境制御システムにおける映像送信装置の要部概略構成を示すブロック図、図２は本実施形態の視聴環境制御システムにおける映像送信装置の出力ビットストリーム例を示す説明図、図３は本実施形態の視聴環境制御システムにおける付加データのデータ構造の一例を説明するための図である。

図４は映像の構成要素を説明するための図、図５は本実施形態の視聴環境制御システムにおけるシーン区切り情報の一例を示す説明図、図６乃至図８は画面のスイッチング手法を説明するための図、図９は本実施形態の視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図、図１０は図９の照明制御データ生成部の概略構成を示すブロック図である。

図１１は本実施形態の切替え制御処理部における切替え方法情報に基づいて照明制御データの生成処理方法を決定するフローを示したフローチャート、図１２は本実施形態の視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の一例を示す説明図、図１３は本実施形態の視聴環境制御システムによる照明制御データ生成処理の一例を示す説明図である。図１４は本実施形態の視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の他の例を示す説明図、図１５は本実施形態の視聴環境制御システムによる照明制御データ生成処理の他の例を示す説明図である。

本実施形態における映像送信装置（データ送信装置）は、図１に示すように、映像データ、音声データ、セグメント区切り情報、切替え方法情報などを含む付加データのそれぞれをトランスポートストリームパケット（Transport Stream packet；ＴＳＰ）形式に分割して多重するデータ多重部１と、データ多重部１の出力データに対して誤り訂正符号を付加する等した上で変調を施し、放送データとして伝送路に送出する送信部２とを備えている。

図２はＭＰＥＧ２（Moving Picture Experts Group 2）−Ｓｙｓｔｅｍｓで規定されたトランスポートストリームパケット（ＴＳＰ）の構成の概略を示す説明図であり、１１はＴＳＰのデータ内容その他のＭＰＥＧ２−Systemsで規定された情報が記述されたヘッダ、１２は拡張ヘッダ（アダプテーション・フィールド）であって送信者が決めた情報を記述できる部分、１３は映像、音声などのデータから構成されるペイロードである。本実施形態では、例えば映像データ及び音声データをペイロード１３で伝送し、付加データを拡張ヘッダ（アダプテーション・フィールド）１２で伝送する、或いは、映像、音声などのデータから構成されるペイロードに埋め込んで伝送することが可能である。また、映像データ、音声データ、付加データのそれぞれのデータストリームを多重して伝送するようにしてもよい。

図３は付加データのデータ構造の一例を説明するための図である。本実施形態においては、映像データを１以上の任意の数のフレームから構成されるセグメントに分割し、各セグメントに関する各種付加情報がセグメント単位で記述されている。

ここで、セグメントとは、映像コンテンツの構成を時間方向に任意の長さで区切ったものとして定義され、例えばシーン、ショット、フレームなどに対応して区切られたものである。例えば、セグメントがシーンに対応する場合、ショット単位で存在する情報はセグメント内にまとめて記述する。セグメントがショットに対応する場合、シーン単位に存在する情報は、対応するセグメント全てで同じものを繰り返し記述する。また、セグメントがフレームに対応する場合、シーン単位やショット単位で存在する情報は、対応するセグメント全てで同じものを繰り返し記述する。

尚、視聴環境照明の制御においては、主に場面の状況が一定となるシーン単位での制御が多いが、撮影の状況が一定となるショット単位で制御することも少なからずある。また、時にはフレーム単位でのきめ細やかな制御が望ましい場合も存在することから、表示データの内容によって視聴環境照明を一定に制御すべきことが多い単位でセグメントを区切ることにより、付加するデータ量の増加を抑制して、効率的に付加データを記述することができる。

次に、シーンやショットを含む映像の構成について、図４を参照して説明する。連続する動画像を構成する映像データは、図４に示すように、３層（レイヤ）構成に分けて考えることができる。映像(Ｖｉｄｅｏ)を構成する第１レイヤは、フレーム（Ｆｒａｍｅ）である。フレームは物理的なレイヤであり、単一の２次元画像を指す。フレームは、通常、毎秒３０フレームのレートで得られる。第２レイヤはショット（Ｓｈｏｔ）である。そして、第３レイヤがシーン（Ｓｃｅｎｅ）である。

セグメント区切り情報は、図５に示すように、セグメント番号、開始時刻、区間情報により構成されている。セグメント開始時刻は、映像データ、音声データそれぞれの再生時間情報を示すために付加されたタイムコードにより指定されており、例えば図５に示すように、映像データの時間（ｈ）：分（ｍ）：秒（ｓ）：フレーム（ｆ）を示す情報により構成されている。セグメント区間は、当該セグメントの開始タイムコードを示す時間から次のセグメントの開始タイムコードとの期間を示す時間（ｈ）：分（ｍ）：秒（ｓ）：フレーム（ｆ）を示す情報により構成されている。

切替え方法情報は、セグメント単位でその先頭の映像に対して用いられた画面のスイッチング技法、及びその末尾の映像に対して用いられた画面のスイッチング技法を示すものであり、セグメント先頭の映像切替え方法として、カットイン、フェードイン、或いはディゾルブのいずれかが記述されるとともに、セグメント末尾の映像切替え方法として、カットアウト、フェードアウトのいずれかが記述されている。加えて、これら画面のスイッチング技法が適用された切替え時間が記述されている。

ここで、番組内の異なったシーンの画面を切り換えるスイッチング技法について、図６乃至図８とともに説明する。ここでは、スイッチング技法として、カット切替え、カットイン、カットアウト、フェードイン、フェードアウト、カットアウトフェードイン、フェードアウトカットイン、ディゾルブのそれぞれについて述べるが、スイッチング技法はこれに限定されるものではない。以下、それぞれについて説明する。

まず、カット切替えについて図６（Ａ）を用いて説明する。カット切替えとは一つの画面から別の画面に、瞬間的に切替える技法で、画面の垂直ブランキング期間に切り替わるようにして画面の切替え時のショックや雑音が現れないように編集を行うものである。このような編集がなされた映像の場合、セグメント内で推定された一定の照明制御データを保持して、セグメントの切替え時に次のセグメント内で推定された一定の照明制御データに映像と同時に瞬間的に切替えることで、映像に連動した照明制御を行うことが可能となる。ただし、セグメントの切替えの前後で、急激に照明制御データの値が切り替わる場合には、予め何らかの閾値を設けておき、該閾値を超えるようなら段階的に照明制御データ値を変更するようなスムージング制御処理を加えても構わない。

また、カット切替えの他の例として、図６（Ｂ）に示すように、画面の切替え前が空白画面で切替え後に瞬間的に完全な映像レベルに切り替わるカットインや、その逆である、図６（Ｃ）に示すような完全な映像レベルから瞬間的に空白画面に切り替わるカットアウトの技法も用いられている。

そしてまた、画面の切替え時に段階的に映像レベルを変更する技法として、フェードイン、フェードアウトもよく用いられる。フェードインは、図７（Ａ）に示すように、画面ブランクの状態から徐々に画像を現してくる技法で、画面の切替え時に空白画面から映像信号の利得を任意の速度で上げていく技法である。このような編集がなされた映像の場合、画面の切替え時の映像信号の利得の変化に合わせて照明制御データの値も規定のフェード値に任意の速度で段階的に上げていくことで、映像に連動した照明制御を行うことが可能となる。

フェードアウトは、図７（Ｂ）に示すように、画像を徐々にブランクにしていく技法で、フェードアウトとは逆の操作を行う。このような編集がなされた映像の場合、セグメント内で推定された一定の照明制御データの値に基づいて、画面の切替え時の映像信号の利得の変化に合わせて照明制御データの値も規定のフェード値に任意の速度で段階的に下げていくことで、映像に連動した照明制御を行うことが可能となる。尚、フェード値については、例えばＲＧＢの値を全て０に設定しても、受信した映像の黒レベルに相当するＲＧＢ値を照明制御データの値として使用しても構わない。

また、上述して技法を組み合わせた例として、図７（Ｃ）、図７（Ｄ）に示すように、カットアウトフェードイン、フェードアウトカットインなどがあり、それぞれ画面の切替えの前後でカットアウト及びフェードイン、フェードアウトとカットインの処理を映像信号に対して行う。

さらに、図８に示すように、切替え前の映像Ａから切替え後の映像Ｂにつなぐとき、映像Ａが消えながら映像Ｂが重なって次第に見えてくるスイッチング技法としてディゾルブ（オーバー・ラップ）があり、特に、何も無い映像からディゾルブすることをフェードイン、逆に、ある映像から何も無い映像にディゾルブすることをフェードアウトという。

以上のように、異なった画面を切替える場合における画面のスイッチング技法として幾つかのパターンがあり、これらに連動した照明制御を可能とするために、本実施形態では、映像切替え方法（スイッチング技法）及びその切替え時間の情報を、セグメント毎に記述して付加するようにしている。尚、このような映像切替え方法に関する情報は、映像編集時の編集情報を利用して生成することができるので、この場合、新たに映像切替え方法情報を作成する作業を省くことが可能となる。

次に、シーン設定情報は、当該セグメントに含まれる映像データのシーン場面設定状況を示すものであり、具体的には、当該シーンのストーリー上における季節を表わす季節情報、時刻を表わす時刻情報、場所を表わす場所情報、時代を表わす時代情報、天候を表わす天候情報、地域を表わす地域情報などが記述されている。

このシーン設定情報を利用することにより、表示する映像の特徴量に関わらず、表示映像のシーン状況（ストーリー上の場面設定状況）に応じた照明光を推定して視聴空間に照射することが可能となる（詳しくは、本願の出願人が先に出願したPCT/JP2007/057458明細書参照）。尚、このシーン設定情報は、シーン単位で変化するものであるため、セグメントをシーンに合わせて区切ることにより、シーン設定情報をセグメント単位で効率良く記述することができる。

また、撮影照明情報は、当該セグメントに含まれる映像データの撮影時における照明状況を示すものであり、具体的には、当該映像データの撮影に用いられた撮影照明のライティング種別を表わすライティング種別情報、撮影照明の性質を表わす照明器具情報、撮影照明の光の方向を表す照射方向情報、撮影照明の光の強度を表わす照明強度情報、撮影照明の光の色度を表わす照明色情報などが記述されている。

この撮影照明情報を利用することにより、表示する映像の特徴量に関わらず、映像の撮影時における照明状況に応じた照明光を推定して視聴空間に照射することが可能となる（詳しくは、本願の出願人が先に出願したPCT/JP2007/057760明細書参照）。尚、この撮影照明情報は、ショット単位又はシーン単位で変化することが多いため、セグメントをショット、シーンに合わせて区切ることにより、撮影照明情報をセグメント単位で効率良く記述することができる。

尚、本実施形態では、より適切な視聴環境照明を求めるために、シーン設定情報、撮影照明情報を付加データに含めることとしているが、これらの情報は必ずしも必要ではない。また、本発明においては、セグメント区切り情報と切替え方法情報とを、映像データまたは音声データに付加すればよく、その際のデータ構造は上記のものに限らない。

ここでは、上述したとおり、映像データを１以上の任意の数のフレームから構成されるシーンやショットなどに対応したセグメントに分割し、該セグメント単位で、上記セグメント区切り情報及び切替え方法情報を付加するようにしているので、映像制作者の意図に応じた適切な照明制御を行うことが可能になっている。

次に、上記映像送信装置より送出された放送データを受信して、映像・音声を表示・再生するとともに、そのときの視聴環境照明を制御する映像受信装置（データ受信装置）について説明する。

本実施形態における映像受信装置は、図９に示すように、伝送路より入力された放送データを受信して復調するとともに、誤り訂正を行う受信部３１と、受信部３１の出力データから、映像表示装置３６に出力する映像データ、ＴＣ（タイムコード）、音声再生装置３７に出力する音声データ、ＴＣ（タイムコード）、セグメント区切り情報、切替え方法情報などを含む付加データのそれぞれを分離・抽出するデータ分離部３２とを備えている。

また、データ分離部３２で分離された付加データ及び／又は前記映像データ及び前記音声データの特徴量に基づいて、各フレーム表示時に適した照明制御データ（ＲＧＢデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部３５と、照明制御データ生成部３５における処理時間分だけ映像データ、音声データを遅延して出力するディレイ発生部３３，３４とを備えている。

ここで、照明装置３８は、映像表示装置３６の周囲に設置されて、所定の色相をもった例えばＲＧＢの三原色の光を発光するＬＥＤにより構成することができる。ただし、照明装置３８は、映像表示装置３６の周囲環境の照明色及び明るさを制御することができるような構成であればよく、上記のような所定色を発光するＬＥＤの組み合わせに限ることなく、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。また、照明装置３８は１個以上設置されていればよい。

そしてまた、タイムコードは、映像データ、音声データそれぞれの再生時間情報を示すために付加された情報であり、例えば、映像データの時間（ｈ）：分（ｍ）：秒（ｓ）：フレーム（ｆ）を示す情報により構成されている。

本実施形態の照明制御データ生成部３５は、図１０に示すように、データ分離部３２で分離された付加データを解析する付加データ解析部３５１と、該付加データ解析部３５１により抽出されたセグメント区切り情報と、映像データ、ＴＣ、音声データ、ＴＣ、或いは、シーン設定情報及び／又は撮影照明情報に基づいて、照明制御データ推定値（Ｒ，Ｇ，Ｂ）を算出する照明制御データ推定部３５２と、前記付加データ解析部３５１により抽出された切替え方法情報に基づいて、映像切替え時の制御データを算出する切替え制御処理部３５３と、前記制御データと前記照明制御データ推定値とに基づいて、照明装置３８を制御する照明制御データ（Ｒ，Ｇ，Ｂ）を出力する照明制御部３５４とを備えている。

ここで、切替え制御処理部３５３にて、異なるセグメントに亘る切替え方法に基づいて制御データを算出する場合には、前記照明制御データ推定部３５２から算出された照明制御データ推定値（他のセグメントから得られた照明制御データ推定値も含む）を用いて、照明制御部３５４を制御する制御データを算出しても構わない。

照明制御データ推定部３５２は、映像データ、音声データの特徴量に基づいて、各フレーム表示時に適した照明推定処理を行う、或いは、付加データに含まれるシーン設定情報及び／又は撮影照明情報に基づいて、各シーン、ショット表示時に適した照明推定処理を行う。また、シーン設定情報及び／又は撮影照明情報に基づく照明推定結果と映像データ、音声データの特徴量に基づく照明推定結果とを加重平均するなどして照明推定処理を行うように構成してもよい。

尚、照明制御データ推定部３５２による撮影時の周囲光の状態の推定方法は、公知のものをはじめとする各種の技術を用いることができる。なお、ここでは、各セグメントの場（雰囲気）の推定のために映像データの特徴量に加えて、音声データの特徴量も用いているが、これは場（雰囲気）の推定精度をより向上させるためであり、映像データの特徴量のみから撮影シーンの場（雰囲気）を推定するようにしてもよい。

ここで、映像データの特徴量としては、例えばカラーテレビの表示映像から色信号（Ｃｂ、Ｃｒ）と輝度信号（Ｙ）とを取り出し、その色信号と輝度信号とから、光源に使用する三色光（赤色光，緑色光，青色光）の適正調光照度比を算出し、その照度比に従って三色光の照度を設定し、三色光を混光して照明制御データとして用いることも出来るし、カラーテレビに表示される映像を複数に分割し、照明手段によって照明制御される部分に対応する映像の分割部の平均的な色相を検出し、その検出した色相に基づいて、分割部に対応した照明制御データ推定値を算出しても構わない。また、音声データの特徴量としては、音量、音声周波数などを用いることができる。

また、シーン設定情報や撮影照明情報を用いることにより、映像撮影時に用いられた照明光の色温度、照明強度をより正確に推定することができる。さらに、上記映像データ、音声データの特徴量から算出した照明制御データ推定値を考慮して、シーン設定情報及び／又は撮影照明情報から算出した照明制御データ推定値を補正して出力するようにしても良い。

以上のように、本実施形態においては、映像データ、音声データの特徴量を用いた照明推定処理を行うモード（映像推定モード）と、映像データ、音声データの特徴量を用いず、付加データに含まれるシーン設定情報及び／又は撮影照明情報のみから照明推定処理を行うモード（照明推定モード）とを備えており、これらモードは受信装置側で視聴者により切替設定することが可能となっている。

次に、切替え方法情報に基づいて照明制御データを算出する方法の一例について説明する。ここで、図１１は本実施形態の切替え制御処理部における切替え方法情報に基づいて照明制御データの生成処理方法を決定するフローを示したフローチャート、図１２は本実施形態のセグメント区切り情報、切替え方法情報の一例を示す説明図、図１３は本実施形態による照明制御データ生成処理の一例を示す説明図である。図１４は本実施形態のセグメント区切り情報、切替え方法情報の他の例を示す説明図、図１５は本実施形態による照明制御データ生成処理の他の例を示す説明図である。

まず、切替え方法情報に基づいて照明制御データの生成処理方法を決定するフローについて、図１０、図１１とともに説明する。照明制御データ生成部３５の付加データ解析部３５１は、データ分離部３２で分離された付加データからセグメント区切り情報と切替え方法情報とを抽出し、切替え制御処理部３５４では、前記セグメント区切り情報と切替え方法情報とに基づいて、照明推定の処理を制御する制御データを算出する。

ここで、セグメント区切り情報と切替え方法情報の一例を図１２に示す。ここでは、セグメント１に対して、末尾切替時間として“２秒”が設定されているので、図１１のフローチャートに従って、セグメント区切り情報と切替え方法情報とから、末尾切替え方法として“フェードアウト”、フェードアウト開始時間を“１３：５９：３０：２７”に設定する（付加データ処理1)）。そして、セグメント１からセグメント２への切替わり部分におけるセグメント１での画面の切替え方法が“フェードアウト”に設定されているので、フェードアウトの処理を行うための制御データを照明制御部３５４に送る（フェードアウト処理）。

次に、フェードアウト処理の一例を、図１３を用いて説明する。図１３では縦軸を照明制御データ値としており、図１３の例では、照明制御データ値の一つであるＲの一例を示しているが、Ｇ、Ｂについても同様の図を使用して説明することができる。セグメント１に対して推定された照明制御データ値を照明値１とすると、照明制御部３５４でのフェードアウト処理として、
照明制御データ＝ratio×照明値１ （0.0≦ratio≦1.0）
の式に基づき照明制御データを算出し、制御データとしてはratioを1.0から0.0まで少しずつ変化させ、セグメント２の開始時刻に照明制御データのＲＧＢ値を全て０（黒色）にするような線形処理を行う。

尚、上記照明値１は、付加データに含まれるシーン設定情報及び／又は撮影照明情報からセグメント１での照明制御データ推定値（照明推定モード時）、或いは、映像データ、音声データの特徴量を用いて算出したセグメント１での照明制御データ推定値（映像推定モード時）を用いることができる。また、前述したフェードアウト処理ではフェードアウト区間中の照明制御を線形処理することとしたが、対数や三角関数など、よりスムーズにフェードアウト処理を行うことが可能な関数を用いてもよいことは言うまでもない。

さらに、本実施形態では、前述した線形処理によりフェードアウト処理に連動した照明制御を行うこととしたが、フレーム毎もしくは数フレーム毎もしくは数秒単位で映像特徴量からフェードアウト区間中の照明制御データを推定しても構わない。尚、ここでは、フェードアウト後のＲＧＢ値を全て０（黒色）にするとしたが、映像の空白画面値に相当するＲＧＢ値や映像の黒レベルに相当するＲＧＢ値にするように制御しても構わず、また、フェードアウト値として指定された値にするように制御してもよく、本発明は上述の処理に限定されるものではない。

次に、セグメント２に対しては、先頭切替時間として“２秒”が設定されているので、図１４のフローチャートに従って、セグメント区切り情報と切替え方法情報とから、先頭切替え方法として“フェードイン”、フェードイン終了時刻を“１３：５９：３４：２７”に設定する（付加データ処理1)）。そして、セグメント１からセグメント２への切替わり部分におけるセグメント２での画面の切替え方法が“フェードイン”に設定されているので、フェードインの処理を行うための制御データを、照明制御データ推定部３５２に送る（映像推定モード時）、或いは、照明制御部３５４に送る（照明推定モード時）（フェードイン処理）。

ここで、フェードイン処理の一例を、図１３を用いて説明する。まず、映像推定モードが選択設定されている場合、フェードイン処理中においては、フレーム毎に映像データ、音声データの特徴量から照明制御データ推定値を算出し、フェードイン終了時刻の照明制御データ推定値をセグメント２での照明値２とする。

すなわち、切替え制御処理部３５３は、セグメント２の開始時刻からフェードイン終了時刻まで、フレーム毎に映像特徴量から照明制御データ推定値を算出するように、照明制御データ推定部３５２に対して制御データを出力する。尚、ここでは、フェードイン区間中は、１フレーム毎に映像特徴量から照明制御データ推定値を算出することとしたが、数フレーム毎や数秒毎に照明制御データ推定値を算出しても構わず、本発明はフレーム単位での処理に限定されるものではない。

一方、照明推定モードが選択設定されている場合、セグメント２の開始時刻においてシーン設定情報及び／又は撮影照明情報を用いて算出された、セグメント２での照明制御データ推定値を照明値２とすると、照明制御部３５４でのフェードイン処理として、
照明制御データ＝ratio×照明値２ （0.0≦ratio≦1.0）
の式に基づき照明制御データを算出し、制御データとしてはratioを0.0から1.0まで少しずつ変化させ、セグメント２の開始時刻での照明制御データのＲＧＢ値を全て０（黒色）から推定値２に変化させるような線形処理を行う。この場合も、照明制御データ推定値に対する演算制御は、線形処理によるものに限らないことは言うまでもない。さらに、フェードイン前のＲＧＢ値も全て０（黒色）に限らないことは言うまでもない。

さらに、セグメント区切り情報と切替え方法情報の他の例を図１４に示す。ここでは、セグメント１に対して、切替え方法に関する記述が含まれていないため、切替え方法情報に基づく処理は行わない。次に、セグメント２に対しては、先頭切り替え時間として"３秒“が設定されているので、図１１のフローチャートに従って、セグメント区切り情報と切替え方法情報とから、先頭切替え方法として”ディゾルブ“、ディゾルブ終了時刻を”１４：０１：３８：２７“に設定する（付加データ処理1)）。そして、セグメント１からセグメント２へ切替わり部分におけるセグメント２での画面の切替え方法が”ディゾルブ“に設定されているので、ディゾルブの処理を行うための制御データを照明制御部３５４に送る（ディゾルブ処理）。

ここで、ディゾルブ処理の一例について、図１５を用いて説明する。まず、照明推定モードが選択設定されている場合、セグメント１の開始時刻においてシーン設定情報及び／又は撮影照明情報を用いて算出された、セグメント１での照明制御データ推定値を照明値１、セグメント２の開始時刻においてシーン設定情報及び／又は撮影照明情報を用いて算出された、セグメント２での照明制御データ推定値を照明値２とすると、照明制御部３５４でのディゾルブ処理は、図１５に示すように、セグメント２の開始時刻からディゾルブ終了時刻までのディゾルブ区間において、照明値１から少しずつ変化させ、ディゾルブ終了時刻での照明制御データのＲＧＢ値を照明値２に変化させるような線形処理を行う。

尚、前述したディゾルブ処理においては、ディゾルブ処理区間中の照明制御データ推定値を線形処理することとしたが、対数や三角関数などの、よりスムーズにディゾルブ処理を行うことができる関数を用いてもよいことは言うまでもない。

一方、映像推定モードが選択設定されている場合、ディゾルブ処理中においては、フレーム毎に映像データ、音声データの特徴量から照明制御データ推定値を算出し、ディゾルブ終了時刻の照明制御データ推定値をセグメント２での照明値２とする。尚、１フレーム毎に映像特徴量から照明制御データ推定値を算出することに代えて、数フレーム毎や数秒毎に照明制御データ推定値を算出するようにしてもよいことは言うまでもない。

以上のように、本実施形態によれば、基本的には同一のセグメント内では表示装置の周辺に設置された照明装置の照明光を略一定に保持しつつ、映像データ中に含まれるフェードやディゾルブといった画面のスイッチング技法にも適応して照明光を変化させることが可能となり、映像制作者の意図に応じた適切な照明制御を行うことができる。

また、上記実施形態においては、フェード区間、ディゾルブ区間などの映像切替え区間がセグメント区間内の先頭及び／又は末尾の一部として含まれるようにしているが、本発明はこれに限らず、例えばフェード区間、ディゾルブ区間などの映像切替え区間を独立した一つのセグメントとして映像データを分割するようにしてもよい。これについて、本発明の第２の実施形態として以下説明する。

＜第２の実施形態＞
次に、本発明の第２の実施形態として、切替え方法情報に基づいて照明制御データを算出する方法の別の一例について説明するが、上記第１実施形態と同一部分についての説明は省略する。ここで、図１６は本実施形態の視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の一例を示す説明図、図１７は本実施形態の視聴環境制御システムによる照明制御データ生成処理の一例を示す説明図、図１８は本実施形態の視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の他の例を示す説明図、図１９は本実施形態の視聴環境制御システムによる照明制御データ生成処理の他の例を示す説明図である。

照明制御データ生成部３５の付加データ解析部３５１は、データ分離部３２で分離された付加データからセグメント区切り情報と切替え方法情報とを抽出し、切替え制御処理部３５４では、前記セグメント区切り情報と切替え方法情報とに基づいて、照明推定の処理を制御する制御データを算出する。

ここで、セグメント区切り情報と切替え方法情報の一例を図１６に示す。
ここでは、セグメント１に対して、切替え方法情報が記述されていないので、セグメント１区間では切替え方法情報に基づく照明制御は行わない。

また、セグメント２では、末尾切替え方法のみ設定されており、末尾切替時間は設定されていないので、図１１のフローチャートに従って、セグメント区切り情報と切替え方法情報とから、末尾切替え方法として“フェードアウト”、フェードアウト開始時間をセグメント２開始時刻の“１３：５９：３２：２７”に、フェードアウト区間をセグメント区切り情報の区間情報から“２秒”に設定する（付加データ処理2)）。そして、セグメント２での画面の切替え方法が“フェードアウト”に設定されているので、フェードアウトの処理を行うための制御データを照明制御部３５４に送る（フェードアウト処理）。

次に、フェードアウト処理の一例を、図１７を用いて説明する。図１７においても、図１２と同様に縦軸を照明制御データ値としており、図の例では、照明制御データ値の一つであるＲの一例を示しているが、Ｇ、Ｂについても同様の図を使用して説明することができる。セグメント１に対して推定された照明制御データ値を照明値１とすると、照明制御部３５４でのフェードアウト処理として、
照明制御データ＝ratio×照明値１ （0.0≦ratio≦1.0）
の式に基づき照明制御データを算出し、制御データとしてはratioを1.0から0.0まで少しずつ変化させ、セグメント３開始時刻に照明制御データのＲＧＢ値を全て０（黒色）にするような線形処理を行う。

尚、上記照明値１は、付加データに含まれるシーン設定情報及び／又は撮影照明情報からセグメント１での照明制御データ推定値（照明推定モード時）、或いは、映像データ、音声データの特徴量を用いて算出したセグメント１での照明制御データ推定値（映像推定モード時）を用いることができる。また、前述したフェードアウト処理ではフェードアウト区間中の照明制御を線形処理することとしたが、対数や三角関数など、よりスムーズにフェードアウト処理を行うことが可能な関数を用いてもよいことは言うまでもない。

さらに、本実施形態では、前述した線形処理によりフェードアウト処理に連動した照明制御を行うこととしたが、フレーム毎もしくは数フレーム毎もしくは数秒単位で映像特徴量からフェードアウト区間中の照明制御データを推定しても構わない。尚、ここでは、フェードアウト後のＲＧＢ値を全て０（黒色）にするとしたが、映像の空白画面値に相当するＲＧＢ値や映像の黒レベルに相当するＲＧＢ値にするように制御しても構わず、また、フェードアウト値として指定された値にするように制御してもよく、本発明は上述の処理に限定されるものではない。

次に、セグメント３に対しては、先頭切替え方法のみ設定されており、先頭切替時間は設定されていないので、図１１のフローチャートに従って、セグメント区切り情報と切替え方法情報とから、先頭切替え方法として“フェードイン”、フェードイン終了時刻をセグメント２区切り情報の区間情報から“１３：５９：３６：２７”に、フェードイン区間をセグメント区切り情報の区間情報から“２秒”に設定する（付加データ処理2)）。そして、セグメント３での画面の切替え方法が“フェードイン”に設定されているので、フェードインの処理を行うための制御データを、照明制御データ推定部３５２に送る（映像推定モード時）、或いは、照明制御部３５４に送る（照明推定モード時）（フェードイン処理）。

ここで、フェードイン処理の一例を、図１７を用いて説明する。まず、映像推定モードが選択設定されている場合、フェードイン処理中においては、フレーム毎に映像データ、音声データの特徴量から照明制御データ推定値を算出し、フェードイン終了時刻の照明制御データ推定値をセグメント４での照明値２とする。

すなわち、切替え制御処理部３５３は、セグメント３の開始時刻からフェードイン終了時刻まで、フレーム毎に映像特徴量から照明制御データ推定値を算出するように、照明制御データ推定部３５２に対して制御データを出力する。尚、ここでは、フェードイン区間中は、１フレーム毎に映像特徴量から照明制御データ推定値を算出することとしたが、数フレーム毎や数秒毎に照明制御データ推定値を算出しても構わず、本発明はフレーム単位での処理に限定されるものではない。

一方、照明推定モードが選択設定されている場合、このケースでは、セグメント３とセグメント４とで設定されているシーン設定情報及び／又は撮影照明情報は同じであるので、シーン設定情報及び／又は撮影照明情報から算出される照明制御データ推定値はセグメント３とセグメント４の区間で同じ値となる。以上のことから、セグメント３の開始時刻においてシーン設定情報及び／又は撮影照明情報を用いて算出された、セグメント３、４での照明制御データ推定値を照明値２とすると、照明制御部３５４でのフェードイン処理として、
照明制御データ＝ratio×照明値２ （0.0≦ratio≦1.0）
の式に基づき照明制御データを算出し、制御データとしてはratioを0.0から1.0まで少しずつ変化させ、セグメント２の開始時刻での照明制御データのＲＧＢ値を全て０（黒色）から推定値２に変化させるような線形処理を行う。この場合も、照明制御データ推定値に対する演算制御は、線形処理によるものに限らないことは言うまでもない。さらに、フェードイン前のＲＧＢ値も全て０（黒色）に限らないことは言うまでもない。

さらに、セグメント区切り情報と切替え方法情報の他の例を図１８に示す。ここでは、セグメント１に対して、切替え方法に関する記述が含まれていないため、切替え方法情報に基づく処理は行わない。次に、セグメント２に対しては、先頭切り替え方法のみ設定されており、先頭切り替え時間は設定されていないので、図１１のフローチャートに従って、セグメント区切り情報と切替え方法情報から、先頭切替え方法として”ディゾルブ“、ディゾルブ終了時刻を”１３：５９：３５：２７“に設定する（付加データ処理2)）。そして、セグメント２からセグメント３へ切替わり部分におけるセグメント２での画面の切替え方法が”ディゾルブ“に設定されているので、ディゾルブの処理を行うための制御データを照明制御部３５４に送る（ディゾルブ処理）。

ここで、ディゾルブ処理の一例について、図１９を用いて説明する。このケースでもフェードインの処理と同様に、セグメント２とセグメント３で設定されているシーン設定情報及び／又は撮影照明情報は同じであるので、シーン設定情報及び／又は撮影照明情報から算出される照明制御データ推定値はセグメント２とセグメント３の区間で同じ値となる。

以上のことから、まず、照明推定モードが選択設定されている場合、セグメント２の開始時刻においてシーン設定情報及び／又は撮影照明情報を用いて算出された、セグメント２、３での照明制御データ推定値を照明値２、セグメント１の開始時刻においてシーン設定情報及び／又は撮影照明情報を用いて算出された、セグメント１での照明制御データ推定値を照明値１とすると、照明制御部３５４でのディゾルブ処理は、図１９に示すように、セグメント２の開始時刻からセグメント３の開始時刻までの区間において、照明制御データ値を照明値１から少しずつ変化させ、セグメント２開始時刻での照明制御データのＲＧＢ値を照明値２に変化させるような線形処理を行う。

尚、前述したディゾルブ処理においては、ディゾルブ処理区間中の照明制御データ推定値を線形処理することとしたが、対数や三角関数などの、よりスムーズにディゾルブ処理を行うことができる関数を用いてもよいことは言うまでもない。

一方、映像推定モードが選択設定されている場合、ディゾルブ処理中においては、フレーム毎に映像データ、音声データの特徴量から照明制御データ推定値を算出し、ディゾルブ終了時刻の照明制御データ推定値をセグメント３での照明値２として使用する。尚、１フレーム毎に映像特徴量から照明制御データ推定値を算出することに代えて、数フレーム毎や数秒毎に照明制御データ推定値を算出するようにしてもよいことは言うまでもない。

以上のように、本実施形態においても、映像データ中に含まれるフェードやディゾルブといった画面のスイッチング技法に適応して照明光を変化させることが可能となり、映像制作者の意図に応じた適切な照明制御を行うことができる。

また、上記本発明の第１、２の実施形態においては、セグメント区切り情報、切替え方法情報が放送データに付加されて送信される場合について説明したが、放送データに付加データが付加されていない場合、表示する映像データに対応するセグメント区切り情報、切替え方法情報を外部サーバ装置等より送受信することによって、映像再生時の最適な視聴環境を実現することが可能となる。これについて、本発明の第３の実施形態として以下に説明する。

＜第３の実施形態＞
以下、本発明の視聴環境制御システムの第３実施形態について、図２０及び２１とともに詳細に説明するが、上記第１、２の実施形態と同一部分には同一符号を付し、その説明は省略する。ここで、図２０は本実施形態の視聴環境制御システムにおける外部サーバ装置の要部概略構成を示すブロック図、図２１は本実施形態の視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。

本実施形態における外部サーバ装置（データ送信装置）は、図２０に示すように、映像受信装置（データ受信装置）側から特定の映像データ（コンテンツ）に関する切替え方法情報の送信要求を受信する受信部５１と、映像データ（コンテンツ）毎の切替え方法情報を格納しているデータ格納部５２と、送信要求を受けた切替え方法情報を、セグメント区切り情報とともに、要求元の映像受信装置（データ受信装置）へ送信する送信部５３とを備えている。

ここで、本実施形態のデータ格納部５２に格納されている切替え方法は、図１２、図１４、図１６、図１８に示したように、各セグメントの開始時刻情報、区間情報に対応付けてテーブル形式で記述されており、送信要求を受けた映像データ（番組コンテンツ）の切替え方法情報を、当該セグメントの区切り情報とともに、送信部５３より要求元の映像受信装置へ送信する。

次に、上記外部サーバ装置より送出されたセグメント区切り情報、区切り方法情報を受けて、視聴環境照明を制御する映像受信装置（データ受信装置）について説明する。本実施形態における映像受信装置は、図２１に示すように、伝送路より入力された放送データを受信して復調するとともに、誤り訂正を行う受信部６１と、受信部６１の出力データから、映像表示装置３６に出力する映像データ、音声再生装置３７に出力する音声データのそれぞれを分離・抽出するデータ分離部６２と、表示する映像データ（コンテンツ）に対応した切替え方法情報の送信要求を、通信ネットワークを介して外部サーバ装置（データ送信装置）に送出する送信部６７と、前記送信要求した切替え方法情報を、セグメント区切り情報とともに、通信ネットワークを介して外部サーバ装置より受信する受信部６８とを備えている。

また、前記受信部６８で受信したセグメント区切り情報、切替え方法情報を一旦記憶し、このセグメント区切り情報に含まれる開始時刻ＴＣ（タイムコード）と、データ分離部６２で抽出された映像データのＴＣ（タイムコード）とを比較し、それらが一致したときに、対応する切替え方法情報を出力するＣＰＵ６６と、ＣＰＵ６６からの切替え方法情報と、前記映像データ及び前記音声データの特徴量とに基づいて、照明制御データ（ＲＧＢデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部６５とを備えている。

すなわち、ＣＰＵ６６は、外部サーバ装置より受信して内部に記憶している切替え方法情報格納テーブルの各セグメントの開始タイムコードと、照明制御データ生成部６５に入力される映像データのタイムコードとを比較し、これらが一致した時にそのセグメントに対応する切替え方法情報を照明制御データ生成部６５に出力する。そして、照明制御データ生成部６５は、前記切替え方法情報に応じて、各フレーム表示時に適した照明制御データ（ＲＧＢデータ）を生成・出力する。

これによって、放送データに切替え方法情報が付加されていない場合であっても、表示映像データ（番組コンテンツ）に対応する切替え方法情報を外部サーバ装置より入手し、この切替え方法情報に基づいて、視聴環境照明を制御する構成としているので、上述した第１、２の実施形態と同様、映像データ中に含まれるフェードやディゾルブといった画面のスイッチング技法に適応して照明光を変化させることが可能となり、映像制作者の意図に応じた適切な照明制御を行うことができる。

尚、本実施形態においては、セグメント区切り情報、切替え方法情報のみを外部サーバ装置との間で送受信し、各フレームの映像特徴量／音声特徴量のみに基づいた照明推定処理を行うものについて説明したが、上記第１、２の実施形態のように、セグメント区切り情報、切替え方法情報に加えて、シーン設定情報、撮影照明情報などを同時に送受信するようにし、多彩な照明推定処理を行うことが可能な構成としてもよいことは言うまでもない。

また、本発明の視聴環境制御装置、方法、及び視聴環境制御システムは、上述した本発明の主旨を逸脱しない範囲で、様々な実施形態により実現することが可能である。例えば、環境照明制御装置は映像表示装置内に設けられてもよく、入力映像データに含まれる種々の情報に基づいて、外部の照明機器を制御することができるような構成としてもよいことは言うまでもない。

さらに、上述したセグメント区切り情報、切替え方法情報は、放送データから分離・取得する場合や、外部サーバ装置から取得する場合に限られず、例えば、外部機器（ＤＶＤ再生機やブルーレイディスク再生機など）で再生された映像情報を表示する場合、メディア媒体内に付加されセグメント区切り情報、照明制御種別情報を読み出して、これを用いるようにしてもよい。

本発明の第１実施形態に係る視聴環境制御システムにおける映像送信装置の要部概略構成を示すブロック図である。 本発明の第１実施形態に係る視聴環境制御システムにおける映像送信装置の出力ビットストリーム例を示す説明図である。 本発明の第１実施形態に係る視聴環境制御システムにおける付加データのデータ構造の一例を説明するための図である。 映像の構成要素を説明するための図である。 本発明の第１実施形態に係る視聴環境制御システムにおけるシーン区切り情報の一例を示す説明図である。 画面のスイッチング手法を説明するための図である。 画面のスイッチング手法を説明するための図である。 画面のスイッチング手法を説明するための図である。 本発明の第１実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。 図９における照明制御データ生成部の概略構成を示すブロック図である。 本発明の第１実施形態に係る視聴環境制御システムにおける切替え制御処理部の動作フローを示すフローチャートである。 本発明の第１実施形態に係る視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の一例を示す説明図である。 本発明の第１実施形態に係る視聴環境制御システムによる照明制御データ生成処理の一例を示す説明図である。 本発明の第１実施形態に係る視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の他の例を示す説明図である。 本発明の第１実施形態に係る視聴環境制御システムによる照明制御データ生成処理の他の例を示す説明図である。 本発明の第２実施形態に係る視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の一例を示す説明図である。 本発明の第２実施形態に係る視聴環境制御システムによる照明制御データ生成処理の一例を示す説明図である。 本発明の第２実施形態に係る視聴環境制御システムにおけるセグメント区切り情報、切替え方法情報の他の例を示す説明図である。 本発明の第２実施形態に係る視聴環境制御システムによる照明制御データ生成処理の他の例を示す説明図である。 本発明の第３実施形態に係る視聴環境制御システムにおける外部サーバ装置の要部概略構成を示すブロック図である。 本発明の第３実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。

符号の説明

１…データ多重部
２…送信部
３１、６１…受信部
３２、６２…データ分離部
３３、３４…ディレイ発生部
３５、６５…照明制御データ生成部
３６…映像表示装置
３７…音声再生装置
３８…照明装置
５１…受信部
５２…データ格納部
５３…送信部
６６…ＣＰＵ
６７…送信部
６８…受信部

Claims (7)

1. 表示装置に表示すべき映像データと、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報と、前記セグメント単位で前記映像データに付加された、前記セグメント間の映像切替え方法を示す映像切替え方法情報とを受信する受信手段と、
   前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段とを備えたことを特徴とする視聴環境制御装置。
2. 表示装置に表示すべき映像データを受信する映像受信手段と、
   前記映像データとは別に送信された、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報、並びに前記セグメント間の映像切替え方法を示す映像切替え方法情報を受信する情報受信手段と、
   前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段を備えたことを特徴とする視聴環境制御装置。
3. 前記制御手段は、前記照明装置の照明光を、前記セグメント単位で切替え制御することを特徴とする前記請求項１または２のいずれかに記載の視聴環境制御装置。
4. 前記制御手段は、前記映像データの特徴量を用いて、前記照明装置の照明光を制御することを特徴とする前記請求項１乃至３のいずれかに記載の視聴環境制御装置。
5. 前記請求項１乃至４に記載の視聴環境制御装置と、該視聴環境制御装置によって視聴環境照明光を制御される照明装置とを備えることを特徴とする視聴環境制御システム。
6. 表示装置に表示すべき映像データと、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報と、前記セグメント単位で前記映像データに付加された、前記セグメント間の映像切替え方法を示す映像切替え方法情報とを受信し、
   前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする視聴環境制御方法。
7. 表示装置に表示すべき映像データを受信すると共に、
   前記映像データとは別に送信された、該映像データを１以上の任意の数のフレームで分割したセグメントの開始時刻及び／又は区間を示すセグメント区切り情報、並びに前記セグメント間の映像切替え方法を示す映像切替え方法情報を受信し、
   前記セグメント区切り情報及び映像切替え方法情報に基づいて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする視聴環境制御方法。