JP4950990B2 - 映像送信装置及び方法、視聴環境制御装置及び方法 - Google Patents
映像送信装置及び方法、視聴環境制御装置及び方法 Download PDFInfo
- Publication number
- JP4950990B2 JP4950990B2 JP2008521133A JP2008521133A JP4950990B2 JP 4950990 B2 JP4950990 B2 JP 4950990B2 JP 2008521133 A JP2008521133 A JP 2008521133A JP 2008521133 A JP2008521133 A JP 2008521133A JP 4950990 B2 JP4950990 B2 JP 4950990B2
- Authority
- JP
- Japan
- Prior art keywords
- illumination
- control
- frame
- video
- type information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000005540 biological transmission Effects 0.000 title claims description 42
- 238000000034 method Methods 0.000 title claims description 31
- 238000005286 illumination Methods 0.000 claims description 244
- 229960001716 benzalkonium Drugs 0.000 claims 1
- CYDRXTMLKJDRQH-UHFFFAOYSA-N benzododecinium Chemical compound CCCCCCCCCCCC[N+](C)(C)CC1=CC=CC=C1 CYDRXTMLKJDRQH-UHFFFAOYSA-N 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 18
- 238000007796 conventional method Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000000926 separation method Methods 0.000 description 6
- 239000003086 colorant Substances 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 241001085205 Prenanthella exigua Species 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
- H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25833—Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/26603—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel for automatically generating descriptors from content, e.g. when it is not made available by its provider, using content analysis techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/155—Coordinated control of two or more light sources
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/165—Controlling the light source following a pre-assigned programmed sequence; Logic control [LC]
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/175—Controlling the light source by remote control
- H05B47/18—Controlling the light source by remote control via data-bus transmission
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Computer Security & Cryptography (AREA)
- Library & Information Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biodiversity & Conservation Biology (AREA)
- Ecology (AREA)
- Computer Networks & Wireless Communication (AREA)
- Environmental & Geological Engineering (AREA)
- Environmental Sciences (AREA)
- Remote Sensing (AREA)
- Circuit Arrangement For Electric Light Sources In General (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
Description
【技術分野】
【０００１】
本発明は、映像表示装置に映像を表示する際に、その映像の撮影シーンの雰囲気や場面設定に適応させて、映像表示装置の周囲の照明光を制御することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法に関するものである。
【背景技術】
【０００２】
例えば、テレビジョン受像機のような映像表示装置により映像表示を行う場合や、プロジェクタ装置を用いて映像を投影表示させるような場合に、その周囲の照明光を表示映像に合わせて調整することにより臨場感を高めるなどの視聴演出効果を付与するようにした技術が知られている。
【０００３】
例えば、特開平２−１５８０９４号公報には、カラーテレビの表示映像の色信号（Ｒ，Ｇ，Ｂ）と輝度信号（Ｙ）とから、フレーム毎に光源の三原色の混光照度比を算出し、映像と連動させて調光制御を行うようにした光色可変形照明装置が開示されている。この光色可変形照明装置は、カラーテレビの表示映像から色信号（Ｒ，Ｇ，Ｂ）と輝度信号（Ｙ）とを取り出し、その色信号と輝度信号とから、光源に使用する三色光（赤色光，緑色光，青色光）の適正調光照度比を算出し、その照度比に従って三色光の照度を設定し、三色光を混光して照明光として出力している。
【０００４】
また、例えば、特開平２−２５３５０３号公報には、テレビの映像を複数に分割し、対応する分割部の平均的な色相を検出することによって、分割部の周囲の照明制御を行う映像演出照明装置が開示されている。この映像演出照明装置は、カラーテレビの設置場所の周囲を照明する照明手段を備えていて、カラーテレビに表示される映像を複数に分割し、照明手段によって照明される部分に対応する映像の分割部の平均的な色相を検出し、その検出した色相に基づいて照明手段を制御している。
【０００５】
さらに、例えば、特開平３−１８４２０３号公報には、単に画像表示装置の画面全体の平均色度及び平均輝度を求めるのではなく、画像表示装置の画面に映し出された画像から人の顔などの肌色部分の画素を取り除いた残りの部分を背景部と考え、その背景部の各画素のＲ，Ｇ，Ｂ信号及び輝度信号だけを取り出して平均色度及び平均輝度を求めて、画像表示装置の背面の壁面の色度及び輝度が、画面全体、或いは人の肌色を除く背景部の平均色度及び平均輝度と同一になるように、照明を制御する方法が開示されている。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
通常、映像のシーンは例えば映像制作者（脚本家や演出家など）の意図により、一連の場面設定に基づく一区切りの映像として作成される。従って、映像視聴時の臨場感や雰囲気を増大させるには、表示映像のシーン状況に応じた照明光を視聴空間に照射することが望ましい。
【０００７】
しかしながら、上述した従来の技術においては、映像信号の輝度や色相のフレーム毎の変化に応じて照明光の状態が変化してしまい、特にフレーム間における輝度や色相の変化の度合いが大きい場合などでは照明光が煩雑に変化し、視聴者がフリッカーによる違和感を感じるという問題が生じる。さらに、場面設定に変化のない１つのシーンの表示中に、フレーム毎の輝度や色相の変化に応じて照明光が変動することは、シーン毎の雰囲気を逆に阻害して好ましくない。
【０００８】
図１は、上記従来の技術による照明変動の問題点の一例を説明するための図である。図１に示す例では、月夜の屋外という場面設定で撮影された映像のシーンが作成されている。このシーンは、カメラワークが異なる３つのショット（ショット１，ショット２，ショット３）により構成されている。ショット１では、対象である亡霊をカメラがロングショットで撮影している。そして、ショット２に切り替わると、その亡霊がアップショットで撮影されている。ショット３では、再度ショット１のカメラ位置に戻っている。これらのショットは、カメラワークは異なっていても、一つの雰囲気が連続する一区切りのシーンとして意図されて構成されている。
【０００９】
このような場合、ショット１では、月夜の比較的暗い映像が連続しているため、これらの映像の各フレームの輝度や色度に従って照明光を制御すると比較的暗い照明光となる。そしてショット１がショット２に切り替わると、アップショットで撮影された亡霊は比較的明るい映像となる。このときに上記従来の技術によりフレーム毎に照明光を制御すると、ショットの切替時に照明光の制御が大きく切り替わって明るい照明光となる。そして、またショット３に切り替わると、ショット１と同様の暗い照明光に戻る。
【００１０】
すなわち、一つの場面（雰囲気）が連続する一区切りのシーン内で照明光が暗くなったり明るくなったりすると、却ってそのシーンの雰囲気を阻害して視聴者に違和感を与えることになる。
【００１１】
図２は、シーン内の照明の変動による問題点の他の例を説明するための図である。図２に示す例では、晴天の日中の屋外という場面設定で撮影された映像のシーンが作成されている。このシーンは、カメラが切り替わることなく一連のカメラワークによる撮影によって得られた映像からなる。この例では、カメラの上方からカメラ近傍に向かってスキーヤーが滑降してくる映像が撮影されている。スキーヤーは赤い服を着ており、空は晴天である。
【００１２】
このシーンの映像は、その初期のフレームでは背景の青空の領域が大きく、スキーヤーが滑り降りてカメラに近づくに従ってスキーヤーの赤い服の領域が徐々に大きくなってくる。つまりシーン内の映像の進行に伴って、各フレームを構成する色の比率が変化してくる。
【００１３】
このような場合、各フレーム毎の色度や輝度を使用して照明光を制御すると、青色が強い照明光から赤い照明光に変化していくことになる。すなわち、一つの場面（雰囲気）が連続する一区切りのシーン内で照明光の色味が変化してしまい、却ってそのシーンの雰囲気を阻害して視聴者に違和感を与えることになる。
【００１４】
以上のように、同一シーン内では、各フレームの映像特徴量に応じてフレーム毎に視聴環境照明光を切り替えるのではなく、視聴環境照明光を略一定に保持することが望ましい。
【００１５】
さらに、ドラマや映画、音楽番組などのオープニング（あらすじ）や予告編、コマーシャルメッセージ（ＣＭ）期間では、短時間にショットが頻繁に変化するため、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させた場合、照明光が煩雑に変化し、視聴者が違和感を感じるという問題が生じる。
【００１６】
図３は、オープニング（あらすじ）表示時の照明の変動による問題点の例を説明するための図である。図３に示す例では、ドラマ番組のストーリー上、特に重要なショット（ショット１，ショット２，ショット３，ショット４）が短時間（数秒）で切り替えられた要約映像であり、ここでは、ショット１は晴天の日中の屋外、ショット２は晴天の早朝の屋外、ショット３は曇天の日中の屋外、ショット４は晴天の夕暮れの屋外の場面設定でそれぞれ撮影された映像となっている。
【００１７】
すなわち、この映像を構成するフレームの映像特徴量は、各ショット毎に異なっており、上記従来の技術のように、各フレーム毎の色度や輝度を使用して照明光を制御すると、各ショットの切り替わりに同期して照明光も短時間で頻繁に変化することになり、却って視聴環境の雰囲気を阻害して視聴者に違和感を与えることになる。
【００１８】
このように、複数のショットが短時間で頻繁に変化する映像を表示する際には、各フレームの映像特徴量に応じてフレーム毎に視聴環境照明光を切り替えるのではなく、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい。
【００１９】
そしてまた、テレビ番組の中では、シーンとシーンの間に短時間だけアイキャッチ（例えば、ＣＭ前後に挿入される番組クレジットや、バラエティ番組等で次のコーナーで取り上げる内容の抜粋やテロップなど）のような映像が挿入されることがある。このような場合、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させると、シーンとシーンの間に挿入された短時間の映像に応じて照明光が変化し、視聴者が違和感を感じるという問題が生じる場合がある。
【００２０】
図４は、シーンとシーンの間に短時間のショット映像が挿入された映像表示時の照明の変動による問題点の例を説明するための図である。図４に示す例では、晴天の日中の屋外の場面設定からなるシーン１と屋内の場面設定からなるシーン２との間に、夜間の湖面のショットが短時間だけ挿入された映像である。
【００２１】
このような場合、上記従来の技術のように、各フレーム毎の色度や輝度を使用して照明光を制御すると、シーン１からショットへの移行に合わせて、明るい照明光から暗い照明光に大きく切り替わった後、短時間ですぐにシーン２への移行に合わせて再び明るい照明光に切り替わることとなり、却って視聴環境の雰囲気を阻害して視聴者に違和感を与えることになる。
【００２２】
このように、シーンとシーンの間に短時間のショットが挿入された映像を表示する際には、該ショットを構成する各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、直前のシーンの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するか、或いは、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい場合がある。
【００２３】
さらに、例えば、ドラマや映画番組の中の回想シーンなどのように特殊映像処理が施されたシーンが挿入されることがあるが、このような場合、上記従来の技術においては、特殊映像効果が付加された各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させることとなり、視聴者が違和感を感じるという問題が生じる場合がある。
【００２４】
このように、特殊映像処理が施された映像を表示する際には、各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、直前のシーンの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するか、或いは、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい場合がある。
【００２５】
また、例えば、スポーツ番組の競技シーンや、ニュース／報道、情報／ワイドショー番組などのスタジオ収録シーンは、一般的に、スポーツ会場や収録スタジオなどの一定の照明下で撮影された映像である。しかしながら、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させると、映像信号に含まれる背景の人工物や、人物の顔や服装などの影響を受けて、不適切な色の照明光を周囲に照射してしまうこととなり、却って、そのシーンの雰囲気を阻害して視聴者に違和感を与えることがある。
【００２６】
このように、一定の白色光照明下で撮影された映像を表示する際には、各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するか、或いは、ロングショットで撮影された競技場やスタジオの照明を含むフレームの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するのが望ましい。
［００２７］
本発明は、上記課題に鑑みてなされたものであり、視聴環境の照明光を切り替えるタイミングを適切に制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。
［００２８］
また、映像データの特徴量に応じた照明光と、予め決められた所定の照明光とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。
課題を解決するための手段
【００２９】
本願の第１の発明は、１以上のフレームから構成される映像データを送信する映像送信装置において、前記映像データの各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を前記映像データに付加するデータ多重部を備え、前記照明制御種別情報は、前記照明を前記送信する映像データのフレームの特徴量に基づいた制御を行なうか、同前記送信する映像データのフレームの特徴量に基づかない制御を行なうか、を示す情報が切替えられて前記映像データに付加される映像送信装置を特徴とする。
【００３２】
本願の第２の発明は、前記フレームの特徴量に基づかない制御を行なうことを示す照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、直前の視聴環境の照明を維持する制御の指示を含むものであることを特徴とする。
【００３３】
本願の第３の発明は、前記フレームの特徴量に基づかない制御を行なうことを示す照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の照明に切替える制御の指示を含むものであることを特徴とする。
【００３４】
本願の第４の発明は、前記照明制御種別情報の付加の切替えは、前記映像データを構成する各フレームの出力開始タイミングに行なわれることを特徴とする。
【００３７】
本願の第５の発明は、表示装置に表示すべき映像データ及び該映像データと共に送信される映像データを構成する各フレームを表示する際の視聴環境の照明の制御種別を示す照明制御種別情報を受信し、前記照明制御種別情報が前記映像データのフレームの特徴量に基づく照明制御を行なうことを示す制御種別情報の場合は前記受信した映像データに基づいて撮影時の雰囲気を推定して照明制御データ生成し、フレームの特徴量に基づかない照明の制御を行なうことを示す制御種別情報の場合は当該制御制御種別情報に沿って照明制御データを生成する照明制御データ生成部を備え、前記照明制御データによって前記表示装置の周辺に設置された照明装置の照明光を制御する視聴環境制御装置を特徴とする。
【００４２】
本願の第６の発明は、１以上のフレームから構成される映像データに前記映像データの各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を付加して送信する映像送信方法において、前記照明制御種別情報は、前記映像データのフレームの特徴量に基づいた制御を行なうか、該フレームの特徴量に基づかない制御を行なうか、を示す情報が切替えられて前記映像データに付加される映像送信方法を特徴とする。
【００４３】
本願の第７の発明は、前記照明制御種別情報の付加の切替えは、前記映像データを構成する各フレームの出力開始タイミングに行なわれることを特徴とする。
【００４４】
本願の第８の発明は、 表示装置に表示すべき映像データ及び該映像データと共に送信される映像データを構成する各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を受信し、受信した照明制御種別情報が、前記フレームの特徴量に基づく制御を行なうことを示す制御種別情報の場合は前記前記受信した映像データに基づいて撮影時の雰囲気を推定して前記表示装置の周辺に設置された照明装置の照明光を制御し、前記フレームの特徴量に基づかない制御を行なうことを示す制御種別情報の場合は当該制御種別情報が示す制御指示に沿って前記表示装置の周辺に設置された照明装置の照明光を制御する視聴環境制御方法を特徴とする。
発明の効果
［００４５］
本発明によれば、映像制作者の意図する撮影シーンの雰囲気や場面設定に適応させて、視聴環境の照明光を適切に制御することが可能となり、視聴者に臨場感を与えてより高度な映像効果を得ることができる。
【図面の簡単な説明】
［００４６］
［図１］従来技術による照明変動の問題点の一例を説明するための図である。
［図２］従来技術による照明変動の問題点の他の例を説明するための図である。
［図３］従来技術による照明変動の問題点の他の例を説明するための図である。
［図４］従来技術による照明変動の問題点の他の例を説明するための図である。
［図５］本発明の第１実施形態に係る視聴環境制御システムにおける映像送信装置の要部概略構成を示すブロック図である。
［図６］ＭＰＥＧにより符号化された動画像の符号化データの階層構造を説明するための図である。
［図７］本発明の第１実施形態の視聴環境制御システムにおける照明制御種別情報の一例を示す説明図である。
［図８］シーンチェンジを含む映像データの一部を示す図である。
［図９］映像の構成要素を説明するための図である。
［図１０］本発明の第１実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。
［図１１］本発明の第１実施形態に係る視聴環境制御システムにおける照明制御データ生成部の動作を示すフローチャートである。
【図１２】本発明の第２実施形態に係る視聴環境制御システムにおける外部サーバ装置の要部概略構成を示すブロック図である。
【図１３】本発明の第２実施形態に係る視聴環境制御システムにおける照明制御種別情報格納テーブルの一例を示す説明図である。
【図１４】本発明の第２実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。
【符号の説明】
【００４７】
１…データ多重部、２…送信部、１０…映像送信装置、３０、６０…映像受信装置、３１、６１…受信部、３２、６２…データ分離部、３３、３４…ディレイ発生部、３５、６５…照明制御データ生成部、３６…映像表示装置、３７…音声再生装置、３８…照明装置、５０…外部サーバ装置（データ送信装置）、５１…受信部、５２…データ格納部、５３…送信部、６６…ＣＰＵ、６７…送信部、６８…受信部。
【発明を実施するための最良の形態】
【００４８】
＜第１の実施形態＞
以下、本発明の視聴環境制御システムの第１実施形態について、図５乃至図１１とともに詳細に説明する。
本実施形態における映像送信装置（データ送信装置）１０は、図５に示すように、映像データ（Ｖ）、音声データ（Ａ）、付加データとして供給された照明制御種別情報（Ｃ）のそれぞれを多重するデータ多重部１と、データ多重部１の出力データに対して誤り訂正符号を付加する等した上で変調を施し、放送データ（Ｂ）として伝送路に送出する送信部２とを備えている。照明制御種別情報（Ｃ）は、映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示すものであり、ここでは、各フレームの映像特徴量に応じて視聴環境照明を切替制御するか、各フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御するか、或いは、各フレームの映像特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するかの制御種別を示すものとする。
【００４９】
図６は、ＭＰＥＧ２（Moving Picture Experts Group 2）−Systemsで規定された動画像符号化データにおける階層構造の一部概略を示す説明図である。複数の連続するピクチャからなるシーケンスの符号化データは、（ａ）シーケンスレイヤ、（ｂ）ＧＯＰ（Group Of Pictures）レイヤ、（ｃ）ピクチャレイヤ、スライスレイヤ、マクロブロックレイヤ（不図示）及びブロックレイヤ（不図示）の６層の階層構造となっており、ピクチャレイヤ（ｃ）のデータは、先頭がピクチャヘッダー情報であり、その後に複数のスライスレイヤのデータ（スライス）が続く。
【００５０】
ピクチャレイヤ（ｃ）のピクチャヘッダー情報領域には、ピクチャ・タイプやフレーム全体のスケールなどの予め定められた種々の情報が記述されるピクチャヘッダー領域（picture header）に加えて、付加的な任意の情報を記述することができるユーザ・データ（extensions and user data）領域が設けられており、本実施形態では、このユーザ・データ領域に照明制御種別情報を記述する。ここでは、各フレームのユーザ・データとして規定された８ビットの下位２ビットに当該フレームに対応した照明制御種別情報を記述する。
【００５１】
例えば、図７に示すように、当該フレームの映像特徴量から撮影シーンの場（雰囲気）を推定し、視聴環境照明を切替制御するように指示する場合に付加されるユーザ・データは「００００００００」、当該フレームの映像特徴量に関わらず、予め決められた第１の明るさ及び色の視聴環境照明（デフォルト照明１）に切替制御するように指示する場合に付加されるユーザ・データは「０００００００１」、当該フレームの映像特徴量に関わらず、予め決められた第２の明るさ及び色の視聴環境照明（デフォルト照明２）に切替制御するように指示する場合に付加されるユーザ・データは「００００００１０」、当該フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するように指示する場合に付加されるユーザ・データは「００００００１１」となる。なお、ここでは、デフォルト照明１として明るい白色照明、デフォルト照明２として暗い白色照明が設定されているものとする。
【００５２】
なお、上記照明制御種別情報は、映像データを所定の方式により符号化（エンコード）する際に上述したピクチャレイヤ（ｃ）のユーザ・データ領域に記述されるようにしてもよいことは言うまでもない。上記の例では、４種類の照明制御種別を記述するために、ユーザ・データとして割り当てられた８ビットの下位２ビットを利用しているが（従って、ユーザ・データの上位６ビットを「０」で表している）、本発明はこれに限られない。すなわち、本発明においては、各フレーム表示時における視聴環境照明の制御種別を識別することが可能な情報を、映像データまたは音声データに付加すればよく、その際のデータ構造は上記のものに限らない。例えば、照明制御種別情報を、ＭＰＥＧ２−Systemsで規定されたトランスポートストリームパケット（ＴＳＰ）の拡張ヘッダに付加して伝送するようにしてもよい。そしてまた、照明制御種別情報は、上記のものに限られず、少なくとも当該フレームの映像特徴量に基づいた照明制御を行うか否かを表す１ビット以上の情報であればよく、さらに、８種類以上の照明制御種別を３ビット以上の情報で表現してもよい。
【００５３】
さらに、上述した照明制御種別情報は、送信側で任意に付加することが可能であるが、映像撮影時のシナリオ（脚本）に基づいて生成することもできる。例えば、図８に示すように、映像撮影シーンの最初のフレーム（シーンチェンジ後の最初のフレーム）１６には、当該フレームの映像特徴量から撮影シーンの場（雰囲気）を推定し、視聴環境照明を切替制御するように指示するユーザ・データ「００００００００」を付加し、同じシーンに含まれるその他のフレーム１７〜２１には、各フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するように指示するユーザ・データ「００００００１１」を付加することにより、映像制作者の意図を反映したシーン変化点に合わせて、後述する視聴環境照明の切替制御を適切に行うことができる。
【００５４】
次に、シーンやショットを含む映像の構成について、図９を参照して説明する。連続する動画像シーケンスを構成する映像データは、図９に示すように、３層（レイヤ）構成に分けて考えることができる。映像(Ｖｉｄｅｏ)を構成する第１レイヤ（＃１）は、フレーム（Ｆｒａｍｅ）である。フレームは物理的なレイヤであり、単一の２次元画像を指す。フレームは、通常、毎秒３０フレームのレートで得られる。第２レイヤ（＃２）は、ショット（Ｓｈｏｔ）である。ショットは単一のカメラにより撮影されたフレーム列である。そして、第３レイヤ（＃３）がシーン（Ｓｃｅｎｅ）である。シーンはストーリー的なつながりを有するショット列である。
【００５５】
ここでは、上述したとおり、映像データのフレーム単位で、上記照明制御種別情報を付加することができ、映像制作者（脚本家や演出家など）の意図に応じて、後述するように、各フレームを表示する際の視聴環境照明を任意のタイミングで切り替えて適切に制御することが可能になっている。
【００５６】
次に、上記映像送信装置より送出された放送データを受信して、映像・音声を表示・再生するとともに、そのときの視聴環境照明を制御する映像受信装置（データ受信装置）について説明する。
【００５７】
本実施形態における映像受信装置は、図１０に示すように、伝送路より入力された放送データ（Ｂ）を受信して復調するとともに、誤り訂正を行う受信部３１と、受信部３１の出力データから、映像表示装置３６に出力する映像データ及びＴＣ（タイムコード）、音声再生装置３７に出力する音声データ及びＴＣ（タイムコード）、付加情報としての照明制御種別情報のそれぞれを分離・抽出するデータ分離部３２と、データ分離部３２で分離された照明制御種別情報と、前記映像データ及び前記音声データの特徴量とに基づいて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部３５と、照明制御データ生成部３５における処理時間分だけ映像データ、音声データを遅延して出力するディレイ発生部３３，３４とを備えている。
【００５８】
ここで、照明装置３８は、映像表示装置３６の周囲に設置されて、所定の色相をもった例えばＲ，Ｇ，Ｂの三原色の光を発光するＬＥＤにより構成することができる。ただし、照明装置３８は、映像表示装置３６の周囲環境の照明色及び明るさを制御することができるような構成であればよく、上記のような所定色を発光するＬＥＤの組み合わせに限ることなく、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。また、照明装置３８は１個以上設置されていればよい。
【００５９】
そして、また、タイムコード（ＴＣ）は、映像データ、音声データそれぞれの再生時間情報を示すために付加された情報であり、例えば、映像データの時間（ｈ）：分（ｍ）：秒（ｓ）：フレーム（ｆ）を示す情報により構成されている。
【００６０】
本実施形態の照明制御データ生成部３５は、前記照明制御種別情報により指定された照明制御種別に応じて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成する。
【００６１】
すなわち、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御するよう指示されている場合は、当該フレームの映像データ及び音声データに基づいて撮影現場の照明状態や場面設定（雰囲気）を推定し、この推定結果に応じて、照明装置３８を制御する照明制御データを出力する。
【００６２】
この照明制御データ生成部３５による撮影時の周囲光の状態の推定方法は、公知のものをはじめとする各種の技術を用いることができる。なお、ここでは、場（雰囲気）の推定のために映像データの特徴量に加えて、音声データの特徴量も用いているが、これは場（雰囲気）の推定精度をより向上させるためであり、映像データの特徴量のみから撮影シーンの場（雰囲気）を推定するようにしてもよい。
【００６３】
また、映像データの特徴量としては、例えば、上述した従来例のように、画面の所定領域における色信号、輝度信号をそのまま用いることもできるし、これらから映像撮影時における周囲光の色温度を求めて用いてもよい。さらに、これらを映像データの特徴量として切替出力可能に構成してもよい。また、音声データの特徴量としては、音量、音声周波数などを用いることができる。
【００６４】
これによって、照明制御データ生成部３５は、映像データ、音声データの特徴量に基づいて、映像撮影時の場（雰囲気）、すなわち周囲光の状態を推定することができ、前記照明制御種別情報により指定されたタイミングで、この場（雰囲気）推定に基づいた照明光に切り替えて、視聴環境空間を照射することが可能となる。
【００６５】
また、照明制御データ生成部３５は、１以上の予め決められた明るさ及び色の照明光に対応した照明制御データを、図示しない記憶部に格納している。前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、対応する照明制御データを上記記憶部から読み出して出力する。
【００６６】
ここでは、照明制御データ生成部３５には、デフォルト照明１（明るい白色照明）、デフォルト照明２（暗い白色照明）に対応する２種類の照明制御データが予め用意されており、前記照明制御種別情報により視聴環境照明をデフォルト照明１に切替制御するよう指示されている場合は、デフォルト照明１に対応した照明制御データを出力し、前記照明制御種別情報により視聴環境照明をデフォルト照明２に切替制御するよう指示されている場合は、デフォルト照明２に対応した照明制御データを出力する。
【００６７】
これによって、映像データ、音声データの特徴量に関わらず、前記照明制御種別情報により指定されたタイミングで、予め決められた所定の照明光に切り替えて、視聴環境空間を照射することが可能となる。
【００６８】
さらに、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、直前のフレームに対して出力した照明制御データを繰り返し出力する。
【００６９】
これによって、映像データ、音声データの特徴量の変化に関わらず、任意の期間、視聴環境照明光を同一状態に保持することが可能となる。例えば、撮影時の場（雰囲気）、すなわち、照明状態に変化のない同一シーン内では、視聴環境照明光を略同一に保持することが可能になる。また、映像特徴量／音声特徴量に基づいた視聴環境照明の制御が不適切な期間では、例えば、一定の白色照明光を保持して照射することが可能となる。従って、不適切な視聴環境照明により視聴者に違和感を与えることを防止し、最適な視聴環境を実現することができる。
【００７０】
一方、映像表示装置３６、音声再生装置３７に出力される映像データ、音声データは、上述した映像データ及び音声データによる場（雰囲気）推定処理に必要な時間分だけ、ディレイ発生部３３，３４により遅延されるため、映像受信装置から照明装置３８に出力される照明制御データと、映像表示装置３６、音声再生装置３７に出力される映像データ、音声データとは同期することになり、映像表示に同期したタイミングで照明装置３８の照明光を切り替えることが可能となる。
【００７１】
次に、照明制御データ生成部３５における処理の流れを、図１１のフローチャートとともに説明する。まず入力映像データから新しいフレームを取得し（ステップＳ１）、その取得したフレームの映像データ／音声データの特徴量に基づいて、視聴環境照明を切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ２）。
【００７２】
取得したフレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御する場合、当該フレームの映像データ／音声データを用いてその映像特徴量／音声特徴量を検出することにより、場（雰囲気）の推定処理を行い（ステップＳ３）、その推定処理結果に基づいて、照明装置３８を制御するための照明制御データを生成する（ステップＳ４）。そして照明制御データに基づき照明装置３８による照明光の切替制御を行い（ステップＳ５）、この後処理が終了であるかどうかを判別する（ステップＳ６）。映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７３】
上記ステップＳ２において、取得したフレームの映像データ／音声データの特徴量に基づいて、視聴環境照明を切替制御しないと判別された場合、視聴環境照明をデフォルト照明１に切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ７）。取得したフレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト照明１に切替制御する場合、予め用意されたデフォルト照明１に対応する照明制御データを読み込み（ステップＳ８）、この照明制御データに基づき照明装置３８による照明光の切替制御を行う（ステップＳ５）。この後処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７４】
また、上記ステップＳ７において、視聴環境照明をデフォルト照明１に切替制御しないと判別された場合、視聴環境照明をデフォルト照明２に切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ９）。取得したフレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト照明２に切替制御する場合、予め用意されたデフォルト照明２に対応する照明制御データを読み込み（ステップＳ１０）、この照明制御データに基づき照明装置３８による照明光の切替制御を行う（ステップＳ５）。この後、処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７５】
さらに、上記ステップＳ９において、視聴環境照明をデフォルト照明２に切替制御しないと判別された場合、取得したフレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御するため、照明光の切替制御を行うことなく、処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７６】
以上のように、本実施形態においては、映像データに付加された照明制御種別情報に基づいて、視聴環境照明を制御する構成としているので、映像制作者の意図に応じた任意のタイミングで視聴環境照明の切替制御を行うことが可能となる。例えば、図１、図２に示した映像シーンを表示する際、シーン開始フレームの映像特徴量／音声特徴量に応じた視聴環境照明を、このシーンが終了するまで維持することができる。すなわち、同一シーン内では視聴環境照明光の明るさ及び色を略一定に保持することが可能になるので、同じシーン内で視聴環境照明が激しく変化して臨場感や雰囲気を損なってしまうことを防止し、常に適切な視聴環境を実現することができる。
【００７７】
また、本実施形態においては、映像／音声データの特徴量に応じた視聴環境照明と、予め決められた所定の視聴環境照明とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能となる。例えば、図３に示したドラマ番組のオープニング（あらすじ）を表示する際には、各フレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト設定された一定の白色照明状態とすることができ、短時間で視聴環境照明光が激しく変化して視聴者に違和感を与えることを防止し、適切な視聴環境を実現することができる。
【００７８】
さらに、例えば、図４に示したシーンとシーンの間に短時間のショットが挿入された映像を表示する際には、このショットを構成する各フレームの映像特徴量／音声特徴量に関わらず、直前のシーンに対する視聴環境照明をそのまま維持するか、或いは視聴環境照明をデフォルト設定された一定の白色照明状態とすることができ、短時間で視聴環境照明光が激しく変化して視聴者に違和感を与えることを防止し、適切な視聴環境を実現することができる。
【００７９】
なお、本実施形態においては、各シーンのストーリー上における設定場面の区切り位置とも関連する照明制御種別情報を送受信するようにしているので、この照明制御種別情報を用いて所望のシーンを検索したり編集するなど、視聴環境照明の制御以外にも様々な機能を実現することが可能となる。
【００８０】
また、上記本発明の第１の実施形態においては、照明制御種別情報が放送データに付加されて送信される場合について説明したが、放送データに照明制御種別情報が付加されていない場合、表示する映像データに対応する照明制御種別情報を外部サーバ装置等より送受信することによって、映像再生時の最適な視聴環境を実現することが可能となる。これについて、本発明の第２の実施形態として以下に説明する。
【００８１】
＜第２の実施形態＞
以下、本発明の視聴環境制御システムの第２実施形態について、図１２乃至図１４とともに詳細に説明するが、上記第１の実施形態と同一部分には同一符号を付し、その説明は省略する。
本実施形態における外部サーバ装置（データ送信装置）５０は、図１２に示すように、映像受信装置（データ受信装置）側から特定の映像データ（コンテンツ）に関する照明制御種別情報の送信要求を受信する受信部５１と、映像データ（コンテンツ）毎の照明制御種別情報を格納しているデータ格納部５２と、送信要求を受けた照明制御種別情報を要求元の映像受信装置（データ受信装置）へ送信する送信部５３とを備えている。
【００８２】
ここで、本実施形態のデータ格納部５２に格納されている照明制御種別情報は、図１３に示すように、各映像フレームの映像表示装置３６への出力開始タイミング（再生開始タイミングともいう。以下、単に開始タイミングと称す）に対応付けてテーブル形式で記述されており、送信要求を受けた映像データ（番組コンテンツ）の照明制御種別情報を、当該映像データを構成するフレームの開始ＴＣ（タイムコード）とともに、送信部５３より要求元の映像受信装置へ送信する。
【００８３】
なお、本実施形態においても、図７に示した４通り（２ビット）の照明制御種別を想定しているが、ここでは、場（雰囲気）推定に基づく照明切替制御を行うフレームと、デフォルト照明１，２へ切替制御を行うフレームに関してのみその照明制御種別を照明制御種別情報格納テーブルに記述し、照明切替を禁止するフレームに関してはその照明制御種別の記述を省略している。すなわち、照明制御種別情報格納テーブルに特に記述されていないフレームを表示する際には、直前の視聴環境照明を維持することとしており、これによって、照明制御種別情報のデータ容量を大幅に削減している。
【００８４】
次に、上記外部サーバ装置５０より送出された照明制御種別情報を受けて、視聴環境照明を制御する映像受信装置（データ受信装置）６０について説明する。本実施形態における映像受信装置６０は、図１４に示すように、伝送路より入力された放送データ（Ｂ）を受信して復調するとともに、誤り訂正を行う受信部６１と、受信部６１の出力データから、映像表示装置３６に出力する映像データ、音声再生装置３７に出力する音声データのそれぞれを分離・抽出するデータ分離部６２と、表示する映像データ（コンテンツ）に対応した照明制御種別情報の送信要求を、通信ネットワークを介して外部サーバ装置（データ送信装置）に送出する送信部６７と、前記送信要求した照明制御種別情報を、通信ネットワークを介して外部サーバ装置より受信する受信部６８とを備えている。
【００８５】
また、前記受信部６８で受信した照明制御種別情報を一旦記憶し、この照明制御種別情報に対応付けられたフレーム開始ＴＣ（タイムコード）と、データ分離部６２で抽出された映像データのＴＣ（タイムコード）とを比較し、それらが一致したときに、対応する照明制御種別情報を示す情報を出力するＣＰＵ６６と、ＣＰＵ６６からの照明制御種別情報と、前記映像データ及び前記音声データの特徴量とに基づいて、照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部６５とを備えている。
【００８６】
すなわち、ＣＰＵ６６は、外部サーバ装置より受信して内部に記憶している照明制御種別情報格納テーブルの各フレームの開始タイムコードと、照明制御データ生成部６５に入力される映像データのタイムコードとを比較し、これらが一致した時にそのフレーム（タイムコード）に対応する照明制御種別情報を照明制御データ生成部６５に出力する。
【００８７】
そして、本実施形態の照明制御データ生成部６５は、上述した第１の実施形態における照明制御データ生成部３５と同様、前記照明制御種別情報に応じて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成する。
【００８８】
すなわち、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御するよう指示されている場合は、当該フレームの映像データ及び音声データに基づいて撮影現場の照明状態や場面設定（雰囲気）を推定し、この推定結果に応じて、照明装置３８を制御する照明制御データを出力する。
【００８９】
また、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、予め内部に用意されている照明制御データを読み出して出力する。
【００９０】
上記以外の場合は、各フレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するよう指示されているものとして、上述した映像撮影時の場（雰囲気）の推定処理は行わず、直前のフレームに対して出力された照明制御データを繰り返し出力する。
【００９１】
これによって、放送データに照明制御種別情報が付加されていない場合であっても、表示映像データ（番組コンテンツ）に対応する照明制御種別情報を外部サーバ装置より入手し、この照明制御種別情報に基づいて、視聴環境照明を制御する構成としているので、上述した第１の実施形態と同様、映像制作者の意図に応じた任意のタイミングで視聴環境照明の切替制御を行うとともに、映像データの特徴量に応じた視聴環境照明と、予め決められた所定の視聴環境照明とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能となる。
【００９２】
なお、本実施形態においても、各シーンのストーリー上における設定場面の区切り位置とも関連する照明制御種別情報を送受信するようにしているので、この照明制御種別情報を用いて所望のシーンを検索したり編集するなど、視聴環境照明の制御以外にも様々な機能を実現することが可能である。
【００９３】
また、本発明の視聴環境制御装置、方法、及び視聴環境制御システムは、上述した本発明の主旨を逸脱しない範囲で、様々な実施形態により実現することが可能である。例えば、環境照明制御装置は映像表示装置内に設けられてもよく、入力映像データに含まれる種々の情報に基づいて、外部の照明機器を制御することができるような構成としてもよいことは言うまでもない。
【００９４】
さらに、上述した照明制御種別情報は、放送データから分離・取得する場合や、外部サーバ装置から取得する場合に限られず、例えば、外部機器（ＤＶＤ再生機やブルーレイディスク再生機など）で再生された映像情報を表示する場合、メディア媒体内に付加された照明制御種別情報を読み出して、これを用いるようにしてもよい。
【０００１】
本発明は、映像表示装置に映像を表示する際に、その映像の撮影シーンの雰囲気や場面設定に適応させて、映像表示装置の周囲の照明光を制御することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法に関するものである。
【背景技術】
【０００２】
例えば、テレビジョン受像機のような映像表示装置により映像表示を行う場合や、プロジェクタ装置を用いて映像を投影表示させるような場合に、その周囲の照明光を表示映像に合わせて調整することにより臨場感を高めるなどの視聴演出効果を付与するようにした技術が知られている。
【０００３】
例えば、特開平２−１５８０９４号公報には、カラーテレビの表示映像の色信号（Ｒ，Ｇ，Ｂ）と輝度信号（Ｙ）とから、フレーム毎に光源の三原色の混光照度比を算出し、映像と連動させて調光制御を行うようにした光色可変形照明装置が開示されている。この光色可変形照明装置は、カラーテレビの表示映像から色信号（Ｒ，Ｇ，Ｂ）と輝度信号（Ｙ）とを取り出し、その色信号と輝度信号とから、光源に使用する三色光（赤色光，緑色光，青色光）の適正調光照度比を算出し、その照度比に従って三色光の照度を設定し、三色光を混光して照明光として出力している。
【０００４】
また、例えば、特開平２−２５３５０３号公報には、テレビの映像を複数に分割し、対応する分割部の平均的な色相を検出することによって、分割部の周囲の照明制御を行う映像演出照明装置が開示されている。この映像演出照明装置は、カラーテレビの設置場所の周囲を照明する照明手段を備えていて、カラーテレビに表示される映像を複数に分割し、照明手段によって照明される部分に対応する映像の分割部の平均的な色相を検出し、その検出した色相に基づいて照明手段を制御している。
【０００５】
さらに、例えば、特開平３−１８４２０３号公報には、単に画像表示装置の画面全体の平均色度及び平均輝度を求めるのではなく、画像表示装置の画面に映し出された画像から人の顔などの肌色部分の画素を取り除いた残りの部分を背景部と考え、その背景部の各画素のＲ，Ｇ，Ｂ信号及び輝度信号だけを取り出して平均色度及び平均輝度を求めて、画像表示装置の背面の壁面の色度及び輝度が、画面全体、或いは人の肌色を除く背景部の平均色度及び平均輝度と同一になるように、照明を制御する方法が開示されている。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
通常、映像のシーンは例えば映像制作者（脚本家や演出家など）の意図により、一連の場面設定に基づく一区切りの映像として作成される。従って、映像視聴時の臨場感や雰囲気を増大させるには、表示映像のシーン状況に応じた照明光を視聴空間に照射することが望ましい。
【０００７】
しかしながら、上述した従来の技術においては、映像信号の輝度や色相のフレーム毎の変化に応じて照明光の状態が変化してしまい、特にフレーム間における輝度や色相の変化の度合いが大きい場合などでは照明光が煩雑に変化し、視聴者がフリッカーによる違和感を感じるという問題が生じる。さらに、場面設定に変化のない１つのシーンの表示中に、フレーム毎の輝度や色相の変化に応じて照明光が変動することは、シーン毎の雰囲気を逆に阻害して好ましくない。
【０００８】
図１は、上記従来の技術による照明変動の問題点の一例を説明するための図である。図１に示す例では、月夜の屋外という場面設定で撮影された映像のシーンが作成されている。このシーンは、カメラワークが異なる３つのショット（ショット１，ショット２，ショット３）により構成されている。ショット１では、対象である亡霊をカメラがロングショットで撮影している。そして、ショット２に切り替わると、その亡霊がアップショットで撮影されている。ショット３では、再度ショット１のカメラ位置に戻っている。これらのショットは、カメラワークは異なっていても、一つの雰囲気が連続する一区切りのシーンとして意図されて構成されている。
【０００９】
このような場合、ショット１では、月夜の比較的暗い映像が連続しているため、これらの映像の各フレームの輝度や色度に従って照明光を制御すると比較的暗い照明光となる。そしてショット１がショット２に切り替わると、アップショットで撮影された亡霊は比較的明るい映像となる。このときに上記従来の技術によりフレーム毎に照明光を制御すると、ショットの切替時に照明光の制御が大きく切り替わって明るい照明光となる。そして、またショット３に切り替わると、ショット１と同様の暗い照明光に戻る。
【００１０】
すなわち、一つの場面（雰囲気）が連続する一区切りのシーン内で照明光が暗くなったり明るくなったりすると、却ってそのシーンの雰囲気を阻害して視聴者に違和感を与えることになる。
【００１１】
図２は、シーン内の照明の変動による問題点の他の例を説明するための図である。図２に示す例では、晴天の日中の屋外という場面設定で撮影された映像のシーンが作成されている。このシーンは、カメラが切り替わることなく一連のカメラワークによる撮影によって得られた映像からなる。この例では、カメラの上方からカメラ近傍に向かってスキーヤーが滑降してくる映像が撮影されている。スキーヤーは赤い服を着ており、空は晴天である。
【００１２】
このシーンの映像は、その初期のフレームでは背景の青空の領域が大きく、スキーヤーが滑り降りてカメラに近づくに従ってスキーヤーの赤い服の領域が徐々に大きくなってくる。つまりシーン内の映像の進行に伴って、各フレームを構成する色の比率が変化してくる。
【００１３】
このような場合、各フレーム毎の色度や輝度を使用して照明光を制御すると、青色が強い照明光から赤い照明光に変化していくことになる。すなわち、一つの場面（雰囲気）が連続する一区切りのシーン内で照明光の色味が変化してしまい、却ってそのシーンの雰囲気を阻害して視聴者に違和感を与えることになる。
【００１４】
以上のように、同一シーン内では、各フレームの映像特徴量に応じてフレーム毎に視聴環境照明光を切り替えるのではなく、視聴環境照明光を略一定に保持することが望ましい。
【００１５】
さらに、ドラマや映画、音楽番組などのオープニング（あらすじ）や予告編、コマーシャルメッセージ（ＣＭ）期間では、短時間にショットが頻繁に変化するため、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させた場合、照明光が煩雑に変化し、視聴者が違和感を感じるという問題が生じる。
【００１６】
図３は、オープニング（あらすじ）表示時の照明の変動による問題点の例を説明するための図である。図３に示す例では、ドラマ番組のストーリー上、特に重要なショット（ショット１，ショット２，ショット３，ショット４）が短時間（数秒）で切り替えられた要約映像であり、ここでは、ショット１は晴天の日中の屋外、ショット２は晴天の早朝の屋外、ショット３は曇天の日中の屋外、ショット４は晴天の夕暮れの屋外の場面設定でそれぞれ撮影された映像となっている。
【００１７】
すなわち、この映像を構成するフレームの映像特徴量は、各ショット毎に異なっており、上記従来の技術のように、各フレーム毎の色度や輝度を使用して照明光を制御すると、各ショットの切り替わりに同期して照明光も短時間で頻繁に変化することになり、却って視聴環境の雰囲気を阻害して視聴者に違和感を与えることになる。
【００１８】
このように、複数のショットが短時間で頻繁に変化する映像を表示する際には、各フレームの映像特徴量に応じてフレーム毎に視聴環境照明光を切り替えるのではなく、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい。
【００１９】
そしてまた、テレビ番組の中では、シーンとシーンの間に短時間だけアイキャッチ（例えば、ＣＭ前後に挿入される番組クレジットや、バラエティ番組等で次のコーナーで取り上げる内容の抜粋やテロップなど）のような映像が挿入されることがある。このような場合、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させると、シーンとシーンの間に挿入された短時間の映像に応じて照明光が変化し、視聴者が違和感を感じるという問題が生じる場合がある。
【００２０】
図４は、シーンとシーンの間に短時間のショット映像が挿入された映像表示時の照明の変動による問題点の例を説明するための図である。図４に示す例では、晴天の日中の屋外の場面設定からなるシーン１と屋内の場面設定からなるシーン２との間に、夜間の湖面のショットが短時間だけ挿入された映像である。
【００２１】
このような場合、上記従来の技術のように、各フレーム毎の色度や輝度を使用して照明光を制御すると、シーン１からショットへの移行に合わせて、明るい照明光から暗い照明光に大きく切り替わった後、短時間ですぐにシーン２への移行に合わせて再び明るい照明光に切り替わることとなり、却って視聴環境の雰囲気を阻害して視聴者に違和感を与えることになる。
【００２２】
このように、シーンとシーンの間に短時間のショットが挿入された映像を表示する際には、該ショットを構成する各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、直前のシーンの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するか、或いは、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい場合がある。
【００２３】
さらに、例えば、ドラマや映画番組の中の回想シーンなどのように特殊映像処理が施されたシーンが挿入されることがあるが、このような場合、上記従来の技術においては、特殊映像効果が付加された各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させることとなり、視聴者が違和感を感じるという問題が生じる場合がある。
【００２４】
このように、特殊映像処理が施された映像を表示する際には、各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、直前のシーンの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するか、或いは、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい場合がある。
【００２５】
また、例えば、スポーツ番組の競技シーンや、ニュース／報道、情報／ワイドショー番組などのスタジオ収録シーンは、一般的に、スポーツ会場や収録スタジオなどの一定の照明下で撮影された映像である。しかしながら、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させると、映像信号に含まれる背景の人工物や、人物の顔や服装などの影響を受けて、不適切な色の照明光を周囲に照射してしまうこととなり、却って、そのシーンの雰囲気を阻害して視聴者に違和感を与えることがある。
【００２６】
このように、一定の白色光照明下で撮影された映像を表示する際には、各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するか、或いは、ロングショットで撮影された競技場やスタジオの照明を含むフレームの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するのが望ましい。
［００２７］
本発明は、上記課題に鑑みてなされたものであり、視聴環境の照明光を切り替えるタイミングを適切に制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。
［００２８］
また、映像データの特徴量に応じた照明光と、予め決められた所定の照明光とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。
課題を解決するための手段
【００２９】
本願の第１の発明は、１以上のフレームから構成される映像データを送信する映像送信装置において、前記映像データの各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を前記映像データに付加するデータ多重部を備え、前記照明制御種別情報は、前記照明を前記送信する映像データのフレームの特徴量に基づいた制御を行なうか、同前記送信する映像データのフレームの特徴量に基づかない制御を行なうか、を示す情報が切替えられて前記映像データに付加される映像送信装置を特徴とする。
【００３２】
本願の第２の発明は、前記フレームの特徴量に基づかない制御を行なうことを示す照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、直前の視聴環境の照明を維持する制御の指示を含むものであることを特徴とする。
【００３３】
本願の第３の発明は、前記フレームの特徴量に基づかない制御を行なうことを示す照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の照明に切替える制御の指示を含むものであることを特徴とする。
【００３４】
本願の第４の発明は、前記照明制御種別情報の付加の切替えは、前記映像データを構成する各フレームの出力開始タイミングに行なわれることを特徴とする。
【００３７】
本願の第５の発明は、表示装置に表示すべき映像データ及び該映像データと共に送信される映像データを構成する各フレームを表示する際の視聴環境の照明の制御種別を示す照明制御種別情報を受信し、前記照明制御種別情報が前記映像データのフレームの特徴量に基づく照明制御を行なうことを示す制御種別情報の場合は前記受信した映像データに基づいて撮影時の雰囲気を推定して照明制御データ生成し、フレームの特徴量に基づかない照明の制御を行なうことを示す制御種別情報の場合は当該制御制御種別情報に沿って照明制御データを生成する照明制御データ生成部を備え、前記照明制御データによって前記表示装置の周辺に設置された照明装置の照明光を制御する視聴環境制御装置を特徴とする。
【００４２】
本願の第６の発明は、１以上のフレームから構成される映像データに前記映像データの各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を付加して送信する映像送信方法において、前記照明制御種別情報は、前記映像データのフレームの特徴量に基づいた制御を行なうか、該フレームの特徴量に基づかない制御を行なうか、を示す情報が切替えられて前記映像データに付加される映像送信方法を特徴とする。
【００４３】
本願の第７の発明は、前記照明制御種別情報の付加の切替えは、前記映像データを構成する各フレームの出力開始タイミングに行なわれることを特徴とする。
【００４４】
本願の第８の発明は、 表示装置に表示すべき映像データ及び該映像データと共に送信される映像データを構成する各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を受信し、受信した照明制御種別情報が、前記フレームの特徴量に基づく制御を行なうことを示す制御種別情報の場合は前記前記受信した映像データに基づいて撮影時の雰囲気を推定して前記表示装置の周辺に設置された照明装置の照明光を制御し、前記フレームの特徴量に基づかない制御を行なうことを示す制御種別情報の場合は当該制御種別情報が示す制御指示に沿って前記表示装置の周辺に設置された照明装置の照明光を制御する視聴環境制御方法を特徴とする。
発明の効果
［００４５］
本発明によれば、映像制作者の意図する撮影シーンの雰囲気や場面設定に適応させて、視聴環境の照明光を適切に制御することが可能となり、視聴者に臨場感を与えてより高度な映像効果を得ることができる。
【図面の簡単な説明】
［００４６］
［図１］従来技術による照明変動の問題点の一例を説明するための図である。
［図２］従来技術による照明変動の問題点の他の例を説明するための図である。
［図３］従来技術による照明変動の問題点の他の例を説明するための図である。
［図４］従来技術による照明変動の問題点の他の例を説明するための図である。
［図５］本発明の第１実施形態に係る視聴環境制御システムにおける映像送信装置の要部概略構成を示すブロック図である。
［図６］ＭＰＥＧにより符号化された動画像の符号化データの階層構造を説明するための図である。
［図７］本発明の第１実施形態の視聴環境制御システムにおける照明制御種別情報の一例を示す説明図である。
［図８］シーンチェンジを含む映像データの一部を示す図である。
［図９］映像の構成要素を説明するための図である。
［図１０］本発明の第１実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。
［図１１］本発明の第１実施形態に係る視聴環境制御システムにおける照明制御データ生成部の動作を示すフローチャートである。
【図１２】本発明の第２実施形態に係る視聴環境制御システムにおける外部サーバ装置の要部概略構成を示すブロック図である。
【図１３】本発明の第２実施形態に係る視聴環境制御システムにおける照明制御種別情報格納テーブルの一例を示す説明図である。
【図１４】本発明の第２実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。
【符号の説明】
【００４７】
１…データ多重部、２…送信部、１０…映像送信装置、３０、６０…映像受信装置、３１、６１…受信部、３２、６２…データ分離部、３３、３４…ディレイ発生部、３５、６５…照明制御データ生成部、３６…映像表示装置、３７…音声再生装置、３８…照明装置、５０…外部サーバ装置（データ送信装置）、５１…受信部、５２…データ格納部、５３…送信部、６６…ＣＰＵ、６７…送信部、６８…受信部。
【発明を実施するための最良の形態】
【００４８】
＜第１の実施形態＞
以下、本発明の視聴環境制御システムの第１実施形態について、図５乃至図１１とともに詳細に説明する。
本実施形態における映像送信装置（データ送信装置）１０は、図５に示すように、映像データ（Ｖ）、音声データ（Ａ）、付加データとして供給された照明制御種別情報（Ｃ）のそれぞれを多重するデータ多重部１と、データ多重部１の出力データに対して誤り訂正符号を付加する等した上で変調を施し、放送データ（Ｂ）として伝送路に送出する送信部２とを備えている。照明制御種別情報（Ｃ）は、映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示すものであり、ここでは、各フレームの映像特徴量に応じて視聴環境照明を切替制御するか、各フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御するか、或いは、各フレームの映像特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するかの制御種別を示すものとする。
【００４９】
図６は、ＭＰＥＧ２（Moving Picture Experts Group 2）−Systemsで規定された動画像符号化データにおける階層構造の一部概略を示す説明図である。複数の連続するピクチャからなるシーケンスの符号化データは、（ａ）シーケンスレイヤ、（ｂ）ＧＯＰ（Group Of Pictures）レイヤ、（ｃ）ピクチャレイヤ、スライスレイヤ、マクロブロックレイヤ（不図示）及びブロックレイヤ（不図示）の６層の階層構造となっており、ピクチャレイヤ（ｃ）のデータは、先頭がピクチャヘッダー情報であり、その後に複数のスライスレイヤのデータ（スライス）が続く。
【００５０】
ピクチャレイヤ（ｃ）のピクチャヘッダー情報領域には、ピクチャ・タイプやフレーム全体のスケールなどの予め定められた種々の情報が記述されるピクチャヘッダー領域（picture header）に加えて、付加的な任意の情報を記述することができるユーザ・データ（extensions and user data）領域が設けられており、本実施形態では、このユーザ・データ領域に照明制御種別情報を記述する。ここでは、各フレームのユーザ・データとして規定された８ビットの下位２ビットに当該フレームに対応した照明制御種別情報を記述する。
【００５１】
例えば、図７に示すように、当該フレームの映像特徴量から撮影シーンの場（雰囲気）を推定し、視聴環境照明を切替制御するように指示する場合に付加されるユーザ・データは「００００００００」、当該フレームの映像特徴量に関わらず、予め決められた第１の明るさ及び色の視聴環境照明（デフォルト照明１）に切替制御するように指示する場合に付加されるユーザ・データは「０００００００１」、当該フレームの映像特徴量に関わらず、予め決められた第２の明るさ及び色の視聴環境照明（デフォルト照明２）に切替制御するように指示する場合に付加されるユーザ・データは「００００００１０」、当該フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するように指示する場合に付加されるユーザ・データは「００００００１１」となる。なお、ここでは、デフォルト照明１として明るい白色照明、デフォルト照明２として暗い白色照明が設定されているものとする。
【００５２】
なお、上記照明制御種別情報は、映像データを所定の方式により符号化（エンコード）する際に上述したピクチャレイヤ（ｃ）のユーザ・データ領域に記述されるようにしてもよいことは言うまでもない。上記の例では、４種類の照明制御種別を記述するために、ユーザ・データとして割り当てられた８ビットの下位２ビットを利用しているが（従って、ユーザ・データの上位６ビットを「０」で表している）、本発明はこれに限られない。すなわち、本発明においては、各フレーム表示時における視聴環境照明の制御種別を識別することが可能な情報を、映像データまたは音声データに付加すればよく、その際のデータ構造は上記のものに限らない。例えば、照明制御種別情報を、ＭＰＥＧ２−Systemsで規定されたトランスポートストリームパケット（ＴＳＰ）の拡張ヘッダに付加して伝送するようにしてもよい。そしてまた、照明制御種別情報は、上記のものに限られず、少なくとも当該フレームの映像特徴量に基づいた照明制御を行うか否かを表す１ビット以上の情報であればよく、さらに、８種類以上の照明制御種別を３ビット以上の情報で表現してもよい。
【００５３】
さらに、上述した照明制御種別情報は、送信側で任意に付加することが可能であるが、映像撮影時のシナリオ（脚本）に基づいて生成することもできる。例えば、図８に示すように、映像撮影シーンの最初のフレーム（シーンチェンジ後の最初のフレーム）１６には、当該フレームの映像特徴量から撮影シーンの場（雰囲気）を推定し、視聴環境照明を切替制御するように指示するユーザ・データ「００００００００」を付加し、同じシーンに含まれるその他のフレーム１７〜２１には、各フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するように指示するユーザ・データ「００００００１１」を付加することにより、映像制作者の意図を反映したシーン変化点に合わせて、後述する視聴環境照明の切替制御を適切に行うことができる。
【００５４】
次に、シーンやショットを含む映像の構成について、図９を参照して説明する。連続する動画像シーケンスを構成する映像データは、図９に示すように、３層（レイヤ）構成に分けて考えることができる。映像(Ｖｉｄｅｏ)を構成する第１レイヤ（＃１）は、フレーム（Ｆｒａｍｅ）である。フレームは物理的なレイヤであり、単一の２次元画像を指す。フレームは、通常、毎秒３０フレームのレートで得られる。第２レイヤ（＃２）は、ショット（Ｓｈｏｔ）である。ショットは単一のカメラにより撮影されたフレーム列である。そして、第３レイヤ（＃３）がシーン（Ｓｃｅｎｅ）である。シーンはストーリー的なつながりを有するショット列である。
【００５５】
ここでは、上述したとおり、映像データのフレーム単位で、上記照明制御種別情報を付加することができ、映像制作者（脚本家や演出家など）の意図に応じて、後述するように、各フレームを表示する際の視聴環境照明を任意のタイミングで切り替えて適切に制御することが可能になっている。
【００５６】
次に、上記映像送信装置より送出された放送データを受信して、映像・音声を表示・再生するとともに、そのときの視聴環境照明を制御する映像受信装置（データ受信装置）について説明する。
【００５７】
本実施形態における映像受信装置は、図１０に示すように、伝送路より入力された放送データ（Ｂ）を受信して復調するとともに、誤り訂正を行う受信部３１と、受信部３１の出力データから、映像表示装置３６に出力する映像データ及びＴＣ（タイムコード）、音声再生装置３７に出力する音声データ及びＴＣ（タイムコード）、付加情報としての照明制御種別情報のそれぞれを分離・抽出するデータ分離部３２と、データ分離部３２で分離された照明制御種別情報と、前記映像データ及び前記音声データの特徴量とに基づいて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部３５と、照明制御データ生成部３５における処理時間分だけ映像データ、音声データを遅延して出力するディレイ発生部３３，３４とを備えている。
【００５８】
ここで、照明装置３８は、映像表示装置３６の周囲に設置されて、所定の色相をもった例えばＲ，Ｇ，Ｂの三原色の光を発光するＬＥＤにより構成することができる。ただし、照明装置３８は、映像表示装置３６の周囲環境の照明色及び明るさを制御することができるような構成であればよく、上記のような所定色を発光するＬＥＤの組み合わせに限ることなく、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。また、照明装置３８は１個以上設置されていればよい。
【００５９】
そして、また、タイムコード（ＴＣ）は、映像データ、音声データそれぞれの再生時間情報を示すために付加された情報であり、例えば、映像データの時間（ｈ）：分（ｍ）：秒（ｓ）：フレーム（ｆ）を示す情報により構成されている。
【００６０】
本実施形態の照明制御データ生成部３５は、前記照明制御種別情報により指定された照明制御種別に応じて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成する。
【００６１】
すなわち、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御するよう指示されている場合は、当該フレームの映像データ及び音声データに基づいて撮影現場の照明状態や場面設定（雰囲気）を推定し、この推定結果に応じて、照明装置３８を制御する照明制御データを出力する。
【００６２】
この照明制御データ生成部３５による撮影時の周囲光の状態の推定方法は、公知のものをはじめとする各種の技術を用いることができる。なお、ここでは、場（雰囲気）の推定のために映像データの特徴量に加えて、音声データの特徴量も用いているが、これは場（雰囲気）の推定精度をより向上させるためであり、映像データの特徴量のみから撮影シーンの場（雰囲気）を推定するようにしてもよい。
【００６３】
また、映像データの特徴量としては、例えば、上述した従来例のように、画面の所定領域における色信号、輝度信号をそのまま用いることもできるし、これらから映像撮影時における周囲光の色温度を求めて用いてもよい。さらに、これらを映像データの特徴量として切替出力可能に構成してもよい。また、音声データの特徴量としては、音量、音声周波数などを用いることができる。
【００６４】
これによって、照明制御データ生成部３５は、映像データ、音声データの特徴量に基づいて、映像撮影時の場（雰囲気）、すなわち周囲光の状態を推定することができ、前記照明制御種別情報により指定されたタイミングで、この場（雰囲気）推定に基づいた照明光に切り替えて、視聴環境空間を照射することが可能となる。
【００６５】
また、照明制御データ生成部３５は、１以上の予め決められた明るさ及び色の照明光に対応した照明制御データを、図示しない記憶部に格納している。前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、対応する照明制御データを上記記憶部から読み出して出力する。
【００６６】
ここでは、照明制御データ生成部３５には、デフォルト照明１（明るい白色照明）、デフォルト照明２（暗い白色照明）に対応する２種類の照明制御データが予め用意されており、前記照明制御種別情報により視聴環境照明をデフォルト照明１に切替制御するよう指示されている場合は、デフォルト照明１に対応した照明制御データを出力し、前記照明制御種別情報により視聴環境照明をデフォルト照明２に切替制御するよう指示されている場合は、デフォルト照明２に対応した照明制御データを出力する。
【００６７】
これによって、映像データ、音声データの特徴量に関わらず、前記照明制御種別情報により指定されたタイミングで、予め決められた所定の照明光に切り替えて、視聴環境空間を照射することが可能となる。
【００６８】
さらに、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、直前のフレームに対して出力した照明制御データを繰り返し出力する。
【００６９】
これによって、映像データ、音声データの特徴量の変化に関わらず、任意の期間、視聴環境照明光を同一状態に保持することが可能となる。例えば、撮影時の場（雰囲気）、すなわち、照明状態に変化のない同一シーン内では、視聴環境照明光を略同一に保持することが可能になる。また、映像特徴量／音声特徴量に基づいた視聴環境照明の制御が不適切な期間では、例えば、一定の白色照明光を保持して照射することが可能となる。従って、不適切な視聴環境照明により視聴者に違和感を与えることを防止し、最適な視聴環境を実現することができる。
【００７０】
一方、映像表示装置３６、音声再生装置３７に出力される映像データ、音声データは、上述した映像データ及び音声データによる場（雰囲気）推定処理に必要な時間分だけ、ディレイ発生部３３，３４により遅延されるため、映像受信装置から照明装置３８に出力される照明制御データと、映像表示装置３６、音声再生装置３７に出力される映像データ、音声データとは同期することになり、映像表示に同期したタイミングで照明装置３８の照明光を切り替えることが可能となる。
【００７１】
次に、照明制御データ生成部３５における処理の流れを、図１１のフローチャートとともに説明する。まず入力映像データから新しいフレームを取得し（ステップＳ１）、その取得したフレームの映像データ／音声データの特徴量に基づいて、視聴環境照明を切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ２）。
【００７２】
取得したフレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御する場合、当該フレームの映像データ／音声データを用いてその映像特徴量／音声特徴量を検出することにより、場（雰囲気）の推定処理を行い（ステップＳ３）、その推定処理結果に基づいて、照明装置３８を制御するための照明制御データを生成する（ステップＳ４）。そして照明制御データに基づき照明装置３８による照明光の切替制御を行い（ステップＳ５）、この後処理が終了であるかどうかを判別する（ステップＳ６）。映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７３】
上記ステップＳ２において、取得したフレームの映像データ／音声データの特徴量に基づいて、視聴環境照明を切替制御しないと判別された場合、視聴環境照明をデフォルト照明１に切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ７）。取得したフレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト照明１に切替制御する場合、予め用意されたデフォルト照明１に対応する照明制御データを読み込み（ステップＳ８）、この照明制御データに基づき照明装置３８による照明光の切替制御を行う（ステップＳ５）。この後処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７４】
また、上記ステップＳ７において、視聴環境照明をデフォルト照明１に切替制御しないと判別された場合、視聴環境照明をデフォルト照明２に切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ９）。取得したフレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト照明２に切替制御する場合、予め用意されたデフォルト照明２に対応する照明制御データを読み込み（ステップＳ１０）、この照明制御データに基づき照明装置３８による照明光の切替制御を行う（ステップＳ５）。この後、処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７５】
さらに、上記ステップＳ９において、視聴環境照明をデフォルト照明２に切替制御しないと判別された場合、取得したフレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御するため、照明光の切替制御を行うことなく、処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。
【００７６】
以上のように、本実施形態においては、映像データに付加された照明制御種別情報に基づいて、視聴環境照明を制御する構成としているので、映像制作者の意図に応じた任意のタイミングで視聴環境照明の切替制御を行うことが可能となる。例えば、図１、図２に示した映像シーンを表示する際、シーン開始フレームの映像特徴量／音声特徴量に応じた視聴環境照明を、このシーンが終了するまで維持することができる。すなわち、同一シーン内では視聴環境照明光の明るさ及び色を略一定に保持することが可能になるので、同じシーン内で視聴環境照明が激しく変化して臨場感や雰囲気を損なってしまうことを防止し、常に適切な視聴環境を実現することができる。
【００７７】
また、本実施形態においては、映像／音声データの特徴量に応じた視聴環境照明と、予め決められた所定の視聴環境照明とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能となる。例えば、図３に示したドラマ番組のオープニング（あらすじ）を表示する際には、各フレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト設定された一定の白色照明状態とすることができ、短時間で視聴環境照明光が激しく変化して視聴者に違和感を与えることを防止し、適切な視聴環境を実現することができる。
【００７８】
さらに、例えば、図４に示したシーンとシーンの間に短時間のショットが挿入された映像を表示する際には、このショットを構成する各フレームの映像特徴量／音声特徴量に関わらず、直前のシーンに対する視聴環境照明をそのまま維持するか、或いは視聴環境照明をデフォルト設定された一定の白色照明状態とすることができ、短時間で視聴環境照明光が激しく変化して視聴者に違和感を与えることを防止し、適切な視聴環境を実現することができる。
【００７９】
なお、本実施形態においては、各シーンのストーリー上における設定場面の区切り位置とも関連する照明制御種別情報を送受信するようにしているので、この照明制御種別情報を用いて所望のシーンを検索したり編集するなど、視聴環境照明の制御以外にも様々な機能を実現することが可能となる。
【００８０】
また、上記本発明の第１の実施形態においては、照明制御種別情報が放送データに付加されて送信される場合について説明したが、放送データに照明制御種別情報が付加されていない場合、表示する映像データに対応する照明制御種別情報を外部サーバ装置等より送受信することによって、映像再生時の最適な視聴環境を実現することが可能となる。これについて、本発明の第２の実施形態として以下に説明する。
【００８１】
＜第２の実施形態＞
以下、本発明の視聴環境制御システムの第２実施形態について、図１２乃至図１４とともに詳細に説明するが、上記第１の実施形態と同一部分には同一符号を付し、その説明は省略する。
本実施形態における外部サーバ装置（データ送信装置）５０は、図１２に示すように、映像受信装置（データ受信装置）側から特定の映像データ（コンテンツ）に関する照明制御種別情報の送信要求を受信する受信部５１と、映像データ（コンテンツ）毎の照明制御種別情報を格納しているデータ格納部５２と、送信要求を受けた照明制御種別情報を要求元の映像受信装置（データ受信装置）へ送信する送信部５３とを備えている。
【００８２】
ここで、本実施形態のデータ格納部５２に格納されている照明制御種別情報は、図１３に示すように、各映像フレームの映像表示装置３６への出力開始タイミング（再生開始タイミングともいう。以下、単に開始タイミングと称す）に対応付けてテーブル形式で記述されており、送信要求を受けた映像データ（番組コンテンツ）の照明制御種別情報を、当該映像データを構成するフレームの開始ＴＣ（タイムコード）とともに、送信部５３より要求元の映像受信装置へ送信する。
【００８３】
なお、本実施形態においても、図７に示した４通り（２ビット）の照明制御種別を想定しているが、ここでは、場（雰囲気）推定に基づく照明切替制御を行うフレームと、デフォルト照明１，２へ切替制御を行うフレームに関してのみその照明制御種別を照明制御種別情報格納テーブルに記述し、照明切替を禁止するフレームに関してはその照明制御種別の記述を省略している。すなわち、照明制御種別情報格納テーブルに特に記述されていないフレームを表示する際には、直前の視聴環境照明を維持することとしており、これによって、照明制御種別情報のデータ容量を大幅に削減している。
【００８４】
次に、上記外部サーバ装置５０より送出された照明制御種別情報を受けて、視聴環境照明を制御する映像受信装置（データ受信装置）６０について説明する。本実施形態における映像受信装置６０は、図１４に示すように、伝送路より入力された放送データ（Ｂ）を受信して復調するとともに、誤り訂正を行う受信部６１と、受信部６１の出力データから、映像表示装置３６に出力する映像データ、音声再生装置３７に出力する音声データのそれぞれを分離・抽出するデータ分離部６２と、表示する映像データ（コンテンツ）に対応した照明制御種別情報の送信要求を、通信ネットワークを介して外部サーバ装置（データ送信装置）に送出する送信部６７と、前記送信要求した照明制御種別情報を、通信ネットワークを介して外部サーバ装置より受信する受信部６８とを備えている。
【００８５】
また、前記受信部６８で受信した照明制御種別情報を一旦記憶し、この照明制御種別情報に対応付けられたフレーム開始ＴＣ（タイムコード）と、データ分離部６２で抽出された映像データのＴＣ（タイムコード）とを比較し、それらが一致したときに、対応する照明制御種別情報を示す情報を出力するＣＰＵ６６と、ＣＰＵ６６からの照明制御種別情報と、前記映像データ及び前記音声データの特徴量とに基づいて、照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部６５とを備えている。
【００８６】
すなわち、ＣＰＵ６６は、外部サーバ装置より受信して内部に記憶している照明制御種別情報格納テーブルの各フレームの開始タイムコードと、照明制御データ生成部６５に入力される映像データのタイムコードとを比較し、これらが一致した時にそのフレーム（タイムコード）に対応する照明制御種別情報を照明制御データ生成部６５に出力する。
【００８７】
そして、本実施形態の照明制御データ生成部６５は、上述した第１の実施形態における照明制御データ生成部３５と同様、前記照明制御種別情報に応じて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成する。
【００８８】
すなわち、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御するよう指示されている場合は、当該フレームの映像データ及び音声データに基づいて撮影現場の照明状態や場面設定（雰囲気）を推定し、この推定結果に応じて、照明装置３８を制御する照明制御データを出力する。
【００８９】
また、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、予め内部に用意されている照明制御データを読み出して出力する。
【００９０】
上記以外の場合は、各フレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するよう指示されているものとして、上述した映像撮影時の場（雰囲気）の推定処理は行わず、直前のフレームに対して出力された照明制御データを繰り返し出力する。
【００９１】
これによって、放送データに照明制御種別情報が付加されていない場合であっても、表示映像データ（番組コンテンツ）に対応する照明制御種別情報を外部サーバ装置より入手し、この照明制御種別情報に基づいて、視聴環境照明を制御する構成としているので、上述した第１の実施形態と同様、映像制作者の意図に応じた任意のタイミングで視聴環境照明の切替制御を行うとともに、映像データの特徴量に応じた視聴環境照明と、予め決められた所定の視聴環境照明とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能となる。
【００９２】
なお、本実施形態においても、各シーンのストーリー上における設定場面の区切り位置とも関連する照明制御種別情報を送受信するようにしているので、この照明制御種別情報を用いて所望のシーンを検索したり編集するなど、視聴環境照明の制御以外にも様々な機能を実現することが可能である。
【００９３】
また、本発明の視聴環境制御装置、方法、及び視聴環境制御システムは、上述した本発明の主旨を逸脱しない範囲で、様々な実施形態により実現することが可能である。例えば、環境照明制御装置は映像表示装置内に設けられてもよく、入力映像データに含まれる種々の情報に基づいて、外部の照明機器を制御することができるような構成としてもよいことは言うまでもない。
【００９４】
さらに、上述した照明制御種別情報は、放送データから分離・取得する場合や、外部サーバ装置から取得する場合に限られず、例えば、外部機器（ＤＶＤ再生機やブルーレイディスク再生機など）で再生された映像情報を表示する場合、メディア媒体内に付加された照明制御種別情報を読み出して、これを用いるようにしてもよい。
Claims (8)
- １以上のフレームから構成される映像データを送信する映像送信装置において、
前記映像データの各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を前記映像データに付加するデータ多重部を備え、
前記照明制御種別情報は、前記照明を前記送信する映像データのフレームの特徴量に基づいた制御を行なうか、同前記送信する映像データのフレームの特徴量に基づかない制御を行なうか、を示す情報が切替えられて前記映像データに付加されることを特徴とする映像送信装置。 - 前記フレームの特徴量に基づかない制御を行なうことを示す照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、直前の視聴環境の照明を維持する制御の指示を含むものであることを特徴とする請求項１に記載の映像送信装置。
- 前記フレームの特徴量に基づかない制御を行なうことを示す照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の照明に切替える制御の指示を含むものであることを特徴とする請求項１に記載の映像送信装置。
- 前記照明制御種別情報の付加の切替えは、前記映像データを構成する各フレームの出力開始タイミングに行なわれることを特徴とする請求項１に記載の映像送信装置。
- 表示装置に表示すべき映像データ及び該映像データと共に送信される映像データを構成する各フレームを表示する際の視聴環境の照明の制御種別を示す照明制御種別情報を受信し、
前記照明制御種別情報が前記映像データのフレームの特徴量に基づく照明制御を行なうことを示す制御種別情報の場合は前記受信した映像データに基づいて撮影時の雰囲気を推定して照明制御データ生成し、フレームの特徴量に基づかない照明の制御を行なうことを示す制御種別情報の場合は当該制御種別情報に沿って照明制御データを生成する照明制御データ生成部を備え、
前記照明制御データによって前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする視聴環境制御装置。 - １以上のフレームから構成される映像データに前記映像データの各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を付加して送信する映像送信方法において、
前記照明制御種別情報は、前記映像データのフレームの特徴量に基づいた制御を行なうか、該フレームの特徴量に基づかない制御を行なうか、を示す情報が切替えられて前記映像データに付加されることを特徴とする映像送信方法。 - 前記照明制御種別情報の付加の切替えは、前記映像データを構成する各フレームの出力開始タイミングに行なわれることを特徴とする請求項６に記載の映像送信方法。
- 表示装置に表示すべき映像データ及び該映像データと共に送信される映像データを構成する各フレームを表示する際の視聴環境の照明を制御する照明制御種別情報を受信し、
受信した照明制御種別情報が、前記フレームの特徴量に基づく制御を行なうことを示す制御種別情報の場合は前記前記受信した映像データに基づいて撮影時の雰囲気を推定して前記表示装置の周辺に設置された照明装置の照明光を制御し、
前記フレームの特徴量に基づかない制御を行なうことを示す制御種別情報場合は当該制御種別情報が示す制御指示に沿って前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする視聴環境制御方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008521133A JP4950990B2 (ja) | 2006-06-13 | 2007-05-24 | 映像送信装置及び方法、視聴環境制御装置及び方法 |
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006162955 | 2006-06-13 | ||
| JP2006162955 | 2006-06-13 | ||
| PCT/JP2007/060603 WO2007145064A1 (ja) | 2006-06-13 | 2007-05-24 | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 |
| JP2008521133A JP4950990B2 (ja) | 2006-06-13 | 2007-05-24 | 映像送信装置及び方法、視聴環境制御装置及び方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2007145064A1 JPWO2007145064A1 (ja) | 2009-10-29 |
| JP4950990B2 true JP4950990B2 (ja) | 2012-06-13 |
Family
ID=38831583
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2008521133A Expired - Fee Related JP4950990B2 (ja) | 2006-06-13 | 2007-05-24 | 映像送信装置及び方法、視聴環境制御装置及び方法 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US20090322955A1 (ja) |
| EP (1) | EP2040472A4 (ja) |
| JP (1) | JP4950990B2 (ja) |
| CN (1) | CN101467452A (ja) |
| WO (1) | WO2007145064A1 (ja) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2315441A4 (en) * | 2008-07-15 | 2014-07-16 | Sharp Kk | DATA TRANSMISSION DEVICE, DATA RECEIVING DEVICE, DATA TRANSMISSION METHOD, DATA RECEIVING METHOD AND METHOD FOR CONTROLLING THE AUDIOVISUAL ENVIRONMENT |
| WO2010087153A1 (ja) * | 2009-01-27 | 2010-08-05 | シャープ株式会社 | 感覚効果情報のデータ構造、感覚効果情報出力装置、感覚効果情報出力方法、感覚効果情報生成装置、制御装置、システム、プログラムおよび記録媒体 |
| CN102282849A (zh) * | 2009-01-27 | 2011-12-14 | 夏普株式会社 | 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制方法以及视听环境控制系统 |
| JP5097149B2 (ja) * | 2009-02-17 | 2012-12-12 | シャープ株式会社 | コンテンツデータ再生装置 |
| JP5694369B2 (ja) * | 2009-12-17 | 2015-04-01 | コーニンクレッカ フィリップス エヌ ヴェ | 映画館環境照明システム |
| CN103068095A (zh) * | 2011-10-21 | 2013-04-24 | 扬升照明股份有限公司 | 照明系统及照明系统的控制方法 |
| JP2012234836A (ja) * | 2012-09-03 | 2012-11-29 | Panasonic Corp | 居住装置 |
| JP6278741B2 (ja) * | 2014-02-27 | 2018-02-14 | 株式会社キーエンス | 画像測定器 |
| GB2535135B (en) * | 2014-11-20 | 2018-05-30 | Ambx Uk Ltd | Light Control |
| CN105472844A (zh) * | 2015-12-07 | 2016-04-06 | 重庆多邦科技股份有限公司 | 一种路灯控制方法及装置 |
| KR102317619B1 (ko) * | 2016-09-23 | 2021-10-26 | 삼성전자주식회사 | 전자 장치 및 이의 제어 방법 |
| CN106507172B (zh) * | 2016-11-30 | 2019-10-18 | 微鲸科技有限公司 | 信息编码方法、解码方法及装置 |
| WO2019228969A1 (en) * | 2018-06-01 | 2019-12-05 | Signify Holding B.V. | Displaying a virtual dynamic light effect |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001343900A (ja) * | 2000-05-31 | 2001-12-14 | Matsushita Electric Ind Co Ltd | 照明システムおよび照明制御データ作成方法 |
| JP2004525735A (ja) * | 2001-05-11 | 2004-08-26 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | リアルワールド演出システムおよび言語 |
| JP2005531909A (ja) * | 2002-07-04 | 2005-10-20 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 周辺光および照明ユニットを制御する方法およびシステム |
| JP2005310630A (ja) * | 2004-04-23 | 2005-11-04 | Sharp Corp | 高臨場感再生装置及び方法 |
| JP2005341122A (ja) * | 2004-05-26 | 2005-12-08 | Sharp Corp | 映像記録装置及び記録方法、映像再生装置及び再生方法、プログラム及び記録媒体 |
Family Cites Families (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4794865A (en) * | 1987-05-18 | 1989-01-03 | The Walt Disney Company | Amusement ride vehicle |
| JPH0812793B2 (ja) | 1988-12-12 | 1996-02-07 | 松下電器産業株式会社 | 光色可変形照明装置 |
| JPH02253503A (ja) | 1989-03-28 | 1990-10-12 | Matsushita Electric Works Ltd | 映像演出照明装置 |
| JPH0815004B2 (ja) | 1989-12-14 | 1996-02-14 | 松下電器産業株式会社 | 光色可変形照明装置 |
| US6564108B1 (en) * | 2000-06-07 | 2003-05-13 | The Delfin Project, Inc. | Method and system of auxiliary illumination for enhancing a scene during a multimedia presentation |
| EP1373664A4 (en) * | 2001-02-26 | 2006-02-22 | Worldstage Llc | INTEGRATED, CUSTOMIZABLE THEATER, CLUB AND MULTIPLEX |
| CA2415340C (en) * | 2001-04-25 | 2006-05-16 | Masahiro Kawashima | Video display apparatus and method which controls the source light level using apl detection |
| EP1412040A1 (en) * | 2001-05-11 | 2004-04-28 | Koninklijke Philips Electronics N.V. | An enabled device and a method of operating a set of devices |
| ATE542577T1 (de) * | 2001-05-11 | 2012-02-15 | Ambx Uk Ltd | Ansteuerung von mehreren vorrichtungen |
| WO2002091882A1 (en) * | 2001-05-15 | 2002-11-21 | Connell Michelle D | Bed structure with storage area |
| JP3661692B2 (ja) * | 2003-05-30 | 2005-06-15 | セイコーエプソン株式会社 | 照明装置、投射型表示装置及びその駆動方法 |
| JP4343657B2 (ja) * | 2003-11-14 | 2009-10-14 | 富士通マイクロエレクトロニクス株式会社 | 画像記録装置 |
| PL1800523T3 (pl) * | 2004-10-05 | 2020-11-16 | Signify Holding B.V. | Interaktywny system oświetleniowy |
| US20070222740A1 (en) * | 2006-03-22 | 2007-09-27 | Sharp Kabushiki Kaisha | Display apparatus, image data providing apparatus, and controlling method |
| KR101506330B1 (ko) * | 2008-09-23 | 2015-03-27 | 삼성전자 주식회사 | 데이터 강건성 관리장치와, 데이터 저장 방법 및 데이터 복구 방법 |
-
2007
- 2007-05-24 EP EP07744037A patent/EP2040472A4/en not_active Ceased
- 2007-05-24 US US12/304,457 patent/US20090322955A1/en not_active Abandoned
- 2007-05-24 JP JP2008521133A patent/JP4950990B2/ja not_active Expired - Fee Related
- 2007-05-24 WO PCT/JP2007/060603 patent/WO2007145064A1/ja active Search and Examination
- 2007-05-24 CN CNA2007800218353A patent/CN101467452A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001343900A (ja) * | 2000-05-31 | 2001-12-14 | Matsushita Electric Ind Co Ltd | 照明システムおよび照明制御データ作成方法 |
| JP2004525735A (ja) * | 2001-05-11 | 2004-08-26 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | リアルワールド演出システムおよび言語 |
| JP2005531909A (ja) * | 2002-07-04 | 2005-10-20 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 周辺光および照明ユニットを制御する方法およびシステム |
| JP2005310630A (ja) * | 2004-04-23 | 2005-11-04 | Sharp Corp | 高臨場感再生装置及び方法 |
| JP2005341122A (ja) * | 2004-05-26 | 2005-12-08 | Sharp Corp | 映像記録装置及び記録方法、映像再生装置及び再生方法、プログラム及び記録媒体 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2040472A1 (en) | 2009-03-25 |
| US20090322955A1 (en) | 2009-12-31 |
| WO2007145064A1 (ja) | 2007-12-21 |
| CN101467452A (zh) | 2009-06-24 |
| EP2040472A4 (en) | 2009-11-11 |
| JPWO2007145064A1 (ja) | 2009-10-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4950990B2 (ja) | 映像送信装置及び方法、視聴環境制御装置及び方法 | |
| WO2007052395A1 (ja) | 視聴環境制御システム | |
| JP5058157B2 (ja) | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 | |
| JP4950988B2 (ja) | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 | |
| US10735668B2 (en) | Synchronized lighting and video active lighting tracks (VALT) with synchronized camera to enable multi-scheme motion picture capture | |
| CN105409225B (zh) | Hdr元数据传输 | |
| JP4889731B2 (ja) | 視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 | |
| JP5442643B2 (ja) | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御方法および視聴環境制御システム | |
| US20150138395A1 (en) | Display System Using Metadata to Adjust Area of Interest and Method | |
| CN114073089B (zh) | 生成数字视频比特流和回放视频内容的方法和介质 | |
| JP5074864B2 (ja) | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 | |
| CN107736017B (zh) | 影像再现装置和影像再现方法 | |
| JP2009081822A (ja) | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 | |
| JP4789592B2 (ja) | 視聴環境制御装置及び視聴環境制御方法 | |
| JP2009081482A (ja) | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 | |
| JP2009036801A (ja) | 視聴環境制御装置および視聴環境制御方法 | |
| JP4709897B2 (ja) | 視聴環境制御システム、視聴環境制御装置、視聴環境照明制御システム、及び視聴環境制御方法 | |
| JP2009060541A (ja) | データ送信装置、データ送信方法、視聴環境制御装置、及び視聴環境制御方法 | |
| JP2013255042A (ja) | 照明制御装置、表示装置、映像再生装置、照明制御方法、プログラム、および、記録媒体 | |
| JP6751893B2 (ja) | 再生方法、再生装置、表示方法及び表示装置 | |
| JP2009060542A (ja) | データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111004 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111205 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120214 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120309 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150316 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4950990 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |