JP5323413B2 - 付加データ生成システム - Google Patents

付加データ生成システム Download PDF

Info

Publication number
JP5323413B2
JP5323413B2 JP2008192453A JP2008192453A JP5323413B2 JP 5323413 B2 JP5323413 B2 JP 5323413B2 JP 2008192453 A JP2008192453 A JP 2008192453A JP 2008192453 A JP2008192453 A JP 2008192453A JP 5323413 B2 JP5323413 B2 JP 5323413B2
Authority
JP
Japan
Prior art keywords
output
additional data
unit
data generation
generation system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008192453A
Other languages
English (en)
Other versions
JP2010034687A (ja
Inventor
信明 青木
俊雄 幡
淳 岡崎
省二 横田
正高 宮田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2008192453A priority Critical patent/JP5323413B2/ja
Priority to CN2009801281527A priority patent/CN102100081B/zh
Priority to PCT/JP2009/061390 priority patent/WO2010010776A1/ja
Priority to EP09800291A priority patent/EP2312845A4/en
Priority to US13/055,814 priority patent/US20110115979A1/en
Publication of JP2010034687A publication Critical patent/JP2010034687A/ja
Application granted granted Critical
Publication of JP5323413B2 publication Critical patent/JP5323413B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • A63F13/28Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/73Colour balance circuits, e.g. white balance circuits or colour temperature control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/74Circuits for processing colour signals for obtaining special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic

Description

本発明は、画像データ及び/または音データ等の出力データに基づく出力に情報伝達効果を付加する付加データ生成システムに関するものである。
近年、TV(television)の高画素化や高性能化に伴い、家庭においてもTV及びそれを取り囲むシステムによりリアルさを求める方向へと転換しつつある一方、通信網も発達してきて双方向TV放送や災害の緊急情報等も配信されるようになっている。
さらに、前記高画素化や高性能化に伴って、家庭で使用されるゲーム機に関してもゲーム機の画面に映し出された画像の動きや画像自体がより緻密なものへと進化してきており、これによって、ゲーム機の操作手段に関しても多様な動きを伴う入力操作を取り扱うものへと進化を遂げている。
また、映画ソフトの記録媒体もDVD(digital versatile disc)からBD(bul−ray disc)へと移行しつつあり、より高精細で高品質の映像・音響をデータとして収録できるようになった。
前述したような転換や進化等によって、TVやゲーム機を使用する際には臨場感を高めることが必要とされている。
このような臨場感を高めるための補助システムの一従来例として、特開2000−173783号公報に開示されている照明装置がある。この照明装置は、画像表示装置が存在する空間に配置された複数の照明の明るさや色を、配置されている位置(有効視野、補助視野または補助視野)別に画像表示装置の画面に基づいて好ましいと推測される状態に制御することによって、画像表示装置の画面に表示される画像の臨場感を高めたものである。
また、前記補助システムの他の従来例として、特開2007−25111号公報に開示されている画像呈示システムがある。
図13は、従来の画像呈示システムの一例を示す説明図である。
この画像呈示システムは、撮影時に、有効視野に呈示する主たる映像とともにこの主たる映像の周辺の画像情報も取得しておき、有効視野映像を呈示する表示手段1001と、周辺映像または周囲光照明を呈示する表示手段1002とにより撮影した映像を再生することによって、実際の状態に近い臨場感をもって有効視野の映像を視聴するといったものである。
さらにまた、前記補助システムの他の従来例として、特表2005−531908号公報に開示されている照明ユニットがある。
図14は、従来の照明ユニットの一例を示す説明図である。
この照明ユニットは、ビデオ信号に基づく画像を表示する表示装置が配置されている空間(居間)2010に複数の光素子2001〜2004を配置し、前記ビデオ信号に基づき各画像フレーズの平均の色、顕著な色または画像フレーズの隅の色を解析したり、各映像フレーム中のオブジェクトについて(特に、このオブジェクトが顔であるときにはその表情についても)解析したりして、前記光素子2001〜2004の光を設定する際に用いることによって、鑑賞者の環境を高めるといったものである。
また、前記補助システムを搭載した製品の一従来例として、Ambilight(フィリップス社製の照明システム)がある。このAmbilightは、画面に表示される映像の色情報を分析して、その色調で部屋を間接照明するといったものである。例えば、液晶TV等のフラットTVにAmbilightを搭載した場合、画面上下左右端辺部の裏側に照明装置としてRGBのLED(赤色発光ダイオード、緑色発光ダイオード及び青色発光ダイオードから構成された発光ダイオード)が配置されており、画像中の代表色とLEDの色調とを同調させることによって臨場感を高めるといったものである。具体的には、画面に夕焼けのシーンが表示されているときにはオレンジ色に、新緑のシーンが表示されているときには緑色にLEDの色調が制御される。
特開2000−173783号公報 特開2007−25111号公報 特表2005−531908号公報
しかしながら、前述した特開2000−173783号公報に開示されている照明装置やAmbilightによれば、画面全体の平均色度及び平均輝度、または代表色に基づいて鑑賞空間や有効視野(正面から約±15°の範囲の視野)に配置された照明の輝度及び色度を制御しているため、元の映像情報データを直接利用しておらず画面に表示されている映像の詳細な内容や画面端辺部の色調等が反映されず、臨場感を増すための効果的な照明を呈示できない場合があるといった問題があった。
例えば、暗いトンネルを抜けていくシーンが表示されているときには、トンネルを抜け切る前に鑑賞空間や有効視野に配置された照明が白色のような明るい色調に制御されてしまうため、黒色表示の画面端辺部と白色に制御された画面周辺部の照明との間に色彩的な差が生じてしまう。さらに、画面全体の平均色度及び平均輝度、または代表色に基づいて照明を制御するための信号を生成する必要があるため、画面の表示と照明の制御との間に時間的なずれが生じてしまう場合がある。
また、特表2005−531908号公報に開示されている照明ユニットによれば、ビデオ信号を解析することによって、各画像フレームの平均色や最も顕著な色、または画像フレームの隅の色、もしくは画像フレーム中のオブジェクトに基づいて照明の色や点滅パターン等を制御しているため、画面の詳細な表示内容と照明とを同調させることができないといった問題があった。
前述した特開2007−25111号公報に開示されている画像呈示システムは、このような問題を解決するものであるが、映像情報データの生成側において、有効視野の映像を撮影する際に、周辺映像または周囲光照明を生成するために必要となるパノラマ画像データ等の情報も同時に取得しておき、映像情報データの再生側において、有効視野の他に周辺視野(正面から約±15°より外側の範囲の視野)にも映像または照明を呈示している。そのため、前記画像呈示システムには、映像情報データの生成側にパノラマ画像データ等の情報を取得するための手段(全方位カメラ)を備える必要があるといった問題があった。
本発明はかかる問題点を解決すべく創案されたもので、その目的は、画像データ及び/または音データ等の出力データに基づいて付加データを生成し、当該付加データに基づく出力によって前記出力データに基づく出力に情報伝達効果を付加することにある。
上記課題を解決するため、本発明の付加データ生成システムは、図1に示すように、出力信号を供給するソース部1と、前記ソース部1から供給された前記出力信号から出力データを得る動作制御部4と、前記出力データに基づく出力を実施する第1出力部5と、前記動作制御部4で得られた前記前記出力データを解析して出力データの特徴的な要素を強調する付加データを生成する付加データ生成部3と、前記付加データ生成部3で生成した前記付加データに基づく出力を実施する第2出力部6と、前記出力データを変化させる操作信号を前記動作制御部4へ出力する操作部2と、を備えており、前記動作制御部4で得られた前記出力データが、前記操作部2から出力される前記操作信号に基づいて変化する構成されているものである。
また、前記動作制御部4及び前記付加データ生成部3は、図2に示すように、動作制御部41で構成されていてもよい。
また、図1に示す付加データ生成部3の代わりに、図3に示すように、前記出力データに基づく出力を実施する第1出力部5を監視する検出部7での検出結果に基づいて付加データを生成する付加データ生成部8を用いてもよい。
これにより、第2出力部での出力によって第1出力部での出力に情報伝達効果を付加することができる。
また、前記第2出力部は、前記第1出力部からの出力を鑑賞する領域の周辺部を取り囲むように配置された複数の照明装置を備えてなるものであってもよい。
この場合、第2出力部の出力によってサラウンド効果を得て、臨場感をより向上することができる。
また、前記照明装置は、赤色LEDセル、緑色LEDセル及び青色LEDセルのうちの少なくとも1つを用いて構成されており、種々の色温度の光を出力するLED照明装置であってもよい。
この場合、複数の色温度光源によって単色白色のみならず、様々な色の光を出力することができる。また、LEDを用いているため低消費電力で長寿命の照明装置を実現できる。
また、前記照明装置は、シーリングライト、ペンダント、ブラケット、ダウンライト、スポットライト、プロジェクター、ホログラム及びレーザー描画装置のうちのいずれか1つであってもよい。
この場合、様々な種類の照明機器を用いて光の出力を制御することができ、より高次の臨場感を実現できる。
また、前記ソース部は、通信網を介してテレビ局、画像配信会社または音楽配信会社から配信された情報を受信することが可能な通信端末機、もしくは各種電子機器の動作制御を行うためのプログラム及びデータを格納した記憶媒体から前記プログラム及びデータを読み出す読取装置であってもよい。
この場合、さまざまなコンテンツを臨場感を高めた状態で再生(鑑賞)することができる。
また、前記付加データ生成部は、前記出力データの変化に同調して付加データを変化させるものであってもよい。
この場合、第1出力部からの出力である画像や音の変化に、付加データに基づく出力の変化が同期または追随するため、より高次の臨場感を実現できる。
また、前記動作制御部は、前記出力データの変化に同調して付加データを変化させるものであってもよい。
この場合、第1出力部からの出力である画像や音の変化に、付加データに基づく出力の変化が同期または追随するため、より高次の臨場感を実現できる。
また、前記操作部が、TV、VCR、CDプレーヤ、DVDプレーヤ、BDプレーヤ、PC、ゲーム機または遊戯装置のコントローラまたはリモートコントローラ、操作者の身体情報をモニタするセンサまたはアイテム、もしくは防災無線システム用受信機を構成する操作者検出センサであってもよい。
この場合、出力データを容易に変化させることができる。
また、前記操作部は、前記出力データを変化させる操作信号を前記動作制御部に出力するものであり、当該動作制御部は、操作信号に基づいて出力する出力信号を変化させるものであってもよく、前記操作部は、前記出力データを変化させる操作信号を前記ソース部に出力するものであり、当該ソース部は、操作信号に基づいて出力する出力信号を変化させるものであってもよい。
前記操作信号を動作制御部に出力する場合には、ソース部の構成や配置に関らず操作部の形態や操作方法等を独立して変更することができ、多種多様な形態の操作部を実現することができる。一方、前記操作信号をソース部に出力する場合には、出力データを確実に変化させることができる。
また、前記出力データは、画像データを含んでなるものであり、前記付加データは、画像データから抽出された特徴的な要素である画像の明るさ、画像に含まれる色、及び画像に含まれるオブジェクトのうちの少なくとも1つに基づいて生成されるものであってもよい。
この場合、出力データから得られた詳細な情報に基づいて付加データを生成することができ、より確実に臨場感を高めることができる。
また、前記出力データは、画像データを含んでなるものであり、前記第1出力部は、前記画像データに基づいて画像を表示する表示画面を含んでなるものであり、前記検出部は、表示画面を監視する画像監視カメラを備えた画像検出システムであってもよい。
この場合、出力から得られた詳細な情報に基づいて付加データを生成することができ、より多様な形態で付加データ生成システムを構成することができる。
また、前記第2出力部は、前記表示画面の縁部に配置された照明装置を含んでなるものであってもよい。
この場合、有効視野部に配置された表示画面に表示される画像のすぐそばに照明装置が配置されるため、照明装置からの出力が鑑賞者(操作者)の目に入りやすく、また、表示画面に表示される画像と照明装置からの出力との連続性を実現することができる。その結果、高次の臨場感を実現することができる。
また、前記第2出力部は、前記表示画面の近傍に配置された照明装置を更に含んでなるものであり、前記表示画面の縁部に配置された照明装置及び前記表示画面の近傍に配置された照明装置は、前記表示画面の画像に対して切れ目ない出力を実施するものであってもよい。
この場合、表示画面に表示される画像と照明装置からの出力との連続性を実現することができ、高次の臨場感を実現することができる。
また、前記付加データは、音データを含んでなるものであり、前記第2出力部は、前記音データに基づく出力を実施するサラウンドスピーカシステムを含んでなるものであってもよい。なお、前記サラウンドスピーカシステムは、前記第1出力部を介して対向する位置に配置された2つのサラウンドスピーカと、前記第1出力部からの出力を鑑賞する領域を介して対向する位置に配置された2つのサラウンドスピーカと、前記第1出力部からの出力を鑑賞する領域から見て第1出力部の左右近傍に配置された2つのフロントスピーカと、前記第1出力部からの出力を鑑賞する領域と前記第1出力部との間に配置された1つのセンタースピーカと、前記第1出力部近傍に配置された1つのサブウーファとから構成されたものであってもよい。
この場合、サラウンドスピーカシステムから出力された音で鑑賞者をより効果的に取り囲むことができ、より高次の臨場感を実現することができる。
また、前記第2出力部が、各サラウンドスピーカとともに配置された4つの照明装置を含んでなるものであってもよい。
この場合、照明装置から出力された光で鑑賞者をより効果的に取り囲むことができ、より高次の臨場感を実現することができる。
また、前記照明装置は、出力する光の強度及び色度のうちの少なくとも一方が調整可能に構成されていてもよい。
この場合、付加データ生成システムを配置する環境に合わせて種々の色の光を様々な強度に制御して出力することができるので、操作者の健康状態や環境の雰囲気に影響を与えることができるように照明装置から出力される光の色を組み合わせることができる。
また、前記第2出力部は、前記操作部に配置された、スピーカ、バイブレータ及び表示装置のうちの少なくとも1つを含んでなるものであってもよい。
この場合、操作者の手元で音、振動、画像及び光等の出力を行うことができるため、操作部の操作に応じて付加データに基づく出力が変化する感覚がより強調され、高次の臨場感を出すことができる。
また、前記第2出力部は、前記第1出力部からの出力を鑑賞する領域の空調を行う空調設備を含んでなるものであってもよい。
この場合、より高次の臨場感を出すことができる。
また、前記付加データの少なくとも一部分は、前記身体情報をモニタするセンサまたはアイテムによる検出結果に基づいて切り替えられるものであってもよい。なお、前記身体情報をモニタするセンサは操作部に配置されていてもよい。
この場合、操作者の体調や健康状態に留意して第2出力部からの画像、音及び光等といった出力を制御することができる。また、操作者の身体情報をフィードバックして第2出力部からの画像、音及び光等といった出力を制御することができ、より安全に臨場感を高めることができる。
また、前記スピーカ、バイブレータ及び表示装置のうちの少なくとも1つは操作部を兼ねてなるものであってもよい。
この場合、操作をより簡単化することができ、さらに、無駄な電力消費を抑えて環境に対して優しい形態を実現することができる。
また、前記付加データのうちの少なくとも一部分は、前記出力データの変化に同期して変化するものであってもよい。
この場合には、操作部を用いた操作によって付加データに基づく出力を変化させる感覚がより強調され、高次の臨場感を出すことができる。
本発明は上記のように構成したので、情報伝達効果を出力データに基づく出力に付加することができるため、画像や音等を出力する際の臨場感を向上させることができる。また、本発明は、第1出力部からの出力を鑑賞する領域の周辺部を取り囲むように複数の照明装置を配置しているため、これら照明装置によって、表示画面の画像に対して切れ目ない出力を実施することができる。すなわち、表示画面の画像と照明装置からの出力との連続性を実現することにより、高次の臨場感を実現することができる。
以下、本発明の付加データ生成システムの実施形態について説明する。
<実施形態1>
まず、本発明の付加データ生成システムの実施形態1について、図面を参照しつつ説明する。
図1は、本発明の付加データ生成システムの実施形態1を示す説明図である。
本実施形態の付加データ生成システムは、出力信号を供給するソース部1と、操作者によって操作される操作部2と、前記出力信号を受信し、受信した出力信号から前記操作部2を用いて実施された操作に基づく出力データを得る動作制御部4と、前記出力データを解析して出力データの特徴的な要素を強調する付加データを生成する付加データ生成部3と、前記出力データに従って出力動作を行う第1出力部5と、前記データに従って出力動作を行う第2出力部6とから構成されている。
<実施形態1の変形例>
前述の実施形態1において付加データ生成部3は出力信号を解析することによって付加データを生成しているが、本発明の付加データ生成システムはこの形態に限定されるものではない。例えば、付加データを示す付加信号が予め重畳された出力信号がソース部から出力されてもよい。本変形例においては、付加信号が出力信号に重畳されている場合について説明する。
図2は、本発明の付加データ生成システムの実施形態1の変形例を示す説明図である。
図2に示す付加データ生成システムは、図1に示す付加データ生成システムと比較すると、動作制御部41が図1に示す動作制御部4及び付加データ生成部3の役割を果たしている点が異なっている。即ち、この付加データ生成システムでは、動作制御部41で、前記出力データを解析して出力データの特徴的な要素を強調する付加データを生成し、この付加データを第2出力部6で扱いうるレベルに変換してから第2出力部6へ出力している。なお、動作制御部41において出力信号から出力データを得て第1出力部5に出力する手順については、図1に示す付加データ生成システムと同様の手順であるため、詳細な説明を省略する。
<実施形態2>
次に、本発明の付加データ生成システムの実施形態2について、図面を参照しつつ説明する。
図3は、本発明の付加データ生成システムの実施形態2を示す説明図である。
本実施形態の付加データ生成システムは、出力信号を発信するソース部1と、操作者によって操作される操作部2と、前記出力信号を受信し、受信した出力信号から前記操作部2を用いて実施された操作に基づく出力データを得る動作制御部4と、前記出力データに従って出力動作を行う第1出力部5と、当該第1出力部5からの出力を監視する検出部7と、当該検出部7での検出結果に基づいて前記第1出力部5からの出力の特徴的な要素を強調する付加データを生成する付加データ生成部8と、前記付加データに基づく出力を実施する第2出力部6とから構成されている。
前記検出部7は、例えば、画面端部に色度測定器が埋設され、画面の平均的な色が検出できる画像色検出システムである。
なお、前述の実施形態1及び実施形態2において、図1及び図3に示す付加データ生成システムでは、前記付加データ生成部3,8と動作制御部4とを個別に設けているが、付加データ生成部3,8を動作制御部4内に設けてもよい。
また、前記ソース部1は、例えば、通信網を介してテレビ局、画像配信会社または音楽配信会社から配信された情報を受信することが可能な通信端末機(例えば光通信端末機)、もしくは各種電子機器の動作制御を行うためのプログラム(「ソフトウエア」とも言う。)とデータとを格納した記憶媒体から前記プログラム及びデータを読み出す読取装置である。前記各種電子機器としては、ゲーム機、遊戯装置(例えばパチンコ台またはスロット台等)もしくは防災無線システム用受信機がある。また、前記記憶媒体の具体例としては、VCR(video cassette recorder)用のカセット、CD(compact disc)、DVD(digital versatile disc)、BD、ゲーム機用の各種記録媒体、及びPC(personal computer)用の各種記録媒体等がある。
前記操作部2は、電子機器等の動作を指定する際に操作されるものであり、例えばTV、VCR、CDプレーヤ、DVDプレーヤ、BDプレーヤ、PCまたはその他の各種電子機器用のリモートコントローラ(リモコン)、ゲーム機または前記電子機器用のコントローラ、もしくは身体情報をモニタするセンサである。なお、前記操作部2の代わりに動作制御部4,41を備えた電子機器本体に設けられた操作用ボタンやスイッチが操作されてもよい。
前記付加データ生成部3は、出力データから付加データを生成するものであり、例えば、出力データを解析して出力の特徴的な要素(例えば、画像の明るさ、画像に含まれる色、及び画像に含まれるオブジェクト等のうちの少なくとも1つ)を抽出し、この抽出結果に基づいて付加データを生成する、または複数の付加データを記憶した記憶手段から前記抽出結果に関連する付加データを読み出すといったステップを実行するための動作プログラムを記憶した記憶部と、当該動作プログラムを実行して前記ステップを実行する信号処理部とから構成されている。
一方、前記付加データ生成部8は、検出部7での検出結果から付加データを生成するものであり、例えば、検出結果を解析して出力の特徴的な要素(例えば、画像の明るさ、ならびに画像に含まれる色及びオブジェクト等)を抽出し、この抽出結果に基づいて付加データを生成する、または複数の付加データを記憶した記憶手段から前記抽出結果に関連する付加データを読み出すといったステップを実行するための動作プログラムを記憶した記憶部と、当該動作プログラムを実行して前記ステップを実行する信号処理部とから構成されている。
また、前記付加データ生成部3,8で出力データまたは検出結果を解析する際に用いられる解析方法としては、例えば、画像データから背景状況やゲーム場面に対応するデータを抽出して、または画像データから表示画面端辺部に対応するデータを抽出して、この抽出結果と動作プログラム中の判定基準とを照らし合わせてどの位置にある照明にどれだけの電流を流すのかを制御するためのデータを生成するといった方法がある。
なお、前記付加データ生成部3,8は第2出力部6で扱いうるレベルに変換した後に付加データを出力するものであり、前記第2出力部6は、前記付加データに基づいて出力動作を行い、第1出力部5の出力に対して情報伝達効果を付加するものである。この情報伝達効果は、例えば臨場感の向上、操作者の健康状態のバックアップ、または迅速かつ確実な情報伝達等といった効果のことをいい、後に具体例を示しつつ詳細に述べる。
前記動作制御部4は、複数種の信号が重畳されてなる出力信号から第1出力部5の出力にかかわる信号のみを取り出したり、出力信号から取り出された信号を第1出力部5で扱いうるレベルに変換したりするものであり、例えば検波回路及び増幅回路等から構成される。具体的には、動作制御部4として、TV、VCR、CDプレーヤ、DVDプレーヤ、BDプレーヤ、PC、ゲーム機、防災無線システム用受信機、またはその他の各種電子機器を構成する信号処理部が用いられる。
前記第1出力部5は、例えば画像表示部、スピーカ、バイブレータ及び空調設備のうちの少なくとも1つから構成されており、これら画像表示部、スピーカ、バイブレータ及び空調設備は、各種電子機器を構成するかまたは各種電子機器に接続されたものである。また、前記各種電子機器としては、例えばTV、VCR、CDプレーヤ、DVDプレーヤ、BDプレーヤ、PC、ゲーム機及び防災無線システム用受信機がある。
前記第2出力部6は、画像表示部、スピーカ、照明装置、バイブレータ及び空調設備のうちの少なくとも1つで構成されている。また、前記照明装置としては、例えばシーリングライト、ペンダント、ブラケット、ダウンライト、スポットライト、プロジェクター、ホログラム及びレーザー描画装置のうちのいずれか1つをもちいることができる。
もし、動作制御部4がTVの受信部である場合、TVは、テレビ局から送信されたアナログテレビジョン信号又はデジタルテレビジョン信号といった信号を、ソース部1としての衛星放送受信アンテナ、ケーブル通信端末機、またはインターネット等を介して受信する。そして、受信した信号のうち、操作部2としてのリモコンの操作によって選択されたチャンネルの信号を抽出し、抽出した信号を処理して画像データ及び音データを生成する。さらに、TVは、生成した画像データに基づいて画面に映像を表示し、音データに基づいてスピーカから音を出力する。
また、出力データは、TV、VCR、CDプレーヤ、DVDプレーヤ、BDプレーヤ、PC、ゲーム機、防災無線システム用受信機、またはその他の各種電子機器内蔵の画像表示部及び(または)スピーカから出力される画像または音を示すものであるか、もしくはバイブレータまたは空調設備の動作を制御するものである。
前述した実施形態1及び実施形態2の付加データ生成システムは、このような構成を有しているため、第2出力部での出力によって第1出力部での出力に情報伝達効果を付加することができる。さらに、実施形態1の変形例の付加データ生成システムによれば、付加データ生成システムの構成を簡単化することができる。さらに、第1出力部5の出力に対して第2出力部6の出力を同期させて時間的なずれの発生を防止することができる。
次に、本発明の付加データ生成システムの実施例について説明する。
基本構成例
まず、本発明の付加データ生成システムの基本構成例ついて図面を参照しつつ説明する。なお、本基本構成例は、前述の実施形態1において図1に示す付加データ生成システムをより具体的に説明したものである。
図4は、本発明の基本構成例に係る付加データ生成システムが配置された居間の一例を示す説明図であり、図5は、図4に示す付加データ生成システムを構成するゲーム機の一例を示す説明図である。
居間100には、紙面右側の壁際にTV101が、当該TV101と対向するように紙面左側の壁際にソファー102が、前記TV101とソファー102との間にテーブル103が配置されており、さらに、テーブル103を介して紙面上下方向に沿って対向する位置に椅子104,105がそれぞれ配置されている。なお、居間100内のTV101、ソファー102、テーブル103及び椅子104,105等の家具の配置は一例にすぎず、本発明はこの配置に限定されるものではない。
前記TV101には、ゲーム機11が配線11aを介して接続されており、ゲーム機11には操作部としてのコントローラ21が配線121を介して接続されている。前記TV101の表示画面51及びスピーカ(図示せず)は、第1出力部を構成しており、居間100内に配置された複数の照明装置61〜67は、第2出力部を構成している。
また、ゲーム機11は、図5に示すように、ソース部としての読取部111と、動作制御部としての演算処理部141と、付加データ生成部131とを含んでなるものである。
前記読取部111は、ゲーム用ソフトウエア及び複数の出力信号を示す出力情報を記録した記録媒体(いわゆる、「ゲームソフト」)からゲーム用ソフトウエア及び出力情報を読み取るものである。
前記演算処理部141は、コントローラ21に加えられた変化(例えば、変化の量及び方向のうちの少なくとも一方)を検出する変化状態検出手段として機能するものであり、コントローラ21からの操作信号に基づき、読取部111を介して前記ゲームソフトから読み出したゲーム用ソフトウエアを実行し、読取部111を介して出力情報から前記操作信号に基づく出力信号を読み出し、当該出力信号を前記TV101の表示画面51及びスピーカで扱いうるレベルに変換して出力データ(ここでは、画像データ及び音データ)を得るものである。
また、前記付加データ生成部131は、演算処理部141で取得した出力データを解析して付加データを生成するものである。なお、図2に示す付加データ生成システムと同様に、演算処理部141内に付加データ生成部131として機能する部位を設けて、付加データ生成部131を省略してもよい。
前記出力データはゲーム機11の一つの出力端子11b1から前記TV101へ出力され、この出力データに基づいて表示画面51に画像が表示され、TV101のスピーカから音が出力される。また、前記付加データは、ゲーム機11の他の一つの出力端子11b2から前記照明装置61〜67へ出力され、この付加データに基づいて照明装置61〜67の動作制御が行われる。なお、前記ゲーム機11と照明装置61〜67の間は配線によって接続されていてもよく、また赤外線通信等の無線通信を用いて接続されていてもよい。
図4に示す照明装置61〜67としては、赤色LED(Light Emitting Diode)セル、緑色LEDセル及び青色LEDセルのうちの少なくとも1つを用いて構成されており、種々の色温度の光を出力するLED照明装置が用いられる。なお、前記照明装置61〜67として、ハロゲンランプといった他の色及び他の発光リソースも用いることが可能であり、自在に調光できることが好ましい。また、前記照明装置61〜67にはスポットライトやプロジェクターが内蔵されていてもよい。さらに、照射方向を調整できるものであってもよい。
前記照明装置61〜67の配置例について説明すると、4個の照明装置61〜64は居間100の床四隅に、照明装置65は居間100の天井に、照明装置66はTV101の表示画面51周辺部に、照明装置67はソファー102の下部にそれぞれ配置されている。さらに詳しくは、前記4個の照明装置61〜64のうち、2個の照明装置61,62はTV101を介して対向する位置に、残り2個の照明装置63,64はソファー102を介して対向する位置に配置されており、天井に配置された照明装置65は居間100の全体照明である。
このような構成において、コントローラ21を用いた操作が実施されると、前記演算処理部141では、記録媒体から読み取ったゲーム用ソフトウエアを実行して前記操作に対応する出力データを得る。そして、これら出力データがTV101に出力されることによって表示画面51に表示される画像及びスピーカから出力される音が変化する。このとき、前記付加データ生成部131では、出力データ(特に画像データ)を解析して、前記照明装置61〜67をそれぞれ制御するための複数の付加データを生成する。生成された付加データはゲーム機11から照明装置61〜67へ出力され、照明装置61〜67は付加データに従って動作する。
例えば、ゲーム用ソフトウエアが様々な障害をかわしながら複数の場面をクリアしていくゲームを実施するものであった場合、コントローラ21を用いた操作に応じて表示画面51に表示される画像が刻々と変化する。ここでは、この画像の変化に同調させて、照明装置61〜67の動作を変化させている。
照明装置61〜67の動作例を具体的にあげると、表示画面51に洞窟内部の様子が表示されていれば暗く、地底の様子が表示されていれば赤色に、水中の様子が表示されていれば青色に、また、晴天の野山の様子が表示されていれば色温度5500K程度の明るい白色に変化させる等、表示画面に表示されるゲーム空間の全体的な色に合わせて天井に配置された照明装置65を調整する。さらに、このような調整に加えて、居間100の四隅に配置された照明装置61〜64も照明装置65と同様に動作させてもよい。また、TV101の表示画面51周辺部に配置された照明装置66も、ゲーム空間の全体的な色に合わせて全体照明と同じように調整してもよい。例えば、表示画面51に火炎放射を受ける場面が表示されていれば、TV101の表示画面51周辺部、居間100の四隅に配置された照明装置61〜64及びソファー102下部に配置された照明装置67を強い赤色で発光させてもよい。
他の具体例をあげると、例えば照明装置61〜64に、付加データによって照射方向や発光色等を調整することができるスポットライトが内蔵されている場合には、暗い地底から明るい地上への出口に近づいて行く場面が表示画面51に表示されているときに、出口に近づいて行くのに同調させてスポットライトの照射方向を変更して、当該スポットライトからの光で形成した明るいエリアがTV101の表示画面51の遠方から表示画面51端辺部まで移動してくるように照明装置61〜64を動作させてもよい。
さらに他の具体例をあげると、敵が接近してくる場面では、敵が表示画面51に表示される前に、居間100の四隅に配置された照明装置61〜64によって敵の影(形状)と敵の色とを表示画面51以外の場所(例えば壁面)に映し出してもよい。また、照明装置61〜64で敵の影や色を映し出す代わりに、照明装置61〜64としてプロジェクター内蔵のものを用いて、このプロジェクターで表示画面51以外の場所に敵の姿を映し出すように照明装置61〜64を動作させてもよい。このとき、ゲームの進行に同調して敵の姿が表示画面51に近づいていくように照明装置61〜64を動作させてもよい。
また、さらに他の具体例をあげると、敵に飛び乗って敵をやっつける場面では、敵の頭部の色がソファー102に投影されるように照明装置61〜64を動作させてもよい。
なお、前記付加データ生成部の動作制御は、出力データの解析を行う動作プログラムを用いて実施されてもよい。この場合、付加データ生成部は、動作プログラムが格納された記憶手段と、この動作プログラムを実行して出力データの解析を行う演算処理手段とで構成される。但し、前記演算処理手段の代わりに前記演算処理部141を用いてもよい。
基本構成例によれば、プレイヤがコントローラ21でゲーム空間内のキャラクターの動きを操作することによってTV101の表示画面51の画像及びスピーカからの音が変化していくのに合わせ、リアルタイムでTV101やプレイヤの周辺光を変化させることができる。その結果、プレイヤはまるで自分がゲーム空間内にいるかのような高次元の臨場感を味わうことができ、情報伝達効果を付加することができる。
また、本基本構成例は、前述した実施形態1において図1に示す付加データ生成システムをより具体的に説明したものであるが、他の形態、例えば前述の実施形態2に示す付加データ生成システム(図3参照)によって本基本構成例のものと同様の動作を行う付加データ生成システムを得ることもできる。
この場合、検出部7は、第1出力部5を構成するTVの表示画面を監視する画像監視カメラ等を備えた画像検出システム等で構成され、付加データ生成部8は、動作プログラムを格納した記憶手段とこの動作プログラムを実行して演算処理を行い検出結果に基づく付加データを生成する演算手段とで構成され、他の部分は図4に示す付加データシステムと同様に構成されている。
このような構成において、付加データ生成部8は動作プログラムを実行することにより、検出部7の出力信号を解析してTVの表示画面に表示された画像中の特徴的な要素(例えば、色、明るさ及びオブジェクト等)を抽出し、抽出した特長的な要素に基づいて付加データを生成する。
<実施例
次に、本発明の付加データ生成システムの実施例1について図面を参照しつつ説明する。なお、本実施例は、前述の基本構成例に示す付加データ生成システムを構成する照明装置の他の例を示すものである。前述の基本構成例に示す付加データ生成システムと比較すると、TVの表示画面周辺部に配置された照明装置を変更したものであり、他の部分は基本構成例に示す付加データシステムと同様に構成されている。
図6は、本発明の付加データ生成システムの実施例を示す説明図であり、TVの表示画面及び当該表示画面の周辺部に配置された照明装置のみを示す。
TV201の表示画面251の縁部に配置された照明装置266aは、例えば、RGB3種類のLEDが複数個配列されてなる表示部、プロジェクターまたはプロジェクター用スクリーンである。
本実施例においては、プレイヤによるコントローラの操作に従ってゲーム機の演算処理部で出力データ(画像データ及び音データ)を生成するとともに、付加データ生成システムの記憶手段に格納されている動作プログラムを演算処理手段で実行することによって、前記画像データに基づく付加データを生成し、本来、TV201の表示画面251内に表示される画像を表示画面251と照明装置266aとからなる領域に表示すると同時に、他の照明装置(図4中の照明装置61〜65、67)を前述の基本構成例と同様に動作させる。即ち、表示画面251よりも低く、かつ、前記照明装置61〜64による出力よりも高い解像度の画像を照明装置266aに表示させることができ、表示画面251から照明装置266aを経て照明装置61〜64に至るまで解像度を段階的に変更することができる。その結果、表示画面251の画像の切れ目を感じさせることなく、前述の基本構成例と同様の効果を得ることができる。なお、人の視覚機能の認識能力は画面中央部から離れる程低くなるため、表示画面251の外側に表示される画像や照明の解像度を落としても臨場感を高めることができ、情報伝達効果を付加することができる。
次いで、本実施例の一具体例について図6を参照しつつ説明する。
図6では、表示画面251にオブジェクトとして車211を含む画像が表示されている。車211は紙面左方向へ向かってヘッドライト211aを点灯させた状態で走行している。さらに、照明装置266aの領域Aにはヘッドライト211aから出力された光を示す白く光った画像が表示されており、その他の領域には車211の背景が表示されている。さらに、照明装置266aの外側には、照明装置61〜64のうちの少なくとも1つからの出力によって、領域Aと連続する領域B(例えば、空間、プロジェクター用スクリーンまたはTV背後の壁面)に、ヘッドライト211aから出力された光を延長させた状態となるように白く光った光または画像が表示されている。なお、照明装置61〜64のうち少なくとも領域Bへの出力を行う照明装置は、スポットライトまたはプロジェクターから構成されて、もしくはスポットライトまたはプロジェクターを内蔵しており、これらスポットライトまたはプロジェクターによって領域Bへの出力が行われることが好ましい。
また、他の具体例として、これから表示画面に敵が表示されるときに、前記照明装置61〜64のうちの少なくとも1つで敵の影や色の光(または画像)をTV背後の壁面等に映し出しておき、前記敵の影や色の光(または画像)をTVの表示画面に近づけていく場合には、敵の影や色の光(または映像)が照明装置266aにかかった時点で、この照明装置266aにも敵の影や色の映像(最初は一部分のみ)を映し出し再現するといった動作を実施するものがある。この場合、コントローラの操作に従って動作制御部で画像データ及び音データを生成するとともに、前記画像データに基づいて、付加データ作成システムを構成する記録手段に格納されている動作プログラムを当該付加データ作成システムを構成する演算手段で実行し、照明装置266a、61〜64の動作制御を行う付加データを生成すればよい。このような動作を実施することによって、敵が近づいてくる臨場感をより高めることができ、情報伝達効果を付加することができる。
また、さらに他の具体例として、表示画面に表示される画像にオブジェクトとして人物が含まれる場合に、当該人物の顔の表情を認識し、この認識結果に合わせて照明装置266a、61〜64の出力を制御してもよい。この場合、コントローラの操作に従って動作制御部で画像データ及び音データを生成するとともに、前記画像データに基づいて、付加データ作成システムを構成する記録手段に格納されている動作プログラムを当該付加データ作成システムを構成する演算手段で実行し、照明装置266a、61〜64の動作制御を行う付加データを生成すればよい。このような制御を行うことによって、画像の感情表現に厚みを増すことができる。なお、付加データ作成システムは、ソース部から出力された出力信号を解析して人物の顔の表情を認識するものであってもよく、また、表示画面を監視する検出部(図3参照)からの出力信号を解析して人物の顔の表情を認識するものであってもよい。
<実施例
次に、本発明の付加データ生成システムの実施例について図面を参照しつつ説明する。なお、本実施例では、前述の基本構成例に示す付加データ生成システム(図4参照)にサラウンドスピーカシステムを付加したものについて説明する。即ち、基本構成例に示す付加データ生成システムは照明装置のみで第2出力部を構成しているが、本実施例の付加データ生成システムは照明装置とサラウンドスピーカシステムとで第2出力部を構成している。
図7は、本発明の実施例2に係る付加データ生成システムが配置された居間の一例を示す説明図であり、図4に示す付加データ生成システムと同様の部位には同じ符号を付している。
この付加データ生成システムは、居間100の四隅に照明装置61〜64とともに4ch(チャンネル)のサラウンドスピーカ361〜364が、TV101の表示画面51の当該表示画面51に対向する位置から見て左右両端部に左右のフロントスピーカ365,366が、表示画面51の当該表示画面51に対向する位置から見て下端部中央部にセンタースピーカ(不図示)が、当該センタースピーカ近傍に低音域の音を出力するサブウーファ367がそれぞれ配置されている。即ち、これらサラウンドスピーカ361〜364、フロントスピーカ365,366、センタースピーカ及びサブウーファ367によって7.1chのサラウンドスピーカシステムが構成されている。
さらに、ゲーム機11内に配置された付加データ生成部は、ゲーム機11内の前記信号処理部(不図示)で生成された画像データ及び音データを解析して、前記照明装置61〜67、サラウンドスピーカ361〜364、フロントスピーカ365,366、センタースピーカ及びサブウーファ367をそれぞれ制御するための複数の付加データ(音データ)を生成する。
本実施例の付加データ生成システムは、サラウンドスピーカシステムを備えていること、及び付加データ生成部が照明装置61〜67のみならずサラウンドスピーカシステムを制御するための付加データも生成することを特徴としており、その他の構成は、図4に示す付加データ生成システムと同様のものである。但し、ここでは、プレイヤの手中に保持されるコントローラ21として、コントローラ21本体に加えられた変化を検出する加速度センサを内蔵したものが用いられる。また、このコントローラ21は、第2出力部構成部材として、臨場感を高めるための音を出力する手元用スピーカ21aをさらに内蔵したものであってもよい。
前記コントローラ21は、加速度センサによって検出した変化状態(変化量と変化方向とのうちの少なくとも一方)に従ってゲーム機11に操作信号を出力する。ゲーム機11では、操作信号に基づいて読取装置によるゲーム用ソフトウエアの読み取り及び信号処理部による演算処理を実施することによって出力データ及び付加データの生成が実施される。その結果、出力データに従って、第1出力部を構成するTV101の表示画面51とスピーカとが画像または音をそれぞれ出力し、付加データに従って、第2出力部を構成する照明装置61〜66とサラウンドスピーカシステム(サラウンドスピーカ361〜364、フロントスピーカ365,366、センタースピーカ及びサブウーファ367)と手元用スピーカ21aとが光、映像及び音のうちのいずれか1つをそれぞれ選択的に出力する。
前記付加データに基づく出力の具体例1としては、例えばゲーム用ソフトウエアが野球ゲームを実施するものであった場合において、表示画面51内に表示されたピッチャーがボールを投げた直後に、プレイヤの前方(表示画面51側)からボールが飛んでくるかのようにフロントスピーカ365,366から効果音を発生させるといったものがある。このような効果音を出力することによって、臨場感をより高めることができる。
また、具体例2としては、表示画面51に表示されたピッチャーの送球に合わせてプレイヤがコントローラ21をバットのようにスイングし、ゲーム空間でバットにボールを当てることができたときに、実際にバットにボールが当たったかのように手元用スピーカ21aから効果音を発生させるといったものがある。このとき、同時に、居間100に配置された照明装置(例えば天井に配置された照明装置65)から通常よりも明るい光(鋭い光)を出力させてもよい。さらに、ゲーム空間内でバットで打ったボールが長打となったときに、ボールの軌跡及び守備が移動する様子が表示画面51に表示されるとともに、打者が走っている足音(土を蹴る音)のような効果音を手元用スピーカ21aから出力し、かつ、スタンドからの歓声のような効果音をサラウンドスピーカシステムから出力してもよい。またさらに、ゲーム空間内で打者が本塁に立ったときや本塁に戻り点が入ったときに、表示画面51に画像を表示しセンタースピーカ等からアナウンサーの実況のような効果音を出力するとともに、スタンドからの歓声のような効果音をサラウンドスピーカシステムから出力してもよい。この場合においても、照明装置61〜67から通常よりも明るい光を瞬くように出力させてもよい。このような効果音や光を出力することによって、臨場感をより高めることができる。
さらに、具体例3としては、コントローラ21を振り動かすようにプレイヤが操作することにより、居間100及びコントローラ21内に配置された各種スピーカから音を出力させる、または出力される音を変化させるといったものがある。即ち、この具体例では音データに特化して付加データを生成している。
より具体的には、ゲーム用ソフトウエアがギターの模擬演奏を実施するものであった場合において、プレイヤがコントローラ21をストローク演奏を行うように手首のスナップを効かせながら振り動かしたときに、コントローラ21の動きに合わせて例えば手元用スピーカ21aからギター音を出力させる。このように、手元用スピーカ21aから音を出力することによって、実際にギター演奏をしているときのような臨場感を得ることができる。
また、ゲーム用ソフトウエアがオーケストラの模擬演奏を実施するものであった場合において、プレイヤが指揮を行うように手首のスナップを効かせながらコントローラ21を振り動かしたときに、振り動かす強弱やコントローラ21の向きに応じて演奏する楽器数または種類(音の数)を変化させ、さらに、振り動かすリズムに応じて演奏のリズムも変化させる。コントローラの向きは表示画面51上端部に並べた赤外線LEDをコントローラの赤外線センサで感知することで判別する。ここでは、TV101のスピーカのみならずサラウンドスピーカシステム(主にサラウンドスピーカ361〜364)から音を出力することによって、臨場感を向上させることができる。さらに、楽器種によって音を出力するスピーカを切り替えてもよい。この場合、プレイヤにとって音が聞こえてくる方向を楽器種別に異ならせることができる。なお、このように、オーケストラの擬似演奏を行う場合には、複数種の楽器を擬似演奏するため、表示画面51には演奏中の楽器種を示す画像が表示されている。
応用例1
次に、本発明の付加データ生成システムの応用例1について図面を参照しつつ説明する。なお、本応用例では、前述の実施例に示す付加データ生成システム(図7参照)にバイブレータを付加したものについて説明する。即ち、基本構成例に示す付加データ生成システムは照明装置とサラウンドスピーカシステムとで第2出力部を構成しているが、本応用例1の付加データ生成システムは照明装置とサラウンドスピーカシステムと手元用スピーカとバイブレータとで第2出力部を構成している。
図8は、本発明の応用例1に係る付加データ生成システムが配置された居間の一例を示す説明図であり、図7に示す付加データ生成システムと同様の部位には同じ符号を付している。
応用例の付加データ生成システムは、コントローラ21にバイブレータ21bを内蔵していること、及び付加データ生成部がこのバイブレータ21bを制御するための付加データも生成することを特徴としており、その他の構成は、図7に示す付加データ生成システムと同様のものである。
前記付加データに基づく出力の具体例1としては、例えばゲーム用ソフトウエアが野球ゲームを実施するものであった場合において、ゲーム空間でボールがバットに当たったときに、コントローラ21の手元用スピーカ21aから効果音を発生させると同時に、実際に手に握ったバットにボールが当たったかのようにバイブレータ21bを短く鋭く振動させるといったものがある。このような効果音及び振動を出力することにより、実際にバットでボールを打ったときのような臨場感を実現することができる。
また、具体例2としては、ゲーム用ソフトウエアがギターの模擬演奏を実施するものであった場合において、ギター演奏をするようにプレイヤがコントローラ21を振り動かした際に、手元用スピーカ21aからギター音を出力すると同時に、実際に弦に触れたかのようにバイブレータ21bを細やかに振動させるといったものがある。このようなギター音及び振動を出力することにより、実際にギター演奏をしているときのような臨場感を実現することができる。
応用例1の変形例1>
次に、本発明の付加データ生成システムの応用例1の変形例1について説明する。
図9は、本発明の応用例1の変形例1に係る付加データ生成システムが配置された居間の一例を示す説明図であり、図8に示す付加データ生成システムと同様の部位には同じ符号を付している。
この付加データ生成システムは、コントローラ21に表示装置21cが設けられていること、及び付加データ生成部が表示装置21cを制御するための付加データも生成することを特徴としており、その他の構成は、図8に示す付加データ生成システムと同様のものである。即ち、ここでは、居間100に配置された照明装置61〜66とサラウンドスピーカシステム(サラウンドスピーカ361〜364、フロントスピーカ365,366、センタースピーカ及びサブウーファ367)と手元用スピーカ21aとバイブレータ21bと表示装置21cとで第2出力部を構成している。
前記表示装置21cは、図形や文字等で構成された情報を表示しうるものまたは発光色及び(または)発光パターンを変更しうるものであり、例えば液晶表示装置、RGBのLEDで構成されたLED表示装置、またはRGBのLEDのうちの少なくとも一つのLEDからなる発光装置である。
前記付加データに基づく出力の具体例としては、例えばゲーム用ソフトウエアがオーケストラの模擬演奏を実施するものであった場合において、プレイヤが指揮を行うようにコントローラ21を振り動かしたときに、TV101のスピーカやサラウンドスピーカシステムから音を出力すると同時に、指揮の完成度を示すレベルを表示装置21cに表示するといったものがある。この場合、表示装置21cは、特定の情報を表示することによってレベルを示すものであってもよく、また、発光の強度や点灯数によってレベルを示すものであってもよい。このような音及びレベル表示を出力することにより、臨場感を向上させることができるとともに、指揮の完成度を明示することで緊張感を付与することができる。
なお、この具体例においては、手元用スピーカ21a及びバイブレータ21bを備えていないものをコントローラ21として用いてもよい。
応用例1の変形例2>
次に、本発明の付加データ生成システムの応用例1の変形例2について説明する。
図10は、本発明の応用例1の変形例2に係る付加データ生成システムが配置された居間の一例を示す説明図であり、図8に示す付加データ生成システムと同様の部位には同じ符号を付している。
この付加データ生成システムは、居間100に空調システム461が設けられていること、及び付加データ生成部が空調システム461を制御するための付加データも生成することを特徴としており、その他の構成は、図8に示す付加データ生成システムと同様のものである。即ち、ここでは、居間100に配置された照明装置61〜66とサラウンドスピーカシステム(サラウンドスピーカ361〜364、フロントスピーカ365,366、センタースピーカ及びサブウーファ367)と手元用スピーカ421b1(図8中の手元用スピーカ21aと同様の構成を有するものである。)とバイブレータ421b2(図8中のバイブレータ21bと同様の構成を有するものである。)と居間100の天井に配置された空調システム461とで第2出力部を構成している。
前記付加データ生成システムを備えた電子機器の一例として、スキーの疑似体験を実施するゲーム用ソフトウエアがセットされたゲーム機について説明する。
この場合、コントローラは、床に配置されたメインコントローラ421aとプレイヤの手元に保持されるサブコントローラ421bとから構成される。なお、ここでは、メインコントローラ421a及びサブコントローラ421bとゲーム機11との間は赤外線等の光信号を用いた無線通信システムによって接続されており、操作信号及び付加データ等といった信号の送受信はこの無線通信システムを介して行われる。
前記メインコントローラ421aは、メインコントローラ421a上に立った状態でプレイヤが体重移動を行ったときに体重移動のタイミング、移動方向及び移動量等をそれぞれ検出する種々のセンサを備えており、この検出結果に基づいて操作信号を発生するものである。また、前記サブコントローラ421bは、プレイヤがストックをつくかのように振り動かしたときに動かしたタイミング、方向及び量等を検出する加速度センサを内蔵しており、この検出結果に基づいて操作信号を発生するものである。さらに、サブコントローラ421bは、手元用スピーカ421b1及びバイブレータ421b2も備えている。
このような構成の付加データ生成システムにおいて実施される前記付加データに基づく出力の具体例としては、例えば、メインコントローラ421a上に立ち、サブコントローラ421bを手で保持した状態のプレイヤが、TV101の表示画面51に表示されるスキー場の画像を見ながら、この画像に合わせて実際にスキーをしているかのようにメインコントローラ421a上で体重移動を行いかつサブコントローラ421bを振り動かしたときに、ゲーム空間で斜面を滑走するスピードに合わせて強弱調整が行われた冷風が空調システムからプレイヤに向けて吹き付けられ、ゲーム空間でストックを付くたびにバイブレータ421b2が振動し、手元用スピーカ421b1からは雪にストックを付いたときの音が出力されるといったものがある。このような送風、音及び振動を出力することにより、臨場感を向上させることができる。
さらに、照明装置61〜64によってプレイヤの周囲に雪山の風景が前から後ろに流れていくかのような照明効果または画像表示を行い、サラウンドスピーカ361〜364から滑走時の音を出力してもよく、この場合には臨場感をさらに向上することができる。
応用例2
次に、本発明の付加データ生成システムの応用例2について図面を参照しつつ説明する。なお、本応用例は、前述の実施形態1において図1に示す付加データ生成システムをより具体的に説明したものである。但し、図1に示す付加データ生成システムを構成する動作制御部及び付加データ生成部を1つの演算処理部で実現している。
図11は、本発明の応用例2に係る付加データ生成システムを実現する遊戯装置の一例を示す説明図である。同図には、遊戯装置の一例としてパチンコ台を示したが、例えばスロット台等であってもよい。
このパチンコ台500は、ソース部であり、パチンコ台500の制御プログラム及び制御に関る制御データを格納した記録媒体から当該制御プログラム及び制御データを読み取る読取部(不図示)と、操作部であり、パチンコ玉打出し用の調整ダイヤル(スロット台の場合はスロットレバーまたはボタン)521と、動作制御部であり、前記読取部を介して読み取った制御プログラム及び制御データ、ならびに調整ダイヤル521の操作に従って変化するパチンコ玉501の状態に基づいてパチンコ台500の基本的な動作を制御するとともに、パチンコ台500の付加的な動作も制御する演算処理部(不図示)と、後述の第1出力部及び第2出力部を兼ねた出力部とを備えてなるものである。
さらに、本応用例では、図1に示す付加データ生成システムを個々に構成する前記第1出力部及び第2出力部を個別に設けることなく同一の出力部で実現している。但し、パチンコ台500は出力部を複数種備えており、具体的には、パチンコ台500表面の中央部に設けられた表示装置551、音を出力するスピーカ552a,552b、パチンコ台500の端辺部に配置された照明装置553を備えている。
一般的に、調整ダイヤル521の操作に従って発射したパチンコ玉501は、パチンコ台500の盤面502表面の上部から下方に向かって、複数の釘等の障害物503との衝突によりその進行方向を変えながら落下する。この落下によってパチンコ玉501は音及び振動を発生するため、パチンコ玉501自体も出力部を構成する。但し、パチンコ玉501の動作は演算処理部によって制御されるものではなく、調整ダイヤル521の操作によって制御されるものである点が図1に示す付加データ生成システムの構成と異なっている。
図11に示すパチンコ台500では、調整ダイヤル521の操作によって発射したパチンコ玉501が盤面502表面を落下していく際の状態(例えば、所定の部位をパチンコ玉501が通過する等)に従って、演算処理部が制御プログラムを実行することにより表示部の動作を制御するための画像データ、音データ及び動作制御データを変化させている。その結果、前記表示装置551に表示される画像、前記スピーカ552a,552bから出力される音、及び前記照明装置553の照明パターンや色が変化する等といった基本的な動作の変化が実施される。
さらに、図11に示すパチンコ台500では、調整ダイヤル521の操作によって発射したパチンコ玉501の状態に従って付加的な動作も変化する。例えば、落下していく際の状態によりリーチが近い場合に、照明装置553等の点灯状態及び表示装置551に表示される画像が変化する等といった付加的な動作の変更が実施され、リーチが近いことが示される。なお、照明装置は、図11に示す照明装置553に限定されるものではなく、例えば、パチンコ台500端辺部の他の部位にもうけられたもの、釘等の障害物503に設けられたもの、及び盤面502表面に設けられたもののうちの少なくとも1つがさらに含まれていてもよい。
また、出力部として、盤面502表面のパチンコ玉501が通過しうる部位(以下、単に「通過部位」とも言う。)に配置された複数のパチンコ玉検出装置(不図示)及び複数の照明装置(不図示)がさらに含まれていてもよい。この場合には、演算処理部の制御により、パチンコ玉501が一つのパチンコ玉検出装置上を通過したときに、当該一つのパチンコ玉検出装置近傍に配置された照明装置を点灯させることによって、パチンコ玉501の軌跡を強調する彗星の尾のような照明パターンを実現する。
応用例の付加データ生成システムによれば、遊戯装置のアミューズメント性をより強めることができる。
応用例3
次に、本発明の付加データ生成システムの応用例3について説明する。なお、本応用例は、前述の実施形態1において図1に示す付加データ生成システムをより具体的に説明したものである。
応用例では、双方向(インタラクティブ)テレビを視聴可能なTVにおいて付加データ生成システムを実現した場合について説明する。
一般的に、双方向テレビは、放送事業者と視聴者との間で双方向に情報が流れる方式のサービスである。当該双方向テレビを利用することによって、番組内でリクエストを募り受け取ったリクエストに応じたり、番組を視聴しながらオンラインショッピングを実施したり、視聴者が目的とする地域のみの天気情報を表示させたり、クイズ番組に参加して回答をしたり、アンケートに答えたりと、リアルタイムに視聴者の要望を反映させることができる。このような双方向テレビは、デジタル放送やケーブルテレビ(CATV)を利用して実現されている。
このTVは、ソース部であり、テレビ局から視聴者へ送信された双方向テレビ用の信号を受信する通信端末機と、操作部であり、視聴者によって操作されるリモコンと、当該リモコンを用いた操作によって選択されたチャンネルの画像データ及び音データを通信端末機で受信した信号から得るとともに、これら画像データ及び音データに基づいて付加データを生成する動作制御部と、画像データを出力する表示画面と、音データを出力するスピーカと、第2出力部であり、付加データに基づいて動作する照明装置及び付加スピーカとを備えている。なお、付加データに基づいて動作する照明装置としては、例えば図7に示す照明装置61〜65を備えており、付加スピーカとしては、リモコンに設けられたスピーカまたは視聴者近傍に配置されたスピーカを備えている。
一般に、視聴者がクイズ番組のチャンネルを選択している場合において、表示画面に表示されたクイズの問題に対して視聴者がリモコンで「A」という回答を選択したとき、この視聴者が「A」を選択したことを示す信号が通信端末機からテレビ局へ送信され、「A」を選択した回答者の一人としてカウントされる。これら選択結果及びカウント結果は、直ちに、表示画面に表示される画像やスピーカから出力される音に反映される。その後、回答を選択する時間が終了した後に、テレビ局から送信された信号に基づいて視聴者の回答が正解であったか不正解であったかが表示画面に表示される。
このような場合の付加データに基づく出力の具体例としては、正解が発表される際に居間に配置された照明装置が暗くなるといったものがある。この場合には、動作制御部で、テレビ局から送信された信号から得た画像データを解析し、正解の発表を行う画像データが得られたタイミングに、照明装置を暗くする付加データを生成する。
さらに、視聴者の回答が正解であれば、付加スピーカからファンファーレのような正解を示す音が出力されるとともに照明装置が白く明るく光りまたたき、不正解であれば、天井に配置された全体照明用の照明装置のみが赤く光るように、付加データの生成が行なわれる。この場合には、画像データより得られた正解番号と、視聴者が押したリモコンの番号とを照合し、この判断結果に基づいて付加データを生成する。
応用例の付加データ生成システムによれば、臨場感を高めることができる。
応用例4
次に、本発明の付加データ生成システムの応用例4について説明する。
応用例は、前述の実施形態1または実施形態2に示す付加データ生成システムに、操作者用センサが付加されてなるものである。
前記操作者用センサは、プレイヤまたは視聴者等といった操作者の身体に取り付けられた身体情報をモニタするセンサであり、具体的には、指、手首、足首または顔等に固定された脈拍、体内酸素濃度、血圧、発汗、呼吸数または視線等を検出する複数のセンサからなる。なお、指に固定するタイプのセンサについては、操作部にこのセンサを内蔵しておき、操作者が操作部を保持することで測定が行えるように構成されていてもよい。
この操作者用センサでは検出結果は付加データ生成部に入力される。当該付加データ生成部は、この検出結果に基づいて操作者が緊張状態にあるか否かを判断し、緊張状態にあるときには付加データを緊張状態を緩和するためのものに切り替える。
なお、操作者用センサの検出結果を付加データ生成部に入力する代わりに動作制御部に入力し、操作者用センサの検出結果に基づき、付加データ生成部の動作を動作制御部によって制御してもよい。さらに、動作制御部内に付加データ生成部を設けてもよい。
図12は、図1に示す付加データ生成システムに操作者用センサを付加した場合の一実施例を示す説明図である。
図12に示す付加データ生成システムでは、操作者用センサ602の出力が付加データ生成部3に入力されており、この付加データ生成システムのその他の構成については図1に示す付加データ生成システムと同様であるため詳細な説明を省略する。
例えば、第1出力部5でテレビ番組を放送するまたはDVD画像を再生する場合、付加データ生成部3には操作者用センサ602の出力が常時入力されるため、操作者の緊張状態を常に監視することができる。
このような監視を行っているときに、予め設定されたレベルよりも操作者の脈拍が高くなる、血圧が高くなるまたは低くなる、発汗がある、呼吸数が荒くなること等によって、操作者用センサの検出結果が操作者が緊張状態になることを示すと、付加データ生成部3で生成される付加データが緊張状態を緩和するものに切り替わり、第2出力部の出力が切り替わる。例えば、第2出力部が照明装置及び付加スピーカで構成されている場合、照明装置を明るいリラックスできる色に発光させたり、付加スピーカをOFF(オフ)状態に切り替えたりする。なお、緊張状態を緩和するための付加データは予め設定され記憶されている。
応用例の付加データ生成システムによれば、通常時には実施形態1または実施形態2に示す付加データ生成システムと同様に臨場感を向上させることができ、さらに、操作者が緊張状態にある場合には、付加データを緊張状態を緩和するためのものに切り替えることによって、操作者の過度のストレスを軽減することができる。
なお、第1出力部5でテレビ番組を放送するまたはDVD画像を再生する場合に限らず、前述したような付加データ生成システムを例えばゲーム機に搭載してもよい。この場合には、操作者用センサによる検出結果に基づきプレイヤの焦りが予め設定されたレベルよりも高まっていると判断されたときに、照明装置から出力される光を明るくする等リラックスできるものに切り替えることや付加スピーカの音量を下げるまたはOFFすることができる付加データを付加データ生成部にて生成する。さらに、前記動作制御部が、操作者用センサの検出結果に基づいてゲームの難易度を調整するものであってもよい。この場合には、プレイヤの焦りが予め設定されたレベルよりも高まっていると判断されたときに、動作制御部によりゲームの難易度を低くする制御が行なわれる。
また、応用例4の変形例1としては、操作者用センサによる検出結果が緊張状態にないことを示しているときに付加データを切り替えて、例えば、サラウンドスピーカシステムのサラウンド効果を利用すること、スピーカから出力される音の音域を広げることや音量を大きくすること、さらに、照明装置から出力される光を極端に暗く(または明るく)することや光の色相を制限したりすることにより、臨場感をさらに向上させることができる付加データ生成部を備えたものがある。
このような付加データ生成部において生成された付加データに基づく出力の具体例としては、例えばゲーム用ソフトウエアが見えない敵を探すシーンを含むゲームを実施するものであった場合において、操作者用センサによって得られる検出結果のうちの少なくとも一部(例えば心拍及び血圧)に関してのみを閾値(上限値等の数値または数値範囲)を設定し、検出結果とこの閾値とを比較して検出結果が閾値を超えないときには、敵の足音がプレイヤの背後から響いて聞こえるようにサラウンドスピーカシステムのサラウンド効果を調整したり、サブウーファを不安定に響かせたりするとともに、照明装置から出力される光の明るさを極端に暗くしたり色相を制限したりするといったものがある。さらに、検出結果が閾値を超えたときには、付加データを切り替えて、サラウンドスピーカシステムの出力をOFFにしたり、照明装置から出力される光のトーンを明るくしたりすることにより、リラックスできる環境を実現する。
このような出力を実施することにより、プレイヤの緊張状態に合わせて臨場感を向上させたり制限したりする等といった調整を行うことができる。
また、応用例4の変形例2としては、操作者用センサによる検出結果に合わせて付加データを切り替えて、照明装置及びサラウンドスピーカシステムの出力を変化させることにより、操作者の環境を調整することができる付加データ生成部を備えたものがある。
このような付加データ生成部において生成された付加データに基づく出力の具体例としては、例えば操作者が気分的に落ち込んでいるときに(即ち、操作者用センサによる検出結果が、呼吸が浅い、ため息が出る、及び視線が下がる等のうちの少なくとも1つを示す内容となったときに)、照明装置から出力される光を操作者がリラックスできる範囲内で明るく調整するといったものや、視聴中のテレビ番組がコマーシャルに切り替わっている間、サラウンドスピーカシステムから操作者がリラックスできる音楽を自動的に出力するといったものがある。また、操作者の体調が急変したときに(即ち、操作者用センサによる検出結果が、血圧や脈拍数の急変、不整脈の発生、及び激しい発汗等のうちの少なくとも1つを示す内容であった場合)、天井に配置された照明装置をノーマルな状態に調整するとともに、天井に配置された照明装置以外の照明装置及びサラウンドスピーカシステムを構成するスピーカの出力をOFFにした後、センタースピーカ等から操作者の体調を落ち着かせるアナウンス(例えば深呼吸やソファーに腰掛けることを促すメッセージ等)を出力するといったものもある。
このような出力を実施することにより、操作者用センサを保持している操作者の健康状態をバックアップすることができ、その結果、付加データ生成システムを、健康を第一に考えた臨場感向上システムとして利用することができる。
なお、前述の操作者用センサを備えた付加データ生成システムに関しては、操作者用センサによる検出結果をソース部自体にフィードバック(入力)してソース部から出力される出力信号を切り替えるように構成してもよいが、検出結果を逐次反映させて細かく制御を行うためには、動作制御部または付加データ生成部にフィードバックすることがより好ましい。
応用例5
次に、本発明の付加データ生成システムの応用例5ついて説明する。
応用例の付加データ生成システムは、操作部に配置された第2出力部が操作部としても機能するように構成されたものである。即ち、付加データに基づく出力を操作者による操作に間接的に利用したものである。
ここでは、一具体例として、前述の応用例1の変形例1に示す付加データ生成システム(図9参照)を構成する表示装置21cをコントローラ21とともに操作部として機能させた場合について説明する。
この場合、前記表示装置21cは赤外LEDおよび赤外線センサを備えており、プレイヤが表示装置21c上方に指等を予め設定された時間かざして出力を遮るといった動作を実施すると、この動作を前記赤外線センサが検出する。この検出結果は動作制御部としての演算処理部に入力され、演算処理部は、この検出結果に基づいてゲーム機11の動作を制御する。前記検出結果に基づく動作制御例としては、プレイヤが前記表示装置21cに指を予め設定された時間(例えば1秒以上)かざしたときにゲーム機11を一時停止状態にするとともにデータ保存動作を行うといったものがある。
応用例の付加データ生成システムによれば、操作をより簡単化することができ、さらに無駄な電力消費を抑えて環境に対して優しい形態を実現することができる。
応用例6
次に、本発明の付加データ生成システムの応用例6について説明する。
応用例の付加データ生成システムは、操作者用センサが操作部としても機能するように構成されたものである。
ここでは、応用例4に示す付加データ生成システムを構成する操作用センサのうち、操作者の視線を検出する視線センサを操作部としても機能させた場合について説明する。
この場合、視線センサは、めがね型の支持フレームに取り付けられたものであり、操作者がTV等の表示画面のどの位置を見ているのかが分かるものである。
付加データ生成システムは、操作者が視線センサを着用した状態で予め設定された動作を実施すると、この動作を視線センサで検出する。この検出結果は動作制御部としての演算処理部に入力され、演算処理部は、この検出結果に基づいてTVの動作を制御する。前記検出結果に基づく動作制御例としては、操作者がTVの表示画面に表示された番組表のうち録画予約をしたい番組の番組欄を予め設定された時間(例えば2秒以上)注視した後に瞬きを予め設定された回数(例えば3回)すばやく実施するといった動作を行うと、注視された番組欄が示す番組の録画予約が完了するといったものである。
また、他の動作制御例としては、視線センサの検出結果に基づいて、操作者がTVの表示画面を一定時間以上見ていないことを動作制御部が認識すると、TVの電源をOFFにすることを即すための出力データ(画像データ及び(または)音データ)が動作制御部から第1出力部へ出力される。この場合、付加データ生成部において、動作制御部から出力された出力データに基づいてTVの電源をOFFにすることを即すための付加データを生成し、この付加データを第2出力部に出力してもよい。
応用例の付加データ生成システムによれば、操作をより単純化することによってより便利な生活が実現できるとともに、無駄な電力消費を抑えることができるため環境にも優しい生活を実現することができる。
応用例7
次に、本発明の付加データ生成システムの応用例7について説明する。
応用例では、防災無線システム用受信機において付加データ生成システムを実現した場合について説明する。
この防災無線システム用受信機は、ソース部であり、テレビ局から送信された信号の中から緊急信号を取り出す緊急信号受信部と、操作部であり、操作者の避難状況を検出する操作者検出センサと、緊急信号受信部で受信した緊急信号が示す情報(緊急情報)を出力するための動作制御を実施する動作制御部と、第1出力部を構成する、TVの表示画面及びスピーカ、ならびに防災無線システム用受信機本体に配置された発光素子部と、第2出力部を構成する、照明装置、スピーカ及びその他出力装置(例えば、図9に示す照明装置61〜67、サラウンドスピーカシステム(サラウンドスピーカ361〜364、フロントスピーカ365,366、センタースピーカ及びサブウーファ367)、手元用スピーカ21a、バイブレータ21b、ならびに表示装置21c等)と、操作者検出センサによる検出結果に従って前記第2出力部へ出力する付加データを生成する付加データ生成部とから構成されている。
一般的な防災無線システム用受信機の動作例としては、地震、台風または津波等が発生した緊急時にテレビ局から緊急信号が送信され、この緊急信号を緊急信号受信部が取り出したときに、動作制御部が、TVの電源をON(オン)状態に(または、TVで出力中の画像及び音を中断)してTVの表示画面及びスピーカから緊急情報を出力するとともに、防災無線システム用受信機本体に配置された発光素子部を赤色に発光させるといったものがある。
さらに、本応用例の防災無線システム用受信機では、前述の動作例と同様に動作制御部から緊急情報を出力するための出力データが出力されている状態において、操作者検出センサの検出結果が操作者が屋外に避難していないことを示している場合(例えば、操作者が操作部を保持したままの状態である場合、または人感センサによって居室内に人がいると判断される場合)には、付加データ生成部が付加データを生成して第2出力部から避難勧告情報を出力する。この避難勧告情報を示す出力の具体例としては、照明装置から出力される光の色を1秒おきに切り替える、サラウンドスピーカシステムから避難勧告情報を示す音を大音量で出力するといったものがある。この出力は、非難が必要な状態が続く間は流し続けても良く、特に、人が居室にいる間は流し続けることが好ましい。また、非難形態および避難勧告情報の内容は、非難情報により異なる。
応用例の付加データ生成システムによれば、緊急時の迅速かつ確実な情報伝達が可能になる。
なお、前記操作者用センサはTVのリモコン等の操作部に配置されたものであってもよい。この場合、緊急信号が送信されていないときには、基本構成例に示す付加データ生成システムと同様に、付加データ生成部で第1出力部への出力データを解析して付加データを生成し、この付加データに従って第2出力部を動作させてもよい。これにより、TVの出力により高い臨場感を付加することができる。
また、前述した実施形態、基本構成例、実施例及び応用例において、出力データ及び付加データに基づく出力は、操作者の状態や操作者が予め実施した設定に応じて適宜変更可能なものであり、前述したものに限定されない。
さらに、前述した実施形態、基本構成例、実施例及び応用例では、操作部から出力された操作信号が動作制御部に入力されているが、この操作信号はソース部に入力されてもよい。これにより、操作部を用いた操作に従ってソース部からの出力信号を切り替えることができる。そのため、前記操作信号をソース部に出力する場合には、出力データを確実に変化させることができる。
なお、前述した基本構成例、実施例及び応用例は、実施形態1〜3をより具体的に示したものであり、本発明を制限するものではない。即ち、本発明の付加データ生成システムは、基本構成例、実施例及び応用例に示す形態に限定されるものではなく、特許請求の範囲から逸脱することなく他の代替の実施例も設計可能である。
本発明の付加データ生成システムは、自宅の居間に設置された出力装置の出力に情報伝達効果を付与する際に活用できる。
本発明の付加データ生成システムの実施形態1を示す説明図である。 本発明の付加データ生成システムの実施形態1の変形例を示す説明図である。 本発明の付加データ生成システムの実施形態2を示す説明図である。 本発明の基本構成例に係る付加データ生成システムが配置された居間の一例を示す説明図である。 図4に示す付加データ生成システムを構成するゲーム機の一例を示す説明図である。 本発明の付加データ生成システムの実施例を示す説明図であり、TVの表示画面及び当該表示画面の周辺部に配置された照明装置のみを示す。 本発明の実施例2に係る付加データ生成システムが配置された居間の一例を示す説明図である。 本発明の応用例1に係る付加データ生成システムが配置された居間の一例を示す説明図である。 本発明の応用例1の変形例1に係る付加データ生成システムが配置された居間の一例を示す説明図であ 本発明の応用例1の変形例2に係る付加データ生成システムが配置された居間の一例を示す説明図である。 本発明の付加データ生成システムの応用例2を実現する遊戯装置の一例を示す説明図である。 図1に示す付加データ生成システムに操作者用センサを付加した場合の一実施例を示す説明図である。 従来の画像呈示システムの一例を示す説明図である。 従来の照明ユニットの一例を示す説明図である。
符号の説明
1 ソース部
2 操作部
3,8 付加データ生成部
4,41 動作制御部
5 第1出力部
6 第2出力部
7 検出部
11 ゲーム機
21 コントローラ
21a 手元用スピーカ
21b バイブレータ
21c 表示装置
51 表示画面
61〜67 照明装置
361〜364 サラウンドスピーカ
365,366 フロントスピーカ
367 サブウーファ

Claims (18)

  1. 出力信号を供給するソース部と、
    前記ソース部から供給された前記出力信号から出力データを得る動作制御部と、
    前記出力データに基づく出力を実施する第1出力部と、
    前記動作制御部で得られた前記出力データを解析して出力データの特徴的な要素を強調する、音データを含む付加データを生成する付加データ生成部と、
    前記付加データ生成部で生成した前記付加データに基づく出力を実施する第2出力部と、
    前記出力データを変化させる操作信号を前記動作制御部へ出力する操作部と、を備え、
    前記動作制御部で得られた前記出力データが、前記操作部から出力される前記操作信号に基づいて変化する付加データ生成システムであって、
    前記第2出力部は、前記第1出力部からの出力を鑑賞する領域の周辺部を取り囲むように配置された複数の照明装置を備えるとともに、前記音データに基づく出力を実施するサラウンドスピーカシステムを含んで構成され、
    前記付加データ生成部は、前記出力データの変化に同調して前記付加データを変化させるとともに、前記付加データのうちの少なくとも一部分は、前記出力データの変化に同期して変化させる構成とされていることを特徴とする付加データ生成システム。
  2. 出力信号を供給するソース部と、
    前記ソース部から供給された前記出力信号から出力データを得るとともに、当該出力データを解析して出力データの特徴的な要素を強調する、音データを含む付加データを生成する動作制御部と、
    前記出力データに基づく出力を実施する第1出力部と、
    前記付加データに基づく出力を実施する第2出力部と、
    前記出力データを変化させる操作信号を前記動作制御部へ出力する操作部と、を備え、
    前記動作制御部で得られた前記出力データが、前記操作部から出力される前記操作信号に基づいて変化する付加データ生成システムであって、
    前記第2出力部は、前記第1出力部からの出力を鑑賞する領域の周辺部を取り囲むように配置された複数の照明装置を備えるとともに、前記音データに基づく出力を実施するサラウンドスピーカシステムを含んで構成され、
    前記動作制御部は、前記出力データの変化に同調して付加データを変化させるとともに、前記付加データのうちの少なくとも一部分は、前記出力データの変化に同期して変化させる構成とされていることを特徴とする付加データ生成システム。
  3. 出力信号を供給するソース部と、
    前記ソース部から供給された前記出力信号から、画像データを含む出力データを得る動作制御部と、
    前記出力データに基づく出力を実施する第1出力部と、
    前記第1出力部からの出力を監視する検出部と、
    前記検出部での検出結果に基づいて前記第1出力部からの出力の特徴的な要素を強調する付加データを生成する付加データ生成部と、
    前記付加データ生成部で生成した前記付加データに基づく出力を実施する第2出力部と、
    前記出力データを変化させる操作信号を前記動作制御部へ出力する操作部と、を備え、
    前記動作制御部で得られた前記出力データが、前記操作部から出力される前記操作信号に基づいて変化する付加データ生成システムであって、
    前記付加データ生成部は、前記出力データの変化に同調して前記付加データを変化させるとともに、前記付加データのうちの少なくとも一部分は、前記出力データの変化に同期して変化させる構成とされ、
    前記第1出力部は、前記画像データに基づいて画像を表示する表示画面を含み、
    前記第2出力部は、前記表示画面の縁部に配置された照明装置と、前記表示画面の近傍に配置された照明装置とを含み、前記表示画面の縁部に配置された前記照明装置及び前記表示画面の近傍に配置された前記照明装置は、前記表示画面の画像に対して切れ目ない出力を実施することを特徴とする付加データ生成システム。
  4. 請求項1,2または3記載の付加データ生成システムであって
    前記照明装置は、赤色発光ダイオードセル、緑色発光ダイオードセル及び青色発光ダイオードセルのうちの少なくとも1つを用いて構成されており、種々の色温度の光を出力する発光ダイオード照明装置である付加データ生成システム。
  5. 請求項1,2または3記載の付加データ生成システムであって
    前記照明装置は、シーリングライト、ペンダント、ブラケット、ダウンライト、スポットライト、プロジェクター、ホログラム及びレーザー描画装置のうちのいずれか1つである付加データ生成システム。
  6. 請求項1,2または3記載の付加データ生成システムであって
    前記ソース部は、通信網を介してテレビ局、画像配信会社または音楽配信会社から配信された情報を受信することが可能な通信端末機、もしくは各種電子機器の動作制御を行うためのプログラム及びデータを格納した記憶媒体から前記プログラム及びデータを読み出す読取装置である付加データ生成システム。
  7. 請求項1,2または3記載の付加データ生成システムであって
    前記操作部、TV、VCR、CDプレーヤ、DVDプレーヤ、BDプレーヤ、PC、ゲーム機または遊戯装置のコントローラまたはリモートコントローラ、操作者の身体情報をモニタするセンサまたはアイテム、もしくは防災無線システム用受信機を構成する操作者検出センサである付加データ生成システム。
  8. 請求項1,2または3記載の付加データ生成システムであって
    前記操作部は、前記出力データを変化させる操作信号を前記動作制御部に出力するものであり、当該動作制御部は、前記操作信号に基づいて出力する出力信号を変化させるものである付加データ生成システム。
  9. 請求項1,2または3記載の付加データ生成システムであって
    前記操作部は、前記出力データを変化させる操作信号を前記ソース部に出力するものであり、当該ソース部は、前記操作信号に基づいて出力する出力信号を変化させるものである付加データ生成システム。
  10. 請求項1または2記載の付加データ生成システムであって
    前記出力データは、画像データを含、前記付加データは、前記画像データから抽出された特徴的な要素である画像の明るさ、画像に含まれる色、及び画像に含まれるオブジェクトのうちの少なくとも1つに基づいて生成される付加データ生成システム。
  11. 請求項1または2記載の付加データ生成システムであって
    前記サラウンドスピーカシステムは、前記第1出力部を介して対向する位置に配置された2つのサラウンドスピーカと、前記第1出力部からの出力を鑑賞する領域を介して対向する位置に配置された2つのサラウンドスピーカと、前記第1出力部からの出力を鑑賞する領域から見て第1出力部の左右近傍に配置された2つのフロントスピーカと、前記第1出力部からの出力を鑑賞する領域と前記第1出力部との間に配置された1つのセンタースピーカと、前記第1出力部近傍に配置された1つのサブウーファとから構成されたものである付加データ生成システム。
  12. 請求項11記載の付加データ生成システムであって
    前記第2出力部、各サラウンドスピーカとともに配置された4つの照明装置を含んでなるものである付加データ生成システム。
  13. 請求項1または2記載の付加データ生成システムであって
    前記第1出力部からの出力を鑑賞する領域の周辺部を取り囲むように配置された前記複数の照明装置のうちの少なくとも1つは、出力する光の強度及び色度のうちの少なくとも一方が調整可能に構成されている付加データ生成システム。
  14. 請求項12記載の付加データ生成システムであって
    前記照明装置は出力する光の強度及び色度のうちの少なくとも一方が調整可能に構成されている付加データ生成システム。
  15. 請求項1,2または3記載の付加データ生成システムであって
    前記第2出力部は、前記操作部に配置された、スピーカ、バイブレータ及び表示装置のうちの少なくとも1つを含んでなるものである付加データ生成システム。
  16. 請求項1,2または3記載の付加データ生成システムであって
    前記第2出力部は、前記第1出力部からの出力を鑑賞する領域の空調を行う空調設備を含んでなるものである付加データ生成システム。
  17. 請求項記載の付加データ生成システムであって
    前記付加データの少なくとも一部分は、前記身体情報をモニタするセンサまたはアイテム、もしくは操作者検出センサによる検出結果に基づいて切り替えられるものである付加データ生成システム。
  18. 請求項15記載の付加データ生成システムであって
    前記スピーカ、バイブレータ及び表示装置のうちの少なくとも1つは操作部を兼ねてなるものである付加データ生成システム。
JP2008192453A 2008-07-25 2008-07-25 付加データ生成システム Expired - Fee Related JP5323413B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2008192453A JP5323413B2 (ja) 2008-07-25 2008-07-25 付加データ生成システム
CN2009801281527A CN102100081B (zh) 2008-07-25 2009-06-23 附加数据生成系统
PCT/JP2009/061390 WO2010010776A1 (ja) 2008-07-25 2009-06-23 付加データ生成システム
EP09800291A EP2312845A4 (en) 2008-07-25 2009-06-23 SYSTEM FOR GENERATING ADDITIONAL DATA
US13/055,814 US20110115979A1 (en) 2008-07-25 2009-06-23 Additional data generation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008192453A JP5323413B2 (ja) 2008-07-25 2008-07-25 付加データ生成システム

Publications (2)

Publication Number Publication Date
JP2010034687A JP2010034687A (ja) 2010-02-12
JP5323413B2 true JP5323413B2 (ja) 2013-10-23

Family

ID=41570242

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008192453A Expired - Fee Related JP5323413B2 (ja) 2008-07-25 2008-07-25 付加データ生成システム

Country Status (5)

Country Link
US (1) US20110115979A1 (ja)
EP (1) EP2312845A4 (ja)
JP (1) JP5323413B2 (ja)
CN (1) CN102100081B (ja)
WO (1) WO2010010776A1 (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2514275B1 (en) * 2009-12-17 2015-04-22 Koninklijke Philips N.V. Ambience cinema lighting system
JP2011254282A (ja) * 2010-06-02 2011-12-15 Nippon Logics Kk 映像・サウンドコンテンツ、これを製作する方法、これを記録した記録媒体及び映像・サウンド視聴システム並びに鎮静化方法
JP6074157B2 (ja) * 2012-04-26 2017-02-01 任天堂株式会社 ゲームシステム、ゲーム方法、ゲーム装置、及びゲームプログラム
CN103491432A (zh) * 2012-06-12 2014-01-01 联想(北京)有限公司 多媒体信息输出控制方法、装置和系统
EP2677719A1 (en) * 2012-06-19 2013-12-25 Alcatel Lucent A method for interfacing a communication terminal with networked objects
JP6243595B2 (ja) * 2012-10-23 2017-12-06 任天堂株式会社 情報処理システム、情報処理プログラム、情報処理制御方法、および情報処理装置
KR102071576B1 (ko) 2012-12-21 2020-03-02 삼성전자주식회사 콘텐트 재생 방법 및 이를 위한 단말
JP2015046089A (ja) 2013-08-29 2015-03-12 ソニー株式会社 情報処理装置および情報処理方法
US10235967B2 (en) * 2014-04-21 2019-03-19 Sony Corporation Information processing device and information processing method
US20170214962A1 (en) * 2014-06-24 2017-07-27 Sony Corporation Information processing apparatus, information processing method, and program
CN104267607A (zh) * 2014-09-10 2015-01-07 京东方科技集团股份有限公司 调节室内光亮度的方法、装置和智能家居控制系统
EP3067857A1 (en) 2015-03-13 2016-09-14 Thomson Licensing Method and device for processing a peripheral image
CN106341929B (zh) * 2015-07-07 2019-01-25 芋头科技(杭州)有限公司 一种灯光与显示内容融合的方法
US10469751B2 (en) * 2017-05-12 2019-11-05 Garmin Switzerland Gmbh Smart stabilization and reorientation for an omnidirectional camera
WO2019119096A1 (pt) * 2017-12-22 2019-06-27 Martins Vieira Filho Gilson Dispositivo eletrônico micro processado para produção de efeitos especiais através do controle e sincronização de luz e som
JP2020106753A (ja) * 2018-12-28 2020-07-09 ローランド株式会社 情報処理装置および映像処理システム
CN113677063A (zh) * 2020-05-15 2021-11-19 深圳光线上品科技有限公司 一种通用流光溢彩灯带系统

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5924486A (en) * 1997-10-29 1999-07-20 Tecom, Inc. Environmental condition control and energy management system and method
US6611297B1 (en) * 1998-04-13 2003-08-26 Matsushita Electric Industrial Co., Ltd. Illumination control method and illumination device
JP4176233B2 (ja) * 1998-04-13 2008-11-05 松下電器産業株式会社 照明制御方法及び照明装置
JP3907397B2 (ja) * 2000-10-11 2007-04-18 富士通株式会社 映像監視装置
US6441558B1 (en) * 2000-12-07 2002-08-27 Koninklijke Philips Electronics N.V. White LED luminary light control system
JP4052556B2 (ja) * 2002-05-07 2008-02-27 日本放送協会 外部機器連動型コンテンツ生成装置、その方法及びそのプログラム
US7676403B2 (en) * 2002-05-16 2010-03-09 Crutchfield Corporation System and method of image capture simulation
JP2003325972A (ja) * 2002-05-17 2003-11-18 Nintendo Co Ltd 傾き操作に関連して音と画像を変化させるゲーム装置およびそのゲームプログラム
KR101021077B1 (ko) * 2002-07-04 2011-03-14 코닌클리케 필립스 일렉트로닉스 엔.브이. 주변조명 및 조명 유닛 제어 방법 및 시스템
ATE463125T1 (de) * 2002-07-04 2010-04-15 Koninkl Philips Electronics Nv Verfahren und system zur steuerung eines umgebungslichts und beleuchtungseinheit
US20040019899A1 (en) * 2002-07-25 2004-01-29 Koninklijke Philips Electronics N.V Method of and system for signal detection
US7483538B2 (en) * 2004-03-02 2009-01-27 Ksc Industries, Inc. Wireless and wired speaker hub for a home theater system
WO2006003624A1 (en) * 2004-06-30 2006-01-12 Koninklijke Philips Electronics, N.V. Ambient lighting derived from video content and with broadcast influenced by perceptual rules and user preferences
US7073908B1 (en) * 2005-01-11 2006-07-11 Anthony Italo Provitola Enhancement of depth perception
US20120140068A1 (en) * 2005-05-06 2012-06-07 E-Watch, Inc. Medical Situational Awareness System
JP2007025111A (ja) 2005-07-14 2007-02-01 Sharp Corp 映像呈示システム及び映像呈示方法並びに映像呈示プログラムとその記録媒体
US7614753B2 (en) * 2005-10-31 2009-11-10 Hewlett-Packard Development Company, L.P. Determining an adjustment
KR100774203B1 (ko) * 2006-06-27 2007-11-08 엘지전자 주식회사 텔레비전 수신기 및 텔레비전 수신기에서 디스플레이특성을 조절하는 방법
RU2468401C2 (ru) * 2006-12-08 2012-11-27 Конинклейке Филипс Электроникс Н.В. Окружающее освещение
JP5128141B2 (ja) 2007-02-05 2013-01-23 株式会社フジクラ 電子機器及び電子機器配線用ハーネス
US8165315B2 (en) * 2007-02-09 2012-04-24 Sky Cross Inc. Multichannel wireless system
CN101463963B (zh) * 2007-12-21 2010-09-29 富士迈半导体精密工业(上海)有限公司 照明系统

Also Published As

Publication number Publication date
EP2312845A4 (en) 2013-02-06
WO2010010776A1 (ja) 2010-01-28
CN102100081A (zh) 2011-06-15
CN102100081B (zh) 2013-07-31
EP2312845A1 (en) 2011-04-20
JP2010034687A (ja) 2010-02-12
US20110115979A1 (en) 2011-05-19

Similar Documents

Publication Publication Date Title
JP5323413B2 (ja) 付加データ生成システム
US20220286728A1 (en) Information processing apparatus and information processing method, display equipped with artificial intelligence function, and rendition system equipped with artificial intelligence function
JP4902000B2 (ja) コンテンツ再生装置、テレビジョン受像機、コンテンツ再生方法、コンテンツ再生プログラム、および記録媒体
CN1331349C (zh) 用于控制环境光的方法和系统以及发光单元
US7369903B2 (en) Method of and system for controlling an ambient light and lighting unit
JP4052556B2 (ja) 外部機器連動型コンテンツ生成装置、その方法及びそのプログラム
US20190166674A1 (en) An ambience control system
KR102402370B1 (ko) 원격지 연출 시스템 및 원격지 연출 방법
JP2011259354A (ja) 視聴環境制御システム、送信装置、受信装置
US20180176628A1 (en) Information device and display processing method
US6782238B2 (en) Method for presenting media on an electronic device
JP4833067B2 (ja) 映像演出システム及び映像演出方法
JP3669913B2 (ja) ディジタル放送受信装置
WO2021124680A1 (ja) 情報処理装置及び情報処理方法
WO2021131326A1 (ja) 情報処理装置及び情報処理方法、並びにコンピュータプログラム
JP6523038B2 (ja) 感覚提示装置
JP5562931B2 (ja) コンテンツ再生装置、テレビジョン受像機、コンテンツ再生方法、コンテンツ再生プログラム、および記録媒体
WO2021053936A1 (ja) 情報処理装置及び情報処理方法、並びに人工知能機能搭載表示装置
TWI833415B (zh) 現場即時收音情境效果產生系統及其應用方法
JP2008006214A (ja) 電子機器の動作制御装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100826

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121203

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20121203

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130401

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20130410

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130625

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130717

R150 Certificate of patent or registration of utility model

Ref document number: 5323413

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees