JP4937796B2

JP4937796B2 - 画像処理装置

Info

Publication number: JP4937796B2
Application number: JP2007057472A
Authority: JP
Inventors: 寛治坂手; 英樹猪股
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2007-03-07
Filing date: 2007-03-07
Publication date: 2012-05-23
Anticipated expiration: 2027-03-07
Also published as: JP2008219780A

Description

この発明は、画像圧縮装置や画像伸長装置などの画像処理装置に関し、特に画像圧縮における符号化条件や画像再生における加工方法を決定する技術に関するものである。

従来、テレビジョン放送やインターネットなどで配信された画像の再生にあたって、画像に適した香りを発生させる香り発生装置付き画像処理装置が知られている。このような画像処理装置として、例えば特許文献１は、映像に適した香りを発生させる映像ディスプレイ装置や、画像データとともに香り情報を記録する映像ソフトを有する映像鑑賞システムを開示している。この映像鑑賞システムは、映像ディスプレイ装置に供給する臭気情報を多重記録した映像ソフトと、映像ソフトの臭気情報を解読し、該当する臭気を拡散する手段を備え、画像に適した香りを散布している。

また、特許文献２は、コマーシャル映像に多重した識別音を制御信号として利用して、映像や音声に連動した香りを発生させるシステムを開示している。この香りを発生させるシステムは、各家庭等に設置された広告端末にて識別音が検出されると、特徴パターンを抽出して当該パターン番号に対応する香気の種類を確認する。その後、広告端末の香気制御部は、テーブルを参照して当該種類の香気に対応する香気混合率を決定し、各香気貯蔵部から香気ガスが放出され、該当する香気が生成される。

特開２０００−２９６１７２号公報特開２００６−２９２９４８号公報

しかしながら、上述した特許文献１に開示された映像鑑賞システム及び特許文献２に開示された香りを発生させるシステムでは、映像に適した香りを発生することはできても、香りの種類や人が香りから受ける刺激の大きさによって画像を加工したり、画像圧縮における符号化条件を制御することはできなかった。そのため、視聴者の心理状態に応じて再生する画像の主観品質を向上させたり、主観画質を維持しながら画像のデータ量を低減し、記録媒体への長時間録画や低速度での画像配信を実現することができないという課題があった。

この発明は、上記のような課題を解決するためになされたもので、人が香りを知覚した際に起こる視覚感度の変化を利用して、画像の加工や画像圧縮における符号化条件の決定を行うことにより、様々な画像シーケンスにおける画質の印象を向上させ、さらに画質を維持しつつ画像の圧縮率を向上させる画像処理装置を提供することを目的とする。

この発明に係る画像処理装置は、入力された映像コンテンツから香りデータと画像データを分離するデータ分離手段と、前記データ分離手段から入力された香りデータを解析して、人が香りから受ける刺激量を算出して出力する香り解析手段と、前記画像データに基づき画像を表示する画像再生手段と、前記香り解析手段から入力された刺激量に応じて、前記データ分離手段から入力された画像データを加工する画像加工手段と、香料を保有し、前記データ分離手段から入力された香りデータに応じて前記香料を射出することにより香りを提供する香り発生手段とを備えたものである。

この発明によれば、人が香りを知覚した際に起こる視覚感度の変化を利用して画像の加工方法を決定するようにしたので、様々な画像シーケンスにおける画質の印象を向上させることができる。

実施の形態１．
図１は、この発明の実施の形態１に係る画像処理装置の構成を示すブロック図である。
画像処理装置は、データ分離復号部（データ分離手段）１、香り解析部（香り解析手段）２、画像加工部（画像加工手段）３、画像再生部（画像再生手段）４、画像圧縮記録部（画像圧縮記録手段）５、香り発生部（香り発生手段）６から構成されている。

データ分離復号部１は、外部装置（図示せず）から入力された香りデータと画像データとからなる映像コンテンツを香りデータと画像データに分離するとともに、画像データが符号化された形式で入力されている場合にはその画像データの復号を行う。香りデータは香り発生部６に対して発生させる香りの種類や発生タイミングを指示するための制御情報を含み、放送波やインターネット等で配信される画像データ上に多重されたり、光ディスクなどの媒体に画像データと共に記録されている。データ分離復号部１において分離された香りデータは香り解析部２及び香り発生部６に出力されるとともに、分離または分離後復号された画像データは画像加工部３に出力される。

次に、香り解析部２の詳細を説明する。香り解析部２は人が香りから受ける視覚刺激量を解析し、解析するにあたり人の反射行動や心理特性を考慮する。例えば、日常では経験しない刺激臭や辛いスパイスの匂い等を知覚した場合、無臭状態から突然香りを知覚した場合及び香りの種類が変化した場合等には、人の意識が嗅覚に集中し、視覚の感度が鈍るケースがある。逆に、食物の匂いや香水の匂い等を知覚した場合、人の精神状態が安定し、視覚の感度が向上するケースもある。このように、人の視覚感度は嗅覚によって影響を受けるものであり、これらの影響を考慮して香り解析部２は人が香りから受ける視覚刺激量を解析する。ここでいう視覚刺激量とは、人が香りを知覚したときに生じる視覚感度の変化を表す数値を意味する。

さらに、人が香りから受ける視覚刺激量の大きさは、香りの種類だけではなく、香りの変化や人の慣れなどによっても変化する。例えば、人間の嗅覚の特性として同じ香りを一定時間以上感知しているとそれ以降同じ臭いは感知しないという香りに対する慣れが起こる。図２は、香りによる視覚刺激量を経時的に解析した結果を示すグラフである。グラフの数値は発生した香りが視覚感度に与える影響の度合いを数値化したものであり、数値が高い、すなわち正側に絶対値が大きいほど視覚感度低下を招きやすく、数値が低い、すなわち負側に絶対値が大きいほど視覚感度向上の効果が得られやすいことを示している。刺激臭の発生中や香りが変化した場合には数値が高く、良い香りが発生している場合には数値が低い傾向となる。また、同じ香りが継続していても人の慣れによって時間の経過とともに数値はゼロ（香りの影響がない状態）に近づいていく。そこで、香り解析部２は、人が香りから受ける視覚刺激量の解析を時間経過も考慮して実施する。

なお、図２及びその説明において視覚刺激量が高い場合、すなわち視覚刺激量が正の値を取る場合には視覚感度が低下し、視覚刺激量が低い場合、すなわち負の値を取る場合には視覚感度が向上するという尺度を用いて説明したが、視覚刺激量の定義はこの限りではなく、視覚刺激量の正負と視覚感度の高低の対応関係はその逆であってもよい。また、視覚感度の低下を招く香りの視覚刺激量と、視覚感度の向上を招く香りの視覚刺激量を各々個別に扱ってもよい。ただし、以下の説明では、図２及びその説明で用いた視覚刺激量と視覚感度の定義に基づき説明する。

図３は、この発明の実施の形態１に係る香り解析部の構成を示すブロック図である。香り解析部２は、香り情報記憶部２１、香り混合比率算出部２２、視覚刺激量算出部２３及び視覚刺激量補正部（補正手段）２４から構成されている。

香り情報記憶部２１は、香り発生部６（詳細は後述する）に蓄積されている個々の香り成分の視覚刺激量が記憶されている。個々の香り成分の視覚刺激量は実験等により予め算出されているものとする。例えば、アンモニアや酢酸など不快臭を発する成分に対しては視覚刺激量が高く算出され、フィトンチッドやハーブなどの良い香りの成分に対しては視覚刺激量が低く算出され、記憶されている。

香り混合比率算出部２２は、香り発生部６に蓄積されている香り成分を混合して香りデータに対応する香りを再現する際の各香り成分の混合比率を、データ分離復号部１から入力された香りデータに付加された香りの種類等の情報から算出して算出結果を視覚刺激量解析部２３へ出力する。なお、各香り成分の混合比率の算出において、香り情報記憶部２１の記憶情報を用いてもよい。視覚刺激量算出部２３は、香り情報記憶部２１に記憶されている香り成分毎の視覚刺激量と、香り混合比率算出部２２から入力される算出結果から、データ分離復号部１から入力された香りデータに対応する視覚刺激量を算出し、算出結果を視覚刺激量補正部２４へ出力する。

視覚刺激量補正部２４は、視覚刺激量算出部２３から入力された視覚刺激量を補正する。まず、香りが発生した瞬間や香りが変化した瞬間の反射的な視覚感度の低下を反映させるために、受信する香りデータを監視し、香りの種類の変化などに応じて、視覚刺激量を補正する。また、香りに対する人の慣れ及び時間経過に伴う香りの薄れを反映させるため、時間経過と共に視覚刺激量の数値をゼロに近づける補正を行う。さらに、香り発生部６から入力される状態情報、例えば、香り拡散に利用する気流の勢い、蓄積されている香り成分の残量または香り発生部６の作動状態に基づき視覚刺激量を補正し、補正後の視覚刺激量を解析結果として画像加工部３及び画像圧縮記録部５に出力する。

次に、画像加工部３の詳細を説明する。図４は、この発明の実施の形態１に係る画像加工部の構成を示すブロック図である。画像加工部３は、色成分調整部３１及び周波数成分調整部３２から構成されている。
人は視覚感度が低下した状態において、画像に含まれる特定の色や周波数成分に対する視覚感度が鈍ることがある。そこで色成分調整部３１は、香り解析部２から入力された解析結果、すなわち視覚刺激量に応じて色成分のレベル調整を行う。周波数成分調整部３２は、視覚刺激量に応じて周波数成分にフィルタ処理を実施する。色成分調整部３１及び周波数成分調整部３２で加工された加工画像データは画像再生部４及び画像圧縮記憶部５に出力される。画像再生部４は、画像加工部３から入力された加工画像データに基づき、画像をテレビモニタなどの表示デバイス（図示せず）へ出力する。

次に、画像圧縮記録部５の詳細を説明する。図５は、この発明の実施の形態１に係る画像圧縮記録部の構成を示すブロック図である。画像圧縮記録部５は、ビットレート調整部（ビットレート調整手段）５１を有している。
ビットレート調整部５１は、香り解析部２から入力された解析結果、すなわち視覚刺激量に応じて画像加工部３から入力された加工画像データを符号化する際のビットレートを調整し、符号化された圧縮画像データを磁気ディスクまたは光ディスク等の媒体（図示せず）に記録する。例えば、視覚刺激量が高い場合にはビットレートを下げて符号化し、視覚刺激量が低い場合にはビットレートを上げて符号化する。これは、視覚刺激量が高い場合には人の視覚感度は低下しやすく、画質が劣化しても認識され難いといった作用が期待でき、また逆に視覚刺激量が低い場合には人の視覚感度が向上している可能性があるためである。

ビットレートの調整は、ＧＯＰ（ＧｒｏｕｐｏｆＰｉｃｔｕｒｅｓ）やフレームの単位で実施することが可能であるが、マクロブロックなどの細やかな単位で実施すればより高い効果が得られる。すなわち、視覚刺激量が高くビットレートを落として符号化する際に、香りの影響により視覚感度が低下しやすい色や周波数成分を含むマクロブロックでは割り当てる符号量を大幅に削減し、それ以外の部分では多めの符号量を割り当てることで、高い画質水準を維持したまま画像データ量の削減が可能となる。さらに、画像加工部３において、上述のように視覚感度が低下する画像成分に対して事前に加工を施しておくことによって、その画像成分に対して割当てる符号量を抑えても、画像の見栄えの低下を抑制することができる。

なお、ビットレートを調整する具体的な方法としては、例えば符号化方式がＭＰＥＧ−４ＡＶＣ（ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔｓＧｒｏｕｐＰｈａｓｅ−４ＡｄｖａｎｃｅＶｉｄｅｏＣｏｄｉｎｇ）の場合は量子化パラメータ（ＱＰ値やｃｈｒｏｍａ＿ｑｐ＿ｏｆｆｓｅｔ）や量子化スケーリングリストを変更する方法が有効である。

香り発生部６は、データ分離復号部１から入力される香りデータに従い、香りを発生させる。香り発生部６には、複数種類の香り成分が粉末及び液体（それらを固体化したものも含む）の形であらかじめ蓄積されており、これらの中から数種類の香り成分を適切な比率で混合し、混合した香りを気流等によって拡散させる。さらに、香り発生部６は状態情報、例えば、周囲の気流の状態、蓄積されている香り成分の残量または香り発生部６の作動状態を香り解析部２に出力する。

次に、実施の形態１の動作について説明する。
図６は、この発明の実施の形態１に係る画像処理装置の動作を示すフローチャートである。
まずデータ分離復号部１は、受信した香りデータと画像データとからなる映像コンテンツを香りデータと画像データに分離し、香りデータを香り解析部２及び香り発生部６に出力する（ステップＳＴ１）。次に、入力された画像データが符号化された形式で入力されているか否かを判定する（ステップＳＴ２）。ステップＳＴ２において分離した画像データが符号化形式で入力されている場合には、その画像データの復号を行い、画像加工部３に出力し（ステップＳＴ３）、符号化形式で入力されていない場合には、ステップＳＴ３を経由せず、画像データを画像加工部３に出力する。

香り解析部２の香り混合比率算出部２２は、ステップＳＴ１において入力された香りデータに対応する香りを再現する際の香り成分の混合比率を、データ分離復号部１から入力された香りデータに付加された香りの種類等の情報から算出して算出結果を視覚刺激量算出部２３に出力する（ステップＳＴ４）。視覚刺激量算出部２３は、香り情報記憶部２１に記憶されている香り成分毎の視覚刺激量と、ステップＳＴ４で算出された混合比率から、下記の式（１）に基づいてデータ分離復号部１から入力された香りデータに対応する香りの視覚刺激量を算出し、算出結果を視覚刺激量補正部２４へ出力する（ステップＳＴ５）。

入力されたデータに対する香りから人が受ける視覚刺激量＝
Σ{各成分の視覚刺激量×各成分の混合比率} ・・・（１）

ステップＳＴ５において、算出結果を受け取った視覚刺激量補正部２４は、まず、ステップＳＴ１において入力された香りデータを参照して、香りの種類に変化があるか否か判定する（ステップＳＴ６）。ステップＳＴ６において、香りの種類が変化したと判定された場合には、視覚刺激量を高く、すなわち正側に絶対値が大きくなるように補正する（ステップＳＴ７）。補正方法としては、ステップＳＴ５において入力された香りの種類変化後の視覚刺激量が大きいほど正側に加算する数値を大きくしたり、香りの種類の変化前後の混合比率の差分絶対値を算出し、差分絶対値が大きいほど正側に加算する数値を大きくする等が挙げられる。ステップＳＴ６において、香りの種類が変化していないと判定された場合には、ステップＳＴ８へ移行する。

次に、ステップＳＴ１において入力された香りデータを参照して、同一の香りが一定時間継続しているか否か判定する（ステップＳＴ８）。ステップＳＴ８において、一定時間継続していると判定された場合には一定時間継続している香りが良い匂いか刺激臭か判定し（ステップＳＴ９）、一定時間継続していないと判定された場合にはステップＳＴ１２へ移行する。ステップＳＴ９において、良い匂いであると判定された場合には視覚刺激量を低く、すなわち負側に絶対値が大きくなるように補正を行い（ステップＳＴ１０）、その後視覚刺激量を徐々にゼロに近づける補正を行う（ステップＳＴ１１）。ステップＳＴ９において、刺激臭であると判定された場合にはステップＳＴ１０を経由せずにステップＳＴ１１へ移行する。

次に、香り発生部６から入力される状態情報を参照して、香り拡散に利用する気流が弱いか、蓄積されている成分の残量が少ないか及び香り発生部６が作動しているか否か判定する（ステップＳＴ１２）。ステップＳＴ１２において、拡散に利用する気流が弱いまたは蓄積されている香り成分の残量が少ない場合には、視覚刺激量をゼロに近づける補正を行い、香り発生部６が作動していない状態では視覚刺激量をゼロに補正する（ステップＳＴ１３）。ステップＳＴ６からステップＳＴ１３で補正された視覚刺激量は、解析結果として、画像加工部３及び画像圧縮記録部５に出力される。ステップＳＴ１２において、香り発生部６の状態情報が正常であった場合には、ステップＳＴ１３を経由せず解析結果を画像加工部３及び画像圧縮記録部５に出力する。なお、ステップＳＴ６からステップＳＴ１３の処理は、上述の順序を入れ替えて行ってもよい。

香り解析部２から解析結果を受け取った画像加工部３は、解析結果、すなわち視覚刺激量が予め定める判断基準よりも大きいか小さいかを判定する（ステップＳＴ１４）。ステップＳＴ１４において視覚刺激量が判断基準より大きいと判定されると、色成分調整部３１が該当する色成分に対してレベル強調を行い、周波数成分調整部３２が該当する周波数成分を強調するためのフィルタ処理を施し、加工画像データを画像再生部４及び画像圧縮記憶部５に出力する（ステップＳＴ１５）。ステップＳＴ１４において、視覚刺激量が判断基準より小さいと判定された場合には、ステップＳＴ１５を経由せず画像データを加工画像データとして画像再生部４及び画像圧縮記録部５に出力する。画像加工部３から加工画像データを受け取った画像再生部４は、画像をモニタ（図示せず）などの表示デバイスに表示する（ステップＳＴ１６）。その後、シーケンスはステップＳＴ１の処理に戻り、上述した処理を繰り返す。

また、香り解析部２から解析結果を受け取った画像圧縮記録部５は、解析結果、すなわち視覚刺激量が予め定める判断基準よりも大きいか小さいかを判定する（ステップＳＴ１７）。ステップＳＴ１７において視覚刺激量が判断基準より大きいと判定されると、ビットレート調整部５１はビットレートを落として加工画像データを符号化し（ステップＳＴ１８）、視覚刺激量が判断基準より小さいと判定されると、ビットレートを上げて加工画像データを符号化する（ステップＳＴ１９）。ステップＳＴ１８及びステップＳＴ１９において符号化された圧縮符号化画像データは磁気ディスクや光ディスクなどの媒体に記録される（ステップＳＴ２０）。その後、シーケンスはステップＳＴ１の処理に戻り、上述した処理を繰り返す。

ステップＳＴ１において香りデータを受け取った香り発生部６は、香りデータに基づいて、蓄積されている各香り成分を適切な比率で混合し、混合された香りを気流等によって拡散する（ステップＳＴ２１）。その後、シーケンスはステップＳＴ１の処理に戻り、上述した処理を繰り返す。

以上のように、実施の形態１によれば、香り解析部２が人の反射行動や心理的特性を考慮し、また香りの種類の変化や時間の経過を考慮して算出した視覚刺激量に応じて、画像加工部３が画像データを加工し、画像圧縮記録部５が画像を圧縮符号化するように構成したので、視聴者の視覚感度が低下している状態であっても視認しやすい映像を提供することができる。また、人が香りから受ける視覚刺激量に応じて、画質への影響を少なくしたままで圧縮後のデータ量を効率よく削除したり、視聴者の画質に対する印象を向上させることができる。

なお、上記実施の形態１では、香りデータに対応する香りを再現する際の香りの混合比率と各成分の刺激量を用いて視覚刺激量を算出する例を示したが、予め代表的な香りの混合比率を求めておき、その代表的な香りの混合比率と再現する香りの混合比率とから近似度を求め、その近似度を数値化することで視覚刺激量を算出するように構成してもよい。例えば、柑橘類やハーブなど人が快く感じる香りや、アンモニア臭などの不快に感じる香りを再現する際の香り成分の混合比率をあらかじめ記憶しておき、再現する香りの混合比率が快い香りに近づくほど視覚刺激量を低く算出し、遠ざかるほど視覚刺激量を高く算出する。

また、上記実施の形態１では、画像処理装置が画像再生部４及び画像圧縮記録部５を有する例を示したが、図７に示すように画像圧縮記録部５のみを有する構成、または、図８に示すように画像再生部４のみを有する構成としてもよい。

実施の形態２．
図９は、この発明の実施の形態２に係る画像圧縮記録部の構成を示すブロック図である。画像圧縮記録部５は、図５に示した実施の形態１に係る画像圧縮記録部５のビットレート調整部５１が周波数調整部（周波数調整手段）５２に置き換えられて構成されている。以下では、実施の形態１に係る画像処理装置の構成要素と同一の部分には実施の形態１で使用した符号と同一の符号を付して説明を省略または簡略化する。

周波数調整部５２は、香り解析部２から入力された解析結果、すなわち視覚刺激量に応じて画像加工部３から入力された加工画像データのエンコードを担当するデバイスのクロック周波数を調整して符号化し、符号化された圧縮画像データを磁気ディスクまたは光ディスク等の媒体（図示せず）に記録する。例えば、視覚刺激量が予め定める判断基準よりも大きい場合にはクロック周波数を下げて符号化し、小さい場合にはクロック周波数を上げて符号化する。

以上のように、実施の形態２によれば、人が香りから受ける視覚刺激量に応じてクロック周波数を調整するように構成したので、主観的な映像画質の劣化を招くことなく低電力化やエンコード処理の安定化を実現することができる。

実施の形態３．
図１０は、この発明の実施の形態３に係る画像圧縮記録部の構成を示すブロック図である。画像圧縮記録部５は、図５に示した実施の形態１に係る画像圧縮記録部５のビットレート調整部５１が演算精度調整部（演算精度調整手段）５３に置き換えられて構成されている。以下では、実施の形態１に係る画像処理装置の構成要素と同一の部分には実施の形態１で使用した符号と同一の符号を付して説明を省略または簡略化する。

演算精度調整部５３は、香り解析部２から入力された解析結果、すなわち視覚刺激量に応じて画像加工部３から入力された加工画像データのエンコードを担当するデバイスの演算精度を調整して符号化し、符号化された圧縮画像データを磁気ディスクまたは光ディスク等の媒体（図示せず）に記録する。例えば、視覚刺激量が予め定める判断基準よりも大きい場合には演算精度を下げて符号化し、小さい場合には演算精度を上げて符号化する。

以上のように、実施の形態３によれば、人が香りから受ける視覚刺激量に応じてエンコードデバイスの演算精度を調整するように構成したので、主観的な映像画質の劣化を招くことなく低電力化やエンコード処理の高速化を実現することができる。

なお、上記実施の形態３において、符号化する際に視覚刺激量に応じてエンコードデバイスの演算精度を調整する例を示したが、エンコードデバイスの一部機能を縮退させるように構成してもよい。この場合にも上記実施の形態３と同様の効果が得られる。符号化方式がＭＰＥＧ−４ＡＶＣの場合に、エンコードデバイスとして搭載されている機能の中で動作上必須でなく縮退可能なものとしては、例えば重み付け予測（ＷｅｉｇｈｔｅｄＰｒｅｄｅｃｔｉｏｎ）、適応２進法算術符号化（ＣＡＢＡＣ：Ｃｏｎｔｅｘｔ−ｂａｓｅｄＡｄａｐｔｉｖｅＢｉｎａｒｙＡｒｉｔｈｍｅｔｉｃＣｏｄｉｎｇ）、ダイレクトモード等がある。また、エンコーダの補助機能としてノイズ除去や周波数帯域制限等の目的で搭載されるフィルタ機能も縮退することが可能である。

なお、上記実施の形態１から３において、符号化条件を変更する例としてビットレートを調整する、クロック周波数を調整する、エンコードデバイスの演算精度を調整する及びエンコードデバイスの一部機能を縮退する構成を示したが、ＧＯＰ中のＩピクチャやＢピクチャの枚数を調整したり、動き補償予測における予測モードや予測方向を調整するように構成しても良い。

実施の形態４．
図１１は、この発明の実施の形態４に係る画像処理装置の構成を示すブロック図である。この画像処理装置は、図１に示した実施の形態１に係る画像処理装置に香りセンサ（センサ）７を追加して構成している。
以下では、実施の形態１に係る画像処理装置の構成要素と同一の部分には実施の形態１で使用した符号と同一の符号を付して説明を省略または簡略化する。

香りセンサ７は、香り発生部６から拡散された香りが視聴スペース上で人にどのように知覚されるかを検知し、検知結果を香り解析部２に出力する。香り解析部２の視覚刺激量補正部２４は、検知結果を参照して視覚刺激量を補正する。例えば、香りセンサ７において視聴スペースが広く視聴が香りをほとんど知覚できないと検知された場合には、視覚刺激量をゼロに近づける補正を行い、他の香りが同時に存在して香りの特徴が変化していると検知された場合には、変化した香りの特徴に対応した視覚刺激量となるように補正を行う。香りセンサ７は公知のものであり、空気中に分布している分子の種類や量を分析するものなどが広く知られている。

以上のように、実施の形態４によれば、香りセンサ７で視聴スペース上の香りを検知し、検知結果を用いて視覚刺激量を補正するように構成したので、視聴スペースにおいて香りが薄れている状態や、香りの特徴が変化している状態を検知することができ、より正確な視覚刺激量の算出が可能になる。

この発明の実施の形態１に係る画像処理装置の構成を示すブロック図である。香りによる視覚刺激量を経時的に解析した結果を示すグラフである。この発明の実施の形態１に係る香り解析部の構成を示すブロック図である。この発明の実施の形態１に係る画像加工部の構成を示すブロック図である。この発明の実施の形態１に係る画像圧縮記憶部の構成を示すブロック図である。この発明の実施の形態１に係る画像処理装置の動作を示すフローチャートである。この発明の実施の形態１に係る画像処理装置の他例の構成を示すブロック図である。この発明の実施の形態１に係る画像処理装置の他例の構成を示すブロック図である。この発明の実施の形態２に係る画像圧縮記憶部の構成を示すブロック図である。この発明の実施の形態３に係る画像圧縮記憶部の構成を示すブロック図である。この発明の実施の形態４に係る画像処理装置の構成を示すブロック図である。

符号の説明

１データ分離復号部、２香り解析部、３画像加工部、４画像再生部、５画像圧縮記録部、６香り発生部、７香りセンサ、２１香り情報記憶部、２２香り混合比率算出部、２３視覚刺激量算出部、２４視覚刺激量補正部、３１色成分調整部、３２周波数成分調整部、５１ビットレート調整部、５２周波数調整部、５３演算精度調整部。

Claims

入力された映像コンテンツから香りデータと画像データを分離するデータ分離手段と、
前記データ分離手段から入力された香りデータを解析して、人が香りから受ける刺激量を算出して出力する香り解析手段と、
前記画像データに基づき画像を表示する画像再生手段と、
前記香り解析手段から入力された刺激量に応じて、前記データ分離手段から入力された画像データを加工する画像加工手段と、
香料を保有し、前記データ分離手段から入力された香りデータに応じて前記香料を射出することにより香りを提供する香り発生手段とを備えたことを特徴とする画像処理装置。
入力された映像コンテンツから香りデータと画像データを分離するデータ分離手段と、前記データ分離手段から入力された香りデータを解析して、人が香りから受ける刺激量を算出して出力する香り解析手段と、
前記画像データに基づき画像を表示する画像再生手段と、
前記香り解析手段から入力された刺激量に応じて符号化条件を決定し、前記符号化条件に従い画像を圧縮して記録する画像圧縮記録手段と、
香料を保有し、前記データ分離手段から入力された香りデータに応じて前記香料を射出することにより香りを提供する香り発生手段とを備えたことを特徴とする画像処理装置。
香り解析手段から入力された刺激量に応じて符号化条件を決定し、前記符号化条件に従い画像を圧縮して記録する画像圧縮記録手段を備えたことを特徴とする請求項１記載の画像処理装置。
画像加工手段は、人が香りを知覚したときに視覚感度が低下する色成分を強調する色成分強調手段を備えたことを特徴とする請求項１または請求項３記載の画像処理装置。
画像加工手段は、人が香りを知覚したときに視覚感度が低下する周波数成分を強調する周波数成分強調手段を備えたことを特徴とする請求項１、請求項３及び請求項４のうちのいずれか１項記載の画像処理装置。
画像圧縮記録手段は、ビットレートを調整するビットレート調整手段を備えたことを特徴とする請求項２または請求項３記載の画像処理装置。
ビットレート調整手段は、量子化パラメータを調整することを特徴とする請求項６記載の画像処理装置。
画像圧縮記録手段は、エンコード処理デバイスのクロック周波数を調整する周波数調整手段を備えたことを特徴とする請求項２、請求項３、請求項６及び請求項７のうちのいずれか１項記載の画像処理装置。
画像圧縮記録手段は、エンコード処理の演算精度を調整する演算精度調整手段を備えたことを特徴とする請求項２、請求項３及び請求項６から請求項８のうちのいずれか１項記載の画像処理装置。
画像圧縮記録手段は、エンコード処理における一部の機能を縮退する機能縮退手段を備えたことを特徴とする請求項２、請求項３及び請求項６から請求項９のうちのいずれか１項記載の画像処理装置。
香り発生手段は、周囲の気流の状態、保有している香料の残量または前記香り発生手段の作動状態を示す状態情報を出力し、
香り解析手段は、前記状態情報に応じて刺激量を補正する補正手段を備えたことを特徴とする請求項１または請求項２記載の画像処理装置。
センサにより周囲の香りを検知して検知結果を香り解析手段に出力する香り検知手段を備えたことを特徴とする請求項１から請求項１１のうちのいずれか１項記載の画像処理装置。
刺激量は、人が香りを知覚したときに生じる視覚感度の変化を表す数値であることを特徴とする請求項１から請求項３及び請求項１１のうちのいずれか１項記載の画像処理装置。