JP2010045518A - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP2010045518A JP2010045518A JP2008207068A JP2008207068A JP2010045518A JP 2010045518 A JP2010045518 A JP 2010045518A JP 2008207068 A JP2008207068 A JP 2008207068A JP 2008207068 A JP2008207068 A JP 2008207068A JP 2010045518 A JP2010045518 A JP 2010045518A
- Authority
- JP
- Japan
- Prior art keywords
- image
- impression
- unit
- composition
- specifying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Editing Of Facsimile Originals (AREA)
Abstract
【課題】鑑賞される画像が与える印象と関連する情報を画像とともに呈示することで、画像鑑賞をより印象深く楽しいものとすることが可能な画像処理装置を提供すること。
【解決手段】画像取得部31によって取得された画像と付加情報の何れか一方から画像の構図を特定する構図特定部32と、構図特定部32によって特定された画像の構図から、この構図が画像の鑑賞者に与えうる印象を判定する印象判定部33と、印象判定部33で判定された印象に関連した情報を画像取得部31によって取得された画像とともに呈示する印象呈示部34と備える。
【選択図】図1
【解決手段】画像取得部31によって取得された画像と付加情報の何れか一方から画像の構図を特定する構図特定部32と、構図特定部32によって特定された画像の構図から、この構図が画像の鑑賞者に与えうる印象を判定する印象判定部33と、印象判定部33で判定された印象に関連した情報を画像取得部31によって取得された画像とともに呈示する印象呈示部34と備える。
【選択図】図1
Description
本発明は、画像が与える印象を画像の撮影者や画像の鑑賞者に呈示する画像処理装置に関する。
プロの撮影者等は、所定の心理効果を写真に鑑賞者に与えられるように、撮影時の撮影条件を決定して撮影を行っていることが多い。これに対し、撮影時における撮影者の意図を読み取るための各種の提案がなされている。例えば、特許文献1においては、画像分析や画像に付加されているメタデータの解析を行って、画像が撮影されたときの撮影者の意図を読み取れるようにしている。また、特許文献2においては、画像の構図が鑑賞者に与える心理的効果を数値的に評価する技術についての提案がなされている。
特開2001−273505号公報
特開2006−134153号公報
ここで、特許文献2は、画像の構図が鑑賞者に与える心理的効果の程度を数値として表すことができる。しかしながら、画像の構図が鑑賞者に与える心理的効果を判定した後、その結果をどのように利用するのかについては特に言及がなされていない。
本発明は、上記の事情に鑑みてなされたもので、鑑賞される画像が与える印象と関連する情報を画像とともに呈示することで、画像鑑賞をより印象深く楽しいものとすることが可能な画像処理装置を提供することを目的とする。
上記の目的を達成するために、本発明の第1の態様の画像処理装置は、画像と該画像に付加された付加情報との何れか一方から前記画像の構図を特定する構図特定手段と、前記特定された画像の構図から、前記画像の鑑賞者に与えうる印象を判定する印象判定手段と、前記印象判定手段で判定された印象に関連した情報を前記画像とともに呈示する印象呈示手段とを具備することを特徴とする。
本発明によれば、鑑賞される画像が与える印象と関連する情報を画像とともに呈示することで、画像鑑賞をより印象深く楽しいものとすることが可能な画像処理装置を提供することができる。
以下、図面を参照して本発明の実施形態を説明する。
図1は、本発明の一実施形態に係る画像処理装置を含む画像処理システムの構成を示す図である。
図1は、本発明の一実施形態に係る画像処理装置を含む画像処理システムの構成を示す図である。
図1に示す画像処理システムは、撮影装置10と、画像蓄積装置20と、画像処理装置30と、出力装置40と、操作部材50とを有している。なお、これらの各部は1つの装置内に設けられていても良いし、別々の装置として設けられていても良い。以後は図1に示す画像処理システムを構成する各装置が別々の装置として設けられているものとして説明する。
撮影装置10は、図示しない被写体の撮影を行って被写体の像に基づく画像を取得する。この撮影装置10は、例えばデジタルカメラ(デジタルスチルカメラ、デジタルムービーカメラ)等である。
画像蓄積装置20は、各種の画像を記録するための各種の記録媒体である。ここで、画像蓄積装置20に記録される画像は、例えば撮影装置10で得られた画像である。この他、画像蓄積装置20がインターネット回線等の通信回線に接続されていれば、通信回線を介して通信される画像を画像蓄積装置20に記録させることも可能である。
ここで、撮影装置10によって取得された画像又は画像蓄積装置20に記録される画像には付加情報が付加されている。この付加情報は画像の取得条件等を示す情報である。例えば撮影装置10がデジタルカメラである場合には、撮影の際の撮影条件を示す情報(撮影時に用いられたレンズの種類を示す情報、撮影時のフォーカシング位置を示す情報、撮影時の露出条件(絞り値、シャッター速度)を示す情報等)、画像サイズ、ファイル名等が含まれる。
画像処理装置30は、撮影装置10において得られた画像又は画像蓄積装置20に記憶された画像の構図を特定し、特定した構図が鑑賞者に与えうる印象を判定し、判定した印象に対応した情報を画像とともに呈示する。この画像処理装置30は、画像取得部31と、構図特定部32と、印象判定部33と、印象呈示部34とを有している。これらの各部の詳細については後述する。
出力装置40は、画像処理装置30の印象呈示部34で呈示された印象に対応した情報を画像とともに再生出力する。詳細は後述するが、印象呈示部34で呈示される印象に対応した情報には、印象に対応した映像、印象に対応した音声、印象に対応した文字等がある。したがって、出力装置40も、映像や文字を表示する機能、音声を再生する機能を有しているものである。
操作部材50は、画像処理装置30の操作を行うための操作部材である。この操作部材50により、撮影者や鑑賞者は、画像処理装置30の印象呈示部34に対して指示を行うことが可能である。
以下、画像処理装置30についてさらに説明する。図2は、画像処理装置30の構図特定部32と、印象判定部33と、印象呈示部34の詳細な構成を示した図である。
図2に示すように、構図特定部32は、空間周波数解析部321と、主要被写体検出部322と、パターン特定部323とを有している。また、パターン特定部323は、形状パターン特定部3231と、形状パターン特定用データベース(DB)3232と、動きパターン特定部3233と、動きパターン特定用DB3234とを有している。
空間周波数解析部321は、画像取得部31で取得された画像の空間周波数を解析する。この空間周波数解析部321は、例えばフーリエ変換を用いて画像内の水平方向の線と画像内の垂直方向の線と画像内の斜め方向の線とがそれぞれどのように分布しているかを解析し、その解析結果を主要被写体検出部322及びパターン特定部323に出力する。
主要被写体検出部322は、画像取得部31で取得された画像における主要被写体を検出し、検出した主要被写体の形状を示す情報(主要被写体部分の画像データ)及び主要被写体の位置を示す情報をパターン特定部323に出力する。
この主要被写体の検出手法には種々のものがある。例えば、写真撮影において採用される主要被写体には人物が多いため画像内に人物が存在していれば、その人物を主要被写体とする。画像中の人物は例えば顔検出機能を用いて検出できる。ここで、人物の顔は、例えば画像中の円形且つ肌色部分を検出する等の手法によって検出することが可能である。さらに、人物の顔が検出された場合には人物の目線を検出するようにしても良い。目線は、例えば、顔中の目の部分(白色部分)を検出し、検出した目の部分における白目部と瞳部との位置関係から検出できる。また、目線については人物の目線に限らず、動物の目線も検出するようにしても良い。
また、空間周波数解析部321によって得られた空間周波数特性から、高周波成分の多い領域(情報量の多い領域)を主要被写体として検出するようにしても良い。さらには、画像取得部31で取得された付加情報から画像中の主要被写体を検出しても良い。例えば、写真撮影の際には主要被写体に合焦するようにフォーカス調整がなされることが多いため、合焦位置の被写体を主要被写体として検出しても良い。同様に、写真撮影の際には主要被写体の露出が適正となるように露出制御がなされることが多いため、画像中の適正露出の領域に含まれる被写体を主要被写体として検出しても良い。
パターン特定部323は、空間周波数解析部321で解析された画像の空間周波数特性、主要被写体検出部322で検出された主要被写体の形状と主要被写体の位置、及び主要被写体の目線から、画像取得部31で取得された画像の構図を特定する。ここで、本実施形態においては、画像内の主要被写体の形状パターンと画像内の主要被写体の位置等から予測される主要被写体の動きパターンとを画像の構図として検出する。
形状パターン特定部3231は、空間周波数解析部321で得られた空間周波数特性(画像内の線の分布)と主要被写体検出部322で検出された主要被写体の形状とが、それぞれ、形状パターン特定用DB3232に記憶されている形状パターンの何れに類似しているかを特定する。例えば、形状パターン特定部3231は、主要被写体検出部322で検出された主要被写体の形状と形状パターン特定用DB3232とに記憶されている形状パターンとのマッチングを取り、マッチングの結果、最も一致度の高い形状パターンを画像取得部31で取得された画像における主要被写体の形状パターンとする。
形状パターン特定用DB3232は、画像の鑑賞者に心理的な影響を与える代表的な形状パターンを複数記憶している。
動きパターン特定部3233は、空間周波数解析部321で得られた空間周波数特性と主要被写体検出部322で検出された主要被写体の位置、目線から画像中の主要被写体の動きが、動きパターン特定用DB3234に記憶されている動きパターンの何れに類似しているかを特定する。
例えば、動きのある被写体を撮影する際に、撮影者は、被写体を意図的に撮影画面の端に配置するように構図を決定して撮影を行うことがある。例えば、被写体の移動方向が撮影画面の右上方向である場合には、被写体を撮影画面の左下に配置して撮影を行うことで右上方向への動きがあるかのような印象を鑑賞者に与えることが可能である。このような考え方に基づいて、主要被写体の位置から主要被写体の動き方向を特定することが可能である。即ち、主要被写体が画面端に配置されている場合には、その位置から撮影画面の中心方向に向かう方向に主要被写体の動きがあるとする。また、目線が検出できている場合には、目線の方向を動きの方向とする。
動きパターン特定用DB3234は、画像の鑑賞者に心理的な影響を与える代表的な動きパターンを複数記憶している。
また、図2に示すように、印象判定部33は、印象判定部331と印象判定用DB332とを有している。印象判定部331は、動きパターン特定部3233で特定された形状パターンと動きパターンとが、それぞれ、画像の鑑賞者に与える印象を判定する。印象判定用DB332は、代表的な形状パターン及び動きパターンとこれら形状パターン及び動きパターンが画像の鑑賞者に与える心理的効果とを対応付けて記憶している。
図3(a)は、構図から特定される被写体の動きパターンと、その動きパターンによって画像の鑑賞者に与えられる心理的効果との関係を示した図である。また、図3(b)は、被写体の形状パターンと、その形状パターンによって画像の鑑賞者に与えられる心理的効果との関係を示した図である。なお、図3(a)、図3(b)はそれぞれ“玄光社MOOK フレーミングの大研究−すぐに役立つ画面構成のテクニック”、玄光社、1999年、p.25 の記載を参考にしている。図3(a)に示す各種の動きパターンを動きパターン特定用DB3234に記憶させておくとともに、図3(b)に示す各種の形状パターンを形状パターン特定用DB3232に記憶させておく。さらに、図3(a)に示す形状パターンと印象情報との対応情報、及び図3(b)に示す動きパターンと印象情報との対応情報を印象判定用DB332に記憶させておく。
印象判定部331は、動きパターン特定部3233で特定された動きパターンと類似する動きパターンに対応した印象情報を図3(a)に示す対応情報を参照して抽出することにより、被写体の動きが画像の鑑賞者に与える印象を判定する。さらに、印象判定部331は、形状パターン特定部3231で特定された形状パターンと類似する形状パターンに対応した印象情報を図3(b)に示す対応情報を参照して抽出することにより、被写体の形状が画像の鑑賞者に与える印象を判定する。
また、印象情報の別の判定手法として、空間周波数特性を利用する手法がある。例えば、撮影画面内の水平方向の空間周波数が少ない場合には、撮影画面内に水平方向の線が多いことを意味している。このような撮影画面内に水平方向の線が多い画像は、主に風景を撮影した場合に得られる画像であり、そのような画像が鑑賞者に与える心理的効果は、例えば自然な感じや、安定感、安心感である。また、撮影画面内の垂直方向の空間周波数が少ない場合には、垂直水平方向の線が多いことを意味している。このような撮影画面内に垂直方向の線が多い画像は、主に人物や人工物を撮影した場合に得られる画像であり、そのような画像が鑑賞者に与える心理的効果は、例えば人工的な感じや、緊張感である。さらに、斜め方向の空間周波数成分が多い場合には、斜め方向の線が多いことを意味している。このような画像が鑑賞者に与える心理的効果は、例えば、躍動感やリズム感である。
以上のようにして、画像内の被写体の形状や位置等から画像の構図を特定し、特定した構図が与える心理的効果を判定することが可能である。
また、図2に示すように、印象呈示部34は、メディア選択部341と、DB342と、メディア再生部343とを有している。
メディア選択部341は、画像の鑑賞者による操作部材50の操作を受けて、画像取得部31で取得された画像とともに鑑賞者に呈示される印象情報に関連した情報を再生するためのメディアをDB342から選択する。この印象情報に関連したメディアとしては、映像、音声(音楽を含む)、文字(文章)等が含まれる。例えば、画像の鑑賞者によって印象情報に関連した映像を再生するように指示がなされた場合に、メディア選択部341は、印象判定部331で判定された印象情報に関連した映像データをDB342から選択する。DB342は、図3(a)及び図3(b)に示す印象情報に関連付けられたメディアを記憶している。メディア再生部343は、画像の鑑賞者による操作部材50の操作を受けて、画像取得部31で取得された画像を再生表示するとともに、メディア選択部341で選択されたメディアを再生する。
以上説明したように、本実施形態によれば、画像の構図が鑑賞者に与える心理的効果を比較的簡便な手法で判定することが可能である。また、画像の鑑賞時に、心理的効果にマッチしたメディアをも画像の鑑賞者に呈示することができ、鑑賞者にとって画像の鑑賞をより楽しいものとすることが可能である。
また、どのようなメディアが再生されるかは実際に再生されるまで分からないので、鑑賞者はどのようなメディアが再生されるかが楽しみになる。
ここで、上述の例では、画像の撮影後に構図の特定、印象の判定、メディアの再生を行う例について説明している。例えば、画像処理装置30をデジタルカメラに持たせた場合には、フレーミング用の画像表示(スルー画表示や電子ビューファインダ表示等と呼ばれる)の際に構図の特定、印象の判定、メディアの再生を行うようにしても良い。このようにすれば、画像の撮影者は自身が撮影しようとする画像が鑑賞者に与える印象を、実際に撮影を行う前に知ることができる。これにより、撮影者のフレーミングの腕の向上が期待される。
以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。
さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。
10…撮影装置、20…画像蓄積装置、30…画像処理装置、31…画像取得部、32…構図特定部、33…印象判定部、34…印象呈示部、40…出力装置、50…操作部材、321…空間周波数解析部、322…主要被写体検出部、323…パターン特定部、331…印象判定部、332…印象判定用データベース(DB)、341…メディア選択部、342…データベース(DB)、343…メディア再生部、3231…形状パターン特定部、3232…形状パターン特定用データベース(DB)、3233…動きパターン特定部、3234…動きパターン特定用データベース(DB)
Claims (3)
- 画像と該画像に付加された付加情報との何れか一方から前記画像の構図を特定する構図特定手段と、
前記特定された画像の構図から、前記画像の鑑賞者に与えうる印象を判定する印象判定手段と、
前記印象判定手段で判定された印象に関連した情報を前記画像とともに呈示する印象呈示手段と、
を具備することを特徴とする画像処理装置。 - 前記構図特定手段は、
前記画像と前記画像に付加された付加情報との少なくとも何れか一方から、前記画像における被写体を検出する被写体検出手段と、
前記検出された被写体の形状と類似する形状パターンと前記検出された被写体の位置から予測される前記被写体の動きパターンとの少なくとも何れか一方を前記画像の構図として特定するパターン特定手段と、
を有し、
前記印象判定手段は、前記形状パターンと前記動きパターンのそれぞれに対応付けられた印象情報から前記印象を判定することを特徴とする請求項1に記載の画像処理装置。 - 前記印象呈示手段は、前記印象に関連した情報として、前記印象に関連した映像、音声、文字の少なくとも何れかを前記画像とともに呈示することを特徴とする請求項1又は2に記載の画像処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008207068A JP2010045518A (ja) | 2008-08-11 | 2008-08-11 | 画像処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008207068A JP2010045518A (ja) | 2008-08-11 | 2008-08-11 | 画像処理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010045518A true JP2010045518A (ja) | 2010-02-25 |
Family
ID=42016551
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008207068A Withdrawn JP2010045518A (ja) | 2008-08-11 | 2008-08-11 | 画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010045518A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011244214A (ja) * | 2010-05-18 | 2011-12-01 | Casio Comput Co Ltd | 動画再生装置、動画再生方法及びプログラム |
US11977981B2 (en) | 2019-05-17 | 2024-05-07 | Samsung Electronics Co., Ltd. | Device for automatically capturing photo or video about specific moment, and operation method thereof |
-
2008
- 2008-08-11 JP JP2008207068A patent/JP2010045518A/ja not_active Withdrawn
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011244214A (ja) * | 2010-05-18 | 2011-12-01 | Casio Comput Co Ltd | 動画再生装置、動画再生方法及びプログラム |
US11977981B2 (en) | 2019-05-17 | 2024-05-07 | Samsung Electronics Co., Ltd. | Device for automatically capturing photo or video about specific moment, and operation method thereof |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10367997B2 (en) | Enriched digital photographs | |
TWI253860B (en) | Method for generating a slide show of an image | |
US9389768B2 (en) | Reproducer, digital camera, slide show reproduction method, program, image display apparatus, image display method, image reproduction method, and image display program | |
JP2010010936A (ja) | 画像記録装置、画像記録方法、画像処理装置、画像処理方法、プログラム | |
JP2006245646A (ja) | 画像再生装置及び画像再生プログラム、並びにフォトムービー作成装置及びフォトムービー作成プログラム | |
JP2010232814A (ja) | 映像編集プログラムおよび映像編集装置 | |
JP4343027B2 (ja) | スライドショー作成装置および方法ならびにプログラム | |
KR20140050563A (ko) | 재생 제어 장치, 재생 제어 방법 및 기록 매체 | |
Merchant | (Re) constructing the tourist experience? Editing experience and mediating memories of learning to dive | |
JP6043753B2 (ja) | コンテンツ再生システム、サーバ、携帯端末、コンテンツ再生方法、プログラムおよび記録媒体 | |
Braverman | Video Shooter: Storytelling with DV, HD, and HDV Cameras | |
JP5532645B2 (ja) | 映像編集プログラムおよび映像編集装置 | |
JP2010045518A (ja) | 画像処理装置 | |
WO2013187796A1 (ru) | Способ автоматического монтажа цифровых видеофайлов | |
JP2005236821A (ja) | 映像表示方法、映像表示方法のプログラム、映像表示方法のプログラムを記録した記録媒体及び映像表示装置 | |
JP2006229467A (ja) | フォトムービー作成装置及びフォトムービー作成プログラム、並びに被写体認識方法 | |
JP2007258934A (ja) | 情報処理装置及び情報処理方法 | |
KR102086779B1 (ko) | 포커스 설정 모듈 및 방법, 그것을 포함하는 버추얼 영상 재생 시스템 | |
JP2010171849A (ja) | 画像再生装置および電子カメラ | |
JP2009246775A (ja) | 画像再生装置 | |
JP2010262072A (ja) | デジタルテレビ対応カラオケシステム | |
US20170287521A1 (en) | Methods, circuits, devices, systems and associated computer executable code for composing composite content | |
KR20140104121A (ko) | 복합 차원 콘텐츠 제공 시스템, 그 제공 방법 및 복합 차원 콘텐츠 파일 | |
JP2019096950A (ja) | 撮像装置、撮像方法及び撮像プログラム | |
JP2010183216A (ja) | 撮影装置、画像再生装置、及び撮影結果報知方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20111101 |