JPH11308513A

JPH11308513A - 画像再生装置及び画像再生方法

Info

Publication number: JPH11308513A
Application number: JP10124230A
Authority: JP
Inventors: Noboru Yumoto; 昇湯本
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 1998-04-17
Filing date: 1998-04-17
Publication date: 1999-11-05

Abstract

(57)【要約】【課題】撮影／記録した画像の再生時に再生画像や撮
像時に記録された画像情報から撮影テーマを自動的に抽
出してその撮影テーマを連想させる音響情報の再生出力
を行ない得る画像再生装置の提供。【解決手段】特徴抽出手段２１０は、画像の再生時に
その撮影テーマを連想させる特徴を自動的に抽出する。
特徴比較手段２２０は、抽出された特徴や日時、場所等
とテーマ特徴リストに登録されている特徴や時期、位置
的特徴を比較して、テーマコードを決定する。音響情報
出力手段２３０はテーマ抽出手段２１０で決定されたテ
ーマコードを基に音響情報登録リストをサーチして音響
情報データを取り出して音声出力手段１０に与え、音響
情報を再生出力させる。また、学習処理手段２４０を設
けてることもできる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は撮影／記録した画像
の再生時に再生画像や撮像時に記録された画像情報から
自動的に抽出された撮影テーマに応じた音響情報を再生
する、画像再生装置の画像再生効果補充技術に関する。

【０００２】

【従来の技術】デジタルカメラ等の撮像装置では画像再
生装置を有し、撮像／記録した画像を再生して液晶ディ
スプレイ等の表示装置に再生する。また、デジタルカメ
ラ等の撮像装置で撮像／記録した画像をパーソナルコン
ピュータ（以下、パソコン）等の画像再生装置で再生し
て装備されたモニター等の表示装置に再生することも行
なわれている。

【０００３】

【発明が解決しようとする課題】上記画像再生ブロック
を有する撮像装置や画像再生装置では再生された画像の
テーマ、例えば山、海、建物、花、動物、男、女、子供
といった撮影テーマは再生画像を見た者が判断し、撮像
時のムードや臨場感は回想または連想に頼っている。こ
こで、再生された画像の撮影テーマを自動的に抽出して
撮像時のムードや臨場感の回想や連想を助成することが
できれば画像再生効果をたかめることができる。

【０００４】本発明は上記着想に基づいてなされたもの
であり、撮影／記録した画像の再生時に再生画像や撮像
時に記録された画像情報から自動的に抽出された撮影テ
ーマを連想させる音響情報の再生出力を行ない得る画像
再生装置及び画像再生方法の提供を目的とする。

【０００５】

【課題を解決するための手段】上記の目的を達成するた
めに第１の発明の画像再生装置は、音響出力装置を備え
た画像再生装置であって、記録媒体に記録された撮影画
像の撮影テーマを抽出するテーマ抽出手段と、撮影テー
マに対応する音響情報を登録した音響情報登録手段と、
テーマ抽出手段によって抽出された撮影テーマに対応し
た音響情報データを前記画像の再生時に音響情報登録手
段から取り出して音響出力装置に与える音響情報出力手
段と、を備えたことを特徴とする。

【０００６】また、第２の発明は上記第１の発明の撮像
装置において、テーマ抽出手段は、画像の色成分から特
徴を抽出する色成分特徴抽出手段と、比較用色成分特徴
と撮影テーマを対応させて登録したテーマ特徴登録手段
とを有し、色成分特徴抽出手段によって抽出された色成
分特徴とテーマ特徴登録手段に登録された比較用色成分
特徴から撮影テーマを抽出することを特徴とする。

【０００７】また、第３の発明は上記第１の発明の撮像
装置において、テーマ抽出手段は、画像の認識結果から
特徴を抽出する画像特徴抽出手段と、比較用画像特徴と
撮影テーマを対応させて登録したテーマ特徴登録手段と
を有し、画像特徴抽出手段によって抽出された画像特徴
とテーマ特徴登録手段に登録された比較用画像特徴から
撮影テーマを抽出することを特徴とする。

【０００８】また、第４の発明は上記第１の発明の撮像
装置において、テーマ抽出手段は、画像の撮影日時から
特徴を抽出する時間特徴抽出手段と、比較用時間特徴と
撮影テーマを対応させて登録したテーマ特徴登録手段と
を有し、時間特徴抽出手段によって抽出された時間特徴
とテーマ特徴登録手段に登録された比較用時間特徴から
撮影テーマを抽出することを特徴とする。

【０００９】また、第５の発明は上記第１の発明の撮像
装置において、テーマ抽出手段は、画像の撮影位置から
特徴を抽出する位置特徴抽出手段と、比較用位置特徴と
撮影テーマを対応させて登録したテーマ特徴登録手段と
を有し、位置特徴抽出手段によって抽出された位置特徴
とテーマ特徴登録手段に登録された比較用位置特徴から
撮影テーマを抽出することを特徴とする。

【００１０】更に第６の発明の画像再生方法は、画像の
撮影テーマを抽出し、その撮影テーマに対応した音響情
報を、上記画像の再生時に出力することを特徴とする。

【００１１】

【発明の実施の形態】＜回路構成例＞図１は、本発明を
適用した画像再生装置の一実施例としてのデジタルカメ
ラの回路構成例を示すブロック図である。図１で、デジ
タルカメラ１００は、音声出力部１０、光学系１１、信
号変換部１２、信号処理部１３、ＤＲＡＭ１４、制御部
２０、操作部３０、表示部４０、メモリ４５、記録部５
０および電源９０を有している。なお、撮影時に位置を
検出するためのＧＰＳ装置等の位置検出装置と地理辞書
や、高度計等の環境条件計測器を備えるようにしてもよ
い。

【００１２】音声出力部１０（図２）は、再生画像から
抽出される撮影テーマ（またはキーワード）を象徴する
音楽、曲、音や音声等の音響情報を再生出力する。

【００１３】光学系１１は、撮像レンズ１１１と自動絞
り機構１１２等を含み、撮像レンズ１１１を介して集光
された被写体像の光束を後段のＣＣＤ上に結像させる。

【００１４】信号変換部１２は、ＣＣＤ，ＣＣＤ駆動用
タイミング信号生成回路，ＣＣＤ駆動用垂直ドライバ，
自動利得制御回路およびＡ／Ｄ変換器を含み、前段の光
学系１１を介してＣＣＤに結像した画像を電気信号に変
換し、デジタルデータ（以下、画像データ）に変換して
一定の周期で出力する。

【００１５】信号処理部１３は、カラープロセス回路お
よびＤＭＡコントローラを有し、信号変換部１２からの
出力をカラープロセス処理して、デジタルの輝度、色差
マルチプレクス信号（ＹＵＶデータ）とし、ＹＵＶデー
タをＤＲＡＭ１４の指定領域にＤＭＡ転送し、展開す
る。また、信号処理部１３は記録保存の際にＤＲＡＭ１
４に書込まれているＹＵＶデータを読み出してＪＰＥＧ
圧縮処理を施す。また、記録部５０を介して取り込まれ
た記録媒体（メモリーカード）５１に保存記録されてい
た画像データに伸張処理を施してＹＵＶデータを再生す
る。

【００１６】制御部２０は、ＣＰＵ，ＲＯＭおよびタイ
マ（時計）を有しており、上述の各回路および図示しな
い電源切換えスイッチ等にバスラインを介して接続し、
ＲＯＭに格納されている制御プログラムによりデジタル
カメラ１００全体の制御を行なうと共に、操作部３０か
らの状態信号に対応してデジタルカメラの各機能の実行
制御、例えば、ＲＯＭ内に格納された各処理手段の実行
による各機能の実現のための実行制御を行なう。

【００１７】操作部３０は、処理モード切換えスイッ
チ、機能選択用ボタン（複数個）、メインスイッチ、早
送りボタン３６、３７、およびＲＥＣ／再生モード切換
えスイッチ等のスイッチやボタンを構成部分とし、これ
らのスイッチ或いはボタンが操作されると状態信号が制
御部２０に送出される。

【００１８】表示部４０は液晶ディスプレイ装置等の表
示装置から構成されており、ＲＥＣモードには被写体画
像が表示され、再生モード時には再生画像を表示でき
る。

【００１９】メモリ４５はフラッシュメモリからなり、
テーマ特徴リスト４０および音響情報登録リスト５０用
の記憶領域および音声データ用の記憶領域が確保されて
おり、それぞれの記憶領域には、再生画像から抽出され
た撮影テーマの特徴とテーマコードを対応づけるための
比較用の特徴を登録したテーマ特徴リスト４０と、デジ
タル化された音響情報データと抽出された撮影テーマを
対応させた音響情報登録リスト５０が記録（登録）され
ている。なお、メモリ４５の代りにメモリーカードを用
いてもよく、また、後述のメモリーカード５１の記録領
域の一部をテーマリスト領域および音声メモリ領域とし
て用いてもよい。また、テーマ特徴リスト４０と音響情
報登録リスト５０は個別に設けてもよいが、一つのリス
トとしてもよい。

【００２０】記録部５０はメモリーカード５１を収容し
制御部２０の制御によりメモリーカード５１上に信号処
理部１３からの画像データを記録する。

【００２１】［音声出力部］音声出力部１０は、再生画
像の撮影テーマに合った音響情報を出力する。音響情報
はメモリ４５（或いはメモリーカード５１）の音響情報
登録リスト５０（図５）の示す領域に登録されており、
使用者が所望の画像を再生すると制御部２０を介して再
生画像の撮影テーマに対応する音響情報が読み出されて
音声出力部１０に与えられる。

【００２２】図２は音声出力部１０の構成例を示すブロ
ック図であり、音声出力部１０は、制御部２０を介して
メモリ４５から取り出された音響情報データ（デジタル
データ）をＤ／Ａ変換してアナログデータ（音声信号）
とするＤ／Ａ変換器１０１と、Ｄ／Ａ変換器１０１の出
力を整形して出力用音声信号を得る音声信号処理部１０
２と、音声信号処理部１０２からの音声信号を音に変換
して出力するスピーカ１０３を有している。

【００２３】［色信号成分抽出回路］図３は信号処理部
１３のカラープロセス回路１３１の構成例を示すブロッ
ク図であり、カラープロセス回路１３１は、Ｒ（赤）成
分積分器１３１１，Ｇ（緑）成分積分器１３１２，Ｂ
（青）成分積分器１３１３，ＡＷＢ回路１３１７、信号
合成回路１３１８およびＡＥ用積分器等（図示せず）を
有している。

【００２４】信号変換部１２のＣＣＤで光電変換された
画像信号は、信号変換部１２のＡ／Ｄ変換器でＡ／Ｄ変
換されカラープロセス回路１３１に入力される。カラー
プロセス回路１３１では、入力信号に対し自動絞り（Ａ
Ｅ）用信号，オートホワイトバランス（ＡＷＢ）用信
号，オートフォーカス（ＡＦ）用信号，およびＹ，Ｃ
ｂ，Ｃｒ信号の生成処理等を行なう。

【００２５】ここで、ＡＥ用積分器では入力信号を積分
してその積分値を出力し、ＡＦ用フィルタでは入力信号
からコントラストオートフォーカス用高周波を検出する
ため、入力信号に対しハイパスフィルタ（ＨＰＦ）をか
けた後にその出力の積分値を出力し、ＡＷＢ回路１３１
７ではＲ成分積分器１３１１，Ｇ成分積分器１３１２お
よびＢ成分積分器１３１３によって積分された各成分の
積分値を出力する。これら出力は制御部２０に入力さ
れ、制御部２０はこれらの信号を基に信号処理部１３の
ＡＧＣに与えるゲインや、シャッタスピードや、レンズ
１１１を制御する制御信号を出力する。

【００２６】＜テーマ特徴リスト＞図４はメモリ４５に
登録されているテーマ特徴リストの構造の一例を示す説
明図であり、（ａ）は登録する特徴を一つとしたテーマ
特徴リストの構造例を示し、（ｂ）は複数の特徴を登録
したテーマ特徴リストの例を示す。テーマ特徴リスト４
０には再生画像から抽出されたテーマの特徴とテーマコ
ードを対応づけるための比較用の特徴とテーマコードが
予め登録されている。また、後述するように学習処理手
段２４０を設けた場合にはテーマ特徴リスト４０に新た
な特徴を追加したり、登録されている特徴の構成を変更
することができる。

【００２７】図４（ａ）で、テーマ特徴リスト４０はテ
ーマコード欄４１と特徴欄４２からなり、テーマコード
欄４１には抽出されるテーマ（海（春夏秋冬）、山（春
夏秋冬）、湖、夜空、遊園地、祭・・・、子供、男、
女、建物、花、動物、電車、飛行機、・・・等）を意味
するテーマコードが登録され、特徴欄４２にはその撮影
テーマを特徴付ける値（背景色、画像類似度等再生画像
から抽出可能な特徴や、月、期間（日時）、曜日、国の
休日等の撮影日時から得られる時間的特徴や、高度、経
度、緯度、国、州、県、島、施設など撮影時に得られる
場所的（位置）特徴等）が一つ登録されている。

【００２８】図４（ａ）の例は、再生画像の背景の色成
分の割合によって撮影テーマを推測するようにテーマ特
徴リストを構成した例であり、「海」に対応するテーマ
コード「０１」の特徴「青＞５０％」は再生画像から抽
出した最大色成分が青色成分であり、それが全体の５０
％を超えている場合撮影テーマが「海」であることを意
味する。同様に、「春山或いは夏山」に対応するテーマ
コード「０２」の特徴「緑＞６０％」は再生画像から抽
出した最大色成分が緑色成分であり、それが全体の６０
％を超えている場合に撮影テーマが「春山或いは夏山」
であることを意味する。同様に、特徴「黄＞６０」は秋
山（コード＝「０３」）を、特徴「白＞６０」は冬山
（コード＝「０４」）を意味する。同様にして、背景の
色成分の割合で撮影テーマを類別したテーマ特徴リスト
を構成することができる。また、同様に画像の類似度等
で撮影テーマを類別化したテーマ特徴リストを構成する
こともでき（実施例２）、また、撮影日時から得られる
時間的特徴によりテーマ特徴リストを構成することもで
き（実施例３）、撮影時に得られる場所的（位置）特徴
によりテーマ特徴リストを構成することもできる（実施
例４）。

【００２９】図４（ｂ）で、テーマ特徴リスト４０’は
テーマコード欄４１と複数の特徴欄４２−１〜４２−５
からなり、テーマコード欄４１には図４（ａ）の場合と
同様に抽出される撮影テーマを意味するテーマコードが
登録され、特徴欄４２−１〜４２−５にはその撮影テー
マを特徴付ける値（背景色、画像類似度等再生画像から
抽出可能な特徴や、撮影日時から得られる時間的特徴
や、撮影時に得られる位置的特徴等）が登録されてい
る。

【００３０】図４（ｂ）の例では、テーマ「海」に対応
するテーマコード「０１」は、５つの特徴、「青＞５０
％」，「白＞２０％」，「高度＜２０」，「沖縄」，
「３月」で特徴付けられている。すなわち、再生画像か
ら抽出した青色成分が全体の５０％超、白成分が２０％
超、撮像場所の高度が２０ｍ（メートル）未満、場所が
沖縄、時期が３月の場合に撮影テーマが「海」であるこ
とを意味する。同様に、特徴「群青＞４０％」，「グレ
イ＞３０％」，「高度＜２０」，「沖縄」，「１２月」
の場合、すなわち、再生画像から抽出した青色成分と緑
色成分の所定混合比の和が全体の５０％超、白成分と
赤、青、緑の所定混合比の和が３０％超、撮像場所の高
度が２０ｍ（メートル）未満、場所が沖縄、時期が１２
月の場合にも撮影テーマが「海」であることを意味す
る。同様に、特徴「青＞５０％」，「白＞２０％」，
「高度＜２０」，「フロリダ」，「８月」の場合にも撮
影テーマが「海」であることを意味する。同様に、特徴
「緑＞３０％」，「茶＞３０％」，「高度＞１５０
０」，「信州」，「７月」の場合、すなわち、再生画像
から抽出した緑色成分が全体の３０％超、茶成分と赤、
緑の所定混合比の和が３０％超、撮像場所の高度が１５
００ｍ超、場所が信州、時期が７月の場合には撮影テー
マが「山」であることを意味する。図４（ｂ）の例のよ
うに様々な特徴を組合せた特徴リストを構成することに
よりより確度高い撮影テーマの決定が可能となる。ま
た、これに学習操作を加えることによりさらに確実性が
増す。

【００３１】＜音響情報登録リスト＞図５は、メモリ４
５に登録されている音響情報登録リスト５０の構造の一
例を示す説明図である。音響情報登録リスト５０には上
述したテーマ特徴リスト４０，４０’に対応するテーマ
コードとそれに対応する音響情報（音楽、メロディー、
音、音声メッセージ等、再生画像に撮影テーマを連想さ
せる効果を与える音情報）の記憶位置がデジタル化され
て登録されている。なお、テーマコードとデジタル化さ
れた音響情報を登録するようにしてもよい。

【００３２】図５の例では、テーマコード欄５１および
音響情報欄５２が示されている。テーマコード欄５１に
は特徴比較手段２２０によって一致判定がなされた撮影
テーマに対応するコードが記憶される。また、音響情報
欄５２には再生画像に表現上の効果を与える音響情報を
記録した先頭アドレス（メモリ４５上の格納位置の最初
のアドレス）とそのサイズ（記憶容量）が登録されてい
る。そして、音響情報欄５２に登録された音声データ用
の記憶領域には対応する音響情報がデジタル化されて記
憶されている。なお、音響情報のサイズを一定にして
（すなわち、音楽やメッセージを一定の長さにして）音
響情報欄５２へのサイズの登録を省略するようにしても
よい。

【００３３】図５の例で、音響情報登録リスト５０のテ
ーマコード「０１」は海を意味し、この場合音響情報欄
５２には海の歌のアドレスとそのサイズが記憶され、音
響情報欄５２に登録された音声データ用の記憶領域には
海の歌が登録されている。また、テーマコード「０２」
は夏山を意味し、この場合音響情報欄５２には夏山の歌
のアドレスとそのサイズが記憶され、音響情報欄５２に
登録された音声データ用の記憶領域には夏山の歌が登録
されている。同様に、テーマコード「０３」には秋山を
表現する曲が対応し、テーマコード「０４」には冬山を
表現する曲が対応し、テーマコード「０５」には花見を
表現する桜演筝曲が対応している。このように、音響情
報登録リスト５０には湖が撮影テーマの場合には湖のメ
ロディーをといったようにテーマ毎に予めテーマコード
とそれに対応する音響情報のアドレスが予め登録され
る。

【００３４】なお、メモリ４５に登録するテーマコード
（および音響情報の格納アドレス，サイズ）と音響情報
はメーカが予め全てを登録するようにしてもよいが、音
声出力装置１０を音声入出力部を備えた音声入出力装置
とし、音響情報およびコードが入力されると自動的に音
響情報登録リスト５０を作成する効果登録／変更手段
（プログラム）を設けて（制御部２０のＲＯＭまたはメ
モリーカード５１に格納しておく）、使用者がテーマコ
ードと音響情報を入力して、音響情報を追加したり登録
されている音響情報を変更できるようにしてもよい。

【００３５】＜再生画像効果付与手段＞再生画像効果付
与手段は再生画像から撮影テーマを抽出しその撮影テー
マに合った音楽等の音響情報を再生時に出力する。図６
は再生画像効果付与手段の構成例を示すブロック図であ
り、再生画像効果付与手段２００は、（ａ）に示すよう
に特徴抽出手段２１０，特徴比較手段２２０，音響情報
出力手段２３０を有している。なお、（ｂ）に示すよう
に学習処理手段２４０を備えるようにしてもよい。

【００３６】特徴抽出手段２１０は、撮影画像の再生時
にその撮影テーマを連想させる特徴を自動的に抽出す
る。撮影テーマを連想させる特徴の抽出方法の例として
は、再生画像の背景（背景画像）の特徴を認識して撮影
テーマを抽出する方法（実施例１）、再生画像の中心画
像（対象画像）の特徴を認識して撮影テーマを抽出する
方法（実施例２）、画像の撮影日時や場所から中心テー
マの特徴を抽出する方法（実施例３）、画像の撮影場所
から撮影テーマを抽出する方法（実施例４）、およびこ
れら４つの方法の組合せによる方法（実施例５）があ
る。

【００３７】特徴比較手段２２０は、これらの方法によ
って抽出された特徴や日時、場所等とテーマ特徴リスト
４０に登録されている特徴や時期、位置的特徴を比較し
て、テーマコードを決定する。

【００３８】音響情報出力手段２３０は特徴比較手段２
２０で決定されたテーマコードを基に音響情報登録リス
ト５０をサーチして音響情報データ（音声データ）を取
り出して音声出力手段１０に与える。

【００３９】学習処理手段２４０には、出力された音響
情報が中心テーマと異なっていた場合に、使用者がボタ
ン操作等により音響情報を切換えることにより遷移し、
その切換えた結果を基にテーマ特徴リスト４０に新たに
テーマコードと比較用特徴データを追加したり、既に登
録されている比較用特徴データを更新する。なお、前記
特徴抽出手段２１０及び特徴比較手段２２０を再生時で
はなく撮影時又は他の所定のタイミングで動作させて決
定したテーマコードを撮影画像と対応して記憶させてお
き、再生時に再生画像と対応して記憶されているテーマ
コードに応じた音響出力を行なうようにしてもよい。

【００４０】［動作例］図７は、音響情報再生時の制御
部の基本的動作例（Ｓ１〜Ｓ８）を示すフローチャート
であり、再生画像効果付与手段２００に学習処理手段２
４０を加えた場合（Ｓ９〜Ｓ１２）の動作例を示す。

【００４１】デジタルカメラ１００で使用者が再生モー
ドを選択し（Ｓ１）、早送りボタン３６または３７を操
作して液晶ディスプレイ４０に表示させる画像の選択を
行なう（Ｓ２）。所望の画像で使用者が早送りボタン３
６または３７の操作を停止すると（Ｓ３）、メモリーカ
ード５１に記録されている撮影画像が再生され、液晶デ
ィスプレイ４０に表示される（Ｓ４）。画像の再生とほ
ぼ同時に制御部２０は再生画像効果付与手段２００を起
動して再生画像からの撮影テーマ用の特徴抽出処理を行
なう。なお、図４（ｂ）のテーマ特徴リスト４０’のよ
うに１つのテーマコードについて複数の特徴が対応して
いる場合には登録されている特徴の種類分の特徴を抽出
する（Ｓ５）。

【００４２】特徴抽出処理が終ると、制御部２０はテー
マ特徴リスト４０をサーチして抽出した特徴とテーマ特
徴リストに登録されている特徴を比較して（Ｓ６）、一
致した特徴に対応するテーマコードを決定する。なお、
図４（ｂ）のテーマ特徴リスト４０’のように１つのテ
ーマコードについて複数の比較用特徴が対応している場
合には、抽出された複数の種類の特徴が全てあるテーマ
コードに対応する複数の比較特徴条件を満たしている場
合にそのテーマコードを再生画像のテーマに対応するテ
ーマコードとして決定する（Ｓ７）。テーマコードが決
定されると、そのテーマコードをキーとして音響情報登
録リスト５０をサーチして音響情報データ（音声デー
タ）を取り出して音声出力手段１０に与えて音声出力手
段１０から音響情報を出力させる（Ｓ８）。

【００４３】使用者が再生画像と音響情報が一致してい
ないと感じた場合に（Ｓ９）、音響情報変更ボタン（図
示せず）を使用者が押すと他の音響情報が順次出力する
ので撮影テーマに一致する音響情報がある場合に（Ｓ１
０）、学習指示ボタン（図示せず）を押すとその撮影テ
ーマに一致する音響情報（音響情報の格納アドレス）と
取得した特徴を対応づけた比較用特徴データとテーマコ
ードを新たに生成してテーマ特徴リスト４０に追加す
る。また、既に登録されている比較用特徴データを更新
することもできる（Ｓ１１）。使用者が再試行ボタン
（図示せず）を押した場合にはＳ６に戻る（Ｓ１２）。

【００４４】＜実施例１＞本実施例は再生画像の撮影テ
ーマとなる特徴を再生画像の背景（背景画像）の特徴か
ら認識する例の一実施例であり、背景の色成分比率を基
に特徴を抽出する例である。

【００４５】図８は特徴抽出手段２１０の一実施例とし
ての色成分特徴抽出手段の構成例を示すブロック図であ
り、色成分特徴抽出手段２１０−１は色成分積分手段２
１１および色成分特徴抽出手段２１２からなっている。
色成分積分手段２１１は撮影画像の再生時に、撮影画像
（画像データ）から図３に示したカラープロセス回路１
３１を用いてＲ，Ｇ，Ｂ信号成分を取り出して副走査方
向の画素を色成分毎にそれぞれ主走査方向に積分して１
フレーム分の色積分分布値を得る。なお、カウントする
信号成分は副走査方向に所定の間隔をおいたサンプル画
素についての積分でよい。

【００４６】今、図９（ａ）に示すような撮影テーマ
「海（御来光）」の再生画像の色成分を色成分積分手段
２１１により副走査方向に積分すると、図９（ｂ）に示
すようにＢ（青）成分は海と空の色で５０％を超えるが
中央附近で太陽の光に遮られて５０％以下となり、Ｇ
（緑）成分は海の色で１５〜２０％であるがやはり中央
附近で低くなり、Ｒ（赤）成分は中央附近で５０％を超
えている。色成分特徴抽出手段２１２は色成分積分手段
２１１で得た１フレーム分の色成分分布をそれぞれ積分
して全体に対する色成分比を求めて特徴とする。色成分
特徴抽出手段２１２は、また、抽出した特徴（色成分）
と１個の色成分特徴を比較する場合（テーマ特徴リスト
４０の場合）は色成分比のうち最大の色成分比を特徴と
して抽出する。また、複数の色成分特徴と比較する場合
（テーマ特徴リスト４０’の場合）には比較する特徴数
に応じた数の色成分を抽出する。

【００４７】また、本実施例ではＲ，Ｇ，Ｂの単色成分
に分解してその比率を特徴としたが、コバルト色、群青
色、茶色、草色、橙色、褐色、白、灰色、黒等の色成分
比（或いは、それらを構成するＲ，Ｇ，Ｂ比率）を特徴
としてもよい（但し、この場合テーマ特徴リストにもこ
れらの色成分からなる複数の比較特徴が登録されている
ものとする）。

【００４８】また、本実施例では背景から一様に色成分
をサンプリングしたが、図１０または図１１に示すよう
に背景を水平に２分割或いは３分割してそれぞれの背景
領域での色成分分布から特徴色を抽出するようにしても
よい。すなわち、図１０の例では（ａ）に示すように背
景を上下に２分割して、（ｂ），（ｂ’）に示すように
上部と下部の色成分（Ｒ，Ｇ，Ｂ）比率を求める。
（ａ）を海の再生画像とし、上部が空、下部が海におお
よそ応っていて、上部をコバルト色、下部を群青色とす
ると、その色分布は上部が（ｂ）に示すようにＢ成分が
７０％程度、Ｇ成分が少々といった成分比となる。ま
た、下部は（ｂ’）に示すようにＢ成分が５０％程度、
Ｇ成分が２５％程度となる。従って、特徴として上部：
青（Ｂ＝７０％），下部：群青（Ｂ＝５０％，Ｇ＝２５
％）を得ることができる。この場合、テーマ特徴リスト
４０’の特徴欄に２つの色成分欄（上部色成分欄、下部
色成分欄）を設けるようにして、テーマコード毎に比較
成分を登録しておけば、上下の色成分によって撮影テー
マを決定できる。

【００４９】また、図１１の例では（ａ）に示すように
背景を水平に３分割して、（ｂ），（ｂ’），（ｂ”）
に示すように上部，中央部分および下部の色成分（Ｒ，
Ｇ，Ｂ）比率を求める。（ａ）を山の再生画像とし、上
部が空（そら）、中央部が山頂周辺、下部が山麓におお
よそ応っていて、上部をコバルト色、中央部を岩と木少
々、下部を雑木とすると、その色分布は上部が（ｂ）に
示すようにＢ成分が７０％程度、中央部が（ｂ’）に示
すようにＢ成分が５０％程度，Ｒ成分が３０％程度，Ｇ
成分が少々、下部がＧ成分が５０％，Ｒ成分が４０％程
度，Ｂ成分が少々となる。従って、特徴として上部：青
（Ｂ＝７０％），中央部：橙色（Ｇ＝５０％，Ｒ＝３０
％），下部：赤緑色（Ｇ＝５０％，Ｒ＝４０％）を得る
ことができる。この場合、テーマ特徴リスト４０’の特
徴欄に３つの色成分欄（上部色成分欄、中央部色成分
欄，下部色成分欄）を設けるようにして、テーマコード
毎に比較成分を登録しておけば、上中下の色成分によっ
て撮影テーマを決定できる。

【００５０】また、上述の図１０，図１１の例では背景
を水平方向に分割したが垂直方向に分割して各々の部分
の主な色成分を得て特徴として抽出するようにしてもよ
い。この場合、テーマ特徴リスト４０’の特徴欄に縦方
向の色成分欄（例えば、左部色成分欄、中部色成分欄，
右部色成分欄）を設けるようにして、テーマコード毎に
比較成分を登録しておけば、縦方向の色成分によって撮
影テーマを決定できる。

【００５１】また、本実施例では色成分比率或いは色成
分の組合せにより特徴を求め、撮影テーマを決定する例
について述べたが色成分比率或いは色成分の組合せによ
る特徴だけでなく、後述の画像特徴や、時間的特徴およ
び位置的特徴と組合せることによりより確度の高い撮影
テーマの決定が可能となる。

【００５２】＜実施例２＞本実施例は再生画像の撮影テ
ーマとなる特徴を再生画像の中心画像（対象画像）の認
識結果から抽出する例の一実施例である。

【００５３】［実施例２−１］図１２は特徴抽出手段１
２０の一実施例としての画像特徴抽出手段の構成例を示
すブロック図であり、画像特徴抽出手段２１０−２は外
郭抽出手段２１１’，外郭パターン化手段２１２’およ
びパターン比較手段２１３’からなり、比較用イメージ
パターンおよびパターンコードを登録したパターン辞書
２１４’を備えている。また、図１３は再生画像および
抽出されたパターンの説明図である。外郭抽出手段２１
１’は再生画像から中心画像の外郭を抽出する。図１３
の例では（ａ）に示す再生画像から中心画像１３１の外
郭を抽出する（抽出された外郭画像は通常は線が波打っ
ていたり姿勢が傾いていたりする）。外郭パターン化手
段２１２’は外郭抽出手段２１１’によって抽出された
外郭の外郭線を平滑化したり、傾斜を正してから一定の
大きさに正規化して図１３（ｂ）に示すような正規化パ
ターン（イメージデータ）を生成する。

【００５４】パターン比較手段２１３’はパターン辞書
２１４’に登録されている比較用イメージパターンと外
郭パターン化手段２１２’で得た正規化パターンとを順
次比較して一致或いは類似度が所定の閾値以上の場合に
その比較用イメージパターンのコードを抽出特徴データ
として出力する。パターン辞書２１４’は比較用イメー
ジパターンおよびパターンコードからなり、老若男女、
動物、植物、乗物、道具等のパターンを登録している。
また、これら老若男女、動物、植物、乗物、道具等は各
１種類ではなく、通常は１対象について複数のパターン
が登録されている。例えば、犬のパターンを例とすると
大型犬、中型犬、小型犬といった種類だけでなく犬種ご
とに複数のパターン（座っているパターン、立っている
パターン、正面パターン、側面パターン、上向きパター
ン、下向きパターン、後ろ向きパターン等）が登録され
ている。また、パターン辞書２１４’を学習可能に構成
してもよい。

【００５５】［実施例２−２］図１４は特徴抽出手段の
一実施例としての画像特徴抽出手段の構成例を示すブロ
ック図であり、画像特徴抽出手段２１０−２’は輪郭抽
出手段２１１”，輪郭特徴抽出手段２１２”，輪郭特徴
比較手段２１３”および判定手段２１４”からなり、比
較用輪郭データおよび特徴コードを登録した特徴辞書２
１４”を備えている。また、図１５は説明用の再生画像
の例である。輪郭抽出手段２１１”は再生画像から中心
画像の輪郭を抽出する。輪郭特徴抽出手段２１２”は、
輪郭抽出手段２１１”によって抽出された輪郭の輪郭線
の傾きや方向を順次右廻り（または左廻り）に解析して
複数のベクトルデータを得て輪郭特徴として抽出した
り、輪郭の特異部分、例えば極端な突出部や凹部または
首の長さや鼻の長さや手の長さ、脚の数や牙や尾の有無
を調べてその数や長さの割合、位置等の外観的特徴を輪
郭特徴として抽出する。

【００５６】例えば、図１５（ａ）のラクダの再生画像
では輪郭線から抽出したベクトルデータの他、首の長
さ、コブの数、足の数、尾の有無等が特徴として抽出さ
れる。また、（ｂ）の象の再生画像では輪郭線から抽出
したベクトルデータの他、首の長さ、鼻の長さ、牙、足
の数、尾の有無等が特徴として抽出される。輪郭特徴比
較手段２１３”は特徴辞書２１４”に登録されている比
較用ベクトルデータ（特徴量）および外観的特徴と輪郭
特徴抽出手段２１２”で得たベクトルデータおよび外観
的特徴を比較して一致或いは類似度が所定の閾値以上の
場合にその比較用データのコードを抽出特徴データとし
て出力する。特徴辞書２１４’は比較用特徴量および外
郭特徴とデータコードからなり、老若男女、動物、植
物、乗物、道具等の比較用特徴量および外郭特徴を登録
している。また、これら老若男女、動物、植物、乗物、
道具等は各１種類ではなく、通常は１対象について複数
の比較用特徴量および外郭特徴が登録されている。ま
た、特徴辞書２１４”を学習可能に構成してもよい。

【００５７】また、本実施例２では画像認識の結果によ
り特徴を求め、撮影テーマを決定する例について述べた
が色成分比率或いは色成分の組合せや後述の時間的特徴
および位置的特徴と組合せることによりより確度の高い
撮影テーマの決定が可能となる。

【００５８】＜実施例３＞本実施例は再生画像の撮影テ
ーマとなる特徴を画像の撮影日時から抽出する例であ
る。図１６は特徴抽出手段２１０の一実施例としての時
間特徴抽出手段の構成例を示すブロック図であり、時間
特徴抽出手段２１０−３は、日時データ取得手段２１６
および日時分析手段２１７からなり、比較用日データお
よび時期データと特徴コードを登録した特徴カレンダ２
１９を備えている。また、図１７は撮影情報登録リスト
の一実施例を示す図である。

【００５９】日時データ取得手段２１６は、画像の撮影
時に画像と共に記録された日時を再生時に記録画像から
取得する。撮影画像には撮影日時が記録されているか、
撮影日時データが別途記録されて再生時に再生画像に重
畳表示される。前者の場合、再生画像と対応する記録画
像の日時記録領域を参照して日時データを取得すること
が出来る。また、後者の場合には図１７（ａ）に示すよ
うな日時や、撮影場所等の撮影条件を撮影時に画像と対
応づけて登録した撮影情報登録リスト１７０が画像デー
タと共にメモリーカード５１に記録されているので、撮
影情報登録リストを参照して日時を取得することができ
る。

【００６０】日時分析手段２１７は日時データ取得手段
２１６によって取得された日時データを基に特徴カレン
ダ２１９の比較特徴と比較して日時的特徴を抽出する。
抽出される日時的特徴としては、朝、日中、夕方、夜と
いった１日の時間的特徴や、その日が特別な日の場合に
その情報（例えば、祝日、ゴールデンウイーク、正月、
お盆、花見ごろ、バレンタインデー等）や、その日の属
する月や季節（春夏秋冬）を特徴として抽出する。特徴
カレンダ２１９には、国（州）別に、朝、日中、夕方、
夜といった１日の時間的特徴や、その日が特別な日の場
合にその情報（例えば、祝日、ゴールデンウイーク、正
月、お盆、花見ごろ、バレンタインデー等）や、その日
の属する月や季節（春夏秋冬）が比較特徴として登録さ
れている。

【００６１】また、本実施例では時間的特徴により特徴
を求め撮影テーマを決定する例について述べたが色成分
比率或いは色成分の組合せや画像の特徴や後述の位置的
特徴と組合せることによりより確度の高い撮影テーマの
決定が可能となる。

【００６２】＜実施例４＞本実施例は再生画像の撮影テ
ーマとなる特徴を画像の撮影場所から抽出する例であ
る。また、本実施例は、フラッシュメモリ５１に記録画
像と共に図１７（ａ）に示すような撮影日時や撮影場所
を撮影時に画像と対応づけて登録した撮影情報登録リス
ト１７０か或いは図１７（ｂ）に示すような位置座標や
高度等の位置データを撮影時に記録した撮影情報登録リ
スト１７０’が登録されている場合の本発明の実施例で
ある。

【００６３】図１８は、特徴抽出手段２１０の一実施例
としての位置（場所）特徴抽出手段の構成例を示すブロ
ック図であり、位置特徴抽出手段２１０−４は、位置デ
ータ取得手段２１６’および位置分析手段２１７’から
なり、比較用位置データを登録した地理辞書２１９’を
備えている。位置データ取得手段２１６’は、画像の撮
影時に記録された撮影場所データ等の位置データを画像
情報リスト１７０（或いは１７０’）から取得する。

【００６４】位置分析手段２１７’は位置データ取得手
段２１６’によって取得された位置データを基に地理辞
書２１９’の比較特徴と比較して位置的特徴を抽出す
る。抽出される位置的特徴としては、その場所の属する
国（州）名および国（州）コード、その場所の位置的情
報（山、谷、川、湖、市、町、村、海、半島、岬、港、
駅、飛行場、景勝地等の名称とそれらの分類コード或い
は座標）を特徴として抽出する。

【００６５】特徴カレンダ２１９には、国（州）別に、
地理情報（山、谷、川、湖、市、町、村、海、半島、
岬、港、駅、飛行場、景勝地等の名称とそれらの分類コ
ード或いは座標）が比較特徴として登録されている。

【００６６】また、本実施例では位置的特徴により特徴
を求め撮影テーマを決定する例について述べたが色成分
比率或いは色成分の組合せや画像の特徴や後述の時間的
特徴と組合せることによりより確度の高い撮影テーマの
決定が可能となる。

【００６７】＜実施例５＞本実施例は再生画像の特徴を
上記実施例１〜４で示したような複数の特徴抽出法を用
いて抽出し、抽出された複数の特徴を用いて再生画像テ
ーマを決定し、音響情報の再生出力を行なう例である。
図１９は再生画像効果付与手段の一実施例の構成を示す
ブロック図であり、再生画像効果付与手段２００’は特
徴抽出手段２１０’，特徴比較手段２２０’，音響情報
出力手段２３０’を有している。なお、登録情報種判定
手段２５０を設けることが望ましい。また、図６（ｂ）
に示すように学習処理手段２４０を備えるようにしても
よい。

【００６８】特徴抽出手段２１０’は、実施例１で述べ
た色成分特徴抽出手段２１０−１、実施例２で述べた画
像特徴抽出手段２１０−２、実施例３で述べた時間特徴
抽出手段２１０−３、実施例４で述べた位置特徴抽出手
段２１０−４から構成されており、再生画像から色成分
特徴，画像特徴，時間特徴，位置特徴を抽出して特徴比
較手段２２０’に与える。なお、特徴抽出手段２１０’
は再生画像の中心画像が人物や動物、建物、植物等の特
定の画像ではなく中心画像が判然としない場合や、景勝
地、山，海、湖、太陽、森、林、町並み、祭といった風
景的画像等の場合には画像特徴抽出手段２１０−２は画
像特徴を抽出をしない（＝特徴なしデータを出力す
る）。

【００６９】特徴比較手段２２０’は、これらの方法に
よって抽出された色成分特徴，画像特徴，時間特徴，位
置特徴の全部またはその組合せを比較して、テーマコー
ドを決定する。音響情報出力手段２３０’は特徴比較手
段２２０’で決定されたテーマコードを基に音響情報登
録リスト５０をサーチして音響情報データ（音声デー
タ）を取り出して音声出力手段１０に与える。登録情報
種判定手段２５０はテーマ特徴リストに登録してある特
徴の種類を調べて、登録されていない種別の特徴がある
場合にはそれに相当する抽出手段の動作を停止させる。
すなわち、図２０の例に示すようにテーマ特徴リスト４
０”を色成分特徴，画像特徴，時間特徴，位置特徴で構
成した場合には特徴抽出手段２１０’で再生画像から色
成分特徴，画像特徴，時間特徴，位置特徴を抽出する。
しかし、前述（図４）したテーマ特徴リスト４０’を用
いる場合は、特徴欄に２つの色特徴と２つの位置特徴
（高度および国（州））と時間特徴を登録するように構
成されているので、特徴抽出手段２１０’で再生画像か
ら色成分特徴，画像特徴，時間特徴，位置特徴を抽出し
ても、特徴比較手段２２０’では画像特徴を用いない。
そこで、特徴抽出手段２１０’が起動した際に先ずテー
マ特徴リストに登録してある特徴の種類を登録情報種判
定手段２５０で調べ、登録されていない特徴の種別につ
いては対応の抽出手段を動作させないようにする。すな
わち、テーマ特徴リスト４０’を備えた装置の例では画
像特徴抽出手段２１０−２を動作させないようにする。

【００７０】［動作例］図２１は、音響情報再生出力を
伴う再生画像の例を示す説明図であり、図２２は、図１
９の再生画像効果付与手段による音響情報再生出力時の
制御部の動作例を示すフローチャートである。図２１で
は（ａ）に示すように山の画像を再生すると山の歌が音
声出力部１０から出力され、画面をスクロールさせて
（ｂ）に示すように海の画像を再生すると海の歌が音声
出力部１０から出力される様子を示している。以下、再
生画像効果付与手段２００’による音響情報再生出力時
の制御部の動作例について、図２１，２２を基に説明す
る。また、図４のテーマ抽出リスト４０’を用いるもの
とする。

【００７１】デジタルカメラ１００で使用者が再生モー
ドを選択し（Ｔ１）、早送りボタン３６または３７を操
作して液晶ディスプレイ４０に表示された選択用画像の
選択を行なう（Ｔ２）。所望の画像で使用者が早送りボ
タン３６または３７の操作を停止すると（Ｔ３）、メモ
リーカード５１に記録されている撮影画像が再生されて
液晶ディスプレイ４０に表示される（Ｔ４）。画像の再
生とほぼ同時に制御部２０は再生画像効果付与手段２０
０’を起動して再生された画像（図２１）からテーマ用
の特徴抽出処理を行なう。特徴抽出処理に先立って登録
情報種判定手段２５０はテーマ特徴リスト４０’を調べ
ると画像特徴がないので（Ｔ５）これを検出して画像特
徴抽出処理をバイパスするようにプログラムスイッチを
操作する（Ｔ６）。次に、色成分特徴を抽出する（この
結果図２１（ａ）からは緑成分５５％，茶成分４１％を
抽出した）（Ｔ７）。次に、画像特徴を抽出しようとす
るが、画像特徴抽出処理がバイパスされているためＴ９
に遷移する（Ｔ８）。次に、画像情報登録リスト１７
０’から時間データ：撮影日時１９９７年７月１５日午
前１１時３０分を取得して、特徴カレンダ２１９から時
間特徴（「７月」）を得る（Ｔ９）。

【００７２】次に、画像情報登録リスト１７０’から位
置データ：高度１６００ｍと地球座標（北緯３７°２
０′、東経１３７°４０′）を取得して、地理辞書２１
９’から位置特徴（１６００ｍ，「信州」）を得る（Ｔ
１０）。特徴抽出処理が終ると、制御部２０はテーマ特
徴リスト４０’をサーチして抽出した特徴とテーマ特徴
リストに登録されている特徴を順次比較して、一致した
特徴に対応するテーマコードを決定する。この場合、テ
ーマ特徴リスト４０’は１つのテーマコードについて複
数の特徴が対応しているので、抽出された３種類の特徴
５個（２つの色成分特徴（緑成分５５％，茶成分４１
％）、２つの位置的特徴（１６００ｍ，信州）、１つの
時間的特徴（７月）、について、テーマ特徴リスト４
０’の特徴欄のそれぞれの特徴に対応する比較特徴（特
徴１〜５）と比較し、比較特徴の条件を全て満たしてい
る場合にそのテーマコードを再生画像の撮影テーマに対
応するテーマコードとして決定する。

【００７３】すなわち、特徴リスト４０’の色成分比較
特徴４２−１（特徴１）と最初の色成分特徴（緑成分５
５％）とを比較し（Ｔ１１−１）、これを満足する内容
の色成分比較特徴１がある場合にはそれのテーマコード
を保持してＴ１１−３に遷移し、満足しない場合にはＴ
１４に遷移する（Ｔ１１−２）。次に、特徴リスト４
０’のステップＴ１１−２で保持したテーマコードと対
応して記憶されている色成分比較特徴４２−２（特徴
２）と２つ目の色成分特徴（茶成分４１％）とを比較し
（Ｔ１１−３）、満足した場合にはＴ１２−１に遷移
し、満足しない場合にはテーマコードの保持を取消して
Ｔ１４に遷移する（Ｔ１１ー４）。次に、特徴リスト４
０’のステップＴ１１−２で保持したテーマコードと対
応して記憶されている位置（高度）比較特徴４２−３
（特徴３）と取得した高度（１６００ｍ）とを比較し
（Ｔ１２−１）、満足した場合にはＴ１２−３に遷移
し、満足しない場合にはテーマコードの保持を取消して
Ｔ１４に遷移する（Ｔ１２−２）。次に、特徴リスト４
０’のステップＴ１１−２で保持したテーマコードと対
応して記憶されている位置比較特徴４２ー４（特徴４）
と抽出した位置特徴（信州）とを比較し（Ｔ１２−
３）、満足した場合にはＴ１２−１に遷移し、満足しな
い場合にはテーマコードの保持を取消してＴ１４に遷移
する（Ｔ１２ー４）。次に、特徴リスト４０’のステッ
プＴ１１−２で保持したテーマコードと対応して記憶さ
れている時間特徴４２ー５（特徴５）と抽出した時間特
徴（７月）とを比較し（Ｔ１３−１）、満足した場合に
はそのテーマコードを保持してＴ１４に遷移する（Ｔ１
３−２）。

【００７４】上記Ｔ１１−１〜Ｔ１３−２の比較を抽出
された５つの特徴を満足する比較特徴を備えたテーマコ
ードを得るまで繰り返し、５つの特徴を満足する比較特
徴を備えたテーマコードがあった場合にはＴ１５に遷移
する。また、比較特徴を備えたテーマコードがない場合
には音響情報の再生出力をしない（Ｔ１４）。テーマコ
ードが決定されると、そのテーマコードをキーとして音
響情報登録リスト５０をサーチして音響情報データ（音
声データ）を取り出して音声出力手段１０に与えて（Ｔ
１５）、音声出力手段１０から音響情報（夏山の歌）を
出力する（Ｔ１６）。

【００７５】ここで、使用者が画像をスクロールさせて
Ｔ３に戻り、Ｔ４で図２１（ｂ）に示すような海の画像
を再生すると、Ｔ５〜Ｔ１５を繰り返してＴ１６で音声
出力手段１０から音響情報（海の歌）を出力する。以上
本発明のいくつかの実施例について説明したが、本発明
は上記各実施例に限定されるものではなく、種々の変形
実施が可能であることはいうまでもない。

【００７６】

【発明の効果】以上説明したように第１及び第６の発明
によれば、撮影画像の再生時に画像を連想させる音楽や
メロディーや音声等の音響情報を再生出力できるので、
使用者は画像撮影時の臨場感を連想できる。

【００７７】また、第２の発明によれば、色成分から画
像を連想させるテーマを抽出することができるので、中
心画像等が明確でない風景等の画像の再生時にも撮影時
の臨場感を連想できる。

【００７８】また、第３の発明によれば、画像の認識結
果から画像を連想させるテーマを抽出することができる
ので、中心画像等が明確な人物や動物等の画像の再生時
に撮影時の臨場感を連想できる。

【００７９】また、第４の発明によれば、撮影日時から
画像を連想させるテーマを抽出することができるので、
色成分や画像認識結果では連想できない特定の行事や祝
日等の画像の再生時にも撮影時の臨場感を連想できる。

【００８０】また、第５の発明によれば、撮影場所等の
位置情報から画像を連想させるテーマを抽出することが
できるので、色成分や画像認識結果や撮影日時からでは
連想できない特定の場所や施設等の画像の再生時にも撮
影時の臨場感を連想できる。

【図面の簡単な説明】

【図１】本発明を適用した画像再生装置の一実施例とし
てのデジタルカメラの回路構成例を示すブロック図であ
る。

【図２】音声出力部の構成例を示すブロック図である。

【図３】信号処理部のカラープロセス回路の構成例を示
すブロック図である。

【図４】テーマ特徴リストの構造の一例を示す説明図で
ある。

【図５】音響情報登録リストの構造の一例を示す説明図
である。

【図６】再生画像効果付与手段の構成例を示すブロック
図である。

【図７】音響情報再生出力時の制御部の動作例を示すフ
ローチャートである。

【図８】特徴抽出手段の一実施例としての色成分特徴抽
出手段の構成例を示すブロックである。

【図９】色成分積分手段による海の再生画像の色成分の
分布図の説明図である。

【図１０】再生画像を２分割して特徴を抽出する例の説
明図である。

【図１１】再生画像を３分割して特徴を抽出する例の説
明図である。

【図１２】特徴抽出手段の一実施例としての画像特徴抽
出手段の構成例を示すブロック図である。

【図１３】再生画像および抽出されたパターンの説明図
である。

【図１４】特徴抽出手段の一実施例としての画像特徴抽
出手段の構成例を示すブロック図である。

【図１５】再生画像の例を示す図である。

【図１６】特徴抽出手段の一実施例としての時間特徴抽
出手段の構成例を示すブロック図である。

【図１７】撮影情報登録リストの一実施例を示す図であ
る。

【図１８】特徴抽出手段の一実施例としての位置特徴抽
出手段の構成例を示すブロック図である。

【図１９】再生画像効果付与手段の一実施例の構成を示
すブロック図である。

【図２０】テーマ情報リストの構造例を示す説明図であ
る。

【図２１】音響情報再生出力を伴う再生画像の例を示す
説明図である。

【図２２】図１９の再生画像効果付与手段による音響情
報再生出力時の制御部の動作例を示すフローチャートで
ある。

【符号の説明】

１０音声出力装置４０テーマ特徴リスト（テーマ特徴登録手段）５０音響情報登録リスト（音響情報登録手段）１００デジタルカメラ（画像再生装置）２１０特徴抽出手段（テーマ抽出手段）２１０−１色成分特徴抽出手段２１０−２画象特徴抽出手段２１０−３時間特徴抽出手段２１０−４位置特徴抽出手段２２０特徴比較手段（テーマ抽出手段）２３０音響情報出力手段

Claims

【特許請求の範囲】

【請求項１】音響出力装置を備えた画像再生装置であ
って、画像の撮影テーマを抽出するテーマ抽出手段と、
撮影テーマに対応する音響情報を登録した音響情報登録
手段と、前記テーマ抽出手段によって抽出された撮影テ
ーマに対応した音響情報データを前記画像の再生時に前
記音響情報登録手段から取り出して前記音響出力装置に
与える音響情報出力手段と、を備えたことを特徴とする
画像再生装置。
【請求項２】前記テーマ抽出手段は、前記画像の色成
分から特徴を抽出する色成分特徴抽出手段と、比較用色
成分特徴と撮影テーマを対応させて登録したテーマ特徴
登録手段とを有し、前記色成分特徴抽出手段によって抽
出された色成分特徴と前記テーマ特徴登録手段に登録さ
れた比較用色成分特徴から撮影テーマを抽出することを
特徴とする請求項１記載の画像再生装置。
【請求項３】前記テーマ抽出手段は、前記画像の認識
結果から特徴を抽出する画像特徴抽出手段と、比較用画
像特徴と撮影テーマを対応させて登録したテーマ特徴登
録手段とを有し、前記画像特徴抽出手段によって抽出さ
れた画像特徴と前記テーマ特徴登録手段に登録された比
較用画像特徴から撮影テーマを抽出することを特徴とす
る請求項１記載の画像再生装置。
【請求項４】前記テーマ抽出手段は、前記画像の撮影
日時から特徴を抽出する時間特徴抽出手段と、比較用時
間特徴と撮影テーマを対応させて登録したテーマ特徴登
録手段とを有し、前記時間特徴抽出手段によって抽出さ
れた時間特徴と前記テーマ特徴登録手段に登録された比
較用時間特徴から撮影テーマを抽出することを特徴とす
る請求項１記載の画像再生装置。
【請求項５】前記テーマ抽出手段は、前記画像の撮影
位置から特徴を抽出する位置特徴抽出手段と、比較用位
置特徴と撮影テーマを対応させて登録したテーマ特徴登
録手段とを有し、前記位置特徴抽出手段によって抽出さ
れた位置特徴と前記テーマ特徴登録手段に登録された比
較用位置特徴から撮影テーマを抽出することを特徴とす
る請求項１記載の画像再生装置。
【請求項６】画像の撮影テーマを抽出し、その撮影テ
ーマに対応した音響情報を、上記画像の再生時に出力す
ることを特徴とする画像再生方法。