JP4433025B2

JP4433025B2 - 画像再生装置及び画像記録装置と画像再生方法及び画像記録方法

Info

Publication number: JP4433025B2
Application number: JP2007233689A
Authority: JP
Inventors: 正直筒井
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2007-09-10
Filing date: 2007-09-10
Publication date: 2010-03-17
Anticipated expiration: 2027-09-10
Also published as: JP2009065590A; CN101388993B; CN101388993A; US20090067815A1; US8422849B2

Description

本発明は静止画及び動画が混在したコンテンツの画像再生装置及び画像記録装置と画像再生方法及び画像記録方法に関する。

近年、デジタル方式の撮像機器はデジタルスチルカメラとデジタルビデオカメラの両方の機能を備えており、静止画や動画を分け隔てなく簡単に撮影することができるようになっている。この様に静止画と動画の両者が混在するコンテンツを編集して再生する方法として、さまざまなスライドショー機能が提案されている。
特開２００５‐３０３８８３特開２００４‐２０１１７０

しかしながら大部分の再生装置は、撮影時間順に動画と静止画を順々に再生していく方式がほとんどである。この場合、静止画は単純に数秒間同じ映像を再生しているのみである。一方で音楽ＢＧＭも加えて静止画をスライドショーにする機能も提案されている。この場合は、静止画と動画が混在するコンテンツで静止画のみを使用し、エフェクト効果を加えながら複数の静止画を音楽に合わせてスライドショー化して再生するものである。しかしながら旅行などで撮影したコンテンツは、混在する静止画と動画が密接に関連しているのが通常である。にもかかわらず動画を無視した静止画のみで単純にスライドショーを作成するだけの機能では不十分である。又動画中に静止画が混在していた場合、エフェクト効果を加えたとしても、静止画１枚毎の再生では十分なスライドショーは実現できない。ちなみにフェード効果などは静止画が最低２枚あって初めて成立する。撮影したコンテンツをＤＶＤなどに記録する場合、混在する動画と静止画はすべて同一のＤＶＤに書き込まれる。この場合画像コンテンツに含まれるすべての動作及び静止画を利用した効果的な再生方式が求められている。

ＤＶＤカムコーダでは、一緒に撮影した静止画と動画をＤＶＤに記録する際、すべての静止画をまとめて一つのスライドショーとしてＤＶＤに記録している。しかしこの様な単純な方式では不適当な場合もある。例えば別々の旅行で撮影された静止画が混在している画像コンテンツ、あるいは同じ旅行内でも異なる場所で撮影された静止画が混在している画像コンテンツの場合である。従来のスライドショー機能は、シチュエーションが異なるにもかかわらず画像コンテンツに含まれるすべての静止画を集めて無条件にスライドショー化しており、面白みにかける場合がある。時間的もしくは位置的にまとまった範囲で撮影されている静止画と動画を一緒に再生する場合には適さない。

特許文献１では、複数の静止画を取得年代を元に分類してスライドショーを作成し、ＤＶＤなどに記録する方式を提案している。しかし、これも単純に時間的なつながりのみに着目してスライドショーを提供しているに過ぎず、動画中に散在する静止画の効果的な再生方式などについて解決を与えるものでない。

上述した従来の技術の課題に鑑み、本発明は動画と静止画が混在するコンテンツの効果的な再生方式及び記録方式を提供することを目的とする。かかる目的を達成するために以下の手段を講じた。即ち本発明の第１面にかかる画像再生装置は、静止画及び動画が混在した画像コンテンツと、被写体を撮影して該画像コンテンツを作成した時の撮影情報とを取得する画像取得手段と、被写体の撮影日時及びＧＰＳ衛星から取得された撮影位置を示す該撮影情報に基づき、個々の撮影画像を比較し、撮影休止時間が所定の閾値を超え、さらに該撮影位置の変化分が所定の閾値を超える場合に該画像コンテンツを異なる画像群に分類し、該撮影休止時間と該撮影位置の変化分の両方又はどちらか一方が所定の閾値の範囲内である場合に該画像コンテンツを同一の画像群に分類する画像分類手段と、一つの画像群に属する全ての静止画をまとめて時系列的に配列し一つの静止画スライドショーとし、且つ該静止画と同じ画像群に属する一つ又は複数の動画と該静止画スライドショーを連続的に再生する手段であって、該静止画スライドショーにまとめられた複数の静止画のなかで一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つ又は複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つ又は複数の動画及び静止画スライドショーを時系列的に再生する画像再生手段とを具備する。

本発明の第２面にかかる画像記録装置は、静止画及び動画が混在した画像コンテンツと、被写体を撮影して該画像コンテンツを作成した時の撮影情報とを取得する画像取得手段と、被写体の撮影日時及びＧＰＳ衛星から取得された撮影位置を示す該撮影情報に基づき、個々の撮影画像を比較し、撮影休止時間が所定の閾値を超え、さらに該撮影位置の変化分が所定の閾値を超える場合に該画像コンテンツを異なる画像群に分類し、該撮影休止時間と該撮影位置の変化分の両方又はどちらか一方が所定の閾値の範囲内である場合に該画像コンテンツを同一の画像群に分類する画像分類手段と、一つの画像群に属する全ての静止画をまとめて時系列的に配列し一つのスライドショー動画を生成するスライドショー動画生成手段と、該静止画と同じ画像群に属する一つ又は複数の動画及び該スライドショー動画を連続的に再生する順序を記述した再生リストを生成する手段であって、該スライドショー動画にまとめられた複数の静止画のなかで一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つ又は複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つ又は複数の動画及びスライドショー動画を時系列的に再生する順序を記述した再生リストを生成する再生リスト生成手段と、該スライドショー動画と該一つ又は複数の動画及び該再生リストを記録媒体に記録する記録手段とを具備する。

本発明によれば、静止画と動画が混在する画像コンテンツであっても、すべての画像を用いて再生する事ができる。動画中に混在する静止画も撮影位置や撮影時間などの撮影情報に基づき、あるまとまった範囲（即ち画像群）でスライドショーとして再生できる。例えばある観光施設で撮影した動画と静止画が混在するコンテンツの場合、静止画はその観光施設で撮影したもののみが抽出され、スライドショー化される。このスライドショーと併せて再生される動画とは、内容が互いに時間的及び空間的に共通しており、撮影者の記憶に沿った効果的な再生が可能となる。また互いに関連した静止画のスライドショーと動画は撮影機器のモニタで単に再生するだけでなく、ＤＶＤなどに記録し他のビデオ機器でも簡単に再生することができる。

またＤＶＤなどに動画と静止画スライドショーを記録する際にはメニューが添付される。このメニューは撮影情報に基づいた分類ごとに作成されるので、極めて使い勝手の良いメニューが得られる。この場合ＤＶＤのメニューは、撮影情報によって分類された画像群ごとのメインメニューとサブメニューとで構成され、見やすく使い勝手の良いメニューとなっている。サブメニューは一つの画像群に分類された画像をさらに三つずつに分けて構成され、サムネイルなどを見ながら再生したい画像を簡単に指定できる。また個々の静止画はスライドショー動画に組み込まれるが、メニューには元の個々の静止画のサムネイルがすべて表示される。そのサムネイルにより対応する静止画スライドショー動画中の位置から直接目的とする静止画を再生することができ、動画と静止画が融合したＤＶＤを作成することができる。

また地図などを用いてメニューの背景を構成することで価値ある付加情報を加えることができる。この地図は個々のサブメニューごとに表示されるので、撮影を行った場所（例えば観光施設）ごとに詳細な地図を表示することができる。

以下図面を参照して本発明の実施の形態を詳細に説明する。図１は本発明にかかる画像記録再生装置の全体構成を示すブロック図である。この画像記録再生装置は画像再生装置及び画像記録装置として機能する。図示するように本画像記録再生装置１は、撮像手段１０と制御部１１とＲＯＭ１２とＲＡＭ１３とフラッシュメモリ１４とＤＶＤドライブ１５と表示部１６と画像処理部１７と位置取得部１８とで構成されている。撮像手段１０は画像取得手段を構成しており、レンズとＣＣＤなどの撮像素子と自動焦点機構ＡＦと自動露出機構ＡＥとを含んでいる。この撮像手段１０は被写体を撮影して画像コンテンツを生成する。

制御部１１はＣＰＵなどからなり、所定のプログラムを実行して、画像記録再生装置１の全体的な動作制御や、各部の制御タスクを行う。なおＣＰＵによって実行されるプログラムはＲＯＭ１２に保持されている。ＲＡＭ１３は制御部１１のＣＰＵがプログラムを実行する際のワークエリアとして使われる。フラッシュメモリ１４は撮像手段１０で生成した画像コンテンツを記録する。ＲＯＭ１２はＣＰＵ１１で実行するプログラムの他、様々なデータを格納している。例えば画像コンテンツの再生及び再生メニューの作成に関連して使用する地図データも格納している。

ＤＶＤドライブ１５は、撮像手段１０で生成された画像コンテンツを記録媒体に記録するための記録手段を提供している。なお記録媒体はＤＶＤである。表示部１６は例えば液晶ディスプレイ（ＬＣＤ）からなり、画像コンテンツの再生手段を提供している。画像処理部１７は、撮像手段１０で生成された画像コンテンツを画像処理して、再生及び記録に適した内容にしている。本実施形態の場合、この画像処理部１７はスライドショー動画を生成するスライドショー動画再生手段や複数の動画と静止画スライドショーを連続的に再生する画像再生手段の一部を構成している。

位置取得部１８は例えばＧＰＳ受信部からなり、ＧＰＳ衛星から逐次画像記録再生装置１の位置情報を取得する。この位置情報は撮像手段１０で撮影された動画もしくは静止画の撮影位置を特定するために用いられ、撮影情報の一部となる。なお制御部１１は内蔵のタイマーを備えており、日時及び時刻を計測している。これらの日時及び時刻情報は、撮影時間を特定するために使われ、やはり撮影情報の一部となっている。

本画像記録再生装置の再生部は、画像取得手段（撮像手段１０）と、画像再生手段（画像処理部１７及び表示部１６）と、画像分類手段（制御部１１）とで構成されている。画像取得手段は、静止画及び動作が混在した画像コンテンツと、被写体を撮影して画像コンテンツを作成したときの撮影情報とを取得する。画像分類手段は、撮影情報に基づき画像コンテンツを複数の画像群に分類する。画像再生手段は、一つの画像群に属するすべての静止画をまとめて一つの静止画スライドショーとし、且静止画と同じ画像群に属する一つ又は複数の動画と静止画スライドショーを連続的に再生する。好ましくは、画像分類手段は、被写体の撮影日時、撮影時刻及び撮影位置の少なくとも一つ以上を示す撮影情報に基づいて、画像コンテンツを複数の画像群に分類する。画像再生手段は、静止画スライドショーにまとめられた複数の静止画のなかで一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つまたは複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つまたは複数の動作及び静止画スライドショーを時系列的に再生する。

本画像記録装置の上述した再生機能によれば、静止画と動画の両コンテンツが混在する場合でも、すべてのコンテンツを用いて再生すると共に、静止画もある時間的、位置的にまとまった範囲でスライドショーとして再生されるので、例えばある観光施設で撮影した動画と静止画が、静止画はその観光施設で撮影したもののみ抽出されスライドショーとなるので、併せて再生される動画と時間的及び空間的に内容が関連しており、撮影者の実体験に適った効果的な再生が可能である。

本画像記録再生装置１の記録部は、基本的に画像取得手段（撮像手段１０）と、スライドショー動画生成手段（画像処理部１７）と、再生リスト生成手段（制御部１１）と、記録手段（ＤＶＤドライブ１５）とで構成されている。画像取得手段は、前述したように静止画及び動画が混在した画像コンテンツと、被写体を撮影して画像コンテンツを作成したときの撮影情報とを取得する。画像分類手段は、撮影情報に基づき画像コンテンツを複数の画像群に分類する。スライドショー動画生成手段は、一つの画像群に属するすべての静止画をまとめて一つのスライドショー動画を生成する。再生リスト生成手段は、静止画と同じ画像群に属する一つまたは複数の動画及びスライドショー動画を連続的に再生する順序を記述した再生リストを生成する。記録手段は、スライドショー動画と一つまたは複数の動画及び再生リストを記録媒体に記録する。

画像分類手段は、被写体の撮影日時、撮影時刻及び撮影位置の少なくとも一つ以上を示す撮影情報に基づいて、画像コンテンツを複数の画像群に分類する。再生リスト生成手段は、スライドショー動画にまとめられた複数の静止画の中で一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つまたは複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つまたは複数のスライドショー動画を時系列的に再生する順序を記述した再生リストを生成する。

再生リスト生成手段は、画像分類手段によって分類された画像群ごとに再生リストのメニューを生成する。この場合再生リスト生成手段は、画像分類手段によって分類された画像群ごとに所定の画像数ごとに細分化した再生リストのメニューを生成する。あるいはこの再生リスト生成手段は、画像分類手段によって分類された画像群ごとに再生リストのメインメニューを生成し、さらに所定の画像数ごとに細分化した再生リストのサブメニューをメインメニューからのリンクとして生成しても良い。また再生リスト生成手段は、再生リストのメニューに静止画と動画のエントリーをそれぞれ生成し、さらに各メニュー内の静止画のエントリーから、静止画が含まれるスライドショー動画中の対応する位置へのリンクを貼り、メニューにおいて静止画エントリーが選択された場合、対応するスライドショー動画中の対応する位置から再生可能にすることができる。場合によっては、再生リストに記述された各画像の撮影位置を元に地図を作成し、再生リストと地図とを組み合わせて再生メニューを生成しても良い。

本画像記録再生装置の記録機能によれば、分類したコンテンツをＤＶＤなどに記録し、他の機器でも簡単に再生することができる。ＤＶＤなどに記録する際にはメニュー付きで書き込まれるので、例えば観光施設ごとに分類されたメニューで思い出を振り返ることができる。またＤＶＤのメニューも観光施設ごとのメインメニューと、分類された画像をさらに三つずつに分けたサブメニューで構成され、サムネイルなどを見ながら再生したい画像を指定できる。静止画自体はスライドショー動画に組み込まれているが、メニューには元の静止画のサムネイルがすべて表示され、そのサムネイルから対応する静止画を、スライドショー動画中の所定の位置から直接再生することができ、動画と静止画が融合したＤＶＤを作成することができる。また地図を用いてメニューの背景などを構成することにより、情報量を豊富にしている。地図は個々のサブメニューごとに表示されるので、撮影を行った観光施設ごとに詳細な地図を表示可能である。

図２は、図１に示した画像記録再生装置で行われるＤＶＤ作成処理（画像コンテンツ記録処理）を示すフローチャートである。まずステップＳ１で動画と静止画が混在したコンテンツを撮影情報に基づき分類して複数の画像群に分ける。続いてステップＳ２で各画像群に含まれる複数の静止画をスライドショー動画にまとめる。ステップＳ３で各画像群ごとに、動画とスライドショー動画の再生順を決めたリストを生成すると共に、各画像群ごとに再生メニューを生成する。最後にステップＳ４で各画像群ごとの動画、スライドショー動画及び再生メニューをまとめてＤＶＤに記録する。

図３は、図２に示したＤＶＤ作成処理の流れを模式的に表したものである。まず最初に画像分類ステップＳ１を詳細に説明する。図３の一番上の行は、撮影画像を現している。ある二つの観光施設で撮影された静止画と動画の時系列変化を示している。最初に動画が長時間撮影され、次に静止画、その次にはまた動画といったように撮影されている。まずこの撮影画像を撮影情報を元に分類する。具体的には撮影休止時間の長さがある閾値を超えた場合、及び各画像の撮影位置の変化分がある閾値を超えた場合など総合的な観点で分類する。撮影時間か撮影位置かどちらか一方の情報を元に分類しても良いが、撮影休止時間が長時間に及んでも、実際には同じ観光施設に止まっている場合や、また逆に撮影位置の変化分がある閾値を超えていても、実際には電車に乗って移動している等の場合には、上記観光施設の画像や、上記電車での移動中の写真を同じ画像群として分類することができないという問題が生じる。そこで撮影時間と撮影位置の両者を総合的に勘案して、動画と静止画の混在する画像コンテンツを複数の画像群に分類することが望ましい。本実施形態においては、個々の撮影画像について撮影休止時間が閾値を超えるか否かを比較していき、撮影休止時間が閾値を超える箇所を発見する。さらにこの部分で撮影位置の変化分も閾値を超えたときには、全体の画像コンテンツを前半の画像群Ａと後半の画像群Ｂに分類する。

次に静止画スライドショー動画生成ステップＳ２を説明する。分類された画像群Ａと画像群Ｂのそれぞれについて、画像群ごとに含まれる静止画をすべてまとめ一つの静止画スライドショー動画を作成する。複数の静止画は撮影時間を元に時系列的に配列し且フェードなどの効果を加えるような形でスライドショーに仕上げていく。但し基本は時系列配列とするものの、静止画を複数回登場させてスライドショーを構成しても良い。その場合でも各静止画を代表するポイント、具体的にはタイムコードを記憶しておく。

続いて再生メニュー生成ステップＳ３を説明する。各画像群ごとに動画と静止画スライドショー動画の再生順を定義し、再生リストを作成する。具体的には静止画スライドショー動画の再生順は、当該静止画スライドショー動画中に含まれる一番最初、撮影時間的に一番古い静止画の撮影時間を基準に、他の動画の撮影時刻と比較し、時系列に再生順序を定義する。本実施例の場合、図３の中段で示したような再生順になる。

次にＤＶＤ記録用の再生メニューを生成する。各メニューには地図を背景として利用し、サムネイルも表示するため、一つのメニューを構成するエントリーは三つとする。このエントリーはサムネイルやその他の関連情報で構成される。このエントリーを指定すると、対応する動画や静止画スライドショー動画の対応するタイムコードから再生させることができる。

図３に示した再生順を元に、動画及び静止画のまとまりを三つずつに分け、メニューを構成する。画像群Ａには八つの動画と静止画が分類されており、三つのメニューが割り当てられる。メニュー１のエントリー１には対応する動画のサムネイルが表示され、その動画Ａのリンクが貼られる。メニュー１のエントリー２は静止画スライドショー動画の先頭の静止画を代表するタイムコードへのリンクが貼られる。この様にしてメニュー１からメニュー３までが生成される。

画像群Ｂについても同様の処理を行う。なおメニューを構成する際、メニュー３のエントリー３が空きになっているが、画像群が異なる場合には新たなメニュー４から構成するものとする。これは地図を表示する際など、それぞれのメニューにおいて三つの画像の撮影位置を内包する範囲の地図を表示する際、分類が異なると離れた地点の画像を一つのメニューとして構成する恐れがあり、地図の縮尺が広域となってしまうため、撮影した場所が判別し辛くなる。このため異なる画像群ではメニューを共用しないものとする。この様にして画像群Ｂにもメニュー４，５が生成され、全体の生成処理が完了する。なお本実施形態では、メニューを一階層のみで構成する例を示しているが、本発明はこれに限られるものではない。これまで説明したメニューはサブメニューとして構成し、その上位に画像群ごとにエントリーを設定したメインメニューを別途構成しても良い。なお、地図データは、各画像に対応した位置情報に従ってＲＯＭから読み出され、メニューのエントリーに組み込まれる。

最後にＤＶＤ記録ステップＳ４を説明する。このステップでは、上述のようにして生成されたメニューと、静止画スライドショー動画と、通常の動画とをＤＶＤ仕様に基づき、ＤＶＤ−Ｒなどに記録する。本実施形態ではＤＶＤに記録する例を示したが、静止画スライドショー動画生成やメニュー構成の概念はそのまま維持して、ブルーレイディスクや他の記録媒体に適用しても良い。

図４は、本発明にかかる画像記録再生装置の実施例を示すブロック図である。本実施例は、本発明にかかる画像記録方式及び画像再生方式を、ＤＶＤビデオカメラに適用した場合である。このＤＶＤビデオカメラ１は、書き込み可能なＤＶＤを記録媒体として用いている。なお理解を容易にするため、図１に示した画像記憶再生装置と対応する部分には対応する参照番号を付してある。

図４において、ＤＶＤ１００は本ＤＶＤビデオカメラ１に装填され、動画像データ、静止画像データが記録される記録媒体である。この実施例のＤＶＤビデオカメラは、後述するように、ＤＶＤビデオフォーマット（DVD Video format）とＤＶＤビデオレコーディングフォーマット（DVD Video Recording Format）との２つのデジタル動画フォーマットのいずれにも対応することができるものである。

したがって、この実施例のＤＶＤビデオカメラは、使用者からの指示に応じて、当該ＤＶＤビデオカメラに装填された書き込み可能なＤＶＤを、ＤＶＤビデオフォーマット、あるいは、ＤＶＤビデオレコーディングフォーマットに初期化して利用できるようにすることができるものである。

この実施例のＤＶＤビデオカメラは、図４に示すように、カメラ部１０と、ＭＰＥＧエンコーダ７２と、フォーマット形成部７３と、ＪＰＥＧエンコーダ７６と、フォーマット変換部７７とからなるフォーマット部１７Ａと、記録時および再生時に用いられるバッファメモリ１７Ｂ、書き込み／読み出し部１５とを備えている。

また、この実施例のＤＶＤビデオカメラは、図４に示すように、セレクタ８１、８４と、ＪＰＥＧデコーダ８２と、ＭＰＥＧデコーダ８３とからなり、再生時に用いられるデコード部１７Ｄと、コーデック９１と、デジタルインターフェース（以下、デジタルＩ／Ｆと略称する。）９２とを備え、デジタルデータの受け渡しを行うデジタル入出力部１７Ｃとを備えている。ここでフォーマット部１７Ａ、バッファ１７Ｂ、デジタル入出力部１７Ｃ及びデコード部１７Ｄが、図１に示した画像処理部１７に対応している。

そして、図４に示すように、デジタル入出力部１７Ｃは、デジタル入出力端子ＩＯに接続され、このデジタル入出力端子を通じて他の機器との間でデジタルデータの送受を行うことができるようにしている。また、デコード部１７Ｄにおいてデコードされ、Ｄ／Ａ変換された画像情報等の情報は、アナログ出力端子ＯＴを通じて出力され、モニタ受像機などの外部機器に供給することができる。

また、外部機器からのアナログ映像信号やアナログ音声信号は、入力端子ＩＮを通じてＭＰＥＧエンコーダ７２に入力され、ここでＡ／Ｄ変換されるとともに、ＭＰＥＧ方式のデータにデータ圧縮して、これをＤＶＤ１００に記録することができるようにしている。

また、この実施例のＤＶＤビデオカメラには、ＬＣＤ（Liquid Crystal Display）コントローラ１６、ＬＣＤ１６ａが設けられており、カメラ部１０が捉えている画像や、ＤＶＤ１００に記録されている画像データによる再生画像をＬＣＤ１６ａに表示して、使用者がこれを観視することができるようにしている。なお図示しなかったが、カメラ部１０が捉えている画像を観視するためのビューファインダを設けることも可能である。

図４において、制御部１１はＣＰＵからなり、本ＤＶＤビデオカメラ１の動作を制御する。ＣＰＵ１１はバス２０を介してＲＯＭ１２、ＲＡＭ１３、不揮発性メモリ１４、キー操作部１９に接続されている。ＲＯＭ１２はＣＰＵ１１により実行される各種のプログラムや処理に必要なデータが記録されている。このデータには地図データも含まれる。ＲＡＭ１３は処理の途中結果を一時的に記憶するなど、主に作業領域として用いられるものである。また不揮発性メモリ１４は、電源が落とされても記憶情報を保持しておくことができるものであり、種々の設定パラメータや確実に保持しておきたい途中結果などを記憶保持するためのものである。キー操作部１９を操作することで、使用者は種々の指示入力をＤＶＤビデオカメラ１に対して入力することができる。キー操作部１９を通じて受け付けられた使用者からの指示入力は、電気信号としてＣＰＵ１１に供給される。これによりＣＰＵ（制御部）１１は、使用者からの指示に応じて各部を制御し、当該ＤＶＤビデオカメラ１が使用者からの指示に応じた動作を行うことができるようになっている。

［動画像の記録時の動作について］
そして、この実施例のＤＶＤビデオカメラは、以下に説明するように、画像を動画像として撮影してＤＶＤに記録することができるとともに、画像を静止画像として撮影してＤＶＤに記録することができるものである。

すなわち、この実施例のＤＶＤビデオカメラのカメラ部１０は、ＣＣＤ（Charge Coupled Device）を備えるとともに、電子式シャッター機能をも有するようにされたものである。そして、この実施例のＤＶＤビデオカメラの使用者は、キー操作部１９の所定の操作キーを操作して、この実施例のＤＶＤビデオカメラをいつでも撮影を開始することが可能な状態であるスタンバイ状態にし、キー操作部１９の撮影開始キー（ＲＥＣキー）を操作することにより、カメラ部１０が捉えている画像を動画像として撮影して、これをＤＶＤ１００に記録する動作を行う。

この場合、カメラ部１０からの動画像信号は、ＭＰＥＧエンコーダ７２に供給され、ここでＡ／Ｄ変換されてデジタル動画像データとされた後、ＭＰＥＧ方式でデータ圧縮されて、フォーマット形成部７３に供給される。フォーマット形成部７３は、制御部１１の制御に応じて、この実施例のＤＶＤビデオカメラに装填されているＤＶＤ１００の記録フォーマット（デジタル動画フォーマット）に応じた記録用データを形成し、これをバッファメモリ１７Ｂに供給する。

バッファメモリ１７Ｂは、制御部１１によりその書き込み／読み出しが制御され、記録時においては、この実施例のＤＶＤビデオカメラとＤＶＤ１００との間における記録用データについての時間軸補正を行って、全ての記録用データを洩れなくＤＶＤ１００に記録することができるようにするためのものである。

そして、バッファメモリ１７Ｂは、ＦＩＦＯ（First In First Out）方式で用いられ、動画像の記録時においては、フォーマット形成部７３からの記録用データを順次にバッファメモリ１７Ｂに書き込み、同時に既にバッファメモリ１７Ｂに記録されている記録用データを読み出して、書き込み／読み出し部１５に供給する。

書き込み／読み出し部１５は、図示しないが、光ピックアップ、二軸アクチュエータ、スレッドモータなどを備え、制御部１１の制御により、この実施例のＤＶＤビデオカメラに装填されたＤＶＤ１００の所定の位置に記録用データを記録するようにする。このようにして、この実施例のＤＶＤビデオカメラは、これに装填された記録媒体であるＤＶＤ１００に対して、カメラ部１０を通じて撮影した動画像をデジタルデータとして記録することができるものである。

［静止画像の記録時の動作について］
また、この実施例のＤＶＤビデオカメラは、この実施例のＤＶＤビデオカメラをスタンバイ状態にし、キー操作部１９のシャッターキーを操作することにより、カメラ部１０の電子式シャッターが動作して、カメラ部１０が捉えている画像を静止画像として撮影し、これをＤＶＤ１００に記録する動作を行う。

この場合、カメラ部１０からの静止画像信号は、ＪＰＥＧエンコーダ７６に供給され、ここでＡ／Ｄ変換されてデジタル静止画像データとされた後、ＪＰＥＧ方式でデータ圧縮され、ＪＰＥＧフォーマット（デジタル静止画フォーマット）の記録用データが形成される。ＪＰＥＧエンコーダ７６からの記録用データは、バッファメモリ１７Ｂを通じて書き込み／読み出し部１５に供給され、この書き込み／読み出し部１５を通じて、当該ＤＶＤビデオカメラに装填されているＤＶＤ１００に静止画像データとして記録される。

このように、この実施例のＤＶＤビデオカメラにおいては、デジタル動画フォーマットの動画像データと、デジタル静止画フォーマットの静止画像データとを、撮影の都度、記録媒体であるＤＶＤ１００上の適宜の位置に記録することによって、動画像データと静止画像データとをＤＶＤ１００において混在して記録することができるようにしている。すなわち、動画像データの記録領域と静止画像データの記録領域とを記録媒体であるＤＶＤ１００上に予め分けて設けるようにすることはない。

したがって、例えば静止画像の撮影はしないにも関わらず、静止画像データの記録領域を予め確保してしまうなどの無駄を生じさせることなく、ＤＶＤの記憶容量を無駄なく使用して、動画像データであっても静止画像データであっても効率よく記録することができるようにしている。

このように、この実施例のＤＶＤビデオカメラにおいては、動画像はＭＰＥＧ方式でデータ圧縮するとともに所定のデジタル動画フォーマットでＤＶＤに記録し、また静止画像はＪＰＥＧ方式でデータ圧縮してデジタル静止画フォーマットで装填されたＤＶＤ１００に記録することができるようにしている。

［静止画像データのフォーマット変換について］
この実施例のＤＶＤビデオカメラにおいては、使用者からの指示に応じたタイミングで、あるいは記録に用いられたＤＶＤ１００が取り出されると制御部１１が判断したタイミングで、記録に用いられたＤＶＤ１００からデジタル静止画フォーマットで記録されている静止画像データを読み出し、これをデジタル動画フォーマットのデータ（即ちスライドショー動画）に変換し、ＤＶＤ１００に追加記録する処理を行う。本発明の特徴事項として、静止画の読み出しはあらかじめ分類された画像群ごとに行われる。一つの画像群に含まれるすべての静止画像データを読み出し、これをデジタル動画フォーマットのデータに変換しＤＶＤ１００に追加記録する。この際前述した再生メニューも一緒に作成してＤＶＤ１００に記録する。

具体的には、使用者からの指示に応じたタイミングで、あるいは必要があると制御部１１が判断したタイミングで、記録に用いられたＤＶＤ１００にデジタル静止画フォーマットで記録されている全静止画像データの内、一つの画像群に属する静止画像データを書き込み／読み出し部１５を通じて読み出し、これをバッファメモリ１７Ｂを介してフォーマット変換部７７に供給する。

フォーマット変換部７７は、書き込み／読み出し部１５を通じてＤＶＤ１００から読み出されたデジタル静止画フォーマットの静止画像データ（ＪＥＰＧ方式でデータ圧縮されている静止画像データ）をＭＰＥＧ方式のＩピクチャの形式のデータに変換する。すなわち、フォーマット変換部７７は、ＪＰＥＧ方式のデコーダによらなければデコードできない静止画像データを、ＭＰＥＧ方式のデコーダによってデコード可能なデータに変換する、いわゆるＪＰＥＧフォーマット−Ｉピクチャ変換部である。

そして、フォーマット変換部７７において、ＭＰＥＧ方式のＩピクチャ形式のデータに変換された静止画像データは、フォーマット形成部７３に供給される。フォーマット形成部７３は、上述したように、記録しようとするデータから予め決められた所定のデジタル動画フォーマット、すなわち、この実施例においては、ＤＶＤビデオフォーマット、あるいは、ＤＶＤビデオレコーディングフォーマットの記録用データを形成するものである。

フォーマット形成部７３は、フォーマット変換部７７からＭＰＥＧ方式のＩピクチャの形式とされた静止画像データが供給されると、このＭＰＥＧ方式のＩピクチャの形式とされた全ての静止画像データを１まとまりのデータ（１チャプタ分のデータ、即ち静止画スライドショウー動画）とし、所定のデジタル動画フォーマットの記録用データを形成する。このようにして形成された記録用データは、上述したように、バッファ１７Ｂ、書き込み／読み出し部１５を通じてＤＶＤ１００に記録される。

このように、この実施例のＤＶＤビデオカメラは、例えば、撮影することにより得た動画像データはＭＰＥＧ方式でデータ圧縮して所定のデジタル動画フォーマットにしたがって記録し、撮影することにより得た静止画像データはＪＰＥＧフォーマットなどの所定のデジタル静止画フォーマットにしたがって記録することができるものである。

さらに本実施例のＤＶＤビデオカメラは、デジタル静止画フォーマット記録した静止画像データについては、撮影情報によって分類された画像群ごとに、ＭＰＥＧ方式のＩピクチャー形式のデータに変換し、これを同じ画像群に属する動画像データと共にＤＶＤに追加記録する。その際、各画像群ごとに再生順リストを生成し且再生メニューも生成して、静止画スライドショー動画、通常の動画と共にＤＶＤに記録する。

なお、ディスク１００に画像群ごとに分類して記録された動画及び静止画スライドショー動画は、同じくディスク１００に記録された再生リストに基づいて再生される。具体的には一つの画像群に属する動画及びスライドショー動画がディスク１００から書き込み／読み出し部１５により読み出され、バッファ１７Ｂに格納される。ＣＰＵ１１の制御の下、バッファ１７Ｂに格納された動画及び静止画スライドショー動画はデコード部１７Ｄに供給される。セレクタ８１は所定の再生リスト順に従って、動画データ及びスライドショー動画データをＭＰＥＧデコーダ８３に供給し、出力側のセレクタ８４を介して出力端子ＯＴまたはＬＣＤコントローラ１６に供給する。ＬＣＤコントローラ１６はセレクタ８４から出力されたビデオ信号に基づきＬＣＤ１６ａに同じ画像群に属する動画とスライドショー動画を所定の順で再生表示する。

本発明にかかる画像記録再生装置の全体構成を示すブロック図である。図１に示した画像記録再生装置の動作説明に供するフローチャートである。同じく図１に示した画像記録再生装置の動作説明に供する模式図である。図１に示した画像記録再生装置の具体例を示すブロック図である。

符号の説明

１・・・画像記録再生装置、１０・・・撮像手段、１１・・・制御部、１２・・・ＲＯＭ、１３・・・ＲＡＭ、１４・・・フラッシュメモリ、１５・・・ＤＶＤドライブ、１６・・・表示部、１７・・・画像処理部、１８・・・位置取得部、２０・・・バス

Claims

静止画及び動画が混在した画像コンテンツと、被写体を撮影して該画像コンテンツを作成した時の撮影情報とを取得する画像取得手段と、
被写体の撮影日時及びＧＰＳ衛星から取得された撮影位置を示す該撮影情報に基づき、個々の撮影画像を比較し、撮影休止時間が所定の閾値を超え、さらに該撮影位置の変化分が所定の閾値を超える場合に該画像コンテンツを異なる画像群に分類し、該撮影休止時間と該撮影位置の変化分の両方又はどちらか一方が所定の閾値の範囲内である場合に該画像コンテンツを同一の画像群に分類する画像分類手段と、
一つの画像群に属する全ての静止画をまとめて時系列的に配列し一つの静止画スライドショーとし、且つ該静止画と同じ画像群に属する一つ又は複数の動画と該静止画スライドショーを連続的に再生する手段であって、該静止画スライドショーにまとめられた複数の静止画のなかで一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つ又は複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つ又は複数の動画及び静止画スライドショーを時系列的に再生する画像再生手段と、
を具備する画像再生装置。
静止画及び動画が混在した画像コンテンツと、被写体を撮影して該画像コンテンツを作成した時の撮影情報とを取得する画像取得手段と、
被写体の撮影日時及びＧＰＳ衛星から取得された撮影位置を示す該撮影情報に基づき、個々の撮影画像を比較し、撮影休止時間が所定の閾値を超え、さらに該撮影位置の変化分が所定の閾値を超える場合に該画像コンテンツを異なる画像群に分類し、該撮影休止時間と該撮影位置の変化分の両方又はどちらか一方が所定の閾値の範囲内である場合に該画像コンテンツを同一の画像群に分類する画像分類手段と、
一つの画像群に属する全ての静止画をまとめて時系列的に配列し一つのスライドショー動画を生成するスライドショー動画生成手段と、
該静止画と同じ画像群に属する一つ又は複数の動画及び該スライドショー動画を連続的に再生する順序を記述した再生リストを生成する手段であって、該スライドショー動画にまとめられた複数の静止画のなかで一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つ又は複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つ又は複数の動画及びスライドショー動画を時系列的に再生する順序を記述した再生リストを生成する再生リスト生成手段と、
該スライドショー動画と該一つ又は複数の動画及び該再生リストを記録媒体に記録する記録手段と、
を具備する画像記録装置。
前記再生リスト生成手段は、前記画像分類手段によって分類された画像群毎に再生リス
トのメニューを生成し、
前記記録手段は、前記再生リスト生成手段により生成された前記メニューをも前記記録媒体に記録する請求項２の画像記録装置。
前記再生リスト生成手段は、該画像分類手段によって分類された画像群毎に、所定の画像数毎に細分化した再生リストのメニューを生成する請求項３の画像記録装置。
前記再生リスト生成手段は、前記画像分類手段によって分類された画像群毎に再生リストのメインメニューを生成し、さらに所定の画像数毎に細分化した再生リストのサブメニューをメインメニューからのリンクとして生成する請求項３の画像記録装置。
前記再生リスト生成手段は、再生リストのメニューに静止画と動画のエントリーをそれぞれ生成し、さらに各メニュー内の静止画のエントリーから、該静止画が含まれるスライドショー動画中の対応する位置へのリンクを張り、メニューにおいて該静止画エントリーが選択された場合、対応するスライドショー動画中の対応する位置から再生可能にする請求項３の画像記録装置。
前記再生リスト生成手段は、前記画像分類手段によって分類された各画像群についてメニューを作成する際、各画像群に含まれる静止画をまとめて一つのスライドショー動画として扱い、再生リストのメニューを生成する請求項３の画像記録装置。
前記再生リスト生成手段は、該再生リストに記述された各画像の撮影位置を元に地図を作成し、該再生リストと該地図とを組み合わせて再生メニューを生成する請求項３の画像記録装置。
静止画及び動画が混在した画像コンテンツと、被写体を撮影して該画像コンテンツを作成した時の撮影情報とを取得する画像取得手順と、
被写体の撮影日時及びＧＰＳ衛星から取得された撮影位置を示す該撮影情報に基づき、個々の撮影画像を比較し、撮影休止時間が所定の閾値を超え、さらに該撮影位置の変化分が所定の閾値を超える場合に該画像コンテンツを異なる画像群に分類し、該撮影休止時間と該撮影位置の変化分の両方又はどちらか一方が所定の閾値の範囲内である場合に該画像コンテンツを同一の画像群に分類する画像分類手順と、
一つの画像群に属する全ての静止画をまとめて時系列的に配列し一つの静止画スライドショーとし、且つ該静止画と同じ画像群に属する一つ又は複数の動画と該静止画スライドショーを連続的に再生する手順であって、該静止画スライドショーにまとめられた複数の静止画のなかで一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つ又は複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つ又は複数の動画及び静止画スライドショーを時系列的に再生する画像再生手順と、
を行う画像再生方法。
静止画及び動画が混在した画像コンテンツと、被写体を撮影して該画像コンテンツを作成した時の撮影情報とを取得する画像取得手順と、
被写体の撮影日時及びＧＰＳ衛星から取得された撮影位置を示す該撮影情報に基づき、個々の撮影画像を比較し、撮影休止時間が所定の閾値を超え、さらに該撮影位置の変化分が所定の閾値を超える場合に該画像コンテンツを異なる画像群に分類し、該撮影休止時間と該撮影位置の変化分の両方又はどちらか一方が所定の閾値の範囲内である場合に該画像コンテンツを同一の画像群に分類する画像分類手順と、
一つの画像群に属する全ての静止画をまとめて時系列的に配列し一つのスライドショー動画を生成するスライドショー動画生成手順と、
該静止画と同じ画像群に属する一つ又は複数の動画及び該スライドショー動画を連続的に再生する順序を記述した再生リストを生成する手順であって、該スライドショー動画にまとめられた複数の静止画のなかで一番最初に撮影された静止画の撮影時刻と、同じ画像群に属する一つ又は複数の動画の撮影時刻とを取得し、各撮影時刻に従って一つ又は複数の動画及びスライドショー動画を時系列的に再生する順序を記述した再生リストを生成する再生リスト生成手順と、
該スライドショー動画と該一つ又は複数の動画及び該再生リストを記録媒体に記録する記録手順と、
を行う画像記録方法。
前記再生リスト生成手順においては、該再生リストに記述された各画像の撮影位置を元に地図を作成し、該再生リストと該地図とを組み合わせて再生メニューを生成し、
前記記録手順では、該再生メニューをも記録媒体に記録する請求項１０の画像記録方法。