JP2004120624A

JP2004120624A - 画像取得方法および装置並びに再生装置

Info

Publication number: JP2004120624A
Application number: JP2002284123A
Authority: JP
Inventors: Hiroshi Yamaguchi; 山口　博司
Original assignee: Fuji Photo Film Co Ltd
Current assignee: Fujifilm Holdings Corp
Priority date: 2002-09-27
Filing date: 2002-09-27
Publication date: 2004-04-15

Abstract

【課題】動画と静止画を撮像可能な撮像装置において、シャッターチャンスを逃がさないようにすると共に、静止画として鑑賞することができる画像データのサイズを小さく抑える。
【解決手段】撮像部２０は、シャッタースイッチ４０が半押し下げられたときから、離されて１秒経過したときまでの期間中に被写体を撮像し続けて得たフレームを記録部３０に送信する。記録部３０は、送信されてきたフレームの動きベクトルを計算し、「静止画優先モード」で撮像して得たフレームのうち、動きベクトルが所定の判定閾値より小さいフレームのみを記録すべきフレームとして判定してその記録時間を付属情報として作成する。データ作成部３８は、記録すべきフレームのみを１つの画像データとして作成すると共に、これらのフレームの夫々の記録時間を示す付属情報を画像データに付属させる。
【選択図】　　　　　図２

Description

【０００１】
【発明の属する技術分野】
本発明は、被写体を撮像して画像データを取得する画像取得方法および装置並びに画像を再生する再生装置に関するものである。
【０００２】
【従来の技術】
近年、デジタルカメラの機能が充実し、静止画像も動画像も撮像可能な機種が開発されている（例えば、特許文献１参照）。画像データの形式として、静止画の場合には、ＪＰＥＧが業界標準となりつつあり、動画像の場合には、ＭＰＥＧまたはモーションＪＰＥＧがよく採用されている。動画像を取得する際には、所定の等間隔のサンプリングレートで撮像して得た各画像（フレーム）を同様の時間分割レートで記録して画像データを得るが、記録する際に、モーションＪＰＥＧは、複数枚のＪＰＥＧ方式の静止画像を連ねた方式を採用しているのに対して、ＭＰＥＧは、１コマ１コマの画像の差分を記録する方式を採用している。
【０００３】
一方、デジタルカメラを用いて静止画を撮像する際に、デジタルカメラ内部のオートホワイトバランスや、オートフォーカスなどの機能が働くため、シャッターが押下された瞬間と実際に撮像されるタイミングにずれが生じ、必ずしもベストショットを撮像することができないという問題がある。
【０００４】
そこで、動画像のフレームを切り出して静止画を作成する方法が提案されている。
【０００５】
【特許文献１】
特開平０６−３１５１０７号公報
【０００６】
【発明が解決しようとする課題】
しかし、ＭＰＥＧ方式の画像は、基準コマ以外の各フレームのデータが、基準コマに対する差分データであり、画像全体のサイズを小さくすることには効果があるが、あるフレームを静止画像として切り出して静止画として鑑賞したい場合、このフレームのデータ（差分データ）と基準コマのデータとを用いて静止画としてのデータを作りだす必要がある。演算から得たデータは、必然的に元のデータより画質が劣化するので、ＭＰＥＧ方式の画像から、良好な画質を有する静止画像を作り出すことが困難であるという問題がある。
【０００７】
また、モーションＪＰＥＧ方式の画像は、基本的に静止画のフォーマットであるＪＰＥＧ方式のフレームを連ねた形式であるので、静止画像として鑑賞するには情報量が十分である一方、時間軸におけるサンプリングレートが均一であり、静止画として再生する際に不必要なフレームも含まれているため、画像サイズが大きくて、冗長である。
【０００８】
本発明は、上記事情に鑑みなされたものであり、画像サイズを小さくすると共に、静止画像の鑑賞にも適した画像の取得方法および装置並びに取得された画像を再生する再生装置を提供することを目的とするものである。
【０００９】
【課題を解決するための手段】
本発明の画像取得方法は、シャッタースイッチを押し下げることにより所定のサンプリングレートで被写体を撮像して得た複数のフレームを記録して画像データを得る画像取得方法において、
前記複数のフレームの夫々を記録すべきか否かを判定し、記録すべきであると判定されたフレームのみを記録することを特徴とするものである。
【００１０】
すなわち、本発明の画像取得方法は、従来の動画撮像方法のように、時間軸に等間隔のサンプリングリングレートで撮像して得たフレームを撮像のサンプリングレートと同様な時間分割レートで記録する代わりに、撮像して得たフレームを記録すべきか否かを判定して、記録すべきであると判断されたフレームのみを記録するようにするものである。
【００１１】
通常、デジタルカメラは、静止画を撮像するとき、シャッタースイッチが半分程度押し下げられたときにオートホワイトバランスや、オートフォーカスなどの処理を行い、シャッタースイッチが完全に押し下げられてから離されるまでの間（以下押下げ期間という）に撮像を行うが、本発明の画像取得方法は、シャッタースイッチが完全に押し下げられる前から撮像を開始することが望ましく、シャッタースイッチが離された後の所定の期間まで撮像をし続けることがより望ましい。
【００１２】
「シャッタースイッチが完全に押し下げられる前」とは、押下げ期間に入る前のいかなるタイミングであってもよく、押下げ期間中に撮像して得たフレームとの関連性のあるフレームを取得したい視点から、例えば、シャッタースイッチが半分程度押し下げられたときなど、押下げ期間に入る直前であることが好ましい。
【００１３】
また、「シャッタースイッチが離された後の所定の期間まで撮像し続ける」とは、前述の押下げ期間が終了しても撮像を所定の期間続けることを意味し、この所定の期間は数秒程度であることが好ましい。
【００１４】
本発明の画像取得方法において、撮像して得たフレームを記録すべきか否かを判定する際に、前記複数のフレームの夫々の動きベクトルを求め、前記動きベクトルが小さいフレームのみを記録すべきフレームであると判定するようにすることができ、このとき、取得した画像データが静止画鑑賞に適した画像データとなる。
【００１５】
フレームの「動きベクトル」とは、前フレームから現フレームまでの間に、被写体が動いた方向と距離を表す動き位置情報（方向と距離を合わせた情報）のことを意味し、この動きベクトルが小さいフレームのみを記録すべきフレームであると判定することとは、例えば、現フレームの動きベクトルが所定の閾値より小さい場合、現フレームを記録すべきフレームとして判定する一方、動きベクトルが所定の閾値以上であるとき、現フレームを記録すべきフレームではないと判定することとすることができる。こうすることによって、被写体が安定した動き（静止状態を含む）をしたときのフレームのみを記録するようにすることができる。
【００１６】
また、本発明の画像取得方法において、撮像して得たフレームを記録すべきか否かを判定する際に、前記複数のフレームの夫々の動きベクトルを求め、前記動きベクトルが非線形的に変化したフレームのみを記録すべきフレームであると判断するようにすることができる。動きベクトルが非線形的に変化したフレームは、被写体が連続ではない動きをしたときに撮像したフレームであるので、このようなフレームを記録したほうが、後に画像データを動画として再生するときの違和感が少ない。
【００１７】
本発明の画像取得方法において、記録された各フレームの記録時間を示す情報を作成して前記画像データに付属させることが好ましい。
【００１８】
また、撮像して得た前記複数のフレームを夫々領域毎に分け、記録すべきであると判定されたフレームに対して、該フレームの夫々の領域を記録すべきか否かをさらに判定し、記録すべきと判定された領域のみを記録するようにして該フレームを記録することが好ましい。この場合、記録された各領域の記録時間を示す情報を作成して前記画像データに付属させることが好ましい。
【００１９】
本発明の画像取得装置は、被写体を撮像して画像データを取得する画像取得装置であって、
シャッタースイッチと、
前記シャッタースイッチが押し下げられることにより所定のサンプリングレートで前記被写体を撮像して複数のフレームを得る撮像手段と、
前記撮像手段により得られた前記複数のフレームの夫々を記録すべきか否かを判定する第１の判定手段と、
前記第１の判定手段により記録すべきであると判定されたフレームのみを記録して前記画像データを取得する記録手段とを備えたことを特徴とするものである。
【００２０】
本発明の画像取得装置における前記撮像手段は、シャッタースイッチが完全に押し下げられる前から撮像を開始するものであることが好ましく、シャッタースイッチが離された後の所定の期間まで撮像をし続けるものであることがより好ましい。
【００２１】
前記第１の判定手段は、前記複数のフレームの夫々の動きベクトルを計算する計算手段を有し、前記計算手段により算出された前記動きベクトルが小さいフレームのみを記録すべきフレームであると判定するものとすることができ、このように取得した画像データは静止画鑑賞に適した画像データとなる。
【００２２】
また、前記第１の判定手段は、前記複数のフレームの夫々の動きベクトルを計算する計算手段を有し、前記計算手段により算出された前記動きベクトルが非線形的に変化したフレームのみを記録すべきフレームであると判定するものとすることができる。このように取得した画像データは、後に動画として再生する際に違和感が少ない。
【００２３】
本発明の画像取得装置における前記記録手段は、記録された各フレームの各々の記録時間を示す情報を付属情報として作成する第１の付属情報作成手段を有し、該第１の付属情報作成手段により作成された前記付属情報を前記画像データに付属させるものであることが好ましい。
【００２４】
前記記録手段は、前記複数のフレームを夫々領域毎に分け、前記第１の判定手段により記録すべきであると判定されたフレームに対して、該フレームの夫々の領域を記録すべきか否かをさらに判定する第２の判定手段を有し、記録すべきと判定された領域のみを記録するようにして同該フレームを記録するものであることが好ましい。この場合、前記記録手段は、記録された各領域の記録時間を示す情報を付属情報として作成する第２の付属情報作成手段を有し、前記第２の付属情報作成手段により作成された前記付属情報を前記画像データに付属させるものであることがより好ましい。
【００２５】
本発明の再生装置は、時間軸に沿った複数のフレームからなり、前記複数のフレームの夫々の取得時間を示す付属情報が付属された画像データを動画として再生し得る再生装置であって、
前記複数のフレームの夫々の動きベクトルを取得する動きベクトル取得手段と、
該動きベクトル取得手段により取得された各々の前記フレームの動きベクトルおよび前記付属情報に基づいて、前記画像データの各フレームが時間軸に沿って同間隔になるようにフレーム補間を行う補間手段とを備えたことを特徴とするものである。
【００２６】
【発明の効果】
本発明の画像取得方法および装置によれば、被写体を所定のサンプリングレートで撮像して得た複数のフレームを記録して画像データを得る際に、夫々のフレームを記録すべきか否かを判定し、記録すべきであると判定されたフレームのみを記録するようにしているので、ＭＰＥＧ方式のように差分データを用いなくても、データ量を減少し、画像データのサイズを小さくすることができると共に、記録された各フレームのデータがモーションＪＰＥＧの各フレームのように静止画としてのデータを有することから、良質な静止画像を得ることができる。また、１枚の静止画像を取得するために、複数枚のフレームを撮像しているので、例えば、デジタルカメラのシャッタースイッチが押下された瞬間のフレームが失敗した（目瞑りなど）としても、他のフレームを使用すればよいので、良いショットを取得することができる。
【００２７】
本発明の画像取得方法および装置により画像を取得する際に、シャッタースイッチが完全に押下される前から撮像を開始するようにすれば、シャッターチャンスを逃がすことを防ぐことができる。また、シャッタースイッチが離された後も所定の期間まで撮像し続けるようにすれば、一層ベストショットを取得する確率を高くすることができる。
【００２８】
本発明の画像取得方法および装置により、フレームを記録すべきか否かを判定する際に、各々のフレームの動きベクトルを求め、動きベクトルの大きさに応じて判定するようにし、例えば、所定の閾値よりフレームの動きベクトルが小さいときのみ、該フレームを記録すべきであると判定するようにすれば、安定した動きをしたとき（静止状態を含む）の被写体を撮像して得たフレームのみが記録され、被写体が激しく動いているときのフレームが排除されることになるので、静止画観賞用に良いフレームを取得ですることができると共に、画像データの冗長化を避けることができる。
【００２９】
また、本発明の画像取得方法および装置により、フレームを記録すべきか否かを判定する際に、非線形的な変化を示した動きベクトルを有するフレームのみを記録すべきフレームとして判定して記録するようにすれば、被写体の動きが連続ではないときのフレームを記録することになるので、後に動画として再生する際の違和感を減少することができる。
【００３０】
本発明の画像取得方法および装置は、記録すべきフレームを記録する際に、フレームを領域毎に分け、記録すべき領域のみを記録するようにすれば、画像データのサイズをより小さくすることができる。
【００３１】
さらに、本発明の画像取得方法および装置により、フレームを記録する際に、フレームの記録時間を付属情報として作成して画像データに付属させるようにすれば、後に再生装置においてこの画像データを再生する際に、各フレームの動きベクトルおよび記録時間に基づいてフレーム補間を行って、画像でータの各フレームの時間間隔を均一にすることができるので、動画として再生することができる。フレームの中の記録すべき領域のみを記録する際に、記録された領域の記録時間を画像データに付属させるようにした際にも、同様の効果を得ることができる。
【００３２】
本発明の再生装置は、画像データを再生する際に、画像データの各フレーム間の時間軸に沿った間隔が異なっていても、各フレームの動きベクトルおよび記録時間に基づいてフレーム補間を行うようにしているので、本発明の画像取得方法および装置により取得された画像データを動画として再生することができる。
【００３３】
【発明の実施の形態】
以下、図面を参照して、本発明の実施形態について説明する。
【００３４】
図１は、本発明の実施形態となる画像システムの構成を示すブロック図である。図示のように、本発明の画像システムは、被写体を撮像して画像データを取得して着脱可能な記録媒体５０に記録するデジタルカメラ１と、デジタルカメラ１により取得した画像データを記録した記録媒体５０から画像データを読み出して再生する再生装置となるコンピュータ１００とを備えてなるものである。
【００３５】
図２は、図１に示すデジタルカメラ１の構成を示すブロック図である。図２（ａ）に示すように、デジタルカメラ１は、「静止画優先モード」または「動画優先モード」を設定する画像モード設定部５と、シャッタースイッチ４０と、被写体を撮像して複数のフレームを得、これらのフレームを用いて画像データを作成して記録媒体５０に記録させる画像取得部１０とからなるものである。図２（ｂ）は、図２（ａ）に示すデジタルカメラ１の画像取得部１０の構成を示すブロック図であり、図示のように、画像取得部１０は、撮像部２０と、撮像部２０により取得したフレームを選択的に記録して画像データを得る記録部３０とからなり、撮像部２０は、シャッタースイッチ４０が半押し下げられたときから押下げ期間（シャッタースイッチ４０が完全に押し下げられてから押下げが解除されるまでの期間）を経て、押下げが解除された後１秒経過するまでの間に、所定のサンプリングレートで撮像をし続けるものであり、記録部３０は、撮像部２０の撮像に伴い、撮像部２０により取得したフレームの動きベクトルを計算する演算部３２と、演算部３２により算出された動きベクトルおよび画像モード設定部５により設定された画像モードに基づいて、該当するフレームを記録すべきか否かを判定する判定部３４と、判定部３４により記録するように判断されたフレームの記録時間を付属情報として作成する付属情報作成部３６と、判定部３４により記録するように判定されたフレームを１つの画像データとして作成すると共に、付属情報作成部３６により作成した、各々のフレームの記録時間を示す付属情報を画像データに付属させて記録媒体５０に記録させるデータ作成部３８とからなるものである。なお、画像モード設定部５により「静止画優先モード」が設定されたとき、すなわち、撮像者が静止画として鑑賞する目的で撮像したいとき、判定部３４は、動きベクトルが所定の閾値（以下判定閾値とする）より小さいときのみ、該当するフレームを記録すべきフレームとして判定する一方、画像モード設定部５により「動画優先モード」が設定されたとき、すなわち、撮像者が動画として撮像したいとき、判定部３４は、動きベクトルが非線形的な変化を示したフレームのみを記録すべきフレームとして判定するものである。
【００３６】
ここで、撮像部２０の動作について説明する。
【００３７】
通常、デジタルカメラの撮像部は、光電変換部の光電素子で発生した電荷を取り出して画像を取得するようにしているが、電荷を取り出す方式によって、取得した画像の解像度が異なる。例えば、電荷を画素毎に取り出すようにすると、取得した画像がそのデジタルカメラの最高解像度を有するが、電荷を複数画素分統合して取り出すようにすると、取得した画像は最高解像度より低い解像度を有するものとなる。なお、統合する画素の数により、解像度を数段階に分けることもできる。光電変換、電荷取り出すなどの処理を担うセンサーには、全画素モード（電荷を画素毎に取り出すモード）と統合間引きモード（電荷を複数画素分統合して取り出すモード）とで切り替えて撮像可能なものが知られている。本実施形態における撮像部２０は、このように撮像モードを全画素モードと統合間引きモードとに切り替えて撮像を行うことが可能なセンサーを用いたものであり、デフォルトの撮像モードが「統合間引きモード」であるが、画像モード設定部５により「静止画優先モード」に設定され、かつ演算部３２に算出された動きベクトルが判定閾値より小さいフレームが撮像部２０により取得された際（すなわち被写体が静止状態に近い際）、撮像モードを自動的に「全画素モード」に切り替えて、高解像度のフレームを取得するように動作するものである。
【００３８】
図３は、図１に示す画像システムにおけるコンピュータ１００の構成を示すブロック図である。なお、本発明の主旨をわかりやすく説明するために、本発明の画像データを再生する部分（以下再生部という）の構成に重点を置いて説明をし、その他のコンピュータの通常の要件を省略する。
【００３９】
コンピュータ１００における再生部１００ａは、記録媒体５０から画像データを読み出して表示するための画像閲覧ソフトウェア（ビューア）がインストールされてなるものである。図３（ａ）に示すように、再生部１００ａは、記録媒体５０から画像データ（付属情報を含む）を読み出す読出部１０５と、読出部１０５により読み出された画像データを記憶する記憶部１１０と、記憶部１１０に記憶された画像データの中から再生する画像データを指定すると共に、この画像データを静止画として再生する（以下静止画再生という）か動画として再生する（以下動画再生という）かを指示するための再生指示部１１５と、再生指示部１１５により指定された画像データを記憶部１１０から読み出すと共に、再生指示部１１５の指示に従って、この画像データを静止画または動画としてコンピュータ１００のモニタ１５０に出力して表示させる再生実行部１２０とを備えてなるものである。
【００４０】
図３（ｂ）は、図３（ａ）に示すコンピュータ１００の再生部１００ａにおける再生実行部１２０の構成を示すブロック図である。図示のように、再生実行部１２０は、再生指示部１１５により静止画再生が指示されたとき、該当する画像データを記憶部１１０から読み出すと共に、この画像データの各フレームを静止画像としてモニタ１５０に出力して表示させる静止画再生部１２５と、再生指示部１１５により動画再生が指示されたとき、該当する画像データを記憶部１１０から読み出すと共に、この画像データを動画としてモニタ１５０に出力して表示させる動画再生部１３０とからなり、動画再生部１３０は、記憶部１１０から読み出した画像データを構成する各フレームの動きベクトルを計算する動きベクトル計算部１３２と、動きベクトル計算部１３２により算出した各フレームの動きベクトル、および該画像データの付属情報に記録された各フレームの記録時間に基づいてフレーム補間を行うことによって、画像データを、各フレーム間の時間間隔が均一な画像データに変換する補間部１３４と、補間部１３４により得られた画像データを動画像としてモニタ１５０に出力して表示させる出力部１３６とからなるものである。
【００４１】
図４は、図１に示す画像システムにおけるデジタルカメラ１およびコンピュータ１００の再生部１００ａの動作を示すフローチャートである。図示のように、デジタルカメラ１における画像取得部１０の撮像部２０は、シャッタースイッチ４０が半押し下げられた時から撮像（デフォルトでは、統合間引きモードでの撮像）を行うと共に、撮像して得たフレームを撮像順に記録部３０に出力する（Ｓ１０）。記録部３０の演算部３２は、出力されてきたフレームの動きベクトルを算出して判定部３４に供する（Ｓ１２）。判定部３４は、演算部３２により算出された動きベクトルと撮像者により画像モード設定部５において設定された画像モード（「静止画優先モード」または「動画優先モード」）とに基づいて記録すべきフレームか否かの判定を行う。具体的には、画像モードが「静止画優先モード」に設定されている場合（Ｓ１４：Ｙｅｓ）、判定部３４は、動きベクトルが判定閾値より小さいフレームのみを記録すべきフレームとして判定し、データ作成部３８に出力すると同時に、付属情報作成部３６は、このフレームの記録時間（実質的には取得時間）を付属情報として作成してデータ作成部３８に出力する（Ｓ１６：Ｙｅｓ、Ｓ２４）一方、判定部３４は、動きベクトルが判定閾値以上のフレームを記録すべきフレームではないフレームとして判定して破棄する（Ｓ１６：Ｎｏ、Ｓ２５）。また、判定部３４は、動きベクトルと判定閾値との比較結果を撮像部２０にも出力し、フレームの動きベクトルが判定閾値より小さいとき（Ｓ１６：Ｙｅｓ）、撮像部２０は、撮像モードを「全画素モード」に切り替えて（Ｓ２０）、その後の撮像を行う一方、フレームの動きベクトルが判定閾値以上であるとき（Ｓ１６：Ｎｏ）、撮像モードを「統合間引きモード」のままで（「全画素モード」になっている場合には、「統合間引きモード」に切り替えて）（Ｓ１８）、その後の撮像を行う。
【００４２】
また、ステップＳ１４において、画像モードが「動画優先モード」に設定されていると（Ｓ１４：Ｎｏ）、判定部３４は、動きベクトルが非線形的な変化を示したフレームのみを記録すべきフレームとして判定し、データ作成部３８に出力すると同時に、付属情報作成部３６は、このフレームの記録時間（実質的には取得時間）を付属情報として作成してデータ作成部３８に出力する（Ｓ２２：Ｙｅｓ、Ｓ２４）一方、判定部３４は、動きベクトルが線形的な変化を示すフレームを記録すべきフレームではないフレームとして判定して破棄する（Ｓ２２：Ｎｏ、Ｓ２５）。なお、データ作成部３８は、判定部３４から出力されてきたフレームおよび付属情報作成部３６により作成されたフレームの記録時間を示す付属情報を図示しないメモリに保持する。
【００４３】
撮像、動きベクトル計算、判定などの処理（Ｓ１０〜Ｓ２４）は、シャッタースイッチ４０が離されてから１秒経過したときまで繰り返される（Ｓ２６：Ｎｏ）が、シャッタースイッチ４０が離されてから１秒経過すると（Ｓ２６：Ｙｅｓ）、デジタルカメラ１により１回の撮像が終了したとされ、データ作成部３８は、図示しないメモリに保持された各々のフレームを１つの画像データとして作成すると共に夫々のフレームの記録時間を示す付属情報を画像データに付属させる（Ｓ２８）。データ作成部３８により作成された画像データが、記録媒体５０に出力され、保存されると共に、データ作成部３８の図示しないメモリがクリアされる（Ｓ３０）ことをもって、デジタルカメラ１による１回の撮像（シャッタースイッチ４０が半押し下げられてから、押下げ期間を経て、シャッタースイッチ４０が離され後１秒経過したときまでの期間における撮像）が終了する。
【００４４】
図４のフローチャートにおけるステップＳ３７からステップＳ５６までは、コンピュータ１００において、画像デジタルカメラ１により取得した画像データを再生する動作を示している。図示のように、コンピュータ１００にビューアをインストールしてなる再生部１００ａは、まず、読出部１０５により、デジタルカメラ１により取得した画像データを記録した記録媒体５０から画像データを読み出して、記憶部１１０に記憶させる（Ｓ３７、Ｓ４０）。再生実行部１２０は、再生指示部１１５の指示に従って記憶部１１０に記憶された画像データを再生するが、具体的には、再生指示部１１５により静止画再生が指示された画像データに対して（Ｓ４３：Ｎｏ）、再生実行部１２０は、静止画再生部１２５により指示された画像データを記憶部１１０から読み出して、この画像データを構成する各フレームを静止画像としてモニタ１５０に表示させる（Ｓ４５）一方、再生指示部１１５により動画再生が指示された画像データに対して（Ｓ４３：Ｙｅｓ）、再生実行部１２０は、まず動画再生部１２０における動きベクトル計算部１３２により、指示された画像データ（付属情報を含む）を記憶部１１０から読み出して、この画像データを構成する各フレームの動きベクトルを算出する（Ｓ５０）。補間部１３４は、動きベクトル計算部１３２により算出された各フレームの動きベクトル、および画像データの付属情報が示す各フレームの記録時間に基づいて、画像データに対してフレーム補間を行って、時間分割レートが均一な画像データを得る（Ｓ５３）。出力部１３６は、補間部１３４により補間して得た画像データを動画としてモニタ１５０に出力して表示させる（Ｓ５６）。
【００４５】
このように、図１に示す実施形態の画像システムによれば、デジタルカメラ１の撮像部１０は、シャッタースイッチ４０が半押し下げられたときから押下げ期間を経て、シャッタースイッチ４０が離されてから１秒経過したときまで撮像を続けるので、シャッターチャンスを逃すことを防ぐことができると共に、シャッタースイッチ４０が完全に押下された瞬間に取得したフレームが失敗したものである場合においても、その前後のフレームがあるので、１枚の静止画像の撮像よりベストショットを取得する確率が高い。また、記録部３０は、撮像部２０により取得した全てのフレームを画像データに取り込む代わりに、静止画を鑑賞することを目的として「静止画優先モード」に設定された場合、静止画として鑑賞するに値するフレームのみを記録するようにしているので、各フレームの画質を保ちつつ、画像データのサイズを小さくすることができると共に、動画として撮像したく、「動画優先モード」に設定された場合、動画として再生する際に違和感のないように、動きベクトルが非線形的に変化したフレームのみを記録するようにしているので、動画として良好な再生効果を得ることを可能にしつつ、画像データのサイズを小さく抑えることができる。
【００４６】
また、デジタルカメラ１の記録部３０は、画像データを構成する各フレームの記録時間も付属情報として画像データに付属させているので、後に再生装置において再生する際に、フレーム補間などを可能とし、静止画としてだけではなく、動画として再生することも可能となる。
【００４７】
図１に示す画像システムは、デジタルカメラ１において、記録部３０のデータ作成部３８により画像データを作成する際に、記録すべきフレームか否かの判定を行い、記録すべきフレームのみを記録するようにしているが、フレームを領域毎に分け、記録すべきであると判定されたフレームに対して、さらに各領域を記録すべきか否かを判定し、記録すべきと判断された領域だけを記録するようにすれば、より画像データのサイズを小さくすることができる。この際も、各領域の記録時間を付属情報として付属させておけば、後に再生装置において再生する際に、異なるフレームにおける同じ領域間の補間を行えば、同じく動画として作成することができる。
【００４８】
上述において、本発明の望ましい実施形態について説明したが、本発明の画像取得方法、画像取得装置、再生装置は、上述した実施形態に限られるものではなく、本発明の主旨を変えない限り、様々な増減、変更を加えることができる。
【００４９】
例えば、記録すべきフレームか否かの判定方法も、図２に示すデジタルカメラ１の判定部３４のように判定する方法に限られるものではなく、例えば、シャッタースイッチが半押し下げられたときから完全に押し下げられたときまでの期間およびシャッタースイッチが離されたときから１秒経過したときまでの期間中に、図２に示すデジタルカメラ１の判定部３４のように記録すべきフレームか否かを判定する一方、シャッタースイッチの押下げ期間中の全てのフレームを記録すべきフレームとして判定するようにしてもよい。
【００５０】
また、図１に示す画像システムにおいて、デジタルカメラ１は、画像データを着脱可能な記録媒体に記録し、コンピュータ１００は記録媒体に記録された画像データを読み出すようにしているが、例えば、デジタルカメラに通信手段を備え、取得した画像データを通信手段により公衆通信網などを介して再生装置に送信するようにしてもよい。
【００５１】
また、図１に示す画像システムにおけるデジタルカメラ１における撮像部１０は、「静止画優先モード」での撮像中に、フレームの動きベクトルが判定閾値より小さいときに自動的に撮像モードを「統合間引きモード」から「全画素モード」に切り替えて撮像を行って、記録すべきフレームのみを高解像度で撮影することを図っているが、本発明の画像取得装置における撮像手段は、このように自動的に撮像モードを切り替わることができるものでなくてもよい。
【００５２】
また、撮像装置も、本発明における画像データしか撮像できないものに限られるものではなく、例えば、１度のシャッター押下で１枚の静止画像しか撮像しない、通常意味の「静止画モード」と、図１に示す画像システムにおけるデジタルカメラ１のように撮像を行うモード（例えば、マルチモードなど）とを設け、モードの設定によって切り替わるようにしてもよい。
【００５３】
また、図１に示す画像システムにおけるデジタルカメラ１は、例としてシャッタースイッチが離されてから１秒経過したときまで撮像を行っているが、１秒に限らないことは勿論、ユーザによって設定可能にしてもよい。
【００５４】
また、画像データを記録する際に、画像データに対して量子化、符号化などの処理を施してもよい。
【図面の簡単な説明】
【図１】本発明の実施形態となる画像システムの構成を示すブロック図
【図２】図１に示す画像システムにおけるデジタルカメラ１の構成を示すブロック図
【図３】図１に示す画像システムにおけるコンピュータ１００の再生部１００ａの構成を示すブロック図
【図４】図１に示す画像システムの動作を示すフローチャート
【符号の説明】
１　　デジタルカメラ
５　　画像モード設定部
１０　　画像取得部
２０　　撮像部
３０　　記録部
３２　　演算部
３４　　判定部
３６　　付属情報作成部
３８　　データ作成部
４０　　シャッタースイッチ
５０　　記録媒体
１００　　コンピュータ
１０５　　読出部
１１０　　記憶部
１１５　　再生指示部
１２０　　再生実行部
１２５　　静止画再生部
１３０　　動画再生部
１３２　　動きベクトル計算部
１３４　　補間部
１３６　　出力部
１５０　　モニタ

Claims

シャッタースイッチを押し下げることにより所定のサンプリングレートで被写体を撮像して得た複数のフレームを記録して画像データを得る画像取得方法において、
前記複数のフレームの夫々を記録すべきか否かを判定し、記録すべきであると判定されたフレームのみを記録することを特徴とする画像取得方法。
前記シャッタースイッチが完全に押し下げられる前から撮像を開始することを特徴とする請求項１記載の画像取得方法。
前記シャッタースイッチが離された後の所定の期間まで撮像をし続けることを特徴とする請求項１または２記載の画像取得方法。
前記複数のフレームの夫々の動きベクトルを求め、前記動きベクトルが小さいフレームのみを記録すべきフレームであると判定することを特徴とする請求項１から３のいずれか１項記載の画像取得方法。
前記複数のフレームの夫々の動きベクトルを求め、前記動きベクトルが非線形的に変化したフレームのみを記録すべきフレームであると判定することを特徴とする請求項１から３のいずれか１項記載の画像取得方法。
記録された各フレームの記録時間を示す情報を作成して前記画像データに付属させることを特徴とする請求項１から５のいずれか１項記載の画像取得方法。
前記複数のフレームを夫々領域毎に分け、記録すべきであると判定されたフレームに対して、該フレームの夫々の領域を記録すべきか否かをさらに判定し、記録すべきと判定された領域のみを記録するようにして該フレームを記録することを特徴とする請求項１から６のいずれか１項記載の画像取得方法。
記録された各領域の記録時間を示す情報を作成して前記画像データに付属させることを特徴とする請求項７記載の画像取得方法。
被写体を撮像して画像データを取得する画像取得装置であって、
シャッタースイッチと、
前記シャッタースイッチが押し下げられることにより所定のサンプリングレートで前記被写体を撮像して複数のフレームを得る撮像手段と、
前記撮像手段により得られた前記複数のフレームの夫々を記録すべきか否かを判定する第１の判定手段と、
前記第１の判定手段により記録すべきであると判定されたフレームのみを記録して前記画像データを取得する記録手段とを備えたことを特徴とする画像取得装置。
前記撮像手段が、前記シャッタースイッチが完全に押し下げられる前から撮像を開始するものであることを特徴とする請求項９記載の画像取得装置。
前記撮像手段が、前記シャッタースイッチが離された後の所定の期間まで撮像をし続けるものであることを特徴とする請求項９または１０記載の画像取得装置。
前記第１の判定手段が、前記複数のフレームの夫々の動きベクトルを計算する計算手段を有し、
前記計算手段により算出された前記動きベクトルが小さいフレームのみを記録すべきフレームであると判定するものであることを特徴とする請求項９から１１のいずれか１項記載の画像取得装置。
前記第１の判定手段が、前記複数のフレームの夫々の動きベクトルを計算する計算手段を有し、
前記計算手段により算出された前記動きベクトルが非線形的に変化したフレームのみを記録すべきフレームであると判定するものであることを特徴とする請求項９から１１のいずれか１項記載の画像取得装置。
前記記録手段が、記録された各フレームの各々の記録時間を示す情報を付属情報として作成する第１の付属情報作成手段を有し、
該第１の付属情報作成手段により作成された前記付属情報を前記画像データに付属させるものであることを特徴とする請求項９から１３のいずれか１項記載の画像取得装置。
前記記録手段が、前記複数のフレームを夫々領域毎に分け、前記第１の判定手段により記録すべきであると判定されたフレームに対して、該フレームの夫々の領域を記録すべきか否かをさらに判定する第２の判定手段を有し、
記録すべきと判定された領域のみを記録するようにして同該フレームを記録するものであることを特徴とする請求項９から１４のいずれか１項記載の画像取得装置。
前記記録手段が、記録された各領域の記録時間を示す情報を付属情報として作成する第２の付属情報作成手段を有し、
前記第２の付属情報作成手段により作成された前記付属情報を前記画像データに付属させるものであることを特徴とする請求項１５記載の画像取得装置。
時間軸に沿った複数のフレームからなり、前記複数のフレームの夫々の取得時間を示す付属情報が付属された画像データを動画として再生し得る再生装置であって、
前記複数のフレームの夫々の動きベクトルを取得する動きベクトル取得手段と、
該動きベクトル取得手段により取得された各々の前記フレームの動きベクトルおよび前記付属情報に基づいて、前記画像データの各フレームが時間軸に沿って同間隔になるようにフレーム補間を行う補間手段とを備えたことを特徴とする再生装置。