JP4573166B2 - 情報記録装置、情報再生装置、情報記録方法、及び情報再生方法 - Google Patents
情報記録装置、情報再生装置、情報記録方法、及び情報再生方法 Download PDFInfo
- Publication number
- JP4573166B2 JP4573166B2 JP2005007642A JP2005007642A JP4573166B2 JP 4573166 B2 JP4573166 B2 JP 4573166B2 JP 2005007642 A JP2005007642 A JP 2005007642A JP 2005007642 A JP2005007642 A JP 2005007642A JP 4573166 B2 JP4573166 B2 JP 4573166B2
- Authority
- JP
- Japan
- Prior art keywords
- picture
- information
- still image
- recording
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 39
- 230000003287 optical effect Effects 0.000 claims description 26
- 238000003384 imaging method Methods 0.000 claims description 8
- 238000000926 separation method Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 description 14
- 230000033001 locomotion Effects 0.000 description 13
- 238000001444 catalytic combustion detection Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 239000000872 buffer Substances 0.000 description 10
- 230000009467 reduction Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 238000013139 quantization Methods 0.000 description 6
- 229920006261 self reinforced polyphenylene Polymers 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 238000003822 preparative gas chromatography Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Description
本発明は、動画の一部のピクチャーに対応した静止画のズームインまたはズームアウトに関する情報をもとに、画像を記録後のオペレートによって解像度を落とさずにあとからズームインまたはズームアウトすることを好適に実現する装置及び方法に関するものである。
従来のカムコーダでは動画と静止画とを一つのＣＣＤを用いて同時記録していた。しかし静止画像の画素数を上げるために画素数の多いＣＣＤを使用すると動画のＳ／Ｎ比が低下するので、解像度の高い静止画とＳ／Ｎ比の優れた動画とを同時記録することが困難であった。
そこで、特開平５−２９２４４５においては、広角レンズによる撮像信号と、ズームレンズによる撮像信号とを、同一の記録媒体に同時記録して、２種類の映像を２つの光学系にて記録する技術が開示されている。
また、特開２００４−７２１４８においては、入射光をプリズム分岐させて動画撮影用ＣＣＤと静止画撮影用ＣＣＤに受光させ、１つの光学系で、２つのＣＣＤを用いて、動画像はＭＰＥＧ圧縮されて記録し、静止画はＪＰＥＧ圧縮してメモリカードに同時に記録される技術が開示されている。
また、同じように特開２０００−２３０９４では、動画像を記録し、所望の場面を静止画像としても記録可能の画像情報の記録又は再生装置を提供する目的で、入力手段により入力された記録データを、エンコーダで動画像用データとして圧縮し、操作ボタンから信号の入力時には、その信号が入力された時点における場面を静止画像用データとしても圧縮してメモリへ出力し、同期信号生成回路からの同期信号に同期して動画像用データと静止画像用データとを記録するためのタイミング信号を生成し、動画像用データと静止画像用データとを光磁気記録媒体に同時記録する技術が開示されている。
また、特開平１１−７６１５９には、対物光学系の光路を二つに分離するハーフミラーの二つの分離光路を用いて、異なる画素位置のデータからなる画像信号を形成するように配置された２つのＣＣＤから、設定された画素以外の欠落画素を周囲の画素信号から演算し、高解像度の画像を生成する技術が開示されている。
また、ここで使用されているMPEGについて説明する。
MPEGは1988年、ISO/IEC JTC1/SC2（国際標準化機構/国際電気標準化会合同技術委員会1/専門部会2、現在のSC29）に設立された動画像符号化標準を検討する組織の名称（Moving Pictures Expert Group）の略称である。MPEG1（MPEGフェーズ1）は1.5Mbps程度の蓄積メディアを対象とした標準で、静止画符号化を目的としたJPEGと、ISDNのテレビ会議やテレビ電話の低転送レート用の動画像圧縮を目的としたH.261（CCITT SGXV、現在のITU-T SG15で標準化）の基本的な技術を受け継ぎ、蓄積メディア用に新しい技術を導入したものである。これらは1993年8月、ISO/IEC 11172 として成立している。
MPEGは1988年、ISO/IEC JTC1/SC2（国際標準化機構/国際電気標準化会合同技術委員会1/専門部会2、現在のSC29）に設立された動画像符号化標準を検討する組織の名称（Moving Pictures Expert Group）の略称である。MPEG1（MPEGフェーズ1）は1.5Mbps程度の蓄積メディアを対象とした標準で、静止画符号化を目的としたJPEGと、ISDNのテレビ会議やテレビ電話の低転送レート用の動画像圧縮を目的としたH.261（CCITT SGXV、現在のITU-T SG15で標準化）の基本的な技術を受け継ぎ、蓄積メディア用に新しい技術を導入したものである。これらは1993年8月、ISO/IEC 11172 として成立している。
MPEG２（MPEGフェーズ２）は通信や放送などの多様なアプリケーションに対応できるように汎用標準を目的として、１９９４年１１月ISO/IEC １３８１８、H.２６２として成立している。
MPEGは幾つかの技術を組み合わせて作成されている。入力画像は動き補償器で復号化した画像と、入力画像の差分を取ることで時間冗長部分を削減する。予測の方向は、過去、未来、両方からの３モード存在する。またこれらは16画素×16画素のMB（マクロブロック）ごとに切り替えて使用できる。予測方向は入力画像に与えられたピクチャタイプによって決定される。過去からの予測と、予測をしないでそのMBを独立で符号化する２モード存在するのがPピクチャーである。また未来からの予測、過去からの予測、両方からの予測、独立で符号化する４モード存在するのがBピクチャーである。そして全てのMBが独立で符号化するのがIピクチャーである。動き補償は、動き領域をMBごとにパターンマッチングを行ってハーフペル精度で動きベクトルを検出し、動き分だけシフトしてから予測する。動きベクトルは水平方向と垂直方向が存在し、何処からの予測かを示すMC(Motion Compensation)モードとともにMBの付加情報として伝送される。Iピクチャから次のIピクチャの前のピクチャまでをGOP(Group Of Picture)といい、蓄積メディアなどで使用される場合には、一般に約１５ピクチャ程度が使用される。
差分画像はDCT器において直交変換が行われる。DCT（Discrete Cosine Transform)とは 余弦関数を積分核とした積分変換を有限空間への離散変換する直交変換である。MPEGではMBを４分割し8×8のDCTブロックに対して、２次元DCTを行う。一般にビデオ信号は低域成分が多く高域成分が少ないため、DCTを行うと係数が低域に集中する。
DCTされた画像データ（DCT係数）は量子化器で量子化が行われる。量子化は量子化マトリックスという8×8の２次元周波数を視覚特性で重み付けした値と、その全体をスカラー倍する量子化スケールという値で乗算した値を量子化値として、ＤＣＴ係数をその量子化値で叙算する。デコーダーで逆量子化するときは量子化値で乗算することにより、元のＤＣＴ係数に近似している値を得ることになる。
量子化されたデータはVLC器で可変長符号化される。量子化された値のうち直流（ＤＣ）成分は予測符号化のひとつであるＤＰＣＭ（differential pulse code modulation )を使用する。また交流（ＡＣ）成分は 低域から高域にzigzag scanを行い、ゼロのラン長および有効係数値を１つの事象とし、出現確率の高いものから符号長の短い符号を割り当てていくハフマン符号化が行われる。
可変長符号化されたデータは一時バッファに蓄えられ、所定の転送レートで符号化データとして出力される。また、その出力されるデータのマクロブロック毎の発生符号量は、符号量制御器に送信され、目標符号量に対する発生符号量との誤差符号量を量子化器にフィードバックして量子化スケールを調整することで符号量制御される。量子化された画像データは逆量子化器にて逆量子化、逆DCT器にて逆DCTされ一時、画像メモリーに蓄えられたのち、動き補償予測器において、差分画像を計算するためのリファレンスの復号化画像として使用される。これら全体の符号化構成例を第１０図に示す。
符号化されたストリームはバッファリングされ、バッファからのデータはVLD器に入力される。VLD器では可変長復号化され、直流（ＤＣ）成分および交流（ＡＣ）成分を得る。交流（ＡＣ）成分データは低域から高域にzigzag scanの順で８ｘ８のマトリックスに配置する。このデータは逆量子化器に入力され、量子化マトリックスにて逆量子化される。逆量子化されたデータは逆DCT器に入力され、逆DCTされ一時、画像データ（復号化データ）として出力される。また、復号化データは一時、画像メモリーに蓄えられたのち、動き補償予測器において、差分画像を計算するためのリファレンスの復号化画像として使用される。復号化構成例を第１１図に示す。
また、近年開発された記録容量が従来のCD等の媒体の数倍から十数倍になる、次世代のディスク媒体のフォーマット技術について説明する。一つはDVD-ROMディスク（DVD Specifications for Read-Only Discに準拠した読み出し専用光ディスク）であり、記録再生が可能なディスクとしてはDVD-RWディスク（DVD Specifications for Re-recordable Discに準拠した再記録可能なディスク）及びDVD-RAMディスク（DVD Specifications for Rewritable Discに準拠した再書き込み可能なディスク）がある。DVD-RWまたはDVD-RAMディスク上にビデオデータを収録する規格も策定されており、その大容量を活かして高画質な動画及び静止画を記録し、様々な編集を経て再生する手法が提供される。
DVD-RWまたはDVD-RAMディスク上（以下、DVD-RW/RAMディスクと略す）にビデオデータを収録する規格、VIDEO RECORDING規格（以下DVD-VRと略す）では、ビデオデータはVOB（Video Object）として記録され、VOB群を記録した順序で全て再生するためのオリジナル管理データ、オリジナルPGC （Original Program Chain）と、ユーザーが選択したVOBの全部又は一部分を任意の順序で再生するためのユーザー定義管理データ、ユーザー定義PGC （User Defined PGC）が定義される。ディスク上に、オリジナルPGCはただ一つ存在し、ユーザー定義PGCは複数存在しうる。 従って、ユーザーは、好みに応じて編集したユーザー定義PGCを使って、好みの再生を行うことが出来る。
"DVD Specifications for Rewritable/Re-recordable Discs、 Part3 VIDEO RECORDING、 Version 1.0"で示されるように、DVD-VRでは、DVD-RW/RAM上のファイルとして複数のファイルを記録する。図１０にその構成を示す。 ルートディレクトリ下にDVD＿RTAVディレクトリがあり、その下にオリジナルPGC、ユーザー定義PGCなど、全ての記録再生管理データを収録するためのVR＿MANGER.IFOファイルを収録する。また、ビデオデータはVR＿MOVIE.VROファイル中に、静止画データはVR＿STILL.VROファイル中に、静止画に付随する追加オーディオデータはVR＿AUDIO.VROファイル中に記録される。 このように、実際の再生データと、記録再生管理データは分離して記録されるので、再生データを変更することなく、ユーザー定義PGCによって任意の再生手順を構築することが出来る。なお、VR＿STILL.VRO中の各静止画は、MPEG Video規格に準拠したMPEGイントラ画像として記録される。
"DVD Specifications for Rewritable/Re-recordable Discs、 Part3 VIDEO RECORDING、 Version 1.0"で示されるように、DVD-VRでは、DVD-RW/RAM上のファイルとして複数のファイルを記録する。図１０にその構成を示す。 ルートディレクトリ下にDVD＿RTAVディレクトリがあり、その下にオリジナルPGC、ユーザー定義PGCなど、全ての記録再生管理データを収録するためのVR＿MANGER.IFOファイルを収録する。また、ビデオデータはVR＿MOVIE.VROファイル中に、静止画データはVR＿STILL.VROファイル中に、静止画に付随する追加オーディオデータはVR＿AUDIO.VROファイル中に記録される。 このように、実際の再生データと、記録再生管理データは分離して記録されるので、再生データを変更することなく、ユーザー定義PGCによって任意の再生手順を構築することが出来る。なお、VR＿STILL.VRO中の各静止画は、MPEG Video規格に準拠したMPEGイントラ画像として記録される。
図１１にオリジナルPGCの構造概念図を示す。DVD-VRディスクにビデオデータを記録する場合、例えば１つのテレビ番組を録画する場合、その一続きのビデオデータは、１つのプログラム（Program）として記録され、プログラムは１つまたは複数のセル（Cell）から構成される。一般的には、録画の途中でポーズした場合や、録画後に番組の途中部分を編集で削除した場合などに、プログラムは複数のセルから構成される。各セルは１つのVOBと関連づけられている。各VOBは、MPEG-2システムに準拠したプログラムストリームとして記録され、連続的に再生される単位である。プログラムおよびセルの構造がオリジナルPGCの記録再生管理データであり、VOB群がビデオデータそのものである。ディスク上に最初に記録されたプログラムがProgram1であり、プログラムを追加記録する毎に、Program2、 3、 ...と記録順に追加されていく。オリジナルPGCの再生は、ディスクに記録された全プログラムをプログラム番号順、つまり記録順に再生することに相当する。また、オリジナルPGC上の特定のプログラムを指定して再生することも可能である。
一方、図１２にはユーザー定義PGCの構造概念図を示す。オリジナルPGCとして記録されたVOB群の任意の部分をユーザー定義PGC用のセルとして登録し、ユーザー定義PGCを構成する。各セルは任意のVOBの全部または一部分を参照する。例えば、オリジナルPGCとして記録されたVOBのコマーシャルや不要な場面をカットしたり、２つ以上の番組（Program）の一部分を繋いで再生したりする用途等に適している。新しく定義したユーザー定義PGCを再生することは、そのPGC中の全セルを連続して再生することに相当する。 ユーザー定義PGC中にはプログラムの階層は存在しない。つまり、ユーザー定義PGC自体が、オリジナルPGCで言う１つのプログラムに相当する、と解釈できる。
表５には、オリジナル及びユーザー定義PGC情報（PGCI）の具体的定義内容を示す。PGCIはPGCの一般情報を示すPGC＿GI、各プログラムの付属情報を定義する１つ以上のPGI（オリジナルPGCの場合。ユーザー定義PGCでは定義しない。）、PGC中の各セル情報の検索ポインタCI＿SRP、及び各セル情報M＿CI（動画セルの場合。静止画セルの場合S＿CI。）から成る。
次に、表５中の各要素の内容を説明する。PGC＿GI内には、PGC内のプログラム数を収納するPG＿Ns及びCI＿SRPの数を収納するCI＿SRP＿Nsが定義される。ユーザー定義PGCの場合、プログラムを持たないのでPG＿Nsはゼロである。
PGIは、PG＿Nsで示される個数存在する。各PGI内には、プログラム中のセル数を示すC＿Ns、プログラムに関するテキスト情報を収録するプライマリテキスト情報（PRM＿TXTI）、プログラムに関連するアイテムテキスト情報（PGCIではなく、VR＿MANGR.IFO内の別のデータ構造として別途収録されている）の検索ポインタ番号（IT＿TXT＿SRPN）、プログラムを代表する静止画像の位置を指定する代表静止画情報（REP＿PICTI）、等が定義される。
CI＿SRPは、CI＿SRP＿Nsで示される個数存在する。各CI＿SRPはセル情報CIの先頭アドレスCI＿SAから成る。
M＿CIは、セル一般情報M＿C＿GIと０個以上のセルエントリーポイント情報M＿C＿EPIから成る。M＿C＿GI内には、セルのタイプC＿TY、セルエントリーポイント数C＿EPI、等が定義される。M＿C＿EPI内には、エントリーポイントのタイプEP＿TY（AとB、AはPRM＿TXTIなし、BはPRM＿TXTIあり）、エントリーポイントの再生時刻EP＿PTM、及びエントリーポイントに関するプライマリテキスト情報（PRM＿TXTI）が定義される。
ここで、エントリーポイントとはセル内の任意の時刻を指定し、プログラムやセルの任意の中間地点へのアクセスを可能にする構造である。図１１および図１２中に、セル内に指定されるエントリーポイントの例（EPと示される矢印）を示す。
M＿CIは、セル一般情報M＿C＿GIと０個以上のセルエントリーポイント情報M＿C＿EPIから成る。M＿C＿GI内には、セルのタイプC＿TY、セルエントリーポイント数C＿EPI、等が定義される。M＿C＿EPI内には、エントリーポイントのタイプEP＿TY（AとB、AはPRM＿TXTIなし、BはPRM＿TXTIあり）、エントリーポイントの再生時刻EP＿PTM、及びエントリーポイントに関するプライマリテキスト情報（PRM＿TXTI）が定義される。
ここで、エントリーポイントとはセル内の任意の時刻を指定し、プログラムやセルの任意の中間地点へのアクセスを可能にする構造である。図１１および図１２中に、セル内に指定されるエントリーポイントの例（EPと示される矢印）を示す。
なお、静止画のセルを再生する場合には、M＿CIの代わりにS＿CIが用いられる。（S＿CIの内容はここでは省略する。） 従って、オリジナルPGC上に動画と静止画を記録する場合はセル毎に混在することになる。ユーザー定義PGC上も、セル毎に動画用セルと静止画用セルを混在させることが出来る。
特開平５−２９２４４５
特開２００４−７２１４８
特開２０００−２３０９４
特開平１１−７６１５９
解決しようとする問題点は、動画静止画データ同時記録装置において、前記静止画の前記静止画信号に対応した前記動画像のピクチャーの位置情報だけでは、効果的に再生を演出できないという問題があった。とくに動画再生中に、この画像の拡大画像を解像度を落とさずに再生したいとか、この画像の外側の風景はどうなっていたかズームアウトして見たいというような、画像の拡大または縮小に関する効果的な再生演出が望まれていた。
そこで、上記課題を解決するために本発明は、以下の装置、方法を提供するものである。
（１）撮像レンズから入射された光線を分離する光路分離手段と、
前記光路分離手段で分離された一方の光を受光し、第１の解像度のピクチャーで構成される動画像を出力する第１の受光手段と、
前記光路分離手段で分離された他方の光を受光し、前記第１の解像度よりも高い第２の解像度の静止画像を出力する第２の受光手段と、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録手段と、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録手段と、
を有することを特徴とする情報記録装置。
（２）第１の解像度のピクチャーで構成される動画像と、前記第１の解像度よりも高い第２の解像度の静止画像と、前記静止画像と前記静止画像が記録媒体に記録されたときと同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報とが記録されているとともに、前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報が記録された記録媒体から、
前記動画像を再生するとともに、前記動画像を再生中に、外部から一時停止指示を受けた場合、前記動画像のピクチャーのうち前記一時停止指示を受けた時点の前記動画像の再生位置の直近に位置する、前記リンク情報によって静止画像が対応付けられたピクチャーで再生を停止し、この停止した位置のピクチャーに対応する前記静止画像を前記リンク情報に基づいて再生する再生手段と、
前記ズーム可能情報に基づいて、前記停止した位置のピクチャーに対してズームインが可能か、ズームアウトが可能かを判断し、ズームイン、ズームアウトの少なくともどちらかが可能と判断した場合は、前記相対位置情報に基づいて、ズーム可能範囲を示す情報をユーザーインターフェース画面として表示する表示手段と、
前記ユーザーインターフェース画面に基づいて、外部からズームイン又はズームアウト指示が入力された場合、前記ズーム情報に基づいて、前記再生された前記静止画像を拡大または縮小するズーム手段と、
を有することを特徴とする情報再生装置。
（３）撮像レンズから入射された光線を分離する光路分離ステップと、
前記光路分離ステップで分離された一方の光を受光し、第１の解像度のピクチャーで構成される動画像を出力する第１の受光ステップと、
前記光路分離ステップで分離された他方の光を受光し、前記第１の解像度よりも高い第２の解像度の静止画像を出力する第２の受光ステップと、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録ステップと、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録ステップと、
を含むことを特徴とする情報記録方法。
（４）第１の解像度のピクチャーで構成される動画像と、前記第１の解像度よりも高い第２の解像度の静止画像と、前記静止画像と前記静止画像が記録媒体に記録されたときと同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報とが記録されているとともに、前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報が記録された記録媒体から、
前記動画像を再生するとともに、前記動画像を再生中に、外部から一時停止指示を受けた場合、前記動画像のピクチャーのうち前記一時停止指示を受けた時点の前記動画像の再生位置の直近に位置する、前記リンク情報によって静止画像が対応付けられたピクチャーで再生を停止し、この停止した位置のピクチャーに対応する前記静止画像を前記リンク情報に基づいて再生する再生ステップと、
前記ズーム可能情報に基づいて、前記停止した位置のピクチャーに対してズームインが可能か、ズームアウトが可能かを判断し、ズームイン、ズームアウトの少なくともどちらかが可能と判断した場合は、前記相対位置情報に基づいて、ズーム可能範囲を示す情報をユーザーインターフェース画面として表示する表示ステップと、
前記ユーザーインターフェース画面に基づいて、外部からズームイン又はズームアウト指示が入力された場合、前記ズーム情報に基づいて、前記再生された前記静止画像を拡大または縮小するズームステップと、
を含むことを特徴とする情報再生方法。
（５）撮像レンズから入射された光線を受光し、第１の解像度のピクチャーで構成される動画像を出力すると同時に、前記第１の解像度よりも高い第２の解像度の静止画像を出力する受光手段と、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録手段と、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録手段と、
を有することを特徴とする情報記録装置。
（６）撮像レンズから入射された光線を受光し、第１の解像度のピクチャーで構成される動画像を出力すると同時に、前記第１の解像度よりも高い第２の解像度の静止画像を出力する受光ステップと、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録ステップと、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録ステップと、
を含むことを特徴とする情報記録方法。
（１）撮像レンズから入射された光線を分離する光路分離手段と、
前記光路分離手段で分離された一方の光を受光し、第１の解像度のピクチャーで構成される動画像を出力する第１の受光手段と、
前記光路分離手段で分離された他方の光を受光し、前記第１の解像度よりも高い第２の解像度の静止画像を出力する第２の受光手段と、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録手段と、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録手段と、
を有することを特徴とする情報記録装置。
（２）第１の解像度のピクチャーで構成される動画像と、前記第１の解像度よりも高い第２の解像度の静止画像と、前記静止画像と前記静止画像が記録媒体に記録されたときと同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報とが記録されているとともに、前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報が記録された記録媒体から、
前記動画像を再生するとともに、前記動画像を再生中に、外部から一時停止指示を受けた場合、前記動画像のピクチャーのうち前記一時停止指示を受けた時点の前記動画像の再生位置の直近に位置する、前記リンク情報によって静止画像が対応付けられたピクチャーで再生を停止し、この停止した位置のピクチャーに対応する前記静止画像を前記リンク情報に基づいて再生する再生手段と、
前記ズーム可能情報に基づいて、前記停止した位置のピクチャーに対してズームインが可能か、ズームアウトが可能かを判断し、ズームイン、ズームアウトの少なくともどちらかが可能と判断した場合は、前記相対位置情報に基づいて、ズーム可能範囲を示す情報をユーザーインターフェース画面として表示する表示手段と、
前記ユーザーインターフェース画面に基づいて、外部からズームイン又はズームアウト指示が入力された場合、前記ズーム情報に基づいて、前記再生された前記静止画像を拡大または縮小するズーム手段と、
を有することを特徴とする情報再生装置。
（３）撮像レンズから入射された光線を分離する光路分離ステップと、
前記光路分離ステップで分離された一方の光を受光し、第１の解像度のピクチャーで構成される動画像を出力する第１の受光ステップと、
前記光路分離ステップで分離された他方の光を受光し、前記第１の解像度よりも高い第２の解像度の静止画像を出力する第２の受光ステップと、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録ステップと、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録ステップと、
を含むことを特徴とする情報記録方法。
（４）第１の解像度のピクチャーで構成される動画像と、前記第１の解像度よりも高い第２の解像度の静止画像と、前記静止画像と前記静止画像が記録媒体に記録されたときと同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報とが記録されているとともに、前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報が記録された記録媒体から、
前記動画像を再生するとともに、前記動画像を再生中に、外部から一時停止指示を受けた場合、前記動画像のピクチャーのうち前記一時停止指示を受けた時点の前記動画像の再生位置の直近に位置する、前記リンク情報によって静止画像が対応付けられたピクチャーで再生を停止し、この停止した位置のピクチャーに対応する前記静止画像を前記リンク情報に基づいて再生する再生ステップと、
前記ズーム可能情報に基づいて、前記停止した位置のピクチャーに対してズームインが可能か、ズームアウトが可能かを判断し、ズームイン、ズームアウトの少なくともどちらかが可能と判断した場合は、前記相対位置情報に基づいて、ズーム可能範囲を示す情報をユーザーインターフェース画面として表示する表示ステップと、
前記ユーザーインターフェース画面に基づいて、外部からズームイン又はズームアウト指示が入力された場合、前記ズーム情報に基づいて、前記再生された前記静止画像を拡大または縮小するズームステップと、
を含むことを特徴とする情報再生方法。
（５）撮像レンズから入射された光線を受光し、第１の解像度のピクチャーで構成される動画像を出力すると同時に、前記第１の解像度よりも高い第２の解像度の静止画像を出力する受光手段と、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録手段と、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録手段と、
を有することを特徴とする情報記録装置。
（６）撮像レンズから入射された光線を受光し、第１の解像度のピクチャーで構成される動画像を出力すると同時に、前記第１の解像度よりも高い第２の解像度の静止画像を出力する受光ステップと、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録ステップと、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一のピクチャーが前記一の静止画像を用いることでズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録ステップと、
を含むことを特徴とする情報記録方法。
本発明は静止画の前記静止画信号に対応した前記動画像のピクチャーの位置情報を記録媒体に記録するとともに、静止画のズームインまたはズームアウトに関する情報を記録媒体に記録するようにしたので、動画再生中に、この画像の拡大画像を、解像度を落とさずに見たいとか、ここの画像の外側の風景はどうなっていたかズームアウトして見たいというような、画像の拡大または縮小に関する効果的な再生演出が可能となる。とくに、静止画の情報構造体の中に、ズームインまたはズームアウトが可能かどうかなどの判断を、静止画データの復号を行わなくても判断ができ、高速な処理が可能となる。また静止画の画像サイズ情報や、静止画像中にある動画像の画角における位置情報を記録するようにしたので、画像の拡大または縮小倍率の計算や、ユーザーに指定をしてもらう画角位置のカレントの位置などの表示をしたりすることができ、ユーザーフレンドリーな機能を実現できる。
以下、図面を参照しながら発明を実施するための最良の形態を説明する。
図１は本発明の実施例の好適なオーディオビデオ記録器のブロック図である。本実施例では動画をムービーで撮影中に、ユーザーからのタイミング情報により、動画録画を中断することなく、デジカメ静止画データを記録するものである。
図１は本発明の実施例の好適なオーディオビデオ記録器のブロック図である。本実施例では動画をムービーで撮影中に、ユーザーからのタイミング情報により、動画録画を中断することなく、デジカメ静止画データを記録するものである。
以下のこのブロック図を説明する。入力されたビデオ光はレンズ１０１を通して、光路分離器１０２に入力される。レンズ１０１と光路分離器１０２は、図５のようにレンズ群と、例えばプリズムを用いて２つの光路に分離される。プリズムでなくてもハーフミラーでも構わない。２つに分離された光は動画用受光素子１０４と、静止画用１０５に入光される。受光素子は例えばＣＣＤやＣＭＯＳなどである。動画用撮像素子の解像度よりも、静止画用撮像素子の解像度のほうを大きくするのが効果的な設定である。これらの素子からのデータはＡ／Ｄ変換されて、デジタルデータとしてそれぞれ静止画符号化器１１４、動画符号化器１１５に入力される。一方、オーディオ入力器１０３にからのオーディオデータはＡ／Ｄ変換器１０８にてデジタルデータに変換され、音声符号化器１１３に入力される。音声符号化器１１３は例えばドルビーＡＣ３、静止画符号化器１１４は例えばＪＰＥＧ、動画符号化器１１５は例えばＭＰＥＧ２での圧縮を行うものである。それぞれの符号化された符号化データは、多重化器１１７にて、１つのデータに多重化される。多重化されたデータはディスクフォーマット器１１９にて、後述するディスクフォーマットにてフォーマット化され、記録媒体書き込み器１１８へ入力される。
一方、ユーザーインターフェース１０９においては、動画をムービーで記録している途中において、ユーザーから、ボタンなどを押す動作に連携して、押したときのタイミング情報を入力してもらう。ＣＰＵ１１０を介して、静止画撮影タイミング信号発生器１１１において、静止画録画開始信号と、同時に録画されているリンクされているビデオのプログラムナンバーと、リンクされているビデオのピクチャータイムコードを、静止画符号化器１１４に送信する。
ビデオのプログラムナンバーは表３のLinked＿video＿programの領域に、表１のV＿PR＿IFOの２番目のPR＿numberの値である。ビデオのピクチャータイムコードは同時に録画されているリンクされているビデオの所謂タイムコードであり、ＭＰＥＧなどでもＧＯＰ単位にＧＯＰヘッダーとして時分秒フレーム数で記述されているタイムコードと同じもので良い。また、この情報は動画データのなかのピクチャーを特定できる情報（動画像のピクチャーの位置情報）であればタイムコードでなくても、先頭からのフレーム数であったり、先頭からのアドレス（バイト数）であっても良い。
また、同時に静止画録画開始信号と、静止画の識別情報（後述するS＿PRN）を、動画符号化器１１５にも送信し、動画符号化データの１ピクチャー毎に記録できるＭＰＥＧのユーザーデータ領域に、そのタイミングに同期して符号化される静止画の識別情報（後述するS＿PRN）を記述する。これは表３の静止画の情報のうち、静止画１枚ずつに記述される静止画プログラムのナンバーである。この情報があると、動画再生中に、一次停止した動画フレームと同じタイミングで撮影した静止画像を特定できる。動画中へのデータの書き込みは図２のようにＭＰＥＧのピクチャーデータのなかのユーザーデータの領域に記述する。ユーザーデータは表３のＭＰＥＧ２のビデオレーヤのシンタックスにおけるUser＿data()を使用する。user＿data（）は、user＿start＿codeという一意い決定できるバイトアラインされたスタートコードから始まり、次に0x000001の３バイトを受信するまで、user＿dataを続けることができる。ここに静止画の識別情報（後述するS＿PRN）を記述する。その際、他のアプリケーションでuser＿data()を使用している可能性もあるので、user＿data()のuser＿start＿codeのあとに、本方式のデータであることを示す、４バイト程度のユニークコード0x22220204を記述する。これにより他の用途で使用するユーザーデータとの混同は防げる。
さらにＣＰＵ１１０は管理データメモリー１１２に、静止画の識別情報（後述するS＿PRN）の書き込みなどの制御信号を送信する。また、静止画撮影タイミング信号発生器１１１からは、その制御信号に従って管理データメモリー１１２に静止画の識別情報（後述するS＿PRN）を書き込む。一方、Ｕ／Ｉを介して、ＣＰＵからは、静止画ズーム情報発生器１１６に、静止画ズーム情報が伝送される。
静止画ズーム情報とは、ズーム処理に必要な情報である。例えば、動画の一部の画像と同じタイミングで撮像した静止画像を、動画コンテンツの画角からみて、ズームインできるのか、ズームアウトできるのか、どちらも可能か、どちらも不可能かを表す情報、ズーム処理に必要な静止画のサイズ情報や、静止画面から見た動画像コンテンツの水平位置や垂直位置を相対的に示す位置情報などである。具体的には表３のS＿ATR()の情報構造の中の、Zoom＿info（２ビットで、００であればズームインもズームアウトも不可能、０１であればズームインが可能、１０のときはズームアウトが可能、１１の時にはズームインもズームアウトも両方可能であることを示す。）Horizontal＿video＿resolution（静止画像の水平画素数）、Vertical＿video＿resolution（静止画像の垂直画素数、Horizontal＿position、Vertical＿position（静止画面から見た動画像の水平位置及び垂直位置で、図４の（３）のようにズームアウトした静止画面からみた動画像画面の左上を基準としてどれだけシフトした位置にあるかを画素数で示したもの）である。
静止画ズーム情報発生器１１６では、静止画に対応した前記動画像のピクチャーの位置情報を管理データメモリー１１２に記録するとともに、前記ズームに関する情報を記録する。管理データ１１２に記録されているデータはディスクフォーマット器１１９からの多重化されたオーディオビデオ信号データとともに、ＣＰＵ１１０からの制御信号に従って、記録媒体１２０に記録される。
なお、この記録装置は図１５のように、光路分離器を用いて２つの光路に分離されなくても構わない。ＣＣＤやＣＭＯＳなどで十分に解像度の高い読み出しを行える仕様の素子であって、スイッチ１０５のように、静止画と動画を切り替える手段、並びに、動画用に解像度を低くする解像度変換器１０７と等価な回路（素子の読み出しを、工夫して複数の画素を加算して読み出すなど）があれば、本発明を１つの素子で実現できる。
図３は本発明の実施例の好適なオーディオビデオ再生器のブロック図である。
まず記録媒体２０１からＣＰＵ２０４からの制御信号により記録媒体読み出し器２０２によって、オーディオビデオデータと、管理データが読み込まれる。管理データは管理データメモリー２０６に記録される。オーディオビデオデータはディスクフォーマットデコーダー器２０５に入力される。ディスクフォーマットデコーダー器２０５では、後述するディスクフォーマットをフォーマットデコード化して多重化分離器２０７に入力される。多重化分離器２０７では、各要素のデータが多重化されている状態から、各要素データへと分離し、音声データは音声復号器２１０、静止画データは静止画復号器２１１、動画データは動画復号器２１２へ入力される。静止画と動画は復号されるとフレームバッファ２１３にバッファされる。一方、ユーザーインターフェース（Ｕ／Ｉ）２０３によって動画再生中に、ピクチャー毎に規則されている静止画の記録されている時刻にて一時停止をして、その静止画のズームイン（拡大）やズームアウト（縮小）を行うトリガー信号が入力されると、その信号はＣＰＵ２０４に伝送される。ＣＰＵ２０４ではそのトリガー信号を受けて、再生制御器２０９へ制御信号を伝送する。再生制御器２０９では記録媒体読み出し器に読み出しを一時停止する信号を伝送すると同時に、再生して動画の符号化データのピクチャー毎に記録されているユーザーデータを観測し、そこに図２に示した識別コード０ｘ２２２２０２０４のあとS＿PRNという静止画のプログラムナンバーを検出し、ズームインするために一時停止する場合には、そのプログラムナンバーに対応するS＿PR＿IFOのなかのS＿ATRのZoom＿infoの２ビットの信号が０１（ズームイン可能）か１１（ズームインもズームアウトも可能）の信号であるピクチャーのところで一時停止する。この信号は動画のピクチャーを時間方向に並べた場合、対応した静止画が記録されているのが仮に１秒に１枚、即ち３０フレームに１枚であれば、最大３０枚観測すれば１枚は見つかるはずで、その場合には最大１秒程度一時停止が遅れる。普通の一時停止は動画上のどこのフレームでも一時停止可能である。一時停止したら、再生制御器は記録媒体読み出し器に、その動画の対応する静止画データ(S＿PRNのプログラムナンバーのついている静止画データ)をアクセスして、ディスクフォーマットデコーダー器２０５と多重化分離器２０７を経由して、静止画復号器２１１にて静止画を復号し、フレームバッファに、動画の一時停止しているデータと交換して、静止画データをバッファリングする。同時に画像拡大縮小器に拡大するトリガー信号を送信する。拡大は図４の（１）のように、動画撮影中にシャッターボタンを押して静止画を記録した画像が真ん中の画像だとすると、その動画一時停止した画像にどこの部分を拡大したいかを示すウインドウを、ＣＰＵを経由して画像拡大縮小器２０８にＧＵＩにてユーザーとインターフェースをとって決定し、そのウインドウに設定された画像を図４の（１）のように拡大する。この場合(a)の画像は通常のＮＴＳＣ画像とすると、７２０ｘ４８０画素の解像度の画像であり、(b)はＣＣＤの能力によるが１６００ｘ１２００画素の解像度をもつ。従ってズームした場合でも(b)のように顔だけアップしても、動画の表示解像度を基準に考えれば、静止画の解像度は劣化しない。１６００ｘ１２００の画素のうち７２０ｘ４８０を切り出すような画角であれば解像度は劣化しない。それ以上小さいウインドウを７２０ｘ４８０まで拡大するということになれば、従来の技術にあるフィルターによるオーバーサンプル（フィルター処理で補間する）をおこなって表示することも可能で、これと組み合わせることで、連続的な拡大機能を持たせることができる。縮小は図４の（２）のように、動画撮影中にシャッターボタンを押して静止画を記録した画像が真ん中の画像だとすると、その動画一時停止した画像から外側にズームアウトする。この場合ブロック図５の特殊レンズ５０５を広角レンズとして、静止画用のＣＣＤには広角の画像が入るようにし、動画ＣＣＤにはその中央の画像を有効画像として動画用の画角（７２０ｘ４８０）にして記録することが望ましい。この場合(c)の画像は通常のＮＴＳＣ画像とすると、７２０ｘ４８０画素の解像度の画像であり、(d)はＣＣＤの能力によるが１６００ｘ１２００画素の解像度をもつ。従ってズームアウトした場合、(d)のように動画像の画角(c)には写っていなかった、被写体の周囲の風景がズームアウトすることで(d)のように蘇ることになる。また、ズームアウトも完全に全てズームアウトするだけでなく、途中のズームアウト率で表示することも可能で、これと組み合わせることで、連続的な縮小（ズームアウト）機能を持たせることができる。静止画の水平方向の画素数と垂直方向の画素数は、静止画像全体を７２０ｘ４８０画素とするときに画素数比率を計算して、その割合で減少させる帯域を求めローパスフィルターを設定する。あるいはオーバーサンプルして増やす画素の比率を求め、補間フィルターを設定する。このへんの技術は既存の、画像を拡大縮小する技術で実現できる。Horizontal＿position、Vertical＿position（静止画面から見た動画像の水平位置及び垂直位置で、図４の（３）のようにズームアウトした静止画面からみた動画像画面の左上を基準としてどれだけシフトした位置にあるかを画素数で示したもの）は、例えばズームアウトする場合の、もとの画像はどのポジションにあるのかをユーザーにＧＵＩで示すことができるので有効である。また、動画から静止画のバッファの切り替えにより、ユーザーに表示させる画像が大きく変化しないようすることもできる。即ち。(c)の画像と、(d)この位置の画像をオーバーサンプルして、(c)に似た画像を静止画から作成し、フレームバッファを動画から静止画へ切り替えておくことで、その後のズームアウトの処理を静止画ベースで連続的に行えるメリットがある。
まず記録媒体２０１からＣＰＵ２０４からの制御信号により記録媒体読み出し器２０２によって、オーディオビデオデータと、管理データが読み込まれる。管理データは管理データメモリー２０６に記録される。オーディオビデオデータはディスクフォーマットデコーダー器２０５に入力される。ディスクフォーマットデコーダー器２０５では、後述するディスクフォーマットをフォーマットデコード化して多重化分離器２０７に入力される。多重化分離器２０７では、各要素のデータが多重化されている状態から、各要素データへと分離し、音声データは音声復号器２１０、静止画データは静止画復号器２１１、動画データは動画復号器２１２へ入力される。静止画と動画は復号されるとフレームバッファ２１３にバッファされる。一方、ユーザーインターフェース（Ｕ／Ｉ）２０３によって動画再生中に、ピクチャー毎に規則されている静止画の記録されている時刻にて一時停止をして、その静止画のズームイン（拡大）やズームアウト（縮小）を行うトリガー信号が入力されると、その信号はＣＰＵ２０４に伝送される。ＣＰＵ２０４ではそのトリガー信号を受けて、再生制御器２０９へ制御信号を伝送する。再生制御器２０９では記録媒体読み出し器に読み出しを一時停止する信号を伝送すると同時に、再生して動画の符号化データのピクチャー毎に記録されているユーザーデータを観測し、そこに図２に示した識別コード０ｘ２２２２０２０４のあとS＿PRNという静止画のプログラムナンバーを検出し、ズームインするために一時停止する場合には、そのプログラムナンバーに対応するS＿PR＿IFOのなかのS＿ATRのZoom＿infoの２ビットの信号が０１（ズームイン可能）か１１（ズームインもズームアウトも可能）の信号であるピクチャーのところで一時停止する。この信号は動画のピクチャーを時間方向に並べた場合、対応した静止画が記録されているのが仮に１秒に１枚、即ち３０フレームに１枚であれば、最大３０枚観測すれば１枚は見つかるはずで、その場合には最大１秒程度一時停止が遅れる。普通の一時停止は動画上のどこのフレームでも一時停止可能である。一時停止したら、再生制御器は記録媒体読み出し器に、その動画の対応する静止画データ(S＿PRNのプログラムナンバーのついている静止画データ)をアクセスして、ディスクフォーマットデコーダー器２０５と多重化分離器２０７を経由して、静止画復号器２１１にて静止画を復号し、フレームバッファに、動画の一時停止しているデータと交換して、静止画データをバッファリングする。同時に画像拡大縮小器に拡大するトリガー信号を送信する。拡大は図４の（１）のように、動画撮影中にシャッターボタンを押して静止画を記録した画像が真ん中の画像だとすると、その動画一時停止した画像にどこの部分を拡大したいかを示すウインドウを、ＣＰＵを経由して画像拡大縮小器２０８にＧＵＩにてユーザーとインターフェースをとって決定し、そのウインドウに設定された画像を図４の（１）のように拡大する。この場合(a)の画像は通常のＮＴＳＣ画像とすると、７２０ｘ４８０画素の解像度の画像であり、(b)はＣＣＤの能力によるが１６００ｘ１２００画素の解像度をもつ。従ってズームした場合でも(b)のように顔だけアップしても、動画の表示解像度を基準に考えれば、静止画の解像度は劣化しない。１６００ｘ１２００の画素のうち７２０ｘ４８０を切り出すような画角であれば解像度は劣化しない。それ以上小さいウインドウを７２０ｘ４８０まで拡大するということになれば、従来の技術にあるフィルターによるオーバーサンプル（フィルター処理で補間する）をおこなって表示することも可能で、これと組み合わせることで、連続的な拡大機能を持たせることができる。縮小は図４の（２）のように、動画撮影中にシャッターボタンを押して静止画を記録した画像が真ん中の画像だとすると、その動画一時停止した画像から外側にズームアウトする。この場合ブロック図５の特殊レンズ５０５を広角レンズとして、静止画用のＣＣＤには広角の画像が入るようにし、動画ＣＣＤにはその中央の画像を有効画像として動画用の画角（７２０ｘ４８０）にして記録することが望ましい。この場合(c)の画像は通常のＮＴＳＣ画像とすると、７２０ｘ４８０画素の解像度の画像であり、(d)はＣＣＤの能力によるが１６００ｘ１２００画素の解像度をもつ。従ってズームアウトした場合、(d)のように動画像の画角(c)には写っていなかった、被写体の周囲の風景がズームアウトすることで(d)のように蘇ることになる。また、ズームアウトも完全に全てズームアウトするだけでなく、途中のズームアウト率で表示することも可能で、これと組み合わせることで、連続的な縮小（ズームアウト）機能を持たせることができる。静止画の水平方向の画素数と垂直方向の画素数は、静止画像全体を７２０ｘ４８０画素とするときに画素数比率を計算して、その割合で減少させる帯域を求めローパスフィルターを設定する。あるいはオーバーサンプルして増やす画素の比率を求め、補間フィルターを設定する。このへんの技術は既存の、画像を拡大縮小する技術で実現できる。Horizontal＿position、Vertical＿position（静止画面から見た動画像の水平位置及び垂直位置で、図４の（３）のようにズームアウトした静止画面からみた動画像画面の左上を基準としてどれだけシフトした位置にあるかを画素数で示したもの）は、例えばズームアウトする場合の、もとの画像はどのポジションにあるのかをユーザーにＧＵＩで示すことができるので有効である。また、動画から静止画のバッファの切り替えにより、ユーザーに表示させる画像が大きく変化しないようすることもできる。即ち。(c)の画像と、(d)この位置の画像をオーバーサンプルして、(c)に似た画像を静止画から作成し、フレームバッファを動画から静止画へ切り替えておくことで、その後のズームアウトの処理を静止画ベースで連続的に行えるメリットがある。
フレームバッファ２１３は前記の説明のように、動画像あるいは、画像拡大縮小期２０８からの静止画像を拡大縮小した画像を受信して、バッファすると同時に、再生制御器２０９の信号にてバッファを動画データと静止画データを、適切に切り替えて画像出力器２１５に伝送する。一方、音声復号器２１０では音声データをスピーカなどで出力する。
次にディスクフォーマット化器１１９でフォーマット化、及び、ディスクフォーマットデコーダー器２０５でフォーマットデコードされるデータ構造について説明する。
本発明の実施形態に関わるディレクトリ、ファイル構造の例を図１６に示す。ディレクトリ名やファイル名は本発明の実施形態を説明する目的で使われており、これ以外の名称を否定するものではない。ルートディレクトリ（図示しない）の下にJVC＿HDVD＿SYSTEMディレクトリがあり、その下に、本発明に関わる全ての管理データ及びオーディオ、ビデオ、静止画データが保存される。
本発明の実施形態に関わるディレクトリ、ファイル構造の例を図１６に示す。ディレクトリ名やファイル名は本発明の実施形態を説明する目的で使われており、これ以外の名称を否定するものではない。ルートディレクトリ（図示しない）の下にJVC＿HDVD＿SYSTEMディレクトリがあり、その下に、本発明に関わる全ての管理データ及びオーディオ、ビデオ、静止画データが保存される。
TMG.ifo（Total Manager Information）は、オリジナル管理データ（以下、プログラムセットとも呼ぶ）及びユーザー定義管理データ（以下、プレイリストとも呼ぶ）を記録する為のファイルである。構造を図１７に示す。詳細は後述する。
V＿PR＿SETは、ビデオのプログラムをビデオオブジェクトとして記録する為のディレクトリであり、その中にビデオの各プログラムがV＿PRn.dat （ここで、nは1から開始されるプログラム番号）として記録される。プログラムにはビデオオブジェクトが、MPEG-2システム規格のプログラムストリームまたは、トランスポートストリームとして記録される。
A＿PR＿SETは、オーディオのプログラムをオーディオオブジェクトとして記録する為のディレクトリであり、その中にオーディオの各プログラムがA＿PRn.dat （ここで、nは1から開始されるプログラム番号）として記録される。プログラムにはオーディオオブジェクトが、MPEG-2システム規格のプログラムストリームまたは、トランスポートストリームとして記録される。
A＿PR＿SETは、オーディオのプログラムをオーディオオブジェクトとして記録する為のディレクトリであり、その中にオーディオの各プログラムがA＿PRn.dat （ここで、nは1から開始されるプログラム番号）として記録される。プログラムにはオーディオオブジェクトが、MPEG-2システム規格のプログラムストリームまたは、トランスポートストリームとして記録される。
ビデオまたはオーディオオブジェクトをプログラムストリームとして記録する場合には図９のように、ＭＰＥＧ多重化規格のフォーマットに従い、要素データ毎にパック化を行う。オブジェクトはパックの集合として記録され、各パックにはパックヘッダがあり、その後にパケットが記録される。パケット内にはパケットヘッダと、ビデオ又はオーディオデータが少なくとも記録され、必要に応じてプライベートヘッダがパケットヘッダの直後に記録される場合がある。
S＿PR＿SETは、静止画のプログラムを静止画オブジェクトとして記録する為のディレクトリであり、その中に静止画の各プログラムがS＿PRn.jpg （ここで、nは1から開始されるプログラム番号）として記録される。ここではJPEG形式の静止画記録を想定している。各JPEGファイルが一つの静止画オブジェクトに対応する。
なお、図１６ではビデオ、オーディオ、静止画のプログラムに関するファイル群をそれぞれ異なるディレクトリ下に記録する例を示したが、３種全てのファイル群を同一ディレクトリ、例えばAVS＿PR＿SETなど、の下に記録するようにしても、本発明の趣旨と相違しない。さらには、ビデオのプログラムをそれぞれ一つのファイルV＿PRn.datとして記録する例、及びオーディオのプログラムをそれぞれ一つのファイルA＿PRn.datとして記録する例を示したが、全てのビデオプログラムを同一のファイル、例えばV＿PR.dat内に連続して記録し、V＿PR.dat内のどの部分がどのプログラムデータに相当するかを別途の情報として保持するようにしても良い。A＿PR.datについても同様である。
次に、TMG.ifoのデータ構造例を図１７に示す。TOTAL＿MAN＿IFO（Total Manager Information）は、GENERAL＿IFO（General Information）、CNTNT＿IFO（Content Information）及びSTATUS＿IFO（Status Information）からなる。
GENERAL＿IFOは、System IDやVersion number、 及びCNTNT＿IFOとSTATUS＿IFOの先頭アドレスなど、TOTAL＿MAN＿IFOの一般情報を含み得る。詳細を表６に記述する。STATUS＿IFOは、最後に再生したプログラムの種類や番号など、ステータスに関する情報を含み得る。
CNTNT＿IFOは、ビデオプログラム情報テーブルV＿PR＿IFOT（Video Program Information Table）、オーディオプログラム情報テーブルA＿PR＿IFOT（Audio Program Information Table）、静止画プログラム情報テーブルS＿PR＿IFOT（Still picture Program Information Table）、及びユーザー定義管理データに相当するプレイリスト情報テーブルPL＿IFOT（Play List Information Table）から成る。V＿PR＿IFOT、A＿PR＿IFOT及びS＿PR＿IFOTの３つが（従来例の）オリジナル管理データに相当する。
CNTNT＿IFOは、ビデオプログラム情報テーブルV＿PR＿IFOT（Video Program Information Table）、オーディオプログラム情報テーブルA＿PR＿IFOT（Audio Program Information Table）、静止画プログラム情報テーブルS＿PR＿IFOT（Still picture Program Information Table）、及びユーザー定義管理データに相当するプレイリスト情報テーブルPL＿IFOT（Play List Information Table）から成る。V＿PR＿IFOT、A＿PR＿IFOT及びS＿PR＿IFOTの３つが（従来例の）オリジナル管理データに相当する。
更に、V＿PR＿IFOTは、各ビデオプログラムのビデオプログラム情報V＿PR＿IFO＿i（iは1からnまでの整数）を含む。
A＿PR＿IFOTは、各オーディオプログラムのオーディオプログラム情報A＿PR＿IFO＿j（jは1からmまでの整数）を含む。S＿PR＿IFOTは、各静止画プログラムの静止画プログラム情報S＿PR＿IFO＿k（kは1からqまでの整数）を含む。PL＿IFOTは、各プレイリストの情報PL＿IFO＿p（pは1からrまでの整数）を含む。なお、以下では上述のi、 j、 k、 pをそれぞれPR＿IFO番号と呼ぶことにする。
A＿PR＿IFOTは、各オーディオプログラムのオーディオプログラム情報A＿PR＿IFO＿j（jは1からmまでの整数）を含む。S＿PR＿IFOTは、各静止画プログラムの静止画プログラム情報S＿PR＿IFO＿k（kは1からqまでの整数）を含む。PL＿IFOTは、各プレイリストの情報PL＿IFO＿p（pは1からrまでの整数）を含む。なお、以下では上述のi、 j、 k、 pをそれぞれPR＿IFO番号と呼ぶことにする。
表１にV＿PR＿IFO＿iのデータフィールドと内容の例を示す。データフィールドの中で、PR number （V＿PRN）はこのビデオプログラムの番号を示し、V＿PR＿IFO番号と等しい。Video Group number (V＿GRN)は、このプログラムが属するビデオグループの番号を示す。V＿ATRには表１の下の表にあるようなシンタックスを記述する。ここには、ビデオの画像がどんな圧縮方式で記録されているのかを示す、Video＿compression＿modeや、ＰＡＬやＮＴＳＣのＴＶシステムを識別するTV＿system情報、アスペクト情報、それに水平、垂直の画素数、が記録される。その他のデータフィールドについてはここでは説明を省略する。なお、V＿PR＿IFOはビデオプログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を収める為のものであり、表１の例以外にも様々な情報構造をとり得ることに注意されたい。
表２にはA＿PR＿IFO＿jのデータフィールドと内容の例を示す。データフィールドの中で、PR number （A＿PRN）はこのオーディオプログラムの番号を示し、A＿PR＿IFO番号と等しい。Audio Group number (A＿GRN)は、このプログラムが属するオーディオグループの番号を示す。Track number (TKN)はオーディオグループ内のトラック番号を示す。その他のデータフィールドについてはここでは説明を省略する。なお、A＿PR＿IFOはオーディオプログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を収める為のものであり、表２の例以外にも様々な情報構造をとり得ることに注意されたい。
表３には、S＿PR＿IFO＿kのデータフィールドと内容の例を示す。データフィールドの中で、PR number （S＿PRN）はこの静止画プログラムの番号を示し、S＿PR＿IFO番号と等しい。Still picture Group number (S＿GRN)は、このプログラムが属する静止画グループの番号を示す。Linked＿video＿program＿numberには、この静止画とリンクされているビデオのPR＿numberを記述する。なお、リンクされていない場合には０を記述する。また、Linked＿video＿entry＿timeにはリンクされているビデオのピクチャーのタイムコードを記述する。また、entry＿offset＿timeにはリンクされているビデオピクチャーのタイムコードからentoryするオフセットタイムを記述する。この値はオフセットする時間幅で示す。また、正の値で、どれだけ前にentoryするかを示す。S＿ATRは表３の下の表のシンタックスに示したように、ビデオの画像がどんな圧縮方式で記録されているのかを示す、Video＿compression＿modeや、ＰＡＬやＮＴＳＣのＴＶシステムを識別するTV＿system情報、アスペクト情報、００であればズームインもズームアウトも不可能、０１であればズームインが可能、１０のときはズームアウトが可能、１１の時にはズームインもズームアウトも両方可能であることを示すZoom＿info情報、静止画像の水平画素数を示すHorizontal＿video＿resolution情報、静止画像の垂直画素数を示すVertical＿video＿resolution情報、静止画面から見た動画像の水平位置及び垂直位置で、図４の（３）のようにズームアウトした静止画面からみた動画像画面の左上を基準としてどれだけシフトした位置にあるかを画素数で示す情報であるHorizontal＿position、Vertical＿positionなどがある。その他のデータフィールドについてはここでは説明を省略する。なお、S＿PR＿IFOは静止画プログラムの再生に必要な属性情報、テキスト等の付随情報を収める為のものであり、表３の例以外にも様々な情報構造をとり得ることに注意されたい。
表４には、PL＿IFO＿pのデータフィールドと内容の例を示す。データフィールドの中で、PL numberはこのプレイリストの番号を示す。num＿of＿ud＿programsは、このプレイリストに含まれるユーザー定義プログラム数を示す。一つのユーザー定義プログラムUD＿PR（User Defined Program）内には、一つ以上のビデオプログラム、一つ以上のオーディオプログラムまたは一つ以上の静止画プログラムが収録される。または、一つ以上のオーディオプログラムと、それと同時に再生すべき一つ以上の静止画プログラムが収録される場合もある（後述）。UD＿PR＿modeは、再生すべきUD＿PRがビデオ、オーディオ、静止画のいずれのプログラムを含むかを示す。その他のデータフィールドについてはここでは説明を省略する。各プログラムの機能、プログラムとユーザー定義プログラム、プレイリストの関係などについては後述する。なお、PL＿IFOは各プログラムを関連付けて再生するのに必要な情報を収める為のものであり、表４の例以外にも様々な情報構造をとり得ることに注意されたい。
次に、本発明の記録方法について図６のフローチャートを用いて説明する。まずステップ６０１において記録のスタートをする。次にステップ６０２において動画のデータ録画を開始する。次にステップ６０３において動画録画中に静止画を記録するかを判断する。録画する（ＹＥＳ）という場合には、例えばユーザーから静止画記録を指示するボタンなどのユーザーインターフェースにて行う。ボタンはたとえば１回押すと動画記録がスタートし、同じボタンを２度目におすと静止画が１ピクチャー（フレームであってもフィールドであっても良い）を記録するなど、ユーザーが使いやすいようなボタン操作インターフェースを実装するのが好ましい。次にステップ６０４にて静止画データの録画開始をする。次にステップ６０５にて静止画撮像タイミング信号と予め設定してある静止画ズーム情報（後述する）を発生する。次にステップ６０６にて入力データの蓄積符号化を行う。動画データは一時メモリーして、ＭＰＥＧ２圧縮符号化を行う。静止画は１枚ごとにメモリーをしてＪＰＥＧ圧縮符号化を行う。またオーディオデータは動画とともに連続して、所定の単位時間メモリーしたあとドルビーＡＣ３やＭＰＥＧ音声符号化などの圧縮符号化を行う。次にステップ６０７において符号化されたデータを要素データ（ビデオやオーディオなどの要素）をパック化して、識別ヘッダーやタイムスタンプなどを付加して多重化を行う。次にステップ６０８において動画データのピクチャー毎のユーザーデータ領域に、静止画の識別信号を記録する。これは前述のように、そのタイミングに同期して符号化される静止画の識別情報（後述するS＿PRN）である。これは表３の静止画の情報のうち、静止画１枚ずつに記述される静止画プログラムのナンバーである。その次にステップ６０９において、多重化されたデータと前記ユーザーデータを、図１６のフォーマットにしたがってフォーマット化し、バッファリングする。バッファにある程度のデータ量が蓄積されたら、記録媒体に記録する。次にステップ６１０において記録が全部終了したかどうかを判定し、終了（ＹＥＳ）であればステップ６１１に進み、記録結果に基づいて管理データ（ＩＦＯ）を図１７のフォーマットにしたがってフォーマット化し、記録媒体に記録する。次にステップ６１２に進み終了する。またステップ６１１で終了でない（ＮＯ）であればステップ６０３へ戻る。
次に図７のフローチャートを用いて、本発明の記録された静止画のズーム情報を設定する方法を説明する。まずステップ７０１において記録のスタートをする。次にステップ７０２においてＵ／Ｉ設定画面を起動する。次にステップ７０３において静止画のズームに関する情報を設定する。次にステップ７０４において静止画領域内の動画像コンテンツの画角を示す位置情報を設定する。次にステップ７０５においてフォーマット化を行う。次にステップ７０６において管理データ（ＩＦＯ）を記録媒体に記録する。次にステップ７０７に進み終了する。
次に図８のフローチャートを用いて、本発明の再生方法について説明する。まずステップ８０１において再生のスタートをする。次にステップ８０２において記録媒体から管理データ（ＩＦＯ）を読み取り、メモリーに展開する。次にステップ８０３において、動画像の再生を行う。次にステップ８０４において静止画のズームのための一時停止をするかどうかを判定する。しない（ＮＯ）場合にはステップ８０３へ戻る。する（ＹＥＳ）の場合にはステップ８０５においてズームに関する情報を検出する。次にステップ８０６において前述したようにズーム可能なピクチャーで一時停止をする。次にステップ８０７において、一時停止した動画像のピクチャーユーザーデータのS＿PRNを読み出す。次にステップ８０８においてS＿PRNに対応する静止画を再生する。次にステップ８０９においてズームに関する情報の中のZoom＿Infoの値を判定する。Zoom＿Infoの値が０１の場合にはステップ８１０のステップに進み、ズームインのためのズームインＧＵＩの関数を起動してユーザーインターフェースに表示をする。このＧＵＩは図４の（１）の(a)のように動画の画角のどこのエリアを拡大するのか、あるいはどの位のズームをするのか（倍率）を、ユーザーに指定してもらうための機能を持つものであればどんなものでも良い。Zoom＿Infoが１０の場合にはステップ８１２に進み。ズームアウトのためのズームアウトＧＵＩの関数を起動してユーザーインターフェースに表示をする。このＧＵＩは図４の（２）の(d)のように動画の画角のどこのエリアを縮小（ズームアウト）したのか、あるいはどのくらい縮小するのかをユーザーに提示、あるいは指定してもらうための機能を持つものであればどんなものでも良い。Zoom＿Infoの値が１１の場合にはステップ８１１のステップに進み、ズームインとズームアウトが両方指定可能なＧＵＩの関数を起動してユーザーインターフェースに表示をする。次にズームインの処理に進んでいる場合にはステップ８１３に進み、再生した静止画像をユーザーから指定された拡大率にて画像拡大処理を行う。一方ズームアウトの処理に進んでいる場合にはステップ８１４に進み、再生した静止画像をユーザーから指定された縮小率にて画像縮小処理を行う。次にステップ８１５においては動画再生が終了かどうかを判定する。終了しない（ＮＯ）の場合にはステップ８０３に戻る。終了する場合（ＹＥＳ）にはステップ８１６に進み終了する。
なお、本実施例では、記録媒体を特定していないが、ランダムアクセスできる記録媒体、例えばハードディスクや光ディスクなどであればどんな記録媒体であっても良い。
また、記録媒体にデータを記録しなくても、通信、放送などあらゆる伝送媒体を経由してデータを送信することが可能で、その場合には、記録装置は伝送装置として使用することもできる。また再生装置は受信装置として使用することも可能である。
また、記録媒体にデータを記録しなくても、通信、放送などあらゆる伝送媒体を経由してデータを送信することが可能で、その場合には、記録装置は伝送装置として使用することもできる。また再生装置は受信装置として使用することも可能である。
また、本発明の信号データを記録した記録媒体は、図１６、図１７、表１、表２、表３、表４、表６に示したフォーマット構造が記録されていて、静止画のズームインまたはズームアウトに関する情報を記録媒体に記録するようにしたので、動画再生中に、この画像の拡大画像を、解像度を落とさずに見たいとか、この画像の外側の風景はどうなっていたかズームアウトして見たいというような、画像の拡大または縮小に関する効果的な再生演出が可能となる。とくに、静止画の情報構造体の中に、ズームインまたはズームアウトが可能かどうかの判断を、静止画データの復号を行わなくても判断ができ、高速な処理が可能となるという媒体特有の効果があり、静止画の画像サイズ情報や、静止画像中にある動画像の画角における位置情報を記録するようにしたので、画像の拡大倍率または縮小倍率の計算や、ユーザーに指定をしてもらう画角位置のカレントの位置などの表示をしたりすることができ、ユーザーフレンドリーな機能を実現できるシステムを好適に実現することができる。
また、記録媒体は、媒体という定義はデータを記録できる媒体という、狭義な媒体というものだけでなく、信号データを伝送するための電磁波、光などを含む。また、記録媒体に記録されている情報は、記録されていない状態での、電子ファイルなどのデータ自身を含むものとする。
１０１ レンズ
１０２ 光路分離機
１０３ オーディオ入力器
１０４ 受光素子（動画用）
１０５ 受光素子（静止画用）
１０６ Ａ／Ｄ変換器
１０７ Ａ／Ｄ変換器
１０８ Ａ／Ｄ変換器
１０９ Ｕ／Ｉ
１１０ ＣＰＵ
１１１ 静止画撮像タイミング信号発生器
１１２ 管理データメモリ
１１３ 音声符号化器
１１４ 動画符号化器
１１５ 動画局部複合器
１１６ 静止画ズーム情報発生器
１１７ 多重化器
１１８ 記録媒体書き込み器
１１９ ディスクフォーマット器
１２０ 記録媒体
１０２ 光路分離機
１０３ オーディオ入力器
１０４ 受光素子（動画用）
１０５ 受光素子（静止画用）
１０６ Ａ／Ｄ変換器
１０７ Ａ／Ｄ変換器
１０８ Ａ／Ｄ変換器
１０９ Ｕ／Ｉ
１１０ ＣＰＵ
１１１ 静止画撮像タイミング信号発生器
１１２ 管理データメモリ
１１３ 音声符号化器
１１４ 動画符号化器
１１５ 動画局部複合器
１１６ 静止画ズーム情報発生器
１１７ 多重化器
１１８ 記録媒体書き込み器
１１９ ディスクフォーマット器
１２０ 記録媒体
Claims (6)
- 撮像レンズから入射された光線を分離する光路分離手段と、
前記光路分離手段で分離された一方の光を受光し、第１の解像度のピクチャーで構成される動画像を出力する第１の受光手段と、
前記光路分離手段で分離された他方の光を受光し、前記第１の解像度よりも高い第２の解像度の静止画像を出力する第２の受光手段と、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録手段と、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録手段と、
を有することを特徴とする情報記録装置。 - 第１の解像度のピクチャーで構成される動画像と、前記第１の解像度よりも高い第２の解像度の静止画像と、前記静止画像と前記静止画像が記録媒体に記録されたときと同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報とが記録されているとともに、前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報が記録された記録媒体から、
前記動画像を再生するとともに、前記動画像を再生中に、外部から一時停止指示を受けた場合、前記動画像のピクチャーのうち前記一時停止指示を受けた時点の前記動画像の再生位置の直近に位置する、前記リンク情報によって静止画像が対応付けられたピクチャーで再生を停止し、この停止した位置のピクチャーに対応する前記静止画像を前記リンク情報に基づいて再生する再生手段と、
前記ズーム可能情報に基づいて、前記停止した位置のピクチャーに対してズームインが可能か、ズームアウトが可能かを判断し、ズームイン、ズームアウトの少なくともどちらかが可能と判断した場合は、前記相対位置情報に基づいて、ズーム可能範囲を示す情報をユーザーインターフェース画面として表示する表示手段と、
前記ユーザーインターフェース画面に基づいて、外部からズームイン又はズームアウト指示が入力された場合、前記ズーム情報に基づいて、前記再生された前記静止画像を拡大または縮小するズーム手段と、
を有することを特徴とする情報再生装置。 - 撮像レンズから入射された光線を分離する光路分離ステップと、
前記光路分離ステップで分離された一方の光を受光し、第１の解像度のピクチャーで構成される動画像を出力する第１の受光ステップと、
前記光路分離ステップで分離された他方の光を受光し、前記第１の解像度よりも高い第２の解像度の静止画像を出力する第２の受光ステップと、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録ステップと、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録ステップと、
を含むことを特徴とする情報記録方法。 - 第１の解像度のピクチャーで構成される動画像と、前記第１の解像度よりも高い第２の解像度の静止画像と、前記静止画像と前記静止画像が記録媒体に記録されたときと同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報とが記録されているとともに、前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報が記録された記録媒体から、
前記動画像を再生するとともに、前記動画像を再生中に、外部から一時停止指示を受けた場合、前記動画像のピクチャーのうち前記一時停止指示を受けた時点の前記動画像の再生位置の直近に位置する、前記リンク情報によって静止画像が対応付けられたピクチャーで再生を停止し、この停止した位置のピクチャーに対応する前記静止画像を前記リンク情報に基づいて再生する再生ステップと、
前記ズーム可能情報に基づいて、前記停止した位置のピクチャーに対してズームインが可能か、ズームアウトが可能かを判断し、ズームイン、ズームアウトの少なくともどちらかが可能と判断した場合は、前記相対位置情報に基づいて、ズーム可能範囲を示す情報をユーザーインターフェース画面として表示する表示ステップと、
前記ユーザーインターフェース画面に基づいて、外部からズームイン又はズームアウト指示が入力された場合、前記ズーム情報に基づいて、前記再生された前記静止画像を拡大または縮小するズームステップと、
を含むことを特徴とする情報再生方法。 - 撮像レンズから入射された光線を受光し、第１の解像度のピクチャーで構成される動画像を出力すると同時に、前記第１の解像度よりも高い第２の解像度の静止画像を出力する受光手段と、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録手段と、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録手段と、
を有することを特徴とする情報記録装置。 - 撮像レンズから入射された光線を受光し、第１の解像度のピクチャーで構成される動画像を出力すると同時に、前記第１の解像度よりも高い第２の解像度の静止画像を出力する受光ステップと、
前記動画像を記録媒体に記録するとともに、前記動画像を記録中に静止画記録指示を受けた場合、前記動画像に加えて前記静止画像も記録媒体に記録する信号記録ステップと、
前記静止画像と、前記静止画像と同時期に記録された前記動画像の前記ピクチャーとを対応付けたリンク情報を記録媒体に記録するとともに、
前記ピクチャーのうちの一のピクチャーの領域が、この一のピクチャーと前記リンク情報によって対応付けられた一の静止画像の領域内のどの領域に相対的に位置する関係となっているかを示す相対位置情報と、前記一の静止画像が前記一のピクチャーの画角からみてズームイン可能か、ズームアウト可能かを示すズーム可能情報とを含むズーム情報を記録媒体に記録する情報記録ステップと、
を含むことを特徴とする情報記録方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005007642A JP4573166B2 (ja) | 2005-01-14 | 2005-01-14 | 情報記録装置、情報再生装置、情報記録方法、及び情報再生方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005007642A JP4573166B2 (ja) | 2005-01-14 | 2005-01-14 | 情報記録装置、情報再生装置、情報記録方法、及び情報再生方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2006197334A JP2006197334A (ja) | 2006-07-27 |
| JP4573166B2 true JP4573166B2 (ja) | 2010-11-04 |
Family
ID=36803033
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005007642A Expired - Fee Related JP4573166B2 (ja) | 2005-01-14 | 2005-01-14 | 情報記録装置、情報再生装置、情報記録方法、及び情報再生方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4573166B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102224545B (zh) * | 2008-11-21 | 2016-02-10 | 皇家飞利浦电子股份有限公司 | 相同事件的视频和静态画面基于该视频的全局运动矢量的合并 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001111880A (ja) * | 1999-10-05 | 2001-04-20 | Olympus Optical Co Ltd | 電子カメラ装置 |
| JP2004072148A (ja) * | 2002-08-01 | 2004-03-04 | Matsushita Electric Ind Co Ltd | Ａｖデータ記録装置および方法 |
| JP2004172978A (ja) * | 2002-11-20 | 2004-06-17 | Fuji Photo Film Co Ltd | 撮像装置 |
| JP2005012674A (ja) * | 2003-06-20 | 2005-01-13 | Canon Inc | 画像表示方法及びそれを実行するプログラム並びに画像表示装置 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3516071B2 (ja) * | 1997-12-19 | 2004-04-05 | 松下電器産業株式会社 | 撮像装置 |
-
2005
- 2005-01-14 JP JP2005007642A patent/JP4573166B2/ja not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001111880A (ja) * | 1999-10-05 | 2001-04-20 | Olympus Optical Co Ltd | 電子カメラ装置 |
| JP2004072148A (ja) * | 2002-08-01 | 2004-03-04 | Matsushita Electric Ind Co Ltd | Ａｖデータ記録装置および方法 |
| JP2004172978A (ja) * | 2002-11-20 | 2004-06-17 | Fuji Photo Film Co Ltd | 撮像装置 |
| JP2005012674A (ja) * | 2003-06-20 | 2005-01-13 | Canon Inc | 画像表示方法及びそれを実行するプログラム並びに画像表示装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2006197334A (ja) | 2006-07-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3912536B2 (ja) | 記録方法、記録装置、記録媒体、撮像装置および撮像方法 | |
| JP4053668B2 (ja) | 情報記録装置及び情報記録方法 | |
| EP0982952A2 (en) | Moving picture recording/regenerating system | |
| KR101377263B1 (ko) | 데이터처리장치 및 데이터처리방법과 컴퓨터·프로그램 | |
| JP4661543B2 (ja) | 情報記録装置、情報再生装置、情報記録プログラムおよび情報再生プログラム | |
| US7650062B2 (en) | Information recording apparatus, information reproducing apparatus, and related computer programs | |
| JP2004015580A (ja) | 記録装置 | |
| JP4320738B2 (ja) | オーディオビデオ信号記録装置、オーディオビデオ信号記録方法 | |
| JP4573166B2 (ja) | 情報記録装置、情報再生装置、情報記録方法、及び情報再生方法 | |
| JP2005303336A (ja) | 映像信号記録装置および映像信号再生装置 | |
| JP3748234B2 (ja) | Ｍｐｅｇデータ記録方法 | |
| JP4419142B2 (ja) | オーディオビデオ信号記録装置、及びオーディオビデオ信号記録方法 | |
| JP4305392B2 (ja) | オーディオビデオ信号記録装置、オーディオビデオ信号記録方法 | |
| JP2003052040A (ja) | Ｍｐｅｇデータ再生装置 | |
| JP4399803B2 (ja) | 情報記録装置、情報再生装置、情報記録方法、及び情報再生方法 | |
| JP3196764B2 (ja) | 動画像記録再生方法 | |
| JP3748243B2 (ja) | Ｍｐｅｇデータ記録装置 | |
| JP2004289876A (ja) | 記録装置 | |
| JP3748245B2 (ja) | Ｍｐｅｇデータ記録装置 | |
| JP3748244B2 (ja) | Ｍｐｅｇデータ記録装置 | |
| JP3381724B2 (ja) | データ記録方法 | |
| JP3381728B2 (ja) | 記録媒体 | |
| JP2006115529A (ja) | 記録メディアとこれを用いる映像記録／再生装置 | |
| JP2008219921A (ja) | 記録装置、記録方法、撮像装置および撮像方法 | |
| JP2006254475A (ja) | 撮像装置および撮像方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070629 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090327 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090804 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090930 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100723 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100805 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 4573166 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130827 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130827 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130827 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |