JP4724551B2 - 動画像処理装置及び動画像処理方法 - Google Patents
動画像処理装置及び動画像処理方法 Download PDFInfo
- Publication number
- JP4724551B2 JP4724551B2 JP2005364046A JP2005364046A JP4724551B2 JP 4724551 B2 JP4724551 B2 JP 4724551B2 JP 2005364046 A JP2005364046 A JP 2005364046A JP 2005364046 A JP2005364046 A JP 2005364046A JP 4724551 B2 JP4724551 B2 JP 4724551B2
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- file
- thumbnail
- image file
- recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
また、本発明の動画像処理装置の他の特徴とするところは、映像データ及び音声データを多重化して記録するためのストリームデータ領域と、前記映像データ及び音声データの付随情報を含むヘッダ情報を記録するためのヘッダ領域とで構成される動画像ファイル形式で動画像ファイルを生成する動画像ファイル生成手段と、前記動画像ファイル生成手段により生成された動画像ファイルの中の代表画像をサムネイルデータとして記録したサムネイルファイルを生成するサムネイルファイル生成手段と、前記動画像ファイル生成手段によって生成された動画像ファイルと前記サムネイルファイル生成手段によって生成されたサムネイルファイルとを関連付けた後、別々のファイルとして記録する記録手段とを有し、前記記録手段は、ファイルの先頭に前記ストリームデータ領域を配置し、当該ストリームデータ領域の後に前記ヘッダ領域を配置する構成で前記動画像ファイルを記録し、さらに当該動画像ファイルの前記ヘッダ領域に記録される前記ヘッダ情報から一部の項目を削除して得られる圧縮されたヘッダ情報を、当該動画像ファイルに関連付けられた前記サムネイルファイルの中に埋め込んで記録することである。
(MP4ファイルの記録)
以下、本発明の実施形態を説明する。ここでは動画像処理装置として、撮像装置を例に挙げて説明する。また、使用するファイルフォーマットについては、従来技術と同様にMP4ファイルフォーマットとする。
本実施形態の撮像装置では、図8(a)のフォーマットで記録を行う。(a)のフォーマットを使用することで、非常にデータサイズの大きくなるMdat部分については撮影しながらファイルに記録する。また、比較的データサイズの小さなMoov領域については、撮影中は本体内のワークメモリ上に保持し、撮影終了時に前記Mdatで構成されるファイルにMoovを追記する。これにより、MP4ファイルを記録することができる。
図1において、符号101は撮像装置全体の制御を担う制御部であり、また後述するファイル生成機能を有する。符号102は焦点距離や絞りの状態を変更可能なレンズ、符号103は例えばCCD(Charge Coupled Device)のような撮像素子でレンズ102により結像した光を電気信号に変換する機能を有する。
図3に示すように、例えば、記録フレームのMdat先頭アドレスからのオフセットアドレス、フレームのデータサイズ、PTS(Presentation Time Stamp)はそれぞれ、「Chunk Offset」領域301、「Sample Size」領域302、「Time to Sample」領域303にそれぞれ格納される。またランダムアクセス時のインデックス情報となるキーフレーム番号は、「Sync Sample」領域304に格納される。
以上により記録されたMP4ファイルを、本実施形態の動画像処理装置(撮像装置)で再生する方法について説明する。
図5は、本実施形態において、サムネイル表示の一例を示す図である。
本装置が再生モードで起動されると、表示部112には、記録されているファイルの内容を示すサムネイル表示501が示される。符号502は、選択カーソルであり、ユーザは選択カーソル502を移動させて、所望のコンテンツを指定することによって再生を指示する。符号503はページ送りアイコンであり、サムネイル表示ページを移動する場合に使用される。符号504はページ表示であり、この場合、ページは全部で6ページあり、そのうちの1ページ目を表示していることを示している。
前述したように記録されたMP4ファイル306は、再生時に必要となるMoov情報がMdat領域の後ろにある。このため、本撮像装置からパーソナルコンピュータ(PC)へファイル転送する場合に、Mdat領域が完全に転送され、さらにMoov領域が転送されなければ、PCで再生を開始することができない。本実施形態では、撮像装置で記録したMP4ファイル306を転送しつつ、MP4ファイル306の再生を実現する方法について図6を用いて説明する。
前述したように、動画像ファイルをダウンロードする前にサムネイルファイル307は取得済みであるため、サムネイルファイル307中のMoovを必要に応じてMP4ワークメモリ203中に保持しておく(608)ことが可能となる。
(Moovデータ量の圧縮)
第1の実施形態では、MP4ファイル中のMoovとサムネイルファイル中のMoovは全く同じものであったが、Moovのデータサイズがあまりにも大きな場合は、サムネイルファイル中に記録することは好ましくない場合がある。本実施形態では、MP4ファイル中に記録するMoovのデータ量を圧縮した情報をサムネイルファイル中に記録する方法について、図7を参照しながら説明する。
「Time to Sample」領域303には前述した通り、フレーム毎のPTSが記録されている。したがってフレーム間隔が一定という条件のもとで記録した場合には、一番目のフレームのPTS701と、フレーム間隔情報702とがあれば、再生時にPTSを再現することが可能である。このような場合には、サムネイルファイル中のMoovからは「Time to Sample」領域を削除し、一番目のフレームのPTS701とフレーム間隔情報702のみを記録することで、データ量を圧縮することができる。
(1)と同様に、キーフレーム間隔が一定であれば、キーフレーム間隔情報703のみをサムネイルファイル307中に記録し、「Sync Sample」領域を削除することが可能である。またキーフレーム間隔情報703は、ランダムアクセス時に必要な情報であり、通常再生時には必要ではないため、ランダムアクセス機能を割り切ることで、「Sync Sample」領域を削除してもよい。また、完全には削除せずに、キーフレーム情報を間引きして、データ量を圧縮してもよい。この場合、一部のキーフレームに対してはランダムアクセスが可能となる。
ステップS901において、取得された再生情報を圧縮して圧縮再生情報を生成し、サムネイルファイル307の中に圧縮再生情報を記録する。
前述した本発明の実施形態における動画像処理装置を構成する各手段、並びに動画像処理方法の各工程は、コンピュータのRAMやROMなどに記憶されたプログラムが動作することによって実現できる。このプログラム及び前記プログラムを記録したコンピュータ読み取り可能な記録媒体は本発明に含まれる。
102 レンズ
103 撮像素子
104 信号処理部
105 動画像信号符号/復号化部
107 マイク
108 音声信号符号/復号化部
109 スピーカ
110 フラッシュメモリ
111 メモリ
112 表示部
113 カードスロット
114 メモリカード
115 データバス
201 MPEG4−Videoデータバッファ
202 MPEG4−Audioデータバッファ
203 MP4ワークメモリ
301 「Chunk Offset」領域
302 「Sample Size」領域
303 「Time to Sample」領域
304 「Sync Sample」領域
306 MP4ファイル
307 サムネイルファイル
401、403 ファイル名本体
402、404 拡張子
502 選択カーソル
503 ページ送りアイコン
504 ページ表示
601 ケーブル
602 撮像装置
603 PC
701 1フレーム目PTS
702 固定フレーム間隔情報
703 固定キーフレーム間隔情報
Claims (9)
- 映像データ及び音声データを多重化して記録するためのストリームデータ領域と、前記映像データ及び音声データの付随情報を含むヘッダ情報を記録するためのヘッダ領域とで構成される動画像ファイル形式で動画像ファイルを生成する動画像ファイル生成手段と、
前記動画像ファイル生成手段により生成された動画像ファイルの中の代表画像をサムネイルデータとして記録したサムネイルファイルを生成するサムネイルファイル生成手段と、
前記動画像ファイル生成手段によって生成された動画像ファイルと前記サムネイルファイル生成手段によって生成されたサムネイルファイルとを関連付けた後、別々のファイルとして記録する記録手段とを有し、
前記記録手段は、ファイルの先頭に前記ストリームデータ領域を配置し、当該ストリームデータ領域の後に前記ヘッダ領域を配置する構成で前記動画像ファイルを記録し、さらに当該動画像ファイルの前記ヘッダ領域に記録される前記ヘッダ情報と同じヘッダ情報を、当該動画像ファイルに関連付けられた前記サムネイルファイルの中に埋め込んで記録することを特徴とする動画像処理装置。 - 前記ヘッダ領域に記録されている前記ヘッダ情報を参照する前に、前記サムネイルファイルの中に記録されている前記ヘッダ情報を参照することによって前記動画像ファイルを再生可能とする再生手段を有することを特徴とする請求項1に記載の動画像処理装置。
- 前記サムネイルファイルはExif形式に従ったファイル形式であり、前記記録手段は、前記Exif形式のヘッダの独自情報記録領域に前記ヘッダ情報を埋め込むことを特徴とする請求項1または2に記載の動画像処理装置。
- 前記再生手段は、前記サムネイルファイルをも再生し、前記サムネイルファイルを再生するときに、再生されるサムネイルファイル中の前記ヘッダ情報の有無を示す情報をワークメモリに保持することを特徴とする請求項2に記載の動画像処理装置。
- 映像データ及び音声データを多重化して記録するためのストリームデータ領域と、前記映像データ及び音声データの付随情報を含むヘッダ情報を記録するためのヘッダ領域とで構成される動画像ファイル形式で動画像ファイルを生成する動画像ファイル生成手段と、
前記動画像ファイル生成手段により生成された動画像ファイルの中の代表画像をサムネイルデータとして記録したサムネイルファイルを生成するサムネイルファイル生成手段と、
前記動画像ファイル生成手段によって生成された動画像ファイルと前記サムネイルファイル生成手段によって生成されたサムネイルファイルとを関連付けた後、別々のファイルとして記録する記録手段とを有し、
前記記録手段は、ファイルの先頭に前記ストリームデータ領域を配置し、当該ストリームデータ領域の後に前記ヘッダ領域を配置する構成で前記動画像ファイルを記録し、さらに当該動画像ファイルの前記ヘッダ領域に記録される前記ヘッダ情報から一部の項目を削除して得られる圧縮されたヘッダ情報を、当該動画像ファイルに関連付けられた前記サムネイルファイルの中に埋め込んで記録することを特徴とする動画像処理装置。 - 前記ヘッダ領域に記録されている前記ヘッダ情報を参照する前に、前記サムネイルファイルの中に記録されている前記圧縮されたヘッダ情報を参照することによって前記動画像ファイルを再生可能とする再生手段を有し、
前記再生手段は、前記サムネイルファイルの中の前記圧縮されたヘッダ情報を参照して、前記動画像ファイルの再生を開始するとともに、前記動画像ファイルの再生と並行して前記ヘッダ領域の中に記録されている前記ヘッダ情報を読み込み、前記ヘッダ領域の中の前記ヘッダ情報の読み込みが終了すると、前記サムネイルファイルの中の前記圧縮されたヘッダ情報を参照する処理から前記ヘッダ領域の中の前記ヘッダ情報を参照する処理に切り替えて前記動画像ファイルの再生を継続することを特徴とする請求項5に記載の動画像処理装置。 - 映像データ及び音声データを多重化して記録するためのストリームデータ領域と、前記映像データ及び音声データの付随情報を含むヘッダ情報を記録するためのヘッダ領域とで構成される動画像ファイル形式で動画像ファイルを生成する動画像ファイル生成工程と、
前記動画像ファイル生成工程において生成された動画像ファイルの中の代表画像をサムネイルデータとして記録したサムネイルファイルを生成するサムネイルファイル生成工程と、
前記動画像ファイル生成工程において生成された動画像ファイルと前記サムネイルファイル生成工程において生成されたサムネイルファイルとを関連付けた後、別々のファイルとして記録する記録工程とを有し、
前記記録工程においては、ファイルの先頭に前記ストリームデータ領域を配置し、当該ストリームデータ領域の後に前記ヘッダ領域を配置する構成で前記動画像ファイルを記録し、さらに当該動画像ファイルの前記ヘッダ領域に記録される前記ヘッダ情報と同じヘッダ情報を、当該動画像ファイルに関連付けられた前記サムネイルファイルの中に埋め込んで記録することを特徴とする動画像処理方法。 - 映像データ及び音声データを多重化して記録するためのストリームデータ領域と、前記映像データ及び音声データの付随情報を含むヘッダ情報を記録するためのヘッダ領域とで構成される動画像ファイル形式で動画像ファイルを生成する動画像ファイル生成工程と、
前記動画像ファイル生成工程において生成された動画像ファイルの中の代表画像をサムネイルデータとして記録したサムネイルファイルを生成するサムネイルファイル生成工程と、
前記動画像ファイル生成工程において生成された動画像ファイルと前記サムネイルファイル生成工程において生成されたサムネイルファイルとを関連付けた後、別々のファイルとして記録する記録工程とをコンピュータに実行させ、
前記記録工程においては、ファイルの先頭に前記ストリームデータ領域を配置し、当該ストリームデータ領域の後に前記ヘッダ領域を配置する構成で前記動画像ファイルを記録し、さらに当該動画像ファイルの前記ヘッダ領域に記録される前記ヘッダ情報と同じヘッダ情報を、当該動画像ファイルに関連付けられた前記サムネイルファイルの中に埋め込んで記録することを特徴とするコンピュータプログラム。 - 請求項8に記載のコンピュータプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005364046A JP4724551B2 (ja) | 2005-12-16 | 2005-12-16 | 動画像処理装置及び動画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005364046A JP4724551B2 (ja) | 2005-12-16 | 2005-12-16 | 動画像処理装置及び動画像処理方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2007166553A JP2007166553A (ja) | 2007-06-28 |
JP2007166553A5 JP2007166553A5 (ja) | 2009-02-05 |
JP4724551B2 true JP4724551B2 (ja) | 2011-07-13 |
Family
ID=38248891
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005364046A Expired - Fee Related JP4724551B2 (ja) | 2005-12-16 | 2005-12-16 | 動画像処理装置及び動画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4724551B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100958176B1 (ko) * | 2008-11-26 | 2010-05-14 | 주식회사 코아로직 | 멀티미디어 데이터 처리장치, 그 처리장치를 포함하는 멀티미디어 시스템, 및 멀티미디어 데이터 레코딩 방법 |
JP2013051607A (ja) * | 2011-08-31 | 2013-03-14 | Canon Inc | データ処理装置、方法および制御プログラム |
JP5496293B2 (ja) * | 2012-09-26 | 2014-05-21 | キヤノン株式会社 | 情報送信装置、その制御方法及びプログラム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001337994A (ja) * | 2000-05-26 | 2001-12-07 | Ricoh Co Ltd | サムネイル表示システムと方法およびその処理プログラムを記録した記録媒体 |
JP2004096226A (ja) * | 2002-08-29 | 2004-03-25 | Canon Inc | 画像処理装置、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記憶媒体 |
JP2004128938A (ja) * | 2002-10-03 | 2004-04-22 | Matsushita Electric Ind Co Ltd | Avデータ記録再生装置および方法 |
JP2004201266A (ja) * | 2002-05-28 | 2004-07-15 | Matsushita Electric Ind Co Ltd | 画像データ再生装置 |
-
2005
- 2005-12-16 JP JP2005364046A patent/JP4724551B2/ja not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001337994A (ja) * | 2000-05-26 | 2001-12-07 | Ricoh Co Ltd | サムネイル表示システムと方法およびその処理プログラムを記録した記録媒体 |
JP2004201266A (ja) * | 2002-05-28 | 2004-07-15 | Matsushita Electric Ind Co Ltd | 画像データ再生装置 |
JP2004096226A (ja) * | 2002-08-29 | 2004-03-25 | Canon Inc | 画像処理装置、方法、コンピュータプログラム、及びコンピュータ読み取り可能な記憶媒体 |
JP2004128938A (ja) * | 2002-10-03 | 2004-04-22 | Matsushita Electric Ind Co Ltd | Avデータ記録再生装置および方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2007166553A (ja) | 2007-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20070201832A1 (en) | Recording apparatus, recording method, program for recording method, recording medium recording program for recording method, reproducing apparatus, reproduction method, program for reproduction method, and recording medium recording program for reproduction method | |
JP2008243367A (ja) | 同報通信データを記録するための方法、および、装置 | |
WO2004036906A1 (ja) | データ処理装置 | |
KR20040017773A (ko) | 기록 장치 및 방법, 기록 매체 및 프로그램 | |
EP1873784A1 (en) | Video reproducing apparatus and control method thereof | |
US7272080B2 (en) | Recording apparatus | |
JP4552802B2 (ja) | 記録装置、記録方法、記録方法のプログラム及び記録方法のプログラムを記録した記録媒体 | |
JP4724551B2 (ja) | 動画像処理装置及び動画像処理方法 | |
US7894707B2 (en) | Recording apparatus | |
JP5818599B2 (ja) | 動画記録装置 | |
JP5031608B2 (ja) | 再生装置及び記憶媒体 | |
JP2005005810A (ja) | メディアデータ管理方法、ディスク録画装置、ディスク再生装置、メディアデータ管理システム、コンピュータプログラム及びコンピュータ読み取り可能な記録媒体 | |
JP2006080723A (ja) | 記録装置および記録方法、再生装置および再生方法、並びにプログラム | |
US20120189283A1 (en) | Moving image data recording apparatus | |
JP6278353B2 (ja) | 記録装置、記録方法、プログラム、ならびに撮像装置 | |
JP2021166338A (ja) | 撮像装置、記録方法、及びプログラム | |
JP2007006140A (ja) | データ処理装置及びデータ処理方法 | |
JP5793404B2 (ja) | ドライブレコーダ | |
JP4298583B2 (ja) | 撮像装置および携帯電話 | |
JP4234029B2 (ja) | 画像記録再生装置 | |
JP2007096615A (ja) | 情報処理装置、方法及びプログラム | |
US20120195571A1 (en) | Image processing apparatus | |
JP2006245796A (ja) | 画像供給装置と情報処理装置及びその制御方法 | |
JP4347715B2 (ja) | 電子撮像装置 | |
JP2022095374A (ja) | 動画ファイル生成装置、その生成方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081211 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20081211 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101005 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101201 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110405 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110411 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140415 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |