JP4881210B2 - 撮像装置、画像処理装置及びそれらの制御方法 - Google Patents
撮像装置、画像処理装置及びそれらの制御方法 Download PDFInfo
- Publication number
- JP4881210B2 JP4881210B2 JP2007102129A JP2007102129A JP4881210B2 JP 4881210 B2 JP4881210 B2 JP 4881210B2 JP 2007102129 A JP2007102129 A JP 2007102129A JP 2007102129 A JP2007102129 A JP 2007102129A JP 4881210 B2 JP4881210 B2 JP 4881210B2
- Authority
- JP
- Japan
- Prior art keywords
- reference image
- image frame
- data file
- image data
- resolution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 81
- 238000012545 processing Methods 0.000 title claims description 53
- 238000000034 method Methods 0.000 title claims description 45
- 238000006243 chemical reaction Methods 0.000 claims description 171
- 230000008859 change Effects 0.000 claims description 31
- 238000009825 accumulation Methods 0.000 claims description 4
- 230000009467 reduction Effects 0.000 claims description 4
- 210000000707 wrist Anatomy 0.000 claims description 2
- 238000000605 extraction Methods 0.000 description 34
- 238000001514 detection method Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 15
- 238000004590 computer program Methods 0.000 description 9
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/327—Table of contents
- G11B27/329—Table of contents on a disc [VTOC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/781—Television signal recording using magnetic recording on disks or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal
- H04N7/122—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal involving expansion and subsequent compression of a signal segment, e.g. a frame, a line
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Studio Devices (AREA)
- Television Systems (AREA)
- Image Analysis (AREA)
Description
以下、図面を参照して、本発明の例示的な実施形態について詳細に説明する。
なお、本発明における「解像度」とは、例えば1インチあたりに含まれる画素の数といった、定められた領域における画素密度を示す意味に限定されるものではない。本発明における「解像度」とは画像信号が本来有する画素の数という意味をも含む表現である。従って、解像度変換とは、画素の密度を変換するだけでなく、画素の数を変化させる処理をも含む。解像度の低減とは画像信号から画素の数を減らす処理である。また、解像度の向上とは画像信号に含まれる画素の数を増加させる処理である。本発明の特許請求の範囲、明細書及び図面で用いられる「解像度」は、上述した定義で利用されていることに留意されたい。
図1は本発明の第1の実施形態に係る撮像装置の構成例を示すブロック図である。本実施形態の撮像装置は、動画撮影機能を有する撮像装置である。
・符号化動画像データファイルを特定する情報(コンテンツ名)、
・エンコーダ部108から通知を受けた再生時刻情報、及び
・参照画像データファイルを特定する情報(画像データファイル名)、
の3つを関連付けて例えば図2に示すようなコンテンツ情報リストを生成する。そして、コンテンツ情報リスト生成部107は、生成したコンテンツ情報リストを第1の記録制御部106へ送信する。
・参照画像抽出部105からの参照画像データファイル、
・コンテンツ情報リスト生成部107からのコンテンツ情報リスト、及び、
・エンコーダ部108からの符号化動画像データファイル、
を第1の記憶装置としての第1の蓄積部109に記憶する。
撮像装置が起動すると、シーン変化検出部104は、まず画像入力があるかどうか、すなわち撮像装置が撮影状態に入ったかどうかを判定する(S301)。画像入力があった場合、シーン変化検出部104は、入力された画像フレームに対するヒストグラムを算出する(S302)。そしてシーン変化検出部104は、算出したヒストグラムのデータを、図示しない内部メモリ等に一時的に記憶する(S303)。
・エンコーダ部108からの符号化動画像データファイル、
・参照画像抽出部105からの参照画像データファイル、及び、
・コンテンツ情報リスト生成部107からのコンテンツ情報リスト、
を関連付けて第1の蓄積部109に記録する。
そして、S301に処理を戻し、再び次の画像が入力されるまで待機する。
ネットワークI/F部401は、例えばEtherNet(登録商標)インタフェースやIEEE1394インタフェースなどのネットワークインタフェースである。ネットワークI/F部401を通じて通信可能な機器や送受信するデータに制限は無い。ただし、ここでは、図1に示した撮像装置とネットワークI/F部401を通じて接続されて画像処理システムを形成し、撮像装置からのデータを受信するものとして説明する。
解像度変換テーブル生成部404は、参照画像データファイルを蓄積する学習用データベース部501と、参照画像フレームをダウンサンプリングするダウンサンプリング部502と、学習回路部503とから構成される。
再生時刻Ta0(701)の画像フレームから、最初の解像度変換テーブルTBL_A0(702)を適用して解像度変換を行う。その後、再生時刻Ta1に達するまでの画像フレームに対しては、TBL_A0(702)を適用して解像度変換を行う。
第1の実施形態では、シーン毎に参照画像を抽出する構成であったが、本実施形態では、過去に抽出した参照画像を記憶しておき、それを再利用する構成を特徴とする。
ヒストグラム記憶部802には、既に参照画像として抽出された画像フレームのヒストグラムデータと、対応する参照画像データファイルを特定する情報とが関連付けて保存されている。
次にS1003において、ヒストグラム比較部801は、ヒストグラム記憶部802に記憶されたヒストグラムの中に、現画像フレームのヒストグラムと類似したものがあるか判定する。
その後、S308(図3)以降の処理を行なう。
その後は、S311以降の処理を行なう。
なお、本実施形態では、シーン変化したと判定される画像フレームのヒストグラムを過去の参照画像のヒストグラムと比較し、類似したものがない場合に参照画像として抽出するものとした。しかし、過去の参照画像そのものを記憶しておき、画像同士の類似度に基づいて、参照画像として抽出するか否かを決定しても良い。
図11は、本発明の第3の実施形態に係る撮像装置の構成例を示すブロック図である。図11において、図1と同じ構成については同じ参照数字を付し、重複する説明を省略する。
モード設定ダイヤルにより設定された撮影モードは、撮影モード指示部1104で検出され、参照画像抽出部1102へ通知される。
また、本実施形態の撮像装置で記録した符号化動画像データファイル、コンテンツ情報リスト及び参照画像データファイルは、第1の実施形態の画像処理装置により利用可能である。
図13は、本発明の第3の実施形態に係る撮像装置の構成例を示すブロック図である。図13において、図1及び図4と同じ構成については同じ参照数字を付し、重複する説明を省略する。
本実施形態の撮像装置は、第1の実施形態の画像処理装置が行っていた解像度変換テーブルの生成を行う機能を有することを特徴とする。
コンテンツ情報リスト読出部406は、第2の蓄積部402からコンテンツ情報リストを読み出し、コンテンツ情報リスト編集部407へ供給する。コンテンツ情報リスト編集部407は、コンテンツ情報リストの参照画像データファイル名に基づいて、解像度変換テーブル生成部404から通知された、解像度変換テーブルを特定する情報を付加して、第1の記録制御部106へ出力する。
最終的に、第1の蓄積部109には、符号化動画像データファイルと、編集後のコンテンツ情報リストと、解像度変換テーブルとが記憶される。
画像処理装置は、図13に示す撮像装置から、ネットワークI/F部401を通じて符号化動画像データファイルと、編集後のコンテンツ情報リストと、解像度変換テーブルを取得し、第2の蓄積部402に記憶する。
上述の実施形態は、システム或は装置のコンピュータ(或いはCPU、MPU等)によりソフトウェア的に実現することも可能である。
従って、上述の実施形態をコンピュータで実現するために、該コンピュータに供給されるコンピュータプログラム自体も本発明を実現するものである。つまり、上述の実施形態の機能を実現するためのコンピュータプログラム自体も本発明の一つである。
つまり、上述の実施形態を実現するためのプログラムファイルをクライアントコンピュータに提供するサーバ装置も本発明の一つである。
Claims (14)
- 動画像を撮像する撮像装置であって、
前記動画像を構成する複数の画像フレームの中から、動画像の解像度変換処理における参照画像フレームとして使用すべき画像フレームを判定する判定手段と、
前記参照画像フレームに関する情報を蓄積する蓄積手段と、
前記判定手段によって判定された前記参照画像フレームから参照画像データファイルを生成するファイル生成手段と、
前記複数の画像フレームの解像度を落とし、当該解像度が落とされた複数の画像フレームから符号化動画像データファイルを生成する符号化手段と、
前記参照画像フレームを特定する情報を生成する情報生成手段と、
前記情報生成手段が生成した前記参照画像フレームを特定する情報と、前記参照画像データファイルを特定する情報とを関連付けたリストを生成するリスト生成手段と、
前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストとを第1の記憶装置に記録する第1の記録制御手段とを有し、
前記参照画像フレームは、前記符号化動画像データファイルを復号して得られる動画像の解像度を上げるために使用すべき画像フレームであり、
前記判定手段は、前記参照画像フレームが新たに判定された場合、前記蓄積手段を参照し、前記新たに判定された参照画像フレームに類似した画像フレームが既に参照画像フレームとして用いられているか否か判定し、
前記リスト生成手段は、前記新たに判定された参照画像フレームに類似した画像フレームが既に参照画像フレームとして用いられていると判定された場合には、前記リストにおいて、当該類似した画像フレームから生成された参照画像データファイルを特定する情報と、前記新たに判定された参照画像フレームを特定する情報とを対応付けることを特徴とする撮像装置。 - 前記判定手段が、前記動画像を構成する複数の画像フレームのうち、前の画像フレームからシーン変化があると判定される画像フレームを前記参照画像フレームと判定することを特徴とする請求項1記載の撮像装置。
- 動画像を撮像する撮像装置であって、
複数の撮影モードのうちいずれかをユーザが設定するための撮影モード設定手段と、
前記複数の撮影モードの各々と、前記複数の撮影モードの各々で撮影された画像が有すると考えられる代表的な画像の特徴を表す情報とを対応付けて記憶する記憶手段と、
前記動画像を構成する複数の画像フレームの中から、動画像の解像度変換処理における参照画像フレームとして使用すべき画像フレームを判定する判定手段と、
前記判定手段によって判定された前記参照画像フレームから参照画像データファイルを生成するファイル生成手段と、
前記複数の画像フレームの解像度を落とし、当該解像度が落とされた複数の画像フレームから符号化動画像データファイルを生成する符号化手段と、
前記参照画像フレームを特定する情報を生成する情報生成手段と、
前記情報生成手段が生成した前記参照画像フレームを特定する情報と、前記参照画像データファイルを特定する情報とを関連付けたリストを生成するリスト生成手段と、
前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストとを第1の記憶装置に記録する第1の記録制御手段とを有し、
前記参照画像フレームは、前記符号化動画像データファイルを復号して得られる動画像の解像度を上げるために使用すべき画像フレームであり、
前記判定手段が、前記記憶手段を参照して、前記動画像を構成する複数の画像フレームのうち、前記撮影モード設定手段により設定されている撮影モードに対応する前記代表的な画像の特徴を有すると判定される画像フレームを、前記参照画像フレームと判定することを特徴とする撮像装置。 - 動画像を撮像する撮像装置であって、
前記動画像を構成する複数の画像フレームの中から、動画像の解像度変換処理における参照画像フレームとして使用すべき画像フレームを判定する判定手段と、
前記判定手段によって判定された前記参照画像フレームから参照画像データファイルを生成するファイル生成手段と、
前記複数の画像フレームの解像度を落とし、当該解像度が落とされた複数の画像フレームから符号化動画像データファイルを生成する符号化手段と、
前記参照画像フレームを特定する情報を生成する情報生成手段と、
前記情報生成手段が生成した前記参照画像フレームを特定する情報と、前記参照画像データファイルを特定する情報とを関連付けたリストを生成するリスト生成手段と、
前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストとを第1の記憶装置に記録する第1の記録制御手段と、
前記第1の記憶装置から前記参照画像データファイルを読み出す第1の読出手段と、
前記読み出した前記参照画像データファイルに含まれる参照画像フレームから、前記符号化動画像データファイルを構成する画像フレームと等しい解像度を有する低解像度の参照画像フレームを生成する解像度低減手段と、
前記参照画像フレームと前記低解像度の参照画像フレームとから、前記符号化動画像データファイルを構成する画像フレームの解像度を向上させるための解像度変換テーブルを生成し、生成した解像度変換テーブルを前記第1の記録制御手段に出力する解像度変換テーブル生成手段と、
前記第1の記憶装置から前記リストを読み出す第2の読出手段と、
前記リストに、前記解像度変換テーブルを対応付け、前記第1の記録制御手段に出力するリスト編集手段とを有し、
前記参照画像フレームは、前記符号化動画像データファイルを復号して得られる動画像の解像度を上げるために使用すべき画像フレームであり、
前記第1の記録制御手段が、前記解像度変換テーブルと、前記リスト編集手段からのリストを前記第1の記憶装置に記録することを特徴とする撮像装置。 - 前記第1の記録制御手段が、前記解像度変換テーブルの生成に使用された前記参照画像データファイルを、前記第1の記憶装置から削除することを特徴とする請求項4記載の撮像装置。
- 請求項1又は請求項2に記載の撮像装置から、前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストを取得し、第2の記憶装置に記憶する取得手段と、
前記第2の記憶装置から前記参照画像データファイルを読み出す第1の読出手段と、
前記読み出した前記参照画像データファイルに含まれる参照画像フレームから、前記符号化動画像データファイルを構成する画像フレームと等しい解像度を有する低解像度の参照画像フレームを生成する解像度低減手段と、
前記参照画像データファイルに含まれる参照画像フレームと前記低解像度の参照画像フレームとから、前記符号化動画像データファイルを構成する画像フレームの解像度を向上させるための解像度変換テーブルを生成する解像度変換テーブル生成手段と、
前記第2の記憶装置から前記リストを読み出す第2の読出手段と、
前記リストに、前記解像度変換テーブルを対応付けて出力するリスト編集手段とをさらに有し、
前記リスト編集手段が出力するリストと、前記解像度変換テーブルとを前記第2の記憶装置に記録する第2の記録制御手段と、
前記符号化動画像データファイルを復号化し、前記符号化動画像データファイルを構成する画像フレームを出力する復号化手段と、
前記復号化手段が出力する画像フレームに、前記リスト編集手段が出力するリストに基づく前記解像度変換テーブルを適用し、解像度変換を行う解像度変換手段と、
前記解像度変換された画像フレームを出力する出力手段とを有することを特徴とする画像処理装置。 - 請求項4又は請求項5記載の撮像装置から、前記符号化動画像データファイルと、前記リスト編集手段が出力するリストと、前記解像度変換テーブルとを取得し、第2の記憶装置に記憶する取得手段と、
前記符号化動画像データファイルを復号化し、前記符号化動画像データファイルを構成する画像フレームを出力する復号化手段と、
前記復号化手段が出力する画像フレームに、前記リスト編集手段が出力するリストに基づく前記解像度変換テーブルを適用し、解像度変換を行う解像度変換手段と、
前記解像度変換された画像フレームを出力する出力手段とを有することを特徴とする画像処理装置。 - 動画像を撮像する撮像装置の制御方法であって、
判定手段が、前記動画像を構成する複数の画像フレームの中から、参照画像フレームとして使用すべき画像フレームを判定する判定ステップと、
前記参照画像フレームに関する情報を蓄積装置に蓄積する蓄積ステップと、
ファイル生成手段が、前記判定ステップによって判定された参照画像フレームから参照画像データファイルを生成するファイル生成ステップと、
符号化手段が、前記複数の画像フレームの解像度を落とし、当該解像度が落とされた複数の画像フレームから符号化動画像データファイルを生成する符号化ステップと、
情報生成手段が、前記参照画像フレームを特定する情報を生成する情報生成ステップと、
リスト生成手段が、前記情報生成ステップで生成した前記参照画像フレームを特定する情報と、前記参照画像データファイルを特定する情報とを関連付けたリストを生成するリスト生成ステップと、
第1の記録制御手段が、前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストとを第1の記憶装置に記録する第1の記録制御ステップとを有し、
前記参照画像フレームは、前記符号化動画像データファイルを復号して得られる動画像の解像度を上げるために使用すべき画像フレームであり、
前記判定ステップにおいて、前記判定手段は、前記参照画像フレームが新たに判定された場合、前記蓄積装置を参照し、前記新たに判定された参照画像フレームに類似した画像フレームが既に参照画像フレームとして用いられているか否か判定し、
前記リスト生成ステップにおいて、前記リスト生成手段は、前記新たに判定された参照画像フレームに類似した画像フレームが既に参照画像フレームとして用いられていると判定された場合には、前記リストにおいて、当該類似した画像フレームから生成された参照画像データファイルを特定する情報と、前記新たに判定された参照画像フレームを特定する情報とを対応付けることを特徴とする撮像装置の制御方法。 - 前記判定ステップにおいて、前記判定手段は、前記動画像を構成する複数の画像フレームのうち、前の画像フレームからシーン変化があると判定される画像フレームを前記参照画像フレームと判定することを特徴とする請求項8記載の撮像装置の制御方法。
- 複数の撮影モードのうちいずれかをユーザが設定するための撮影モード設定手段と、
前記複数の撮影モードの各々と、前記複数の撮影モードの各々で撮影された画像が有すると考えられる代表的な画像の特徴を表す情報とを対応付けて記憶する記憶手段とを有し、動画像を撮像する撮像装置の制御方法であって、
判定手段が、前記動画像を構成する複数の画像フレームの中から、参照画像フレームとして使用すべき画像フレームを判定する判定ステップと、
ファイル生成手段が、前記判定ステップによって判定された参照画像フレームから参照画像データファイルを生成するファイル生成ステップと、
符号化手段が、前記複数の画像フレームの解像度を落とし、当該解像度が落とされた複数の画像フレームから符号化動画像データファイルを生成する符号化ステップと、
情報生成手段が、前記参照画像フレームを特定する情報を生成する情報生成ステップと、
リスト生成手段が、前記情報生成ステップで生成した前記参照画像フレームを特定する情報と、前記参照画像データファイルを特定する情報とを関連付けたリストを生成するリスト生成ステップと、
第1の記録制御手段が、前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストとを第1の記憶装置に記録する第1の記録制御ステップとを有し、
前記参照画像フレームは、前記符号化動画像データファイルを復号して得られる動画像の解像度を上げるために使用すべき画像フレームであり、
前記判定ステップにおいて、前記判定手段は、前記記憶手段を参照して、前記動画像を構成する複数の画像フレームのうち、前記撮影モード設定手段により設定されている撮影モードに対応する前記代表的な画像の特徴を有すると判定される画像フレームを、前記参照画像フレームと判定することを特徴とする撮像装置の制御方法。 - 動画像を撮像する撮像装置の制御方法であって、
判定手段が、前記動画像を構成する複数の画像フレームの中から、参照画像フレームとして使用すべき画像フレームを判定する判定ステップと、
ファイル生成手段が、前記判定ステップによって判定された参照画像フレームから参照画像データファイルを生成するファイル生成ステップと、
符号化手段が、前記複数の画像フレームの解像度を落とし、当該解像度が落とされた複数の画像フレームから符号化動画像データファイルを生成する符号化ステップと、
情報生成手段が、前記参照画像フレームを特定する情報を生成する情報生成ステップと、
リスト生成手段が、前記情報生成ステップで生成した前記参照画像フレームを特定する情報と、前記参照画像データファイルを特定する情報とを関連付けたリストを生成するリスト生成ステップと、
第1の記録制御手段が、前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストとを第1の記憶装置に記録する第1の記録制御ステップと、
第1の読出手段が、前記第1の記憶装置から前記参照画像データファイルを読み出す第1の読出ステップと、
解像度低減手段が、前記読み出した前記参照画像データファイルに含まれる参照画像フレームから、前記符号化動画像データファイルを構成する画像フレームと等しい解像度を有する低解像度の参照画像フレームを生成する解像度低減ステップと、
解像度変換テーブル生成手段が、前記参照画像フレームと前記低解像度の参照画像フレームとから、前記符号化動画像データファイルを構成する画像フレームの解像度を向上させるための解像度変換テーブルを生成し、生成した解像度変換テーブルを前記第1の記録制御手段に出力する解像度変換テーブル生成ステップと、
第2の読出手段が、前記第1の記憶装置から前記リストを読み出す第2の読出ステップと、
リスト編集手段が、前記リストに、前記解像度変換テーブルを対応付け、前記第1の記録制御手段に出力するリスト編集ステップとを有し、
前記参照画像フレームは、前記符号化動画像データファイルを復号して得られる動画像の解像度を上げるために使用すべき画像フレームであり、
前記第1の記録制御ステップにおいて、前記第1の記録制御手段が、前記解像度変換テーブルと、前記リスト編集手段からのリストを前記第1の記憶装置に記録することを特徴とする撮像装置の制御方法。 - 前記第1の記録制御ステップにおいて、前記第1の記録制御手段が、前記解像度変換テーブルの生成に使用された前記参照画像データファイルを、前記第1の記憶装置から削除することを特徴とする請求項11記載の撮像装置の制御方法。
- 請求項1又は請求項2に記載の撮像装置と接続される画像処理装置の制御方法であって、
前記参照画像データファイルと、前記符号化動画像データファイルと、前記リストを取得し、第2の記憶装置に記憶する取得ステップと、
前記第2の記憶装置から前記参照画像データファイルを読み出す第1の読出ステップと、
前記読み出した前記参照画像データファイルに含まれる参照画像フレームから、前記符号化動画像データファイルを構成する画像フレームと等しい解像度を有する低解像度の参照画像フレームを生成する解像度低減ステップと、
前記参照画像データファイルに含まれる参照画像フレームと前記低解像度の参照画像フレームとから、前記符号化動画像データファイルを構成する画像フレームの解像度を向上させるための解像度変換テーブルを生成する解像度変換テーブル生成ステップと、
前記第2の記憶装置から前記リストを読み出す第2の読出ステップと、
前記リストに、前記解像度変換テーブルを対応付けて出力するリスト編集ステップとをさらに有し、
前記リスト編集ステップが出力するリストと、前記解像度変換テーブルとを前記第2の記憶装置に記録する第2の記録制御ステップと、
前記符号化動画像データファイルを復号化し、前記符号化動画像データファイルを構成する画像フレームを出力する復号化ステップと、
前記復号化ステップが出力する画像フレームに、前記リスト編集ステップが出力するリストに基づく前記解像度変換テーブルを適用し、解像度変換を行う解像度変換ステップと、
前記解像度変換された画像フレームを出力装置に出力する出力ステップとを有することを特徴とする画像処理装置の制御方法。 - 請求項4又は請求項5記載の撮像装置と接続される画像処理装置の制御方法であって、
前記符号化動画像データファイルと、前記リスト編集手段が出力するリストと、前記解像度変換テーブルとを取得し、第2の記憶装置に記憶する取得ステップと、
前記符号化動画像データファイルを復号化し、前記符号化動画像データファイルを構成する画像フレームを出力する復号化ステップと、
前記復号化ステップが出力する画像フレームに、前記リスト編集手段が出力するリストに基づく前記解像度変換テーブルを適用し、解像度変換を行う解像度変換ステップと、
前記解像度変換された画像フレームを出力装置に出力する出力ステップとを有することを特徴とする画像処理装置の制御方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007102129A JP4881210B2 (ja) | 2007-04-09 | 2007-04-09 | 撮像装置、画像処理装置及びそれらの制御方法 |
US12/054,815 US8144999B2 (en) | 2007-04-09 | 2008-03-25 | Image capturing apparatus, image processing apparatus and control methods thereof with data conversion |
EP20080154217 EP1981272B1 (en) | 2007-04-09 | 2008-04-08 | Image capturing apparatus, image processing apparatus and control methods thereof |
CN2008100906631A CN101287089B (zh) | 2007-04-09 | 2008-04-09 | 摄像设备、图像处理设备及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007102129A JP4881210B2 (ja) | 2007-04-09 | 2007-04-09 | 撮像装置、画像処理装置及びそれらの制御方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2008259142A JP2008259142A (ja) | 2008-10-23 |
JP2008259142A5 JP2008259142A5 (ja) | 2010-05-27 |
JP4881210B2 true JP4881210B2 (ja) | 2012-02-22 |
Family
ID=39591986
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007102129A Expired - Fee Related JP4881210B2 (ja) | 2007-04-09 | 2007-04-09 | 撮像装置、画像処理装置及びそれらの制御方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8144999B2 (ja) |
EP (1) | EP1981272B1 (ja) |
JP (1) | JP4881210B2 (ja) |
CN (1) | CN101287089B (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012010182A (ja) * | 2010-06-25 | 2012-01-12 | Sony Corp | 情報処理装置と情報処理方法 |
WO2012176526A1 (ja) * | 2011-06-21 | 2012-12-27 | シャープ株式会社 | 立体画像処理装置、立体画像処理方法、及びプログラム |
WO2013174291A1 (zh) * | 2012-05-23 | 2013-11-28 | Wang Hao | 红外摄影装置和红外摄影方法 |
JP5988725B2 (ja) * | 2012-06-26 | 2016-09-07 | キヤノン株式会社 | 撮像装置及び現像装置 |
WO2014098849A1 (en) * | 2012-12-19 | 2014-06-26 | Thomson Licensing | Methods and apparatus for automatically detecting image/video resolution and its color subsampling |
JP2014225718A (ja) * | 2013-05-15 | 2014-12-04 | ソニー株式会社 | 画像処理装置および画像処理方法 |
US9967465B2 (en) * | 2016-05-18 | 2018-05-08 | Realtek Singapore Pte Ltd | Image frame processing method |
JP7224817B2 (ja) * | 2018-09-06 | 2023-02-20 | キヤノンメディカルシステムズ株式会社 | 信号データ処理装置 |
CN111314578B (zh) * | 2018-12-12 | 2022-04-19 | 瑞鼎科技股份有限公司 | 影像处理装置及影像处理方法 |
US11790950B2 (en) * | 2020-01-14 | 2023-10-17 | Robert Salem Abraham | Film-making using style transfer |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2611607B2 (ja) * | 1992-06-29 | 1997-05-21 | 日本ビクター株式会社 | シーンチェンジ検出装置 |
JP3954656B2 (ja) * | 1994-09-29 | 2007-08-08 | ソニー株式会社 | 画像符号化装置及び方法 |
US5623308A (en) * | 1995-07-07 | 1997-04-22 | Lucent Technologies Inc. | Multiple resolution, multi-stream video system using a single standard coder |
JP4093621B2 (ja) * | 1997-12-25 | 2008-06-04 | ソニー株式会社 | 画像変換装置および画像変換方法、並びに学習装置および学習方法 |
US7324139B2 (en) * | 2000-01-20 | 2008-01-29 | Ricoh Company, Ltd. | Digital camera, a method of shooting and transferring text |
JP3702464B2 (ja) | 2002-05-08 | 2005-10-05 | ソニー株式会社 | データ変換装置およびデータ変換方法、学習装置および学習方法、並びにプログラムおよび記録媒体 |
JP2004072148A (ja) * | 2002-08-01 | 2004-03-04 | Matsushita Electric Ind Co Ltd | Avデータ記録装置および方法 |
JP4204445B2 (ja) | 2003-11-05 | 2009-01-07 | 三洋電機株式会社 | コンテンツ記録装置 |
JP4387264B2 (ja) * | 2004-07-27 | 2009-12-16 | 京セラ株式会社 | 撮像装置およびその画像生成方法 |
JP2006019828A (ja) * | 2004-06-30 | 2006-01-19 | Toshiba Corp | 画像記録装置 |
KR100653090B1 (ko) * | 2004-07-13 | 2006-12-06 | 삼성전자주식회사 | 디스플레이 사이즈 조정 장치 및 그 방법 |
US7792190B2 (en) * | 2004-09-09 | 2010-09-07 | Media Tek Singapore Pte Ltd. | Inserting a high resolution still image into a lower resolution video stream |
JP4802565B2 (ja) | 2005-06-17 | 2011-10-26 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
-
2007
- 2007-04-09 JP JP2007102129A patent/JP4881210B2/ja not_active Expired - Fee Related
-
2008
- 2008-03-25 US US12/054,815 patent/US8144999B2/en not_active Expired - Fee Related
- 2008-04-08 EP EP20080154217 patent/EP1981272B1/en not_active Not-in-force
- 2008-04-09 CN CN2008100906631A patent/CN101287089B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
CN101287089B (zh) | 2011-07-20 |
JP2008259142A (ja) | 2008-10-23 |
US8144999B2 (en) | 2012-03-27 |
EP1981272A2 (en) | 2008-10-15 |
CN101287089A (zh) | 2008-10-15 |
US20080247654A1 (en) | 2008-10-09 |
EP1981272A3 (en) | 2011-09-28 |
EP1981272B1 (en) | 2014-10-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4881210B2 (ja) | 撮像装置、画像処理装置及びそれらの制御方法 | |
WO2009113280A1 (ja) | 画像処理装置およびそれを搭載した撮像装置 | |
EP2974285B1 (en) | Image processing apparatus and image processing method | |
EP2974265B1 (en) | Imaging apparatus and imaging apparatus control method | |
CN102630003B (zh) | 图像数据记录设备及其控制方法 | |
JP4958758B2 (ja) | 記録装置、再生装置、記録方法、再生方法及びプログラム | |
JP5156196B2 (ja) | 撮像装置 | |
JP2015179910A (ja) | 画像処理装置及びその制御方法 | |
JP5213503B2 (ja) | 記憶再生装置 | |
KR101385168B1 (ko) | 화상 데이터 기록장치 | |
JP2009152672A (ja) | 記録装置、再生装置、記録方法、再生方法及びプログラム | |
JP2010237911A (ja) | 電子機器 | |
JP4921326B2 (ja) | 画像処理装置およびその制御方法 | |
JP6366268B2 (ja) | 撮像装置及びその制御方法 | |
JP4921331B2 (ja) | 画像処理装置およびその制御方法 | |
JP6282136B2 (ja) | 撮像装置及びその制御方法 | |
JP6452362B2 (ja) | 撮像装置及び撮像方法 | |
JP2009159314A (ja) | 記録装置、再生装置、記録方法、再生方法及びプログラム | |
US8391621B2 (en) | Image processing device and image reproducing device | |
JP2016063254A (ja) | 撮像装置及び撮像方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100408 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100408 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110610 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110715 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110902 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111104 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111202 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4881210 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141209 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |