JP4633594B2 - 動画生成装置、動画生成方法、及びプログラム - Google Patents
動画生成装置、動画生成方法、及びプログラム Download PDFInfo
- Publication number
- JP4633594B2 JP4633594B2 JP2005287160A JP2005287160A JP4633594B2 JP 4633594 B2 JP4633594 B2 JP 4633594B2 JP 2005287160 A JP2005287160 A JP 2005287160A JP 2005287160 A JP2005287160 A JP 2005287160A JP 4633594 B2 JP4633594 B2 JP 4633594B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- moving image
- unit
- transition data
- partial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Studio Circuits (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
110 撮像装置
130 動画データ
150 DVD
170 デジタルフォトショップ
190 ユーザ
200 指示入力部
205 画像出力部
210 画像格納部
212 トランジションデータ取得部
214 動画生成部
220 オブジェクト移動ベクトル算出部
225 領域移動ベクトル算出部
230 オブジェクト位置特定部
240 同一部分領域特定部
245 境界部分領域特定部
250 動きベクトル算出部
260 類似部分領域特定部
262 境界部分領域面積算出部
264 類似部分領域選択部
270 部分領域画像生成部
280 動画構成画像生成部
282 Iピクチャ生成部
284 Pピクチャ生成部
286 Bピクチャ生成部
290 DCT変換部
292 DCT係数量子化部
294 符号化部
600 指示入力部
605 画像出力部
610 画像格納部
612 トランジションデータ取得部
614 動画生成部
645 境界部分領域特定部
650 動きベクトル算出部
662 境界部分領域面積算出部
670 部分領域画像生成部
680 動画構成画像生成部
682 Iピクチャ生成部
684 Pピクチャ生成部
686 Bピクチャ生成部
690 DCT変換部
692 DCT係数量子化部
694 符号化部
Claims (13)
- 複数の静止画が移り変わる動画を生成する動画生成装置であって、
複数の静止画を、どのように移り変わらせるかを示すトランジションデータを取得するトランジションデータ取得部と、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、静止画から複数の動画構成画像を生成して、生成した複数の動画構成画像を含む動画を生成する動画生成部と
を備え、
前記動画生成部は、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数の部分領域のそれぞれと同一の画像内容の部分領域が、静止画又は他の動画構成画像に存在するか否かを特定する同一部分領域特定部と、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、前記同一部分領域特定部が同一の画像内容の部分領域が存在すると判断した部分領域と、当該部分領域と同一の画像内容である、静止画又は他の動画構成画像に含まれる部分領域との間の位置の差を示す動きベクトルを算出する動きベクトル算出部と、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、前記同一部分領域特定部が同一の画像内容の部分画像が存在しないと判断した部分領域の画像内容を、静止画又は他の動画構成画像に含まれる複数の部分領域の一部を組み合わせて生成する部分領域画像生成部と、
前記動きベクトル算出部が算出した動きベクトルで表現される部分領域、及び前記部分領域画像生成部が生成した部分領域を含む動画構成画像を生成する動画構成画像生成部とを有し、
前記トランジションデータ取得部は、静止画の少なくとも一部の移動領域の移動を示すトランジションデータを取得し、
前記同一部分領域特定部は、
前記トランジションデータ取得部が取得した移動領域の移動を示すトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数の部分領域が移動領域の境界線に交差するか否かを特定する境界部分領域特定部
を含み、
前記部分領域画像生成部は、前記トランジションデータ取得部が取得した移動領域の移動を示すトランジションデータに基づいて、前記境界部分領域特定部が境界線に交差すると判断した部分領域の画像内容を、静止画又は他の動画構成画像に含まれる複数の部分領域の一部と移動領域の画像とを組み合わせて生成する
動画生成装置。 - 前記部分領域画像生成部は、前記トランジションデータ取得部が取得した移動領域の移動を示すトランジションデータに基づいて、動画構成画像における移動領域の位置を特定し、特定した移動領域の位置に基づいて、前記境界部分領域特定部が境界線に交差すると判断した部分領域に含まれるべき移動領域の画像と、当該部分領域の範囲内における静止画又は他の動画構成画像のうちの移動領域が含まれない領域の画像とを合成することによって、前記境界部分領域特定部が境界線に交差すると判断した部分領域の画像内容を生成する
請求項1に記載の動画生成装置。 - 前記トランジションデータ取得部は、静止画又は他の動画構成画像を背景として移動するオブジェクトの移動を示すトランジションデータを取得し、
前記境界部分領域特定部は、前記トランジションデータ取得部が取得したオブジェクトの移動を示すトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数の部分領域が、オブジェクトと背景との境界線に交差するか否かを特定し、
前記部分領域画像生成部は、前記境界部分領域特定部が境界線に交差すると判断した部分領域の画像内容を、前記トランジションデータ取得部が取得したオブジェクトの移動を示すトランジションデータに基づいて、オブジェクトと、静止画又は他の動画構成画像に含まれる複数の部分領域の一部とを組み合わせて生成する
請求項1に記載の動画生成装置。 - 前記動画生成部は、
前記トランジションデータ取得部が取得したオブジェクトの移動を示すトランジションデータに基づいて、動画構成画像におけるオブジェクトの位置を特定するオブジェクト位置特定部
をさらに有し、
前記境界部分領域特定部は、前記オブジェクト位置特定部が特定した動画構成画像におけるオブジェクトの位置に基づいて、一の動画構成画像に含まれる予め定められた複数の部分領域が、オブジェクトと背景の静止画又は他の動画構成画像との境界線に交差するか否かを特定し、
前記部分領域画像生成部は、前記オブジェクト位置特定部が特定した動画構成画像におけるオブジェクトの位置及び前記境界部分領域特定部が境界線に交差すると判断した部分領域の位置との相対的な位置から特定される、オブジェクトのうちの当該部分領域に含まれる画像と、当該部分領域の範囲内の背景画像のうちオブジェクトが含まれない領域の背景画像とを合成することによって、前記境界部分領域特定部が境界線に交差すると判断した部分領域の画像内容を生成する
請求項3に記載の動画生成装置。 - 前記トランジションデータ取得部は、静止画又は動画構成画像を背景として移動するオブジェクトの移動量及び移動方向の時間的変化を示すトランジションデータを取得し、
前記オブジェクト位置特定部は、前記トランジションデータ取得部が取得したオブジェクトの移動量及び移動方向の時間的変化を時間的に積分することによって、動画構成画像におけるオブジェクトの位置を特定する
請求項4に記載の動画生成装置。 - 前記オブジェクト位置特定部は、複数の動画構成画像のそれぞれにおけるオブジェクトの位置を特定し、
前記動画生成部は、
前記オブジェクト位置特定部が特定した複数の動画構成画像のそれぞれにおけるオブジェクトの位置に基づいて、前記境界部分領域特定部が境界線に交差すると判断した部分領域の画像内容と類似する部分領域を持つ他の動画構成画像を特定する類似部分領域特定部
をさらに有し、
前記部分領域画像生成部は、一の動画構成画像における部分領域の位置と前記類似部分領域特定部が特定した部分領域の位置との間の位置の差を示す動きベクトル、及び前記類似部分領域特定部が特定した部分領域と当該一の動画構成画像における部分領域との差分画像によって、前記境界部分領域特定部が境界線に交差すると判断した部分領域の画像内容を表現する
請求項4に記載の動画生成装置。 - 前記類似部分領域特定部は、
前記オブジェクト位置特定部が特定した動画構成画像におけるオブジェクトの位置に基づいて、前記境界部分領域特定部が境界線に交差すると判断した部分領域に含まれるオブジェクトの面積及び背景の面積をそれぞれ算出する面積算出部と、
前記面積算出部が算出したオブジェクトの面積が前記面積算出部が算出した背景の面積より大きい場合に、前記オブジェクト位置特定部が特定した複数の動画構成画像のそれぞれにおけるオブジェクトの位置に基づいて、オブジェクトの画像を含む他の動画構成画像の中から前記境界部分領域特定部が境界線に交差すると判断した部分領域と類似する部分領域を選択し、前記面積算出部が算出したオブジェクトの面積が前記面積算出部が算出した背景の面積以下である場合に、前記オブジェクト位置特定部が特定した複数の動画構成画像のそれぞれにおけるオブジェクトの位置に基づいて、オブジェクトの画像を含む他の動画構成画像の中から、前記境界部分領域特定部が境界線に交差すると判断した部分領域の背景である画像を含む部分領域を選択する類似部分領域選択部と
を含み、
前記部分領域画像生成部は、一の動画構成画像における部分領域の位置と前記類似部分領域選択部が選択した部分領域の位置との間の位置の差を示す動きベクトル、及び前記類似部分領域選択部が選択した部分領域と当該一の動画構成画像における部分領域との差分画像によって、前記境界部分領域特定部が境界線に交差すると判断した部分領域の画像内容を表現する
請求項6に記載の動画生成装置。 - 複数の静止画が移り変わる動画を生成する動画生成装置であって、
複数の静止画を、どのように移り変わらせるかを示すトランジションデータを取得するトランジションデータ取得部と、
複数の静止画が移り変わるMPEG符号化された動画を生成する動画生成部であって、前記トランジションデータ取得部が取得したトランジションデータに基づいて、静止画から複数の動画構成画像を生成して、生成した複数の動画構成画像を含む、MPEG符号化された動画を生成する動画生成部と
を備え、
前記動画生成部は、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数のマクロブロックのそれぞれと同一の画像内容の部分領域が、静止画又は他の動画構成画像に存在するか否かを特定する同一部分領域特定部と、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、前記同一部分領域特定部が同一の画像内容の部分領域が存在すると判断したマクロブロックと、当該マクロブロックと同一の画像内容である、静止画又は他の動画構成画像に含まれる部分領域との間の位置の差を示す動きベクトルを算出する動きベクトル算出部と、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、前記同一部分領域特定部が同一の画像内容の部分画像が存在しないと判断したマクロブロックの画像内容を、静止画又は他の動画構成画像に含まれる複数の部分領域の一部を組み合わせて生成する部分領域画像生成部と、
前記動きベクトル算出部が算出した動きベクトルで表現されるマクロブロック、及び前記部分領域画像生成部が生成したマクロブロックを含む動画構成画像を生成する動画構成画像生成部と
を有する動画生成装置。 - 前記動画構成画像生成部は、
前記トランジションデータ取得部が取得したトランジションデータに基づいて、静止画から動画構成画像をIピクチャとして生成するIピクチャ生成部と、
前記トランジションデータ取得部が取得したトランジションデータ及び前記Iピクチャ生成部が生成したIピクチャとに基づいて、動画構成画像をPピクチャとして生成するPピクチャ生成部と
を含み、
前記同一部分領域特定部は、前記トランジションデータ取得部が取得したトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数のマクロブロックのそれぞれと同一の画像内容の部分領域が、前記Iピクチャ生成部が生成したIピクチャに存在するか否かを特定し、
前記動きベクトル算出部は、前記トランジションデータ取得部が取得したトランジションデータに基づいて、前記同一部分領域特定部が同一の画像内容の部分領域が存在すると判断したマクロブロックと、当該マクロブロックと同一の画像内容である、前記Iピクチャ生成部が生成したIピクチャに含まれる部分領域との間の位置の差を示す動きベクトルを算出し、
前記Pピクチャ生成部は、前記動きベクトル算出部が算出した動きベクトルで表現されるマクロブロック及び前記部分領域画像生成部が生成したマクロブロックを含む動画構成画像をPピクチャとして生成する
請求項8に記載の動画生成装置。 - 前記動画構成画像生成部は、
前記トランジションデータ取得部が取得したトランジションデータ並びに前記Iピクチャ生成部が生成したIピクチャ又は前記Pピクチャ生成部が生成したPピクチャとに基づいて、動画構成画像をBピクチャとして生成するBピクチャ生成部
をさらに含み、
前記同一部分領域特定部は、前記トランジションデータ取得部が取得したトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数のマクロブロックのそれぞれと同一の画像内容の部分領域が、前記Iピクチャ生成部が生成したIピクチャ又は前記Pピクチャ生成部が生成したPピクチャに存在するか否かを特定し、
前記動きベクトル算出部は、前記トランジションデータ取得部が取得したトランジションデータに基づいて、前記同一部分領域特定部が同一の画像内容の部分領域が存在すると判断したマクロブロックと、当該マクロブロックと同一の画像内容である、前記Iピクチャ生成部が生成したIピクチャ又は前記Pピクチャ生成部が生成したPピクチャに含まれる部分領域との間の位置の差を示す動きベクトルを算出し、
前記Bピクチャ生成部は、前記動きベクトル算出部が算出した動きベクトルで表現されるマクロブロック及び前記部分領域画像生成部が生成したマクロブロックを含む動画構成画像をBピクチャとして生成する
請求項9に記載の動画生成装置。 - 複数の静止画が移り変わる動画を生成する動画生成装置用のプログラムであって、
コンピュータを、請求項1から10のいずれか一項に記載の動画生成装置として機能させるためのプログラム。 - 複数の静止画が移り変わる動画を生成する動画生成方法であって、
複数の静止画を、どのように移り変わらせるかを示すトランジションデータを取得するトランジションデータ取得段階と、
前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、静止画から複数の動画構成画像を生成して、生成した複数の動画構成画像を含む動画を生成する動画生成段階と
を備え、
前記動画生成段階は、
前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数の部分領域のそれぞれと同一の画像内容の部分領域が、静止画又は他の動画構成画像に存在するか否かを特定する同一部分領域特定段階と、
前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、前記同一部分領域特定段階において同一の画像内容の部分領域が存在すると判断された部分領域と、当該部分領域と同一の画像内容である、静止画又は他の動画構成画像に含まれる部分領域との間の位置の差を示す動きベクトルを算出する動きベクトル算出段階と、
前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、前記同一部分領域特定段階において同一の画像内容の部分画像が存在しないと判断された部分領域の画像内容を、静止画又は他の動画構成画像に含まれる複数の部分領域の一部を組み合わせて生成する部分領域画像生成段階と、
前記動きベクトル算出段階において算出された動きベクトルで表現される部分領域、及び前記部分領域画像生成段階において生成された部分領域を含む動画構成画像を生成する動画構成画像生成段階とを有し、
前記トランジションデータ取得段階は、静止画の少なくとも一部の移動領域の移動を示すトランジションデータを取得し、
前記同一部分領域特定段階は、
前記トランジションデータ取得段階において取得された移動領域の移動を示すトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数の部分領域が移動領域の境界線に交差するか否かを特定する境界部分領域特定段階
を含み、
前記部分領域画像生成段階は、前記トランジションデータ取得段階において取得された移動領域の移動を示すトランジションデータに基づいて、前記境界部分領域特定段階において境界線に交差すると判断された部分領域の画像内容を、静止画又は他の動画構成画像に含まれる複数の部分領域の一部と移動領域の画像とを組み合わせて生成する
動画生成方法。 - 複数の静止画が移り変わる動画を生成する動画生成方法であって、
複数の静止画を、どのように移り変わらせるかを示すトランジションデータを取得するトランジションデータ取得段階と、
複数の静止画が移り変わるMPEG符号化された動画を生成する動画生成段階であって、前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、静止画から複数の動画構成画像を生成して、生成した複数の動画構成画像を含む、MPEG符号化された動画を生成する動画生成段階と
を備え、
前記動画生成段階は、
前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、一の動画構成画像に含まれる予め定められた複数のマクロブロックのそれぞれと同一の画像内容の部分領域が、静止画又は他の動画構成画像に存在するか否かを特定する同一部分領域特定段階と、
前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、前記同一部分領域特定段階において同一の画像内容の部分領域が存在すると判断されたマクロブロックと、当該マクロブロックと同一の画像内容である、静止画又は他の動画構成画像に含まれる部分領域との間の位置の差を示す動きベクトルを算出する動きベクトル算出段階と、
前記トランジションデータ取得段階において取得されたトランジションデータに基づいて、前記同一部分領域特定段階において同一の画像内容の部分画像が存在しないと判断されたマクロブロックの画像内容を、静止画又は他の動画構成画像に含まれる複数の部分領域の一部を組み合わせて生成する部分領域画像生成段階と、
前記動きベクトル算出段階において算出された動きベクトルで表現されるマクロブロック、及び前記部分領域画像生成段階において生成されたマクロブロックを含む動画構成画像を生成する動画構成画像生成段階と
を有する動画生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005287160A JP4633594B2 (ja) | 2005-09-30 | 2005-09-30 | 動画生成装置、動画生成方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005287160A JP4633594B2 (ja) | 2005-09-30 | 2005-09-30 | 動画生成装置、動画生成方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007097100A JP2007097100A (ja) | 2007-04-12 |
JP4633594B2 true JP4633594B2 (ja) | 2011-02-16 |
Family
ID=37982191
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005287160A Expired - Fee Related JP4633594B2 (ja) | 2005-09-30 | 2005-09-30 | 動画生成装置、動画生成方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4633594B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4900602B2 (ja) * | 2007-09-14 | 2012-03-21 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラム、および画像処理システム |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006217221A (ja) * | 2005-02-03 | 2006-08-17 | Noritsu Koki Co Ltd | 電子アルバム作成システム及び作成プログラム及び記憶媒体 |
-
2005
- 2005-09-30 JP JP2005287160A patent/JP4633594B2/ja not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006217221A (ja) * | 2005-02-03 | 2006-08-17 | Noritsu Koki Co Ltd | 電子アルバム作成システム及び作成プログラム及び記憶媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP2007097100A (ja) | 2007-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20180192063A1 (en) | Method and System for Virtual Reality (VR) Video Transcode By Extracting Residual From Different Resolutions | |
US7659934B2 (en) | Recording/reproduction apparatus, and recording/reproduction method as well as stereoscopic images visual effects confirmation apparatus and stereoscopic image visual effects confirmation method | |
JP4789494B2 (ja) | 画像フレーム処理方法、装置、レンダリングプロセッサおよび動画像表示方法 | |
JP5525201B2 (ja) | 画像合成装置、画像符号化装置、コンピュータプログラム、記録媒体 | |
US7196731B2 (en) | Method and apparatus of adaptive de-interlacing of dynamic image | |
US8411735B2 (en) | Data processing apparatus, data processing method, and program | |
JP4222869B2 (ja) | 画像再生装置 | |
JP3177213B2 (ja) | 空間的に低減されたイメージ・シーケンスを抽出するシステム | |
JP4668040B2 (ja) | 動画生成装置、動画生成方法、及びプログラム | |
JP4761403B2 (ja) | 画像フレーム処理方法、装置、レンダリングプロセッサおよび動画像表示方法 | |
JP2009540652A (ja) | 動きベクトルに基づく画像のスケーリング | |
JP4633595B2 (ja) | 動画生成装置、動画生成方法、及びプログラム | |
US20110187924A1 (en) | Frame rate conversion device, corresponding point estimation device, corresponding point estimation method and corresponding point estimation program | |
JP2000187478A (ja) | 画像処理装置及び画像処理方法 | |
JP2000050305A (ja) | 映像の色差信号フィルタリング方法及び装置 | |
JP2018067751A (ja) | 動画像符号化装置、動画像符号化方法、動画像復号装置、動画像復号方法、及び動画像符号化用コンピュータプログラムならびに動画像復号用コンピュータプログラム | |
JP5333593B2 (ja) | 動画再生装置、動画再生プログラム、および動画再生方法 | |
JP2006148615A (ja) | 復号化装置および符号化方法をコンピュータに実行させるためのプログラム | |
JP4633594B2 (ja) | 動画生成装置、動画生成方法、及びプログラム | |
JP2007158703A (ja) | 動画生成装置、動画生成方法、及びプログラム | |
JP4668051B2 (ja) | 動画生成装置、動画生成方法、及びプログラム | |
WO2014115522A1 (ja) | フレームレート変換装置及びフレームレート変換方法並びにフレームレート変換装置を備えた表示装置及び撮像装置 | |
JP2007158706A (ja) | 動画生成装置、動画生成方法、及びプログラム | |
JP2007095010A (ja) | 動画生成装置、動画生成方法、及びプログラム | |
JP4881045B2 (ja) | 動画生成装置、動画生成方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100831 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101004 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101026 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101117 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131126 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |