JP2008300997A - 画像再符号化装置および画像再符号化方法 - Google Patents
画像再符号化装置および画像再符号化方法 Download PDFInfo
- Publication number
- JP2008300997A JP2008300997A JP2007142626A JP2007142626A JP2008300997A JP 2008300997 A JP2008300997 A JP 2008300997A JP 2007142626 A JP2007142626 A JP 2007142626A JP 2007142626 A JP2007142626 A JP 2007142626A JP 2008300997 A JP2008300997 A JP 2008300997A
- Authority
- JP
- Japan
- Prior art keywords
- image
- encoding
- encoded
- picture
- overlapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
【解決手段】復号処理部10が符号化データを復号し、画像重複発生パターン検出部11が、重複画像を検出する。符号化手法選択部13は、重複画像の各画像の参照画像を、該
重複画像から選択し、これに従って、符号化処理部14が復号画像を符号化する。
【選択図】図1
Description
本発明に係る画像再符号化装置は、上記課題を解決するために、符号化された画像を再符号化する画像再符号化装置であって、該符号化された画像において、候補パターンに従って重複が発生しているか否かを判定して、該符号化された画像に含まれる重複画像を検出する重複画像検出手段と、検出された重複画像に含まれる画像のうち、少なくとも一の画像を、該重複画像に含まれる他の画像を参照画像として符号化する、画像符号化手段とを備えていることを特徴としている。
本発明に係る画像再符号化方法では、符号化された画像を復号する復号工程と、復号された画像において重複している画像を検出する重複画像検出工程と、検出された重複画像のうち、少なくとも1の画像を、他の重複画像を参照画像として符号化する画像符号化工程とを包含することを特徴としている。
符号化データは、MPEG2等の公知の符号化方式を用いて画像を符号化して得られるものであればよい。以下では、各画像の表示順序、およびピクチャタイプに関する情報を含んでいる一般的な符号化データを用いた場合について説明するが、本発明に適用できる符号化データはこれに限られない。例えば、表示順序に従ってデータが格納されている場合、および、すべてのピクチャタイプが同一である場合には、それぞれの情報を直接含んでいない符号化データであっても本発明に係る画像再符号化装置により再符号化し得ることを当業者は容易に理解する。すなわち、実質的に上記情報を取得し得る符号化データであれば、本発明に適用し得る。
復号処理部10は、符号化データを復号して、画像を画像バッファおよびバッファ管理部15に出力する。その際、復号した各画像についての、符号化順序、表示順序、およびピクチャタイプの情報を画像再符号化装置1の他の構成要素が参照できるようにする。なお、用語「符号化順序」とは、各画像についての情報の、符号化データ中における順序が意図される。
画像重複発生パターン検出部11は、画像バッファおよびバッファ管理部15に保持された画像、ならびに該画像に関連付けられた表示順序に基づいて、画像の重複がどのようなパターンに従って発生しているのかを検出する。
画像重複パターンとピクチャタイプ並び順の対応付け部12は、画像重複発生パターン検出部11から入力された信号、および画像バッファおよびバッファ管理部15等から取得する各フレームに関連付けられたピクチャタイプの情報に基づいて、重複している画像に対しそれぞれのピクチャタイプを関連付けたデータを符号化手法選択部13に出力する。
符号化手法選択部13は、画像重複パターンとピクチャタイプ並び順の対応付け部12から入力された、重複している画像に対しそれぞれのピクチャタイプを関連付けたデータに基づいて、該重複している画像の各画像を符号化する際の参照画像を選択する。
符号化処理部14は、復号処理部10によって復号された画像を、再符号化する。再符号化の方式は特に限定されなく、画面間予測符号化が可能な方式であればよい。当業者であれば、MPEG2、H.264等の画面間予測符号化が可能な符号化方式を容易に理解する。ただし、上述したように、Bピクチャを被参照画像とし得る符号化方法である場合、重複している画像が、符号化データにおいてBピクチャとして符号化されている画像のみであった場合も、符号化手法選択部13において参照画像を選択し得るので好ましい。また、後述するように、同一の画像を参照画像としたときに、効率よく符号化可能な手法(マクロブロックスキップ等)を用い得る符号化手法であれはより好ましい。
画像バッファおよびバッファ管理部15は、以下の制御を受け、画像データの保持、出力、または削除を行う。
・復号処理部10による復号画像の読み出し要求、書き込み要求、および削除許可;
・画像重複発生パターン検出部11による復号画像の読み出し要求;
・符号化手法選択部13における復号画像の読み出し要求;ならびに
・符号化処理部14における復号および再符号化画像の読み出し要求、書き込み要求、および削除許可。
本事例では、符号化データとして、3−2プルダウン処理された画像が符号化されたものが用いられる。3−2プルダウン処理とは、24fps(毎秒フレーム)素材を30fpsに変換する処理であり、5フレーム周期で重複画像が特定の位置に挿入される。3−2プルダウン処理がなされた画像の1周期分のパターン(フレーム3から7まで)を表1に示す。なお、同一の画像は同じ記号で表記し、異なる画像は異なる記号として表記した。表1に示すように、フレーム5のトップフィールド、および、フレーム7のボトムフィールドに、それぞれフレーム4のトップフィールド、および、フレーム6のボトムフィールドを同一の画像が挿入され、画像の重複が発生している。
名前 3−2プルダウン;
先頭(表示順) 3。
本事例では、符号化データとして、12fpsのアニメーションが30fpsに変換された画像が符号化されたものが用いられる。表8に上記アニメーション画像のパターンを示す。上記アニメーション画像では、事例1と同様、5フレーム周期で重複画像が特定の位置に挿入され、画像の重複が発生している。
名前 アニメーション1;
先頭(表示順) 2。
ある画像に対して特定のパターンでフィールドまたはフレームを繰り返し挿入して得られる画像を、繰り返し情報なしに画像圧縮符号化したデータに対し、
復号時の内部処理情報を復号処理の外部から参照可能とする復号手段と、
前記符号化データの復号画像からフィールドもしくはフレーム繰り返しの挿入によって生じるフィールドもしくはフレームの重複パターンを検出する手段と、
前記画像圧縮符号化において各フレームまたはフィールドが、画面内符号化または画面間順方向予測符号化または画面間双方向予測符号化によって符号化された事を示すピクチャタイプの並び順を検出する手段と、
前記フィールドまたはフレーム重複パターンと前記ピクチャタイプの並び順を対応付ける手段と、
前記対応付けの結果に基づいて、重複フィールドまたはフレームのうち画面間予測により符号化されていたものについては重複している他方のフィールドまたはフレームをそのフィールドまたはフレームの参照画像として選択し、重複していないフィールドまたはフレームのうち画面間予測により符号化されていたものについては動きベクトル探索などにより参照画像を選択する手段と、
前記参照画像選択の結果、重複フィールドまたはフレームのうち被参照画像とはならなかったフィールドまたはフレームの符号化において、符号化対象となる画素または領域と参照画像上の同じ位置の画素または領域とが同一の画素値または画像となるよう符号化手法を選択する手段と、
前記参照画像選択結果および前記符号化手法選択結果に基づいて復号画像を再符号化することを特徴とする画像再符号化装置。
上記第1の構成に記載の画像再符号化装置における参照画像の選択手段において、重複フィールドまたはフレームが全て画面間双方向予測符号化が行われていた場合には、先に符号化されていたフィールドまたはフレームを優先的に後のフィールドまたはフレームの参照画像として選択することを特徴とする画像再符号化装置。
上記第1の構成に記載の画像再符号化装置における参照画像の選択手段において、重複フィールドまたはフレームで画面内符号化が行われていたフィールドまたはフレームがあれば、そのフィールドまたはフレームを優先的に被参照画像として選択することを特徴とする画像再符号化装置。
上記第1の構成に記載の画像再符号化装置における符号化手法の選択において、符号化対象となる画素または領域について参照画像に対して動きがなく参照画像との差分がないものとする符号化手法を選択することを特徴とする画像再符号化装置。
10 復号処理部
11 画像重複発生パターン検出部
12 画像重複パターンとピクチャタイプ並び順の対応付け部
13 符号化手法選択部
14 符号化処理部
15 画像バッファおよびバッファ管理部
Claims (7)
- 符号化された画像を再符号化する画像再符号化装置であって、
該符号化された画像において、候補パターンに従って重複が発生しているか否かを判定して、該符号化された画像に含まれる重複画像を検出する重複画像検出手段と、
検出された重複画像に含まれる画像のうち、少なくとも一の画像を、該重複画像に含まれる他の画像を参照画像として符号化する、画像符号化手段とを備えていることを特徴とする画像再符号化装置。 - 上記画像符号化手段が、上記一の画像を、上記他の画像と同一の画像として符号化することを特徴とする請求項1に記載の画像再符号化装置。
- 上記画像符号化手段が、上記一の画像を、上記他の画像との間の差分が0である画像として符号化することを特徴とする請求項1〜2の何れか1項に記載の画像再符号化装置。
- 上記画像符号化手段が、上記一の画像を、上記他の画像に対し、動きベクトルが0である画像として符号化することを特徴とする請求項1〜3の何れか1項に記載の画像再符号化装置。
- 上記画像符号化手段が、上記重複画像に画面内符号化画像が含まれていた場合、該重複画像に含まれる画像のうち少なくとも一の画像を、該画面内符号化画像を参照画像として符号化することを特徴とする請求項1〜4の何れか1項に記載の画像再符号化装置。
- 上記画像符号化手段が、上記重複画像に画面内符号化画像が含まれていない場合、該重複画像に含まれる画像のうち少なくとも一の画像を、符号化順序が最先の画像を参照画像として符号化することを特徴とする請求項1〜5の何れか1項に記載の画像再符号化装置。
- 符号化された画像を再符号化する画像再符号化方法であって、
該符号化された画像に含まれる重複画像を検出する重複画像検出工程と、
検出された重複画像に含まれる画像のうち、少なくとも一の画像を、該重複画像に含まれる他の画像を参照画像として符号化する、画像再符号化工程とを包含することを特徴とする画像再符号化方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007142626A JP4856008B2 (ja) | 2007-05-29 | 2007-05-29 | 画像再符号化装置および画像再符号化方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007142626A JP4856008B2 (ja) | 2007-05-29 | 2007-05-29 | 画像再符号化装置および画像再符号化方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008300997A true JP2008300997A (ja) | 2008-12-11 |
JP4856008B2 JP4856008B2 (ja) | 2012-01-18 |
Family
ID=40174126
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007142626A Expired - Fee Related JP4856008B2 (ja) | 2007-05-29 | 2007-05-29 | 画像再符号化装置および画像再符号化方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4856008B2 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0630332A (ja) * | 1992-07-06 | 1994-02-04 | Sony Corp | 動画像の符号化及び復号化装置 |
JPH06197273A (ja) * | 1992-09-18 | 1994-07-15 | Sony Corp | ビデオ信号符号化方法及び装置、ビデオ信号復号化方法及び装置、又はビデオ信号記録メディア |
JPH11215491A (ja) * | 1998-01-28 | 1999-08-06 | Sony Corp | 信号処理装置及び方法 |
JPH11252566A (ja) * | 1998-02-27 | 1999-09-17 | Sony Corp | 画像信号復号方法および復号装置、画像信号符号化方法および符号化装置、画像信号処理方法および処理システム |
JP2000341686A (ja) * | 1999-05-31 | 2000-12-08 | Toshiba Corp | トランスコーダ装置 |
JP2004120415A (ja) * | 2002-09-26 | 2004-04-15 | Sony Corp | 動画像データストリームの変換装置及び方法 |
JP2005110083A (ja) * | 2003-10-01 | 2005-04-21 | Sony Corp | データ処理装置およびその方法と符号化装置 |
-
2007
- 2007-05-29 JP JP2007142626A patent/JP4856008B2/ja not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0630332A (ja) * | 1992-07-06 | 1994-02-04 | Sony Corp | 動画像の符号化及び復号化装置 |
JPH06197273A (ja) * | 1992-09-18 | 1994-07-15 | Sony Corp | ビデオ信号符号化方法及び装置、ビデオ信号復号化方法及び装置、又はビデオ信号記録メディア |
JPH11215491A (ja) * | 1998-01-28 | 1999-08-06 | Sony Corp | 信号処理装置及び方法 |
JPH11252566A (ja) * | 1998-02-27 | 1999-09-17 | Sony Corp | 画像信号復号方法および復号装置、画像信号符号化方法および符号化装置、画像信号処理方法および処理システム |
JP2000341686A (ja) * | 1999-05-31 | 2000-12-08 | Toshiba Corp | トランスコーダ装置 |
JP2004120415A (ja) * | 2002-09-26 | 2004-04-15 | Sony Corp | 動画像データストリームの変換装置及び方法 |
JP2005110083A (ja) * | 2003-10-01 | 2005-04-21 | Sony Corp | データ処理装置およびその方法と符号化装置 |
Also Published As
Publication number | Publication date |
---|---|
JP4856008B2 (ja) | 2012-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2010219983A (ja) | 画像処理装置および方法 | |
JP6429588B2 (ja) | 画像処理装置及び画像処理方法 | |
WO2009113280A1 (ja) | 画像処理装置およびそれを搭載した撮像装置 | |
WO2012137404A1 (ja) | 動画サムネイル表示装置及び動画サムネイル表示方法 | |
US20090034625A1 (en) | Image Decoder | |
US9756278B2 (en) | Image processing system and image capturing apparatus | |
US10419769B2 (en) | Image processing apparatus, image processing method, and non-transitory computer readable storage medium | |
JP2008259142A (ja) | 撮像装置、画像処理装置及びそれの制御方法、並びに画像処理システム | |
JPH11284948A (ja) | サムネイル作成方法及びサムネイル表示方法 | |
JP2009225361A (ja) | 記録装置および記録方法、ならびに、編集装置および編集方法 | |
KR101341983B1 (ko) | 화상 처리장치, 촬상 장치 및 화상 처리방법과 컴퓨터 프로그램이 기록된 컴퓨터 판독 가능한 기록매체 | |
JP5818599B2 (ja) | 動画記録装置 | |
KR100676723B1 (ko) | 영상 재생 장치 | |
JP2012170054A (ja) | 映像記録装置、映像再生装置および映像復旧装置 | |
JP4856008B2 (ja) | 画像再符号化装置および画像再符号化方法 | |
TW571588B (en) | Modifying video signals by converting non-intra pictures | |
KR102557384B1 (ko) | 전자장치 및 그 제어방법 | |
JP2011146847A (ja) | 画像再生制御装置、画像再生制御方法および撮像装置 | |
US10410674B2 (en) | Imaging apparatus and control method for combining related video images with different frame rates | |
JP2007049651A (ja) | 画像処理装置、及び制御方法 | |
JP2008090611A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2011139291A (ja) | 画像再生制御装置、画像再生制御方法および撮像装置 | |
JP2011139289A (ja) | 画像記録制御装置、画像記録制御方法および撮像装置 | |
JP2005176330A (ja) | 画像処理装置及びその制御方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体 | |
JP2009272929A (ja) | 映像符号化装置および映像符号化方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090805 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20101124 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101207 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110204 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110719 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110905 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111004 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111027 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141104 Year of fee payment: 3 |
|
R150 | Certificate of patent (=grant) or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |