JP2007129647A - 記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム - Google Patents

記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム Download PDF

Info

Publication number
JP2007129647A
JP2007129647A JP2005322405A JP2005322405A JP2007129647A JP 2007129647 A JP2007129647 A JP 2007129647A JP 2005322405 A JP2005322405 A JP 2005322405A JP 2005322405 A JP2005322405 A JP 2005322405A JP 2007129647 A JP2007129647 A JP 2007129647A
Authority
JP
Japan
Prior art keywords
image
motion parameter
recording
recording medium
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005322405A
Other languages
English (en)
Other versions
JP4529874B2 (ja
Inventor
Jun Hirai
純 平井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2005322405A priority Critical patent/JP4529874B2/ja
Priority to DE200610051469 priority patent/DE102006051469A1/de
Priority to KR20060108798A priority patent/KR20070049074A/ko
Priority to US11/594,004 priority patent/US7983530B2/en
Priority to GB0802203A priority patent/GB2443581B/en
Priority to CN200610143979A priority patent/CN100592778C/zh
Priority to GB0622183A priority patent/GB2432473B/en
Publication of JP2007129647A publication Critical patent/JP2007129647A/ja
Application granted granted Critical
Publication of JP4529874B2 publication Critical patent/JP4529874B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/29—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Systems (AREA)
  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】精度の高い動きパラメータを、１以上の画像処理で共用する。
【解決手段】記録制御部１３は、HDTVカメラ１２から供給されるHD画像から高精度な動きパラメータMP１を取得するとともに、HD画像をよりデータ量の少ないSD画像に変換し、HDD１４に記録する。一方、再生制御部１５は、HDD１４に記録された動きパラメータMP１を用いて、HDD１４に記録されたSD画像の画像処理を行う。本発明は、例えば、ハードディスクレコーダ等に適用することができる。
【選択図】図１

Description

本発明は、記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラムに関し、特に、例えば、あらかじめ高精度の動きパラメータを取得し、様々な画像処理で用いることができるようにした記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラムに関する。
例えば、画像を記録し、記録した画像を再生するハードディスクレコーダ等の記録再生装置によれば、記録する画像に対して、ハードディスクの記録容量を節約するための処理が行われることがある。
即ち、例えば、記録する画像のフレームを間引いたり、各フレームの画素を間引くことにより、画像のデータ量を少なくする処理が行われることがある。そして、その画像を再生する際には、データ量の少ない画像から、動きベクトル等の画像の動きに関する動きパラメータが取得され、ノイズリダクション等の画像処理に用いられる。
なお、画像の動きパラメータの１つである動きベクトルを取得する方法については、例えば、特許文献１に記載されている。
特開平８−１４９４８０号公報
ところで、データ量の少ない画像から動きパラメータを取得すると、データ量の多い画像から動きパラメータを取得する場合に比べて、動きパラメータの精度は低くなり、その後の画像処理で、適切な処理が行われなくなることが生じ得る。
本発明は、このような状況に鑑みてなされたものであり、高精度の動きパラメータを画像処理に用いることができるようにするものである。
本発明の第１の側面の記録再生装置は、画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生装置において、第１の画像から動きに関する動きパラメータを取得する第１の取得手段と、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換する変換手段と、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する記録制御手段と、前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出す読み出し制御手段と、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う画像処理手段とを備える。
前記第１の取得手段で取得される動きパラメータには、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含めることができる。
前記変換手段は、前記第１の画像のフレームを間引くことにより、または前記第１の画像の各フレームの画素を間引くことにより、前記第１の画像をデータ量の少ない第２の画像に変換することができる。
前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P(Interlace/Progressive)変換のうちの１以上を行うことができる。
第１の側面の記録再生装置には、前記第２の画像から動きパラメータを取得する第２の取得手段と、前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報を取得する差分情報取得手段とをさらに設けることができ、前記記録制御手段には、前記動きパラメータ情報として、前記差分情報を前記記録媒体に記録させることができる。この場合、第１の側面の記録再生装置には、前記記録媒体から前記動きパラメータ情報として読み出される前記差分情報と、前記記録媒体から読み出される前記第２の画像から得られる前記第２の画像の動きパラメータとから、前記第１の画像の動きパラメータを復元する復元手段がさらに設けられる。
画像を再生する再生装置において、画像処理を行う画像処理手段が、前記記録媒体から読み出された前記第２の画像の画像処理を行う場合に、前記差分情報取得手段は、前記第１の画像の動きパラメータのうちの、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得することができる。
第１の側面の記録再生装置は、前記第２の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段と、前記圧縮データを、前記第２の画像に解凍する解凍手段とをさらに設けることができ、前記記録制御手段には、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録させ、前記読み出し制御手段には、前記記録媒体から前記圧縮データと前記差分情報とを読み出させることができる。
また、第１の側面の記録再生装置には、前記第1の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段と、前記圧縮データを前記第２の画像に解凍する解凍手段と、前記解凍手段により解凍された前記第２の画像から動きパラメータを取得する第３の取得手段とをさらに設けることができ、この場合、前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録し、前記読み出し制御手段は、前記記録媒体から前記圧縮データと前記差分情報とを読み出し、前記復元手段には、前記差分情報と、前記第３の取得手段により取得された前記第２の画像の動きパラメータとを用いて、前記第１の画像の動きパラメータを復元する。
本発明の第１の側面の記録再生方法、またはプログラムは、画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生装置の記録再生方法、または画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生処理をコンピュータに実行させるプログラムにおいて、第１の画像から動きに関する動きパラメータを取得し、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録し、前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出し、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行うステップを含む。
以上のような第１の側面の記録再生装置、記録再生方法、またはプログラムにおいては、前記第１の画像から動きに関する動きパラメータを取得し、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する。そして、前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出し、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う。
本発明の第２の側面の記録装置は、画像を記録媒体に記録する記録装置において、第１の画像から動きに関する動きパラメータを取得する第１の取得手段と、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換する変換手段と、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する記録制御手段とを備える。
第２の側面の記録装置には、前記記録媒体に記録された前記動きパラメータ情報と前記第２の画像とを、画像を再生する他の装置に送信する送信制御手段をさらに設けることができる。
前記第１の取得手段で取得される動きパラメータには、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含めることができる。
前記変換手段は、前記第１の画像のフレームを間引くことにより、または前記第１の画像の各フレームの画素を間引くことにより、前記第１の画像をデータ量の少ない第２の画像に変換することができる。
第２の側面の記録装置には、前記第２の画像から動きパラメータを取得する第２の取得手段と、前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報を取得する差分情報取得手段とをさらに設けることができ、前記記録制御手段には、前記動きパラメータ情報として、前記差分情報を前記記録媒体に記録させることができる。
画像を再生する再生装置において、画像処理を行う画像処理手段が、前記記録媒体から読み出された前記第２の画像の画像処理を行う場合に、前記差分情報取得手段は、前記第１の画像の動きパラメータのうちの、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得することができる。
第２の側面の記録装置には、前記第２の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段をさらに設けることができ、前記記録制御手段には、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録させることができる。
また、第２の側面の記録装置には、前記第１の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段をさらに設けることができ、前記記録制御手段には、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録させることができる。
本発明の第２の側面の記録方法、またはプログラムは、画像を記録媒体に記録する記録装置の記録方法、または画像を記録媒体に記録する記録処理をコンピュータに実行させるプログラムにおいて、第１の画像から動きに関する動きパラメータを取得し、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録するステップを含む。
以上のような第２の側面の記録装置、記録方法、またはプログラムにおいては、前記第１の画像から動きに関する動きパラメータを取得し、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換する。そして、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する。
本発明の第３の側面の再生装置には、画像を再生する再生装置において、第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出す読み出し制御手段と、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う画像処理手段とを備える。
第３の側面の再生装置には、他の装置から送信されてくる前記動きパラメータ情報と前記第２の画像とを受信する受信制御手段をさらに設けることができ、前記記録媒体には、前記受信制御手段で受信された前記動きパラメータ情報と前記第２の画像とを記録させることができる。
前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P(Interlace/Progressive)変換のうちの１以上を行うことができる。
前記記録媒体に、前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報とが、前記動きパラメータ情報として記録されている場合、前記記録媒体から前記動きパラメータ情報として読み出される前記差分情報と、前記記録媒体から読み出される前記第２の画像から得られる前記第２の画像の動きパラメータとから、前記第１の画像の動きパラメータを復元する復元手段がさらに設けられる。
前記記録媒体に、前記第２の画像の動きパラメータを用いて前記第２の画像を圧縮することにより得られた前記第２の画像の圧縮データが記録されている場合、前記圧縮データを前記第２の画像に解凍する解凍手段がさらに設けられる。
前記記録媒体には、前記第１の画像の動きパラメータを用いて前記第２の画像を圧縮することにより得られた前記第２の画像の圧縮データが記録されており、前記圧縮データを前記第２の画像に解凍する解凍手段と、前記解凍手段により解凍された前記第２の画像から動きパラメータを取得する取得手段とをさらに設けることができ、この場合、前記復元手段は、前記差分情報と、前記取得手段により取得された前記第２の画像の動きパラメータとを用いて、前記第１の画像の動きパラメータを復元する。
本発明の第３の側面の再生方法、またはプログラムは、画像を再生する再生装置の再生方法、または画像を再生する再生処理をコンピュータに実行させるプログラムにおいて、第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体から、前記第２の画像と前記動きパラメータ情報とを読み出し、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行うステップを含む。
以上のような第３の側面の再生装置、再生方法、またはプログラムにおいては、前記第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体から、前記第２の画像と前記動きパラメータ情報とを読み出す。そして、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う。
本発明によれば、精度の高い動きパラメータを画像処理に用いることができる。
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書又は図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書又は図面に記載されていることを確認するためのものである。従って、明細書又は図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
本発明の第１の側面の記録再生装置(例えば、図１の記録再生装置１１)は、画像を記録媒体(例えば、図１のHDD１４)に記録し、前記記録媒体から前記画像を再生する記録再生装置において、第１の画像から動きに関する動きパラメータを取得する第１の取得手段(例えば、図２のMP１取得部２２)と、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換する変換手段（例えば、図２の間引き部２３）と、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する記録制御手段(例えば、図２の入出力インタフェース２１)と、前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出す読み出し制御手段(例えば、図４の入出力インタフェース４１)と、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う画像処理手段(例えば、図４の画像処理部４３)とを備える。
本発明の第１の側面の記録再生装置は、前記第２の画像から動きパラメータを取得する第２の取得手段(例えば、図１３のMP２取得部１０３)と、前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報を取得する差分情報取得手段(例えば、図１３のMPd差分情報取得部１０４)とをさらに備え、前記記録制御手段は、前記動きパラメータ情報として、前記差分情報を前記記録媒体に記録し、前記記録媒体から前記動きパラメータ情報として読み出される前記差分情報と、前記記録媒体から読み出される前記第２の画像から得られる前記第２の画像の動きパラメータとから、前記第１の画像の動きパラメータを復元する復元手段(例えば図１６のMP１復元部１２５)をさらに備えることができる。
本発明の第１の側面の記録再生装置は、前記第２の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段(例えば、図６の圧縮部５５)と、前記圧縮データを、前記第２の画像に解凍する解凍手段(例えば、図１１の解凍部８３)とをさらに備え、前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録し、前記読み出し制御手段は、前記記録媒体から前記圧縮データと前記差分情報とを読み出すことができる。
また、本発明の第１の側面の記録再生装置は、前記第1の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段(例えば、図１３の圧縮部１０５)と、前記圧縮データを前記第２の画像に解凍する解凍手段(例えば、図１６の解凍部１２３)と、前記解凍手段により解凍された前記第２の画像から動きパラメータを取得する第３の取得手段(例えば、図１６のMP２取得部１２４)とをさらに備え、前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録し、前記読み出し制御手段は、前記記録媒体から前記圧縮データと前記差分情報とを読み出し、前記復元手段は、前記差分情報と、前記第３の取得手段により取得された前記第２の画像の動きパラメータとを用いて、前記第１の画像の動きパラメータを復元することができる。
本発明の第１の側面の記録再生方法、またはプログラムは、画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生装置の記録再生方法、または画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生処理をコンピュータに実行させるプログラムにおいて、第１の画像から動きに関する動きパラメータを取得し(例えば、図３のステップS１１)、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し(例えば、図３のステップS１２)、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録し(例えば、図３のステップS１４)、前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出し(例えば、図５のステップS２１)、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う(例えば、図５のステップS２３)ステップを含む。
本発明の第２の側面の記録装置(例えば、図１８の記録装置１４１)は、画像を記録媒体(例えば、図１８のHDD１４４)に記録する記録装置において、第１の画像から動きに関する動きパラメータを取得する第１の取得手段(例えば、図２のMP１取得部２２)と、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換する変換手段(例えば、図２の間引き部２３)と、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する記録制御手段(例えば、図２の入出力インタフェース２１)とを備える。
本発明の第２の側面の記録装置は、前記記録媒体に記録された前記動きパラメータ情報と前記第２の画像とを、画像を再生する他の装置(例えば、図１８の再生装置１５１)に送信する送信制御手段(例えば、図１８の送信制御部１４５)をさらに備えることができる。
本発明の第２の側面の記録装置は、前記第２の画像から動きパラメータを取得する第２の取得手段(例えば、図１３のMP２取得部１０３)と、前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報を取得する差分情報取得手段(例えば、図１３のMPd差分情報取得部１０４)とをさらに備え、前記記録制御手段は、前記動きパラメータ情報として、前記差分情報を前記記録媒体に記録することができる。
本発明の第２の側面の記録装置は、前記第２の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段(例えば、図６の圧縮部５５)をさらに備え、前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録することができる。
また、本発明の第２の側面の記録装置は、前記第１の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段(例えば、図１３の圧縮部１０５)をさらに備え、前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録することができる。
本発明の第２の側面の記録方法、またはプログラムは、画像を記録媒体に記録する記録装置の記録方法、または画像を記録媒体に記録する記録処理をコンピュータに実行させるプログラムにおいて、第１の画像から動きに関する動きパラメータを取得し(例えば、図３のステップS１１)、前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し(例えば、図３のステップS１２)、前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する(例えば、図３のステップS１４)ステップを含む。
本発明の第３の側面の再生装置(例えば、図１８の再生装置１５１)は、画像を再生する再生装置において、第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体(例えば、図１８のHDD１５３)から、前記動きパラメータ情報と前記第２の画像とを読み出す読み出し制御手段(例えば、図４の入出力インタフェース４１)と、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う画像処理手段(例えば、図４の画像処理部４３)とを備える。
本発明の第３の側面の再生装置は、他の装置(例えば、図１８の記録装置１４１)から送信されてくる前記動きパラメータ情報と前記第２の画像とを受信する受信制御手段(例えば、図１８の受信制御部１５２)をさらに備え、前記記録媒体には、前記受信制御手段で受信された前記動きパラメータ情報と前記第２の画像とを記録させることができる。
前記記録媒体には、前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報とが、前記動きパラメータ情報として記録されており、前記記録媒体から前記動きパラメータ情報として読み出される前記差分情報と、前記記録媒体から読み出される前記第２の画像から得られる前記第２の画像の動きパラメータとから、前記第１の画像の動きパラメータを復元する復元手段(例えば、図１１のMP１復元部８４)をさらに備えることができる。
前記記録媒体には、前記第２の画像の動きパラメータを用いて前記第２の画像を圧縮することにより得られた前記第２の画像の圧縮データが記録されており、前記圧縮データを前記第２の画像に解凍する解凍手段(例えば、図１１の解凍部８３)をさらに備えることができる。
前記記録媒体には、前記第１の画像の動きパラメータを用いて前記第２の画像を圧縮することにより得られた前記第２の画像の圧縮データが記録されており、前記圧縮データを前記第２の画像に解凍する解凍手段(例えば、図１６の解凍部１２３)と、前記解凍手段により解凍された前記第２の画像から動きパラメータを取得する取得手段(例えば、図１６のMP２取得部１２４)とをさらに備え、前記復元手段は、前記差分情報と、前記取得手段により取得された前記第２の画像の動きパラメータとを用いて、前記第１の画像の動きパラメータを復元することができる。
本発明の第３の側面の再生方法、またはプログラムは、画像を再生する再生装置の再生方法、または画像を再生する再生処理をコンピュータに実行させるプログラムにおいて、第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体から、前記第２の画像と前記動きパラメータ情報とを読み出し(例えば、図５のステップS２１)、前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う(例えば、図５のステップS２３)ステップを含む。
次に、図面を参照して、本発明の実施の形態について説明する。
図１は、本発明を適用した記録再生システムの一実施の形態の構成例を示すブロック図である。
記録再生システムは、記録再生装置１１、HDTV(High Definition TeleVision)カメラ１２、およびモニタ１６から構成され、記録再生装置１１は、記録制御部１３、HDD(Hard Disk Drive)１４、および再生制御部１５により構成される。なお、記録再生装置１１は、ハードディスクレコーダや、いわゆるホームネットワークに接続されるファイルサーバ等に適用することができる。
HDTVカメラ１２は、HDTV信号によるHD(高解像度)画像を撮像し、記録制御部１３に供給する。
記録制御部１３は、HDTVカメラ１２から供給されるHD画像を、HDD１４に供給して記録させる。また、記録制御部１３は、HDD１４に記録されたHD画像を読み出して、HD画像の動きに関する動きパラメータを取得する処理をし、さらに、HD画像を、HD画像よりデータ量の少ない画像に変換する。そして、記録制御部１３は、データ量の少ない画像と動きパラメータに関する動きパラメータ情報とをHDD１４に供給して記録させる。
ここで、動きパラメータとしては、例えば、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを採用することができる。
なお、記録制御部１３は、HDTVカメラ１２から供給されるHD画像を一旦HDD１４に記録せずに、HDTVカメラ１２から供給されるHD画像から、直接、動きパラメータ情報を取得する処理をし、その後、HDTVカメラ１２からのＨＤ画像を、そのＨＤ画像よりデータ量の少ない画像に変換して、データ量の少ない画像と動きパラメータ情報とをHDD１４に記録してもよい。
HDD１４は、内蔵するハードディスクに、記録制御部１３から供給されるデータ量の少ない画像と動きパラメータ情報とを記録する。なお、データ量の少ない画像と動きパラメータ情報とを記録する記録媒体としては、ハードディスク以外のディスク状記録媒体や、半導体メモリ等を採用することができる。
再生制御部１５は、HDD１４からデータ量の少ない画像と動きパラメータ情報とを読み出し、動きパラメータ情報から得られる動きパラメータを用いて、データ量の少ない画像に画像処理を施す。さらに、再生制御部１５は、画像処理を行うことによって得られた画像をモニタ１６に供給する。
ここで、動きパラメータ情報から得られる１つ、または複数の動きパラメータは、１の画像処理のみで用いることもできるし、複数の画像処理で共用することもできる。例えば、動きパラメータ情報から得られる動きパラメータである動きベクトルや輝度の変化の程度を表す輝度変化等は、ノイズリダクションやアップコンバート等の画像処理に共用することができる。
また、動きパラメータを用いて行う画像処理としては、例えば、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、I/P(Interlace/Progressive)変換等がある。
モニタ１６は、再生制御部１５から供給される画像を表示する。
図２は、図１の記録制御部１３の構成例を示すブロック図である。
入出力インタフェース２１は、HDTVカメラ１２から供給されるHD画像を受信し、MP(Moving Parameter)１取得部２２またはHDD１４に供給する。さらに、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。また、入出力インタフェース２１は、マルチプレックス部２４から供給される画像や動きパラメータ情報を受信し、HDD１４に供給することで記録させる。
MP１取得部２２は、高精度な動きパラメータを取得する為、入出力インタフェース２１を介してHDD１４から供給される高フレームレートで、高解像度のＨＤ画像から動きベクトル等の動きパラメータMP１を検出(算出)することにより取得し、マルチプレックス部２４に供給する。ここで、MP１取得部２２は、HDD１４に既に記録されているHD画像を対象に動きパラメータMP１の検出を行うので、例えば、多くのフレームを用いて、高精度の動きパラメータMP１を取得することができる。
即ち、例えば、動きパラメータMP１のうちの動きベクトルに注目した場合、MPEG(Moving Picture Expert Group)では、２フレームまたは３フレームを対象として処理を行うことにより、動きベクトルの検出が行われる。一方、MP１取得部２２は、HDD１４に既に記録されたHD画像から、動きベクトルを検出するので、リアルタイムで動きベクトルを検出する場合と比較して、時間的に十分な余裕がある。そのため、４以上のフレームを用いて、動きベクトルの検出を行うことができ、これにより、動きの傾向をより精度良く予測し、高精度の動きベクトルを取得することができる。
MP１取得部２２は、上述のように、入出力インタフェース２１を介して、HDD１４から供給されるHD画像から動きパラメータMP１を取得するほか、そのHD画像を、間引き部２３に供給する。
間引き部２３は、MP１取得部２２から供給されたHD画像のフレームを間引くことにより、または各フレームの画素を間引くことにより、HD画像をデータ量の少ない間引き画像に変換し、その間引き画像をマルチプレックス部２４に供給する。
即ち、間引き部２３は、例えば、HD画像の連続する２フレーム以上のNフレーム毎にN−1フレームを間引くことにより、HD画像を、そのHD画像よりも低フレームレートの間引き画像に変換する。あるいは、間引き部２３は、例えば、HD画像の連続する各フレームの隣接する２画素以上のM画素を１画素に間引くことにより、HD画像を、そのHD画像よりも低解像度の間引き画像に変換する。
なお、間引き部２３は、その他、HD画像のフレームを間引くとともに、各フレームの画素を間引いて、HD画像を、データ量の少ない間引き画像に変換することができる。
マルチプレックス部２４は、MP１取得部２２から供給された、動きパラメータ情報としての動きパラメータMP１と、間引き部２３から供給された間引き画像とをマルチプレックス(多重化)し、その結果得られる多重化データを、入出力インタフェース２１に供給する。
ここで、入出力インタフェース２１は、上述したようにしてマルチプレックス部２４で動きパラメータ情報と間引き画像とがマルチプレックスされることにより得られる多重化データを、HDD１４に供給し記録させる。
なお、MP１取得部２２は、HDTVカメラ１２から、入出力インタフェース２１を介して供給されるHD画像から、直接(HDD１４に記録されたHD画像からではなく)、動きパラメータMP１を取得する処理をしてもよい。
また、マルチプレックス部２４は、MP１取得部２２から供給された、動きパラメータ情報としての動きパラメータMP１と、間引き部２３から供給された間引き画像とを、そのまま、入出力インタフェース２１に供給してもよい。
この場合、入出力インタフェース２１は、マルチプレックス部２４から供給された、多重化されていない動きパラメータ情報と間引き画像とを、例えば、別々のファイルとして、HDD１４に記録する。
次に、図３のフローチャートを参照して、図２の記録制御部１３における処理について説明する。
記録制御部１３は、HDTVカメラ１２から、HD画像が供給されると、そのHD画像を受信し、HDD１４に供給して記録させる。そして、記録制御部１３は、例えば、ユーザが図示せぬ操作部を操作した場合に、あるいは、特に行うべき処理が(ほとんど)ない場合に、図３のフローチャートにしたがった処理を行う。
即ち、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。ステップS１１において、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像から動きパラメータMP１を取得し、マルチプレックス部２４に供給する。また、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像を、間引き部２３に供給し、ステップS１２に進む。
ステップS１２において、間引き部２３は、MP１取得部２２から供給されたHD画像のフレームを間引くことにより、または各フレームの画素を間引くことにより、HD画像を、データ量の少ない間引き画像に変換して、マルチプレックス部２４に供給し、ステップS１３に進む。
ステップS１３において、マルチプレックス部２４は、MP１取得部２２からの、動きパラメータ情報としての動きパラメータMP１と、間引き部２３から供給された間引き画像とをマルチプレックスし、その結果得られる多重化データを入出力インタフェース２１に供給して、ステップS１４に進む。
ステップS１４において、入出力インタフェース２１は、マルチプレックス部２４からの多重化データをＨＤＤ１４に供給して記録させ、処理を終了する。
図４は、図１の再生制御部１５の構成例を示すブロック図である。
入出力インタフェース４１は、例えば、ユーザが図示せぬ操作部を操作することにより与えられる再生の指令に応じて、HDD１４から多重化データを読み出し、デマルチプレックス部４２に供給する。
デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、間引き画像と動きパラメータ情報とにデマルチプレックス(分離)し、画像処理部４３に供給する。
画像処理部４３は、デマルチプレックス部４２から供給された動きパラメータ情報である、HD画像の動きパラメータＭＰ１を用いて、デマルチプレックス部４２から供給された間引き画像の画像処理をし、その画像処理によって得られた画像を、モニタ１６に供給する。画像処理部４３は、高品質(高フレームレートで、高解像度)のHD画像から得られた高精度な動きパラメータＭＰ１を画像処理に用いることで、間引き画像に対して、適切な画像処理を施すことができる。
具体的には、例えば、画像処理部４３は、ノイズリダクション部４４と補間部４５とを有している。ノイズリダクション部４４は、高精度な動きパラメータＭＰ１を用いて、間引き画像の各フレームについて、そのフレーム画像が、ある程度以上の動きがある動き画像であるか、または動きが(ほとんど)ない静画像であるかを判断する。また、ノイズリダクション部４４は、動き画像と判断されたフレームの画像には、そのフレーム内の画像だけを用いてノイズ低減(ノイズリダクション)処理をし、静画像と判断されたフレームの画像には、そのフレームを含む前後の複数のフレームの画像を用いてノイズ低減処理をする。さらに、ノイズリダクション部４４は、ノイズ低減処理を施した間引き画像を、補間部４５に供給する。なお、ノイズリダクション部４４は、動きパラメータＭＰ１のうちの、例えば、動きベクトル、あるいは輝度値の変化を表す輝度変化を用いて、動き画像であるか静画像であるかを判断する。
補間部４５は、ノイズリダクション部４４から供給された間引き画像に対して、デマルチプレックス部４２から供給された高精度な動きパラメータＭＰ１のうちの、例えば、動きベクトル等を用いて、例えば、フレームを補間する補間処理、または、各フレームの画素を補間する補間処理を施すことにより、間引き画像を、高品質のHD画像に変換して、モニタ１６に供給する。
次に、図５のフローチャートを参照して、図４の再生制御部１５における処理について説明する。
例えば、ユーザが図示せぬ操作部を操作することにより、画像の再生が、入出力インタフェース４１に指令されると、ステップS２１において、入出力インタフェース４１は、HDD１４から多重化データを読み出させ、デマルチプレックス部４２に供給し、ステップS２２に進む。
ステップS２２において、デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、間引き画像と動きパラメータＭＰ１とにデマルチプレックスし、画像処理部４３に供給して、ステップS２３に進む。
ステップS２３において、画像処理部４３は、デマルチプレックス部４２からの動きパラメータである高精度なＭＰ１を用いて、同じくデマルチプレックス部４２からの間引き画像に画像処理を施し、モニタ１６に供給して、処理を終了する。
即ち、画像処理部４３において、ノイズリダクション部４４は、動きパラメータMP１を用いて、間引き画像に対して、ノイズ低減処理を施し、その結果得られる間引き画像を、補間部４５に供給する。補間部４５は、動きパラメータMP１を用いて、ノイズリダクション部４４からの間引き画像に対して補間処理を施すことにより、間引き画像をHD画像に変換し、モニタ１６に供給する。モニタ１６では、補間部４５(画像処理部４３)からのHD画像が表示される。
図６は、図１の記録制御部１３の他の構成例を示すブロック図である。
なお、図中、図２の場合に対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
即ち、図６の記録制御部１３は、間引き部２３に代えて、フレーム間引き部５２が設けられており、さらに、MP２取得部５３、MPd差分情報取得部５４、および圧縮部５５が新たに設けられているほかは、図２の場合と同様に構成されている。
フレーム間引き部５２には、MP１取得部２２から、HD画像が供給される。フレーム間引き部５２は、MP１取得部２２からのHD画像のフレームを間引くことにより、HD画像をデータ量の少ない間引き画像に変換し、MP２取得部５３に供給する。
MP２取得部５３は、フレーム間引き部５２から供給された間引き画像から、間引き画像の動きベクトル等の、間引き画像の動きに関する動きパラメータMP２を検出(算出)することにより取得し、MPd差分情報取得部５４に供給する。さらに、MP２取得部５３は、間引き画像と動きパラメータＭＰ２とを、圧縮部５５に供給する。
MPd差分情報取得部５４には、MP１取得部２２から動きパラメータMP１が供給されるほか、MP２取得部５３から動きパラメータMP２が供給される。MPd差分情報取得部５４は、MP１取得部２２から供給された動きパラメータMP１と、MP２取得部５３から供給された動きパラメータMP２との差分に関する差分情報MPdを検出(算出)することで取得し、マルチプレックス部２４に供給する。
なお、動きパラメータMP１と動きパラメータMP２とに同一種類のパラメータが存在する場合には、そのパラメータについては、そのパラメータ同士の差分値を計算することができるのであれば、動きパラメータ情報に関する差分情報MPdとして、そのパラメータ同士の差分値を採用することができる。また、動きパラメータMP１には存在するが、動きパラメータMP２には存在しないパラメータについては、動きパラメータMP１に存在するパラメータそのものを、動きパラメータ情報に関する差分情報MPdとして採用することができる。即ち、動きパラメータ情報に関する差分情報MPdは、その動きパラメータ情報に関する差分情報MPdと動きパラメータMP２とを用いて、動きパラメータMP１を復元することができれば、どのような情報であっても良い。
上述したように、動きパラメータ情報としての差分情報MPdとしては、動きパラメータMP１と動きパラメータMP２とのパラメータ同士の差分値を採用することもできるし、動きパラメータMP１そのものを採用することもできる。一般的に、動きパラメータMP１と動きパラメータMP２との差分値は、動きパラメータMP１そのものよりもデータ量が少なくなるため、動きパラメータMP１と動きパラメータMP２との差分値を、動きパラメータ情報としてHDD１４に記録する場合には、動きパラメータそのものを、動きパラメータ情報としてHDD１４に記録する場合と比較して、HDD１４の記憶容量の節約になり、さらに、動きパラメータ情報を伝送するにあたり、その伝送に要する時間の短縮化を図ることができる。
さらに、動きパラメータMP１のうちの、図１１の画像処理部４３で用いられる動きパラメータMP１のみについて、動きパラメータMP２との差分値を動きパラメータ情報として採用した場合には、より動きパラメータ情報の伝送に要する時間の短縮化を図り、また、HDD１４の記憶容量を節約することができる。
圧縮部５５は、MP２取得部５３から供給された間引き画像を、同じくMP２取得部５３から供給された動きパラメータMP２を用いて、例えば、MPEG方式で圧縮する等して得られた圧縮データを、マルチプレックス部２４に供給する。
なお、図６では、マルチプレックス部２４は、MPd差分情報取得部５４から供給された差分情報MPdを動きパラメータ情報として、その動きパラメータ情報としての差分情報MPdと、圧縮部５５から供給された間引き画像の圧縮データとをマルチプレックスし、その結果得られる多重化データを入出力インタフェース２１に供給する。
次に、図７を参照して、図６のＭＰd差分情報取得部５４における処理について説明する。
例えば、フレーム間引き部５２において、HD画像の連続する２フレームを１フレームに間引く１/２間引きによって、HD画像が、間引き画像に変換されることとすると共に、動きパラメータMP１およびMP２として、動きベクトルを考えることとする。
また、HD画像の先頭からnフレーム目のフレームを、第nフレームということとし、さらに、第nフレームから第n'(>n)フレームへの動きベクトルを、動きベクトルmv(n,n')と表すこととする。
いま、図７に示すように、HD画像について、第nフレーム、第n＋１フレーム、第n＋２フレームの連続する３フレームに注目し、HD画像が間引き画像に変換されるときに間引かれるフレームが、第n＋１フレームであるとすると、HD画像については、動きベクトルmv(n,n+1)およびmv(n+1,n+2)が検出され、間引き画像については、動きベクトルmv(n,n+2)が検出される。
MPd差分情報取得部５４は、間引き画像の動きベクトルmv(n,n+2)に基づき、例えば、その1/2のベクトル1/2×mv(n,n+2)を、HD画像の動きベクトルmv(n,n+1)の予測値mv'(n,n+1)として求めると共に、動きベクトルmv(n+1,n+2)の予測値mv'(n+1,n+2)として求める。さらに、MPd差分情報取得部５４は、動きベクトルmv(n,n+1)とその予測値mv'(n,n+1)との差分値mv(n,n+1)−mv'(n,n+1)を求め、その差分値mv(n,n+1)−mv'(n,n+1)を、動きベクトルmv(n,n+1)の差分情報MPd(n,n+1)とすると共に、動きベクトルmv(n+1,n+2)とその予測値mv'(n+1,n+2)との差分値mv (n+1,n+2)−mv'(n+1,n+2)を求め、その差分値mv(n+1,n+2)−mv'(n+1,n+2)を、動きベクトルmv(n+1,n+2)の差分情報MPd(n+1,n+2)とする。
なお、HD画像の動きベクトルmv(n,n+1)の予測値mv'(n,n+1)は、間引き画像の動きベクトルmv(n,n+2)から求めることができ、HD画像の動きベクトルmv(n,n+1)は、その予測値mv'(n,n+1)と、差分情報MPd(n,n+1)としての差分値mv(n,n+1)−mv'(n,n+1)とから求めることができる。即ち、HD画像の動きベクトルmv(n,n+1)は、間引き画像の動きベクトルmv(n,n+2)と、差分情報MPd(n,n+1)としての差分値mv(n,n+1)−mv'(n,n+1)とを加算することにより復元する(求める)ことができる。
HD画像の動きベクトルmv(n+1,n+2)も、同様に、間引き画像の動きベクトルmv(n,n+2)と、差分情報MPd(n+1,n+2)としての差分値mv(n+1,n+2)−mv'(n+1,n+2)とを用いて復元することができる。
後述する図１１のMP１復元部８４では、以上のようにして、HD画像の動きベクトルmv(n,n+1)やmv(n+1,n+2)を復元する。
ここで、図７において、理想的には、式mv(n,n+1)+mv(n+1,n+2)=mv(n,n+2)が成り立つ。この場合、間引き画像の動きベクトルmv(n,n+2)の他に、HD画像の２つの動きベクトルmv(n,n+1)またはmv(n+1,n+2)のうちのいずれか一方の動きベクトルがあれば、他方の動きベクトルを求めることができる。
従って、差分情報MPd(n,n+1)と差分情報MPd(n+1,n+2)との両方がなくても、いずれか一方の差分情報があれば、その差分情報と、間引き画像の動きベクトルmv(n,n+2)とを用いて、その一方の差分情報に対応するHD画像の動きベクトルを復元し、さらに、その一方の差分情報に対応するHD画像の動きベクトルと、間引き画像の動きベクトルmv(n,n+2)とを用いて、他方の差分情報に対応するHD画像の動きベクトルを復元することができる。
以上から、MPd差分情報取得部５４では、必ずしも、動きベクトルmv(n,n+1)の差分情報MPd(n,n+1)と、動きベクトルmv(n+1,n+2)の差分情報MPd(n+1,n+2)との両方を、動きパラメータ情報とする必要はなく、いずれか一方の差分情報だけを動きパラメータ情報とすればよい。
この場合、差分情報MPd(n,n+1)と差分情報MPd(n+1,n+2)との両方を、動きパラメータ情報とする場合と比較して、動きパラメータ情報のデータ量が少なくなるため、動きパラメータ情報を伝送するのに要する時間をより短縮し、また、HDD１４の記憶容量をより節約することができる。
次に、図８と図９とを参照して、図６のMPd差分情報取得部５４における処理について、さらに説明する。
なお、図８および図９においても、図７と同様に、動きパラメータＭＰ１と動きパラメータＭＰ２とは、動きベクトルだけを考えることとする。また、HD画像は、１１フレームで構成されていることとし、フレーム間引き部５２は、HD画像の偶数番目のフレーム(以下、偶数フレームという)を間引くことにより、HD画像を間引き画像に変換することとする。さらに、動きベクトルは、HD画像の第１フレームから第６フレームにかけて、１フレームあたりに１画素だけ上方向に等速で移動し、その後、第６フレームから第１１フレームにかけて、１フレームあたり２画素だけ下方向に等速で移動する移動物体を対象に検出されることとする。
図８は、HD画像の第１フレームの移動物体の位置を基準とする各フレームにおける移動物体の位置(以下、ＨＤ画像位置という)、HD画像の奇数番目のフレーム(以下、奇数フレームという)から、その次の奇数フレームへの動きベクトル、つまり、間引き画像の動きベクトルから、その２つの奇数フレームの間の偶数フレームにおける移動物体の位置を予測した位置(以下、間引き画像予測内挿位置という)、および、ＨＤ画像位置と間引き画像予測内挿位置との誤差を表す内挿誤差を示している。
即ち、図８において、HD画像位置は●印で、間引き画像予測内挿位置は■印で、内挿誤差は▲印で、それぞれ示してある。なお、間引き画像予測内挿位置は、偶数フレームについてしか存在しないが、図８では、便宜上、奇数フレームについても、間引き画像予測内挿位置を示してある。
また、偶数フレームについての間引き画像予測内挿位置としては、その偶数フレームの前後の奇数フレームにおける移動物体の位置の平均値が採用されており、奇数フレームについての間引き画像予測内挿位置としては、その奇数フレームのHD画像位置がそのまま採用されている。
図９は、HD画像の何番目のフレームであるかを表すフレーム番号、HD画像位置、HD画像の各フレームにおける移動物体の動きを表す動きベクトル、HD画像の各フレームの動きベクトルにより予測される次のフレームにおける移動物体の位置を表す予測位置、間引き画像の各フレームにおける移動物体の動きを表す動きベクトル、間引き画像の各フレームの動きベクトルから予測される次のフレームにおける移動物体の位置を表す間引き画像予測位置、間引き画像予測内挿位置、および、内挿誤差を示している。
即ち、図９において、左から１番目の欄(列)は、HD画像のフレームのフレーム番号を表し、左から２番目の欄は、HD画像の各フレームにおける移動物体の位置を表している。また、左から３番目の欄は、HD画像の各フレームに対して検出される移動物体の動きベクトルを表し、左から４番目の欄は、HD画像の各フレームの移動物体の動きベクトルから予測される、HD画像の次のフレームにおける移動物体の予測位置を表している。
さらに、左から５番目の欄は、間引き画像の各フレームに対して検出される移動物体の動きベクトルを表し、左から６番目の欄は、間引き画像の各フレームの移動物体の動きベクトルから予測される、間引き画像の次のフレームにおける移動物体の間引き画像予測位置を表している。また、左から７番目の欄は、間引き画像予測内挿位置を表し、左から８番目の欄(右から１番目の欄)は、内挿誤差を表している。
図８および図９において、偶数フレームの間引き画像予測内挿位置は、上述したように、その偶数フレームの前後の奇数フレームにおける移動物体の位置の平均値であるため、移動物体の速度が変化すると、その変化に起因して、０でない内挿誤差が生じる。
即ち、図８および図９では、HD画像の第６フレーム(フレーム番号が６のフレーム)において、移動物体の速度が変化しており、その変化に起因して、−1.5の内挿誤差が生じている。
図６のMPd差分情報取得部５４で求められる差分情報MPdは、この内挿誤差に相当し、この内挿誤差に相当する差分情報MPdと、間引き画像から得られる動きベクトル(から予測される間引き画像予測内挿位置)とを用いることにより、HD画像の正確な動きベクトルを復元する(求める)ことができる。
次に、図１０のフローチャートを参照して、図６の記録制御部１３における処理について説明する。
記録制御部１３は、HDTVカメラ１２から、HD画像が供給されると、そのHD画像を受信し、HDD１４に供給して記録させる。そして、記録制御部１３は、例えば、ユーザが、図示せぬ操作部を操作した場合に、あるいは、特に行うべき処理が(ほとんど)ない場合に、図１０のフローチャートに従った処理を行う。
即ち、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。ステップS３１において、MP１取得部２２は、入出力インタフェース２１から供給されるHD画像から動きパラメータMP１を取得し、MPd差分情報取得部５４に供給する。また、MP１取得部２２は、HD画像をフレーム間引き部５２に供給し、ステップS３２に進む。
ステップS３２において、フレーム間引き部５２は、MP１取得部２２から供給されるHD画像の偶数フレーム(または奇数フレーム)を間引き、その結果得られた間引き画像をMP２取得部５３に供給し、ステップS３３に進む。
ステップS３３において、MP２取得部５３は、フレーム間引き部５２から供給される間引き画像から、その間引き画像の動きパラメータMP２を取得し、MPd差分情報取得部５４に供給する。また、MP２取得部５３は、間引き画像と動きパラメータMP２とを圧縮部５５に供給し、ステップS３４に進む。
ステップS３４において、MPd差分情報取得部５４は、MP１取得部２２から供給される動きパラメータMP１と、MP２取得部５３から供給される動きパラメータMP２との差分に関する差分情報MPdを求めることにより取得し、マルチプレックス部２４に供給して、ステップS３５に進む。
ステップS３５において、圧縮部５５は、MP２取得部５３から供給される動きパラメータMP２を用いて、同じく、MP２取得部５３から供給される間引き画像をMPEG方式等により圧縮し、その結果得られた間引き画像の圧縮データを、マルチプレックス部２４に供給して、ステップS３６に進む。
ステップS３６において、マルチプレックス部２４は、MPd差分情報取得部５４から供給される差分情報MPdと、圧縮部５５から供給される間引き画像の圧縮データとをマルチプレックスし、その結果得られた多重化データを、入出力インタフェース２１に供給し、ステップS３７に進む。
ステップS３７において、入出力インタフェース２１は、マルチプレックス部２４から供給される多重化データを、HDD１４に供給して記録させ、処理を終了する。
図１１は、記録制御部１３が図６に示したように構成される場合の、図１の再生制御部１５の構成例を示すブロック図である。
なお、図中、図４の場合と対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
即ち、図１１の再生制御部１５は、図４の補間部４５に代えて、フレーム補間部８５が設けられ、さらに、解凍部８３、およびMP１復元部８４が新たに設けられている他は、図４の場合と同様に構成される。
解凍部８３は、図６の圧縮部５５による圧縮方式に対応した解凍方式に従って、デマルチプレックス部４２から供給される間引き画像の圧縮データを解凍し、その結果得られる間引き画像を画像処理部４３に供給する。
即ち、図１１では、HDD１４には、図６の圧縮部５５で得られた間引き画像の圧縮データと、MPd差分情報取得部５４で得られた動きパラメータ情報としての差分情報MPdとがマルチプレックスされた多重化データが記録されている。そして、デマルチプレックス部４２は、その多重化データを、圧縮データと差分情報MPdとにデマルチプレックスし、圧縮データを解凍部８３に供給するとともに、差分情報MPdをMP１復元部８４に供給するようになっており、解凍部８３は、以上のようにして、デマルチプレックス部４２から供給される圧縮データを、間引き画像に解凍して、画像処理部４３に供給する。
ここで、図６の圧縮部５５は、上述したように、間引き画像から取得された動きパラメータMP２を用いて、間引き画像をMPEG方式等で圧縮するので、間引き画像の圧縮データには、その圧縮に用いられた動きパラメータMP２が含まれており、解凍部８３は、その動きパラメータMP２を用いて、圧縮データを解凍する。そして、解凍部８３は、圧縮データの解凍に用いた動きパラメータMP２を、MP１復元部８４に供給する。
MP１復元部８４は、デマルチプレックス部４２から供給される差分情報MPdと、解凍部８３から供給される動きパラメータＭＰ２とから、高精度な動きパラメータMP１を復元し、画像処理部４３に供給する。
フレーム補間部８５は、解凍部８３から(ノイズリダクション部４４を介して)供給された間引き画像に対して、MP１復元部８４から供給された高精度な動きパラメータＭＰ１のうちの、例えば、動きベクトル等を用いて、フレームを補間する補間処理を施すことにより、間引き画像を、高品質のHD画像に変換して、モニタ１６に供給する。
次に、図１２のフローチャートを参照して、図１１の再生制御部１５における処理について説明する。
例えば、ユーザが、図示せぬ操作部を操作することにより、画像の再生が入出力インタフェース４１に指令されると、ステップS４１において、入出力インタフェース４１は、HDD１４から多重化データを読み出し、デマルチプレックス部４２に供給して、ステップS４２に進む。
ステップS４２において、デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、間引き画像の圧縮データと差分情報MPdとにデマルチプレックスする。また、デマルチプレックス部４２は、間引き画像を解凍部８３に供給し、差分情報MPdをMP１復元部８４に供給して、ステップS４３に進む。
ステップS４３において、解凍部８３は、デマルチプレックス部４２からの間引き画像の圧縮データを、図６の圧縮部５５による圧縮方式に対応した解凍方式を用いて解凍し、その結果得られた間引き画像を、画像処理部４３に供給する。また、解凍部８３は、間引き画像の圧縮データを解凍するのに用いた動きパラメータMP２を、MP１復元部８４に供給し、ステップS４４に進む。
ステップS４４において、MP１復元部８４は、例えば、図７で説明したように、デマルチプレックス部４２からの差分情報MPdと、解凍部８３からの動きパラメータMP２とを用いて、高精度の動きパラメータMP１を復元し(求めて)、画像処理部４３に供給して、ステップS４５に進む。
ステップS４５において、画像処理部４３は、MP１復元部８４からの動きパラメータMP１を用いて、解凍部８３からの間引き画像に画像処理を施し、その結果得られた画像を、モニタ１６に供給して、処理は終了する。
図１３は、図１の記録制御部１３のさらに他の構成例を示すブロック図である。
なお、図中、図２または図６の場合と対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
即ち、図１３の記録制御部１３は、図６のフレーム間引き部５２、MP２取得部５３、MPd差分情報取得部５４、または圧縮部５５に代えて、それぞれダウンコンバート部１０２、MP２取得部１０３、MPd差分情報取得部１０４、または圧縮部１０５が設けられているほかは、図６の場合と同様に構成されている。
ダウンコンバート部１０２には、MP１取得部２２から、HD画像が供給されるようになっている。ダウンコンバート部１０２は、MP１取得部２２からのHD画像の各フレームの画素を間引くことにより、HD画像をデータ量の少ない間引き画像でもあるSD(標準解像度)画像に変換し、MP２取得部１０３と圧縮部１０５とに供給する。
MP２取得部１０３は、ダウンコンバート部１０２から供給されるSD画像から動きパラメータMP２を検出(算出)することにより取得し、MPd差分情報取得部１０４に供給する。
MPd差分情報取得部１０４には、MP２取得部１０３から、動きパラメータMP２が供給される他、MP１取得部２２から、動きパラメータMP１が供給されるようになっている。MPd差分情報取得部１０４は、さらに、図１６の画像処理部４３で用いられる動きパラメータMP１のみについて、図６のMPd差分情報取得部５４と同様に、動きパラメータMP１と動きパラメータMP２との差分に関する差分情報MPdを求め、動きパラメータ情報として、マルチプレックス部２４に供給する。
圧縮部１０５には、ダウンコンバート部１０２からSD画像が供給される他、MP１取得部２２から動きパラメータMP１が供給されるようになっており、圧縮部１０５は、ダウンコンバート部１０２から供給されるSD画像を、MP１取得部２２から供給される動きパラメータMP１を用いて圧縮することで、SD画像圧縮データに圧縮し、マルチプレックス部２４に供給する。
図１４は、図１３のＭＰd差分情報取得部１０４での差分情報ＭＰdの取得処理の一例を説明する図である。
例えば、ダウンコンバート部１０２において、HD画像の各フレームの２×２画素の４画素を１画素にする１/４間引きによって、HD画像が、間引き画像であるSD画像に変換されることとすると共に、動きパラメータMP１、および動きパラメータMP２として、動きベクトルを考えることとする。また、動きベクトルは、例えば、８×８画素のブロックを対象に検出されることとする。
いま、SD画像の大きさ(画素数)は、HD画像の大きさの１/４であるため、図１４に示すように、SD画像の８×８画素の１つのブロックは、HD画像の８×８画素の４つのブロックからなる１６×１６画素の大ブロックと対応することとなる。
また、SD画像の８×８画素の１つのブロックにおける動きベクトルを、動きベクトルmv(Xn)と表すこととし、それに対応するHD画像の大ブロックにおける左上、右上、左下、右下の８×８画素の４つのブロックにおける動きベクトルを、それぞれ、動きベクトルmv(An)，mv(Bn)，mv(Cn)，mv(Dn)と表すこととする。
MPd差分情報取得部１０４は、HD画像の動きベクトルmv(An)と、それに対応するSD画像の動きベクトルmv(Xn)との差分値mv(An)−mv(Xn)を求め、その差分値mv(An)−mv(Xn)を、動きベクトルmv(An)についての差分情報MPd(An)とする。MPd差分情報取得部１０４は、同様にして、HD画像の他の動きベクトルmv(Bn)，mv(Cn)、またはmv(Dn)それぞれと、SD画像の動きベクトルmv(Xn)との差分値mv(Bn)−mv(Xn)，mv(Cn)−mv(Xn)、またはmv(Dn)−mv(Xn)を、動きベクトルmv(Bn)についての差分情報MPd(Bn)、動きベクトルmv(Cn)についての差分情報MPd(Cn)、または動きベクトルmv(Dn)についての差分情報MPd(Dn)それぞれとして求める。
なお、HD画像の大ブロックの左上の８×８画素のブロックの動きベクトルmv(An)は、それに対応するSD画像の８×８画素のブロックの動きベクトルmv(Xn)と、差分情報MPd(An)としての差分値mv(An)−mv(Xn)とを加算することにより復元する(求める)ことができる。
HD画像の動きベクトルmv(Bn)，mv(Cn)、またはmv(Dn)も、同様に、SD画像の動きベクトルmv(Xn)と、差分情報MPdとしての差分値mv(Bn)−mv(Xn)，mv(Cn)−mv(Xn)、またはmv(Dn)−mv(Xn)それぞれを用いて復元することができる。
後述する図１６のMP１復元部１２５は、以上のように、HD画像の動きベクトルmv(An)に対応するSD画像の動きベクトルmv(Xn)と、差分情報MPd(An)とを用いて、HD画像の動きベクトルmv(An)を復元する。また、MP１復元部１２５は、同様に、SD画像の動きベクトルmv(Xn)と、差分情報MPd(Bn) ，MPd(Cn)、または MPd(Dn)それぞれを用いて、HD画像の動きベクトルmv(Bn)、mv(Cn)、またはmv(Dn)を復元する。
次に、図１５のフローチャートを参照して、図１３の記録制御部１３における処理について説明する。
記録制御部１３は、HDTVカメラ１２から、HD画像が供給されると、そのHD画像を受信し、HDD１４に供給して記録させる。そして、記録制御部１３は、例えば、ユーザが図示せぬ操作部を操作した場合に、あるいは、特に行うべき処理が(ほとんど)ない場合に、図１５のフローチャートにしたがった処理を行う。
即ち、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。ステップS５１において、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像から動きパラメータMP１を取得し、MPd差分情報取得部１０４と圧縮部１０５とに供給する。また、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像を、ダウンコンバート部１０２に供給し、ステップS５２に進む。
ステップS５２において、ダウンコンバート部１０２は、MP１取得部２２から供給されたHD画像の各フレームの画素を間引くことにより、HD画像を、データ量の少ない間引き画像でもあるSD画像に変換して、MP２取得部１０３と圧縮部１０５とに供給し、ステップS５３に進む。
ステップS５３において、MP２取得部１０３は、ダウンコンバート部１０２から供給されるSD画像から動きパラメータMP２を取得し、MPd差分情報取得部１０４に供給し、ステップS５４に進む。
ステップS５４において、MPd差分情報取得部１０４は、MP１取得部２２からの動きパラメータMP１と、MP２取得部１０３からの動きパラメータMP２との差分に関する差分情報MPdを取得し、マルチプレックス部２４に供給して、ステップS５５に進む。
ステップS５５において、圧縮部１０５は、MP１取得部２２からの動きパラメータMP１を用いて、ダウンコンバート部１０２からのSD画像を圧縮し、その結果得られたSD画像圧縮データをマルチプレックス部２４に供給し、ステップS５６に進む。
ここで、ダウンコンバート部１０２において、例えば、図１４で説明したように、SD画像が、HD画像の画素を１/４に間引いた画像であり、動きパラメータMP２としての１つの動きベクトルが、動きパラメータMP１としての４つの動きベクトルに対応する場合において、圧縮部１０５が、HD画像の動きベクトルを用いてMPEG方式等による圧縮をするときには、その圧縮には、動きパラメータMP２としての１つの動きベクトルに対応する、動きベクトルMP１としての４つの動きベクトルの平均値等が、HD画像の動きベクトルとして用いられる。
ステップS５６において、マルチプレックス部２４は、MPd差分情報取得部１０４からの、動きパラメータ情報としての差分情報MPdと、圧縮部１０５から供給されたSD画像圧縮データとをマルチプレックスし、その結果得られる多重化データを入出力インタフェース２１に供給して、ステップS５７に進む。
ステップS５７において、入出力インタフェース２１は、マルチプレックス部２４からの多重化データをＨＤＤ１４に供給して記録させ、処理を終了する。
図１６は、記録制御部１３が図１３に示したように構成される場合の、図１の再生制御部１５の構成例を示すブロック図である。
なお、図中、図１１の場合と対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
即ち、図１６の再生制御部１５には、図１１の解凍部８３、MP１復元部８４、またはフレーム補間部８５に代えて、それぞれ解凍部１２３、MP１復元部１２５、またはアップコンバート部１２６が設けられ、さらに、MP２取得部１２４が新たに設けられている他は、図１１の場合と同様に構成されている。
解凍部１２３には、デマルチプレックス部４２から、SD画像圧縮データが供給されるようになっている。解凍部１２３は、図１３の圧縮部１０５による圧縮方式に対応した解凍方式に従って、デマルチプレックス部４２から供給されるSD画像圧縮データを解凍し、その結果得られるSD画像を画像処理部４３とMP２取得部１２４とに供給する。
MP２取得部１２４は、解凍部８３から供給されるSD画像から、動きパラメータMP２を検出(算出)することにより取得し、MP１復元部１２５に供給する。
MP１復元部１２５は、デマルチプレックス部４２から供給される差分情報MPdと、MP２取得部１２４から供給される動きパラメータMP２とを用いて、高精度な動きパラメータMP１を算出することにより取得し、画像処理部４３に供給する。
アップコンバート部１２６には、MP１復元部１２５から、動きパラメータMP１が供給されるとともに、解凍部１２３から(ノイズリダクション部４４を介して)SD画像が供給されるようになっている。アップコンバート部１２６は、ＭＰ１復元部１２５から供給される動きパラメータＭＰ１を用いて、解凍部１２３から供給されるＳＤ画像に画素数を増やす画像処理、即ち、画素の補間処理を施す。
次に、図１７のフローチャートを参照して、図１６の再生制御部１５における処理について説明する。
例えば、ユーザが、図示せぬ操作部を操作することにより、画像の再生が入出力インタフェース４１に指令されると、ステップS６１において、入出力インタフェース４１は、HDD１４から多重化データを読み出し、デマルチプレックス部４２に供給して、ステップS６２に進む。
ステップS６２において、デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、SD画像圧縮データと差分情報MPdとにデマルチプレックスする。また、デマルチプレックス部４２は、SD画像の圧縮データを解凍部１２３に供給し、差分情報MPdをMP１復元部１２５に供給して、ステップS６３に進む。
ステップS６３において、解凍部１２３は、デマルチプレックス部４２からのSD画像圧縮データを、図１３の圧縮部１０５による圧縮方式に対応した解凍方式を用いて解凍し、その結果得られたSD画像を、画像処理部４３とMP２取得部１２４とに供給して、ステップS６４に進む。
ステップS６４において、MP２取得部１２４は、解凍部１２３から供給されるSD画像から動きパラメータMP２を検出(算出)することにより取得し、MP１復元部１２５に供給して、ステップS６５に進む。
ステップS６５において、MP１復元部１２５は、デマルチプレックス部４２からの差分情報MPdと、MP２取得部１２４からの動きパラメータMP２とを用いて、高精度の動きパラメータMP１を復元し（求めて）、画像処理部４３に供給して、ステップS６６に進む。
ステップS６６において、画像処理部４３は、MP１復元部１２５からの動きパラメータMP１を用いて、解凍部１２３からのSD画像に画像処理を施し、その結果得られた画像を、モニタ１６に供給し、処理は終了する。
図１８は、本発明を適用した記録再生システムの他の一実施の形態の構成例を示すブロック図である。
記録再生システムは、記録装置１４１、HDTVカメラ１４２、再生装置１５１、およびモニタ１５５により構成され、記録装置１４１は、記録制御部１４３、HDD１４４、および送信制御部１４５により構成される。また、再生装置１５１は、受信制御部１５２、HDD１５３、および再生制御部１５４により構成される。
ＨＤＴＶカメラ１４２は、図１のＨＤＴＶカメラと同様に構成されている。また、記録制御部１４３は、図１の記録制御部１３と同様に構成されている。
ＨＤＤ１４４は、図１のHDD１４と同様に、記録制御部１４３から供給される多重化データを記録する。
送信制御部１４５は、ＨＤＤ１４４から読み出した多重化データを、例えば、インターネットやLAN(Local Area Network)、IEEE(Institute of Electrical and Electronic Engineers)１３９４やUSB(Universal Serial Bus)の規格に準拠したネットワーク等を介して、再生装置１５１に送信することを制御する。
受信制御部１５２は、例えば、記録装置１４１から送信されてくる多重化データを受信することを制御し、その多重化データを、ＨＤＤ１５３に供給し、記録させる。
ＨＤＤ１５３は、図１のHDD１４と同様に、受信制御部１５２から供給される多重化データを記録する。
再生制御部１５４は、ＨＤＤ１５３に記録されている多重化データを、ＨＤＤ１５３から読み出し、図１の再生制御部１５と同様の処理をして、その結果得られる画像を、モニタ１５５に供給する。モニタ１５５は、図１のモニタ１６と同様に構成される。
以上のように構成される図１８の記録再生システムでは、例えば、記録装置１４１の記録制御部１４３に、HDTVカメラ１４２からHD画像が供給される。記録制御部１４３は、HDTVカメラ１４２からのHD画像を対象に、図１の記録制御部１３と同様の処理を行い、その結果得られた多重化データをHDD１４４に供給し記録させる。送信制御部１４５は、HDD１４４に記録されている多重化データを読み出し、ネットワーク等を介して、再生装置１５１の受信制御部１５２に送信する。
再生装置１５１の受信制御部１５２は、記録装置１４１からの多重化データを受信して、HDD１５３に供給し、記録させる。再生制御部１５４は、必要に応じて、HDD１５３に記録されている多重化データを読み出し、図１の再生制御部１５と同様の処理を行い、その結果得られる画像をモニタ１５５に出力する。
図１９は、上述した一連の処理をプログラムにより実行するコンピュータの構成の例を示すブロック図である。
CPU（Central Processing Unit）２０１は、ROM（Read Only Memory）２０２、または記憶部２０８に記憶されているプログラムに従って各種の処理を実行する。RAM（Random Access Memory）２０３には、CPU２０１が実行するプログラムやデータなどが適宜記憶される。これらのCPU２０１、ROM２０２、およびRAM２０３は、バス２０４により相互に接続されている。
なお、CPU２０１として、”Ｃｅｌｌ誕生”、日経エレクトロニクス、日経BP社、２００５年２月２８日、８９頁乃至１１７頁に記載されているＣｅｌｌを採用することができる。
CPU２０１にはまた、バス２０４を介して入出力インタフェース２０５が接続されている。入出力インタフェース２０５には、キーボード、マウス、マイクロホンなどよりなる入力部２０６、ディスプレイ、スピーカなどよりなる出力部２０７が接続されている。CPU２０１は、入力部２０６から入力される指令に対応して各種の処理を実行する。そして、CPU２０１は、処理の結果を出力部２０７に出力する。
入出力インタフェース２０５に接続されている記憶部２０８は、例えばハードディスクからなり、CPU２０１が実行するプログラムや各種のデータを記憶する。通信部２０９は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。
また、通信部２０９を介してプログラムを取得し、記憶部２０８に記憶してもよい。
入出力インタフェース２０５に接続されているドライブ２１０は、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア２１１が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記憶部２０８に転送され、記憶される。
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図１９に示すように、磁気ディスク（フレキシブルディスクを含む）、光ディスク(CD‐ROM(Compact Disc‐Read Only Memory)、DVD(Digital Versatile Disc)、光磁気ディスクを含む）、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア２１１、または、プログラムが一時的もしくは永続的に格納されるROM２０２や、記憶部２０８を構成するハードディスクなどにより構成される。プログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースである通信部２０９を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
なお、本明細書において、プログラム記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
本発明を適用した記録再生システムの一実施の形態の構成例を示すブロック図である。 図１の記録制御部１３の構成例を示すブロック図である 図２の記録制御部１３における処理を示すフローチャートである。 図１の再生制御部１５の構成例を示すブロック図である。 図４の再生制御部１５における処理を示すフローチャートである。 図１の記録制御部１３の他の構成例を示すブロック図である。 図６のＭＰd差分情報取得部５４における処理の一例について説明する第１の図である。 図６のＭＰd差分情報取得部５４における処理の一例について説明する第２の図である。 図６のＭＰd差分情報取得部５４における処理の一例について説明する第３の図である。 図６の記録制御部１３における処理を示すフローチャートである。 図１の再生制御部１５の他の構成例を示すブロック図である。 図１１の再生制御部１５における処理を示すフローチャートである。 図１の記録制御部１３のさらに他の構成例を示すブロック図である。 図１３のＭＰd差分情報取得部１０４における処理の一例を説明する図である。 図１３の記録制御部１３における処理を示すフローチャートである。 図１の再生制御部１５のさらに他の構成例を示すブロック図である。 図１６の再生制御部１５における処理を示すフローチャートである。 本発明を適用した記録再生システムの他の一実施の形態の構成例を示すブロック図である。 本発明を適用したコンピュータの構成例を示す図である。
符号の説明
１１ 記録再生装置， １２ ＨＤＴＶカメラ， １３ 記録制御部， １４ ＨＤＤ， １５ 再生制御部， １６ モニタ， ２１ 入出力インタフェース， ２２ ＭＰ１取得部， ２３ 間引き部， ２４ マルチプレックス部， ４１ 入出力インタフェース， ４２ デマルチプレックス部， ４３ 画像処理部， ４４ ノイズリダクション部， ４５ 補間部， ５２ フレーム間引き部， ５３ ＭＰ２取得部， ５４ ＭＰd差分情報取得部， ５５ 圧縮部， ８３ 解凍部， ８４ ＭＰ１復元部， ８５ フレーム補間部， １０２ ダウンコンバート部， １０３ MP２取得部， １０４ MPd差分情報取得部， １０５ 圧縮部， １２３ 解凍部， １２４ ＭＰ２取得部， １２５ MP１復元部， １２６ アップコンバート部， １４１ 記録装置， １４２ ＨＤＴＶカメラ， １４３ 記録制御部， １４４ ＨＤＤ， １４５ 送信制御部， １５１ 再生装置， １５２ 受信制御部， １５３ ＨＤＤ， １５４ 再生制御部， １５５ モニタ， ２０１ CPU， ２０２ ROM， ２０３ RAM， ２０４ バス， ２０５ 入出力インタフェース， ２０６ 入力部， ２０７ 出力部， ２０８ 記憶部， ２０９ 通信部， ２１０ ドライブ， ２１１ リムーバブルメディア

Claims (28)

  1. 画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生装置において、
    第１の画像から動きに関する動きパラメータを取得する第１の取得手段と、
    前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換する変換手段と、
    前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する記録制御手段と、
    前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出す読み出し制御手段と、
    前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う画像処理手段と
    を備える記録再生装置。
  2. 前記第１の取得手段で取得される動きパラメータは、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含む
    請求項１に記載の記録再生装置。
  3. 前記変換手段は、前記第１の画像のフレームを間引くことにより、または前記第１の画像の各フレームの画素を間引くことにより、前記第１の画像をデータ量の少ない第２の画像に変換する
    請求項１に記載の記録再生装置。
  4. 前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P（Interlace/Progressive）変換のうちの１以上を行う
    請求項１に記載の記録再生装置。
  5. 前記第２の画像から動きパラメータを取得する第２の取得手段と、
    前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報を取得する差分情報取得手段と
    をさらに備え、
    前記記録制御手段は、前記動きパラメータ情報として、前記差分情報を前記記録媒体に記録し、
    前記記録媒体から前記動きパラメータ情報として読み出される前記差分情報と、前記記録媒体から読み出される前記第２の画像から得られる前記第２の画像の動きパラメータとから、前記第１の画像の動きパラメータを復元する復元手段をさらに備える
    請求項１に記載の記録再生装置。
  6. 前記差分情報取得手段は、前記第１の画像の動きパラメータのうちの、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得する
    請求項５に記載の記録再生装置。
  7. 前記第２の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段と、
    前記圧縮データを、前記第２の画像に解凍する解凍手段と
    をさらに備え、
    前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録し、
    前記読み出し制御手段は、前記記録媒体から前記圧縮データと前記差分情報とを読み出す
    請求項５に記載の記録再生装置。
  8. 前記第1の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段と、
    前記圧縮データを前記第２の画像に解凍する解凍手段と、
    前記解凍手段により解凍された前記第２の画像から動きパラメータを取得する第３の取得手段と
    をさらに備え、
    前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録し、
    前記読み出し制御手段は、前記記録媒体から前記圧縮データと前記差分情報とを読み出し、
    前記復元手段は、前記差分情報と、前記第３の取得手段により取得された前記第２の画像の動きパラメータとを用いて、前記第１の画像の動きパラメータを復元する
    請求項５に記載の記録再生装置。
  9. 画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生装置の記録再生方法において、
    第１の画像から動きに関する動きパラメータを取得し、
    前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し、
    前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録し、
    前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出し、
    前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う
    ステップを含む記録再生方法。
  10. 画像を記録媒体に記録し、前記記録媒体から前記画像を再生する記録再生処理をコンピュータに実行させるプログラムにおいて、
    第１の画像から動きに関する動きパラメータを取得し、
    前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し、
    前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録し、
    前記記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出し、
    前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う
    ステップを含む記録再生処理をコンピュータに実行させるプログラム。
  11. 画像を記録媒体に記録する記録装置において、
    第１の画像から動きに関する動きパラメータを取得する第１の取得手段と、
    前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換する変換手段と、
    前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する記録制御手段と
    を備える記録装置。
  12. 前記記録媒体に記録された前記動きパラメータ情報と前記第２の画像とを、画像を再生する他の装置に送信する送信制御手段をさらに備える
    請求項１１に記載の記録装置。
  13. 前記第１の取得手段で取得される動きパラメータは、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含む
    請求項１１に記載の記録装置。
  14. 前記変換手段は、前記第１の画像のフレームを間引くことにより、または前記第１の画像の各フレームの画素を間引くことにより、前記第１の画像をデータ量の少ない第２の画像に変換する
    請求項１１に記載の記録装置。
  15. 前記第２の画像から動きパラメータを取得する第２の取得手段と、
    前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報を取得する差分情報取得手段と
    をさらに備え、
    前記記録制御手段は、前記動きパラメータ情報として、前記差分情報を前記記録媒体に記録する
    請求項１１に記載の記録装置。
  16. 画像を再生する再生装置において、画像処理を行う画像処理手段が、前記記録媒体から読み出された前記第２の画像の画像処理を行う場合に、
    前記差分情報取得手段は、前記第１の画像の動きパラメータのうちの、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得する
    請求項１５に記載の記録装置。
  17. 前記第２の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段をさらに備え、
    前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録する
    請求項１５に記載の記録装置。
  18. 前記第１の取得手段により取得した動きパラメータを用いて前記第２の画像を圧縮データに圧縮する圧縮手段をさらに備え、
    前記記録制御手段は、前記第２の画像の前記圧縮データと前記差分情報とを前記記録媒体に記録する
    請求項１５に記載の記録装置。
  19. 画像を記録媒体に記録する記録装置の記録方法において、
    第１の画像から動きに関する動きパラメータを取得し、
    前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し、
    前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する
    ステップを含む記録方法。
  20. 画像を記録媒体に記録する記録処理をコンピュータに実行させるプログラムおいて、
    第１の画像から動きに関する動きパラメータを取得し、
    前記第１の画像を、前記第１の画像よりデータ量の少ない第２の画像に変換し、
    前記第１の画像の動きパラメータに関する動きパラメータ情報と前記第２の画像とを前記記録媒体に記録する
    ステップを含む記録処理をコンピュータに実行させるプログラム。
  21. 画像を再生する再生装置において、
    第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体から、前記動きパラメータ情報と前記第２の画像とを読み出す読み出し制御手段と、
    前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う画像処理手段と
    を備える再生装置。
  22. 他の装置から送信されてくる前記動きパラメータ情報と前記第２の画像とを受信する受信制御手段をさらに備え、
    前記記録媒体には、前記受信制御手段で受信された前記動きパラメータ情報と前記第２の画像とが記録される
    請求項２１に記載の再生装置。
  23. 前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P(Interlace/Progressive)変換のうちの１以上を行う
    請求項２１に記載の再生装置。
  24. 前記記録媒体には、前記第１の画像の動きパラメータと前記第２の画像の動きパラメータとの差分に関する差分情報とが、前記動きパラメータ情報として記録されており、
    前記記録媒体から前記動きパラメータ情報として読み出される前記差分情報と、前記記録媒体から読み出される前記第２の画像から得られる前記第２の画像の動きパラメータとから、前記第１の画像の動きパラメータを復元する復元手段をさらに備える
    請求項２１に記載の再生装置。
  25. 前記記録媒体には、前記第２の画像の動きパラメータを用いて前記第２の画像を圧縮することにより得られた前記第２の画像の圧縮データが記録されており、
    前記圧縮データを前記第２の画像に解凍する解凍手段をさらに備える
    請求項２４に記載の再生装置。
  26. 前記記録媒体には、前記第１の画像の動きパラメータを用いて前記第２の画像を圧縮することにより得られた前記第２の画像の圧縮データが記録されており、
    前記圧縮データを前記第２の画像に解凍する解凍手段と、
    前記解凍手段により解凍された前記第２の画像から動きパラメータを取得する取得手段と
    をさらに備え、
    前記復元手段は、前記差分情報と、前記取得手段により取得された前記第２の画像の動きパラメータとを用いて、前記第１の画像の動きパラメータを復元する
    請求項２４に記載の再生装置。
  27. 画像を再生する再生装置の再生方法において、
    第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体から、前記第２の画像と前記動きパラメータ情報とを読み出し、
    前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う
    ステップを含む再生方法。
  28. 画像を再生する再生処理をコンピュータに実行させるプログラムおいて、
    第１の画像の動きパラメータに関する動きパラメータ情報と、前記第１の画像のデータ量を少なくして得られた第２の画像とが記録されている記録媒体から、前記第２の画像と前記動きパラメータ情報とを読み出し、
    前記記録媒体から読み出された前記動きパラメータ情報から得られる前記第１の画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の画像の画像処理を行う
    ステップを含む再生処理をコンピュータに実行させるプログラム。
JP2005322405A 2005-11-07 2005-11-07 記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム Expired - Fee Related JP4529874B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2005322405A JP4529874B2 (ja) 2005-11-07 2005-11-07 記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム
DE200610051469 DE102006051469A1 (de) 2005-11-07 2006-10-31 Aufzeichnungs- und Wiedergabevorrichtung und Aufzeichnungs- und Wiedergabeverfahren, Aufzeichnungsvorrichtung und Aufzeichnungsverfahren, Wiedergabevorrichtung und Wiedergabeverfahren und Programm
KR20060108798A KR20070049074A (ko) 2005-11-07 2006-11-06 기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록방법과, 재생 장치 및 재생 방법과, 프로그램
GB0802203A GB2443581B (en) 2005-11-07 2006-11-07 Recording apparatus, method, and program
US11/594,004 US7983530B2 (en) 2005-11-07 2006-11-07 Recording and playback apparatus and recording and playback method, recording apparatus and recording method, playback apparatus and playback method, and program
CN200610143979A CN100592778C (zh) 2005-11-07 2006-11-07 记录和重放设备及方法、记录设备和重放设备及方法
GB0622183A GB2432473B (en) 2005-11-07 2006-11-07 Recording apparatus, method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005322405A JP4529874B2 (ja) 2005-11-07 2005-11-07 記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム

Publications (2)

Publication Number Publication Date
JP2007129647A true JP2007129647A (ja) 2007-05-24
JP4529874B2 JP4529874B2 (ja) 2010-08-25

Family

ID=37594487

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005322405A Expired - Fee Related JP4529874B2 (ja) 2005-11-07 2005-11-07 記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム

Country Status (6)

Country Link
US (1) US7983530B2 (ja)
JP (1) JP4529874B2 (ja)
KR (1) KR20070049074A (ja)
CN (1) CN100592778C (ja)
DE (1) DE102006051469A1 (ja)
GB (1) GB2432473B (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8526500B2 (en) 2009-08-11 2013-09-03 Seiko Epson Corporation System and method for global inter-frame motion detection in video sequences
KR101893075B1 (ko) * 2012-02-28 2018-08-30 삼성디스플레이 주식회사 유기전계발광 표시장치 및 그의 구동방법
CN105657541A (zh) * 2015-12-29 2016-06-08 华为技术有限公司 一种帧处理方法及装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006025339A1 (ja) * 2004-08-30 2006-03-09 Matsushita Electric Industrial Co., Ltd. 復号化装置、符号化装置、復号化方法、符号化方法

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4963995A (en) * 1988-12-27 1990-10-16 Explore Technology, Inc. Audio/video transceiver apparatus including compression means
GB2248361B (en) 1990-09-28 1994-06-01 Sony Broadcast & Communication Motion dependent video signal processing
US5647049A (en) * 1991-05-31 1997-07-08 Kabushiki Kaisha Toshiba Video recording/reproducing apparatus which uses a differential motion vector determined using two other motion vectors
EP0520765B1 (en) 1991-06-25 1999-05-12 Canon Kabushiki Kaisha Movement vector detecting method/apparatus and encoding method/apparatus using such method/apparatus
GB2264415B (en) 1992-02-13 1995-09-20 Sony Broadcast & Communication Motion compensation for colour video signals
US6236682B1 (en) * 1993-03-08 2001-05-22 Sony Corporation Video motion vector detection including rotation and/or zoom vector generation
JP3499254B2 (ja) * 1993-06-04 2004-02-23 富士写真フイルム株式会社 画像データ圧縮処理方法
JPH08149480A (ja) 1994-11-25 1996-06-07 Matsushita Electric Ind Co Ltd 画像符号化装置
CN1474604A (zh) * 1996-12-06 2004-02-11 松下电器产业株式会社 图像信号传送、编码和解码方法和装置以及光盘记录和再现方法
US5844613A (en) * 1997-03-17 1998-12-01 Microsoft Corporation Global motion estimator for motion video signal encoding
US5929911A (en) * 1997-10-27 1999-07-27 International Business Machines Corporation Multiformat reduced memory MPEG-2 compliant decoder
EP0940774A3 (en) 1998-03-05 2000-07-05 Matsushita Electric Industrial Co., Ltd. Motion vector coding and decoding apparatus and method
KR20000059799A (ko) * 1999-03-09 2000-10-05 구자홍 웨이브릿 부호화를 이용한 움직임 보상 부호화 장치 및 방법
JP3709092B2 (ja) * 1999-03-09 2005-10-19 ペンタックス株式会社 画像圧縮装置および画像伸張装置
JP4224748B2 (ja) 1999-09-13 2009-02-18 ソニー株式会社 画像符号化装置および画像符号化方法、画像復号装置および画像復号方法、記録媒体、並びに画像処理装置
JP3797208B2 (ja) * 2001-11-30 2006-07-12 日本ビクター株式会社 カラー動画像符号化装置、復号化装置、符号化方法、復号化方法及びカラー動画像符号列伝送方法
GB0228281D0 (en) 2002-12-04 2003-01-08 Imec Inter Uni Micro Electr Coding of motion vectors produced by wavelet-domain motion estimation
JP2004221757A (ja) * 2003-01-10 2004-08-05 Renesas Technology Corp 動き検出装置及び探索領域形状可変動き検出器
US7869516B2 (en) * 2003-03-31 2011-01-11 Hewlett-Packard Development Company, L.P. Motion estimation using bit-wise block comparisons for video compresssion
US7567617B2 (en) * 2003-09-07 2009-07-28 Microsoft Corporation Predicting motion vectors for fields of forward-predicted interlaced video frames
US7317839B2 (en) * 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
US7474767B2 (en) 2003-09-24 2009-01-06 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Motion detection using multi-resolution image processing
EP1574995A1 (en) 2004-03-12 2005-09-14 Thomson Licensing S.A. Method for encoding interlaced digital video data
KR100631777B1 (ko) * 2004-03-31 2006-10-12 삼성전자주식회사 다 계층의 모션 벡터를 효율적으로 압축하는 방법 및 장치
US20060062303A1 (en) * 2004-09-17 2006-03-23 Sony Corporation Hybrid global motion estimator for video encoding
WO2006080662A1 (en) 2004-10-21 2006-08-03 Samsung Electronics Co., Ltd. Method and apparatus for effectively compressing motion vectors in video coder based on multi-layer
KR100959539B1 (ko) 2005-10-05 2010-05-27 엘지전자 주식회사 레지듀얼 데이터 스트림을 생성하는 방법과 장치 및 이미지블록을 복원하는 방법과 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006025339A1 (ja) * 2004-08-30 2006-03-09 Matsushita Electric Industrial Co., Ltd. 復号化装置、符号化装置、復号化方法、符号化方法

Also Published As

Publication number Publication date
GB2432473B (en) 2010-06-02
KR20070049074A (ko) 2007-05-10
GB0622183D0 (en) 2006-12-20
US20070122131A1 (en) 2007-05-31
CN1964460A (zh) 2007-05-16
US7983530B2 (en) 2011-07-19
DE102006051469A1 (de) 2007-05-10
GB2432473A (en) 2007-05-23
CN100592778C (zh) 2010-02-24
JP4529874B2 (ja) 2010-08-25

Similar Documents

Publication Publication Date Title
EP2161928B1 (en) Image processing device, image processing method, and program
JP4797446B2 (ja) 情報処理システム、情報処理装置および方法、並びにプログラム
JP4777274B2 (ja) 映像再生装置及びその制御方法
EP2094018A1 (en) Encoding apparatus for high frame rate videos, method and program
US8094991B2 (en) Methods and apparatus for recording and reproducing a moving image, and a recording medium in which program for executing the methods is recorded
US20150043646A1 (en) Image processing apparatus, image processing method, and program
US20090154551A1 (en) Apparatus for recording/reproducing moving picture, and recording medium thereof
US20100254455A1 (en) Image processing apparatus, image processing method, and program
JP2009177531A (ja) 画像記録装置、画像再生装置、記録媒体、画像記録方法及びプログラム
US20100277613A1 (en) Image recording device and image reproduction device
JP4529874B2 (ja) 記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム
JP5113479B2 (ja) 画像信号処理装置及び画像信号処理方法
JP4185011B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
KR100778118B1 (ko) 네트워크로의 영상신호 전송기능을 향상한 ｄｖｒ장치 및그의 영상신호 압축방법
JP4867872B2 (ja) 画像処理装置、この画像処理装置の制御方法、及び、プログラム
JP4674535B2 (ja) 記録再生装置および記録再生方法、記録装置および記録方法、並びに、再生装置および再生方法
GB2443581A (en) Recording and playback using motion parameters and reduced data image version
JP6316640B2 (ja) 映像記録装置、映像再生装置及び映像記録プログラム
JP2005176068A (ja) 動画像配信システム及びその方法
JP5355176B2 (ja) 動画保存装置及びその制御方法
JP2007027857A (ja) マルチメディアデータ記録装置および方法
JP2009081511A (ja) サムネイル画像生成装置および動画像再生装置
JP2005295432A (ja) 記録再生装置およびデータ伝送システム
KR20090064274A (ko) 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 이를수행하는 컴퓨터 프로그램을 기록한 저장매체
JP2007019567A (ja) 画像記録再生装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070216

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070216

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081014

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081021

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100518

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130618

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees