JP5029112B2 - 画像処理装置および画像処理方法、並びにプログラム - Google Patents

画像処理装置および画像処理方法、並びにプログラム Download PDF

Info

Publication number
JP5029112B2
JP5029112B2 JP2007106251A JP2007106251A JP5029112B2 JP 5029112 B2 JP5029112 B2 JP 5029112B2 JP 2007106251 A JP2007106251 A JP 2007106251A JP 2007106251 A JP2007106251 A JP 2007106251A JP 5029112 B2 JP5029112 B2 JP 5029112B2
Authority
JP
Japan
Prior art keywords
image signal
unit
signal
input
input image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007106251A
Other languages
English (en)
Other versions
JP2008263530A (ja
Inventor
政之 末松
崇之 大江
雅人 薄木
真也 山本
誠 灰谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2007106251A priority Critical patent/JP5029112B2/ja
Priority to US12/082,619 priority patent/US8126293B2/en
Priority to CN200810091774.4A priority patent/CN101287068B/zh
Publication of JP2008263530A publication Critical patent/JP2008263530A/ja
Application granted granted Critical
Publication of JP5029112B2 publication Critical patent/JP5029112B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/50Tuning indicators; Automatic tuning control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

本発明は、画像処理装置および画像処理方法、並びにプログラムに関し、特に、補間前の画像信号が消画される場合において、補間後の画像信号の画質を向上させることができるようにした画像処理装置および画像処理方法、並びにプログラムに関する。
図1は、従来の画像処理装置1の構成の一例を示している。
図1の画像処理装置1は、消画部11、OSD重畳部12、フレームレート変換部13、パネル駆動部14、表示パネル15、および制御部16により構成され、外部から入力された、例えば、番組の時系列のフレーム単位の画像の、各画素のデジタル信号である画像信号のフレームレートを、高速にして表示を行う。
消画部11は、制御部16から供給される消画の指令を表す消画指令信号に応じて、外部から入力された番組の画像信号を消画する。具体的には、消画部11は、全画素の画像信号のレベルを黒レベル、即ちゼロにする。消画部11は、消画後の画像信号、または、入力された画像信号そのものを、OSD重畳部12に供給する。
OSD重畳部12は、制御部16から供給される重畳の指令を表す重畳指令信号に応じて、消画部11から供給される画像信号に、チャンネル番号やメニューなどのOSD(On Screen Display)画像の画像信号(以下、OSD画像信号という)を重畳する。OSD重畳部12は、重畳後の画像信号、または、消画部11から供給された画像信号そのものを、フレームレート変化部13に供給する。
フレームレート変換部13は、OSD重畳部12から供給される画像信号に対して、その画像信号の周期であるフレームレートを高速にする高フレームレート処理を行う。具体的には、フレームレート変換部13は、OSD重畳部12から供給される画像信号に対してフレーム補間処理を行い、その結果得られる画像信号を、外部から入力される画像信号の間の時刻における画像信号としてパネル駆動部14に出力する。これにより、パネル駆動部14に入力される画像信号のフレームレートは、消画部11に入力されたフレームレートに比べて高速になる。
パネル駆動部14は、フレームレート変換部13から供給される画像信号に対してD/A(Digital/Analog)変換などの処理を行う。パネル駆動部14は、その結果得られるアナログ信号に基づいて、液晶パネルなどの表示パネル15を駆動し、表示パネル15にフレーム単位の画像を表示させる。
制御部16は、ユーザからの、画像信号の入力源を切り換える入力切換え、画像信号に対応する番組のチャンネルを切り換えるチャンネル切換え、OSD画像の表示などの指令を受け付ける。制御部16は、ユーザからの入力切換えやチャンネル切換えなどの指令に応じて、消画指令信号を消画部11に供給する。これにより、入力切換えやチャンネル切換えによる画乱れのある画像の表示を防止することができる。また、制御部16は、OSD画像の表示の指令に応じて、重畳指令信号をOSD重畳部12に供給する。
図1のフレームレート変換部13が行う高フレームレート処理や、時系列の画像信号の動きを補償する動き補償処理などに適用されるフレーム補間処理は、時系列の画像信号の高画質化に欠かせない処理である。
このようなフレーム補間処理としては、入力された時系列の画像信号に含まれる動きベクトルを検出し、その動きベクトルを用いて、時系列の画像信号の間の任意の時刻における画像信号を補間する処理が考案されている(例えば、特許文献1参照)。
この動きベクトルは、例えば、ブロックマッチング法などにしたがって、時系列の画像信号を比較することにより、検出される。この場合、フレームレート変換部13は、消画の開始または終了時に、消画が行われた画像信号と、消画が行われていない画像信号を比較することになり、動きベクトルを誤検出してしまう。その結果、その動きベクトルに基づく補間において、誤った画像信号が生成され、補間後の画像信号の画質が劣化する。
即ち、例えば、消画が開始され、図2のAに示すように、白い背景に黒いドーナツ型の円が描かれた、消画が行われていない画像21の画像信号に続いて、消画が行われた画像22の画像信号が、フレームレート変換部13に供給される場合、フレームレート変換部13により、図2のBに示すように、画像21と同一の画像23の画像信号が補間され、消画が行われた画像22が表示される直前まで、画像21と同一の画像が表示されることが理想である。
しかしながら、フレームレート変換部13は、消画が行われていない画像21の画像信号と、消画が行われた画像22の画像信号を比較することにより、動きベクトルを検出するので、その動きベクトルに基づく補間により、実際には、例えば、図2のCに示すように、黒い背景に白と黒の縞模様のドーナツ型の円が描かれた、残像のような異常な画像24の画像信号を補間してしまう。その結果、消画が行われた画像22の直前の画像の画質が劣化する。
なお、図示は省略するが、消画が終了される場合においても、同様に、消画が行われた画像の画像信号と、その後の消画が行われていない画像の画像信号が比較され、その結果、消画が行われていない画像の直前の画像の画質が劣化する。
特開2001−42831号公報
以上のように、フレーム補間処理の前に消画が行われる場合、消画の開始または終了時に、補間後の画像信号の画質が劣化してしまう。
本発明は、このような状況に鑑みてなされたものであり、補間前の画像信号が消画される場合において、補間後の画像信号の画質を向上させることができるようにするものである。
本発明の一側面の画像処理装置は、他の装置から入力された、前記他の装置から入力された時系列の各画素の画像信号である入力画像信号が消画されていることを表す消画信号を取得する取得手段と、前記入力画像信号の動きベクトルを検出する検出手段と、前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定する判定手段と、前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力する補間手段とを備える。
本発明の一側面の画像処理装置は、前記入力画像信号を消画する消画手段をさらに設けることができる。
本発明の一側面の画像処理方法は、他の装置から入力された時系列の各画素の画像信号である入力画像信号を補間する画像処理装置の画像処理方法において、前記他の装置から入力された、前記入力画像信号が消画されていることを表す消画信号を取得し、前記入力画像信号の動きベクトルを検出し、前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定し、前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力するステップを含む。
本発明の一側面のプログラムは、他の装置から入力された時系列の各画素の画像信号である入力画像信号を補間する画像処理を、コンピュータに行わせるプログラムにおいて、前記他の装置から入力された、前記入力画像信号が消画されていることを表す消画信号を取得し、前記入力画像信号の動きベクトルを検出し、前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定し、前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力するステップを含む画像処理をコンピュータに行わせる。
本発明の一側面においては、他の装置から入力された、前記他の装置から入力された時系列の各画素の画像信号である入力画像信号が消画されていることを表す消画信号が取得され、前記入力画像信号の動きベクトルが検出され、前記消画信号が取得された場合前記入力画像信号が消画されていると判定され、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定され、前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号が補間されて出力され、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号が、そのまま前記入力画像信号間信号として出力される。
以上のように、本発明の一側面によれば、補間前の画像信号が消画される場合において、補間後の画像信号の画質を向上させることができる。
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書又は図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書又は図面に記載されていることを確認するためのものである。従って、明細書又は図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
本発明の一側面の画像処理装置
他の装置(例えば、図15の記録再生装置202)から入力された、前記他の装置から入力された時系列の各画素の画像信号である入力画像信号が消画されていることを表す消画信号を取得する取得手段(例えば、図16の通信部213)と、
前記入力画像信号の動きベクトルを検出する検出手段(例えば、図5の検出部92)と、
前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定する判定手段
前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力する補間手段(例えば、図5の混合部95)と
を備える。
本発明の一側面の画像処理装置は、
前記入力画像信号を消画する消画手段(例えば、図4の消画部11)
をさらに備える。
本発明の一側面の画像処理方法は、
他の装置から入力された時系列の各画素の画像信号である入力画像信号を補間する画像処理装置画像処理方法において、
前記他の装置から入力された、前記入力画像信号が消画されていることを表す消画信号を取得し、
前記入力画像信号の動きベクトルを検出し(例えば、図10のステップS53)、
前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定し
前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し(例えば、図10のステップS58)、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力する(例えば、図10のステップS60)
ステップを含む。
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
図3は、本発明を適用した受信装置の第1の実施の形態の構成例を示している。
図3の受信装置30では、MPU(Micro Processing Unit)31、チューナ32、デコード処理部33、表示部35とスピーカ36が接続された信号処理部34、入力部38、通信部39、記録部40、およびドライブ41が、バス37を介して互いに接続されており、受信装置30は、番組の時系列のフレーム単位の画像の各画素や音声のデジタル信号(以下、番組信号という)の電波を受信し、その番組の画像や音声を出力する。
MPU31は、例えば、記録部40にインストールされたプログラムを実行することにより、入力部38から入力される指令などに対応して、各種の処理を実行する。例えば、MPU31は、チャンネル切換えの指令に対応して、チューナ32を制御し、チューナ32で受信する番組信号に対応するチャンネルを変更する。また、MPU31は、入力切換えの指令に対応して、デコード処理部33に入力する番組信号の入力源を、チューナ32と、通信部39に接続される外部の装置(図示せず)のいずれか一方から他方に変更する。
さらに、MPU31は、入力切換えまたはチャンネル切換えの指令に対応して、消画指令信号と、画像信号が消画されていることを表す消画信号とを信号処理部34に供給したり、OSD画像の表示の開始の指令に対応して、重畳指令信号を信号処理部34に供給する。
また、MPU31は、通信部39によりダウンロードされたプログラムや、ドライブ41に装着された磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどのリムーバブルメディア42に記録されたプログラムを必要に応じて、記録部40にインストールする。
チューナ32は、MPU31の制御により、図示せぬ放送局から放射される、ユーザの所望のチャンネルの番組信号の電波を受信して復調する。チューナ32は、復調の結果得られる番組信号をデコード処理部33に供給する。
デコード処理部33は、MPU31の制御により、チューナ32から供給される、符号化されている番組信号を、MPEG2(Moving Picture Experts Group phase 2)などの所定の方式でデコードし、その結果得られる番組信号を信号処理部34に供給する。
信号処理部34は、画像処理部51と音声処理部52により構成される。画像処理部51は、MPU31から供給される消画指令信号に応じて、デコード処理部33から供給される番組信号のうちの画像信号に対して消画を行ったり、重畳指令信号に応じてOSD画像信号の重畳を行う。また、画像処理部51は、その結果得られる画像信号に対して、連続する画像信号の中間の時刻における画像信号の補間、D/A変換などの処理を施す。画像処理部51は、その結果得られるアナログ信号である画像信号を、表示部35に供給して、表示部35に画像を表示させる。
音声処理部52は、デコード処理部33から供給される番組信号のうちの音声信号に対して、D/A変換などを行い、その結果得られるアナログ信号である音声信号を、スピーカ36に供給して、外部に音声を出力させる。
入力部38は、例えば、図示せぬリモートコントローラから送信されてくる指令を受信する受信部、ボタン、キーボード、マウス、スイッチなどから構成され、ユーザからの指令を受け付ける。入力部38は、ユーザからの指令に応じて、各種の指令を、バス37を介してMPU31に供給する。
例えば、入力部38は、ユーザからのチャンネル切換えの指令に応じて、チャンネル切換えの指令をMPU31に供給し、ユーザからの入力切換えの指令に応じて、入力切換えの指令をMPU31に供給する。また、入力部38は、ユーザからのOSD画像の表示の開始または終了の指令に応じて、OSD画像の表示の開始または終了の指令をMPU31に供給する。
通信部39は、図示せぬインターネットなどのネットワークを介して、各種のデータの送受信を行う。また、通信部39は、例えば、図示せぬサーバからネットワークを介して所定のプログラムをダウンロードし、MPU31に供給する。記録部40は、必要に応じて、MPU31が実行するプログラムおよび各種のデータを記録する。
ドライブ41には、必要に応じて、リムーバブルメディア42が装着される。ドライブ41は、リムーバブルメディア42を駆動して、そこに記録されているプログラムやデータなどを読み出し、バス37を介してMPU31に供給する。
次に、図4を参照して、図3の受信装置30における補間について説明する。
なお、図4において、図1と同一のものには同一の符号を付してあり、繰り返しになるので、説明は適宜省略する。
図4に示すように、MPU31は、入力部38から入力される入力切換えやチャンネル切換えの指令に対応して、消画指令信号を画像処理部51の消画部11に供給し、消画信号をフレームレート変換部61に供給する。また、MPU31は、入力部38から入力されるOSD画像の表示の開始の指令に対応して、重畳指令信号を画像処理部51のOSD重畳部12に供給する。
画像処理部51は、消画部11、OSD重畳部12、およびフレームレート変換部61により構成され、表示部35は、パネル駆動部14と表示パネル15により構成される。
画像処理部51の消画部11には、デコード処理部33から供給される番組信号のうちの画像信号が、入力画像信号として入力される。
フレームレート変換部61は、MPU31から供給される消画信号に応じて、OSD重畳部12から供給される入力画像信号を補間することにより、入力画像信号のフレームレートを変換する。フレームレート変換部61は、補間後の入力画像信号を、表示部35のパネル駆動部14に供給し、表示パネル15にフレーム単位の画像を表示させる。なお、フレームレート変換部61の詳細は、後述する図5を参照して説明する。
図5は、図4のフレームレート変換部61の詳細構成例を示している。
図5のフレームレート変換部61は、フレームメモリ91、検出部92、移動部93、判定部94、混合部95、および選択部96により構成される。
図4のOSD重畳部12から供給される入力画像信号は、フレームメモリ91、検出部92、混合部95、および選択部96に供給される。また、MPU31から供給される消画信号は、判定部94に供給される。
フレームメモリ91は、OSD重畳部12から入力された入力画像信号をフレーム単位で記憶する。フレームメモリ91は、前回記憶した入力画像信号、即ち、OSD重畳部12から入力された入力画像信号の1フレーム前の入力画像信号を読み出し、検出部92、移動部93、および混合部95に供給する。
検出部92は、OSD重畳部12から入力された入力画像信号を、検出対象の入力画像信号(以下、対象入力画像信号という)として、対象入力画像信号と、フレームメモリ91から供給される対象入力画像信号より1フレーム前の入力画像信号(以下、前入力画像信号という)とに基づいて、対象入力画像信号の動きベクトルを検出する。
例えば、検出部92は、ブロックマッチング法にしたがって、対象入力画像信号に設定した基準ブロックと、前入力画像信号に設定した、基準ブロックと同一のサイズの参照ブロックとのマッチングを行うことにより、ブロック単位の動きベクトルを検出する。検出部92は、検出したブロック単位の動きベクトルを、移動部93と判定部94に供給する。
移動部93は、検出部92から供給されるブロック単位の動きベクトルを用いて、フレームメモリ91から供給される前入力画像信号をブロック単位で移動し、移動後の前入力画像信号を混合部95に供給する。
判定部94は、検出部92から供給されるブロック単位の動きベクトルの値に基づいて、ブロック単位の動きベクトルの信頼度を決定する。なお、ブロック単位の動きベクトルの信頼度は、動きベクトルの値に基づいて決定されるのではなく、動きベクトルの算出に用いられた基準ブロックと参照ブロックの、対応する画素どうしの差分のブロック単位の積算値に基づいて、決定されるようにしてもよい。
図4のMPU31から、消画信号が入力される場合、判定部94は、混合しない旨を表す混合なし情報を混合部95に供給する。一方、消画信号が入力されない場合、判定部94は、ブロック単位の信頼度に基づいて、ブロック単位で対象入力画像信号と移動後の前入力画像信号を混合する比率(以下、混合比という)を決定する。そして、判定部94、そのブロック単位の混合比を混合部95に供給する。
混合部95は、判定部94から供給される混合比に基づいて、OSD重畳部12から供給される対象入力画像信号と、移動部93から供給される移動後の前入力画像信号を混合する。混合部95は、混合後の画像信号を、対象入力画像信号と前入力画像信号の間の中間の時刻における画像信号を補間する補間信号として、選択部96に供給する。
以上のように、判定部94により混合比が決定される場合、混合部95は、その混合比に基づいて、対象入力画像信号と、移動部93により動きベクトルを用いて移動された前入力画像信号の混合による補間を行う。即ち、消画信号が入力されない場合、フレームレート変換部61は、動きベクトルを用いて画像信号を補間する通常補間処理を行う。
また、混合部95は、判定部94から供給される混合なし情報に応じて、フレームメモリ91から供給される前入力画像信号を、そのまま補間信号として選択部96に供給する。即ち、消画信号が入力される場合、フレームレート変換部61は、前入力画像信号をそのまま補間信号とする前置補間処理を行う。
このように、対象入力画像信号が消画されていることにより、動きベクトルが誤検出される場合、フレームレート変換部61では、動きベクトルを用いた補間が行われず、前入力画像信号そのものが補間信号とされる。従って、誤った補間信号の生成を抑制し、安定した補間後の画像信号を出力することができる。
選択部96は、OSD重畳部12から供給される対象入力画像信号と、混合部95から供給される補間信号のいずれか一方を選択し、所定のタイミングで、補間後の画像信号として出力する。具体的には、選択部96は、対象入力画像信号と、その次の対象入力画像信号の間に、それらを用いて生成された補間信号を、補間後の画像信号として出力する。その結果、選択部96から出力される補間後の画像信号のフレームレートは、入力画像信号のフレームレートの2倍となる。
次に、図6を参照して、フレームレート変換部61による前置補間処理と通常補間処理について説明する。
ここでは、図6のAに示すように、連続する3フレームの入力画像信号a乃至cが、フレームレート変換部61に順に入力される場合について説明する。
通常補間処理では、入力画像信号bが対象入力画像信号とされると、入力画像信号bの動きベクトルに対応する混合比を用いて、対象入力画像信号である入力画像信号bと、動きベクトルを用いて移動された前入力画像信号である入力画像信号aが混合され、これにより、図6のBに示すように、入力画像信号aと入力画像信号bの間の中間の時刻における補間信号abが生成される。また同様に、入力画像信号cが対象入力画像信号とされると、入力画像信号cの動きベクトルに対応する混合比を用いて、図6のBに示すように、入力画像信号bと入力画像信号cの間の中間の時刻における補間信号bcを生成する。
一方、前置補間処理では、入力画像信号bが対象入力画像信号とされると、図6のCに示すように、前入力画像信号である入力画像信号aが、そのまま補間信号として生成される。また同様に、入力画像信号cが対象入力画像信号とされると、図6のCに示すように、前入力画像信号である入力画像信号bが、そのまま補間信号として生成される。
次に、図7を参照して、図5の選択部96から出力される補間後の画像信号について説明する。なお、図2と同一のものには同一の符号を付してあり、説明は適宜省略する。
図7のAに示すように、フレームレート変換部61に、白い背景に黒いドーナツ型の円が描かれた、消画が行われていない画像21の画像信号が入力された後、消画信号が入力され、画像22の画像信号が入力されると、フレームレート変換部61は、消画信号に応じて、画像22の画像信号を対象入力画像信号とした前置補間処理を行う。そして、フレームレート変換部61は、補間後の画像信号として、画像21の画像信号と画像22の画像信号の間に、前入力画像信号である画像21の画像信号と同一の、図7のBに示す画像100の画像信号を出力する。
その結果、図7のBに示すように、補間後の画像として、消画が行われた画像22が表示される直前まで、画像21と同一の画像が表示され、画像22の直前の画像の画質の劣化が抑制される。
また、例えば、フレームレート変換部61に、画像21の画像信号にメニュー(MENU)のOSD画像101Aの画像信号が重畳された、図7のCに示す画像101の画像信号が入力された後、消画信号が入力され、消画が行われた画像22の画像信号にOSD画像101Aの画像信号が重畳された、図7のCに示す画像102の画像信号が入力される場合、フレームレート変換部61は、消画信号に応じて、画像102の画像信号を対象入力画像信号として前置補間処理を行う。
その結果、図7のCに示すように、補間後の画像として、画像101と画像102の間に、画像101と同一の画像103が表示され、画像102の直前の画像の画質の劣化が抑制される。
次に、図8を参照して、図3のMPU31における制御処理について説明する。この制御処理は、例えば、受信装置30の電源がオンにされたとき、開始される。
ステップS11において、MPU31は、入力部38から入力切換えまたはチャンネル切換えの指令が入力されたかどうかを判定する。ステップS11で、入力部38から入力切換えまたはチャンネル切換えの指令が入力されたと判定された場合、ステップS12において、MPU31は、入力画像信号が消画されていると判定し、消画信号のフレームレート変換部61への出力を開始する。ステップS13において、MPU31は、消画指令信号の消画部11への出力を開始する。
このように、MPU31が、消画信号を消画指令信号より前に出力することにより、消画部11において消画指令信号に対応した消画が行われる前に、フレームレート変換部61は、自分自身が行うフレーム補間処理を、通常補間処理から前置補間処理に変更することができる。その結果、フレームレート変換部61は、消画が行われている対象入力画像信号に対して行うフレーム補間処理を、確実に前置補間処理にすることができる。
ステップS14において、MPU31は、ステップS13で消画指令信号の出力を開始してから、所定の時間が経過したかどうかを判定する。この時間は、例えば、入力切換えまたはチャンネルの切換えにより画乱れが生じる可能性のある最大の時間である。
ステップS14において、所定の時間が経過していないと判定された場合、所定の時間が経過したと判定されるまで待機する。そして、ステップS14において、所定の時間が経過したと判定された場合、ステップS15において、MPU31は、消画指令信号の消画部11への出力を停止する。以上のように、MPU31は、画乱れが生じる可能性のある最大の時間、消画指令信号を消画部11に出力して、入力画像信号を消画させるので、表示パネル15に画乱れのある画像が表示されることを防止することができる。
ステップS16において、MPU31は、消画信号のフレームレート変換部61への出力を停止し、処理はステップS21に進む。
一方、ステップS11において、入力部38から入力切換えまたはチャンネル切換えの指令が入力されていないと判定された場合、ステップS17において、MPU31は、入力部38からOSD画像の表示の開始の指令が入力されたかどうかを判定する。ステップS17において、OSD画像の表示の開始の指令が入力されたと判定された場合、ステップS18において、MPU31は、重畳指令信号のOSD重畳部12への出力を開始し、処理はステップS21に進む。
また、ステップS17において、入力部38からOSD画像の表示の開始の指令が入力されていないと判定された場合、ステップS19において、MPU31は、OSD画像の表示の停止の指令が入力されたかどうかを判定する。ステップS19において、OSD画像の表示の停止の指令が入力されたと判定された場合、ステップS20において、MPU31は、重畳指令信号のOSD重畳部12への出力を停止し、処理はステップS21に進む。
一方、ステップS19において、OSD画像の表示の停止の指令が入力されていないと判定された場合、処理はステップS21に進む。
ステップS21において、MPU31は、処理を終了するかどうか、例えば、入力部38から電源のオフの指令が入力されたかどうかを判定する。ステップS21で処理を終了しないと判定された場合、処理はステップS11に戻り、上述した処理が繰り返される。一方、ステップS21で処理を終了すると判定された場合、処理は終了する。
なお、上述した説明では、MPU31が、消画信号の出力後に、消画指令信号を出力したが、消画信号に応じてフレームレート変換部61がフレーム補間処理を前置補間処理に変更にした後に、消画指令信号に応じてOSD重畳部12がOSD画像信号の重畳を開始することができれば、消画信号の出力前に、消画指令信号を送信してもよい。
なお、上述した説明では、入力部38から入力切換えまたはチャンネル切換えが指令された場合、MPU31は、消画指令信号の消画部11への出力を開始したが、重畳指令信号の出力が開始されている場合、消画指令信号の出力の開始とともに、重畳指令信号の出力を停止してもよい。この場合、OSD画像の表示中に、入力切換えまたはチャンネル切換えが行われると、所定の時間、OSD画像のない黒い画像が表示される。
次に、図9を参照して、図3の受信装置30における画像処理について説明する。この画像処理は、例えば、デコード処理部33から入力画像信号が画像処理部51に入力されたとき、開始される。
ステップS41において、画像処理部51の消画部11は、MPU31から消画指令信号が入力されているかどうかを判定し、消画指令信号が入力されていると判定した場合、ステップS42において、デコード処理部33から入力される入力画像信号を消画する。そして、消画部11は、消画後の入力画像信号をOSD重畳部12に供給し、処理はステップS44に進む。
一方、ステップS41において、消画指令信号が入力されていないと判定された場合、ステップS43において、消画部11は、デコード処理部33から入力される入力画像信号をそのままOSD重畳部12に出力し、処理はステップS44に進む。
ステップS44において、OSD重畳部12は、MPU31から重畳指令信号が入力されているかどうかを判定し、重畳指令信号が入力されていると判定した場合、ステップS45において、消画部11から供給される入力画像信号にOSD画像信号を重畳する。そして、OSD重畳部12は、重畳後の入力画像信号をフレームレート変換部61に供給し、処理はステップS47に進む。
また、ステップS44において、重畳指令信号が入力されていないと判定された場合、ステップS46において、OSD重畳部12は、消画部11から供給される入力画像信号をそのままフレームレート変換部61に出力し、処理はステップS47に進む。
ステップS47において、フレームレート変換部61は、OSD重畳部12から供給される入力画像信号のフレームレートを変換するフレームレート変換処理を行う。このフレームレート変換処理の詳細は、後述する図10を参照して説明する。
ステップS48において、パネル駆動部14は、フレームレート変換部61から供給される補間後の画像信号に対してD/A変換を行い、その結果得られるアナログ信号に基づいて表示パネル15を駆動し、表示パネル15にフレーム単位の画像を表示させる。そして、処理は終了する。
次に、図10を参照して、図9のステップS47のフレームレート変換処理の詳細について説明する。
ステップS50において、フレームレート変換部61の選択部96は、OSD重畳部12から供給される入力画像信号を、補間後の画像信号として出力する。ステップS51において、フレームメモリ91は、OSD重畳部12から供給される入力画像信号を記憶する。ステップS52において、フレームメモリ91は、既に記憶されている、ステップS51で記憶された入力画像信号の1つ前の入力画像信号を、前入力画像信号として読み出し、検出部92、移動部93、および混合部95に供給する。
ステップS53において、検出部92は、OSD重畳部12から供給される入力画像信号を対象入力画像信号として、対象入力画像信号と、フレームメモリ91から供給される前入力画像信号に基づいて、対象入力画像信号のブロック単位の動きベクトルを検出する。そして、検出部92は、検出したブロック単位の動きベクトルを、移動部93と判定部94に供給する。
ステップS54において、移動部93は、検出部92から供給されるブロック単位の動きベクトルに基づいて、フレームメモリ91から供給される前入力画像信号をブロック単位で移動し、移動後の前入力画像信号を混合部95に供給する。
ステップS55において、判定部94は、MPU31から消画信号が入力されているかどうかを判定し、消画信号が入力されていいないと判定された場合、ステップS56において、判定部94は、検出部92から供給されるブロック単位の動きベクトルに基づいて、ブロック単位の信頼度を決定する。
ステップS57において、判定部94は、ステップS56で決定されたブロック単位の信頼度に基づいて、混合比を決定する。具体的には、例えば、ブロック単位の信頼度が高い場合、判定部94は、移動後の前入力画像信号の画素を混合する比率が高くなるようにブロック単位の混合比を決定し、ブロック単位の信頼度が低い場合、移動後の前入力画像信号の画素を混合する比率が低くなるようにブロック単位の混合比を決定する。判定部94は、決定したブロック単位の混合比を混合部95に供給する。
ステップS58において、混合部95は、判定部94から供給される混合比に基づいて、OSD重畳部12から供給される対象入力画像信号と、移動部93から供給される移動後の前入力画像信号を混合する。混合部95は、混合後の画像信号を補間信号として、選択部96に供給する。以上のようにして、MPU31から消画信号が入力されていない場合、フレームレート変換部61は、通常補間処理を行う。
一方、ステップS55で消画信号が入力さていると判定された場合、ステップS59において、判定部94は、混合なし情報を混合部95に供給する。ステップS60において、混合部95は、判定部94から供給される混合なし情報に応じて、フレームメモリ91から供給される前入力画像信号を、そのまま補間信号として選択部96に供給する。
以上のようにして、MPU31から消画信号が入力されている場合、フレームレート変換部61は、前置補間処理を行う。従って、対象入力画像信号が消画されていることにより、動きベクトルが誤検出される場合において、誤った動きベクトルを用いた補間信号の生成を抑制し、補間後の画像信号の画質を向上させることができる。
ステップS61において、選択部96は、混合部95から供給される補間信号を、補間後の画像信号として出力し、処理は図9のステップS47に戻る。
図11は、本発明を適用した受信装置の第2の実施の形態の構成例を示している。
図11の受信装置150では、チューナ32、デコード処理部33、入力部38、通信部39、記録部40、ドライブ41、MPU151、表示部35とスピーカ36が接続された信号処理部152が、バス37を介して互いに接続されており、信号処理部152が、デコード処理部33から入力される入力画像信号が消画されているかどうかを検出する。なお、図3と同一のものには同一の符号を付してあり、説明は繰り返しになるので省略する。
MPU151は、例えば、記録部40にインストールされたプログラムを実行することにより、入力部38から入力される指令などに対応して、各種の処理を実行する。例えば、MPU151は、図3のMPU31と同様に、チャンネル切換えの指令に対応して、チューナ32を制御し、チューナ32で受信する番組信号に対応するチャンネルを変更する。また、MPU151は、図3のMPU31と同様に、入力切換えの指令に対応して、デコード処理部33に入力する番組信号の入力源を、チューナ32と、通信部39に接続される外部の装置(図示せず)のいずれか一方から他方に変更する。
さらに、MPU151は、入力切換えまたはチャンネル切換えの指令に対応して、消画指令信号を信号処理部152に供給したり、OSD画像の表示の開始の指令に対応して、重畳指令信号を信号処理部152に供給する。
また、MPU151は、図3のMPU31と同様に、通信部39によりダウンロードされたプログラムや、ドライブ41に装着されたリムーバブルメディア42に記録されたプログラムを必要に応じて、記録部40にインストールする。
信号処理部152は、音声処理部52と画像処理部161により構成される。画像処理部161は、図3の画像処理部51と同様に、MPU31から供給される消画指令信号に応じて、デコード処理部33から供給される番組信号のうちの画像信号に対して消画を行ったり、重畳指令信号に応じてOSD画像信号の重畳を行う。また、画像処理部161は、その結果得られる画像信号に対して、その画像信号が消画されているかどうかの検出、連続する画像信号の中間の時刻における画像信号の補間、D/A変換などの処理を施す。画像処理部161は、その結果得られるアナログ信号である画像信号を、表示部35に供給して、表示部35に画像を表示させる。
次に、図12を参照して、図11の受信装置150における補間について説明する。
なお、図12において、図1や図4と同一のものには同一の符号を付してあり、説明は繰り返しになるので、説明は適宜省略する。
図12に示すように、MPU151は、入力部38から入力される入力切換えやチャンネル切換えの指令に対応して、消画指令信号を画像処理部51の消画部11に供給する。また、MPU151は、MPU31と同様に、入力部38から入力されるOSD画像の表示の開始の指令に対応して、重畳指令信号を画像処理部51のOSD重畳部12に供給する。
画像処理部161は、消画部11、OSD重畳部12、フレームレート変換部61、および消画検出部171により構成され、表示部35は、パネル駆動部14と表示パネル15により構成される。
図12の画像処理部161において、消画部11から出力される入力画像信号は、OSD重畳部12だけでなく、消画検出部171にも入力される。消画検出部171は、消画部11から入力される入力画像信号に基づいて、その入力画像信号が消画されているかどうかを検出する。そして、消画検出部171は、入力画像信号が消画されていることを検出した場合、その入力画像信号の消画信号をフレームレート変換部61の判定部94(図5)に供給する。
次に、図13を参照して、図11のMPU151における制御処理について説明する。この制御処理は、例えば、受信装置150の電源がオンにされたとき、開始される。
図13のステップS111乃至S119の処理は、図8の制御処理においてステップS12とS16の処理を除いたものである。即ち、図13の制御処理では、MPU151は、消画信号の出力を行わない。
次に、図14を参照して、図12の消画検出部171における検出処理について説明する。この検出処理は、例えば、消画部11から消画検出部171に入力画像信号が入力されたとき、開始される。
ステップS131において、消画検出部171は、入力画像信号が消画されているかどうかを判定する。具体的には、消画検出部171は、入力画像信号のレベルのヒストグラム(度数分布)、入力画像信号が黒レベルである画素の数、および、入力画像信号のレベルの時間変化としての、連続する2つの入力画像信号のレベルの一致度合に基づいて、入力画像信号が消画されているかどうかを判定する。
ステップS131において、入力画像信号が消画されていると判定された場合、ステップS132において、消画検出部171は、その入力画像信号の消画信号を出力し、処理を終了する。一方、ステップS131において、入力画像信号が消画されていないと判定された場合、処理はステップS132をスキップして終了する。
なお、図11の受信装置150における画像処理は、図9に示した画像処理と同様であるので、説明は省略するが、受信装置150における画像処理では、ステップS47のフレームレート変換処理における図10のステップS55において、消画検出部171から対象入力画像信号の消画信号が入力されているかどうかが判定される。
具体的には、例えば、図14のステップS132で出力される、入力画像信号の消画信号には、その入力画像信号を特定するための情報(例えば、フレーム番号)が付加されており、判定部94により、対象入力画像信号を特定するための情報が付加された消画信号が入力されているかどうかが判定される。
図15は、本発明を適用した受信装置の第3の実施の形態の構成例を示している。
図15の受信装置201では、チューナ32、デコード処理部33、入力部38、記録部40、ドライブ41、MPU211、表示部35とスピーカ36が接続された信号処理部212、および通信部213が、バス37を介して互いに接続されており、通信部213に接続された外部の記録再生装置202から、必要に応じて消画が行われた画像信号が入力される。なお、図3や図11と同一のものには同一の符号を付してあり、説明は繰り返しになるので省略する。
MPU211は、例えば、記録部40にインストールされたプログラムを実行することにより、入力部38から入力される指令などに対応して、各種の処理を実行する。例えば、MPU211は、図3のMPU31や図11のMPU151と同様に、チャンネル切換えの指令に対応して、チューナ32を制御し、チューナ32で受信する番組信号に対応するチャンネルを変更する。また、MPU211は、入力切換えの指令に対応して、デコード処理部33に入力する画像信号の入力源を、チューナ32と、通信部213に接続される記録再生装置202のいずれか一方から他方に変更する。
さらに、MPU211は、図3のMPU31と同様に、入力切換えまたはチャンネル切換えの指令に対応して、消画指令信号と消画信号を信号処理部212に供給したり、OSD画像の表示の開始の指令に対応して、重畳指令信号を信号処理部212に供給する。また、MPU211は、通信部213から供給される消画信号を、信号処理部212に供給する。
MPU211は、図3のMPU31や図11のMPU151と同様に、通信部213によりダウンロードされたプログラムや、ドライブ41に装着されたリムーバブルメディア42に記録されたプログラムを必要に応じて、記録部40にインストールする。
信号処理部212は、画像処理部221と音声処理部222により構成される。画像処理部221は、MPU31から供給される消画指令信号に応じて、デコード処理部33または通信部213から供給される番組信号のうちの画像信号に対して消画を行ったり、重畳指令信号に応じてOSD画像信号の重畳を行う。また、画像処理部221は、図3の画像処理部51と同様に、その結果得られる画像信号に対して、連続する画像信号の中間の時刻における画像信号の補間、D/A変換などの処理を施す。画像処理部221は、図3の画像処理部51や図11の画像処理部161と同様に、その結果得られるアナログ信号である画像信号を、表示部35に供給して、表示部35に画像を表示させる。
音声処理部222は、デコード処理部33または通信部213から供給される番組信号のうちの音声信号に対して、D/A変換などを行い、その結果得られるアナログ信号である音声信号を、スピーカ36に供給して、外部に音声を出力させる。
通信部213は、外部の記録再生装置202と接続され、記録再生装置202と通信を行う。例えば、通信部213は、記録再生装置202から消画信号を取得し、その消画信号を、バス37を介してMPU211に供給する。また、通信部213は、記録再生装置202から番組信号を受信し、バス37を介して信号処理部212に供給する。さらに、通信部213は、図3や図11の通信部39と同様に、図示せぬインターネットなどのネットワークを介して、各種のデータの送受信を行う。また、通信部213は、図示せぬサーバからネットワークを介して所定のプログラムをダウンロードし、MPU211に供給する。
記録再生装置202は、例えば、DVD(Digital Versatile Disc)レコーダやハードディスクレコーダなどにより構成される。記録再生装置202は、ユーザの所望のチャンネルの番組信号の電波を受信し、その番組信号をDVDやハードディスクなどの記録媒体に記録する。記録再生装置202は、ユーザの再生の指令に応じて、記録している番組信号を再生し、通信部213に送信する。
また、記録再生装置202は、ユーザからの再生対象の切換えなどの指令に応じて、消画信号を通信部213に送信する。記録再生装置202は、消画信号の送信後、再生した番組信号のうちの画像信号を消画し、その結果得られる番組信号を、通信部213に送信する。
次に、図16を参照して、図15の受信装置201における補間について説明する。
なお、図16において、図4や図12と同一のものには同一の符号を付してあり、繰り返しになるので、説明は適宜省略する。
図16の記録再生装置202は、チューナ231、記録再生部232、デコード部233、消画部234、OSD重畳部235、入力部236、および制御部237により構成される。
チューナ231は、制御部237の制御により、図示せぬ放送局から放射される、ユーザの所望のチャンネルの番組信号の電波を受信して復調する。チューナ231は、復調の結果得られる番組信号を記録再生部232に供給して、記録させる。
記録再生部232は、そこに装着されるDVDなどのリムーバブルメディアや、内蔵するハードディスクなどの記録媒体(図示せず)に、チューナ231から供給される番組信号を記録する。記録再生部232は、制御部237の制御により、記録している番組信号を再生し、デコード部233に供給する。
デコード部233は、制御部237の制御により、記録再生部232から供給される番組信号を所定の方式でデコードし、その結果得られる番組信号を消画部234に供給する。
消画部234は、制御部237から供給される消画指令信号に応じて、デコード部233から供給される番組信号のうちの画像信号を消画する。消画部234は、消画後の画像信号、または、デコード部233から供給された画像信号そのものを含む番組信号を、OSD重畳部235に供給する。
OSD重畳部235は、制御部237から供給される重畳の指令を表す重畳指令信号に応じて、消画部234から供給される番組信号のうちの画像信号に、OSD画像信号を重畳する。OSD重畳部12は、重畳後の画像信号、または、消画部234から供給された画像信号そのものを含む番組信号を、SCART端子を介した通信やHDMI(High-Definition Multimedia Interface)通信などにより、受信装置201の通信部213に送信する。
入力部236は、例えば、図示せぬリモートコントローラから送信されてくる指令を受信する受信部、ボタン、キーボード、マウス、スイッチなどから構成され、ユーザからの指令を受け付ける。入力部236は、ユーザからの指令に応じて、各種の指令を制御部237に供給する。
例えば、入力部236は、ユーザからの、所望のチャンネルの番組の記録または再生の開始の指令に応じて、その番組を記録または再生するための指令を制御部237に供給する。また、入力部236は、ユーザからの再生対象の切換えの指令に応じて、再生対象を切り換えるための指令を制御部237に供給する。さらに、入力部236は、ユーザからのOSD画像の表示の開始または終了の指令に応じて、OSD画像の表示の開始または終了の指令を制御部237に供給する。
制御部237は、入力部236から入力される指令などに対応して、各種の処理を実行する。例えば、制御部237は、所望のチャンネルの番組を記録するための指令に対応して、チューナ231を制御し、その番組の番組信号を受信して、記録再生部232に記録させる。また、制御部237は、所望のチャンネルの番組を再生するための指令に対応して、記録再生部232とデコード部233を制御し、その番組の番組信号を記録再生部232から再生する。
さらに、制御部237は、再生対象の切換えの指令に対応して、記録再生部232とデコード部233を制御し、切換え後の再生対象である番組信号を記録再生部232から再生する。また、制御部237は、再生対象の切換えの指令に対応して、HDMI通信のCECライン(Consumer Electronics Control Line)やCENELEC(European Committee for Electrotechnical Standardization)においてEN-50157として規定されているAVリンク(AV Link)などにより、消画信号を通信部213に送信し、その後、消画部234に消画指令信号を供給する。制御部237は、OSD画像の表示の開始の指令に対応して、OSD重畳部235に重畳指令信号を供給する。
通信部213は、制御部237から消画信号を受信し、バス37を介してMPU211に供給する。また、通信部213は、OSD重畳部235から番組信号を受信し、その番組信号のうちの画像信号を画像処理部221の消画部251に供給し、音声信号を音声処理部222に供給する。
MPU211は、通信部213から供給される消画信号を、フレームレート変換部61に供給する。また、MPU211は、図3のMPU31と同様に、入力部38から入力される入力切換えやチャンネル切換えの指令に対応して、消画指令信号を消画部11に供給し、消画信号をフレームレート変換部61に供給する。さらに、MPU211は、図3のMPU31や図11のMPU151と同様に、入力部38から入力されるOSD画像の表示の開始の指令に対応して、重畳指令信号をOSD重畳部12に供給する。
図16の画像処理部221は、OSD重畳部12、フレームレート変換部61、および消画部251により構成され、表示部35は、パネル駆動部14と表示パネル15により構成される。
消画部251には、デコード処理部33または通信部213から供給される番組信号のうちの画像信号が、入力画像信号として入力される。消画部251は、MPU211から供給される消画指令信号に応じて、デコード処理部33または通信部213から入力された入力画像信号を消画する。消画部251は、消画後の入力画像信号、または、入力された入力画像信号そのものを、OSD重畳部12に供給する。
次に、図17を参照して、図15のMPU211における制御処理について説明する。この制御処理は、例えば、受信装置201の電源がオンにされたとき、開始される。
図17のステップS151乃至S160の処理は、図8のステップS11乃至S20の処理と同様であるので、説明は省略する。
ステップS159において、OSD画像の表示の停止の指令が入力されたと判定された場合、ステップS161において、MPU211は、記録再生装置202の制御部237から、通信部213を介して消画信号が入力されたかどうかを判定する。ステップS161において、消画信号が入力されたと判定された場合、ステップS162において、MPU211は、記録再生装置202から送信されてくる入力画像信号が消画されていると判定し、消画信号を画像処理部221のフレームレート変換部61に出力する。
一方、ステップS161において、消画信号が入力されていないと判定された場合、処理はステップS163に進む。
ステップS163において、MPU211は、処理を終了するかどうか、例えば、入力部38から電源のオフの指令が入力されたかどうかを判定する。ステップS163で処理を終了しないと判定された場合、処理はステップS151に戻り、上述した処理が繰り返される。一方、ステップS163で処理を終了すると判定された場合、処理は終了する。
なお、図15の受信装置201における画像処理は、図9に示した画像処理と同様であるので、説明は省略するが、受信装置201における画像処理は、例えば、デコード処理部33または通信部213から入力画像信号が画像処理部221に入力されたとき、開始される。
なお、上述した説明では、連続する画像信号の中間の時刻における画像信号が補間されたが、中間の時刻に限らず、任意の時刻における画像信号が補間されるようにしてもよい。
また、本明細書において、プログラム記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
さらに、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
従来の画像処理装置の構成の一例を示すブロック図である。 従来の補間後の画像信号について説明する図である。 本発明を適用した受信装置の第1の実施の形態の構成例を示すブロック図である。 図3の受信装置における補間について説明するブロック図である。 図4のフレームレート変換部の詳細構成例を示すブロック図である。 前置補間処理と通常補間処理について説明する図である。 補間後の画像信号について説明する図である。 図3のMPUにおける制御処理について説明するフローチャートである。 図3の受信装置における画像処理について説明するフローチャートである。 図9のステップS47のフレームレート変換処理の詳細について説明するフローチャートである。 本発明を適用した受信装置の第2の実施の形態の構成例を示すブロック図である。 図11の受信装置における補間について説明するブロック図である。 図11のMPUにおける制御処理について説明するフローチャートである。 図12の消画検出部における検出処理について説明するブローチャートである。 本発明を適用した受信装置の第3の実施の形態の構成例を示すブロック図である。 図15の受信装置における補間について説明するブロック図である。 図15のMPUにおける制御処理について説明するフローチャートである。
符号の説明
11 消画部, 30 受信装置, 31 MPU, 38 入力部, 51 画像処理部, 61 フレームレート変換部, 92 検出部, 95 混合部, 171 消画検出部, 202 記録再生装置, 213 通信部

Claims (4)

  1. 他の装置から入力された、前記他の装置から入力された時系列の各画素の画像信号である入力画像信号が消画されていることを表す消画信号を取得する取得手段と、
    前記入力画像信号の動きベクトルを検出する検出手段と、
    前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定する判定手段と、
    前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力する補間手段と
    を備える画像処理装置。
  2. 前記入力画像信号を消画する消画手段
    をさらに備える
    請求項1に記載の画像処理装置。
  3. 他の装置から入力された時系列の各画素の画像信号である入力画像信号を補間する画像処理装置の画像処理方法において、
    前記他の装置から入力された、前記入力画像信号が消画されていることを表す消画信号を取得し、
    前記入力画像信号の動きベクトルを検出し、
    前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定し、
    前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力する
    ステップを含む画像処理方法。
  4. 他の装置から入力された時系列の各画素の画像信号である入力画像信号を補間する画像処理を、コンピュータに行わせるプログラムにおいて、
    前記他の装置から入力された、前記入力画像信号が消画されていることを表す消画信号を取得し、
    前記入力画像信号の動きベクトルを検出し、
    前記消画信号が取得された場合前記入力画像信号が消画されていると判定し、前記消画信号が取得されない場合前記入力画像信号が消画されていないと判定し、
    前記入力画像信号が消画されていないと判定された場合、前記動きベクトルに基づいて、前記入力画像信号と、その入力画像信号の1つ前の入力画像信号である前入力画像信号の間の任意の時刻における画像信号である入力画像信号間信号を補間して出力し、前記入力画像信号が消画されていると判定された場合、前記前入力画像信号を、そのまま前記入力画像信号間信号として出力する
    ステップを含む画像処理をコンピュータに行わせるプログラム。
JP2007106251A 2007-04-13 2007-04-13 画像処理装置および画像処理方法、並びにプログラム Active JP5029112B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2007106251A JP5029112B2 (ja) 2007-04-13 2007-04-13 画像処理装置および画像処理方法、並びにプログラム
US12/082,619 US8126293B2 (en) 2007-04-13 2008-04-10 Image processing apparatus, image processing method, and program
CN200810091774.4A CN101287068B (zh) 2007-04-13 2008-04-14 图像处理设备和图像处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007106251A JP5029112B2 (ja) 2007-04-13 2007-04-13 画像処理装置および画像処理方法、並びにプログラム

Publications (2)

Publication Number Publication Date
JP2008263530A JP2008263530A (ja) 2008-10-30
JP5029112B2 true JP5029112B2 (ja) 2012-09-19

Family

ID=39853784

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007106251A Active JP5029112B2 (ja) 2007-04-13 2007-04-13 画像処理装置および画像処理方法、並びにプログラム

Country Status (3)

Country Link
US (1) US8126293B2 (ja)
JP (1) JP5029112B2 (ja)
CN (1) CN101287068B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100016741A (ko) * 2008-08-05 2010-02-16 삼성전자주식회사 영상처리장치 및 그 제어 방법

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI98590C (fi) * 1994-09-20 1997-07-10 Nokia Technology Gmbh Videokuvan interpolointimenetelmä
JP4083265B2 (ja) * 1997-10-07 2008-04-30 株式会社日立製作所 画像信号の方式変換方法および装置
JP4092773B2 (ja) * 1998-04-14 2008-05-28 株式会社日立製作所 画像信号のフレーム数変換方法および装置
US6584154B1 (en) * 1998-11-26 2003-06-24 Oki Electric Industry Co., Ltd. Moving-picture coding and decoding method and apparatus with reduced computational cost
CN1157053C (zh) * 1999-05-25 2004-07-07 皇家菲利浦电子有限公司 隔行扫描图像信号变换成逐行扫描图像信号
JP3884885B2 (ja) 1999-07-29 2007-02-21 株式会社日立製作所 液晶表示装置
US7530084B2 (en) * 2002-05-28 2009-05-05 Sony Corporation Method and apparatus for synchronizing dynamic graphics
EP1590957A1 (en) * 2003-01-23 2005-11-02 Koninklijke Philips Electronics N.V. Background motion vector detection
JP2005303394A (ja) * 2004-04-06 2005-10-27 Sharp Corp 液晶表示装置
JP4675884B2 (ja) * 2004-04-06 2011-04-27 パナソニック株式会社 特定番組検出装置及び方法並びにプログラム
DE602004002935T2 (de) * 2004-04-30 2007-02-01 Matsushita Electric Industrial Co., Ltd., Kadoma Bearbeitung von Tickern in Videosequenzen
JP5177828B2 (ja) * 2005-03-25 2013-04-10 株式会社Jvcケンウッド 画像レート変換方法及び画像レート変換装置

Also Published As

Publication number Publication date
US20080253691A1 (en) 2008-10-16
CN101287068B (zh) 2013-04-17
US8126293B2 (en) 2012-02-28
CN101287068A (zh) 2008-10-15
JP2008263530A (ja) 2008-10-30

Similar Documents

Publication Publication Date Title
CN101377917B (zh) 显示设备
JP4618305B2 (ja) 画像処理装置および画像処理方法、並びにプログラム
US8325278B2 (en) Video display based on video signal and audio output based on audio signal, video/audio device network including video/audio signal input/output device and video/audio reproduction device, and signal reproducing method
CN109691116B (zh) 影像显示装置及影像显示方法
US20070089160A1 (en) Electronic device, video display device, and method of controlling the video display device
US20090161008A1 (en) Communication apparatus, information processing method, and program
JP5023805B2 (ja) 画像処理装置および画像処理方法、並びにプログラム
US20100053428A1 (en) Image processing apparatus and image processing method, program, and image display apparatus
CN109691118B (zh) 影像显示系统及影像显示方法
JP5087944B2 (ja) データ送受信システム
JP5023780B2 (ja) 画像処理装置および画像処理方法、並びにプログラム
EP2897362A1 (en) Apparatus for displaying image, driving method thereof, and method for displaying image
JP5029112B2 (ja) 画像処理装置および画像処理方法、並びにプログラム
JP2007089013A (ja) 操作画面を高速に出画するav機器
JP2010061774A (ja) 再生装置、再生制御方法、およびプログラム
JP4079721B2 (ja) Dvd信号出力方式選択装置、dvd内蔵型マルチ方式tv受像機、dvd再生表示装置、及びdvd再生装置
JP4412321B2 (ja) テレビ番組送信/記録再生システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100312

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120319

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120529

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120611

R151 Written notification of patent or utility model registration

Ref document number: 5029112

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150706

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250