JP2011223457A - 映像表示装置および映像処理方法 - Google Patents

映像表示装置および映像処理方法 Download PDF

Info

Publication number
JP2011223457A
JP2011223457A JP2010092432A JP2010092432A JP2011223457A JP 2011223457 A JP2011223457 A JP 2011223457A JP 2010092432 A JP2010092432 A JP 2010092432A JP 2010092432 A JP2010092432 A JP 2010092432A JP 2011223457 A JP2011223457 A JP 2011223457A
Authority
JP
Japan
Prior art keywords
processing
video
signal
module
video signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010092432A
Other languages
English (en)
Other versions
JP4691193B1 (ja
Inventor
Kenichi Horikoshi
健一 堀越
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2010092432A priority Critical patent/JP4691193B1/ja
Priority to US12/900,288 priority patent/US8284324B2/en
Application granted granted Critical
Publication of JP4691193B1 publication Critical patent/JP4691193B1/ja
Publication of JP2011223457A publication Critical patent/JP2011223457A/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/395Arrangements specially adapted for transferring the contents of the bit-mapped memory to the screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • H04N7/0132Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter the field or frame frequency of the incoming video signal being multiplied by a positive integer, e.g. for flicker reduction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0252Improving the response speed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012Conversion between an interlaced and a progressive signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Television Systems (AREA)

Abstract

【課題】ゲームコンテンツ等の表示のときに、ユーザーに違和感を与えないテレビジョン受信装置1を提供する。
【解決手段】実施の形態のテレビジョン受信装置1は、入力された映像信号を信号処理して、表示映像信号を表示パネル15に出力する映像処理モジュール30と、前記信号処理として、前記映像信号に対する前記表示映像信号の遅延時間が短い低遅延処理の動作をON/OFFするセレクタ21と、前記セレクタ21による前記低遅延処理の動作がONの場合およびOFFの場合に、前記表示モジュールにあわせたスケーリング処理をするように前記映像処理モジュール30を制御するコントローラ20と、を具備する。
【選択図】図12

Description

本発明の実施の形態は、映像信号を信号処理して表示モジュールに表示する映像表示装置および映像信号の映像処理方法に関する。
ゲーム機器を接続することにより、ユーザーがゲームを楽しむことのできるテレビジョン受信装置(以下「テレビ」という。)が普及している。ユーザーは、テレビの外部入力端子にゲーム機器を接続して動作させることにより、ゲーム機器で生成された映像および音声がテレビのディスプレイおよびスピーカから出力される。すなわち、テレビをゲーム機器の外部出力装置として用いることにより、ユーザーは大きな画面でゲームを楽しむことができる。
ここで、近年のテレビでは、画質改善のために種々の映像信号の処理が行われている。映像信号を処理するためには、フレーム単位の情報および処理が必要だったこともあり、所定時間を要する。通常の放送番組等の視聴においては、例えば50ミリ秒(ms)未満の僅かな表示遅延が問題になることはない。しかし、ゲーム機器から出力された映像信号が遅延して表示されると、その表示に対するユーザーの操作が遅れることになり、ユーザーが違和感を感じたり、あるいはゲームの結果が変わったりする等の問題が生じるおそれがあった。例えば、表示画面上を高速移動する標的を撃つシューティングゲームにおいては、僅かな遅延時間でも、シューティングのタイミングがずれてしまう。
このため、例えば、ゲームを行う場合には、入力された映像信号のデジタル演算処理を省略して、遅延時間を短縮することのできる表示装置が知られている。
特開2005−338605号公報
本発明は、ゲームコンテンツ等の表示のときに、ユーザーに違和感を与えない映像表示装置および映像処理方法を提供することを目的とする。
上記目的を達成すべく、本発明の一態様の映像表示装置は、入力された映像信号を信号処理して、表示映像信号を表示モジュールに出力する映像処理モジュールと、信号処理として、映像信号に対する表示映像信号の遅延時間が短い低遅延処理の動作をON/OFFするセレクタと、セレクタによる低遅延処理の動作がONの場合およびOFFの場合に、表示モジュールにあわせたスケーリング処理をするように映像処理モジュールを制御するコントローラと、を具備する。
実施の形態のテレビジョン受信装置の構成図である。 テレビジョン受信装置の映像信号処理を説明するための構成図であり、図2(A)は低遅延処理OFFの場合を、図2(B)は低遅延処理ONの場合を示している。 テレビジョン受信装置の遅延時間を説明するためのタイムチャートである。 表示映像信号の種類による表示パネルにおける表示状態を説明するための図であり、図4(A)は1080pの表示パネルに表示された720pの映像信号の表示状態を、図4(B)は1080pの表示パネルに表示された480pの映像信号の表示状態を示している。 実施の形態のテレビジョン受信装置の信号処理を説明するための構成図である。 同期補償モジュールを説明するための、入力映像信号の同期信号と表示映像信号の同期信号との関係を示した構成図である。 同期補償モジュールの動作を説明するためのタイムチャートである。 実施の形態のテレビジョン受信装置の映像信号処理の流れを説明するためのフローチャートである。 実施の形態のテレビジョン受信装置における処理モード選択方法を説明するための表示画面を示す図である。 「追い越し現象」を説明するための説明図であり、図10(A)は書き込み映像を、図10(B)は読み出し映像を、図10(C)は書き込み/読み出しのときのタイムチャートを示している。 同期遅れ現象を説明するためのタイムチャートである。 実施の形態のテレビジョン受信装置の遅延時間を説明するためのタイムチャートである。
図1に示すように本発明の実施の形態の映像表示装置であるテレビジョン受信装置(テレビ)1は、チューナ11と、外部入力端子12と、前段処理モジュール13と、フレームメモリ14と、映像処理モジュール30と、セレクタ21と、コントローラ20と、オーディオプロセッサと、音声遅延処理モジュール17と、を具備する。なお説明の都合上、フレームメモリ14と映像処理モジュール30とを区別しているが、フレームメモリ14は映像処理モジュール30の機能の一部とみなすこともできるし、フレームメモリ14および映像処理モジュール30等は、ひとつのシステムLSIに実装されていてもよい。
そして、テレビ1は、アンテナ2がチューナ11と、ゲーム操作部4を有するゲーム機器3が外部入力端子12と接続され、表示モジュールである表示パネル15に映像を、音声出力モジュールであるスピーカ18に音声を出力する。
チューナ11は、BS放送、CS放送等の衛星放送、地上波放送等の放送信号等を選局/処理して、映像信号および音声信号を出力する。チューナ11は、ケーブルTV回線等の通信回線からの信号も受信可能である。
外部入力端子12は、コンポジッット信号、S端子信号、色差信号、D−sub信号等の信号形態によるゲーム機器3およびハードディスクレコーダー等をはじめとする外部装置からの映像信号/音声信号を外部入力として受ける。
前段処理モジュール13は、チューナ11および外部入力端子12からの複数の映像信号/音声信号等を受け、いずれかの映像信号/音声信号を選択し、前段処理を行うとともに、映像信号をフレームメモリ14に、音声信号をオーディオプロセッサ16に出力する。
映像信号はフレームメモリ14を介して、後に詳述する映像処理モジュール30で信号処理され、表示映像信号が表示パネル15に出力される。音声信号は、オーディオプロセッサ16で信号処理された後に、映像信号の遅延時間に応じて、音声信号を遅延処理する音声遅延処理モジュール17を介してスピーカ18に出力される。
コントローラ20は、ユーザー指示が入力されるセレクタ21の設定等に応じて、テレビ1の全体の制御を行うCPUである。
ここで、テレビ1と対比するために、テレビ1とは異なる方法で遅延時間を短縮するテレビ101について、説明する。テレビ101では、遅延時間を短縮する低遅延処理が選択されるとコントローラ20は、映像処理モジュール130による一部の信号処理を省略するように制御する。
すなわち、テレビ101は低遅延処理OFFの場合(低遅延処理OFFモード)には、図2(A)に示す映像処理モジュール130の信号処理を全て行うのに対して、低遅延処理ONの場合(低遅延処理ONモード)には、図2(B)に示すように、高画質化モジュール134による高画質化処理しか行わない。
ここで、テレビ101の映像処理モジュール130は、IP変換/NR(ノイズリダクション)モジュール131と、スケーラー133と、フレームメモリ114Bと、高画質化モジュール134と、超解像モジュール132と、倍速処理モジュール136と、を有する。
IP(Interlace/Progressive)変換/NR(Noise Reduction)モジュール131は、インターレース方式の映像信号をプログレッシブ方式の映像信号へ変換するIP変換処理を行うとともに、映像の、ざらつき、ちらつき、ブロッキングノイズおよび、モスキートノイズを低減するノイズリダクション処理を行う。すなわち、IP変換/NRモジュール131は、IP変換処理モジュールとNRモジュールとから構成されている。もちろんプログレッシブ方式の入力映像信号に対しては、IP変換処理は行われない。また、入力映像信号のノイズが少ない場合等にはノイズリダクション処理を省略してもよい。すなわち、IP変換/NRモジュール131では、IP変換およびノイズリダクション処理の少なくとも一方が行われる。
スケーラー133は、表示パネル15の仕様と異なる映像信号に対して、表示パネル15の仕様にあわせたスケーリング処理を行う。例えば、入力映像信号のアスペクト比が4:3で、表示パネルのアスペクト比が16:9の場合、スケーラー133は、入力映像信号を、アスペクト比が16:9の表示映像信号に変換する。
フレームメモリ114Bは、後段の高画質化モジュール134での高画質化処理のために、前段のフレームメモリ114Aと同様に、映像信号をフレーム単位で記憶(格納)する。なお、フレームメモリ114Aとフレームメモリ114Bとは、それぞれが少なくとも1フレームの映像信号を記憶可能であれば、ひとつのメモリの記憶領域を使い分けて使用しても良い。
高画質化モジュール134は、映像の画質を改善するために、例えば、色補正(ガンマ補正、ホワイトバランス調整、ブライトネス調整、コントラスト調整)、シャープネス調整、輪郭強調(エッジエンハンスメント)、および応答速度向上等の高画質化処理を行う。
高解像度化モジュールである超解像モジュール132は、画素と画素との間に新しい画素値データを生成し、高い周波数成分を創造し、鮮鋭化することで、映像の元の解像度を超える映像を生成する。すなわち、第1解像度である低解像度の映像信号から本来の画素値を推定して画素を増やすことにより、第2解像度である高解像度の映像信号を復元する。ここで、「本来の画素値」とは、例えば、低解像度(第1解像度)の映像信号を得たときと同じ被写体を、高解像度(第2解像度)のカメラで撮像したときに得られる映像信号の各画素が示す値をいう。また、「推定して画素を増やす」とは、対象とする映像の特徴を捉えて、同一フレーム内、またはフレーム間において相関の高い映像から、本来の画素値を推定して、新たな画素に対応付ける画素値とすることを意味する。つまり、映像の相関性を利用する。なお、超解像モジュール132は、公知技術、例えば、入力映像の標本化周期で決まるナイキスト周波数より高い周波数成分を有する映像を復元する技術を用いる。
倍速処理モジュール136は、フレーム周波数50Hzの場合は100Hzへ、60Hz場合は120Hzと、フレーム周波数を倍にあげ、残像感を低減する倍速処理を行う。倍速処理としては、動き補償予測に基づき、連続する2つのフレームの間に挿入するための補間フレームを生成する方式でもよいし、単純に同じ映像を2回表示する、いわゆる「単純二度振り方式(Simple double repeat method)」であってもよい。
ここで、上記の各モジュールにおける信号処理に起因する遅延時間について説明する。フレームメモリ114Aおよびフレームメモリ114Bは、フレーム単位で映像信号を記憶してから出力するため、それぞれ1フレームの遅延時間発生の原因となる。倍速処理モジュール136も、1フレームの遅延時間発生の原因となる。なお、以下、フレーム周波数として60Hzを例に説明するが、この場合には、1フレームは、約16.7msに相当する。
このため、図3に示すように、テレビ101では、例えば、低遅延処理OFFモードの場合には、3フレームの約50msの遅延時間が発生するが、低遅延処理ONモードの場合には、遅延時間を、2フレームの33.3msに短縮できる。
しかし、図4に示すように、入力映像信号が、表示パネル15の仕様(1080p)よりも小さい720p、480pの場合には、画面の上下に無信号領域(黒領域)を表示する時間が発生するために、より遅延時間が長く、それぞれ38.3ms、41.3msである。なお、低遅延処理OFFモードの場合にはスケーリング処理を行っているため、入力映像信号が720pまたは480pの場合でも遅延時間は1080pの場合と同じ50msである。
すなわち、テレビ101では、高画質化モジュール134が、フレームメモリから直接、読み出した映像信号しか処理できない仕様であるため、低遅延処理モードの場合でも、高画質化処理4の直前にフレームメモリから映像信号を取り込む必要がある。その場合、フレームメモリ114Bから映像信号を読み出す構成では、映像信号はフレームメモリに2回格納されるので、遅延時間短縮効果は小さい。そのため、図2(B)に示すように、映像信号をフレームメモリ114Aから読み出すことで、テレビ101としては最小遅延時間の低遅延処理を実現している。しかし、そのためテレビ101では、低遅延処理モードの場合には、IP変換処理/NR処理およびスケーラー処理を行うことはできないため、180iまたは1080iなどのインターレース信号は処理できない。しかし、プログレッシブ信号をノンスケーリング(Dot By Dot)処理する場合には、遅延時間を短縮することができる。言い換えれば、テレビ101は、所定の制限のもと、低遅延処理モードが選択されると、遅延時間を短縮することができる。
これに対して、本実施の形態のテレビ1は、図2に示したテレビ101と類似した処理モジュール等を有する。すなわち、図5に示すように、本実施の形態のテレビ1は、テレビ101と比較すると、フレームメモリ114Bに相当するメモリが省略されており、かつ映像処理モジュール30における信号処理の順序が異なっている。すなわち、映像解析モジュール22がフレームメモリ14に格納された映像信号を用いて解析処理を行うことができるため、テレビ101が有していたフレームメモリ114Bが不要であり、高画質モジュール34は、フレームメモリから映像を直接、読み出す必要のある仕様ではない。このため、テレビ1は、フレームメモリ14と、IP変換/NRモジュール31と、超解像モジュール32と、スケーラー33と、高画質化モジュール34と、倍速処理モジュール36と、映像解析モジュール22と、同期信号生成モジュール41と、クロック42と、同期補正モジュール43と、表示同期信号生成モジュール44と、を有する。なお、テレビ101において既に説明したモジュールと同名のモジュールの機能は同じであるため、説明は省略する。また、映像解析モジュール22と同期信号生成モジュール41とクロック42と同期補正モジュール43と、表示同期信号生成モジュール44と、は、テレビ101も有していたが、説明を省略していた。
映像解析モジュール22は、フレームメモリ14に記憶された映像信号を解析し、コントローラ20が映像処理モジュール30の制御に用いるフレーム情報を出力する。すなわち、映像解析モジュール22は、例えば輝度レベルのダイナミットレンジをn分割し、1フレーム分の映像信号に対して、各輝度レベル1〜nに対応している画素数をカウントすることにより1フレーム分の輝度のヒストグラムデータを取得したりする。また、映像解析モジュール22は、例えば映像信号の周波数分布も検出する。なお、テレビ101では映像解析モジュールは、フレームメモリ114Bに格納された映像信号を解析し、高画質化モジュール134および超解像モジュール132に出力していた。
図6に示すように、同期信号生成モジュール41は、入力された映像信号から同期信号を分離し生成する。クロック42は所定の周波数の信号を発生し、表示同期信号生成モジュール44はクロック42は発生した信号をもとに、表示パネル15が表示する表示映像信号の同期信号(表示同期信号)を発生する。
そして、図6および図7に示すように、同期補正モジュール43は、同期信号生成モジュール41が生成した映像信号の入力同期信号と、表示同期信号生成モジュール44が発生した表示同期信号と、を同期させる。すなわち、図7(A)に示すように、同期補正モジュール43は、所定の同期補償期間(T2)にある入力同期信号に同期した表示同期信号を生成し、表示パネル15に出力する。そして、図7(B)に示すように、同期補正モジュール43は所定の同期補償期間(T2)に、映像信号処理用の同期信号が得られないときは、同期補償期間の最大値側で同期信号を生成し、固有の発振周波数で発振を続ける、いわゆるフリーラン状態となる。
なお、図7では、フレームごとに補償期間を設定し、フレームごとに同期補償処理を行う場合を例示しているが、例えば2フレーム長を対象に補償期間を設定し、2フレームごとに同期補償処理を行っても良い。
そして、テレビ1では、低遅延処理ON(モード)においても、低遅延処理OFF(モード)の場合と同じく、映像処理モジュール30が、図5に示した全ての信号処理を行う。ただし、低遅延処理OFFの場合には、フレームメモリ14に1フレームの映像信号が記憶処理完了後に、信号処理を開始するように、映像処理モジュール30をコントローラ20が制御する。これに対して、低遅延処理ONの場合には、フレームメモリ14への1フレームの映像信号の記憶処理完了を待たないで、記憶処理を開始してから待機時間である所定時間(T1)経過後に、信号処理を開始するように、映像処理モジュール30をコントローラ20が制御する。すなわち、フレームメモリ14に1フレームの映像信号が記憶処理完了するには、1フレーム相当時間(約16.7ms)を要するが、低遅延処理ONの場合には、1フレーム相当時間よりも短い所定時間(T1)経過後に、映像処理モジュール30の信号処理を開始するため、遅延時間を約1フレーム相当時間分だけ短くすることができる。所定時間(T1)としては、例えば、1.5msである。
以上の説明のように、本実施の形態の映像表示装置は、入力された映像信号を信号処理して、表示映像信号を出力する映像処理モジュールと、表示映像信号を表示する表示モジュールと、信号処理として、映像信号に対する表示映像信号の遅延時間が短い低遅延処理の動作をON/OFFするセレクタと、セレクタによる低遅延処理の動作がONの場合およびOFFの場合に、IP変換/ノイズリダクション処理および表示モジュールにあわせたスケーリング処理、をするように映像処理モジュールを制御するコントローラと、を具備する。
以下、図8のフローチャートを用いて、本実施の形態のテレビ1における映像処理モジュール30の処理の流れについて説明する。
<ステップS10>処理選択工程
信号処理モードとして、映像信号に対する表示映像信号の遅延時間が短い低遅延処理の動作をON/OFFする処理選択が行われる。信号処理モードの選択は、例えば、図9に示すようなメニュー画面を表示パネル15に表示し、ユーザーがリモコン等により、「ゲームダイレクト」の指定を「オフ」から「オン」に切り替えることにより、セレクタ21により低遅延処理ONモードが選択される。逆に「ゲームダイレクト」の指定を「オン」から「オフ」に切り替えることにより低遅延処理OFFモードが選択される。また、ゲーム機器3の専用の外部入力端子を有し、ゲーム機器3からの信号が入力されたときに、自動的にセレクタ21が低遅延処理の動作をONするようにしてもよい。
<ステップS11>記憶処理開始工程
低遅延処理がONではない場合(S10:No)、すなわち、低遅延処理OFFモードの場合には、フレームメモリ14に対する1フレーム分の映像信号の記憶処理が開始される。
<ステップS12>記憶処理完了?
フレームメモリ14に、1フレームの映像信号が、記憶処理完了するまで(S12:Yes)まで、コントローラ20は、映像処理モジュール30が信号処理を開始しないように制御する。
<ステップS13>信号処理工程
コントローラ20は、1フレームの映像信号が記憶処理完了すると(S12:Yes)、映像処理モジュール30を信号処理開始するように制御する。すると映像処理モジュール30は映像信号を、表示パネル15に表示する表示映像信号にする信号処理を行う。すなわち、図5に示したように、IP変換/NR処理と、超解像処理と、スケーリング処理と、高画質化処理と、同期補正処理と、倍速処理とが順に行われる。
なお、映像解析モジュール22の解析により、そのフレームの映像信号が非常に劣化した信号等の表示パネル15に表示することが好ましくないことが判明した場合には、コントローラ20は、そのフレームの表示映像信号を表示パネル15に出力しない場合もある。
<ステップS14、S15>表示映像信号出力
映像処理モジュール30は映像信号を信号処理して、表示映像信号を表示パネル15に出力する。すると表示パネル15に信号処理された映像が表示される。そして、終了(S15:Yes)まで、S11からの処理が繰り返される。
<ステップS16>記憶処理開始工程
S10において、低遅延処理ONモードが選択された場合(S10:Yes)も、S11と同様に、フレームメモリ14に対する1フレーム分の映像信号の記憶処理が開始される
<ステップS17>所定時間経過?
コントローラ20は、図示しないタイマ等により、フレームメモリ14への記憶処理を開始してからの時間を計測し、所定時間(Delay値:T1)が経過するまで(S17:Yes)までは、信号処理を開始しないように、映像処理モジュール30を制御する。言い換えれば、フレームメモリ14への記憶処理を開始してから、所定時間(Delay値:T1)が経過するまでは、フレームメモリ14に記憶された映像信号の読み出し処理を開始しない。
これは、書き込み処理と読み出し処理とが交差すると、いわゆる「追い越し現象」の発生防止のためである。
ここで、図10(A)に示すような10個のライン群(L1〜L10)に分割された書き込み映像を、図10(B)に示すように、表示映像の中央部に貼り付ける場合を例に、「追い越し現象」について説明する。図10(C)上段に示すように、10個のライン群(L1〜L10)のメモリへの書き込み(記憶)処理は時系列的に順に行われる。しかし、図10(C)下段に示すように、図10(B)の表示映像の上部および下部に相当する領域の存在により、書き込み処理開始と同時に、書き込んだばかりのライン群のデータを読み出すことはできず、読み出そうとすると1フレーム前のデータを読み出してしまったりする。この現象が「追い越し現象」である。同様にフレームメモリ14に記憶した映像信号を、記憶処理の開始と同時、または極めて短い時間の経過後に読み出そうとすると「追い越し現象」が発生し、記憶された信号を確実に読み出すことができない。
このため、コントローラ20は、所定時間(T1)が経過するまで(S17:Yes)まで、フレームメモリ14に記憶された映像信号を用いた信号処理を開始しないように映像処理モジュール30を制御している。なお、所定時間(T1)は映像信号の解像度または表示映像信号の表示方法等により適宜、決定される。
さらに、低遅延処理のONからOFF、およびOFFからONへの切り替わり動作の初期には、映像処理モジュール30が信号処理開始まで待機する所定時間(T1)と、同期補正モジュール43の同期補償期間(T2)との関係が重要となる。すなわち、低遅延処理モードがOFFからONに切り替わると、映像処理モジュール30は、所定時間(T1)だけ処理の開始を遅らせるために、出力する映像信号の同期信号の位相を遅らせる必要がある。逆に低遅延処理モードがONからOFFに切り替わると、所定時間(T1)は不要となるので、出力映像信号の同期信号の位相を、遅らせる前の状態に戻す処理を行う必要がある。
同期補正モジュール43は出力映像信号の同期信号を、入力映像信号に同期化させている。低遅延処理を行うためには前記の通り、出力映像信号の同期信号の位相を所定時間(T1)だけを遅らせる処理が、必要がある。そのとき、所定時間(T1)が、同期補償期間(T2)よりも長い場合には、図8に示すように、所定時間(T1)の位相設定処理を1フレーム期間内に一度に実行すると出力映像信号の同期信号が同期補償範囲(T2)を超えてしまう。このため、同期補正モジュール43は固有のフリーラン周波数での同期信号が生成できなくなってしまう。すなわち、出力映像信号の同期信号が、補償外の同期信号となって後段のモジュールおよび表示パネル15に入力されることになる。かかる状態が発生すると、表示パネル15等の信頼性が低下するおそれがある。
このため、コントローラ20は、「追い越し現象」発生防止のために必要な所定時間(T1)が、同期補償期間(T2)よりも長い場合には、所定時間(T1)を、同期補償期間(T2)よりも短い複数(N個)の補償可能時間(T3)に分割して信号処理を行うように制御する。言い換えれば、ステップS16の記憶処理開始工程が、1フレームの信号処理ごとに、同期補正モジュールの同期補償期間よりも短い補償可能時間ずつ、前記所定時間になるまで前記信号処理の開始を遅らせる同期補正調整工程を、有する。
すなわち、同期補正調整工程は、低遅延処理がONからOFFに、またはOFFからONに切り替えされたときにだけ行われる。そして、コントローラ20は、フレームメモリ14への記憶処理を開始してから、Nフレーム目の信号処理では、同期補正調整期間(T3×N)が経過するまでは、フレームメモリ14に記憶された映像信号の読み出し処理を開始しない。同期補正調整工程は同期補正調整期間(T3×N)が所定時間(T1)になるまで行われる過渡的な工程である。
すなわち、1フレームの信号処理ごとに、信号処理の開始を補償可能時間(T3)ずつ遅らせることで、同期信号の位相を補償可能時間(T3)ずつ遅らせる、すると、N個のフレームの信号処理が完了したとき(同期補正調整完了時)に、所定時間(T1)だけ位相が遅れる。このように制御すると、補償可能時間(T3)は同期補償期間(T2)内であるために、同期補正モジュール43は同期信号を補正できる。なお、同期補正調整中のNフレームの間は表示映像が乱れるため、例えば映像Mute機能によりブルー画面を表示する。
補償可能時間(T3)は、同期補償期間(T2)よりも短ければよいが、分割数Nが増加すると、同期補正調整処理に時間を要しブルー画面表示時間が長くなる。このため、補償可能時間(T3)は、同期補償期間(T2)の例えば90〜100%であることが好ましい。例えば、同期補償期間(T2)が0.15ms、所定時間(T1)が1.5msの場合には、補償可能時間(T3)は0.13〜0.15msであるため、分割数Nは10〜12となる。なお、N個に分割後の、補償可能時間(T3)は全て同じである必要はない。
以上の説明のように、コントローラ20は、セレクタ21による低遅延処理のON/OFF切替のときに、1フレームの信号処理ごとに、同期補正モジュール43の同期補償期間(T2)よりも短い補償可能時間(T3)ずつ所定時間(T1)になるまで少しずつ、信号処理の開始を遅らせるまたは早くするように、映像処理モジュール30を制御することが好ましい。同期不可能な信号が表示パネル15等に入力されるおそれがないためである。
なお、比較のために説明したテレビ101では、フレームメモリにより発生する遅延時間の間に、同期ずれを吸収(補正)することができるために、同期補正調整工程は不要であった。
<ステップS18>信号処理工程
コントローラ20は、所定時間(T1)が経過すると(S17:Yes)、1フレームの映像信号のフレームメモリ14への記憶処理完了を待たないで、映像処理モジュール30が信号処理開始するように制御する。すると映像処理モジュール30は、映像信号を表示パネル15に表示する表示映像信号にする信号処理を低遅延処理OFFモードと同様に行う。すなわち、図5に示したように、IP変換/NR処理と、超解像処理と、スケーリング処理と、高画質化処理と、同期補正処理と、倍速処理と、が順に行われる。
<ステップS19、S20>表示映像信号出力
映像処理モジュール30は映像信号を信号処理して、表示映像信号を表示パネル15に出力する。すると表示パネル15に信号処理された映像が表示される。そして、終了(S20:Yes)まで、S16からの処理が繰り返される。
そして、図12に示すように、本実施の形態のテレビ1では、低遅延処理OFFモードでは2フレームの33.3msの遅延時間となり、低遅延処理ONモードでは約1フレームの例えば18.2msの遅延時間となる。さらに、図12に示すように、入力映像信号が表示パネル(1080p)よりも小さい720p、480pの場合であっても、スケーリング処理を行っているために、遅延時間は1080pの場合と同じ18.2msである。
すなわち、テレビ1は、低遅延処理ONモードでは、倍速処理により1フレーム相当時間の遅延時間があるが、総遅延時間は1フレーム相当時間と「追い越し現象」発生防止のために必要な所定(T1)との合計であるため、1フレーム相当時間より僅かに長いだけの時間、すなわち、2フレーム相当時間未満である。なお、倍速処理を行わなければ、遅延時間がさらに短くなるのは明らかである。
以上の説明のように、本実施の形態のテレビ1は、セレクタ21による低遅延処理の動作のON/OFFに関係なく、IP変換/ノイズリダクション処理および前記表示モジュールにあわせたスケーリング処理および映像信号の解像度をあげる高解像度化処理、をするように映像処理モジュール30を制御するコントローラ20を具備する
すなわち、本実施の形態のテレビ1は、低遅延処理ONモードにおいても、少なくとも、IP変換/NR処理、スケーリング処理および超解像処理が可能であったが、例えば、より高能力のシステムLSIを用いることにより、より多くの複雑な処理を必要に応じて行うことも可能である。
そして、テレビ1では、低遅延処理ONモードであっても、IP変換/NR処理、スケーリング処理および超解像処理が、行われているので表示映像信号は高品質である。
以上の説明のように、本実施の形態のテレビ1は、ゲームコンテンツ等の表示のときに、ユーザーのゲーム操作部4による操作に対して、表示映像および出力音声が違和感を与えない映像表示装置であり、テレビ1の映像処理方法はゲームコンテンツ等の表示のときに、ユーザーに違和感を与えない映像を表示することができる。
なお、同期補正調整工程を有するテレビ1では、後段モジュールに補償外の同期信号が入力されることがないため、信頼性が高い。
本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。
1…テレビジョン受信装置、2…アンテナ、3…ゲーム機器、4…ゲーム操作部、11…チューナ、12…外部入力端子、13…前段処理モジュール、14…フレームメモリ、15…表示パネル、16…オーディオプロセッサ、17…音声遅延処理モジュール、18…スピーカ、20…コントローラ、21…セレクタ、22…映像解析モジュール、30…映像処理モジュール、31…IP変換/NRモジュール、32…超解像モジュール、33…スケーラー、34…高画質化モジュール、36…倍速処理モジュール、41…同期信号生成モジュール、42…クロック、43…同期補正モジュール、44…表示同期信号生成モジュール、101…テレビジョン受信装置、114A、114B…フレームメモリ、130…映像処理モジュール、131…IP変換/NRモジュール、132…超解像モジュール、133…スケーラー、134…高画質化モジュール、136…倍速処理モジュール

Claims (11)

  1. 入力された映像信号を信号処理して、表示映像信号を表示モジュールに出力する映像処理モジュールと、
    前記信号処理として、前記映像信号に対する前記表示映像信号の遅延時間が短い低遅延処理の動作をON/OFFするセレクタと、
    前記セレクタによる前記低遅延処理の動作がONの場合およびOFFの場合に、前記表示モジュールにあわせたスケーリング処理をするように前記映像処理モジュールを制御するコントローラと、を具備することを特徴とする映像表示装置。
  2. 前記映像信号を少なくとも1フレーム記憶するフレームメモリを備え、
    前記映像信号処理モジュールは、前記フレームメモリに記憶された前記映像信号を信号処理して、前記表示映像信号を出力し、
    前記コントローラは、前記低遅延処理がONの場合には、前記少なくとも1フレームの前記映像信号が、前記フレームメモリへの記憶処理を開始してから所定時間経過後、前記記憶処理完了前に、前記信号処理を開始するように、前記映像処理モジュールを制御することを特徴とする請求項1に記載の映像表示装置。
  3. 前記コントローラは、前記低遅延処理がOFFの場合には、前記少なくとも1フレームの前記映像信号が、前記フレームメモリに記憶処理完了後に、前記信号処理を開始するように、前記映像処理モジュールを制御することを特徴とする請求項2に記載の映像表示装置。
  4. 前記コントローラは、前記セレクタによる前記低遅延処理の動作がONの場合、前記映像処理モジュールが、前記映像信号のIP変換およびノイズリダクション処理の少なくとも一方をするよう制御することを特徴とする請求項1乃至請求項3のいずれかに記載の映像表示装置。
  5. 前記映像処理モジュールが、前記映像信号の解像度をあげる高解像度化モジュールを有し、
    前記コントローラは、前記セレクタによる前記低遅延処理の動作がONの場合、前記高解像度化モジュールによる処理をするよう制御することを特徴とする請求項1乃至請求項4のいずれかに記載の映像表示装置。
  6. 前記映像処理モジュールが、前記映像信号の入力同期信号と、前記表示モジュールの表示同期信号と、を同期する同期補正モジュールを有し、
    前記コントローラは、前記セレクタによる低遅延処理のON/OFF切替のときには、1フレームの信号処理ごとに、前記同期補正モジュールの同期補償期間よりも短い補償可能時間ずつ、前記信号処理の開始を遅らせるように、前記映像処理モジュールを制御することを特徴とする請求項2に記載の映像表示装置。
  7. 前記フレームメモリに記憶された1フレームの前記映像信号を解析し、前記コントローラが前記映像処理モジュールの制御に用いるフレーム情報を出力するフレーム解析ブロックを具備することを特徴とする請求項2に記載の映像表示装置。
  8. 前記映像処理モジュールが、前記映像信号を倍速処理する倍速処理モジュールを有し、
    前記遅延時間が、2フレーム相当時間未満であることを特徴とする請求項2に記載の映像表示装置。
  9. 入力された映像信号を、表示モジュールに表示する表示映像信号に信号処理する映像処理方法であって、
    信号処理モードとして、前記映像信号に対する前記表示映像信号の遅延時間が短い低遅延処理の動作をON/OFFする処理選択工程と、
    前記低遅延処理がONの場合およびOFFの場合のいずれの場合にも、前記表示モジュールにあわせたスケーリング処理をする信号処理工程と、を具備することを特徴とする。
  10. 前記信号処理工程が、IP変換およびノイズリダクション処理の少なくとも一方の処理を含むことを特徴とする請求項9に記載の映像処理方法。
  11. フレームメモリに、1フレームの前記映像信号、の記憶処理を開始する記憶処理開始工程と、
    前記低遅延処理がOFFの場合には、前記1フレームの前記映像信号が、記憶処理完了後に前記信号処理を開始し、前記低遅延処理がONの場合には、前記記憶処理を開始してから所定時間経過後、前記記憶処理完了前に、前記信号処理を開始する信号処理工程とを、有することを特徴とする請求項9に記載の映像処理方法。
JP2010092432A 2010-04-13 2010-04-13 映像表示装置および映像処理方法 Expired - Fee Related JP4691193B1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2010092432A JP4691193B1 (ja) 2010-04-13 2010-04-13 映像表示装置および映像処理方法
US12/900,288 US8284324B2 (en) 2010-04-13 2010-10-07 Video display apparatus and video processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010092432A JP4691193B1 (ja) 2010-04-13 2010-04-13 映像表示装置および映像処理方法

Publications (2)

Publication Number Publication Date
JP4691193B1 JP4691193B1 (ja) 2011-06-01
JP2011223457A true JP2011223457A (ja) 2011-11-04

Family

ID=44236975

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010092432A Expired - Fee Related JP4691193B1 (ja) 2010-04-13 2010-04-13 映像表示装置および映像処理方法

Country Status (2)

Country Link
US (1) US8284324B2 (ja)
JP (1) JP4691193B1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013192226A (ja) * 2012-03-13 2013-09-26 Samsung Electronics Co Ltd ディスプレイ装置、ソース装置および方法
WO2015064169A1 (ja) 2013-10-28 2015-05-07 ソニー株式会社 画像処理装置、画像処理方法およびプログラム

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4691193B1 (ja) * 2010-04-13 2011-06-01 株式会社東芝 映像表示装置および映像処理方法
JP6028936B2 (ja) * 2011-03-10 2016-11-24 パナソニックIpマネジメント株式会社 映像処理装置及びそれを含む映像表示システム
JP5624582B2 (ja) * 2012-04-27 2014-11-12 株式会社東芝 マルチフォーマット映像再生装置とその制御方法
US9432582B2 (en) 2013-01-04 2016-08-30 Canon Kabushiki Kaisha Image signal processing apparatus and a control method thereof, and an image pickup apparatus and a control method thereof
CN107566737A (zh) * 2017-10-10 2018-01-09 上海小蚁科技有限公司 延时拍照控制方法及装置、可读存储介质、相机

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4623915A (en) * 1984-09-21 1986-11-18 Rca Corporation Apparatus for processing multiple time division multiplexed asynchronous composite video signals
JP2001008180A (ja) 1999-06-21 2001-01-12 Matsushita Electric Ind Co Ltd 動画像信号符号化/復号装置
JP4331835B2 (ja) * 1999-09-22 2009-09-16 パナソニック株式会社 画像データ伝送方法
US7729421B2 (en) * 2002-02-20 2010-06-01 International Business Machines Corporation Low latency video decoder with high-quality, variable scaling and minimal frame buffer memory
US7366462B2 (en) * 2003-10-24 2008-04-29 Qualcomm Incorporated Method and apparatus for seamlessly switching reception between multimedia streams in a wireless communication system
WO2007135822A1 (ja) * 2006-05-23 2007-11-29 Panasonic Corporation 画像処理装置、画像処理方法、プログラム、記録媒体および集積回路
US8698812B2 (en) * 2006-08-04 2014-04-15 Ati Technologies Ulc Video display mode control
JP2009033415A (ja) 2007-07-26 2009-02-12 Sony Corp 表示システム、表示制御装置、表示制御方法、再生装置、再生方法、およびプログラム
JP2009177447A (ja) * 2008-01-24 2009-08-06 Panasonic Corp 動画像送受信システム
JP2009141940A (ja) 2008-08-22 2009-06-25 Hitachi Ltd 映像表示装置、表示パネル及び映像処理装置
US8724694B2 (en) * 2008-10-14 2014-05-13 Nvidia Corporation On-the spot deblocker in a decoding pipeline
US20100220215A1 (en) * 2009-01-12 2010-09-02 Jorge Rubinstein Video acquisition and processing systems
JP5072893B2 (ja) * 2009-03-25 2012-11-14 株式会社東芝 画像符号化方法および画像復号化方法
JP4691193B1 (ja) * 2010-04-13 2011-06-01 株式会社東芝 映像表示装置および映像処理方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013192226A (ja) * 2012-03-13 2013-09-26 Samsung Electronics Co Ltd ディスプレイ装置、ソース装置および方法
US10061465B2 (en) 2012-03-13 2018-08-28 Samsung Electronics Co., Ltd. Display apparatus, source apparatus, and methods of providing content
US10788946B2 (en) 2012-03-13 2020-09-29 Samsung Electronics Co., Ltd. Display apparatus, source apparatus, and methods of providing content
WO2015064169A1 (ja) 2013-10-28 2015-05-07 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US10810916B2 (en) 2013-10-28 2020-10-20 Sony Semiconductor Solutions Corporation Image processing apparatus and image processing method

Also Published As

Publication number Publication date
US20110249194A1 (en) 2011-10-13
JP4691193B1 (ja) 2011-06-01
US8284324B2 (en) 2012-10-09

Similar Documents

Publication Publication Date Title
JP4691193B1 (ja) 映像表示装置および映像処理方法
US7158186B2 (en) Method and system for changing the frame rate to be optimal for the material being displayed while maintaining a stable image throughout
CN108833975B (zh) 视频播放的处理方法及装置
US8593575B2 (en) Video display apparatus for shortened-delay processing of a video signal and video processing method
JP2010041538A (ja) 画像信号処理装置および方法
JP5336019B1 (ja) 表示装置、表示装置の制御方法、テレビジョン受像機、制御プログラム、および記録媒体
CN113225619A (zh) 帧率自适应方法、装置、设备及可读存储介质
JP2007053697A (ja) デジタルノイズ低減装置及び方法及び映像信号処理装置
US8154654B2 (en) Frame interpolation device, frame interpolation method and image display device
WO2012107985A1 (ja) 映像信号処理装置および映像信号処理方法
US20130271650A1 (en) Video display apparatus and video processing method
JP2006352303A (ja) 映像表示装置
JP5112528B2 (ja) 映像表示装置及び映像処理方法
JP2009175182A (ja) 画像処理装置
JP5259867B2 (ja) 映像表示装置及び映像処理方法
JP2008028507A (ja) 画像補正回路、画像補正方法および画像表示装置
JP2008096521A (ja) 映像表示装置
JP2008003519A (ja) 液晶受像装置
JP2009077042A (ja) 映像処理装置および映像処理方法
JP2011048040A (ja) 映像信号処理装置、映像信号処理方法およびプログラム
Callway Variable Frame Rate Technology—Change Is Good!
JP2005303394A (ja) 液晶表示装置
CN112544075B (zh) 显示装置、信号处理装置和信号处理方法
JP2005311860A (ja) 映像信号処理装置及び表示装置及び受信装置及び表示方法
US10341600B2 (en) Circuit applied to television and associated image display method

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140225

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees