JP2022125166A - 画像処理装置、画像処理方法及び画像表示システム - Google Patents

画像処理装置、画像処理方法及び画像表示システム Download PDF

Info

Publication number
JP2022125166A
JP2022125166A JP2022107979A JP2022107979A JP2022125166A JP 2022125166 A JP2022125166 A JP 2022125166A JP 2022107979 A JP2022107979 A JP 2022107979A JP 2022107979 A JP2022107979 A JP 2022107979A JP 2022125166 A JP2022125166 A JP 2022125166A
Authority
JP
Japan
Prior art keywords
image data
display area
effective display
image processing
vertical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022107979A
Other languages
English (en)
Other versions
JP7294507B2 (ja
Inventor
伸貴 山岸
Nobutaka Yamagishi
マニュエル ハシサレフ
Haj-Saleh Manuel
マーティン マイヤー
Maier Martin
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Socionext Inc
Original Assignee
Socionext Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019570212A external-priority patent/JP7151731B2/ja
Application filed by Socionext Inc filed Critical Socionext Inc
Priority to JP2022107979A priority Critical patent/JP7294507B2/ja
Publication of JP2022125166A publication Critical patent/JP2022125166A/ja
Application granted granted Critical
Publication of JP7294507B2 publication Critical patent/JP7294507B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

【課題】画像表示システムにおいて、１の画像データを分割することで得られるサイズの異なる各画像データを、同じまたは同程度のフレームレートで表示するにあたり、ブランキング期間を短くする。【解決手段】画像処理装置は、第１の画像データの有効表示領域と、垂直方向のサイズが前記第１の画像データよりも小さい第２の画像データの有効表示領域を垂直方向に拡大することで得られる有効表示領域と、が水平方向に結合された入力画像データを取得する取得手段と、前記入力画像データを水平方向に分割することで得られる第１の中間画像データ及び第２の中間画像データのうち、該第２の中間画像データの垂直方向のサイズを、前記第２の画像データの有効表示領域の垂直方向のサイズに基づいて縮小し、第２の出力画像データを生成する画像処理手段とを有することを特徴とする。【選択図】図１

Description

本発明は、画像処理装置、画像処理方法及び画像表示システムに関する。
従来、画像サイズの異なる複数の画像データを、対応する解像度を有する各ディスプレイに表示する画像表示システムが知られている。例えば、車載の画像表示システムでは、画像生成装置で生成された画像データを、センタインフォメーションディスプレイと、マルチインフォメーションディスプレイとにそれぞれ表示する。
かかる画像表示システムでは、ディスプレイごとにコントローラ（画像処理装置）が設けられ、画像データに対して、ディスプレイの特性に対応した画像処理が行われる。このため、ディスプレイの数が増えるとコントローラの数も増え、コストが上昇するとともに、設置スペースや発熱量等の問題が生じることになる。
一方で、下記特許文献等には、画像生成装置にて各画像データを結合し１の画像データとし、コントローラにて当該１の画像データを分割することで、各画像データを同じフレームレートで表示する画像表示システムが開示されている。当該画像表示システムによれば、コントローラの数を削減することができる。
国際公開第２００４／０６６１３９号 特開２０１３－２１３８５９号公報
しかしながら、上記特許文献等に開示された画像表示システムのように、１の画像データを分割することで得られるサイズの異なる各画像データを、同じフレームレートで表示するためには、コントローラ内にフレームバッファを設ける必要がある。一旦、フレーム単位で各画像データを保持し、各ディスプレイの解像度に応じたピクセルクロックや水平周波数で出力する必要があるからである。
一方で、画像表示システムにおいて更なるコスト削減、更なる設置スペースの縮小及び発熱量の低減等を実現するためには、フレームバッファに代えてラインバッファを用いることが考えられる。しかしながら、ラインバッファを用いる場合、各画像データをラインバッファに保持する前後で水平周波数等を一致させることが前提となる。
このため、例えば、垂直方向のサイズが異なる画像データを結合した場合、各画像データを同じまたは同程度のフレームレートで表示するには、サイズの小さい方の画像データの有効表示領域に対して、垂直方向のブランキング期間が長くなる。この場合、ディスプレイの表示規格の要件を満たさず、画像が正常に表示できなくなる。
一つの側面では、画像表示システムにおいて、１の画像データを分割することで得られるサイズの異なる各画像データを、同じまたは同程度のフレームレートで表示するにあたり、ブランキング期間を短くすることを目的としている。
一態様によれば、画像処理装置は、
入力画像データであって、
第１の画像データの有効表示領域と、
前記第１の画像データの有効表示領域と垂直方向に結合され、前記第１の画像データの有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第１のブランキング領域と、
前記第１の画像データの有効表示領域と水平方向に結合され、垂直方向のサイズが前記第１の画像データの有効表示領域よりも小さい第２の画像データの有効表示領域を、拡大後の有効表示領域の垂直方向のサイズが前記第１の画像データの有効表示領域の垂直方向のサイズと同じになるように、垂直方向に拡大することで得られる、前記第２の画像データの拡大後の有効表示領域と、
前記第２の画像データの拡大後の有効表示領域と垂直方向に結合され、前記第２の画像データの拡大後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第２のブランキング領域と、
を含む入力画像データを取得する取得手段と、
前記入力画像データを水平方向に分割することで得られる、第１の画像データの有効表示領域を含む第１の中間画像データと、第２の出力画像データであって、
第２の画像データの拡大後の有効表示領域を含む第２の中間画像データの垂直方向のサイズを、前記第２の画像データの有効表示領域の垂直方向のサイズに基づいて縮小した、前記第２の中間画像データの縮小後の有効表示領域と、
第２の中間画像データの縮小後の有効表示領域と垂直方向に結合され、前記第２の中間画像データの縮小後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第３のブランキング領域と、
を含む、前記第２の画像データに対応する前記第２の出力画像データと、を生成する画像処理手段とを有することを特徴とする。
画像表示システムにおいて、１の画像データを分割することで得られるサイズの異なる各画像データを、サイズの異なる複数のディスプレイに同じまたは同程度のフレームレートで表示するにあたり、ブランキング期間を短くすることができる。
図１は、車両に搭載される画像表示システムのシステム構成の一例を示す図である。 図２は、ディスプレイの配置例を示す図である。 図３は、画像処理装置のハードウェア構成の一例を示す図である。 図４は、比較例の画像表示システムの各装置にて実行される処理の詳細を示す図である。 図５は、第１の実施形態に係る画像表示システムの各装置にて実行される処理の詳細を示す図である。 図６は、第１の実施形態に係る画像処理装置の画像処理部の機能構成の一例を示す図である。 図７は、第１の実施形態に係る画像処理装置の画像処理部による画像処理の流れを示すフローチャートである。 図８は、第２の実施形態に係る画像表示システムの各装置にて実行される処理の詳細を示す図である。 図９は、第２の実施形態に係る画像処理装置の画像処理部の機能構成の一例を示す図である。 図１０は、第２の実施形態に係る画像処理装置の画像処理部による画像処理の流れを示すフローチャートである。 図１１は、第３の実施形態に係る画像表示システムの各装置にて実行される処理の詳細を示す図である。 図１２は、第３の実施形態に係る画像処理装置の画像処理部の機能構成の一例を示す図である。 図１３は、第３の実施形態に係る画像処理装置の画像処理部による画像処理の流れを示すフローチャートである。
以下、各実施形態について添付の図面を参照しながら説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複した説明を省略する。
［第１の実施形態］
＜車両に搭載される画像表示システムのシステム構成＞
はじめに、車両に搭載される画像表示システムのシステム構成について説明する。図１は、車両に搭載される画像表示システムのシステム構成の一例を示す図である。
図１に示すように、車両１００に搭載される画像表示システム１４０は、画像生成装置１１０と、画像処理装置１２０と、第１のディスプレイ１３１と、第２のディスプレイ１３２とを有する。
画像生成装置１１０は、例えば車載システムにおけるナビゲーション装置やヘッドユニット等であり、画像生成部１１１（生成手段）を備える。画像生成部１１１は、第１のディスプレイ１３１用の第１の画像データと、第２のディスプレイ１３２用の第２の画像データとに基づいて、入力画像データを生成し、画像処理装置１２０に出力する。
画像処理装置１２０には、例えば画像処理を行う半導体チップが配され、当該半導体チップが動作することで、画像処理装置１２０は、画像処理部１２１として機能する。
画像処理部１２１は、画像生成装置１１０より入力画像データを取得し、水平方向に分割することで、第１の中間画像データと第２の中間画像データとを生成する。
また、画像処理部１２１は、第１の中間画像データ及び第２の中間画像データのいずれか一方または両方の垂直方向のサイズを縮小することで、第１の出力画像データ及び第２の出力画像データを生成する。更に、画像処理部１２１は、第１の出力画像データを第１のディスプレイ１３１に、第２の出力画像データを第２のディスプレイ１３２に出力する。
第１のディスプレイ１３１は、画像処理部１２１より出力された第１の出力画像データを表示する。第１のディスプレイ１３１は、例えば、１９２０画素×１０８０画素の解像度を有しているものとする。
第２のディスプレイ１３２は、画像処理部１２１より出力された第２の出力画像データを表示する。第２のディスプレイ１３２は、例えば、１２８０画素×７２０画素の解像度を有しているものとする。
＜複数のディスプレイの配置例＞
次に、車両１００に搭載された画像表示システム１４０を構成する第１及び第２のディスプレイ１３１、１３２の配置例について説明する。図２は、ディスプレイの配置例を示す図である。図２に示すように、第１のディスプレイ１３１は、車両１００のセンタコンソール２１０内に配置され、センタインフォメーションディスプレイとして機能する。また、第２のディスプレイ１３２は、車両１００のメータパネル２２０内に配置され、マルチインフォメーションディスプレイとして機能する。
＜画像処理装置のハードウェア構成＞
次に、画像処理装置１２０のハードウェア構成について説明する。図３は、画像処理装置のハードウェア構成の一例を示す図である。図３に示すように、画像処理装置１２０は、ホストＩ／Ｆ３０１、ＤＭＡコントローラ３０２、コマンドシーケンサ３０３を有する。これらのハードウェアは、第１のバス３０４を介して接続される。
また、画像処理装置１２０は、Ｆｌａｓｈ３１１、ＲＡＭ／ＲＯＭ３１２を有する。これらのハードウェアは、第２のバス３１３を介して接続される。なお、第１のバス３０４と第２のバス３１３とは、ブリッジを介して接続される。
更に、画像処理装置１２０は、ビデオキャプチャ３２１、表示制御装置３２２を有し、表示制御装置３２２は、第２のバス３１３に接続される。
ホストＩ／Ｆ（Interface）３０１は、不図示の外部装置と接続され、外部装置から送信される各種設定データを受信する。
ＤＭＡ（Direct Memory Access）コントローラ３０２は、ホストＩ／Ｆ３０１が受信した各種設定データを、Ｆｌａｓｈ３１１に格納するよう制御する。コマンドシーケンサ３０３は、画像処理装置１２０全体を制御する。Ｆｌａｓｈ（フラッシュメモリ）３１１は、ホストＩ／Ｆ３０１が受信した各種設定データを格納する。ＲＡＭ／ＲＯＭ３１２は、コマンドシーケンサ３０３が画像処理装置１２０全体を制御する際の主記憶装置として機能する。
ビデオキャプチャ３２１は、画像生成装置１１０より出力された入力画像データを複数ラインずつ順次取得し、表示制御装置３２２に出力する。表示制御装置３２２は、各種設定データのもとで画像処理を行う。表示制御装置３２２が動作することで、画像処理装置１２０は、画像処理部１２１として機能する。これにより、画像処理装置１２０は、画像生成装置１１０より入力画像データを取得し、第１のディスプレイ１３１及び第２のディスプレイ１３２に、第１の出力画像データ及び第２の出力画像データを出力することができる。
＜各装置にて実行される処理の詳細＞
次に、画像表示システム１４０の各装置（ここでは、画像生成装置及び画像処理装置）にて実行される処理の詳細について説明する。なお、以下では、まず、比較例の画像表示システムの各装置にて実行される処理の詳細について説明し、続いて、第１の実施形態に係る画像表示システム１４０の各装置にて実行される処理の詳細について説明する。
（１）画像表示システムの各装置にて実行される処理の詳細
図４は、比較例の画像表示システムの各装置にて実行される処理の詳細を示す図である。なお、ここでいう画像表示システムは、図４に示すように、以下のような構成を有しているものとする。
・画像生成装置４１０と、画像処理装置４２０と、第１のディスプレイ４３１と、第２のディスプレイ４３２とを有する。
・画像生成装置４１０は、第１のディスプレイ４３１用の画像データ（１９２０画素×１０８０画素）と、第２のディスプレイ４３２用の画像データ（１２８０画素×７２０画素）とに基づいて画像データ４１１を生成する。また、生成した画像データ４１１を入力画像データ４１２として、画像処理装置４２０に出力する。
・画像処理装置４２０は、入力画像データ４１２を水平方向に分割し、第１の出力画像データ４２１と、第２の出力画像データ４２２とを生成する。
・画像処理装置４２０が、フレームバッファを有しておらず、代わりにラインバッファを有している。
・第１のディスプレイ４３１は、１９２０画素×１０８０画素の解像度を有しており、第２のディスプレイ４３２は、１２８０画素×７２０画素の解像度を有している。
・入力画像データ４１２の垂直周波数（リフレッシュレート）と、第１の出力画像データ４２１の垂直周波数は等しい。また、入力画像データ４１２の垂直周波数と、第２の出力画像データ４２２の垂直周波数も等しい。
・入力画像データ４１２の水平周波数と、第１の出力画像データ４２１の水平周波数は等しい。また、入力画像データ４１２の水平周波数と、第２の出力画像データ４２２の水平周波数も等しい。
かかる画像表示システムの場合、各装置では以下のような処理が実行される。
まず、画像生成装置４１０では、第１のディスプレイ４３１用の画像データの有効表示領域４１１－１と、第２のディスプレイ４３２用の画像データの有効表示領域４１１－２とを、水平方向に結合することで画像データ４１１を生成する。なお、有効表示領域４１１－１は、例えば、１９２０画素×１０８０画素であり、有効表示領域４１１－２は、１２８０画素×７２０画素である。
続いて、画像生成装置４１０は、生成した画像データ４１１を、入力画像データ４１２として画像処理装置４２０に出力する。これにより、画像処理装置４２０では、入力画像データ４１２を取得する。
画像処理装置４２０は、入力画像データ４１２を水平方向に分割し、第１の出力画像データ４２１、及び、第２の出力画像データ４２２を生成する。
なお、第１の出力画像データ４２１は、第１のディスプレイ４３１の解像度に応じた水平方向のブランキング期間が設けられ、水平同期信号が設定される。ここで、画像処理装置４２０は、フレームバッファを有さないため、第１の出力画像データ４２１は、入力画像データ４１２と垂直周波数が等しくなるように同期をとられる。このため、第１の出力画像データ４２１の垂直方向のブランキング期間は、入力画像データ４１２の垂直方向のブランキング期間に基づいて設けられ、これに応じた垂直同期信号が設定される。なお、第１の出力画像データ４２１の垂直方向のブランキング期間は、入力画像データ４１２の垂直方向のブランキング期間と同一であることが望ましいが、表示画面上、気にならない程度、例えば、数ライン分ずれていても問題ない。
これにより、第１のディスプレイ４３１には、入力画像データ４１２と同じフレームレートで、有効表示領域４１１－１が表示されることになる。
一方、第２の出力画像データ４２２には、第２のディスプレイ４３２の解像度に応じた水平方向のブランキング期間が設けられ、水平同期信号が設定される。また、画像処理装置４２０はフレームバッファを有さないため、第２の出力画像データ４２２は、入力画像データ４１２と垂直周波数が等しくなるように同期をとられる。このため、第２の出力画像データ４２２の垂直方向のブランキング期間は、入力画像データ４１２の垂直方向のブランキング期間に基づいて設けられ、これに応じた垂直同期信号が設定される。なお、第２の出力画像データ４２２の垂直方向のブランキング期間は、入力画像データ４１２の垂直方向のブランキング期間と同一であることが望ましいが、表示画面上、気にならない程度、例えば、数ライン分ずれていても問題ない。
ここで、第２の出力画像データ４２２に含まれる有効表示領域４１１－２は、第１の出力画像データ４２１に含まれる有効表示領域４１１－１と比較して、垂直方向のサイズが小さい。このため、入力画像データ４１２と垂直周波数が等しくなるように垂直方向のブランキング期間を設けた場合、ブランキング期間が長くなる（図４の点線４３０で示す領域に対応する期間分、垂直方向のブランキング期間が長くなる）。
このように垂直方向のブランキング期間が長い画像は、ディスプレイの表示規格の要件を満たさず、この結果、第２のディスプレイ４３２には、有効表示領域４１１－２が適切に表示できなくなる。
なお、図４に示すように、画像データ４１１と第１の出力画像データ４２１とを比較した場合、有効表示領域４１１－１の表示期間は、
・水平方向については、Ｈｔ１１のまま変化しない。
・垂直方向については、Ｖｔ１１のまま変化しない。
また、図４に示すように、画像データ４１１と第２の出力画像データ４２２とを比較した場合、有効表示領域４１１－２の表示期間は、
・水平方向については、Ｈｔ２１のまま変化しない。
・垂直方向については、Ｖｔ２１のまま変化しない。
（２）第１の実施形態に係る画像表示システムの各装置にて実行される処理の詳細
（２－１ 各装置にて実行される処理の詳細）
次に、第１の実施形態に係る画像表示システム１４０の各装置にて実行される処理の詳細について説明する。図５は、第１の実施形態に係る画像表示システムの各装置にて実行される処理の詳細を示す図である。
画像生成装置１１０では、１９２０画素×１０８０画素の解像度を有する第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１と、１２８０画素×７２０画素の解像度を有する第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２とを水平方向に結合することで画像データ５１１を生成する。なお、有効表示領域５１１－１は、１９２０画素×１０８０画素であり、有効表示領域５１１－２は、１２８０画素×７２０画素である。
また、画像生成装置１１０では、第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１の垂直方向のサイズと、第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２の垂直方向のサイズとの比率を算出する。更に、画像生成装置１１０では、算出した比率に基づくフィルタリング処理により、第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２のサイズを垂直方向に拡大する。これにより、画像生成装置１１０では、有効表示領域５１２－２を得る。
続いて、画像生成装置１１０では、第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１と、第２のディスプレイ１３２用の第２の画像データの有効表示領域５１２－２とが水平方向に結合された、画像データ５１２を生成する。
続いて、画像生成装置１１０は、生成した画像データ５１２を、入力画像データ５１３として画像処理装置１２０に出力する。これにより、画像処理装置１２０では、入力画像データ５１３を取得する。
画像処理装置１２０は、入力画像データ５１３を水平方向に分割することで、第１の出力画像データ５２１、及び、第２の出力画像データ５２２を生成する。
なお、第１の出力画像データ５２１は、第１のディスプレイ１３１の解像度に応じた水平方向のブランキング期間が設けられ、水平同期信号が設定される。ここで、画像処理装置１２０は、フレームバッファを有さないため、第１の出力画像データ５２１は、入力画像データ５１３と垂直周波数が等しくなるように同期をとられる。このため、第１の出力画像データ５２１の垂直方向のブランキング期間は、入力画像データ５１３の垂直方向のブランキング期間に基づいて設けられ、これに応じた垂直同期信号が設定される。なお、第１の出力画像データ５２１の垂直方向のブランキング期間は、入力画像データ５１３の垂直方向のブランキング期間と同一であることが望ましいが、表示画面上、気にならない程度、例えば数ライン分ずれていても問題ない。
このため、第１のディスプレイ１３１には、入力画像データ５１３と同じフレームレートで、有効表示領域５１１－１が表示されることになる。
一方、第２の出力画像データ５２２を生成するにあたり、画像処理装置１２０では、入力画像データ５１３に含まれる有効表示領域５１２－２のサイズを、フィルタリング処理により垂直方向に縮小することで、有効表示領域５１１－２を生成する。ここで、分割後の有効表示領域５１２－２を垂直方向に縮小して垂直方向のサイズを小さくした場合、垂直方向において、同一期間内に出力されるライン数が削減されることになる。
第１の出力画像データ５２１の有効表示領域５１１－１と、第２の出力画像データ５２２の有効表示領域５１１－２とは、垂直方向のサイズは異なるが、第２の出力画像データ５２２に関するピクセルクロックを調整することで垂直方向の周波数は等しくすることができる。
このため、第２の出力画像データ５２２において、入力画像データ５１３と垂直周波数が等しくなるように垂直方向のブランキング期間を設けた場合、図４の第２の出力画像データ４２２に設けられた垂直方向のブランキング期間と比較して短くすることができる。
この結果、画像処理装置１２０では、第２のディスプレイ１３２に、入力画像データ５１３と同じフレームレートで有効表示領域５１１－２を表示させることが可能となる。
なお、図５に示すように、画像データ５１２と第１の出力画像データ５２１とを比較した場合、有効表示領域５１１－１の表示期間は、
・水平方向については、Ｈｔ１１のまま変化しない。
・垂直方向については、Ｖｔ１１のまま変化しない。
また、図５に示すように、画像データ５１２と第２の出力画像データ５２２とを比較した場合、有効表示領域５１２－２の表示期間と有効表示領域５１１－２の表示期間は、
・水平方向については、Ｈｔ２１のまま変化しない。
・垂直方向については、Ｖｔ１１のまま変化しない。
（２－２ 画像処理部の機能構成）
次に、画像処理部１２１の機能構成について説明する。図６は、第１の実施形態に係る画像処理装置の画像表示部の機能構成の一例を示す図である。第１の実施形態に係る画像処理装置１２０の場合、図６に示すように、画像処理部１２１は、制御部６０１（制御手段及び格納手段）、入力部６１１（取得手段）、分割部６１２（分割手段）、ラインバッファ６２１、６２２を有する。また、画像処理部１２１は、スケーラ６３１、６３２、出力部６４１、６４２（以上、画像処理手段）を有する。
制御部６０１は、不図示の外部装置より、各種設定データを受信し、格納する。また、制御部６０１は、格納した各種設定データを、入力部６１１、スケーラ６３１、６３２、出力部６４１、６４２に通知する。制御部６０１が受信する各種設定データには、例えば、
・有効表示領域５１１－１のサイズ（１９２０画素×１０８０画素）、
・有効表示領域５１１－２のサイズ（１２８０画素×７２０画素）、
・有効表示領域５１２－２の垂直方向の拡大率（１０２０画素／７２０画素）、
等が含まれる。
入力部６１１は、所定のピクセルクロックで、画像生成装置１１０より入力画像データ５１３（例えば、３４００画素×１３００画素）を複数ラインずつ順次取得し、分割部６１２に出力する。
分割部６１２は、入力部６１１より出力された入力画像データ５１３を、設定データに基づいて特定される各表示領域のサイズで、水平方向に分割する（有効表示領域５１１－１と有効表示領域５１１－２との間で水平方向に分割する）。また、分割部６１２は、分割により第１の中間画像データ６５１と、第２の中間画像データ６５２とを生成し、それぞれ、ラインバッファ６２１、６２２に出力する。
ラインバッファ６２１、６２２は、分割部６１２より出力された第１の中間画像データ６５１と、第２の中間画像データ６５２とを、それぞれ、複数ラインずつ格納する。
スケーラ６３１、６３２は、ラインバッファ６２１、６２２にそれぞれ格納された第１の中間画像データ６５１及び第２の中間画像データ６５２を読み出し、フィルタリング処理を行う。
なお、第１の実施形態において、画像生成装置１１０は、入力画像データ５１３を生成するにあたり、有効表示領域５１１－１を拡大していない。このため、スケーラ６３１では、ラインバッファ６２１より読み出した第１の中間画像データ６５１を、フィルタリング処理により縮小することなく第１の中間画像データ６６１として出力部６４１に出力する。
一方、第１の実施形態において、画像生成装置１１０は、入力画像データ５１３を生成するにあたり、フィルタリング処理により有効表示領域５１１－２を拡大し、有効表示領域５１２－２を得ている。このため、スケーラ６３２では、画像生成装置１１０がフィルタリング処理により垂直方向に拡大した分を、フィルタリング処理にて縮小したうえで、第２の中間画像データ６６２として、出力部６４１に出力する。この結果、スケーラ６３２では、画像生成装置１１０が最初に生成した第２のディスプレイ１３２用の第２の画像データと同等の画像データを再現することができる。
出力部６４１では、スケーラ６３１から出力される第１の中間画像データ６６１に基づいて、第１の出力画像データ５２１（入力画像データ５１３と同じ水平周波数、同じ垂直周波数）を生成する。また、出力部６４１では、生成した第１の出力画像データ５２１を第１のディスプレイ１３１に出力する。これにより、第１のディスプレイ１３１では、解像度（例えば、１９２０画素×１０８０画素）に適した有効表示領域５１１－１を、入力画像データ５１３と同じフレームレートで表示することができる。
一方、出力部６４２では、スケーラ６３２から出力される第２の中間画像データ６６２に基づいて、第２の出力画像データ５２２（入力画像データ５１３よりも低い水平周波数、同じ垂直周波数）を生成する。また、出力部６４２では、生成した第２の出力画像データ５２２を第２のディスプレイ１３２に出力する。これにより、第２のディスプレイ１３２では、非表示領域を含むことなく、解像度（例えば、１２８０画素×７２０画素）に適した有効表示領域５１１－２を、入力画像データ５１３と同じフレームレートで表示することができる。
（２－３ 画像処理装置による画像処理の流れ）
次に、画像処理装置１２０の画像処理部１２１による画像処理の流れについて説明する。図７は、第１の実施形態に係る画像処理装置の画像処理部による画像処理の流れを示すフローチャートである。
ステップＳ７０１において、入力部６１１は、画像生成装置１１０より入力画像データ５１３を複数ラインずつ順次取得する。
ステップＳ７０２において、分割部６１２は、入力画像データ５１３を、水平方向に分割し、第１の中間画像データ６５１と、第２の中間画像データ６５２とを生成する。
ステップＳ７１１において、分割部６１２は、生成した第１の中間画像データ６５１に対して、ガンマ補正等の後処理を実行し、ラインバッファ６２１に複数ラインずつ格納する。
ステップＳ７１２において、スケーラ６３１は、制御部６０１より通知された各種設定データに基づいて、フィルタリング処理を実施するか否かを判定する。ステップＳ７１２においてフィルタリング処理を実施しないと判定した場合には（ステップＳ７１２においてＮｏの場合には）、ステップＳ７１４に進む。
一方、ステップＳ７１２においてフィルタリング処理を実施すると判定した場合には（ステップＳ７１２においてＹｅｓの場合には）、ステップＳ７１３に進む。ステップＳ７１３において、スケーラ６３１は、第１の中間画像データ６５１に対してフィルタリング処理を実施する。
ステップＳ７１４において、出力部６４１は、スケーラ６３１より出力された第１の中間画像データ６６１に基づいて、第１の出力画像データ５２１を生成し、第１のディスプレイ１３１に出力する。
一方、ステップＳ７２１において、分割部６１２は、生成した第２の中間画像データ６５２に対して、ガンマ補正等の後処理を実行し、ラインバッファ６２２に複数ラインずつ格納する。
ステップＳ７２２において、スケーラ６３２は、制御部６０１より通知された各種設定データに基づいて、フィルタリング処理を実施するか否かを判定する。ステップＳ７２２においてフィルタリング処理を実施しないと判定した場合には（ステップＳ７２２においてＮｏの場合には）、ステップＳ７２４に進む。
一方、ステップＳ７２２においてフィルタリング処理を実施すると判定した場合には、ステップＳ７２２においてＹｅｓの場合には）、ステップＳ７２３に進む。ステップＳ７２３において、スケーラ６３２は、第２の中間画像データ６５２に対してフィルタリング処理を実施する。
ステップＳ７２４において、出力部６４２は、スケーラ６３２より出力された第２の中間画像データ６６２に基づいて、第２の出力画像データ５２２を生成し、第２のディスプレイ１３２に出力する。
＜まとめ＞
以上の説明から明らかなように、第１の実施形態に係る画像表示システムでは、
・画像生成装置が、第１のディスプレイ用の第１の画像データの有効表示領域（１９２０画素×１０８０画素）を生成する。また、画像生成装置が、第２のディスプレイ用の第２の画像データの有効表示領域（１２８０画素×７２０画素）のサイズを垂直方向に拡大した有効表示領域（１２８０画素×１０８０画素）を生成する。更に、画像生成装置が、生成した有効表示領域（１９２０画素×１０８０画素）と、生成した有効表示領域（１２８０画素×１０８０画素）とを水平方向に結合した入力画像データを生成し、画像処理装置に出力する。
・画像処理装置が、画像生成装置より出力された入力画像データを取得する。
・画像処理装置が、取得した入力画像データを水平方向に分割することで第１の中間画像データと第２の中間画像データとを生成する。また、画像処理装置が、第２の中間画像データに対してフィルタリング処理を実施し、第２の中間画像データの垂直方向のサイズを縮小することで、第２の出力画像データを生成する。
これにより、第１の実施形態に係る画像表示システムによれば、フレームバッファに代えてラインバッファを用いた場合であっても、第２の出力画像データを、入力画像データよりも低い水平周波数で出力することが可能となる。この結果、入力画像データと同じ垂直周波数の第２の出力画像データにおいて、垂直方向のブランキング期間を短くすることが可能となる。
つまり、第１の実施形態に係る画像表示システムによれば、入力画像データを分割することで得られるサイズの異なる各中間画像データを同じフレームレートで表示するにあたり、ブランキング期間を短くすることができる。この結果、非表示領域を含むことなく、入力画像データと同じフレームレートで、各出力画像データを表示することが可能となる。
［第２の実施形態］
上記第１の実施形態では、スケーラがフィルタリング処理を行うことで、有効表示領域のライン数を削減する構成とした。これに対して、第２の実施形態では、スケーラが間引き処理を行うことで、有効表示領域のライン数を削減する。以下、第２の実施形態について、上記第１の実施形態との相違点を中心に説明する。
＜第２の実施形態に係る画像表示システムの各装置にて実行される処理の詳細＞
（１）各装置にて実行される処理の詳細
はじめに、第２の実施形態に係る画像表示システム１４０の各装置にて実行される処理の詳細について説明する。図８は、第２の実施形態に係る画像表示システムの各装置にて実行される処理の詳細を示す図である。
画像生成装置１１０では、１９２０画素×１０８０画素の解像度を有する第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１と、１２８０画素×７２０画素の解像度を有する第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２とを水平方向に結合することで画像データ５１１を生成する。なお、有効表示領域５１１－１は、１９２０画素×１０８０画素であり、有効表示領域５１１－２は、１２８０画素×７２０画素である。
また、画像生成装置１１０では、第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１の垂直方向のサイズと、第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２の垂直方向のサイズとの差分を算出する。
更に、画像生成装置１１０では、算出した差分に基づいて複数のダミーラインを挿入することで、第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２を拡大し、有効表示領域８１２－２を得る。なお、画像生成装置１１０では、例えば、隣接するラインをコピーすることで、ダミーラインを挿入する。
続いて、画像生成装置１１０では、第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１と、第２のディスプレイ１３２用の第２の画像データの有効表示領域８１２－２とが水平方向に結合された、画像データ８１２を生成する。
続いて、画像生成装置１１０は、生成した画像データ８１２を、入力画像データ８１３として画像処理装置１２０に出力する。これにより、画像処理装置１２０では、入力画像データ８１３を取得する。
画像処理装置１２０は、入力画像データ８１３を水平方向に分割することで、第１の出力画像データ５２１、及び、第２の出力画像データ５２２を生成する。
なお、第１の出力画像データ５２１は、第１のディスプレイ１３１の解像度に応じた水平方向のブランキング期間が設けられ、水平同期信号が設定される。ここで、画像処理装置１２０は、フレームバッファを有さないため、第１の出力画像データ５２１は、入力画像データ８１３と垂直周波数が等しくなるように同期をとられる。このため、第１の出力画像データ５２１の垂直方向のブランキング期間は、入力画像データ８１３の垂直方向のブランキング期間に基づいて設けられ、これに応じた垂直同期信号が設定される。なお、第１の出力画像データ５２１の垂直方向のブランキング期間は、入力画像データ８１３の垂直方向のブランキング期間と同一であることが望ましいが、表示画面上、気にならない程度、例えば数ライン分ずれていても問題ない。
このため、第１のディスプレイ１３１には、入力画像データ８１３と同じフレームレートで、有効表示領域５１１－１が表示されることになる。
一方、第２の出力画像データ５２２を生成するにあたり、画像処理装置１２０では、入力画像データ８１３に含まれる有効表示領域８１２－２のサイズを、間引き処理によりダミーラインを間引くことで垂直方向に縮小し、有効表示領域５１１－２を生成する。ここで、分割後の有効表示領域８１２－２を垂直方向に縮小して垂直方向のサイズを小さくした場合、垂直方向において、同一期間内に出力されるライン数が削減されることになる。
第１の出力画像データ５２１の有効表示領域５１１－１と、第２の出力画像データ５２２の有効表示領域５１１－２とは、垂直方向のサイズは異なるが、第２の出力画像データ５２２に関するピクセルクロックを調整することで垂直方向の周波数は等しくすることができる。
このため、第２の出力画像データ５２２において、入力画像データ８１３と垂直周波数が等しくなるように垂直方向のブランキング期間を設けた場合、図４の第２の出力画像データ４２２に設けられた垂直方向のブランキング期間と比較して短くすることができる。
この結果、画像処理装置１２０では、第２のディスプレイ１３２に、入力画像データ８１３と同じフレームレートで有効表示領域５１１－２を表示させることが可能となる。
なお、図８に示すように、画像データ８１２と第１の出力画像データ５２１とを比較した場合、有効表示領域５１１－１の表示期間は、
・水平方向については、Ｈｔ１１のまま変化しない。
・垂直方向については、Ｖｔ１１のまま変化しない。
また、図８に示すように、画像データ８１２と第２の出力画像データ５２２とを比較した場合、有効表示領域８１２－２の表示期間と有効表示領域５１１－２の表示期間は、
・水平方向については、Ｈｔ２１のまま変化しない。
・垂直方向については、Ｖｔ１１のまま変化しない。
（２）画像処理部の機能構成
次に、画像処理部１２１の機能構成について説明する。図９は、第２の実施形態に係る画像処理装置の画像表示部の機能構成の一例を示す図である。図９に示す機能構成と、図６に示した機能構成との相違点は、スケーラ９３１、９３２である。
スケーラ９３１、９３２は、ラインバッファ６２１、６２２にそれぞれ格納された第１の中間画像データ９０１及び第２の中間画像データ９０２を１ラインずつ読み出し、間引き処理を行う。
なお、第２の実施形態において、画像生成装置１１０は、入力画像データ８１３を生成するにあたり、有効表示領域５１１－１にダミーラインを挿入していない。このため、スケーラ９３１では、ラインバッファ６２１より１ラインずつ読み出した第１の中間画像データ９０１を、間引き処理により縮小することなく第１の中間画像データ９１１として出力部６４１に出力する。
これにより、第１のディスプレイ１３１では、解像度（例えば、１９２０画素×１０８０画素）に適した有効表示領域５１１－１を、入力画像データ８１３と同じフレームレートで表示することができる。
一方、第１の実施形態において、画像生成装置１１０は、入力画像データ８１３を生成するにあたり、有効表示領域５１１－２にダミーラインを挿入することで有効表示領域５１１－２を拡大し、有効表示領域８１２－２を得ている。
このため、スケーラ９３２では、ラインバッファ６２２より１ラインずつ読み出した第２の中間画像データ９０２に対して、ダミーラインを間引くことで垂直方向のサイズを縮小する間引き処理を実施し、第２の中間画像データ９１２を生成する。
これにより、第２のディスプレイ１３２では、解像度（例えば、１２８０画素×７２０画素）に適した有効表示領域５１１－２を、入力画像データ８１３と同じフレームレートで表示することができる。
なお、スケーラ９３２では、画像生成装置１１０がダミーラインを挿入することで垂直方向に拡大した分を、間引き処理にて間引くことで縮小したうえで、第２の中間画像データ９１２として出力部６４２に出力する。この結果、スケーラ９３２では、画像生成装置１１０が最初に生成した第２のディスプレイ１３２用の第２の画像データと同等の画像データを再現することができる。
（３）画像処理装置による画像処理の流れ
次に、画像処理装置１２０の画像処理部１２１による画像処理の流れについて説明する。図１０は、第２の実施形態に係る画像処理装置の画像処理部による画像処理の流れを示すフローチャートである。図７との相違点は、ステップＳ１００１、Ｓ１００２、Ｓ１０１１、Ｓ１０１２である。
ステップＳ１００１において、スケーラ９３１は、制御部６０１より通知された各種設定データに基づいて、間引き処理を実施するか否かを判定する。ステップＳ１００１において間引き処理を実施しないと判定した場合には（ステップＳ１００１においてＮｏの場合には）、ステップＳ７１４に進む。
一方、ステップＳ１００１において間引き処理を実施すると判定した場合には（ステップＳ１００１においてＹｅｓの場合には）、ステップＳ１００２に進む。ステップＳ１００２において、スケーラ９３１は、第１の中間画像データ９０１に対して間引き処理を実施する。
同様に、ステップＳ１０１１において、スケーラ９３２は、制御部６０１より通知された各種設定データに基づいて、間引き処理を実施するか否かを判定する。ステップＳ１０１１において間引き処理を実施しないと判定した場合には（ステップＳ１０１１においてＮｏの場合には）、ステップＳ７２４に進む。
一方、ステップＳ１０１１において間引き処理を実施すると判定した場合には（ステップＳ１０１１においてＹｅｓの場合には）、ステップＳ１０１２に進む。ステップＳ１０１２において、スケーラ９３２は、第２の中間画像データ９０２に対して間引き処理を実施する。
＜まとめ＞
以上の説明から明らかなように、第２の実施形態に係る画像表示システムでは、
・画像生成装置が、第１のディスプレイ用の第１の画像データの有効表示領域（１９２０画素×１０８０画素）を生成する。また、画像生成装置が、第２のディスプレイ用の第２の画像データの有効表示領域（１２８０画素×７２０画素）にダミーラインを挿入することで垂直方向にサイズを拡大した有効表示領域（１２８０画素×１０８０画素）を生成する。更に、画像生成装置が、生成した有効表示領域（１９２０画素×１０８０画素）と、生成した有効表示領域（１２８０画素×１０８０画素）とを水平方向に結合した入力画像データを生成し、画像処理装置に出力する。
・画像処理装置が、画像生成装置より出力された入力画像データを取得する。
・画像処理装置が、取得した入力画像データを水平方向に分割することで第１の中間画像データと第２の中間画像データとを生成する。また、画像処理装置が、第２の中間画像データに対して間引き処理を実施し、第２の中間画像データの垂直方向のサイズを縮小することで、第２の出力画像データを生成する。
これにより、第２の実施形態に係る画像表示システムによれば、フレームバッファに代えてラインバッファを用いた場合であっても、第２の出力画像データを、入力画像データよりも低い水平周波数で出力することが可能となる。この結果、入力画像データと同じ垂直周波数の第２の出力画像データにおいて、垂直方向のブランキング期間を短くすることが可能となる。
つまり、第２の実施形態に係る画像表示システムによれば、入力画像データを分割することで得られるサイズの異なる各中間画像データを同じフレームレートで表示するにあたり、ブランキング期間を短くすることができる。この結果、非表示領域を含むことなく、入力画像データと同じフレームレートで、各出力画像データを表示することが可能となる。
［第３の実施形態］
上記第１の実施形態では、スケーラがフィルタリング処理を行うことで、また、第２の実施形態では、スケーラが間引き処理を行うことで、有効表示領域のライン数を削減する構成とした。
これに対して、第３の実施形態では、スケーラが、各ラインの折り返し位置をずらし、縦横比を変更することで、有効表示領域のライン数を削減する。以下、第３の実施形態について、上記第１または第２の実施形態との相違点を中心に説明する。
＜第２の実施形態に係る画像表示システムの各装置にて実行される処理の詳細＞
（１）各装置にて実行される処理の詳細
はじめに、第３の実施形態に係る画像表示システム１４０の各装置にて実行される処理の詳細について説明する。図１１は、第３の実施形態に係る画像表示システムの各装置にて実行される処理の詳細を示す図である。
画像生成装置１１０では、１９２０画素×１０８０画素の解像度を有する第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１と、１２８０画素×７２０画素の解像度を有する第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２とを水平方向に結合することで画像データ５１１を生成する。なお、有効表示領域５１１－１は、１９２０画素×１０８０画素であり、有効表示領域５１１－２は、１２８０画素×７２０画素である。
また、画像生成装置１１０では、第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１の垂直方向のサイズと、第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２の垂直方向のサイズとの比率を算出する。
更に、画像生成装置１１０では、算出した比率に基づいて、有効表示領域５１１－２の各ラインの折り返し位置をずらすことで、第２のディスプレイ１３２用の第２の画像データの有効表示領域５１１－２を垂直方向に拡大する。これにより、画像生成装置１１０では、有効表示領域１１１２－２を得る。
続いて、画像生成装置１１０では、第１のディスプレイ１３１用の第１の画像データの有効表示領域５１１－１と、第２のディスプレイ１３２用の第２の画像データの有効表示領域１１１２－２とが水平方向に結合された、画像データ１１１２を生成する。
続いて、画像生成装置１１０は、生成した画像データ１１１２を、入力画像データ１１１３として画像処理装置１２０に出力する。これにより、画像処理装置１２０では、入力画像データ１１１３を取得する。
画像処理装置１２０は、入力画像データ１１１３を水平方向に分割することで、第１の出力画像データ５２１、及び、第２の出力画像データ５２２を生成する。
なお、第１の出力画像データ５２１は、第１のディスプレイ１３１の解像度に応じた水平方向のブランキング期間が設けられ、水平同期信号が設定される。ここで、画像処理装置１２０は、フレームバッファを有さないため、第１の出力画像データ５２１は、入力画像データ１１１３と垂直周波数が等しくなるように同期をとられる。このため、第１の出力画像データ５２１の垂直方向のブランキング期間は、入力画像データ１１１３の垂直方向のブランキング期間に基づいて設けられ、これに応じた垂直同期信号が設定される。なお、第１の出力画像データ５２１の垂直方向のブランキング期間は、入力画像データ１１１３の垂直方向のブランキング期間と同一であることが望ましいが、表示画面上、気にならない程度、例えば数ライン分ずれていても問題ない。
このため、第１のディスプレイ１３１には、入力画像データ１１１３と同じフレームレートで、有効表示領域５１１－１が表示されることになる。
一方、第２の出力画像データ５２２を生成するにあたり、画像処理装置１２０では、入力画像データ１１１３に含まれる有効表示領域１１１２－２について、各ラインの折り返し位置を元に戻すことで垂直方向のサイズを縮小し、有効表示領域５１１－２を生成する。ここで、分割後の有効表示領域１１１２－２を垂直方向に縮小して垂直方向のサイズを小さくした場合、垂直方向において、同一期間内に出力されるライン数が削減されることになる。
第１の出力画像データ５２１の有効表示領域５１１－１と、第２の出力画像データ５２２の有効表示領域５１１－２とは、垂直方向のサイズは異なるが、第２の出力画像データ５２２に関するピクセルクロックを調整することで垂直方向の周波数は等しくすることができる。
このため、第２の出力画像データ５２２において、入力画像データ１１１３と垂直周波数が等しくなるように垂直方向のブランキング期間を設けた場合、図４の第２の出力画像データ４２２に設けられた垂直方向のブランキング期間と比較して短くすることができる。
この結果、画像処理装置１２０では、第２のディスプレイ１３２に、入力画像データ１１１３と同じフレームレートで有効表示領域５１１－２を表示させることが可能となる。
なお、図１１に示すように、画像データ１１１２と第１の出力画像データ５２１とを比較した場合、有効表示領域５１１－１の表示期間は、
・水平方向については、Ｈｔ１１のまま変化しない。
・垂直方向については、Ｖｔ１１のまま変化しない。
また、図１１に示すように、画像データ１１１２と第２の出力画像データ５２２とを比較した場合、有効表示領域１１１２－２の表示期間と有効表示領域５１１－２の表示期間は、
・水平方向については、折り返し位置を元に戻すことにより、Ｈｔ２２→Ｈｔ２１と変化する。
・垂直方向については、Ｖｔ１１のまま変化しない。
（２）画像処理部の機能構成
次に、画像処理部１２１の機能構成について説明する。図１２は、第３の実施形態に係る画像処理装置の画像表示部の機能構成の一例を示す図である。図１２に示す機能構成と、図６に示した機能構成との相違点は、スケーラ１２３１、１２３２である。
スケーラ１２３１、１２３２は、ラインバッファ６２１、６２２にそれぞれ格納された第１の中間画像データ１２０１及び第２の中間画像データ１２０２を１ラインずつ読み出し、各ラインの折り返し位置を元に戻す処理を行う。
なお、第３の実施形態において、画像生成装置１１０は、入力画像データ１１１３を生成するにあたり、有効表示領域５１１－１の各ラインの折り返し位置をずらしていない。このため、スケーラ１２３１では、ラインバッファ６２１より１ラインずつ読み出した第１の中間画像データ１２０１を、折り返し位置を元に戻す処理により縮小することなく、第１の中間画像データ１２１１として出力部６４１に出力する。
これにより、第１のディスプレイ１３１では、解像度（例えば、１９２０画素×１０８０画素）に適した有効表示領域５１１－１を、入力画像データ１１１３と同じフレームレートで表示することができる。
一方、第３の実施形態において、画像生成装置１１０は、入力画像データ１１１３を生成するにあたり、有効表示領域５１１－２の各ラインの折り返し位置をずらすことで有効表示領域５１１－２を拡大し、有効表示領域１１１２－２を得ている。
このため、スケーラ１２３２では、ラインバッファ６２２より１ラインずつ読み出した第２の中間画像データ１２０２に対して、折り返し位置を元に戻す処理を行うことで垂直方向のサイズを縮小し、第２の中間画像データ１２１２を生成する。
これにより、第２のディスプレイ１３２では、非表示領域を含むことなく、解像度（例えば、１２８０画素×７２０画素）に適した有効表示領域５１１－２を、入力画像データ１１１３と同じフレームレートで表示することができる。
なお、スケーラ１２３２では、画像生成装置１１０が折り返し位置をずらすことで垂直方向に拡大した分を、折り返し位置を元に戻すことで縮小したうえで第２の中間画像データ１２０２として出力部６４２に出力する。この結果、スケーラ１２３２では、画像生成装置１１０が最初に生成した第２のディスプレイ１３２用の第２の画像データと同等の画像データを再現することができる。
（３）画像処理装置による画像処理の流れ
次に、画像処理装置１２０の画像処理部１２１による画像処理の流れについて説明する。図１３は、第３の実施形態に係る画像処理装置の画像処理部による画像処理の流れを示すフローチャートである。図７との相違点は、ステップＳ１３０１、Ｓ１３０２、Ｓ１３１１、Ｓ１３１２である。
ステップＳ１３０１において、スケーラ１２３１は、制御部６０１より通知された各種設定データに基づいて、折り返し位置を元に戻す処理を実施するか否かを判定する。ステップＳ１３０１において折り返し位置を元に戻す処理を実施しないと判定した場合には（ステップＳ１３０１においてＮｏの場合には）、ステップＳ７１４に進む。
一方、ステップＳ１３０１において折り返し位置を元に戻す処理を実施すると判定した場合には（ステップＳ１３０１においてＹｅｓの場合には）、ステップＳ１３０２に進む。ステップＳ１３０２において、スケーラ１２３１は、第１の中間画像データ１２０１に対して折り返し位置を元に戻す処理を実施する。
同様に、ステップＳ１３１１において、スケーラ１２３２は、制御部６０１より通知された各種設定データに基づいて、折り返し位置を元に戻す処理を実施するか否かを判定する。ステップＳ１３１１において折り返し位置を元に戻す処理を実施しないと判定した場合には（ステップＳ１３１１においてＮｏの場合には）、ステップＳ７２４に進む。
一方、ステップＳ１３１１において折り返し位置を元に戻す処理を実施すると判定した場合には（ステップＳ１３１１においてＹｅｓの場合には）、ステップＳ１３１２に進む。ステップＳ１３１２において、スケーラ１２３２は、第２の中間画像データ１２０２に対して折り返し位置を元に戻す処理を実施する。
＜まとめ＞
以上の説明から明らかなように、第３の実施形態に係る画像表示システムでは、
・画像生成装置が、第１のディスプレイ用の第１の画像データの有効表示領域（１９２０画素×１０８０画素）を生成する。また、画像生成装置が、第２のディスプレイ用の第２の画像データの有効表示領域（１２８０画素×７２０画素）の各ラインの折り返し位置をずらすことで垂直方向にサイズを拡大した有効表示領域（１２８０画素×１０８０画素）を生成する。更に、画像生成装置が、生成した有効表示領域（１９２０画素×１０８０画素）と、生成した有効表示領域（１２８０画素×１０８０画素）とを水平方向に結合した入力画像データを生成し、画像処理装置に出力する。
・画像処理装置が、画像生成装置より出力された入力画像データを取得する。
・画像処理装置が、取得した入力画像データを水平方向に分割することで第１の中間画像データと第２の中間画像データとを生成する。また、画像処理装置が、第２の中間画像データに対して折り返し位置を元に戻す処理を実施し、第２の中間画像データのサイズを縮小することで、第２の出力画像データを生成する。
これにより、第３の実施形態に係る画像表示システムによれば、フレームバッファに代えてラインバッファを用いた場合であっても、第２の出力画像データを、入力画像データよりも低い水平周波数で出力することが可能となる。この結果、入力画像データと同じ垂直周波数の第２の出力画像データにおいて、垂直方向のブランキング期間を短くすることが可能となる。
つまり、第３の実施形態に係る画像表示システムによれば、入力画像データを分割することで得られるサイズの異なる各中間画像データを同じフレームレートで表示するにあたり、ブランキング期間を短くすることができる。この結果、非表示領域を含むことなく、入力画像データと同じフレームレートで、各出力画像データを表示することが可能となる。
［その他の実施形態］
上記第１乃至第３の実施形態では、２つのスケーラに、それぞれ、第１の中間画像データまたは第２の中間画像データを処理する機能を配し、画像処理時には、このうち、第２の中間画像データに対する処理を実施するものとして説明した。
しかしながら、第２の中間画像データに対する処理に代えて、第１の中間画像データに対する処理を実施するように構成してもよい。また、第１の中間画像データに対する処理と第２の中間画像データに対する処理の両方を実施するように構成してもよい。
また、上記第１乃至第３の実施形態では、２つのディスプレイに、それぞれ、第１の出力画像データまたは第２の出力画像データを出力する場合について説明した。しかしながら、ディスプレイの数は２つに限定されず、Ｎ個のディスプレイ（Ｎは、３以上の整数）に、それぞれ、第１乃至第Ｎの出力画像データのいずれかを出力するように構成してもよい。
また、上記第１乃至第３の実施形態では、第１のディスプレイ１３１の解像度を１９２０画素×１０８０画素、第２のディスプレイ１３２の解像度を１２８０画素×７２０画素として説明した。しかしながら、第１のディスプレイ１３１の解像度及び第２のディスプレイ１３２の解像度はこれに限定されない。また、上記第１乃至第３の実施形態では、第１のディスプレイ１３１の解像度を、第２のディスプレイ１３２の解像度より高くしたが、第２のディスプレイ１３２の解像度を、第１のディスプレイ１３１の解像度より高くしてもよい。なお、この場合、スケーラ６３１、９３１、１２３１が、第１の中間画像データ６５１、９０１、１２０１に対して、フィルタリング処理、間引き処理または折り返し位置を戻す処理を実施する。
また、上記第１乃至第３の実施形態では、画像生成装置１１０にて比率または差分を算出したうえで、第２の画像データの有効表示領域を垂直方向に拡大するものとして説明した。しかしながら、画像生成装置１１０は、予め算出された比率または差分を読み出して、第２の画像データの有効表示領域を垂直方向に拡大するように構成してもよい。
また、上記第１乃至第３の実施形態では、画像表示システム１４０を車両１００に搭載する場合について説明したが、画像表示システム１４０は、他の用途に適用してもよいことはいうまでもない。
なお、上記実施形態に挙げた構成等に、その他の要素との組み合わせ等、ここで示した構成に本発明が限定されるものではない。これらの点に関しては、本発明の趣旨を逸脱しない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。
１００ ：車両
１１０ ：画像生成装置
１１１ ：画像生成部
１２０ ：画像処理装置
１２１ ：画像処理部
１３１ ：第１のディスプレイ
１３２ ：第２のディスプレイ
１４０ ：画像表示システム
５１３ ：入力画像データ
５２１ ：第１の出力画像データ
５２２ ：第２の出力画像データ
６５１、６６１ ：第１の中間画像データ
６５２、６６２ ：第２の中間画像データ
８１３ ：入力画像データ
９０１、９１１ ：第１の中間画像データ
９０２、９１２ ：第２の中間画像データ
１１１３ ：入力画像データ
１２０１、１２１１ ：第１の中間画像データ
１２０２、１２１２ ：第２の中間画像データ

Claims (17)

  1. 入力画像データであって、
    第１の画像データの有効表示領域と、
    前記第１の画像データの有効表示領域と垂直方向に結合され、前記第１の画像データの有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第１のブランキング領域と、
    前記第１の画像データの有効表示領域と水平方向に結合され、垂直方向のサイズが前記第１の画像データの有効表示領域よりも小さい第２の画像データの有効表示領域を、拡大後の有効表示領域の垂直方向のサイズが前記第１の画像データの有効表示領域の垂直方向のサイズと同じになるように、垂直方向に拡大することで得られる、前記第２の画像データの拡大後の有効表示領域と、
    前記第２の画像データの拡大後の有効表示領域と垂直方向に結合され、前記第２の画像データの拡大後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第２のブランキング領域と、
    を含む入力画像データを取得する取得手段と、
    前記入力画像データを水平方向に分割することで得られる、第１の画像データの有効表示領域を含む第１の中間画像データと、第２の出力画像データであって、
    第２の画像データの拡大後の有効表示領域を含む第２の中間画像データの垂直方向のサイズを、前記第２の画像データの有効表示領域の垂直方向のサイズに基づいて縮小した、前記第２の中間画像データの縮小後の有効表示領域と、
    第２の中間画像データの縮小後の有効表示領域と垂直方向に結合され、前記第２の中間画像データの縮小後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第３のブランキング領域と、
    を含む、前記第２の画像データに対応する前記第２の出力画像データと、を生成する画像処理手段と
    を有することを特徴とする画像処理装置。
  2. 前記第１のブランキング領域の垂直方向のサイズは、前記第２のブランキング領域の垂直方向のサイズと同一であることを特徴とする請求項１に記載の画像処理装置。
  3. 前記第３のブランキング領域によって規定される、垂直方向のブランキング期間は、前記第２の出力画像データにおいて前記入力画像データと垂直周波数が等しくなるように設定されることを特徴とする請求項１に記載の画像処理装置。
  4. 前記第２の中間画像データを複数ラインずつ格納するラインバッファを更に有し、
    前記画像処理手段は、前記第２の中間画像データを、前記ラインバッファから読み出し、前記第２の中間画像データの垂直方向のサイズを縮小することを特徴とする請求項１に記載の画像処理装置。
  5. 前記画像処理手段は、前記第２の中間画像データの垂直方向のサイズを、フィルタリング処理により縮小することを特徴とする請求項４に記載の画像処理装置。
  6. 前記入力画像データは、第１の画像データの有効表示領域と、前記第２の画像データの有効表示領域をフィルタリング処理により垂直方向にサイズを拡大することで得られる有効表示領域と、を水平方向に結合することで生成されることを特徴とする請求項５に記載の画像処理装置。
  7. 前記画像処理手段は、前記第２の中間画像データの垂直方向のサイズを、間引き処理により縮小することを特徴とする請求項４に記載の画像処理装置。
  8. 前記入力画像データは、第１の画像データの有効表示領域と、前記第２の画像データの有効表示領域を、ダミーラインの挿入により垂直方向にサイズを拡大することで得られる有効表示領域と、を水平方向に結合することで生成されることを特徴とする請求項７に記載の画像処理装置。
  9. 前記画像処理手段は、前記第２の中間画像データの垂直方向のサイズを、各ラインの折り返し位置をずらすことにより縮小することを特徴とする請求項４に記載の画像処理装置。
  10. 前記入力画像データは、第１の画像データの有効表示領域と、前記第２の画像データの有効表示領域を、各ラインの折り返し位置をずらして垂直方向にサイズを拡大することで得られる有効表示領域と、を水平方向に結合することで生成されることを特徴とする請求項９に記載の画像処理装置。
  11. 前記入力画像データを水平方向に分割する分割手段を更に有することを特徴とする請求項１乃至１０のいずれか１項に記載の画像処理装置。
  12. 前記入力画像データについての設定データに基づいて、前記入力画像データを水平方向に分割する際の水平方向のサイズを特定し、前記分割手段に通知する制御手段を更に有することを特徴とする請求項１１に記載の画像処理装置。
  13. 前記入力画像データを水平方向に分割する際の水平方向のサイズを格納する格納手段を更に有し、
    前記分割手段は、前記格納手段に格納された水平方向のサイズに基づいて、前記入力画像データを水平方向に分割することを特徴とする請求項１１に記載の画像処理装置。
  14. 前記画像処理手段は、更に、前記第１の中間画像データに基づいて、前記第１の画像データに対応する第１の出力画像データを生成することを特徴とする請求項１に記載の画像処理装置。
  15. 入力画像データであって、
    第１の画像データの有効表示領域と、
    前記第１の画像データの有効表示領域と垂直方向に結合され、前記第１の画像データの有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第１のブランキング領域と、
    前記第１の画像データの有効表示領域と水平方向に結合され、垂直方向のサイズが前記第１の画像データの有効表示領域よりも小さい第２の画像データの有効表示領域を、拡大後の有効表示領域の垂直方向のサイズが前記第１の画像データの有効表示領域の垂直方向のサイズと同じになるように、垂直方向に拡大することで得られる、前記第２の画像データの拡大後の有効表示領域と、
    前記第２の画像データの拡大後の有効表示領域と垂直方向に結合され、前記第２の画像データの拡大後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第２のブランキング領域と、
    を含む入力画像データを取得する取得工程と、
    前記入力画像データを水平方向に分割することで得られる、第１の画像データの有効表示領域を含む第１の中間画像データと、第２の出力画像データであって、
    第２の画像データの拡大後の有効表示領域を含む第２の中間画像データの垂直方向のサイズを、前記第２の画像データの有効表示領域の垂直方向のサイズに基づいて縮小した、前記第２の中間画像データの縮小後の有効表示領域と、
    第２の中間画像データの縮小後の有効表示領域と垂直方向に結合され、前記第２の中間画像データの縮小後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第３のブランキング領域と、
    を含む、前記第２の画像データに対応する前記第２の出力画像データと、を生成する画像処理工程と
    を有することを特徴とする画像処理方法。
  16. 画像生成装置と画像処理装置とを有する画像表示システムであって、
    前記画像生成装置は、
    入力画像データであって、
    第１の画像データの有効表示領域と、
    前記第１の画像データの有効表示領域と垂直方向に結合され、前記第１の画像データの有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第１のブランキング領域と、
    前記第１の画像データの有効表示領域と水平方向に結合され、垂直方向のサイズが前記第１の画像データの有効表示領域よりも小さい第２の画像データの有効表示領域を、拡大後の有効表示領域の垂直方向のサイズが前記第１の画像データの有効表示領域の垂直方向のサイズと同じになるように、垂直方向に拡大することで得られる、前記第２の画像データの拡大後の有効表示領域と、
    前記第２の画像データの拡大後の有効表示領域と垂直方向に結合され、前記第２の画像データの拡大後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第２のブランキング領域と、
    を含む入力画像データを生成する生成手段を有し、
    前記画像処理装置は、
    前記入力画像データを水平方向に分割することで得られる、第１の画像データの有効表示領域を含む第１の中間画像データと、第２の出力画像データであって、
    第２の画像データの拡大後の有効表示領域を含む第２の中間画像データの垂直方向のサイズを、前記第２の画像データの有効表示領域の垂直方向のサイズに基づいて縮小した、前記第２の中間画像データの縮小後の有効表示領域と、
    第２の中間画像データの縮小後の有効表示領域と垂直方向に結合され、前記第２の中間画像データの縮小後の有効表示領域の垂直方向のサイズに応じた、垂直方向のブランキング期間を規定する第３のブランキング領域と、
    を含む、前記第２の画像データに対応する前記第２の出力画像データと、を生成する画像処理手段、
    を有することを特徴とする画像表示システム。
  17. 前記画像処理手段は、更に、第１の中間画像データに基づいて、前記第１の画像データに対応する第１の出力画像データを生成し、
    前記画像表示システムは、更に、
    前記第１の出力画像データを表示する第１のディスプレイと、
    前記第２の出力画像データを表示する第２のディスプレイと、
    を有することを特徴とする請求項１６に記載の画像表示システム。
JP2022107979A 2018-02-08 2022-07-04 画像処理装置、画像処理方法及び画像表示システム Active JP7294507B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022107979A JP7294507B2 (ja) 2018-02-08 2022-07-04 画像処理装置、画像処理方法及び画像表示システム

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019570212A JP7151731B2 (ja) 2018-02-08 2018-02-08 画像処理装置、画像処理方法及び画像表示システム
PCT/JP2018/004314 WO2019155566A1 (ja) 2018-02-08 2018-02-08 画像処理装置、画像処理方法及び画像表示システム
JP2022107979A JP7294507B2 (ja) 2018-02-08 2022-07-04 画像処理装置、画像処理方法及び画像表示システム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019570212A Division JP7151731B2 (ja) 2018-02-08 2018-02-08 画像処理装置、画像処理方法及び画像表示システム

Publications (2)

Publication Number Publication Date
JP2022125166A true JP2022125166A (ja) 2022-08-26
JP7294507B2 JP7294507B2 (ja) 2023-06-20

Family

ID=87884941

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022107979A Active JP7294507B2 (ja) 2018-02-08 2022-07-04 画像処理装置、画像処理方法及び画像表示システム

Country Status (1)

Country Link
JP (1) JP7294507B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4372546A1 (en) 2022-11-17 2024-05-22 Seiko Epson Corporation Circuit device and display system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006518474A (ja) * 2003-01-17 2006-08-10 ハーマン ベッカー オートモーティブ システムズ ゲーエムベーハー 別個のディスプレイ装置に異なる画像を表示させるための画像表示システム
JP2008116812A (ja) * 2006-11-07 2008-05-22 Seiko Epson Corp 表示装置、プロジェクタおよび表示方法
JP2008268701A (ja) * 2007-04-24 2008-11-06 Mitsubishi Electric Corp 画像表示装置
JP2013213859A (ja) * 2012-03-30 2013-10-17 Fujitsu Ten Ltd 映像システムおよび映像処理方法
WO2015173954A1 (ja) * 2014-05-16 2015-11-19 富士通株式会社 描画装置、描画方法及び描画用コンピュータプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006518474A (ja) * 2003-01-17 2006-08-10 ハーマン ベッカー オートモーティブ システムズ ゲーエムベーハー 別個のディスプレイ装置に異なる画像を表示させるための画像表示システム
JP2008116812A (ja) * 2006-11-07 2008-05-22 Seiko Epson Corp 表示装置、プロジェクタおよび表示方法
JP2008268701A (ja) * 2007-04-24 2008-11-06 Mitsubishi Electric Corp 画像表示装置
JP2013213859A (ja) * 2012-03-30 2013-10-17 Fujitsu Ten Ltd 映像システムおよび映像処理方法
WO2015173954A1 (ja) * 2014-05-16 2015-11-19 富士通株式会社 描画装置、描画方法及び描画用コンピュータプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4372546A1 (en) 2022-11-17 2024-05-22 Seiko Epson Corporation Circuit device and display system

Also Published As

Publication number Publication date
JP7294507B2 (ja) 2023-06-20

Similar Documents

Publication Publication Date Title
JP5925579B2 (ja) 半導体装置、電子装置、及び画像処理方法
JP2007271908A (ja) マルチ画像生成装置
US8896699B2 (en) Image synthesis device
JP5195592B2 (ja) 映像処理装置
JP4790227B2 (ja) 表示制御装置および表示制御方法
JP7294507B2 (ja) 画像処理装置、画像処理方法及び画像表示システム
US9519959B2 (en) Image processing apparatus, imaging apparatus, and method for processing image
US11055820B2 (en) Methods, apparatus and processor for producing a higher resolution frame
JP7151731B2 (ja) 画像処理装置、画像処理方法及び画像表示システム
JP5585885B2 (ja) 画像処理装置及び画像処理方法
JP2004246242A (ja) プロジェクタの画像補正方法及びプロジェクタ
JP6249692B2 (ja) 画像処理装置、その制御方法及びプログラム
US20140300935A1 (en) Image processing apparatus and control method thereof
US8830268B2 (en) Non-linear image mapping using a plurality of non-linear image mappers of lesser resolution
JP6448189B2 (ja) 映像処理装置
EP2184926A1 (en) Non-linear image mapping using a plurality of non-linear image mappers of lesser resolution
JP2016058832A (ja) 画像処理装置、その制御方法、及びプログラム
JP5645343B2 (ja) 撮像装置
JP6478621B2 (ja) 画像処理装置
JP2009042338A (ja) 画素数変換方法、画素数変換装置及び画素数変換プログラム
JP2014216668A (ja) 撮像装置
JP3985451B2 (ja) 画像処理装置および画像表示装置
US20070286518A1 (en) Image processing apparatus and image processing method
JP6040217B2 (ja) 投影装置及び投影方法
JP2015228588A (ja) 映像処理装置、その制御方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220704

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230411

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230522

R150 Certificate of patent or registration of utility model

Ref document number: 7294507

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150