WO2006046444A1 - 画像補間装置、および表示装置 - Google Patents

Abstract

　画像補間装置（３１０）は、補間対象領域に位置する画素および該画素の近傍画素に対する当該画素の特徴量を算出する特徴量算出部（３１３）と、補間対象領域に位置する画素のうち特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値以上であれば、当該画素の画素値を前記補間画素の画素値として設定する画像補間処理部（３１４）と、画像補間処理部（３１４）によって補間画素が補間された画像データに対して解像度変化をおこなう解像度変換処理部（３１５）と、解像度変換処理部（３１５）によって解像度変換処理がおこなわれた画像データが少なくとも１つ含まれた複数の画像データを所定の表示形態に並べ替えて表示するように制御する表示制御処理部（３１６）とを備える。

Description

明 細 書

画像補間装置、および表示装置

技術分野

[0001] 本発明は、ある画素の画素値を、その画素の近傍に位置する画素の画素値力 補 間する技術に関するものである。

背景技術

[0002] 特開平 6— 186526号公報および特開 2000— 137443号公報は、 1台の液晶ディ スプレイ (LCD)で 2画面を同時に表示することができる表示装置を開示して 、る。こ の表示装置を用いれば、例えば、運転席と助手席とにいる人に対してそれぞれ異な る画面を表示することができる。また特開平 11— 331876号公報および特開平 9—4 6622号公報は、 2種類の映像を、同時に、同一画面に表示することできる表示装置 を開示している。

[0003] ところで、複数の映像ソースからの画像データを一つの表示部に表示する場合は、 各画像データに対して解像度変換 (例えば、各映像の画像データの水平解像度を 1 Z2にして「2画面表示」にする解像度変換)を行わなければならない。しかしながら、 単純に画素を間引く解像度変換をおこなったのでは、映像の表示内容によっては理 解不可能な映像になってしまう。

[0004] 特開 2004— 104368号公報は、この問題を解決するための技術を開示している。

具体的には、画素データを補間する位置の周辺の複数画素データの平均または加 重平均を算出して補間データを作成する。

発明の開示

発明が解決しょうとする課題

[0005] し力しながら、特開 2004— 104368号公報に開示された技術では、画素データを 補間する位置の周辺の複数画素データを平均または加重平均した補間データを画 一的に作成するので、画像を特徴付ける画素が不明瞭に加工された補間データが 作成される。そのため、画像データの解像度変換に伴って画質が著しく劣化するとい う問題点があった。 [0006] 例えば、隣接する画素の輝度レベルが乖離している場合でも、この画素と周辺の画 素とが平均または加重平均された補間データを作成するため、オリジナル画像で画 像を特徴付ける画素の輝度レベルが周辺の画素の輝度レベルと平滑ィ匕され、画像を 特徴付ける画素が不明瞭に加工された補間データが作成されることとなり、画像デー タに解像度変換がおこなわれた場合に、画質が著しく劣化するという問題点があった

[0007] 本発明は、上述した従来技術による課題 (問題点)を少なくとも解消するためになさ れたものであり、画像データの解像度変換に伴う画質劣化を抑制することができる画 像補間装置および表示装置を提供することを目的とする。

課題を解決するための手段

[0008] 上述した課題を解決し、目的を達成するために、本発明にカゝかる画像補間装置お よび表示装置は、前記補間対象領域に位置する画素および該画素の近傍画素に基 づき当該画素の特徴量を算出し、その画素が画像において特徴的である力否かによ つて補間画素の画素値を決定する。

発明の効果

[0009] 本発明にかかる画像補間装置および表示装置は、画像データの解像度変換に伴 う画質劣化を抑制し、元の画像の特徴を維持する画像補間装置および表示装置を 得ることができると!/、う効果を奏する。

図面の簡単な説明

[0010] [図 1]図 1は、本発明の一実施の形態に係る表示装置の概念図である。

[図 2]図 2は、図 1に示した表示装置を車に搭載したことを示す斜視図である。

[図 3]図 3は、図 1に示した表示部の断面図である。

[図 4]図 4は、表示パネルを正面から見た構造の概略図である。

[図 5]図 5は、 TFT基板の概略を示す回路図である。

[図 6]図 6は、図 1に示した表示装置のブロック図である。

[図 7]図 7は、図 6に示した画像出力部 211のブロック図である。

[図 8]図 8は、図 6に示した制御部 200のブロック図である。

[図 9]図 9は、図 6に示したメモリ 218のブロック図である。 [図 10]図 10は、本実施例 1に係る画像補間装置の構成を示すブロック図である。

[図 11A]図 11Aは、 2画面表示形態を説明するための説明図である。

圆 11B]図 11Bは、 2視野表示形態を説明するための説明図である。

[図 12]図 12は、特徴量の算出について説明する説明図である。

圆 13]図 13は、特徴量算出部および画像補間処理部の処理内容を説明するための 概念図である。

[図 14]図 14は、解像度変換処理部および表示制御処理部の処理内容を説明するた めの概念図である。

圆 15A]図 15Aは、画像補間処理の具体例を説明する説明図である (その 1)。 圆 15B]図 15Bは、画像補間処理の具体例を説明する説明図である (その 2)。

[図 16]図 16は、画像補間処理のフローチャートである。

[図 17]図 17は、図 1に示した表示装置の変形例を説明するための説明図である。

[図 18]図 18は、図 1に示した表示装置の変形例を説明するための説明図である。 符号の説明

1 第 1の画像ソース

2 第 2の画像ソース

3 第 1の画像データ

4 第 2の画像データ

5 表示制御部

6 表示データ

7 表示部

8 第 1の表示画像

9 第 2の表示画像

10 観察者

11 観察者

12 助手席

13 運 ¾5席

14 ウィンドシールド 操作部

スピーカ

液晶パネル

/ックライト

偏光板

偏光板

TFT基板

液晶層

カラーフィルター基板 ガラス基板

視差バリア

左側 (助手席側)表示用の画素 右側（運転席側）表示用の画素 表示パネル駆動部

走査線駆動回路

データ線求道回路

TFT素子

-118 データ線

-121 走査線

画素電極

サブピクセノレ

タツチパネル

制御部

CDZMD再生部

ラジオ受信部

TV受信部

DVD再生部

HD (Hard Disk)再生部 206 ナビゲーシヨン部

207 分配回路

208 第 1の画像調整回路

209 第 2の画像調整回路

210 音声調整回路

211 画像出力部

212 VICS情報受信部

213 GPS情報受信部

214 セレクタ

215 操作部

216 リモコン送受信部

217 リモコン

218 メモリ

219 外部音声 Z映像入力部

220 カメラ

221 明るさ検知手段

222 乗員検知手段

223 リア表示部

224 ETC車載器

225 通 f¾ユニット

226 第 1の書込回路

227 第 2の書込回路

228 VRAM (Video RAM)

229 インターフェース

230 CPU

231 n己' 1思 ρβ

232 データ記憶部

233 第 1の画面 RAM 234 第 2の画面 RAM

235 画質設定情報記憶手段

236 対環境調整値保持手段

310 画像補間装置

311 画像データ入力部

312 画像データ入力制御部

313 特徴量算出部

314 画像補間処理部

315 解像度変換処理部

316 表示制御処理部

317 表示部

320 AVユニット

330 ナビゲーシヨンユニット

発明を実施するための最良の形態

[0012] 以下、本発明の実施の形態を図面にしたがって説明する。但し、本発明の技術的 範囲はそれらの実施の形態に限定されず、特許請求の範囲に記載された発明とそ の均等物に及ぶ物である。

[0013] 図 1は、本発明に係る表示装置の概念図である。図中、 1は第 1の画像ソース、 2は 第 2の画像ソース、 3は第 1の画像ソース力もの第 1の画像データ、 4は第 2の画像ソ ースからの第 2の画像データ、 5は表示制御部、 6は表示データ、 7は表示部（例えば 液晶パネル等）、 8は第 1の画像ソース 1に基づく第 1の表示画像、 9は第 2の画像ソ ース 2に基づく第 2の表示画像、 10は表示部 7に対して左側に位置する観察者 (利 用者）、 11は表示部 7に対して右側に位置する観察者 (利用者)である。

[0014] 図 1の概念図は、表示部 7に対する観察者 10、 11の相対的位置に応じて、換言す れば表示部 7に対する視野角に応じて、観察者 10は第 1の表示画像 8を、観察者 11 は第 2の表示画像 9を実質的に同時に見ることができ、しかも各々の表示画像 8、 9は 表示部 7の表示面全体に渡ってみることができることを概念的に示している。図 1にお いて、第 1の画像ソース 1は例えば DVDプレーヤの映画画像やテレビ受信機の受信 画像等、第 2の画像ソース 2は例えばカーナビゲーシヨン装置の地図やルート案内画 像等であり、それぞれの第 1の画像データ 3及び第 2の画像データ 4は表示制御部 5 に供給され、それらを表示部 7で実質的に同時に表示できるように処理される。

[0015] 表示制御部 5から表示データ 6を供給される表示部 7は、後述する視差バリアを備 えた液晶パネル等で構成される。表示部 7の横方向の総画素の半数が第 1の画像ソ ース 1に基づく第 1の表示画像 8の表示に、残りの半数の画素が第 2の画像ソース 2 に基づく第 2の表示画像 9の表示に使用される。表示部 7に対して左側に位置する観 察者 10には、第 1の表示画像 8に対応する画素のみが見え、第 2の表示画像 9は表 示部 7の表面に形成されている視差バリアによって遮られて実質的に見えない。一方 、表示部 7に対して右側に位置する観察者 11には、第 2の表示画像 9に対応する画 素のみが見え、第 1の表示画像 8は視差バリアにより遮られて実質的に見えない。尚 、視差バリアについては、例えば特開平 10— 123462号公報、特開平 11 84131 号公報に開示された構成を応用できる。

[0016] 係る構成により、単一の画面で左右の利用者に異なる情報やコンテンツを提供する ことができる。もちろん、第 1、第 2の画像ソースが同じであれば、従来どおり左右の利 用者が同じ画像を見ることもできる。

[0017] 図 2は、本発明に係るマルチビュー表示装置の車両への搭載例を示す斜視図であ る。図中、 12は助手席、 13は運転席、 14はウィンドシールド、 15は操作部、 16はス ピー力である。

[0018] 図 1のマルチビュー表示装置の表示部 7は、例えば図 2に示すように、運転席 13と 助手席 12とのほぼ中央のダッシュボード部分に配置される。マルチビュー表示装置 に対する各種操作は、表示部 7の表面に一体的に形成したタツチパネル（図示せず） や操作部 15又は、赤外線又は無線リモートコントローラ（図示せず)の操作によって 行なわれる。車両の各ドアにはスピーカ 16が配置され、表示画像に連動した音声や 警告音等が出力される。

[0019] 運転席 13に図 1の観察者 11が、助手席 12には観察者 10が座る。表示部 7に対す る第 1視方向（運転席側)から見ることができる画像は例えばカーナビゲーシヨン装置 の地図等の画像であり、実質的に同時に第 2視方向（助手席側)から見ることができ る画像は例えばテレビ受信画像や DVDムービー画像である。従って、運転席 13の 運転者がカーナビゲーシヨンによる運転支援を受けるのと同時に助手席 12の同乗者 はテレビや DVDを楽しむことができる。し力もそれぞれの画像は例えば 7インチの画 面全体を使用して表示されるため、従来のマルチウィンドウ表示のように画面サイズ 力 S小さくなることもない。つまり、運転者、同乗者にとっては、あた力も各々に独立した 専用のディスプレイがあるかの如ぐそれぞれに最適な情報やコンテンツが提供され るのである。

[0020] 図 3は、表示部 7の断面構造の概略図である。図中、 100は液晶パネル、 101はバ ックライト、 102は液晶パネルのバックライト側に設置された偏光板、 103は液晶パネ ルの発光方向側の前面に配置された偏光板、 104は TFT(Thin Film Transistor)基 板、 105は液晶層、 106はカラーフィルター基板、 107はガラス基板、 108は視差バ リアである。液晶パネル 100は、 TFT基板 104とそれに対向して配置されるカラーフ ィルター基板 106の間に液晶層 105を挟持した一対の基板と、その発光方向側の前 面に配置された視差バリア 108とガラス基板 107とを、 2枚の偏光板 102· 103の間に 挟んだ構成となっており、ノ ックライト 101からやや離隔して配設される。また、液晶 パネル 100は、 RGB色（三原色)構成される画素を有する。

[0021] 液晶パネル 100の各画素は、左側 (助手席側)表示用と、右側 (運転席側)表示用 に分けられて表示制御される。そして、左側 (助手席側)表示用画素は、視差バリア 1 08により右側（運転席側）への表示は遮断され、左側 (助手席側）からは見えるように なっている。また、右側 (運転席側)表示用画素は、視差バリア 108により左側 (助手 席側）への表示が遮断され、右側（運転席側）からは見えるようになつている。これに よって、運転席と同乗者に異なった表示を提供することが可能となる。つまり、運転者 にはナビゲーシヨンの地図情報を与え、同時に同乗者には DVDの映画等を見せる ことが可能となる。なお、視差バリア 108、前記液晶パネルの各画素の構成を変更す れば、 3方向等、複数方向に異なった画像を表示する構成も可能である。また、視差 ノリア自体を電気的に駆動可能な液晶シャッター等で構成して視野角を可変するよ うにしてもよい。

[0022] 図 4は、表示パネルを正面から見た構造の概略図であり、図 3は図 4中の A— A'断 面である。図中、 109は左側 (助手席側)表示用の画素、 110は右側 (運転席側)表 示用の画素である。図 3及び図 4は、例えば横方向に 800画素、縦方向に 480画素 並べられた液晶パネル 100の一部を表す。左側 (助手席側）表示用の画素 109と右 側（運転席側）表示用の画素 110は縦方向にグループィ匕され、交互に並んで 、る。 視差バリア 108は、横方向にある間隔で配置され、縦方向には一様である。これによ つて、左側力も表示パネルを見ると、視差バリア 108が右側用画素 110を覆い隠して 、左側用画素 109が見える。また同様に右側力も見ると、視差バリア 108が左側用画 素 109を覆い隠して、右側用画素 110が見える。さらに正面付近では、左側用画素 1 09と右側用画素 110の両方が見えるため、左側表示画像と右側表示画像とが実質 的に重なって見える。ここで、図 4中の交互に並んだ左側用画素 109及び右側用画 素 110は、図 3のように RGB色を有している力 各グループ縦方向内は、 R列、 G列、 B列のように単色で構成されて!ヽても良!、し、 RGBが複数混じった例として構成され ていてもよい。

[0023] 図 5は TFT基板 104の概略を示す回路図である。 111は表示パネル駆動部、 112 は走査線駆動回路、 113はデータ線駆動回路、 114は TFT素子、 115〜118はデ ータ線、 119〜121は走査線、 122は画素電極、 123はサブピクセルである。図 5に 示すよう ίこ、サブピクセノレ 123 ίま各データ線 115〜： L 18及び各走査線 119〜 121【こ よって囲まれた領域を一単位とし、複数形成される。各サブピクセルには、液晶層 10 5に電圧を印加する画素電極 122とそれをスイッチング制御する TFT素子 114が形 成されて!/、る。表示パネル駆動部 111は走査線駆動回路 112及びデータ線駆動回 路 113の駆動タイミングを制御する。走査線駆動回路 112は TFT素子 114の選択走 查を行い、またデータ線駆動回路 113は画素電極 122への印加電圧を制御する。

[0024] 前記複数のサブピクセルは、第 1の画像データと第 2の画像データの合成データも しくは、第 1と第 2の個々の画像データに基づいて、例えばデータ線 115と 117に第 1 の画素データ (左側画像表示用）を、またデータ線 116と 118に第 2の画素データ（ 右側画像表示用）を送信することによって、第 1の画像を表示する第 1の画像データ 群と第 2の画像を表示する第 2の画像データ群が形成される。

[0025] 図 6は、本発明に係わる表示装置の概略を示すブロック図であり、いわゆる Audio Visual Navigation複合機への適用例である。図中、 124はタツチパネル、 200は制 御部、 201は CDZMD再生部、 202はラジオ受信部、 203は TV受信部、 204は D VD再生部、 205は HD (Hard Disk)再生部、 206はナビゲーシヨン部、 207は分配 回路、 208は第 1の画像調整回路、 209は第 2の画像調整回路、 210は音声調整回 路、 211は画像出力部、 212は¥1じ3情報受信部、 213は GPS情報受信部、 214は セレクタ、 215は操作部、 216はリモコン送受信部、 217はリモコン、 218はメモリ、 21 9は外部音声 Z映像入力部、 220はカメラ、 221は明るさ検知手段、 222は乗員検知 手段、 223はリア表示部、 224は ETC車載器、 225は通信ユニットである。

[0026] 表示部 7は、タツチパネル 124、液晶パネル 100及びバックライト 101から構成され る。表示部 7の液晶パネル 100は、これまでに述べてきたように、第 1視方向として運 転席側から見られる画像と、第 2視方向として助手席側カゝら見られる画像とを、実質 的に同時に表示することが可能となっている。尚、表示部 7には、液晶パネル以外の フラットパネルディスプレイ、例えば有機 ELディスプレイパネル、プラズマディスプレ ィパネル、冷陰極フラットパネルディスプレイ等を用いることもできる。

[0027] 制御部 200は、各種ソース（CDZMD再生部 201、ラジオ受信部 202、 TV受信部 203、 DVD再生部 204、 HD再生部 205及びナビゲーシヨン部 206)力 の画像や 音声を、分配回路 207により、画像であれば第 1の画像調整回路 208及び第 2の画 像調整回路 209に、音声であれば音声調整回路 210にそれぞれ分配させる。そして 、第 1及び第 2の画像調整回路 208、 209では、輝度や色調、コントラストなどが調整 され、調整された各画像を画像出力部 211にて、表示部 7に表示させる。また音声調 整回路 210では、各スピーカへの分配や音量、音声が調整され、調整された音声が 、スピーカ 16から出力される。

[0028] 図 7は、画像出力部 211の概略を示すブロック図である。図中、 226は第 1の書込 回路、 227は第 2の書込回路、 228は VRAM (Video RAM)である。

[0029] 画像出力部 211は、例えば図 7に示すように、第 1の書込回路 226と第 2の書込回 路 227と VRAM (Video RAM) 228と表示パネル駆動部 111とを備えている。例えば 、第 1の書込回路 226は、第 1の画像調整回路 208で調整された画像データのうち 奇数列に対応する画像データ (即ち、図 1の第 1の表示画像 8用の画像データ）を、 第 2の書込回路 227は、（第 2の画像調整回路 209で調整された画像データのうち偶 数列に対応する画像データ (即ち、図 1の第 2の表示画像 9用の画像データ）をもとに し、それぞれ VRAM228における該当する領域に書き込む。また表示パネル駆動部 111は液晶パネル 100を駆動する回路であり、 VRAM228に保持されて!ヽる画像デ ータ（第 1の画像データと第 2の画像データの合成データ）に基づいて、液晶表示パ ネル 100の対応する画素を駆動する。尚、 VRAM228には第 1の画像データと第 2 の画像データの合成されたマルチビュー表示用の画像に対応するように画像データ の書き込みが行なわれているので、駆動回路は一つでよぐその動作も通常の液晶 表示装置の駆動回路の動作と同じである。また別の構成として、第 1の画像データと 第 2の画像データを合成せずに、それぞれの画像データに基づいて、液晶表示パネ ルの対応する画素を駆動する第 1の表示パネル駆動回路及び第 2の表示パネル駆 動回路を用いることも考えられる。

[0030] ここで、図 6で示した各種ソースの一例について説明をすると、 HD再生部 205を選 択した場合、ハードディスク (HD)に記憶された MP3ファイル等の音楽データや JPE Gファイル等の画像データ、ナビゲーシヨン用の地図データ等か読み出され、音楽デ ータを選択するためのメニュー表示や画像データを表示部 7に表示させることができ る。

[0031] ナビゲーシヨン部 206は、ナビゲーシヨンの為に利用される地図情報を記憶した地 図情報記憶部を備え、 VICS情報受信部 212、 GPS情報受信部 213から情報を入 手し、ナビゲーシヨン動作の為の画像を作成し、表示させることができる。また TV受 信部 203は、アンテナ力もセレクタ 214を介して、アナログ TV放送波及びデジタル T V放送波を受信する。

[0032] 図 8は制御部 200の概略を示すブロック図である。図中、 229はインターフェース、 230は CPU、 231は記憶部、 232はデータ記憶部である。

[0033] 制御部 200は分配回路 207並びに各種ソースを制御し、選択された 2つのソースも しくは 1つのソースについて表示を行なわせる。また制御部 200は、これら各種ソース をコントロールするための操作メニュー表示を表示部 7に表示させることも行なってい る。ここで、図 8で示すように、制御部 200はマイクロプロセッサなどで構成され、イン ターフェース 229を介して、表示装置内の各部や各回路を統括的に制御している CP U230を備えている。この CPU230には、表示装置の動作に必要な各種プログラム を保持する ROM力もなるプログラム記憶部 231と、各種データを保持する RAMから なるデータ記憶部 232とが設けられている。なお、 ROMや RAM等は、 CPUに内蔵 されたものでも、外部に設けたものでも使用することが可能である。又、 ROMはフラッ シュメモリの様に電気的に書き換え可能な不揮発性メモリでもよい。

[0034] ユーザは、上記各種ソースのコントロールを、表示部 7の表面に取り付けられている タツチパネル 124や表示部 7の周囲に設けられたスィッチ、もしくは音声認識等の入 力操作や選択操作を操作部 215によって行なうことができる。またリモコン送受信部 2 16を介して、リモコン 217により入力もしくは選択操作をしてもよい。制御部 200は、 このタツチパネル 124や操作部 215の操作に従って、各種ソースを含めた制御を行 なっている。また、制御部 200は、図 2のように車両内に複数備え付けられたスピーカ 16の各音量等を、音声調整回路 210を用いて制御することができるように構成され ている。また制御部 200は、メモリ 218に画質設定情報やプログラム、車両情報等の 各種設定情報を記憶させることも行なって 、る。

[0035] 図 9は、メモリ 218の概略を示すブロック図である。図中、 233は第 1の画面 RAM、 234は第 2の画面 RAM、 235は画質設定情報記憶手段、 236は対環境調整値保持 手段である。

[0036] メモリ 218は、例えば図 9に示すように、使用者が設定した第 1の画像及び第 2の画 像の画質の調整値がそれぞれ書き込み可能な第 1の画面 RAM233および第 2の画 面 RAM234と、第 1の画像及び第 2の画像の各画質調整用に予め複数段階の調整 値が選択可能に記憶されている画質設定情報記憶手段 235や、周囲環境に対する 第 1の映像及び第 2の映像の画質の調整状態を保持する対環境調整値保持手段 23 6を有している。画質設定情報記憶手段 235及び対環境調整値保持手段 236は、フ ラッシュメモリなどの電気的書き換え可能不揮発性メモリ又はノ ッテリバックアップさ れた揮発性メモリにより構成される。

[0037] 外部音声 Z画像入力部 219に接続された、例えば後方監視用のカメラ 220からの 画像を表示部 7に表示するようにしてもよい。なお、後方監視用カメラ 220以外に、ビ デォカメラ及びゲーム機等を外部音声 Z画像入力部 219に接続してもよい。

[0038] 制御部 200は、明るさ検知手段 221 (例えば、車両のライトスィッチや光センサ)や 乗員検知手段 222 (例えば、座席に設けられる感圧センサ）により検知された情報を 元に、出力画像や音声の定位位置等の設定を変更させることが可能である。

[0039] 223は車両の後席用に設けられたリア表示部であり、画像出力部 211を介して、表 示部 7に表示される画像と同じもの、もしくは運転席用の画像カゝ助手席用の画像の一 方が表示可能である。

[0040] 制御部 200は、 ETC車載器 250からの料金表示等を表示させることを行っている。

また制御部 200は、携帯電話などと無線接続するための通信ユニット 225を制御し、 これに関する表示がされるようにしてもょ 、。

[0041] つづ 、て、表示装置における画像補間処理にっ 、て説明する。この画像補間処理 を表示装置内で実行するのは、図 1における概念図では表示制御部 5であり、図 6に おけるブロック図では第 1の画像調整回路および第 2の画像調整回路であるが、以 下では説明を簡明にするため、画像補間処理に関わる部分を特に抽出した画像補 間装置について説明を行なう。

[0042] 以下に添付図面を参照して、本発明に係る画像補間装置を車両に搭載した場合 の好適な実施例を詳細に説明する。なお、以下では、本発明に係る画像補間装置の 概要および特徴を説明した後、本実施例 1に係る画像補間装置を説明し、最後に、 他の実施例として種々の変形例（実施例 2)を説明することとする。

[0043] 概要および特徴

まず最初に、本発明に係る画像補間装置の概要および特徴を説明する。図 10は、 本実施例 1に係る画像補間装置の構成を示すブロック図である。同図に示すように、 この画像補間装置 310は、 AVユニット 320とナビゲーシヨンユニット 330に接続され た構成となる。

[0044] このうち、 AVユニット 320は、 DVDディスク（図示せず）に記憶された映像信号など を読み出して画像補間装置 310に出力する DVDプレイヤーである。具体的には、車 両の乗員の指示に基づいて DVD映像の表示要求をおこなうとともに、この DVD映 像の画像データを画像補間装置 310に出力する。なお、この AVユニット 320は、 DV Dプレイヤーに限らず、コンパクトディスク、ハードディスク、ラジオ、テレビなどの機能 を有するものであっても良い。

[0045] また、ナビゲーシヨンユニット 330は、予め設定された予定経路情報および自車両 の位置情報をもとに、経路誘導をおこなう装置である。具体的には、車両の乗員（例 えば、運転者）によって設定された自車両の予定経路情報および GPS受信機によつ て取得された人工衛星力 発信される位置情報に基づ 、て「ナビゲーシヨン」映像を 作成し、該作成された「ナビゲーシヨン」映像の画像データを画像補間装置 310に出 力する。

[0046] このように、 AVユニット 320およびナビゲーシヨンユニット 330が車両に搭載されて いる場合、画像補間装置 310における表示部 317では、 AVユニット 320によって出 力された DVD映像、並びにナビゲーシヨンユニット 330によって出力されたナビゲー シヨン映像が表示されることとなる。なお、本実施例 1では、表示部 317の解像度を 8 00 X 480、 DVD映像の画像データの解像度を 800 X 480、ナビゲーシヨン映像の 画像データの解像度を 800 X 480とする。

[0047] このとき、力力る表示部 317において、 AVユニット 320およびナビゲーシヨンュ-ッ ト 330双方力も表示要求を受け付けたならば、解像度が 800 X 480である表示部 31 7に 800 X 480の画像を 2つ表示する必要がある。

[0048] このため、それぞれの映像が重ならぬように 2画面表示形態や 2視野表示形態で表 示しようとすると、表示対象となる DVD映像およびナビゲーシヨン映像の画像データ それぞれに 1Z2水平解像度変換をおこなう必要がある。

[0049] このうち、 2画面表示形態は、図 11Aに示すように、運転席側および助手席側の乗 員が双方から 2つの画像を鑑賞できるように、表示部 317の画面を左右に分割して D VD映像 vlおよびナビゲーシヨン映像 v2を表示する形態であり、運転席側および助 手席側の乗員双方に両方の映像を鑑賞させたい場合などに好適な表示形態である

[0050] また、 2視野表示形態は、図 11Bに示すように、運転席側および助手席側の乗員が それぞれで異なる映像を鑑賞できるように、表示部 317に視差光学機器 (例えば、垂 直透過スリット)を設けて、表示部 317に相対して右方向の鑑賞者 (すなわち、運転席 側の乗員）には、ナビゲーシヨン映像 v2を鑑賞させ、表示部 317に相対して左方向 の鑑賞者 (すなわち、助手席側の乗員）には、 DVD映像 vlを鑑賞させる表示形態で あり、運転席側の乗員による運転時のわき見を防止する場合などに好適な表示形態 である。

[0051] なお、本実施例 1では、ナビゲーシヨン映像の画像データのみに画像補間処理を おこなうこととする。このように、画像補間処理の処理対象をナビゲーシヨン映像のみ に絞った理由は、ナビゲーシヨン映像の画像データに解像度変換がおこなわれること によって文字や記号などの画素欠けが生じ、この画素欠けが生じることによって映像 の内容が理解不可能になるという事態が起こりやすい趣旨からである。し力しながら、 他の実施の形態としては、 DVD映像 vlとナビゲーシヨン映像 v2の両方に対して画 像補間処理を行なってもよ 、ことは 、うまでもな!/、。

[0052] ここで、本発明に係る画像補間装置 310は、補間対象領域に位置する画素および 該画素の近傍画素に対する当該画素の特徴量を算出し、算出された補間対象領域 に位置する画素の特徴量をもとに、補間画素の画素値を決定する画像補間処理に 主たる特徴があり、力かる画像補間処理によって、画像データの解像度変換に伴う 画質劣化を抑制することができるようにして 、る。

[0053] この主たる特徴を具体的に説明すると、この画像補間装置 310は、ナビゲーシヨン 映像 v2の元画像データにおいて、図 12に示すように、補間対象領域に位置する画 素および該画素の近傍画素に対する当該画素の特徴量を算出する。なお、本実施 例 1では、 1Z2水平解像度変換をおこなうため、補間対象領域を奇数ドットおよび偶 数ドットのペアの 2ドットとし、補間画素の画素値を決定する際に参照する近傍画素の 範囲を補間対象領域の右側の 1ドットとしている。また、この特徴量の算出は、 RGB デジタル信号のそれぞれの成分についておこなわれることとなる。

[0054] 力かる特徴量とは、補間対象領域に位置する画素が他の補間対象領域に位置す る画素および近傍画素に比較してどの程度画素値が乖離している力を表す指標で あり、具体的には、補間対象領域に位置する画素の中の注目画素の画素値と、補間 対象領域に位置する各画素の画素値および近傍画素の画素値の平均値との差の 絶対値を求めることで算出される。例えば、特徴量が大きければ、近傍画素と比較し て変化が際立っている画素 (すなわち、画像を特徴付ける画素)であること示し、特徴 量が小さければ、近傍画素と変化が少ない画素であることを示す。

[0055] 図 12の例を用いて説明すると、画像補間装置 310は、まず、元の RGBデジタル信 号の「R」のデジタル信号につ!、て、補間対象領域 Aに位置する「ピクセル 1」の画素 値「P1」と、補間対象領域 Aに位置する「ピクセル 1」および「ピクセル 2」の画素値「P 1」、「P2」および近傍画素「ピクセル 3」の画素値「P3」の平均値との差の絶対値を求 めて「ピクセル 1」の特徴量 I PI— (P1 + P2 + P3) Z3 Iを算出し、同様に、「ピクセ ル 2」の特徴量 I P2— (P1 + P2 + P3) Z3 |を算出する。なお、このようにして、「G」 および「B」のデジタル信号における「ピクセル 1」および「ピクセル 2」の特徴量につ ヽ ても同様に算出する。

[0056] また、この画像補間装置 310は、補間対象領域 Bに位置する「ピクセル 3」および「ピ クセル 4」の特徴量、補間対象領域 Cに位置する「ピクセル 5」および「ピクセル 6」の特 徴量、並びに補間対象領域 Nに位置する「ピクセル m」および「ピクセル n」の特徴量 についても同様に算出する。

[0057] 続、て、画像補間装置 310は、オリジナル画像で画像を特徴付ける画素の画素値 を補間画素の画素値として優先的に採用するために、補間対象領域に位置する画 素の特徴量もとに、補間画素の画素値を決定する。具体的には、補間対象領域に位 置する画素のうち特徴量が閾値を超えた画素の画素値を補間画素の画素値として 決定する。

[0058] このように、オリジナル画像で画像を特徴付ける画素と倣なすのに妥当な閾値を超 えた画素の画素値を補間画素の画素値として決定することで、オリジナル画像で画 像を特徴付ける画素の画素値を補間画素の画素値として優先的に採用し、画像デ ータの解像度変換に伴う画質劣化を抑制することができるようにしている。さらに、こ れに関連して、オリジナル画像で画像を特徴付ける画素の画素値を平均または加重 平均などの加工をおこなわず採用することで、オリジナル画像 (すなわち、解像度変 換をおこなわれる前の元画像)のイメージを容易に維持できるようにして!/、る。

[0059] 例えば、補間対象領域 Aのように、「ピクセル 1」の特徴量 I PI— (P1 + P2 + P3) /3 Iが閾値「THRESH」以上である場合には、この「ピクセル 1」の画素値「P1」を 補間画素 (すなわち、補間対象領域 A)の画素値と決定する。なお、「ピクセル 1」およ び「ピクセル 2」のいずれの特徴量も閾値以上である場合には、特徴量がより大きい 画素の画素値を補間画素の画素値として採用することが好ましい。

[0060] また、補間対象領域 Cのように、「ピクセル 5」の特徴量および「ピクセル 6」の特徴量 がいずれも閾値「THRESH」に満たない場合には、補間対象領域 Cに位置する「ピ クセル 5」および「ピクセル 6」の画素値「P5」および「P6」それぞれを補間画素（すな わち、補間対象領域 C)の画素値と決定する。

[0061] したがって、上記の従来技術の例で言えば、画素データを補間する位置の周辺の 複数画素データを平均または加重平均した補間データを画一的に作成することで、 画像を特徴付ける画素が不明瞭に加工された補間データが作成するのではなぐォ リジナル画像で画像を特徴付ける画素と倣なすのに妥当な閾値を超えた画素の画 素値を補間画素の画素値として決定することで、オリジナル画像で画像を特徴付ける 画素の画素値を補間画素の画素値として優先的に採用し、上記の主たる特徴のよう に、画像データの解像度変換に伴う画質劣化を抑制することが可能になる。

[0062] さらに、これに関連して、オリジナル画像で画像を特徴付ける画素の画素値を平均 または加重平均などの加工をおこなわず採用することで、オリジナル画像 (すなわち 、解像度変換をおこなわれる前の元画像)のイメージを容易に維持することが可能に なる。

実施例 1

[0063] 次に、本実施例 1に係る画像補間装置にっ 、て説明する。なお、ここでは、本実施 例 1に係る画像補間装置の構成を説明した後に、この画像補間装置の各種処理の 手順について説明することとする。

[0064] 画像補間装置の構成

図 10は、本実施例 1に係る画像補間装置の構成を示すブロック図である。同図に 示すように、この画像補間装置 310は、画像データ入力部 311と、画像データ入力 制御部 312と、特徴量算出部 313と、画像補間処理部 314と、解像度変換処理部 31 5と、表示制御処理部 316と、表示部 317とを備える。

[0065] このうち、画像データ入力部 311は、画像データ入力制御部 312の画像データ入 力指示に基づいて AVユニット 320および/またはナビゲーシヨンユニット 330によつ て出力された画像データを特徴量算出部 313に入力する処理部である。なお、本実 施例 1では、 AVユニット 320から DVD映像（画像の解像度は、 800 X 480とする。 ) が入力され、ナビゲーシヨンユニット 330からナビゲーシヨン映像（同様に、画像の解 像度は、 800 X 480とする。）が入力される実施例を掲げる。

[0066] 画像データ入力制御部 312は、 AVユニット 320および Zまたはナビゲーシヨンュ ニット 330からの表示要求に応じて画像データ入力部 311から特徴量算出部 313に 入力される画像データの入力系統数を制御する処理部である。

[0067] 例えば、 AVユニット 320から DVD映像の表示要求を受け付けた場合には、画像 データ入力部 311に DVD映像 vlの画像データを入力するように指示し、ナビゲー シヨンユニット 330からナビゲーシヨン映像の表示要求を受け付けた場合には、画像 データ入力部 311にナビゲーシヨン映像 v2の画像データを入力するように指示する 。また、 AVユニット 320およびナビゲーシヨンユニット 330から DVD映像の表示要求 およびナビゲーシヨン映像の表示要求を受け付けた場合には、画像データ入力部 3 11から DVD映像 vlおよびナビゲーシヨン映像 v2の画像データを入力するように指 示する。

[0068] 特徴量算出部 313は、画像データ入力部 311から入力された画像データをもとに、 補間対象領域に位置する画素および該画素の近傍画素に対する当該画素の特徴 量を算出する処理部である。具体的には、図 12に示すように、まず、元の RGBデジ タル信号の「R」のデジタル信号にっ 、て、補間対象領域 Aに位置する「ピクセル 1」 の画素値「P1」と、補間対象領域 Aに位置する「ピクセル 1」および「ピクセル 2」の画 素値「P1」、「P2」および近傍画素「ピクセル 3」の画素値「P3」の平均値との差の絶 対値を求めて「ピクセル 1」の特徴量 I PI— (P1 + P2 + P3) Z3 Iを算出し、同様に 、「ピクセル 2」の特徴量 I P2— (P1 + P2 + P3) Z3 |を算出する。なお、このように して、「G」および「B」のデジタル信号における「ピクセル 1」および「ピクセル 2」の特徴 量についても同様に算出する。

[0069] また、特徴量算出部 313は、補間対象領域 Bに位置する「ピクセル 3」および「ピクセ ル 4」の特徴量、補間対象領域 Cに位置する「ピクセル 5」および「ピクセル 6」の特徴 量、並びに補間対象領域 Nに位置する「ピクセル m」および「ピクセル n」の特徴量に ついても同様に算出する。なお、上述した趣旨から、ここでは特徴量算出部 313およ び画像補間処理部 314は、ナビゲーシヨン映像の画像データのみを処理対象とする 力 DVD映像 vlとナビゲーシヨン映像 v2の両方に対して画像補間処理を行なって ちょい。

[0070] 画像補間処理部 314は、補間対象領域に位置する画素の特徴量もとに、補間画素 の画素値を決定する。具体的には、補間対象領域に位置する画素のうち、特徴量算 出部 313によって算出された特徴量が最も大きい画素を抽出し、該抽出された画素 の特徴量が閾値以上であれば、当該画素の画素値を補間画素の画素値として決定 する。

[0071] 図 13に示す補間対象領域 Aの例で言えば、まず、画像補間処理部 314は、「ピク セル 1」の特徴量 I P1—(P1 +P2 + P3)Z3 Iと、「ピクセル 2」の特徴量 | P2—(P 1 + Ρ2 + Ρ3) /3 Iとの大小関係を比較し、このうち、特徴量が最も大きい画素（例 えば、「ピクセル 1」）を抽出する。そして、抽出された「ピクセル 1」の特徴量が閾値「τ HRESH」以上である場合には、この「ピクセル 1」の画素値「P1」を補間画素（すなわ ち、補間対象領域 A)の画素値と決定する。

[0072] また、補間対象領域 Bのように、抽出された「ピクセル 4」の特徴量が閾値「THRES Hjに満たない場合には、補間対象領域 Bに位置する「ピクセル 3」および「ピクセル 4 」の画素値「P3」および「P4」それぞれを補間画素 (すなわち、補間対象領域 B)の画 素値と決定する。

[0073] このように、補間対象領域に位置する画素のうち特徴量が最も大きい画素を抽出す ることで、オリジナル画像で画像を特徴付けて!/ヽる蓋然性が高 ヽ画素を補間対象領 域の中から抽出することができ、オリジナル画像で画像を特徴付ける画素の画素値 を補間画素の画素値としてより優先的に採用することが可能になる。

[0074] 解像度変換処理部 315は、画像補間処理部 314によって補間画素が補間された 複数の画像データに対して解像度変換をおこなう処理部である。例えば、画像補間 処理部 314から入力された DVD映像 vlの画像データおよびナビゲーシヨン映像 v2 の画像データを 2視野表示形態で表示部 317に表示する場合には、 RGBデジタル 信号は、図 14に示すようなドット配置になる。

[0075] このため、解像度変換処理部 315は、 DVD映像 vlの画像データにおける奇数ドッ トの「G」を間引くとともに、偶数ドットの「R」および「B」を間引く 1Z2水平解像度変換 をおこなう。

[0076] これに対応して、解像度変換処理部 315は、ナビゲーシヨン映像 v2の画像データ における奇数ドットの「R」および「B」を間引くとともに、偶数ドットの「G」を間引く 1Z2 水平解像度変換をおこなう。

[0077] このように、画像補間処理によって補間画素が補間された複数の画像データに対し て解像度変換をおこなうことで、画像データの画質劣化を抑制しつつ、解像度変換 をおこなうことが可能になる。

[0078] 表示制御処理部 316は、解像度変換処理部 315によって解像度変換がおこなわ れた画像データを所定の表示形態 (本実施例 1では、 2視野表示形態）に並べ替え て表示するように制御する処理部である。具体的には、解像度変換処理部 315によ つて解像度変換がおこなわれた DVD映像 vlおよびナビゲーシヨン映像 v2の RGB デジタル信号を図 14に示すドット配列に並び替える並び替え処理 (すなわち、 DVD 映像のデジタル信号「R」、「B」、「G」を 1つおきに、ナビゲーシヨン映像のデジタル信 号「G」、「R」、「B」を 1つおきに並び替える処理）をおこなって表示する。

[0079] 図 14に示す例では、表示部 317に相対して右方向の鑑賞者を対象にした 1ドット ついて、 G不灯、 R点灯、 B点灯となるため、表示部 317に相対して右方向の鑑賞者（ 運転席側の乗員）に「R」 +「B」の補色であるマジヱンダ色が表示されることとなる。

[0080] これらの処理によって生成された映像画素データは、単に元画素を偶数配列の画 素または奇数配列の画素の何れかの画素群を 1フレームに亘つて抽出する図 15A に示すようなものに比べて、図 15Bに示すように、画素間の変化が高い（大きい)こと を示す高域成分が残されるので大きく画質が劣化するようなことが無ぐある程度の 良好な視認性を確保することができる。

[0081] このように、解像度変換がおこなわれた画像データが少なくとも 1つ含まれた複数の 画像データを所定の表示形態に並べ替えて表示するように制御することで、新たな 構成を設けることなぐ 1つの表示部に複数の画像データを多様な表示形態で表示 することが可能になる。

[0082] 各種処理の手順

次に、本実施例 1に係る画像補間装置の各種処理の手順を説明する。図 16は、画 像補間処理の手順を示すフローチャートである。この画像補間処理は、 AVユニット 3 20およびナビゲーシヨン装置 330から DVD映像の表示要求およびナビゲーシヨン 映像の表示要求を受け付けた際に、力かる複数の表示要求に係る表示形態の設定 力 S排他表示設定ではなく 2画面表示や 2視野表示などの共存表示形態であるならば 、開始されることとなる。

[0083] 同図に示すように、 AVユニット 320およびナビゲーシヨン装置 330から DVD映像 の表示要求およびナビゲーシヨン映像の表示要求を受け付けた場合 (ステップ S601 肯定）に、画像データ入力部 311は、 DVD映像 vlおよびナビゲーシヨン映像 v2の 入力系統ごとに、これらの画像データを特徴量算出部 313に入力する (ステップ S60 2)。

[0084] そして、特徴量算出部 313は、画像データ入力部 311から入力された画像データ をもとに、補間対象領域に位置する画素の特徴量を順次算出する (ステップ S603)。 続いて、画像補間処理部 314は、補間対象領域に位置する画素のうち、特徴量算出 部 313によって算出された特徴量が最も大きい画素を抽出する (ステップ S604)。

[0085] ここで、抽出された画素の特徴量が閾値以上である場合 (ステップ S605肯定）には 、画像補間処理部 314は、当該画素の画素値を補間画素の画素値として決定し (ス テツプ S606)、一方、抽出された画素の特徴量が閾値未満である場合 (ステップ S60 5否定）には、補間対象領域に位置する各画素の画素値それぞれを補間画素の画 素値と決定する (ステップ S607)。

[0086] そして、全ての補間対象領域にっ 、て補間画素の画素値が決定された場合 (ステ ップ S608肯定）には、画像補間処理部 314は、各補間画素の画素値が反映された 画像データを生成する (ステップ S609)。なお、全ての補間対象領域について補間 画素の画素値が決定されていない場合 (ステップ S608否定）には、全ての補間対象 領域につ 、て補間画素の画素値が決定されるまで、上記のステップ S603〜S607 の処理を再帰的におこなう。 [0087] 続いて、解像度変換処理部 315は、画像補間処理部 314によって補間画素が補 間されたナビゲーシヨン映像の画像データと、 DVD映像の画像データとにそれぞれ 1Z2水平解像度変換処理を実行する (ステップ S610)。

[0088] そして、表示制御処理部 316は、解像度変換処理部 315によって 1Z2水平解像 度変換処理がおこなわれたナビゲーシヨン映像の画像データおよび DVD映像の画 像データを所定の表示形態に並び替えて表示する (ステップ S611)。

[0089] 最後に、ナビゲーシヨン映像または DVD映像の 、ずれか、或いはナビゲーシヨン 映像および DVD映像の双方が終了した場合 (ステップ S612肯定）には、処理を終 了し、ナビゲーシヨン映像および DVD映像の双方が終了して ヽな 、場合 (ステップ S 612否定）には、上記のステップ S602〜S611までの処理を繰り返す。

[0090] 上述してきたように、本実施例 1に係る画像補間装置 310によれば、補間対象領域 に位置する画素のうち特徴量が最も大きい画素を抽出し、該抽出された画素の特徴 量が閾値以上であれば、当該画素の画素値を補間画素の画素値として決定すること としたので、オリジナル画像で画像を特徴付けて!/、る蓋然性が高 、画素を補間対象 領域の中から抽出し、該抽出した画素の画素値を補間画素の画素値としてより優先 的に採用することができ、画像データの解像度変換に伴う画質劣化をより実効的に 抑制することが可能になる。

実施例 2

[0091] さて、これまで本発明の実施例について説明したが、本発明は上述した実施例 1以 外にも、上記特許請求の範囲に記載した技術的思想の範囲内において種々の異な る実施例にて実施されてもよいものである。

[0092] 例えば、実施例 1では、複数の表示要求 (すなわち、 DVD映像およびナビゲーショ ン映像の表示要求)を受け付けた場合に、本発明に係る画像補間処理をおこなう実 施例について説明したが、本発明はこれに限定されるものではなぐ表示要求が単 数であっても複数であっても同様に本発明を適用することができる。特に、本発明は 、表示要求が単数であっても、解像度変換のニーズ (例えば、携帯電話など比較的 小さい表示部にあわせた解像度変換が求められる場合）がある画像データに対して 本発明に係る画像補間処理を適用することで一層高 、効果を得られる。 [0093] また、実施例 1では、補間対象領域に位置する画素のうち、特徴量算出部 313によ つて算出された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾 値未満であれば、補間対象領域に位置する各画素の画素値それぞれを補間画素の 画素値と決定する実施例について説明したが、本発明はこれに限定されるものでは なぐ抽出された画素の特徴量が閾値未満であれば、補間対象領域に位置する画 素の画素値を平均化した画素値を補間画素の画素値として決定するようにしても良 い。

[0094] 図 17の例で言えば、補間対象領域 Bのように、抽出された「ピクセル 4」の特徴量が 閾値「THRESH」に満たない場合には、補間対象領域 Bに位置する「ピクセル 3」お よび「ピクセル 4」を平均した画素値「（P3 + P4) /2\それぞれを補間画素（すなわち 、補間対象領域 B)の画素値と決定する。

[0095] このように、補間対象領域に位置する画素のうち、特徴量算出部 313によって算出 された特徴量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値未満で あれば、補間対象領域に位置する画素の画素値を平均化した画素値を補間画素の 画素値として決定することで、隣接画素の輝度レベルが乖離して 、な 、場合に大局 的な画像補間処理をおこなうことができ、画像データの解像度変換に伴う画質劣化 を効果的に抑制することが可能になる。

[0096] また、本発明では、補間対象領域に位置する画素間の画素値の差を算出し、補間 対象領域に位置する画素間の画素値の差の絶対値が閾値以上であれば、該補間 対象領域に位置する画素の画素値を平均化した画素値を補間画素の画素値として 決定するようにしても良い。

[0097] 例えば、図 18の例で言えば、補間対象領域 Aに位置する画素「ピクセル 1」および「 ピクセル 2」間の画素値の差 (すなわち、「P1— P2」）を算出し、補間対象領域に位置 する画素間の画素値の差の絶対値 (すなわち、 I P1— P2 I )が閾値「THRESH」 以上であれば、該補間対象領域 Aに位置する画素「ピクセル 1」および「ピクセル 2」 の画素値を平均した画素値「（PI + P2) /2\を補間画素の画素値として決定する。 また、補間対象領域 B、補間対象領域 C， · '補間対象領域 Nについても同様にして 画像補間処理がおこなわれる。 [0098] このように、補間対象領域に位置する画素間の画素値の差を算出し、補間対象領 域に位置する画素間の画素値の差の絶対値が閾値以上であれば、該補間対象領 域に位置する画素の画素値を平均化した画素値を補間画素の画素値として決定す ることで、局部的に生じる輝度レベルの大差を平滑ィ匕することができ、画像データの 解像度変換に伴う画質劣化を効果的に抑制することが可能になる。

[0099] なお、実施例 1では、画像補間装置 310に入力される映像信号がコンポジット信号

(RGB形式)である例について説明した力 本発明はこれに限定されるものではなく 、YC形式など他の形式の映像信号が入力された場合であっても本発明を同様に適 用することができる。

[0100] また、本実施例において説明した各処理のうち、自動的におこなわれるものとして 説明した処理の全部または一部を手動的におこなうこともでき、あるいは、手動的に おこなわれるものとして説明した処理の全部または一部を公知の方法で自動的にお こなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具 体的名称、各種のデータやパラメータ (例えば、解像度や解像度変換率など)を含む 情報については、特記する場合を除いて任意に変更することができる。

[0101] また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に 図示の如く構成されていることを要しない。すなわち、各装置の分散'統合の具体的 形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況など に応じて、任意の単位で機能的または物理的に分散 '統合して構成することができる

。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、 CP Uおよび当該 CPUにて解析実行されるプログラムにて実現され、あるいは、ワイヤー ドロジックによるハードウェアとして実現され得る。

[0102] また、本実施例では単一ディスプレイ上に 2つの画面を表示する 2画面表示形態と 、 2つの方向に異なる 2つの映像を出力する 2視野表示形態とを例に説明を行なった 力 3以上の複数の画面を表示す多画面表示形態や、 3以上の複数の方向に異なる 映像を出力する多方向表示形態として実施することもできる。

[0103] また、本実施例では車載用の装置を例に説明を行なったが、本発明の利用はこれ に限定されるものではなぐ例えば家用など車載用途以外の表示装置にも適用する ことが可能である。

産業上の利用可能性

以上のように、本発明にかかる画像補間装置および表示装置は、画像の補間に有 用であり、特に元の画像の特徴を維持した解像度変換に適して ヽる。

Claims

請求の範囲

[1] 補間対象領域に位置する画素および該画素の近傍画素の画素値をもとに、補間 対象領域に補間する補間画素の画素値を決定する画像補間処理をおこなう画像補 間装置であって、

前記補間対象領域に位置する画素および該画素の近傍画素に基づき当該画素の 特徴量を算出する特徴量算出手段と、

前記特徴量をもとに、前記補間画素の画素値を決定する画像補間処理をおこなう 画素補間処理手段と、

を備えたことを特徴とする画像補間装置。

[2] 前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴 量が閾値以上である画素の画素値を前記補間画素の画素値として決定することを特 徴とする請求項 1に記載の画像補間装置。

[3] 前記特徴量算出手段は、前記補間対象領域に位置する画素間の画素値の差を算 出し、

前記画像補間処理手段は、前記画素値の差の絶対値が閾値以上であれば、該補 間対象領域に位置する画素の画素値を平均化した画素値を前記補間画素の画素 値として決定することを特徴とする請求項 1に記載の画像補間装置。

[4] 前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴 量算出手段によって算出された特徴量が最も大きい画素を抽出し、該抽出された画 素の特徴量が閾値以上であれば、当該画素の画素値を前記補間画素の画素値とし て決定することを特徴とする請求項 1に記載の画像補間装置。

[5] 前記画像補間処理手段は、前記補間対象領域に位置する画素のうち、前記特徴 量が最も大きい画素を抽出し、該抽出された画素の特徴量が閾値未満であれば、前 記補間対象領域に位置する画素の画素値を平均化した画素値を前記補間画素の 画素値として決定することを特徴とする請求項 4に記載の画像補間装置。

[6] 前記画像補間処理手段によって補間画素が補間された画像データに対して解像 度変換処理をおこなう解像度変換処理手段をさらに備えたことを特徴とする請求項 1 に記載の画像補間装置。

[7] 前記解像度変換処理手段によって解像度変換処理がおこなわれた画像データが 少なくとも 1つ含まれた複数の画像データを所定の表示形態に並べ替えて表示する ように制御する表示制御手段をさらに備えたことを特徴とする請求項 6に記載の画像 補間装置。

[8] 複数の視方向に対し個別の画像を単一画面上に表示する表示手段と、

前記画像の補間対象領域に位置する画素および該画素の近傍画素に基づき当該 画素の特徴量を算出する特徴量算出手段と、

前記特徴量をもとに、補間画素の画素値を決定する画素補間処理手段と、 前記画素補間処理手段によって決定された補間画素の画素値によって補間画像 を生成し、前記表示手段に該補間画像を表示させる表示制御手段とを備えることを 特徴とする表示装置。