JP2000067227A - 画像表示装置、方法および記憶媒体 - Google Patents

画像表示装置、方法および記憶媒体

Info

Publication number
JP2000067227A
JP2000067227A JP10253331A JP25333198A JP2000067227A JP 2000067227 A JP2000067227 A JP 2000067227A JP 10253331 A JP10253331 A JP 10253331A JP 25333198 A JP25333198 A JP 25333198A JP 2000067227 A JP2000067227 A JP 2000067227A
Authority
JP
Japan
Prior art keywords
image
plane map
view
area
area frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP10253331A
Other languages
English (en)
Inventor
Tatsushi Katayama
達嗣 片山
Kotaro Yano
光太郎 矢野
Kenji Hatori
健司 羽鳥
Hideo Takiguchi
英夫 滝口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP10253331A priority Critical patent/JP2000067227A/ja
Publication of JP2000067227A publication Critical patent/JP2000067227A/ja
Pending legal-status Critical Current

Links

Abstract

(57)【要約】 【課題】 ユーザがシーンの中での表示ビュー領域を認
識しながら視点の移動操作を行うことができるパノラマ
画像表示装置を提供する。 【解決手段】 パノラマ画像表示装置では、球面マップ
画像201を画像記憶部101から読み込む。平面マッ
プ画像を生成するための視点位置を設定する。設定され
た視点位置に応じて球面マップ画像201を平面マップ
画像202に変換する。球面マップ画像201および平
面マップ画像202をモニタなどに表示する。この後、
ユーザが平面マップ領域枠203を移動させたか否かを
検知し、移動を検知した場合、移動後の位置に応じて視
点位置の設定を行い、同様に平面マップ画像に変換して
表示する。ユーザは撮影したシーンの全体を把握しなが
ら、視点移動操作を行い、所望の視点位置における画像
を平面写像により観察することができる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、パノラマ画像の全
視野およびその少なくとも一部を表示する画像表示装
置、方法および記憶媒体に関する。
【0002】
【従来の技術】従来、パノラマ画像を表示する画像表示
装置として、撮影したシーンの画像から円筒環境にマッ
ピングした画像を生成し、表示の際に視点の位置および
方向に応じて円筒環境マップを所望のビューウインドウ
に平面マッピングに変換しながら表示するものが知られ
ている。これにより、ユーザは撮影した風景を任意の視
点から観察することができるといったVR(Virtual Re
ality)的な効果を与えることができる。
【0003】
【発明が解決しようとする課題】しかしながら、従来の
パノラマ画像表示方式では、ユーザは平面マッピングさ
れたビューウインドウの画像だけを観察しながら、視点
の変更を行うために、自分がシーンの中のどの領域を観
察しているのか認識することが不可能であった。
【0004】また、表示ビューの視野の範囲を所望の値
に設定することができないなど、操作上の問題があっ
た。
【0005】そこで、本発明は、シーンの広視野領域を
表す画像と平面マッピングされた表示ビューを同時に表
示し、かつ両者が連動して表示されることにより、ユー
ザがシーンの中での表示ビュー領域を認識しながら視点
の移動操作を行うことができる画像表示装置、方法およ
び記憶媒体を提供することを目的とする。
【0006】また、本発明は、シーンの広視野領域を表
す画像上で平面マッピングされる表示ビューの視野の範
囲を設定することができる画像表示装置、方法および記
憶媒体を提供することを他の目的とする。
【0007】さらに、本発明は、プログラム化した記憶
媒体を保持することにより、携帯性に優れ、かつ低コス
トなパノラマ画像表示環境を実現する画像表示装置、方
法および記憶媒体を提供することを他の目的とする。
【0008】また、本発明は、複数の画像を合成処理し
てシーンの広視野領域画像を生成することができる画像
表示装置、方法および記憶媒体を提供することを他の目
的とする。
【0009】さらに、本発明は、表示ビューに画像を平
面マッピングする際、撮影したオリジナル画像を直接変
換して表示ビューの画像を生成することにより、視点位
置によらず常に高画質の画像を表示する画像表示装置、
方法および記憶媒体を提供することを他の目的とする。
【0010】
【課題を解決するための手段】上記目的を達成するため
に、本発明の請求項1に記載の画像表示装置は、視野領
域を表す視野領域画像を保持する保持手段と、該保持さ
れた視野領域画像の一部に相当する部分画像を生成する
生成手段と、前記視野領域画像および前記部分画像を表
示する画像表示手段と、前記視野領域画像上に前記部分
画像に対応する領域枠を表示する領域枠表示手段と、前
記領域枠を移動する移動手段と、前記領域枠の移動に連
動して前記部分画像を更新する更新手段とを備える。
【0011】請求項2に記載の画像表示装置では、請求
項1に係る画像表示装置において、前記保持手段は、撮
影した視野領域を表す視野領域画像を保持し、前記生成
手段は、前記視野領域画像の一部を、仮想的な任意の撮
像面上に変換した平面マップ画像を生成し、前記画像表
示手段は、前記視野領域画像および前記平面マップ画像
を表示し、前記領域枠表示手段は、前記視野領域画像上
に前記平面マップ画像に対応する平面マップ領域枠を表
示し、前記移動手段は、前記平面マップ領域枠を移動
し、前記更新手段は、前記平面マップ領域枠の移動に連
動して前記平面マップ画像を更新することを特徴とす
る。
【0012】請求項3に記載の画像表示装置は、請求項
2に係る画像表示装置において、前記平面マップ領域枠
の大きさを変更する大きさ変更手段と、前記平面マップ
領域枠の大きさに応じて前記平面マップ画像の表示画角
を変更する画角変更手段とを備えたことを特徴とする。
【0013】請求項4に記載の画像表示装置では、請求
項1に係る画像表示装置において、前記視野領域画像は
複数の画像を合成して生成されることを特徴とする。
【0014】請求項5に記載の画像表示装置は、請求項
1に係る画像表示装置において、撮影したオリジナル画
像を保持するオリジナル画像保持手段と、該保持された
オリジナル画像間の合成パラメータを保持する合成パラ
メータ保持手段とを備え、前記生成手段は、前記保持さ
れた合成パラメータを基に、前記オリジナル画像を仮想
的な任意の撮像面上に変換した平面マップ画像を生成
し、前記画像表示手段は、前記視野領域画像および前記
平面マップ画像を表示し、前記領域枠表示手段は、前記
視野領域画像上に前記平面マップ画像に対応する平面マ
ップ領域枠を表示し、前記移動手段は、前記平面マップ
領域枠を移動し、前記変換手段は、前記平面マップ領域
枠の移動に連動して前記合成パラメータを変換し、前記
更新手段は、該変換した合成パラメータに応じて前記平
面マップ画像を更新することを特徴とする。
【0015】請求項6に記載の画像表示方法は、視野領
域を表す視野領域画像を保持し、該保持された視野領域
画像の一部に相当する部分画像を生成し、前記視野領域
画像および前記部分画像を表示し、前記視野領域画像上
に前記部分画像に対応する領域枠を表示し、前記領域枠
を移動し、該領域枠の移動に連動して前記部分画像を更
新することを特徴とする。
【0016】請求項7に記載の画像表示方法は、請求項
6に係る画像表示方法において、撮影した視野領域を表
す視野領域画像を保持し、前記視野領域画像の一部を、
仮想的な任意の撮像面上に変換した平面マップ画像を生
成し、前記視野領域画像および前記平面マップ画像を表
示し、前記視野領域画像上に前記平面マップ画像に対応
する平面マップ領域枠を表示し、前記平面マップ領域枠
を移動し、前記平面マップ領域枠の移動に連動して前記
平面マップ画像を更新することを特徴とする。
【0017】請求項8に記載の画像表示方法は、請求項
6に係る画像表示方法において、撮影したオリジナル画
像を保持し、該保持されたオリジナル画像間の合成パラ
メータを保持し、該保持された合成パラメータを基に、
前記オリジナル画像を仮想的な任意の撮像面上に変換し
た平面マップ画像を生成し、前記視野領域画像および前
記平面マップ画像を表示し、前記視野領域画像上に前記
平面マップ画像に対応する平面マップ領域枠を表示し、
前記平面マップ領域枠を移動し、該平面マップ領域枠の
移動に連動して前記合成パラメータを変換し、該変換し
た合成パラメータに応じて前記平面マップ画像を更新す
ることを特徴とする。
【0018】請求項9に記載の記憶媒体は、画像表示装
置内のCPUによって実行されるプログラムが格納され
た記憶媒体において、前記プログラムは、視野領域を表
す視野領域画像を保持する手順と、該保持された視野領
域画像の一部に相当する部分画像を生成する手順と、前
記視野領域画像および前記部分画像を表示する手順と、
前記視野領域画像上に前記部分画像に対応する領域枠を
表示する手順と、前記領域枠を移動する手順と、前記領
域枠の移動に連動して前記部分画像を更新する手順とを
含むことを特徴とする。
【0019】請求項10に記載の記憶媒体では、請求項
9に係る記憶媒体において、前記プログラムは、撮影し
た視野領域を表す視野領域画像を保持する手順と、前記
視野領域画像の一部を、仮想的な任意の撮像面上に変換
した平面マップ画像を生成する手順と、前記視野領域画
像および前記平面マップ画像を表示する手順と、前記視
野領域画像上に前記平面マップ画像に対応する平面マッ
プ領域枠を表示する手順と、前記平面マップ領域枠を移
動する手順と、該平面マップ領域枠の移動に連動して前
記平面マップ画像を更新する手順とを含むことを特徴と
する。
【0020】請求項11に記載の記憶媒体では、請求項
9に係る記憶媒体において、前記プログラムは、撮影し
たオリジナル画像を保持する手順と、該保持されたオリ
ジナル画像間の合成パラメータを保持する手順と、前記
保持された合成パラメータを基に、前記オリジナル画像
を仮想的な任意の撮像面上に変換した平面マップ画像を
生成する手順と、前記視野領域画像および前記平面マッ
プ画像を表示する手順と、前記視野領域画像上に前記平
面マップ画像に対応する平面マップ領域枠を表示する手
順と、前記平面マップ領域枠を移動する手順と、前記平
面マップ領域枠の移動に連動して前記合成パラメータを
変換する手順と、該変換した合成パラメータに応じて前
記平面マップ画像を更新する手順とを含むことを特徴と
する。
【0021】
【発明の実施の形態】本発明の画像表示装置、方法およ
び記憶媒体の実施の形態について説明する。本実施形態
の画像表示装置はパノラマ画像表示装置に適用される。
【0022】[第1の実施形態]図1は第1の実施の形
態におけるパノラマ画像表示装置の概略的構成を示すブ
ロック図である。図において、101は画像記憶部であ
り、メモリあるいはハードディスクなどを用いることが
できる。102は画像処理部であり、制御部104から
得られるユーザの操作情報に基づいて画像を変換処理す
る。
【0023】103は表示部であり、シーンを表す画像
を表示するとともにユーザインターフェースを表示す
る。104は制御部であり、全系の制御を行う。105
は操作部であり、ユーザの操作情報を入力する。
【0024】図2は画像処理部102および制御部10
4の具体的構成を示すブロック図である。画像処理部1
02および制御部104は、システムバス56を介して
接続された周知のCPU51、ROM52、RAM53
の他、表示部103に接続されたVRAM54、操作部
105および画像記憶部101に接続されたI/Oイン
ターフェース55などから構成される。CPU51はR
OM52に格納された後述する処理プログラムを実行す
ることにより、各種処理を行う。尚、後述する第2およ
び第3の実施形態においても、画像処理部および制御部
の具体的構成は同様である。
【0025】図3は平面マップ画像生成処理手順を示す
フローチャートである。この処理プログラムは前述した
ROM52に格納されており、CPU51によって実行
される。
【0026】本実施形態では、予めシーンを撮影したn
枚のオリジナル画像を基にシーンの広視野領域を表す画
像を合成処理して生成し、画像記憶部101に保持して
おく。
【0027】また、広視野領域を表す画像として、撮影
した各画像を、図4(A)に示す円筒の表面に貼り付け
たように合成する円筒マッピングが提案されている(U
SP5396583(E.Chen))。さらに、同図
(B)に示すように球面にマッピングすることも可能で
あるし、同図(C)に示すサッカーボールのように多角
形の張り合わせにより広視野領域を表現することも可能
である。図4は円筒マップ、球面マップおよび多角形マ
ップを示す図である。
【0028】このように、広視野領域を表す画像とし
て、図4の各マッピング画像を平面状に展開したものを
表す。本実施形態では、広視野領域を表す画像として、
球面マップ画像を用いているが、他のマップ画像を用い
てもよい。
【0029】図5は球面マップ画像および平面マップ画
像を示す図である。まず、球面マップ画像201を画像
記憶部101から読み込む(ステップS401)。ここ
で、画像記憶部101は画像データと共に付加情報とし
て画像の画角、1画素当たりの角度ピッチなどを表す情
報を保持している。
【0030】球面マップ画像201は水平方向および垂
直方向を等角度でサンプリングして得られる画像データ
である。また、各方向のレンジについて、水平方向の緯
度θは最大で−π〜π、垂直方向の経度φは−π/2〜
π/2の範囲である。付加情報として保持している画角
情報等を画像データと共に読み込み、平面マップ画像の
生成などに利用する。
【0031】平面マップ画像を生成するための視点位置
を設定する(ステップS402)。これは、初期設定と
して(θ,φ)=(0,0)とし、ユーザ操作により図
4に示す平面マップ領域枠203が移動した場合、それ
により視点位置P(θ0,φ0)を更新する(ステップ
S402)。
【0032】ステップS402で設定された視点位置に
応じて球面マップ画像201を平面マップ画像202に
変換する(ステップS403)。球面マップ画像201
および平面マップ画像202をモニタなどに表示する
(ステップS404)。
【0033】この後、ユーザが平面マップ領域枠203
を移動させたか否かを検知し(ステップS405)、平
面マップ領域枠203の移動を検知した場合、ステップ
S402に戻って移動後の位置に応じて視点位置の設定
を行い、同様のステップS403、S404の処理を繰
り返して平面マップ画像に変換して表示する。一方、平
面マップ領域枠203の移動を検知しなかった場合、ス
テップS404の処理に移行してそのまま画面表示を行
う。
【0034】平面マップ領域枠203を移動させる方法
としては、図5に示すように、マウス操作により平面マ
ップ領域枠を移動させる方式などを用いることができ
る。また、矢印キーの操作、あるいは視点位置の値を直
接入力することにより平面マップ領域枠を移動すること
も可能である。
【0035】ここで、ステップS403における平面写
像変換の概略について示す。図6は球面座標空間301
および球面上にマッピングされた撮影画像302を示す
図である。図5に示す球面マップ画像201は、撮影し
たシーンの各画像を、図6の球面座標空間301にマッ
ピングし、球面上にマッピングした画像を緯度θおよび
経度φの方向に等角度ピッチでサンプリングして生成し
たものである。
【0036】そして、図5の平面マップ画像202を生
成するために、平面マップ画像202の各座標(x’,
y’)に対応する球面マップ画像201上の座標(θ,
φ)を計算する。ここで、平面マップ領域枠203の中
心座標をP(θ0,φ0)とする。
【0037】平面マップ画像202を生成する際の焦点
距離をfとすると、平面マップ画像202上の各座標
(x’,y’)に対応する(θ,φ)は、関数Fとして
数式(1)で表すことができる。
【0038】 (θ,φ)=F(x’,y’,f,θ0,φ0) …… (1) 画像処理部102は、前述した方式により平面マップ領
域枠203の位置に応じて視点位置(θ0,φ0)を設
定し、数式(1)に従って平面マップ画像202の各点
(x’,y’)に対応する球面マップ画像201上の対
応点(θ,φ)を求めて平面写像変換処理を行う。変換
された画像は画像記憶部101に保持され、変換生成後
に表示部103に表示される。
【0039】このような方式により、ユーザは撮影した
シーンの全体を把握しながら、視点移動操作を行い、所
望の視点位置における画像を平面写像により観察するこ
とができる。
【0040】[第2の実施形態]図7は第2の実施形態
におけるパノラマ画像表示装置の概略的構成を示す図で
ある。第2の実施形態のパノラマ画像表示装置は、前記
第1の実施形態と同様の構成を有し、操作部106、制
御部107および画像処理部108において特徴を有す
る。第2の実施形態では、前記第1の実施形態と同一の
構成要素については同一の符号を付すこととする。
【0041】図8は球面マップ画像201および平面マ
ップ画像205を示す図である。操作部106は、平面
マップ領域枠204の位置の移動に加え、平面マップ領
域枠204のサイズの変更操作を行う。制御部107
は、操作部106の操作に応じて平面マップ領域枠20
4の移動およびサイズの変更を識別する機能を有する。
画像処理部108は、平面マップ領域枠204の移動お
よびサイズ変更にしたがって球面マップ画像201を平
面マップ画像205に変換する。
【0042】このように、第2の実施形態では、平面マ
ップ領域枠204の位置に加えてサイズを変更すること
により、それに連動して平面マップ画像205のサイズ
も変化する。
【0043】ここで、平面マップ領域枠204のサイズ
の変更は画角の変更であり、必ずしも平面マップ画像2
05の画像サイズの変更を表すものでもない。したがっ
て、平面マップ領域枠204のサイズが変更された場
合、平面マップ画像205は画像サイズとして変化せ
ず、画像の内容が平面マップ領域枠204に対応して変
化するものでもよい。
【0044】[第3の実施形態]図9は第3の実施形態
におけるパノラマ画像表示装置の概略的構成を示す図で
ある。前記第1および第2の実施形態では、シーンの全
体を表す球面マップ画像201を直接変換して平面マッ
プ画像202、205を生成しているのに対し、第3の
実施形態では、シーンを撮影した各オリジナル画像間の
関係を表す合成パラメータを保持し、視点位置(θ0,
φ0)に応じて各合成パラメータを変換し、変換後の合
成パラメータにしたがって平面マップ画像に対応する画
素値をオリジナル画像から読み出すことに特徴がある。
【0045】図において、110は画像処理部であり、
平面マップ画像の生成および合成パラメータの変換処理
を行う。111は制御部であり、全系の制御を行う。1
12は合成パラメータ記憶部であり、シーンを撮影した
オリジナル画像間の合成パラメータを保持する。109
は画像記憶部であり、球面マップ画像およびシーンを撮
影したオリジナル画像を保持している。
【0046】図10は平面マップ画像生成処理手順を示
すフローチャートである。画像記憶部109から球面マ
ップ画像201を読み込む(ステップS501)。球面
マップ上での領域枠の位置に応じて視点位置(θ0,φ
0)を設定する(ステップS502)。ここで、初期値
としては、球面マップ画像の範囲内で適当な値を与える
ことができる。
【0047】視点位置(θ0,φ0)にしたがって、合
成パラメータの変換処理を行う(ステップS503)。
図11および図12は合成パラメータの変換処理を示す
図である。図10に示すように、シーンを撮影した際の
撮影画像1〜Nについて、任意の画像(例えば、撮影画
像1)を基準とした合成パラメータが、合成パラメータ
記憶部112に保持されている。
【0048】ここで、視点位置が新たに与えられた場
合、図12に示すように視点位置(θ0,φ0)に応じ
て、座標軸X、Y、ZをX’、Y’、Z’に変換する。
即ち、合成パラメータ記憶部112に保持されている合
成パラメータを座標軸X’、Y’、Z’を基準とした値
に変換する。これにより、点Pが球面座標空間の基準点
となる。
【0049】点Pを中心とした平面マップ画像303を
生成する(ステップS504)。この場合、平面マップ
画像303の各点(x’,y’)は、変換された合成パ
ラメータを基に生成することが可能である。
【0050】この場合、平面マップ画像303の各点に
対応する画素値は、オリジナル画像から直接生成される
ので、高画質の平面マップ画像を得ることができる。
【0051】以下、前記第1の実施形態と同様、ユーザ
操作による平面マップ領域枠の移動に従い、視点位置を
更新し、更新した視点位置に応じて座標軸を逐次変換し
ながら平面マップ画像を生成して表示する(ステップS
505、S506)。
【0052】本実施形態の表示方式では、前記第1およ
び第2の実施形態と異なり、オリジナル画像から直接、
平面マップ画像を生成するので、常に高画質の画像を提
供することが可能となる。
【0053】尚、本発明は複数の機器から構成されるシ
ステムに適用してもよいし、1つの機器からなる装置に
適用してもよい。また、本発明はシステムあるいは装置
にプログラムを供給することによって達成される場合に
も適用できることはいうまでもない。この場合、本発明
を達成するためのソフトウェアによって表されるプログ
ラムを格納した記憶媒体をシステムあるいは装置に読み
出すことによってそのシステムあるいは装置が本発明の
効果を享受することが可能となる。このように、本発明
の表示方式をプログラム化してフロッピーディスクなど
の記録媒体に保持し、コンピュータ上のソフトウェアと
して構成することが可能である。
【0054】図13は各実施形態における記憶媒体とし
てのROM52のメモリマップを示す図である。ROM
52には、図3および図10のフローチャートに示す球
面マップ画像読込モジュール、視点位置設定モジュー
ル、平面写像変換モジュール、画面表示モジュール、平
面マップ領域枠移動モジュール、合成パラメータ変換モ
ジュールなどが格納されている。
【0055】このようなプログラムモジュールを供給す
る記憶媒体としては、ROMに限らず、例えばフロッピ
ーディスク、ハードディスク、光ディスク、光磁気ディ
スク、CD−ROM、CD−R、DVD、磁気テープ、
不揮発性のメモリカードなどを用いることができる。
【0056】
【発明の効果】本発明の請求項1,6,9に記載の発明
によれば、ユーザが視野領域画像の中での部分画像の領
域を認識しながら視点の移動操作を行うことができる。
【0057】また、請求項2,7,10に記載の発明に
よれば、シーンの全域を表す球面マップ画像と、その一
部を表す平面マップ画像を同時に表示し、ユーザ操作に
より広視野領域を表す画像上の任意の領域を平面マップ
画像として観察することが可能となり、全域の中で観察
したい領域に簡単に移動することができ、シーンの広視
野領域を表す画像と平面マッピングされた表示ビューを
同時に表示し、かつ両者が連動して表示されることによ
り、ユーザがシーンの中での表示ビュー領域を認識しな
がら視点の移動操作を行うことができる。
【0058】また、請求項3に記載の発明によれば、平
面マップ画像に対応する領域枠の位置に加え、大きさも
変更することができ、平面マップ画像を生成する際のユ
ーザの自由度が向上する。このように、シーンの広視野
領域を表す画像上で平面マッピングされる表示ビューの
視野の範囲を設定することができる。
【0059】また、請求項4に記載の発明によれば、シ
ーンを撮影した複数の画像を合成処理して広視野領域画
像を生成することができ、ユーザの所望のシーンを自ら
撮影した画像を基にパノラマ表示することができる。
【0060】また、請求項5,8,11に記載の発明に
よれば、領域枠の移動に従い、オリジナル画像から直
接、平面マップ画像を生成することができ、常に高画質
の平面マップ画像を得ることができる。
【0061】このように、表示ビューに画像を平面マッ
ピングする際、撮影したオリジナル画像を直接変換して
表示ビューの画像を生成することにより、視点位置によ
らず常に高画質の画像を表示することができる。
【図面の簡単な説明】
【図1】第1の実施の形態におけるパノラマ画像表示装
置の概略的構成を示すブロック図である。
【図2】画像処理部102および制御部104の具体的
構成を示すブロック図である。
【図3】平面マップ画像生成処理手順を示すフローチャ
ートである。
【図4】円筒マップ、球面マップおよび多角形マップを
示す図である。
【図5】球面マップ画像および平面マップ画像を示す図
である。
【図6】球面座標空間および球面上にマッピングされた
撮影画像を示す図である。
【図7】第2の実施形態におけるパノラマ画像表示装置
の概略的構成を示す図である。
【図8】球面マップ画像201および平面マップ画像2
05を示す図である。
【図9】第3の実施形態におけるパノラマ画像表示装置
の概略的構成を示す図である。
【図10】平面マップ画像生成処理手順を示すフローチ
ャートである。
【図11】合成パラメータの変換処理を示す図である。
【図12】合成パラメータの変換処理を示す図である。
【図13】各実施形態における記憶媒体としてのROM
52のメモリマップを示す図である。
【符号の説明】
51 CPU 52 ROM 101 画像記憶部 102、108、110 画像処理部 103 表示部 104、107、111 制御部 105、106 操作部 201 球面マップ画像 202、205、303 平面マップ画像 203、204 平面マップ領域枠
───────────────────────────────────────────────────── フロントページの続き (72)発明者 羽鳥 健司 東京都大田区下丸子3丁目30番2号 キヤ ノン株式会社内 (72)発明者 滝口 英夫 東京都大田区下丸子3丁目30番2号 キヤ ノン株式会社内 Fターム(参考) 5B050 BA07 BA11 DA08 EA03 EA06 EA12 EA18 EA19 EA20 EA28 FA02 FA06 FA09 5C082 AA27 BA20 BA42 CA03 DA87 MM05

Claims (11)

    【特許請求の範囲】
  1. 【請求項1】 視野領域を表す視野領域画像を保持する
    保持手段と、 該保持された視野領域画像の一部に相当する部分画像を
    生成する生成手段と、 前記視野領域画像および前記部分画像を表示する画像表
    示手段と、 前記視野領域画像上に前記部分画像に対応する領域枠を
    表示する領域枠表示手段と、 前記領域枠を移動する移動手段と、 前記領域枠の移動に連動して前記部分画像を更新する更
    新手段とを備えた画像表示装置。
  2. 【請求項2】 前記保持手段は、撮影した視野領域を表
    す視野領域画像を保持し、 前記生成手段は、前記視野領域画像の一部を、仮想的な
    任意の撮像面上に変換した平面マップ画像を生成し、 前記画像表示手段は、前記視野領域画像および前記平面
    マップ画像を表示し、 前記領域枠表示手段は、前記視野領域画像上に前記平面
    マップ画像に対応する平面マップ領域枠を表示し、 前記移動手段は、前記平面マップ領域枠を移動し、 前記更新手段は、前記平面マップ領域枠の移動に連動し
    て前記平面マップ画像を更新することを特徴とする請求
    項1記載の画像表示装置。
  3. 【請求項3】 前記平面マップ領域枠の大きさを変更す
    る大きさ変更手段と、 前記平面マップ領域枠の大きさに応じて前記平面マップ
    画像の表示画角を変更する画角変更手段とを備えたこと
    を特徴とする請求項2記載の画像表示装置。
  4. 【請求項4】 前記視野領域画像は複数の画像を合成し
    て生成されることを特徴とする請求項1記載の画像表示
    装置。
  5. 【請求項5】 撮影したオリジナル画像を保持するオリ
    ジナル画像保持手段と、 該保持されたオリジナル画像間の合成パラメータを保持
    する合成パラメータ保持手段とを備え、 前記生成手段は、前記保持された合成パラメータを基
    に、前記オリジナル画像を仮想的な任意の撮像面上に変
    換した平面マップ画像を生成し、 前記画像表示手段は、前記視野領域画像および前記平面
    マップ画像を表示し、 前記領域枠表示手段は、前記視野領域画像上に前記平面
    マップ画像に対応する平面マップ領域枠を表示し、 前記移動手段は、前記平面マップ領域枠を移動し、 前記変換手段は、前記平面マップ領域枠の移動に連動し
    て前記合成パラメータを変換し、 前記更新手段は、該変換した合成パラメータに応じて前
    記平面マップ画像を更新することを特徴とする請求項1
    記載の画像表示装置。
  6. 【請求項6】 視野領域を表す視野領域画像を保持し、 該保持された視野領域画像の一部に相当する部分画像を
    生成し、 前記視野領域画像および前記部分画像を表示し、 前記視野領域画像上に前記部分画像に対応する領域枠を
    表示し、 前記領域枠を移動し、 該領域枠の移動に連動して前記部分画像を更新すること
    を特徴とする画像表示方法。
  7. 【請求項7】 撮影した視野領域を表す視野領域画像を
    保持し、 前記視野領域画像の一部を、仮想的な任意の撮像面上に
    変換した平面マップ画像を生成し、 前記視野領域画像および前記平面マップ画像を表示し、 前記視野領域画像上に前記平面マップ画像に対応する平
    面マップ領域枠を表示し、 前記平面マップ領域枠を移動し、 前記平面マップ領域枠の移動に連動して前記平面マップ
    画像を更新することを特徴とする請求項6記載の画像表
    示方法。
  8. 【請求項8】 撮影したオリジナル画像を保持し、 該保持されたオリジナル画像間の合成パラメータを保持
    し、 該保持された合成パラメータを基に、前記オリジナル画
    像を仮想的な任意の撮像面上に変換した平面マップ画像
    を生成し、 前記視野領域画像および前記平面マップ画像を表示し、 前記視野領域画像上に前記平面マップ画像に対応する平
    面マップ領域枠を表示し、 前記平面マップ領域枠を移動し、 該平面マップ領域枠の移動に連動して前記合成パラメー
    タを変換し、 該変換した合成パラメータに応じて前記平面マップ画像
    を更新することを特徴とする請求項6記載の画像表示方
    法。
  9. 【請求項9】 画像表示装置内のCPUによって実行さ
    れるプログラムが格納された記憶媒体において、 前記プログラムは、 視野領域を表す視野領域画像を保持する手順と、 該保持された視野領域画像の一部に相当する部分画像を
    生成する手順と、 前記視野領域画像および前記部分画像を表示する手順
    と、 前記視野領域画像上に前記部分画像に対応する領域枠を
    表示する手順と、 前記領域枠を移動する手順と、 前記領域枠の移動に連動して前記部分画像を更新する手
    順とを含むことを特徴とする記憶媒体。
  10. 【請求項10】 前記プログラムは、 撮影した視野領域を表す視野領域画像を保持する手順
    と、 前記視野領域画像の一部を、仮想的な任意の撮像面上に
    変換した平面マップ画像を生成する手順と、 前記視野領域画像および前記平面マップ画像を表示する
    手順と、 前記視野領域画像上に前記平面マップ画像に対応する平
    面マップ領域枠を表示する手順と、 前記平面マップ領域枠を移動する手順と、 該平面マップ領域枠の移動に連動して前記平面マップ画
    像を更新する手順とを含むことを特徴とする請求項9記
    載の記憶媒体。
  11. 【請求項11】 前記プログラムは、 撮影したオリジナル画像を保持する手順と、 該保持されたオリジナル画像間の合成パラメータを保持
    する手順と、 前記保持された合成パラメータを基に、前記オリジナル
    画像を仮想的な任意の撮像面上に変換した平面マップ画
    像を生成する手順と、 前記視野領域画像および前記平面マップ画像を表示する
    手順と、 前記視野領域画像上に前記平面マップ画像に対応する平
    面マップ領域枠を表示する手順と、 前記平面マップ領域枠を移動する手順と、 前記平面マップ領域枠の移動に連動して前記合成パラメ
    ータを変換する手順と、 該変換した合成パラメータに応じて前記平面マップ画像
    を更新する手順とを含むことを特徴とする請求項9記載
    の記憶媒体。
JP10253331A 1998-08-25 1998-08-25 画像表示装置、方法および記憶媒体 Pending JP2000067227A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP10253331A JP2000067227A (ja) 1998-08-25 1998-08-25 画像表示装置、方法および記憶媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP10253331A JP2000067227A (ja) 1998-08-25 1998-08-25 画像表示装置、方法および記憶媒体

Publications (1)

Publication Number Publication Date
JP2000067227A true JP2000067227A (ja) 2000-03-03

Family

ID=17249833

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10253331A Pending JP2000067227A (ja) 1998-08-25 1998-08-25 画像表示装置、方法および記憶媒体

Country Status (1)

Country Link
JP (1) JP2000067227A (ja)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002203254A (ja) * 2000-08-30 2002-07-19 Usc Corp 曲面像変換方法及びこの曲面像変換方法を記録した記録媒体
WO2003038752A1 (fr) * 2001-10-29 2003-05-08 Sony Corporation Appareil de traitement d'images non planes, technique de traitement d'images et programme informatique
WO2003049030A1 (fr) * 2001-12-07 2003-06-12 Sony Corporation Dispositif de traitement d'image, procede de traitement d'image, procede de stockage et programme informatique
JP2008145594A (ja) * 2006-12-07 2008-06-26 Sony Ericsson Mobilecommunications Japan Inc 画像表示処理方法および画像表示装置
KR100933297B1 (ko) 2009-08-31 2009-12-22 (주)지에스엠솔루션 Gps/ins장비와 전방위 카메라로부터 취득한 구면 영상을 이용한 3차원 좌표 추출 방법
JP2012221324A (ja) * 2011-04-11 2012-11-12 Taisei Corp パノラマ画像データ生成装置
WO2018045897A1 (en) * 2016-09-09 2018-03-15 Mediatek Inc. Packing projected omnidirectional videos
WO2019062714A1 (en) * 2017-09-27 2019-04-04 Mediatek Inc. PROJECTION-BASED FRAME PROCESSING METHOD COMPRISING AT LEAST ONE CONDITIONED PROJECTION FACE IN A 360 DEGREE VIRTUAL REALITY PROJECTION LAYOUT
US10356386B2 (en) 2017-04-05 2019-07-16 Mediatek Inc. Method and apparatus for processing projection-based frame with at least one projection face generated using non-uniform mapping
US11004173B2 (en) 2017-03-13 2021-05-11 Mediatek Inc. Method for processing projection-based frame that includes at least one projection face packed in 360-degree virtual reality projection layout
US11057643B2 (en) 2017-03-13 2021-07-06 Mediatek Inc. Method and apparatus for generating and encoding projection-based frame that includes at least one padding region and at least one projection face packed in 360-degree virtual reality projection layout
US11494870B2 (en) 2017-08-18 2022-11-08 Mediatek Inc. Method and apparatus for reducing artifacts in projection-based frame

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002203254A (ja) * 2000-08-30 2002-07-19 Usc Corp 曲面像変換方法及びこの曲面像変換方法を記録した記録媒体
US7483590B2 (en) 2001-10-29 2009-01-27 Sony Corporation Image processing apparatus and image processing method for non-planar image, storage medium, and computer program
CN100380403C (zh) * 2001-10-29 2008-04-09 索尼公司 非平面图像的图像处理装置及图像处理方法
WO2003038752A1 (fr) * 2001-10-29 2003-05-08 Sony Corporation Appareil de traitement d'images non planes, technique de traitement d'images et programme informatique
JP2003178298A (ja) * 2001-12-07 2003-06-27 Sony Corp 画像処理装置及び画像処理方法、記憶媒体、並びにコンピュータ・プログラム
US7426317B2 (en) 2001-12-07 2008-09-16 Sony Corporation Image processing apparatus and image processing method, storage medium and computer program
WO2003049030A1 (fr) * 2001-12-07 2003-06-12 Sony Corporation Dispositif de traitement d'image, procede de traitement d'image, procede de stockage et programme informatique
CN100437639C (zh) * 2001-12-07 2008-11-26 索尼公司 图像处理装置和图像处理方法
JP2008145594A (ja) * 2006-12-07 2008-06-26 Sony Ericsson Mobilecommunications Japan Inc 画像表示処理方法および画像表示装置
KR100933297B1 (ko) 2009-08-31 2009-12-22 (주)지에스엠솔루션 Gps/ins장비와 전방위 카메라로부터 취득한 구면 영상을 이용한 3차원 좌표 추출 방법
JP2012221324A (ja) * 2011-04-11 2012-11-12 Taisei Corp パノラマ画像データ生成装置
WO2018045897A1 (en) * 2016-09-09 2018-03-15 Mediatek Inc. Packing projected omnidirectional videos
US11004173B2 (en) 2017-03-13 2021-05-11 Mediatek Inc. Method for processing projection-based frame that includes at least one projection face packed in 360-degree virtual reality projection layout
US11057643B2 (en) 2017-03-13 2021-07-06 Mediatek Inc. Method and apparatus for generating and encoding projection-based frame that includes at least one padding region and at least one projection face packed in 360-degree virtual reality projection layout
US10356386B2 (en) 2017-04-05 2019-07-16 Mediatek Inc. Method and apparatus for processing projection-based frame with at least one projection face generated using non-uniform mapping
US11494870B2 (en) 2017-08-18 2022-11-08 Mediatek Inc. Method and apparatus for reducing artifacts in projection-based frame
WO2019062714A1 (en) * 2017-09-27 2019-04-04 Mediatek Inc. PROJECTION-BASED FRAME PROCESSING METHOD COMPRISING AT LEAST ONE CONDITIONED PROJECTION FACE IN A 360 DEGREE VIRTUAL REALITY PROJECTION LAYOUT

Similar Documents

Publication Publication Date Title
JP2007233996A (ja) 画像合成装置、画像合成方法、画像合成プログラム及び記録媒体
JP4847203B2 (ja) 情報処理方法、情報処理装置
WO2019238114A1 (zh) 动态模型三维重建方法、装置、设备和存储介质
JP2016062486A (ja) 画像生成装置および画像生成方法
WO2020048484A1 (zh) 超分辨图像重建方法、装置、终端和存储介质
JP2007006175A (ja) 車両用画像生成装置および方法
JP6310898B2 (ja) 画像処理装置、情報処理装置、および画像処理方法
JP4406824B2 (ja) 画像表示装置、画素データ取得方法、およびその方法を実行させるためのプログラム
JP2003141569A (ja) 情報処理方法および映像合成装置
JP2000067227A (ja) 画像表示装置、方法および記憶媒体
JP2002057879A (ja) 画像処理装置と画像処理方法及びコンピュータ読み取り可能な記録媒体
JP3352475B2 (ja) 画像表示装置
WO2019123509A1 (ja) 端末装置、システム、プログラム及び方法
US8643679B2 (en) Storage medium storing image conversion program and image conversion apparatus
JP2017158153A (ja) 画像処理装置および画像処理方法
JP4892405B2 (ja) 画像処理装置および方法
CN113096008A (zh) 一种全景图片的显示方法、显示装置及存储介质
JP2003143477A (ja) 映像合成装置および方法
CN113662663B (zh) 一种ar全息手术导航系统坐标系转换方法、装置及系统
JP2003150599A (ja) 電子出版物閲覧方法及びその装置と、電子出版物閲覧用書籍と、電子出版物閲覧プログラム及びそのプログラムを記録した記録媒体
JP3112790B2 (ja) 仮想現実装置
JP4703744B2 (ja) コンテンツ表現制御装置、コンテンツ表現制御システム、コンテンツ表現制御用基準物体およびコンテンツ表現制御プログラム
JP7150460B2 (ja) 画像処理装置および画像処理方法
JP4550460B2 (ja) コンテンツ表現制御装置およびコンテンツ表現制御プログラム
JP2002042158A (ja) 画像合成装置および画像合成方法およびプログラムを記録した媒体