JP2001526471A - 全方向撮像装置 - Google Patents
全方向撮像装置Info
- Publication number
- JP2001526471A JP2001526471A JP2000524698A JP2000524698A JP2001526471A JP 2001526471 A JP2001526471 A JP 2001526471A JP 2000524698 A JP2000524698 A JP 2000524698A JP 2000524698 A JP2000524698 A JP 2000524698A JP 2001526471 A JP2001526471 A JP 2001526471A
- Authority
- JP
- Japan
- Prior art keywords
- image
- parabolic reflector
- omnidirectional imaging
- imaging device
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 147
- 230000005670 electromagnetic radiation Effects 0.000 claims abstract description 45
- 230000003287 optical effect Effects 0.000 claims description 52
- 238000000034 method Methods 0.000 claims description 27
- 238000013507 mapping Methods 0.000 claims description 14
- 230000004075 alteration Effects 0.000 claims description 11
- 230000008878 coupling Effects 0.000 claims description 11
- 238000010168 coupling process Methods 0.000 claims description 11
- 238000005859 coupling reaction Methods 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 10
- 230000000295 complement effect Effects 0.000 claims description 6
- 238000002347 injection Methods 0.000 claims description 2
- 239000007924 injection Substances 0.000 claims description 2
- 239000004065 semiconductor Substances 0.000 claims 1
- 238000001914 filtration Methods 0.000 abstract 1
- 230000008859 change Effects 0.000 description 8
- 230000005499 meniscus Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 206010010071 Coma Diseases 0.000 description 4
- 201000009310 astigmatism Diseases 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 229910052751 metal Inorganic materials 0.000 description 3
- 239000002184 metal Substances 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000004438 eyesight Effects 0.000 description 2
- 239000010408 film Substances 0.000 description 2
- 238000004091 panning Methods 0.000 description 2
- 229920002972 Acrylic fiber Polymers 0.000 description 1
- 101100214868 Autographa californica nuclear polyhedrosis virus AC54 gene Proteins 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 239000000243 solution Substances 0.000 description 1
- 229910001220 stainless steel Inorganic materials 0.000 description 1
- 239000010935 stainless steel Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/06—Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/12—Panospheric to cylindrical image transformations
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19617—Surveillance camera constructional details
- G08B13/19626—Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19617—Surveillance camera constructional details
- G08B13/19626—Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses
- G08B13/19628—Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses of wide angled cameras and camera groups, e.g. omni-directional cameras, fish eye, single units having multiple cameras achieving a wide angle view
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19639—Details of the system layout
- G08B13/19641—Multiple cameras having overlapping views on a single scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Studio Devices (AREA)
- Studio Circuits (AREA)
- Optical Elements Other Than Lenses (AREA)
- Lenses (AREA)
Abstract
Description
反射器を有する撮像に関する。
ルリアリティ、コンピュータグラフィック、マシンビジョン、ロボット技術等多
くの用途において、撮像系は大なる視野を有していて、その周囲の状況に関して
できるだけ多くの情報を得られるようにすることが望ましい。
ラを有している。しかし広角レンズを持ったカメラでもその視野自体は狭く制限
されている(すなわち、全半球以下しかカバーできない)。撮像系全体を投影中
心の周に傾斜させ、又パンニングを行うことにより制限された視野を拡大できる
。このような方式の1つはS.E.Chen(エス・イー・チェン)“Quicktime VR-An
Image-Based Approach to Virtual Environment Navigation”(仮装環境ナビゲ
ーションの急速VR映像技術の試案)Proc.of SIGGRAPH 95(8)29−38 1995年8月に記載されている。さらにL. McMilan 及びG. Bishop“Plenop
tic Modeling : An Image-Based Rendering System”Computer Graphics, Proc
of SIGGRAPH,1995年8月,pp.39−46にも従来のパン傾斜方式が記載さ れている。しかし、この型式の従来装置は2つの欠点を有している。その1つは
、装置には必然的に可動部分を設けるを要することであり、第2には、装置の周
囲を眺めるため完全に回転をさせるため可成りの時間を要するということである
。この所要時間の欠点は、この種装置をリアル・タイムでの用途に適さなくして
いる。
であり、これについてはE. L. Hal 他(イー・エル・ハル他)、「Omnidirectio
nal Viewing Using a Fish Eye Lens(魚眼レンズ使用による全方位監視)」S PIE Vol. 728,Optics Illumination and Image Sensing for machine Vis
ion(1986)に開示されている。魚眼レンズは極めて短い焦点長を有してい るため、その視界は半球の大きさとなる。しかし撮像装置にこのような魚眼レン
ズを用いることは、その寸法が可成り大となり、従来の一般のレンズより複雑と
なるという欠点を有している。さらに関連のシーンのすべての点に固定視点をも
った魚眼レンズを得ることは困難である。Zimmermanの米国特許5,187,667及びKu
banの米国特許5,359,363も従来のパン及び傾斜機構に代えて魚眼レンズを用いる
ことを提案しているが、上と同じ欠点を有していた。
った。この種装置の一例は、V. S. Nalwa(ブイ エス ナルバ)が“A True Om
niDirectional Biewer”として、AT&Bell Laboratories Technical Memorandum,
BL0115500-960115-01,1996年1月に発表している。Nalwaは、多平面反射器
を、多数の電荷結合装置(CCD)と組み合わせたカメラを用い、半球面シーン
の50°幅の映像を360°のパノラマ像を得ることを発表している。とくに N
alwaは、4個の平面鏡をピラミッド形状に配置し、各1つのカメラを4個の平面
反射面の上にそれぞれ配置し、各カメラによって50°の半球面シーンの90°
より僅かに大きな角度を眺めるようにした。この方式は、360°の映像を得る
ためには多数のセンサを必要とすると云う欠点がある。さらにこの方式は、これ
以外にも、個別の映像を組合せて、360°の視野とするときに生ずる継目(シ
ーム)の歪みを生ずると云う欠点もある。
Vertical Edges in Omnidirectional Image Sequence,”IEE International Co
nference on Robotics and Automation, 1995年6月、p.2334及びYagi
他“Map-Based Navigation for a Mobile Robot with Omnidirectional Image S
ensor COPIS”,IEEE Transations on Robotics and Automation, Vol. II, No.
5, 1995年10月の両方に、コーン(円錐)形状のイメージ・センサ(CO PIS)で、周囲の光景映像を集める円錐形反射面を用い、可動ロボットの運行
案内のため情報処理を行うことを開示している。このCOPISは360°の視
野を得ることができるが、視野が円錐形鏡(コニカルミラー)の頂角と、カメラ
レンズの視角によって制限されるので真の全方向イメージセンサではない。さら
にCOPISは単一視点を有さず、視点の軌跡は円上に存する。この多重視点の
軌跡は得られた像に歪みを生じ、これが消去できず純粋な透視像が得られない。
erOmni Vision”, IEEE International Coference on Robotics and Automation
, 1995年10月、p.1062には、COPIS方式の改良として、円錐形 表面に代えて回転双曲面反射表面の使用を開示している。これに開示されている
ように双曲面より反射される光線は光線の原点の位置に関係なく、単一点に収斂
するので、透視像が得られる。
、反射像を形成する光線は反射鏡の焦点に収斂するため、反射面とセンサとの配
置位置に極めて限界的に厳重な要求が課せられ、僅かな乱れでも画像品質に重大
な欠陥が生ずる。さらに、透視投影モデルの使用は、本質的にセンサとミラー間
の距離が増加するにつれて、ミラーの断面を増加させる必要がある。従ってミラ
ーの寸法を妥当な値に止めるためには、ミラーをセンサにより近く配設するを要
する。このことはイメージセンサの光学系の設計をより複雑とする。またこれに
加えて、検出した像の使用可能な座標へのマッピングが、収斂映像のため複雑な
校正作業を必要とする。さらに他の欠点としては、単一の視点を維持し乍らミラ
ーと光学系との相対位置を変更し得ないという欠点も存する。このため、双曲面
ミラー系はミラーと光学系との相対移動を利用して単一視点を維持しながら系全
体の視界を調整することはできない。
射面の使用を開示した。このReesもヤマザワ他と同じ欠点があった。
のは、単一視点よりのシーンを撮像しての無歪の像を生ずる全方向撮像装置たり
得ないか、あるいは極めて複雑な校正を要する装置となる。
1特徴は、単一の視点よりあるシーンの像を撮像する全方向撮像装置であって、
切頭形のほぼ放物面状の反射器を有し、これをシーンよりの電磁放射の主光線を
正射的に反射するように配置するものである。放物面状反射器は、全方向撮像装
置の単一視点に一致する焦点を有する。この全方向撮像装置は、さらに前記放物
面状反射器に光学的に結合されたテレセントリック手段を具え、この手段により
放物面状反射器によって正射的に反射されない電磁放射線の主光線をほぼ濾波除
去する。本全方向撮像装置は、放物面状反射器より正射的に反射された電磁放射
の主光線を受取るように配置した1個以上のセンサを有し、これによりシーンの
像を撮像する。
記テレセントリック手段は、テレセントリック レンズ、テレセントリック開孔
又はコリメータレンズとすることができる。
表わされた次式にほぼ従うものとする。 z=(h2-r2)/2h ここにおいて、 zは表面の回転軸、 rはラジアル座標(半径方向の座標)、 hは定数、 である。本式は回転対称表面を表わすので、表面の形状は角座標φの関数とはな
らない。
ラを具える。これらのビデオカメラは一以上の電荷結合装置又は一以上の電荷注
入装置を使用するものとすることができる。或いは又、前記一以上のイメージセ
ンサは写真フィルムを具えるものとすることができる。他の好適実施例では、少
なくとも一つのイメージセンサを放物面状反射器から反射された像の不均一解像
度を補償する不均一解像度を有するものとする。
放物面状反射器の焦点と頂点を通る軸線に垂直な平面で切断された鏡を備えるも
のとするのが好ましい。
上のイメージセンサを可動のベースに装着して、前記一以上のイメージセンサの
移動により変化する視野が発生するようにする。或いは又、前記放物面状反射器
を可動のベースに装着し、前記一以上のイメージセンサを固定のベースに装着し
て、放物面状反射器の移動により変化する視野が発生するようにすることもでき
る。これらの実施例の各々においては、一以上のイメージセンサと放物面状反射
器を光学的に結合するズームレンズを設けるのも好ましい。
表わすイメージ信号を発生する。イメージ信号処理装置を一以上のイメージセン
サに結合し、これによりイメージセンサからのイメージ信号をイメージ信号デー
タに変換する。イメージ信号処理装置は次にイメージ信号データを直角座標系内
にマップして透視像を発生させるか、或いは変中座標系にマップしてパノラマ像
を発生させる。イメージ信号処理装置には補間イメージデータを発生する補間手
段を含め、補間イメージデータとイメージ信号データを合成してディジタルイメ
ージを構成することができる。イメージ処理装置には更にディジタルイメージの
予め選択した部分にズームインする手段を含め、所定の焦点距離から予め選択し
た部分の拡大像を発生させるようにするのが有利である。
反射器を光学的に結合する少なくとも一つのレンズを具える。この結合レンズは
ズームレンズ、マイクロスコープ対物レンズ、又は像面平坦化レンズとすること
ができる。像面平坦化レンズは放物面状反射器の像面彎曲にほぼ反対の像面彎曲
を有するものとするのが好ましい。像面彎曲レンズは平凹レンズ又はアプラナテ
ィック、メニスカスレンズとするのが好ましい。
磁放射の主光線を正射的に反射するように配置された2つの切頭形のほぼ放物面
状反射器を用いてほぼ球面シーンを決像するのに使用する。前記2つの放物面状
反射器は共通放物面軸を共有するように位置させる。更に、2つの放物面状反射
器が凸面である場合には、これらの反射器はそれらの切断面に沿って背中合わせ
に位置させて、これらの反射器が共通焦点を共有するようにする。2つの放物面
状反射器が凹面である場合には、これらの反射器をそれらの頂点が一致するよう
に位置させる。
反射された主光線を複数の光束に分割する複数のビームスプリッタを具える。こ
の実施例では、それぞれ複数の光束の少なくとも一つを受信し、シーンの像の一
部分を検知するように配置された複数のイメージセンサが必要とされる。
された主光線を複数の単色主光線に分割する複数のダイクロイックビームスプリ
ッタを具える。上記の実施例と同様に、それぞれ複数の単色主光線の少なくとも
一つを受信し、シーンの少なくとも一つの単色像を検知するように配置された複
数のイメージセンサが必要とされる。
る。典型的な実施例では、この方法は、 (a)シーンから発する電磁放射の主光線を切頭形のほぼ放物面状反射器でオ
ツソグラフィック反射させて、全方向撮像方法の単一視点を放物面状反射器の焦
点と一致させるステップと、 (b)前記放物面状反射器により正射的に反射されない電磁放射の主光線の相
当部分をテレセントリック式に除去するステップと、 (c)前記放物面状反射器からの電磁放射の正射的に反射された主光線を一以
上のイメージセンサにより検知することによりシーンの像を検知するステップと
を具えることを特徴とする。
、 (a)切頭形のほぼ放物面状の反射器を固定のベースに装着するステップと、 (b)一以上のイメージセンサを可動のベースに装着するステップと、 (c)シーンから発する電磁放射の主光線を切頭形のほぼ放物面状反射器でオ
ツソグラフィック反射させて、全方向撮像方法の単一視点を放物面状反射器の焦
点と一致させるステップと、 (d)前記放物面状反射器により正射的に反射されない電磁放射の主光線の相
当部分をテレセントリック式に除去するステップと、 (e)前記可動のベースを第1の位置に移動させるステップと、 (f)前記放物面状反射器からの電磁放射の正射的に反射された主光線を一以
上のイメージセンサにより検知することにより第1の視野を有するシーンの像を
検知するステップと、 (g)前記可動のベースを第2の位置に移動させるステップと、 (h)前記放物面状反射器からの電磁放射の正射的に反射された主光線を一以
上のイメージセンサにより検知することにより第2の視野をを有するシーンの像
を検知するステップと、 を具えることを特徴とする。
40に取付けた凸面パラボラ(放物線)状の反射器135をほぼ半球状のシーン130の
像を正射的に反射すべく位置させる。テレセントリックレンズ又は拡大レンズ11
2及びテレセントリックアパーチュア113を有している市販のソニー3CCDカラー ビデオカメラデバイス111の如きイメージセンサ110を像の正射的反射を受取るべ
く位置させる。テレセントリックレンズ又はアパーチュアは、そのレンズ又はア
パーチュアの平面に対して垂直でない光線の全て、即ち、半球状のシーンの正射
的反射の部分を形成しない背景光をろ波する働きをする。
放射にも同等に適用することができる。
器を或る有効長の管の如き透明の支持体136によってイメージセンサに結合させ ることができる。
タイザ120によってディジタル信号に変換され、このディジタイザは市販のNTSC ビデオ信号アナログ-ディジタル変換器とする。
ステーションの如き汎用のコンピュータ125へと送られる。後にさらに詳述する ように、コンピュータ125は、ユーザが半球状シーンの所望する任意の部分を見 たり、そのシーンの選択した部分を所望するようにズームしたり、又はパンした
りすることができるようにプログラムする。
120を必要とすることなく、コンピュータ125へ直接供給し得るディジタルビデオ
信号を供給するカムコーダ又はビデオカメラとすることもできる。
レート140から延在するように形成する。反射器135は、アルミニウム又は銀のよ
うな反射性の高い金属薄膜層145を被着したパラボラ状のプラスチック本体で構 成することができる。反射器135は、パラボラ状の研磨した金属本体で構成する こともできる。この後者の例では、ステンレス鋼のような金属を用いることがで
きる。
反射器135はほぼ次式に従うような円筒座標r、φ及びz内にて規定され、 z=(h2−r2)/2h ここにzは回転軸であり、rは半径方向の座標であり、hは定数である。z軸は 撮像装置の光軸と一致し、式(1)によって規定される放物面の焦点315は座標 系の起点と一致する。図3の反射器315は、z軸310に対してほぼ垂直で、しかも その反射器の放物面の焦点315を含む平面pで切頭したものである。
物面によってイメージセンサ110の方へと正射的に反射される。従って、焦点315
は、ほぼ半球状のシーンそこから見れる単一の視点と一致する。イメージセンサ
110は撮像系の光軸310に沿って位置付け、このイメージセンサの感光面は光軸に
対して垂直とする。単一視点からのほぼ半球状のシーンを見れるようにする正射
的反射を用いることは本発明の有利な特徴である。
る。
角度、 α=π/2 (3) にて反射させなければならず、ここに、αは出射光線410と光軸との間の角度で ある。満足すべきこれら2つの制約及び入射角を反射角に等しくするために、反 射光線410とその反射個所における表面の法線方向
凸状)とする。この結果、次式が成立する。
る表面を生成する曲線が存在する。この曲線は式(1)によって規定される放物
線であり、これは放物線の焦点420と一致する単一の視点を有する。
方向性の撮像装置は、シーンの任意の部分を見たり、或る選択した部分にズーム
インしたり、且つシーンをパンしたりすることを、いずれも単一の視点に対して
、しかも像の再構成又は複雑なフレーム変換を必要とすることなく行なうことが
できる。
段を示す。また、図5は切頭凸状のほぼパラボラ状反射器135をデカルト座標系 に写像する手段を示す。撮像装置の光軸502はz軸と一致し、ほぼパラボラ状反 射器135の焦点501は原点に位置する。シーン300の1点から見た入射光505、510は
それぞれxおよびy座標によって規定され得る点515および520で反射面と交差す
る。これら点515および520はシーンの視点、即ち、パラボラ状反射器の焦点501 で始まる虚放射状のライン516および521に沿って位置する。これらの放射光はz
軸に垂直な平坦光感知面を有するイメージセンサ110に向かって正射影的に反射 するため、投影された光は同一のxおよびy座標で光感知面と交差する。z座標
のみは変化する。従って、正射影的に投影された光の反射器135と交差する点の x−y座標と、正射影的に投影された光がイメージセンサ110の平坦光感知面と 交差する点のx−y座標とは1対1の関係にある。
の特定の範囲をカバーするCCDセルによって発生するイメージ信号はx−y座標 の同一範囲内の点における反射面135から正射影的に反射された光を表わす。こ れがため、イメージのデカルト座標系への写像は当業者にとって簡単な仕事とな
る。
ング技術を示す。反射器135は、図5の場合と同様に、直交x,yおよびz軸に 関して位置決めされる。点550を中心とするシーンの選択部分に焦点距離fで特 定の寸法でズームインを行うためには、シーンの選択部分を投影する反射面の領
域と同一のx−y座標範囲に位置するCCDセルの撮像信号のみを倍率および視野 に対して選定する。
するCCDセルによって発生した光強度信号を選択する。図6に示すように点570お
よび焦点551間のラインセグメントは点552で反射器135と交差する。点570の光強
度は点552のx−y座標にもっとも近いグリッド上のx−y座標に位置する点580
のCCDセルによ発生したイメージ信号により表わされる光強度に等しくなるよう に設定する。シーンの選択部分を投影する反射面の領域と同一のx−y座標の範
囲内での各CCDセルに対して同様のことを繰返す。上述した正射影的な反射およ び1対1の関係のために、像再構成および複素フレーム変換は必要とはならなく
なる。
大像のズームインを行い得る上記ステップを実行するためには汎用コンピュータ
125を用い、これにより当業者でも容易にプログラムすることができる。さらに 、反射器に沿って順次の点を示すことによって半球状シーンを、あたかも単一視
点からシーンを見ているように、パン撮りすることができる。
ータに情報を供給するCCDセルの数を減少し、従って、見たイメージの粒度を増 大することは明らかである。好適な例では、CCDセルに正確に関連しないシーン の点に関する情報は補間により一層密に概算する。コンピュータ125で実行し得 る好適な補間プログラムはこの明細書のアペンディックス(APENDIX)Iに含まれ
ている。APENDIX Iとして添付されたプログラムによって、感知全方位イメージ をコンピュータ125で表示するに好適な一次斜視イメージに写像する。このプロ グラムは、ユーザに対し、変換すべき全方位イメージの名前、中心位置および半
径を要求する。また、プログラムはユーザに対し発生した各イメージに対する名
前、並びに斜視像の焦点距離および大きさをも要求する。
ルによって発生したイメージ信号を簡単に選択する代わりに、かかるシーンの部
分のイメージを、シーンの隣接部分に相当するCCDセルによって発生したイメー ジ信号の好適な平均値に基づく添付プログラムによって推定する。多項式または
一時的整合に基づく補間プログラムのような当業者にとって既知の一層高度な補
間プログラムを本発明の要旨を逸脱することなく、用いることができる。
筒形座標マッピングをも行ってシーンのパノラマ的イメージを観察することがで
きる。この円筒形座標マッピングを図9につき説明する。図9において、シーン
の点945から主光線950がパラボラ状反射器935に当たり、イメージセンサ910に向
かって正射影的に反射する。正射影的に反射された光線960は感知素子965でイメ
ージセンサに当たる。感知素子965によって円筒形座標に表わされた点を写像す るには、切頭形円筒970をパラボラ状反射器935およびイメージセンサ910を囲む ように撮像する。次いで感知素子965により表わされた点を光線960および950を 経てトレースするとともに光線950および切頭形円筒970の交点955を決める。次 いで点955を感知素子965の光強度を割当てる。イメージセンサ910の各感知素子 に対して同様の計算を行う。切頭形円筒970に位置する(適当に割当てられた光 強度を有する)点の結果の集合によって観察シーンのパノラマ的イメージを発生
する。この写像(マッピング)は当業者にとって容易に行うことができるととも
に円筒を長さ状にカットして平坦にする。さらに、当業者が容易であるように、
デカルト座標写像に関して上述したように、イメージデータの補間も円筒形座標
写像に用いることができる。
有し、0.4インチ焦点長さのパラボラ状ミラーとともに用いる。ニュージャーシ ー、バリントンのエドモンドサイエンティフィック社製のモデルNo.P32921のよ うなコリメータレンズを、8.5インチ焦点長の撮像レンズとともに用いてミラー をCCDに光学的に結合する。
ラボラ状反射器735を具える。この追加の反射器は半球状シーン130に対し相補を
なす追加の半球状シーン730の像を正射影的に投影するように位置決めする。追 加のイメージセンサ710は追加の反射器735によって正射影的に投影されたイメー
ジを受けるように位置決めする。
汎用コンピュータ125に送る。
軸810および共通焦点805を背合せに位置決めするとともに回転軸810にほぼ垂直 に且つ焦点805を含む平面pで各が切頭される。
球状又は球面状の被写体の像を検知する方法を示すフローチャート1000を図
示する。フローチャート1000は単一視点から半球状の被写体を検知する必要
な工程を示す。この方法は、ほぼ半球状の被写体1010で垂直反射すること及
び垂直反射した画像1020を検知することを必要とする。
ータを適切な座標系にマッピングする工程1040、画像データを補間して画像
データの欠落に対して適切な値を取り出す工程1060、及びマップされた画像
データ及び補間された画像データからディジタル画像を形成する工程1070を
含む。有益なものとして、視認方向、焦点距離、及び画像サイズを特定する工程
1045及び画像データの選択した部分にズームする工程1050を補間工程の
前に実行することができる。
細書及び添付した請求の範囲において用いられているように、用語「垂直」は、
放物面の反射体と関連して、放物面形状の反射体の焦点を通り放物面形状の反射
体の放物軸とほぼ直交する面で切られた放物面形状の反射体を称する。本明細書
及び添付した請求の範囲で用いられているように、放物面形状の反射体の放物軸
は放物面形状の反射体の頂点及び焦点通る軸である。上述したように、通常の放
物面形状の反射体を用いることにより半球全体(πステラジアン)を撮像でき、
或いはこの反射体をバック対バックで2個結合したものを配置することにより球
面全体( 2πステラジアン)を撮像することができる。図11〜図15は放物面
形状の反射体が種々の非垂直反射体の形態を取ることができる全方向撮像装置の
別の例示的実施例を示す。
半球面よりも大きな視野(「FOV」)を撮像できる全方向撮像装置を示す。図
11の実施例において、放物面形状反射体は1135は、放物面の軸(Z)と垂
直であるが放物面の焦点1130よりも下側を通る面で適当な反射体を切ること
により得られる拡張された放物面とする。この放物面はその焦点よりも下側まで
延在するで、有益なことに、この放物面形状の反射体はその焦点の下側の半球面
からの光線を垂直に反射することができる。図11に示す実施例において、例え
ば放物面形状の反射体に対応するFOVは240°すなわち球面全体の75%に
なる。好ましくは、図11に示すように、カメラ1111及び放物面形状反射体
1135は光学系1112による結合する。
めに用いることができる全方向撮像装置を示す。図12の実施例は、カメラ12
11と、光学系1212と、放物面形状の反射体1235とを含む。放物面形状
の反射体1235は、この放物面形状反射体1235の焦点を通りその放物軸(
Z)に対して傾斜する面で切られている。従って、この反射体のFOVは、図1
2の破線で示すように、傾いた半球面となる。図12の実施例は放物面の焦点を
通る切断面を示すが、放物面はこの実施例に限定されるものではない。この切断
面は放物面の焦点1230の上方を通ることもでき(この場合、FOVは半球面
よりも小さくなる)、或いはこの切断面は焦点1230の下側を通ることもでき
る(これにより、FOVは半球面よりも大きくなる)。
向撮像装置を示す。図13の実施例は、光学系1312により放物面形状の反射
体1335に結合されたカメラ1311を含む。本例では、放物面形状の反射体
1335は、カメラ1311の撮像領域よりも「大きく」なるように形成する。
この説明において、反射体と同一形状を有する(すなわち、式(1)で規定した
放物定数と同一の放物定数hを有する)垂直反射体のベースがカメラの撮像領域
よりも最小寸法よりも大きい場合、放物面形状の反射体はカメラの撮像領域より
も「大きく」なる。図示の垂直放物面の場合、この放物面がカメラの撮像領域よ
りも大きいとき全半球面よりも小さなFOVだけがカメラの撮像領域に含まれる
ことができる。この理由は、放物面の外側エッジで垂直反射した光線が撮像領域
に入射しないからである。しかしながら、有益なことに、この放物面形状のミラ
ーを用いて得られる画像は、小さな放物面を用いることにより得られる対応する
画像よりも一層高い分解能を有する。図13に示すように、放物面形状の反射体
1335の放物軸(Z’)を光軸(Z)に対して変移させて水平方向に向く視野
を得ることができる。さらに、この放物面形状の反射体1335は垂直放物面と
する必要はなく、撮像されるべきFOVに基づいて切断することができる。
、カメラ1411、光学系1412、及び凹面状の放物面形状反射体1435を
有する本発明による全方向撮像装置の実施例を示す。凹面状の放物面形状反射体
は、反射体を遮蔽することが望まれる用途(例えば、天候から保護が望まれるア
ウトドアの用途)において用いることができる。凹状の放物面形状の反射体の場
合、被写体の放物面画像が撮像され、この撮像される画像は前述した単一視点の
歪みを満足するように連続する。従って、凸状の放物面画像と同様に、凹状の放
物面画像から鮮明な透視画像を発生させることができる。しかしながら、凹状の
放物面の場合、単一の反射体を用いても高々半球面の視野しか得ることができな
い。この半球面のFOVは、放物面の焦点1435を通る面(この面は、放物面
の軸(Z)に対して垂直又は傾斜する)で放物面を切り取ることにより得られる
。焦点の上方で切られた凹状の放物面を用いることもできるが、このような放物
面は望ましいものではない。この理由は、画像自身に歪みが生ずるためである。
よりも大きいFOVを得ることができる。図25において、2個の放物面反射体
2535a及び2535bを用い、これらの放物面反射体が共通の光軸を占めこ
れらの頂点2545が一致するように配置する。イメージセンサ2511a及び
2511bと共に2個の放物面反射体2535a及び2535bは2個の半球面
2530a及び2530bをそれぞれ撮像することができる。この光学系は、遮
蔽又は保護のために反射体を引っ込ませる必要のある場合に有益に用いことがで
きる。図7の装置の凸面ミラーを用いる代りに、この装置において凹面ミラーを
用いる欠点は、2個の反射体の切断面間の領域を含む小さなブラインドスポット
が回避できないことである。
15の全方向撮像装置は、放物面形状の反射体1535、カメラ1511、ズー
ムレンズ1512、及びリレー光学素子1513を含む。(本明細書及び添付し
た請求の範囲で用いられているように、リレー光学系及びコリメータ光学系は同
義語である。)ズームレンズ1512が最小倍率に設定されている場合、この全
方向撮像装置は半球面全体の画像(図11又は図13の実施例が用いられる場合
、半球面よりも大きな又はそれ以下の画像)を撮像する。ズーム機能が作用する
と、ズームレンズ1512は、小さなFOVを一層高い倍率で(従って、一層高
い分解能で)撮像する。ズームイン中、ズームレンズ1512の有効投影中心を
ほぼ固定状態に維持して撮像光学系をテレセントリックに維持する必要がある。
好ましくは、リレー光学系1513を用いて、ズームレンズ1512をその全設
定範囲にわたってテレセントリックに維持する。
35に対して固定し又は移動可能のいずれともすることができる。ズームレンズ
1512が固定される場合、放物軸(Z)付近の領域だけを低い倍率で観察する
ことができる。従って、好ましくは、ズームレンズ1512を移動手段を用いて
装着し、放物面形状の反射体1535の外側端縁に沿う撮像領域全体にわたって
ズームレンズを位置決めできるようにする。勿論、この移動手段は、ズームレン
ズ1512の光軸が全ての場合についても放物面形状の反射体1535の放物軸
に並行に維持されるにする必要がある。
い全方向撮像システムを示す。放物面形状反射体1635を可動基部1640に
おいて取り付け、この可動基部1640は、x、yおよびz軸に沿った放物面形
状反射体1635の平行移動を可能にする。可動基部1640を、手動またはコ
ンピュータのいずれかによって制御してもよい。可動基部1640を使用して、
シーンのビューの動的に変化する領域を、例えば、光軸(z)のまわりの可動基
部1640の円運動によって発生することができる。好適には、これらの画像を
、上述したように画像処理し、遠近法ビューまたはパノラマ式ビューを得る。
使用をさらに示す。ズームレンズ1612は、可動ベース1640によって前記
撮像システムのビューに導かれた放物面形状反射体1635の部分にズームする
能力を付加する。好適には、リレーレンズ1613を使用し、前記ズームレンズ
と放物面形状反射体1635とを結合する。加えて、ズームレンズ1612は、
好適には、手動または自動フォーカス制御を含み、画像のシャープネスが放物面
形状反射体1635のすべての部分で保たれることを保証する。代わりに、z軸
に沿った前記反射体の移動を使用し、画像のフォーカスを調節してもよい。
記撮像システムのカメラまたは光学部の1つ以上の部分を代わりに動かし、図1
6の実施形態と同じ効果を達成してもよい。図17A、17Bおよび17Cは、
このような全方向撮像システムの種々の例としての実施形態を示す。図17Aに
おいて、(CCDのような)画像センサ1710に可動手段を設け、図17Bに
おいて、カメラ1711に可動手段を設け、図17Cにおいて、カメラ1711
および光学部1712の双方に、共に同時に動かす可動手段を設ける。これらの
図に示すように、これらの構成要素の各々を、x、yおよびz軸のいずれかに沿
って動かし、撮像されているビューの領域を変化させてもよい。図16の実施形
態におけるように、ズームレンズを使用し、興味のある領域を拡大してもよい。
有利には、前記放物面形状反射体を動かす代わりに前記カメラまたは光学部を動
かすことによって、前記全方向撮像システムの視点が、前記放物面形状反射体の
焦点において空間において固定されたままにする。
きな利点に使用することができる。これらの実施形態の全方向撮像能力は、オペ
レータが興味のある全体の領域を一度に監視することを可能にする。 前記オペレータが監視されている範囲の特定の領域を監視する場合、前記オペレ
ータは、このとき、(前記カメラ、光学部または放物面形状反射体の動きに関す
る)適切な平行移動座標と、適切なズーム設定とを選択し、興味のある領域をよ
り詳細に見てもよい。
撮像システムを示す。図18の実施形態は、放物面形状反射体1835と、ビデ
オエレクトロニクス部1809と、4個のCCD素子1810a−1810dと
、撮像光学部1812とを含む。この実施形態において、4個のCCD素子18
10a−1810dを重ならない配置において並べて置く。図18の実施形態は
、大量生産のCCD素子は代表的にこれらのサイズにかかわらず標準的な解像度
において製造されるという利点を得る。したがって、4個の大量生産1/4イン
チCCD素子を1個の大量生産1/2インチCCD素子の代わりに使用すること
によって、画像の解像度を有利に4倍にすることができる。図18が重ならない 配置に置いたCCD素子の使用を示すとしても、ここに記載した本発明は、この
ような配置に限定されない。したがって、多数のCCD素子が部分的に重なる配
置を同様に使用することができる。さらに、多数の画像センサを1個の集積回路
中に組立て、各画像センサをそれ自身のビデオ回路網に接続してもよい。
示す。この場合において、前記多数の画像センサを多数のカメラ1911によっ
て与える。ビーム分割器(図示せず)を使用し、放物面画像の別個の部分を異な
ったカメラに向ける。有利には、したがって、前記放物面画像の各部分は、画像
全体を1台のカメラのみによって撮像する場合よりも高い解像度で撮像される。
示せず)を使用し、画像を複数の単色画像に分割してもよく、これらの単色画像
を複数の単色画像検出器によって感知してもよい。これらの単色画像を、好適に
は、後に、フルカラー画像に、当該技術分野において既知の画像処理手段によっ
て結合してもよい。
な平面画像センサを放物面形状ミラーと共に使用することによって、獲得された
放物面画像の有効な解像度は、画像の中心におけるよりもその外縁に向かうにつ
れて上昇する。例えば、平面画像センサを使用し、通常の放物面形状反射体によ
って反射された画像を獲得した場合、この獲得された画像の解像度は、この画像
の中心からその縁まで、4の因数によって上昇する。この影響を補償するために
、画像センサは、そのサイズおよび配置を画像全体に渡って均一の解像度が生じ
るように変化させた検出素子を有する。この同じやり方を使用し、FOVの選択
された部分の解像度を上昇させることもできる。特定の解像度変化を取り入れる
のが困難な場合、ログポーラセンサによって与えられるような標準的な解像度変
化を使用することもできる。
、本発明による全方向撮像装置に含めてもよい。図21は、全方向撮像システム
が、放物面形状反射体2135と、平面ミラー2116と、リレーレンズ211
3と、撮像レンズ2112と、カメラ2111とを含む好適実施形態を示す。示
した実施形態において、放物面形状反射体2135を表面2140の上に配置し
、平面ミラー2116と、リレーレンズ2113と、撮像レンズ2112と、カ
メラ2111とを、表面2140の下に隠す。平面ミラー2116を表面214
0の開口部2145の下に配置し、平面ミラー2116は、放物面形状反射体か
らの画像を90度折り曲げ、それによって、前記画像を前記リレーレンズと、撮
像レンズと、カメラとに再び向ける。前記平面ミラーを、前記放物面形状反射体
とリレーレンズとの間に示したとしても、当業者には明らかなように、前記平面
ミラーを、前記リレーレンズと撮像レンズとの間、または、前記撮像レンズとカ
メラとの間に配置してもよい。
、低出力倒立顕微鏡対物レンズ2212を具える、全方向撮像システムの実施形
態を示す。この実施形態において、反射体2235を、前記顕微鏡のアイピース
によって通常占められる位置に置き、画像センサ2210を、スライドによって
通常占められる位置に置く。倒立顕微鏡対物レンズの使用は、大量生産顕微鏡対
物レンズは収差に関して良好に補償されることから、撮像に有利である。
部2312との間に配置した全方向撮像システムの実施形態を示す。多くの場合
において、商業的に利用可能な撮像レンズを使用し、特別なレンズを設計するコ
ストおよび時間を節約することが望ましい。しかしながら、大部分の大量生産撮
像レンズは、当該レンズからとても遠くにあるシーンを撮像することに向いてい
る。その上、これらのレンズは、通常、レンズから有限の距離の対象に関して設
計される。したがって、前記レンズに近い対象を撮像するのに使用すると、前記
画像は、前記レンズの有効な解像度を低下させる種々の形式の収差を受ける。こ
の結果は、「ぼけた」または不鮮明な画像となる。この実施形態において、この
問題を、コリメーティングレンズ2313の使用によって解決し、このコリメー
ティングレンズ2313は、撮像光学部2312に対して有限における視覚的対
象を発生する。有利には、したがって、コリメーティングレンズ2313の使用
は、商業的に利用可能な撮像レンズの使用を可能にする。
3との間の視野平坦化レンズの使用を説明する。数ミリメートルの代表的に短い
焦点距離を有する本発明の放物面形状反射体は、きわめて強い視野湾曲に悩まさ
れるため、視野平坦化手段は望ましい。この撮像欠点を取り除く1つの方法は、
前記視野湾曲に一致する曲面状表面を有する画像センサを使用することである。
しかしながらより好適には、前記反射体の湾曲と反対の符号の湾曲を有する視野
平坦化レンズと呼ばれる特別なレンズを導入してもよい。したがって、これら2
つの視野湾曲は打ち消し合い、結果として得られる画像表面は平坦で、画像全体
が平面画像センサにおいてシャープなフォーカスであることを可能にする。
サ2410にできるだけ接近して配置されている。好ましくは、この平凹レンズ
2412aをイメージセンサ窓2417と接触させて配置する。この配置によれ
ば、平凹レンズ2412aが、ほんの僅かの量の不所望な収差しか導入せずに反
射器の像面湾曲を補償する。
24bに示してある。このメニスカスレンズ2412bの両面は、到来する光に
対し不遊条件が満足されている。レンズ面が不遊条件を満足する場合には、この
レンズ面は球面収差、コマ収差又は非点収差を光ビームに導入せず、像面湾曲を
導入するだけである。メニスカスレンズ2412bは、レンズの厚さによって決
定される著しい視野平坦化効果を有し、レンズが厚くなればなるほど、視野平坦
化効果は大きくなる。図24Bに示すメニスカスレンズ2412bは、図24A
の平凹レンズ2412aと相違して、イメージセンサ2410と接触させて用い
ない。
るのが理想的である。焦点面が平面である場合、CCD又は他の種類のフラット
イメージセンサがその全面積に亙って最良焦点面に適合し、これにより像に対す
る解像度を最大にする。しかし、不都合なことに、光学系はその最良像を湾曲面
上に形成する傾向にある。従って、湾曲焦点面と平坦なCCD面とは、その全面
積に亙って適合しえず、像のある部分又は全てが最良焦点にない。
る光学素子は光学系に対するペッツヴァル湾曲に寄与する。光学素子の面が屈折
性である場合には、ペッツヴァル湾曲に対するこの光学素子の寄与は、 P=(1−n)/nR で表される。ここに、nは光学素子の屈折率であり、Rは光学素子の面の曲率半
径である。面のペッツヴァル湾曲への寄与は、曲率半径の正負符合に依存するこ
と明らかである。面が屈折面ではなく、反射面である場合には、そのペッツヴァ
ル湾曲に対する寄与は、 P=−2/R で表される。像の像面湾曲は反射面及び屈折面全ての寄与を合計し、この合計に
簡単な定数を乗じることにより、像の像面湾曲を計算する。この値が零でない場
合には、像の視野が湾曲し、上述した問題に遭遇する(すなわち、像の面とイメ
ージセンサの面とが完全に適合しない)。
球面収差、コマ収差及び非点収差のような他の目的に必要となる為である。これ
らの収差の制御は光学素子の曲率(湾曲度)に依存する為、これら素子の曲率が
変化する場合には、これらの収差に悪影響を及ぼすおそれがある。しかし、光学
系のペッツヴァル湾曲を、光学系の他の収差を変えることなく変えうる方法は2
つある。これらの2つの方法は、上述した2種類の視野平坦化レンズの根拠とな
る。
面に位置する光学面の光学特性に依存する。光学面が像の面に位置する場合、こ
の面は像の球面収差、コマ収差又は非点収差を変化させない。従って、ペッツヴ
ァル湾曲のみが変化する。従って、適切な曲率半径を有する面を光学系の最終焦
点に挿入することにより、光学系のペッツヴァル湾曲を補正することができる。
これが、上述した平凹視野平坦化レンズに対する根拠である。
以下のように規定した不遊面があるものとする。ここに、sは不遊面に対する物
体距離であり、s′は像距離である。又、n及びn′は面の前後の屈折率である
(空気の場合n=1であり、ガラスの場合n>1である)。s及びs′が s′=R(n′+n)/n′=ns/n′ の関係を満足する場合、面は球面収差又はコマ収差を導入せず、極めて少量の非
点収差のみを導入するにすぎない。ここで、厚肉のレンズを導入し、その両面が
この条件を満足するものとすると、これらの面の半径の差はレンズの厚さに依存
する。この場合も、この事実を用いて、不遊レンズの厚さを調整することにより
光学系のペッツヴァル湾曲を制御することができる。
て構成し、その屈折率(n)を1.517とする。その湾曲(凹)面r1 の半径
は6.2mmとする。この湾曲面r1 とは反対側の面は平坦とし、イメージセンサ
窓2417と接触して配置されている。レンズの光軸上の厚さは1.5mmとし、
光学的な直径は3mmとする。 図24Bの不遊レンズ2412bの好適例では、この不遊レンズをアクリルプ
ラスチックを以て構成し、その屈折率(n)を1.494とする。湾曲(凹)面
r2 の半径は2.16mmとする。レンズの光軸上の厚さは6.7mmとする。湾曲
面r2 の光学的直径は7mmとし、湾曲面r3 の光学的直径は2.7mmとする。
れず、幾多の変更を加えうること勿論である。
の側面図である。
ある。
らどのようにして見ることができるかを示す。
ジセンサを具える全方向撮像装置の側面図である。
ほぼ放物面状の反射器の断面図である。
グを示す。
な実施例のフローチャートである。
図である。
発明の全方向撮像装置の実施例の側面図である。
の全方向撮像装置の実施例の側面図である。
である。
ズを含む本発明の全方向撮像装置の実施例を示す側面図である。
像装置の実施例の部分等角投影図である。
向撮像装置の実施例の側面図であり、Bは可動のカメラを含む本発明の全方向撮
像装置の実施例の側面図であり、Cは可動のカメラ及び光学系を含む本発明の全
方向撮像装置の実施例の側面図である。
本発明の全方向撮像装置の実施例の部分等角投影図である。
像装置の実施例の側面図である。
例のイメージセンサの上面図である。
本発明の全方向撮像装置の実施例の側面図である。
ンズを含む本発明の全方向撮像装置の実施例の側面図である。
ンズを含む本発明の全方向撮像装置の実施例の側面図である。
の側面図であり、Bはアプラナチック面を有する像面平坦化メニスカスレンズを
含む本発明の全方向撮像装置の実施例の側面図である。
向撮像装置の実施例の側面図である。
反射器135はほぼ次式に従うような円筒座標r、φ及びz内にて規定され、 z=(h2−r2)/2h (1) ここにzは回転軸であり、rは半径方向の座標であり、hは定数である。z軸は 撮像装置の光軸と一致し、式(1)によって規定される放物面の焦点315は座標 系の起点と一致する。図3の反射器315は、z軸310に対してほぼ垂直で、しかも その反射器の放物面の焦点315を含む平面pで切頭したものである。
Claims (55)
- 【請求項1】 単一視点からシーンの像を検出する全方向撮像装置であって、 (a)前記シーンの電磁放射の主光線を垂直方向に反射するように配置され、そ
れ自体を有する前記全方向撮像装置の前記視点に一致する焦点を有する、切頭形
のほぼ放物面形状の反射器と、 (b)前記放物面形状の反射器に光学的に結合し、前記放物面形状によって垂直
方向に反射されない電磁放射の主光線をほとんど除去するテレセントリック手段
と、 (c)前記放物面から垂直方向に反射した電磁放射の主光線を受光するように配
置され、前記シーンの像を検知する1個以上のイメージセンサとを具えることを
特徴とする全方向撮像装置。 - 【請求項2】 前記放物面形状の反射器を凸形にしたことを特徴とする請求項1
記載の全方向撮像装置。 - 【請求項3】 前記放物面形状の反射器を凹形にしたことを特徴とする請求項1
記載の全方向撮像装置。 - 【請求項4】 前記放物面形状の反射器が、円柱座標で表現された式 z=(h2−r2)/2h にほぼ従う表面を有するほぼ放物面形状のミラーを具え、この場合、zを前記表
面の回転軸とし、rを半径座標とし、hを定数としたことを特徴とする請求項1
記載の全方向撮像装置。 - 【請求項5】 前記1個以上のイメージセンサが1個以上の電荷結合デバイスを
具えることを特徴とする請求項1記載の全方向撮像装置。 - 【請求項6】 前記1個以上のイメージセンサが1個以上の電荷注入デバイスを
具えることを特徴とする請求項1記載の全方向撮像装置。 - 【請求項7】 前記1個以上のイメージセンサが1個以上の写真フィルムを具え
ることを特徴とする請求項1記載の全方向撮像装置。 - 【請求項8】 前記1個以上のイメージセンサが1個以上のビデオカメラを具え
ることを特徴とする請求項1記載の全方向撮像装置。 - 【請求項9】 前記1個以上のイメージセンサが、前記像の像面湾曲に整合する
曲面を有することを特徴とする請求項1記載の全方向撮像装置。 - 【請求項10】 前記1個以上のイメージセンサのうちの少なくとも1個が、一
様でない解像度を有することを特徴とする請求項1記載の全方向撮像装置。 - 【請求項11】 前記1個以上のイメージセンサを、前記放物面形状の反射器の
頂点及び前記放物面形状の反射器の焦点を通過する軸線に沿って配置したことを
特徴とする請求項1記載の全方向撮像装置。 - 【請求項12】 前記放物面形状の反射器と前記1個以上のイメージセンサとの
間に配置され、前記放物面形状の反射器を前記1個以上のイメージセンサに光学
的に結合する1個以上の平面鏡を更に具えることを特徴とする請求項1記載の全
方向撮像装置。 - 【請求項13】 前記放物面形状の反射器が、前記放物面形状の反射器の焦点を
含む面で切頭したミラーを具えることを特徴とする請求項1記載の全方向撮像装
置。 - 【請求項14】 前記放物面形状の反射器が、前記放物面形状の反射器の頂点及
び前記放物面形状の反射器の焦点を通過する軸線にほぼ垂直な面で切頭したミラ
ーを具えることを特徴とする請求項1記載の全方向撮像装置。 - 【請求項15】 前記放物面形状の反射器が、通常の放物面形状のミラーを具え
ることを特徴とする請求項1記載の全方向撮像装置。 - 【請求項16】 前記放物面形状の反射器を前記1個以上のイメージセンサに結
合して相対位置を維持する透明支持部を更に具えることを特徴とする請求項1記
載の全方向撮像装置。 - 【請求項17】 固定部及び移動部を更に具え、前記放物面形状の反射器を前記
固定部に装着するとともに、前記1個以上のイメージセンサを前記移動部に装着
し、前記1個以上のイメージセンサの移動によって視界を変化させるようにした
ことを特徴とする請求項1記載の全方向撮像装置。 - 【請求項18】 前記1個以上のイメージセンサと前記放物面形状の反射器との
間に配置され、かつ、これらを光学的に結合するズームレンズを更に具えること
を特徴とする請求項17記載の全方向撮像装置。 - 【請求項19】 固定部及び移動部を更に具え、前記放物面形状の反射器を前記
移動部に装着するとともに、前記1個以上のイメージセンサを前記固定部に装着
し、前記1個以上のイメージセンサの移動によって視界を変化させるようにした
ことを特徴とする請求項1記載の全方向撮像装置。 - 【請求項20】 前記1個以上のイメージセンサと前記放物面形状の反射器との
間に配置され、かつ、これらを光学的に結合するズームレンズを更に具えること
を特徴とする請求項19記載の全方向撮像装置。 - 【請求項21】 前記1個以上のイメージセンサによって、前記シーンの像を表
すイメージ信号を発生させ、前記1個以上のイメージセンサに結合するとともに
前記イメージ信号を受信し及びそれをイメージ信号データに変換するイメージ信
号処理装置を更に具えることを特徴とする請求項1記載の全方向撮像装置。 - 【請求項22】 前記イメージ信号処理装置が、前記イメージ信号データをデカ
ルト座標系に写像して、投射像を発生させるようにしたことを特徴とする請求項
21記載の全方向撮像装置。 - 【請求項23】 前記イメージ信号処理装置が、前記イメージ信号データを円柱
座標系に写像して、パノラマ像を発生させるようにしたことを特徴とする請求項
21記載の全方向撮像装置。 - 【請求項24】 前記イメージ信号処理装置が、補完イメージデータを発生させ
る補完手段を更に有し、その補完イメージデータ及び前記イメージ信号データを
結合してデジタルイメージを形成するようにしたことを特徴とする請求項21記
載の全方向撮像装置。 - 【請求項25】 前記イメージ信号処理装置が、前記デジタルイメージの予め選
択した部分をズームインして、予め決定した焦点距離から前記予め選択した部分
の拡大像を発生させる手段を更に具えることを特徴とする請求項24記載の全方
向撮像装置。 - 【請求項26】 前記テレセントリック手段がテレセントリックレンズを具える
ことを特徴とする請求項1記載の全方向撮像装置。 - 【請求項27】 前記テレセントリック手段がテレセントリック開口を具えるこ
とを特徴とする請求項2記載の全方向撮像装置。 - 【請求項28】 前記1個以上のイメージせんさ及び前記放物面形状の半亜子器
を光学的に結合する少なくとも1個のレンズを更に具えることを特徴とする請求
項1記載の全方向撮像装置。 - 【請求項29】 前記少なくとも1個のレンズが、前記1個以上のイメージセン
サと前記1個以上のレンズとの間に焦平面を有し、前記テレセントリック手段を
、その焦平面に沿って配置したテレセントリック開口としたことを特徴とする請
求項28記載の全方向撮像装置。 - 【請求項30】 前記テレセントリック手段が、前記放物面形状の反射器と前記
少なくとも1個のレンズとを光学的に結合するコリメータレンズを具えることを
特徴とする請求項28記載の全方向撮像装置。 - 【請求項31】 前記1個以上のイメージセンサと前記放物面形状の反射器を光
学的に結合するズームレンズを更に具えることを特徴とする請求項1記載の全方
向撮像装置。 - 【請求項32】 前記1個以上のイメージセンサと前記放物面形状の反射器を光
学的に結合する対物レンズを更に具えることを特徴とする請求項1記載の全方向
撮像装置。 - 【請求項33】 前記1個以上のイメージセンサと前記放物面形状の反射器を光
学的に結合し、前記放物面形状の反射器の像面湾曲にほぼ対向する像面湾曲を有
するフラットニングレンズを更に具えることを特徴とする請求項1記載の全方向
撮像装置。 - 【請求項34】 前記フラットニングレンズが、前記1個以上のイメージセンサ
に近接して配置された平凹レンズを具えることを特徴とする請求項33記載の全
方向撮像装置。 - 【請求項35】 前記フラットニングレンズが、無収差側を有する凹凸レンズを
具えることを特徴とする請求項33記載の全方向撮像装置。 - 【請求項36】 前記シーンをほぼ半球形シーンとし、 追加の半球形シーンからの電磁放射の主光線を垂直方向に反射するように配置
され、前記追加の半球形シーンの単一視点に一致する焦点を有する、追加の切頭
形のほぼ放物面形状の反射器と、 その追加の放物面形状の反射器に光学的に結合し、前記追加の放物面形状の反
射器から垂直方向に反射しない電磁放射の主光線をほとんど除去する追加のテレ
セントリック手段と、 前記追加の放物面形状の反射器からの電磁放射の垂直方向に反射した主光線を
受光するように配置して、前記追加のほぼ半球形シーンを検知する追加の1個以
上のイメージセンサとを更に具えることを特徴とする請求項1記載の全方向撮像
装置。 - 【請求項37】 前記追加の半球形シーン及び半球シーンが相互に補足して、そ
の結合が十分な半球形シーンとなるようにし、前記放物線面形状の反射器及び追
加の放物面形状の反射器を、通常の凸形放物面とし、その切頭形の面に沿って背
面同士が対向するように配置し、共通の放物面軸及び共通の焦点を有することを
特徴とする請求項36記載の全方向撮像装置。 - 【請求項38】 前記追加の半球形シーン及び半球シーンが相互に補足して、そ
の結合が十分な半球形シーンとなるようにし、前記放物線面形状の反射器及び追
加の放物面形状の反射器を、通常の凹形放物面とし、これら頂点が一致するとと
もに共通の放物面軸を共有するように配置したことを特徴とする請求項36記載
の全方向撮像装置。 - 【請求項39】 単一視点からシーンの像を検知する全方向撮像方法であって、 (a)切頭形のほぼ放物面形状の反射器上のシーンからの電磁放射の主光線を垂
直方向に反射して、前記単一視点を前記放物面形状の反射器の焦点に一致させる
ステップと、 (b)前記放物面形状の反射器から垂直方向に反射しない電磁放射の任意の主光
線の大部分をテレセントリックに除去するステップと、 (c)前記放物面形状の反射器からの電磁放射の垂直方向に反射した主光線を、
1個以上のイメージセンサによって検知して、前記シーンの像を検知するステッ
プとを具える全方向撮像方法。 - 【請求項40】 前記ステップ(c)が、前記放物面形状の反射器の頂点及び前
記放物面形状の反射器の焦点を通過する軸線に沿った位置から前記シーンの像を
検知するステップを具えることを特徴とする請求項39記載の全方向撮像方法。 - 【請求項41】 前記放物面形状の反射器及び1個以上のイメージセンサを、こ
れらの間に配置した1個以上の平面鏡によって光学的に結合するステップを更に
具えることを特徴とする請求項39記載の全方向撮像方法。 - 【請求項42】 前記シーンのイメージを表すイメージ信号を発生させるととも
に、そのイメージ信号をイメージ信号データに変換するステップを更に具えるこ
とを特徴とする請求項39記載の全方向撮像方法。 - 【請求項43】 前記信号データをデカルト座標形に写像して、投影像を発生さ
せるステップを更に具えることを特徴とする請求項42記載の全方向撮像方法。 - 【請求項44】 前記イメージデータを円柱座標に写像して、パノラマイメージ
を発生させるステップを更に具えることを特徴とする請求項42記載の全方向撮
像方法。 - 【請求項45】 前記イメージ信号データを補完して、消失したイメージデータ
に対する近似値を規定するステップと、写像したイメージデータ及び補完したイ
メージデータからデジタルイメージを形成するステップとを更に具えることを特
徴とする請求項42記載の全方向撮像方法。 - 【請求項46】 前記デジタルイメージの予め選択した部分をズームインして、
予め決定した焦点距離から前記予め選択して部分の拡大像を取得するステップと
、前記イメージデータを補完して、消失したイメージデータに対する近似値を規
定するステップと、写像したイメージデータ及び補完したイメージデータからデ
ジタルイメージを形成するステップとを更に具えることを特徴とする請求項45
記載の全方向撮像方法。 - 【請求項47】 前記シーンをほぼ半球形とし、 追加の切頭形のほぼ放物面形状の反射器上の追加のほぼ半球形のシーンからの
電磁放射の主光線を垂直方向に反射して、その追加の半球形のシーンの単一視点
を、前記追加の半球形の反射器の焦点に一致させるステップと、 前記追加の放物面形状の反射器から垂直方向に反射しない電磁放射の主光線の
ほとんどをテレセントリックに除去するステップと、 前記追加の放物面形状の反射器からの電磁放射の垂直方向に反射した主光線を
、追加の1個以上のイメージセンサを用いて検知して、追加の半球形シーンを検
知するステップとを更に具えることを特徴とする請求項39記載の全方向撮像方
法。 - 【請求項48】 シーンの像を単一視点から全方向検知する方法であって、 (a)切頭形のほぼ放物面形状の反射器を固定部に装着するステップと、 (b)1個以上のイメージセンサを可動部に装着するステップと、 (c)前記放物面形状の反射器上の前記シーンからの電磁放射の主光線を垂直方
向に反射して、前記単一視点を、前記放物面形状の反射器の焦点に一致させるス
テップと、 (d)前記放物面形状の反射器から垂直方向に反射しない電磁放射の任意の主光
線の大部分をテレセントリックに除去するステップと、 (e)前記可動部を第1位置に移動させるステップと、 (f)前記1個以上のイメージセンサを用いて、前記放物面形状の反射器からの
電磁放射の垂直方向に反射した主光線を検知することによって、第1の視界を有
する前記シーンの第1像を検知するステップと、 (g)前記可動部を、前記第1位置から第2位置に移動させるステップと、 (h)前記1個以上のイメージセンサを用いて、前記放物面形状の反射器からの
電磁放射の垂直方向に反射した主光線を検知することによって、第2の視界を有
する前記シーンの第2像を検知するステップとを具えることを特徴とする方法。 - 【請求項49】 前記ほぼ放物面形状の反射器及び1個以上のイメージセンサを
、ズームレンズを用いて光学的に結合するステップを更に具えることを特徴とす
る請求項48記載の方法。 - 【請求項50】 前記シーン内の関心のある領域に、前記ズームレンズを第1の
拡大率で配置するステップと、 前記ズームレンズを、前記第1の拡大率より高い第2の拡大率に設定すること
によって、前記関心のある領域を拡大するステップとを更に具えることを特徴と
する請求項49記載の方法。 - 【請求項51】 シーンの像を単一視点から全方向検知する方法であって、 (a)切頭形のほぼ放物面形状の反射器を可動部に装着するステップと、 (b)1個以上のイメージセンサを固定部に装着するステップと、 (c)前記放物面形状の反射器上の前記シーンからの電磁放射の主光線を垂直方
向に反射して、前記単一視点を、前記放物面形状の反射器の焦点に一致させるス
テップと、 (d)前記放物面形状の反射器から垂直方向に反射しない電磁放射の任意の主光
線の大部分をテレセントリックに除去するステップと、 (e)前記可動部を第1位置に移動させるステップと、 (f)前記1個以上のイメージセンサを用いて、前記放物面形状の反射器からの
電磁放射の垂直方向に反射した主光線を検知することによって、第1の視界を有
する前記シーンの第1像を検知するステップと、 (g)前記可動部を、前記第1位置から第2位置に移動させるステップと、 (h)前記1個以上のイメージセンサを用いて、前記放物面形状の反射器からの
電磁放射の垂直方向に反射した主光線を検知することによって、第2の視界を有
する前記シーンの第2像を検知するステップとを具えることを特徴とする方法。 - 【請求項52】 前記ほぼ放物面形状の反射器及び1個以上のイメージセンサを
、ズームレンズを用いて光学的に結合するステップを更に具えることを特徴とす
る請求項51記載の方法。 - 【請求項53】 前記シーン内の関心のある領域に、前記ズームレンズを第1の
拡大率で配置するステップと、 前記ズームレンズを、前記第1の拡大率より高い第2の拡大率に設定すること
によって、前記関心のある領域を拡大するステップとを更に具えることを特徴と
する請求項51記載の方法。 - 【請求項54】 単一視点からシーンのイメージを検知する全方向撮像装置であ
って、 (a)そのシーンからの電磁放射の主光線を垂直方向に放射するように配置され
、それ自体を含む前記全方向撮像装置の単一視点に一致する焦点を有する、切頭
形のほぼ放物面形状の反射器と、 (b)前記放物面形状の反射器に光学的に結合し、前記放物面形状の反射器によ
って垂直方向に反射されない電磁放射の主光線をほとんど除去するテレセントリ
ック手段と、 (c)前記電磁放射の垂直方向に反射した主光線を、各々が前記放物面形状の反
射器からの電磁放射の垂直方向に反射した主光線の一部を具える複数の光線に分
離する複数のビームスプリッタと、 (d)前記複数の光線のうちの少なくとも一つを受信して、前記シーンの像の一
部を検知するように各々を配置した複数のイメージセンサとを具えることを特徴
とする全方向撮像装置。 - 【請求項55】 単一視点からシーンのイメージを検知する全方向撮像装置であ
って、 (a)そのシーンからの電磁放射の主光線を垂直方向に放射するように配置され
、それ自体を含む前記全方向撮像装置の単一視点に一致する焦点を有する、切頭
形のほぼ放物面形状の反射器と、 (b)前記放物面形状の反射器に光学的に結合し、前記放物面形状の反射器によ
って垂直方向に反射されない電磁放射の主光線をほとんど除去するテレセントリ
ック手段と、 (c)前記電磁放射の垂直方向に反射した主光線を、各々が前記放物面形状の反
射器からの電磁放射の垂直方向に反射した主光線の一部を具える複数の単色の主
光線に分離する複数のダイクロイックビームスプリッタと、 (d)前記複数の光線のうちの少なくとも一つを受信して、前記シーンの像の一
部を検知するように各々を配置した複数のイメージセンサとを具えることを特徴
とする全方向撮像装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US08/986,082 US6118474A (en) | 1996-05-10 | 1997-12-05 | Omnidirectional imaging apparatus |
US08/986,082 | 1997-12-05 | ||
PCT/US1998/025689 WO1999030197A1 (en) | 1997-12-05 | 1998-12-04 | An omnidirectional imaging apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001526471A true JP2001526471A (ja) | 2001-12-18 |
JP2001526471A5 JP2001526471A5 (ja) | 2006-01-19 |
Family
ID=25532061
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000524698A Pending JP2001526471A (ja) | 1997-12-05 | 1998-12-04 | 全方向撮像装置 |
Country Status (10)
Country | Link |
---|---|
US (1) | US6118474A (ja) |
EP (1) | EP1042697A1 (ja) |
JP (1) | JP2001526471A (ja) |
KR (1) | KR100599423B1 (ja) |
CN (1) | CN1290355A (ja) |
AU (1) | AU1903399A (ja) |
BR (1) | BR9813370A (ja) |
CA (1) | CA2312970A1 (ja) |
RU (1) | RU2201607C2 (ja) |
WO (1) | WO1999030197A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009147955A1 (ja) * | 2008-06-04 | 2009-12-10 | Yoshii Satoru | 全視野投影装置および全視野映像システム |
Families Citing this family (102)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6111702A (en) * | 1995-11-30 | 2000-08-29 | Lucent Technologies Inc. | Panoramic viewing system with offset virtual optical centers |
US6493032B1 (en) * | 1996-06-24 | 2002-12-10 | Be Here Corporation | Imaging arrangement which allows for capturing an image of a view at different resolutions |
US6226035B1 (en) | 1998-03-04 | 2001-05-01 | Cyclo Vision Technologies, Inc. | Adjustable imaging system with wide angle capability |
US6333749B1 (en) * | 1998-04-17 | 2001-12-25 | Adobe Systems, Inc. | Method and apparatus for image assisted modeling of three-dimensional scenes |
CA2371349A1 (en) | 1998-05-13 | 1999-11-18 | Scott Gilbert | Panoramic movies which simulate movement through multidimensional space |
US20010015751A1 (en) * | 1998-06-16 | 2001-08-23 | Genex Technologies, Inc. | Method and apparatus for omnidirectional imaging |
US6304285B1 (en) * | 1998-06-16 | 2001-10-16 | Zheng Jason Geng | Method and apparatus for omnidirectional imaging |
US6545702B1 (en) * | 1998-09-08 | 2003-04-08 | Sri International | Method and apparatus for panoramic imaging |
US6611282B1 (en) * | 1999-01-04 | 2003-08-26 | Remote Reality | Super wide-angle panoramic imaging apparatus |
FI114244B (fi) * | 1999-05-11 | 2004-09-15 | Teknillinen Korkeakoulu | Kamerajärjestelmä ja näyttölaite |
US6738073B2 (en) * | 1999-05-12 | 2004-05-18 | Imove, Inc. | Camera system with both a wide angle view and a high resolution view |
US7050085B1 (en) | 2000-10-26 | 2006-05-23 | Imove, Inc. | System and method for camera calibration |
US6690374B2 (en) * | 1999-05-12 | 2004-02-10 | Imove, Inc. | Security camera system for tracking moving objects in both forward and reverse directions |
AU5315700A (en) * | 1999-06-02 | 2000-12-18 | Cyclovision Technologies, Inc. | Omni-directional security and lighting system |
US7015954B1 (en) * | 1999-08-09 | 2006-03-21 | Fuji Xerox Co., Ltd. | Automatic video system using multiple cameras |
US7256834B1 (en) | 2000-03-17 | 2007-08-14 | Axis, Ab | Digital camera having panning and/or tilting functionality, and an image rotating device for such a camera |
FR2806809B1 (fr) * | 2000-03-22 | 2002-11-22 | Powell Group | Dispositif d'aquisition d'image panoramique |
WO2001071424A1 (fr) * | 2000-03-22 | 2001-09-27 | Egg Solution Optronics Sa | Dispositif de grossissement pour systeme de capture d'images d'anamorphose panoramiques |
JP2001333303A (ja) * | 2000-05-23 | 2001-11-30 | Sharp Corp | 全方位視覚システム |
JP3549463B2 (ja) * | 2000-06-02 | 2004-08-04 | 松下電器産業株式会社 | カメラ装置 |
KR100343836B1 (ko) * | 2000-06-27 | 2002-07-20 | 이성환 | 파노라마 영상 감시 시스템 및 그 제어방법 |
JP4750927B2 (ja) * | 2000-06-30 | 2011-08-17 | 日本ネットワークサービス株式会社 | 遠隔監視方法および監視制御サーバ |
SE519734C2 (sv) * | 2000-07-07 | 2003-04-01 | Axis Ab | Bildförändringsanordning för en bildalstrande apparat samt metod och digitalkamera till densamma |
JP2002196438A (ja) * | 2000-10-20 | 2002-07-12 | Matsushita Electric Ind Co Ltd | 広角撮像装置 |
JP3804916B2 (ja) * | 2001-02-09 | 2006-08-02 | シャープ株式会社 | 撮像システムとその画像データ制御に用いられるプログラムおよびその撮像システムにおける撮像画像の歪み補正方法とその手順を記憶させた記憶媒体 |
US6856472B2 (en) * | 2001-02-24 | 2005-02-15 | Eyesee360, Inc. | Panoramic mirror and system for producing enhanced panoramic images |
AU2002254217A1 (en) * | 2001-02-24 | 2002-09-12 | Eyesee360, Inc. | Method and apparatus for processing photographic images |
US6594448B2 (en) | 2001-02-24 | 2003-07-15 | Eyesee360, Inc. | Radially-oriented planar surfaces for flare reduction in panoramic cameras |
US20020147773A1 (en) * | 2001-02-24 | 2002-10-10 | Herman Herman | Method and system for panoramic image generation using client-server architecture |
US6963355B2 (en) * | 2001-02-24 | 2005-11-08 | Eyesee380, Inc. | Method and apparatus for eliminating unwanted mirror support images from photographic images |
US6831643B2 (en) * | 2001-04-16 | 2004-12-14 | Lucent Technologies Inc. | Method and system for reconstructing 3D interactive walkthroughs of real-world environments |
JP2002334322A (ja) * | 2001-05-10 | 2002-11-22 | Sharp Corp | 透視投影画像生成システム、透視投影画像生成方法、透視投影画像生成プログラムおよび透視投影画像生成プログラムを記憶した記憶媒体 |
US7312810B2 (en) | 2001-05-25 | 2007-12-25 | Matsushita Electric Industrial Co., Ltd. | Wide-angle image generating device |
US7362969B2 (en) * | 2001-05-29 | 2008-04-22 | Lucent Technologies Inc. | Camera model and calibration procedure for omnidirectional paraboloidal catadioptric cameras |
US6937266B2 (en) * | 2001-06-14 | 2005-08-30 | Microsoft Corporation | Automated online broadcasting system and method using an omni-directional camera system for viewing meetings over a computer network |
US6744569B2 (en) | 2001-06-19 | 2004-06-01 | Genex Technologies, Inc | Method and apparatus for omnidirectional three dimensional imaging |
FR2830128A1 (fr) * | 2001-09-26 | 2003-03-28 | Egg Solution Sa | Capteur photoelectrique avec des elements de capture de pixels disposes en cercles concentriques et dispositif d'acquisition d'images panoramiques comprenant ce capteur |
US7123777B2 (en) * | 2001-09-27 | 2006-10-17 | Eyesee360, Inc. | System and method for panoramic imaging |
US7058239B2 (en) * | 2001-10-29 | 2006-06-06 | Eyesee360, Inc. | System and method for panoramic imaging |
DE10158415C2 (de) * | 2001-11-29 | 2003-10-02 | Daimler Chrysler Ag | Verfahren zur Überwachung des Innenraums eines Fahrzeugs, sowie ein Fahrzeug mit mindestens einer Kamera im Fahrzeuginnenraum |
JP2003223633A (ja) * | 2002-01-29 | 2003-08-08 | Sharp Corp | 全方位視覚システム |
US7904826B2 (en) * | 2002-03-29 | 2011-03-08 | Microsoft Corporation | Peek around user interface |
US7852369B2 (en) * | 2002-06-27 | 2010-12-14 | Microsoft Corp. | Integrated design for omni-directional camera and microphone array |
FR2842306A1 (fr) * | 2002-07-12 | 2004-01-16 | Egg Solution Optronics | Dispositif d'acquisition grand-angle d'ondes electromagnetiques, procede et appareil de detection et de visee utilisant un tel dispositif d'acquisition |
US7429996B2 (en) * | 2002-07-16 | 2008-09-30 | Intel Corporation | Apparatus and method for sensing depth in every direction |
US7042508B2 (en) * | 2002-07-26 | 2006-05-09 | Appro Technology Inc. | Method for presenting fisheye-camera images |
US7133031B2 (en) * | 2002-10-31 | 2006-11-07 | Microsoft Corporation | Optical system design for a universal computing device |
US20040184653A1 (en) * | 2003-03-20 | 2004-09-23 | Baer Richard L. | Optical inspection system, illumination apparatus and method for use in imaging specular objects based on illumination gradients |
US20040254424A1 (en) * | 2003-04-15 | 2004-12-16 | Interscience, Inc. | Integrated panoramic and forward view endoscope |
US7450165B2 (en) * | 2003-05-02 | 2008-11-11 | Grandeye, Ltd. | Multiple-view processing in wide-angle video camera |
US7126603B2 (en) * | 2003-05-30 | 2006-10-24 | Lucent Technologies Inc. | Method and system for creating interactive walkthroughs of real-world environment from set of densely captured images |
US8896660B2 (en) * | 2003-05-30 | 2014-11-25 | Alcatel Lucent | Method and apparatus for computing error-bounded position and orientation of panoramic cameras in real-world environments |
US7313285B2 (en) * | 2003-05-30 | 2007-12-25 | Lucent Technologies Inc. | Method and apparatus for compressing and decompressing images captured from viewpoints throughout N-dimensional space |
US7356164B2 (en) * | 2003-05-30 | 2008-04-08 | Lucent Technologies Inc. | Method and apparatus for finding feature correspondences between images captured in real-world environments |
US7118228B2 (en) * | 2003-11-04 | 2006-10-10 | Hewlett-Packard Development Company, L.P. | Image display system |
US7268956B2 (en) * | 2003-11-24 | 2007-09-11 | Electronic Scripting Products, Inc. | Solid catadioptric lens with two viewpoints |
US7038846B2 (en) * | 2003-11-24 | 2006-05-02 | Electronic Scripting Products, Inc. | Solid catadioptric lens with a single viewpoint |
GB2408661B (en) * | 2003-11-27 | 2008-02-06 | Sony Comp Entertainment Europe | Image rendering |
US7548803B2 (en) * | 2004-01-21 | 2009-06-16 | Maccarthy James | Vehicle surveillance and control system |
US8130827B2 (en) | 2004-08-13 | 2012-03-06 | Samsung Electronics Co., Ltd. | Method and apparatus for interpolating a reference pixel in an annular image and encoding/decoding an annular image |
EP1793587B8 (en) * | 2004-09-14 | 2012-12-26 | Fujitsu Ltd. | Image processor, image processing method and image processing program |
US7812882B2 (en) * | 2004-12-30 | 2010-10-12 | Microsoft Corporation | Camera lens shuttering mechanism |
EP1729102B1 (en) * | 2005-05-24 | 2019-04-24 | Yonathan Gerlitz | Detector with miniature optics for constant energy collection from different distances |
US20070045522A1 (en) * | 2005-09-01 | 2007-03-01 | Yi-Tsung Chien | Omnidirectional electromagnetic sensing device |
CN100469137C (zh) * | 2006-06-19 | 2009-03-11 | 浙江工业大学 | 具有考虑心里感觉功能的全方位监控视觉装置 |
US9361943B2 (en) * | 2006-11-07 | 2016-06-07 | The Board Of Trustees Of The Leland Stanford Jr. University | System and method for tagging objects in a panoramic video and associating functions and indexing panoramic images with same |
WO2008066742A1 (en) * | 2006-11-22 | 2008-06-05 | Geng Z Jason | Wide field-of-view reflector and method of designing and making same |
US20090073254A1 (en) * | 2007-09-17 | 2009-03-19 | Hui Li | Omnidirectional imaging system with concurrent zoom |
US8077401B2 (en) * | 2007-10-03 | 2011-12-13 | Ricoh Co., Ltd. | Catadioptric imaging system |
US8203596B1 (en) * | 2007-12-20 | 2012-06-19 | Lockheed Martin Corporation | Panoramic imaging system with dual imagers |
JP4787292B2 (ja) * | 2008-06-16 | 2011-10-05 | 富士フイルム株式会社 | 全方位撮像装置 |
US8587770B1 (en) | 2008-09-24 | 2013-11-19 | Jetprotect Corporation | Aircraft collision warning system |
US9100562B2 (en) * | 2009-04-13 | 2015-08-04 | Massachusetts Institute Of Technology | Methods and apparatus for coordinated lens and sensor motion |
CN101923179B (zh) * | 2009-11-06 | 2013-04-24 | 中国科学院空间科学与应用研究中心 | 一种全天空大气重力波成像仪 |
CN101706588B (zh) * | 2009-11-10 | 2013-04-24 | 中国科学院空间科学与应用研究中心 | 一种采用鱼眼镜头和远心光路的全天空大气重力波成像仪 |
KR101091564B1 (ko) | 2009-12-22 | 2011-12-13 | 연세대학교 산학협력단 | 전방향 카메라 |
FI20105058A0 (fi) * | 2010-01-22 | 2010-01-22 | Valtion Teknillinen | Omnidirektionaalinen linssi, linssiä hyödyntävät optiset laitteet sekä menetelmä optiseksi mittaamiseksi |
KR20110120590A (ko) | 2010-04-29 | 2011-11-04 | 삼성전자주식회사 | 광학 시스템 및 이를 적용한 영상투사장치 |
DE102010026572B4 (de) * | 2010-07-08 | 2013-10-31 | Michael Kanna | Verfahren zur Aufnahme und Wiedergabe von Panoramadarstellungen |
CN102043322A (zh) * | 2010-11-09 | 2011-05-04 | 浙江工业大学 | 便携式360°环幕影院系统 |
CN103562791A (zh) * | 2011-04-18 | 2014-02-05 | 眼见360股份有限公司 | 用于与移动计算设备一起进行全景视频成像的装置和方法 |
DE112012005632A5 (de) * | 2012-01-11 | 2014-10-23 | Michael Kanna | Verfahren und Einrichtung zur Aufnahme und Wiedergabe von Panoramadarstellungen |
FR2986337B1 (fr) * | 2012-01-31 | 2014-09-05 | Jean-Pierre Lauret | Systeme optique destine a mesurer la brdf, bsdf et bdtf |
CN102736396B (zh) * | 2012-07-23 | 2015-02-04 | 中国人民解放军国防科学技术大学 | 双曲凹面折反射全景相机及其制作方法和应用 |
US9071752B2 (en) * | 2012-09-25 | 2015-06-30 | National Chiao Tung University | Scene imaging method using a portable two-camera omni-imaging device for human-reachable environments |
FR3007613A1 (fr) * | 2013-06-20 | 2014-12-26 | Eurekam | Dispositif de prise de vue pour l'elaboration securisee de preparations medicamenteuses, support de positionnement d'objets associe, et systeme incluant un tel dispositif et un tel support |
US9817243B2 (en) * | 2015-01-27 | 2017-11-14 | Microsoft Technology Licensing, Llc | Imaging apparatus |
US9979885B2 (en) * | 2015-02-09 | 2018-05-22 | Steven Christopher Sparks | Apparatus and method for capture of 360° panoramic video image and simultaneous assembly of 360° panoramic zoetropic video image |
US10649317B2 (en) | 2015-03-24 | 2020-05-12 | Batelle Memorial Institute | Imaging system and method of creating images |
DE102015215836B4 (de) | 2015-08-19 | 2017-05-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung mit einer reflektierende Facetten aufweisenden Strahlumlenkvorrichtung |
JP6833348B2 (ja) * | 2016-05-25 | 2021-02-24 | キヤノン株式会社 | 情報処理装置、画像処理システム、情報処理装置の制御方法、仮想視点画像の生成方法、及び、プログラム |
TWI773677B (zh) * | 2017-06-30 | 2022-08-11 | 揚明光學股份有限公司 | 廣角投影鏡頭 |
WO2019117569A1 (en) | 2017-12-14 | 2019-06-20 | Samsung Electronics Co., Ltd. | Method and apparatus for managing immersive data |
CN108055513A (zh) * | 2017-12-31 | 2018-05-18 | 北京机械设备研究所 | 全景视频安防监控装置 |
JP7129654B2 (ja) * | 2018-04-04 | 2022-09-02 | パナソニックIpマネジメント株式会社 | 赤外線検出装置 |
US10951859B2 (en) | 2018-05-30 | 2021-03-16 | Microsoft Technology Licensing, Llc | Videoconferencing device and method |
US10740957B1 (en) * | 2018-06-14 | 2020-08-11 | Kilburn Live, Llc | Dynamic split screen |
US10573060B1 (en) * | 2018-06-14 | 2020-02-25 | Kilburn Live, Llc | Controller binding in virtual domes |
US11394468B2 (en) * | 2019-03-22 | 2022-07-19 | Source Photonics Inc. | System and method for transferring optical signals in photonic devices and method of making the system |
WO2020264098A1 (en) * | 2019-06-25 | 2020-12-30 | Intelligent Commute Llc | Extensiview and adaptive lka for adas and autonomous driving |
CN110441311B (zh) * | 2019-07-22 | 2021-10-08 | 中国科学院上海光学精密机械研究所 | 用于多物面成像的多轴多焦镜头 |
CN115327849B (zh) * | 2022-09-05 | 2024-02-06 | 同济人工智能研究院(苏州)有限公司 | 一种全景镜头及气体监测设备 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US2638033A (en) * | 1950-12-19 | 1953-05-12 | Buchele Donald Robert | Unitary catadioptric objective lens system |
US3505465A (en) * | 1967-04-21 | 1970-04-07 | Us Army | Panoramic television viewing system |
US4045116A (en) * | 1975-02-27 | 1977-08-30 | Russa Joseph A | Wide angle optical imaging system |
US4136926A (en) * | 1978-04-14 | 1979-01-30 | The United States Of America As Represented By The United States Department Of Energy | Achromatic illumination system for small targets |
US4395093A (en) * | 1981-05-21 | 1983-07-26 | The United States Of America As Represented By The Secretary Of The Navy | Lens system for panoramic imagery |
US4421721A (en) * | 1981-10-02 | 1983-12-20 | The Board Of Trustees Of The Leland Stanford Junior University | Apparatus for growing crystal fibers |
JPS59115677A (ja) * | 1982-12-22 | 1984-07-04 | Hitachi Ltd | 画像処理装置 |
HU192125B (en) * | 1983-02-08 | 1987-05-28 | Budapesti Mueszaki Egyetem | Block of forming image for centre theory projection adn reproduction of spaces |
USD312263S (en) | 1987-08-03 | 1990-11-20 | Charles Jeffrey R | Wide angle reflector attachment for a camera or similar article |
US4820048A (en) * | 1987-11-19 | 1989-04-11 | The Perkin-Elmer Corporation | Detector for a spectrometer |
US5029963A (en) * | 1990-02-15 | 1991-07-09 | Itt Corporation | Replacement device for a driver's viewer |
JPH04185075A (ja) * | 1990-11-20 | 1992-07-01 | Canon Inc | カラー画像処理装置 |
US5185667A (en) * | 1991-05-13 | 1993-02-09 | Telerobotics International, Inc. | Omniview motionless camera orientation system |
US5359363A (en) * | 1991-05-13 | 1994-10-25 | Telerobotics International, Inc. | Omniview motionless camera surveillance system |
US5530650A (en) * | 1992-10-28 | 1996-06-25 | Mcdonnell Douglas Corp. | Computer imaging system and method for remote in-flight aircraft refueling |
EP0623268A1 (en) * | 1992-11-24 | 1994-11-09 | Geeris Holding Nederland B.V. | A method and device for producing panoramic images, and a method and device for consulting panoramic images |
US5473474A (en) * | 1993-07-16 | 1995-12-05 | National Research Council Of Canada | Panoramic lens |
US5610391A (en) * | 1994-08-25 | 1997-03-11 | Owens-Brockway Glass Container Inc. | Optical inspection of container finish dimensional parameters |
FR2731896B1 (fr) * | 1995-03-24 | 1997-08-29 | Commissariat Energie Atomique | Dispositif de mesure de la position du point de fixation d'un oeil sur une cible, procede d'eclairage de l'oeil et application a l'affichage d'images dont les images changent en fonction des mouvements de l'oeil |
JPH08275066A (ja) * | 1995-03-29 | 1996-10-18 | Toshiba Corp | パノラマカメラ |
CA2146406A1 (en) * | 1995-04-05 | 1996-10-06 | Ian Powell | Panoramic fish-eye imaging system |
US5627675A (en) * | 1995-05-13 | 1997-05-06 | Boeing North American Inc. | Optics assembly for observing a panoramic scene |
US5539483A (en) * | 1995-06-30 | 1996-07-23 | At&T Corp. | Panoramic projection apparatus |
US5760826A (en) * | 1996-05-10 | 1998-06-02 | The Trustees Of Columbia University | Omnidirectional imaging apparatus |
US6459451B2 (en) * | 1996-06-24 | 2002-10-01 | Be Here Corporation | Method and apparatus for a panoramic camera to capture a 360 degree image |
-
1997
- 1997-12-05 US US08/986,082 patent/US6118474A/en not_active Expired - Lifetime
-
1998
- 1998-12-04 KR KR1020007006159A patent/KR100599423B1/ko not_active IP Right Cessation
- 1998-12-04 WO PCT/US1998/025689 patent/WO1999030197A1/en active IP Right Grant
- 1998-12-04 CA CA002312970A patent/CA2312970A1/en not_active Abandoned
- 1998-12-04 AU AU19033/99A patent/AU1903399A/en not_active Abandoned
- 1998-12-04 EP EP98963782A patent/EP1042697A1/en not_active Withdrawn
- 1998-12-04 CN CN98813411A patent/CN1290355A/zh active Pending
- 1998-12-04 JP JP2000524698A patent/JP2001526471A/ja active Pending
- 1998-12-04 RU RU2000117577/28A patent/RU2201607C2/ru not_active IP Right Cessation
- 1998-12-04 BR BR9813370-5A patent/BR9813370A/pt not_active Application Discontinuation
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009147955A1 (ja) * | 2008-06-04 | 2009-12-10 | Yoshii Satoru | 全視野投影装置および全視野映像システム |
US8256902B2 (en) | 2008-06-04 | 2012-09-04 | Satoru Yoshii | Entire visual-field projection device, and entire-visual-field image system |
Also Published As
Publication number | Publication date |
---|---|
CA2312970A1 (en) | 1999-06-17 |
AU1903399A (en) | 1999-06-28 |
WO1999030197A1 (en) | 1999-06-17 |
EP1042697A1 (en) | 2000-10-11 |
CN1290355A (zh) | 2001-04-04 |
KR20010024698A (ko) | 2001-03-26 |
US6118474A (en) | 2000-09-12 |
RU2201607C2 (ru) | 2003-03-27 |
KR100599423B1 (ko) | 2006-07-10 |
BR9813370A (pt) | 2001-08-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2001526471A (ja) | 全方向撮像装置 | |
JP4023827B2 (ja) | 全方向性撮像装置 | |
JP3485261B2 (ja) | 半球状視野の電子結像及び処理のためのシステム及び方法 | |
Nayar | Catadioptric omnidirectional camera | |
US6856472B2 (en) | Panoramic mirror and system for producing enhanced panoramic images | |
US6449103B1 (en) | Solid catadioptric omnidirectional optical system having central coverage means which is associated with a camera, projector, medical instrument, or similar article | |
Nayar | Omnidirectional video camera | |
US6594448B2 (en) | Radially-oriented planar surfaces for flare reduction in panoramic cameras | |
US6226035B1 (en) | Adjustable imaging system with wide angle capability | |
Nayar | Omnidirectional vision | |
JPH11331654A (ja) | 全方位視角センサ | |
KR20020007211A (ko) | 전방위 시각 센서 | |
US20050117227A1 (en) | Panoramic imaging system with optical zoom capability | |
KR100482727B1 (ko) | 전방향성결상장치및방법 | |
US7253969B2 (en) | Spherical and nearly spherical view imaging assembly | |
Ohte et al. | A practical spherical mirror omnidirectional camera | |
CA2251879C (en) | Omnidirectional imaging apparatus | |
CN210803962U (zh) | 全景环形成像光学系统 | |
MXPA00005531A (en) | An omnidirectional imaging apparatus | |
JP2002262157A (ja) | 多重焦点全方位撮像装置 | |
WO2002069035A2 (en) | Panoramic mirror and system for producing panoramic images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051125 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051125 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060712 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060801 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20061101 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20061109 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070424 |