JP4590754B2

JP4590754B2 - 画像入力処理装置

Info

Publication number: JP4590754B2
Application number: JP2001053946A
Authority: JP
Inventors: 敏美小山
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2001-02-28
Filing date: 2001-02-28
Publication date: 2010-12-01
Anticipated expiration: 2021-02-28
Also published as: JP2002262307A

Description

【０００１】
【発明の属する技術分野】
本発明は、光ファイバー素線を多数束ねて多芯構造体に構成し、その構造体を用いて構成した複数の画像入力部を放射状に配置して、全方位立体動画映像を撮影できるようにするとともに、肉眼より遥かに広い範囲の映像を取り込むことができるように構成した画像入力処理装置（以下「画像入力装置」とも記載する）に関するものである。
【０００２】
【従来の技術】
従来から立体映像を撮影するための画像入力装置は、幾つか考案されている。図１３（ａ）及び図１４（ｂ）はその原理を説明するための概略構成図で、図１３（ａ）はミラー（プリズム）式立体映像撮影装置、図１４（ａ）は２台のカメラを用いた立体映像撮影装置である。図１３（ａ）はプリズム式立体映像撮影装置を示し、この撮影装置は、カメラレンズ６１の前方に第１プリズム６２を配置し、その第１プリズム６２の左右に一定間を隔てて第２、第３プリズム６３、６４を配置し、前方の映像を視差を持った２つの映像として、１台のカメラ６５に記録するものである。なお、図１３（ｂ），（ｃ）は、カメラ部６５に記録された映像イメージの１例を示すものである。
【０００３】
図１４は２台のカメラを用いた立体映像撮影装置を示し、この撮影装置は、２台のカメラ６６、６７を一定の間隔を隔てて左右に配置し、両カメラ６６、６７で同時に被写体を撮影記録し、視差を持った映像を得るものである。なお、図１４（ｂ），（ｃ）は、カメラ６６、６７で撮影した映像で、カメラ６６による映像を「左目用映像」、カメラ６７による映像を「右目用映像」としている。
【０００４】
また、非常に広い画角の映像を取り込める、所謂、全方位撮影を可能とした画像入力装置が、従来から幾つか考案されている。その内の１つは、図１５（ａ）に示す反射ミラー式パノラマ撮影装置で、この撮影装置は、例えば、建物の天井に凸面鏡からなる反射ミラー部７１を取り付け、その反射ミラー部７１の真下に一定距離を隔てて撮影用のカメラ部７２を配置して、そのカメラ部７２で反射ミラー部７１に映し出された映像を取り込むように構成されたものである。図１５（ｂ）は、カメラ部７２で取り込んだ映像を示すもので、この映像は大変歪んだ像となる。
【０００５】
さらに、全方位撮影を可能とした他の１つは、図１６（ａ）に示す超広角レンズ式パノラマ撮影装置のように、超広角レンズ部７３を取り付けたカメラ部７２で撮影するものである。この場合における撮影の映像も同図（ｂ）に示すように大変歪んだ像となる。
【０００６】
【発明が解決しようとする課題】
前述した立体映像を撮影する画像入力装置では、既存の撮影システムを使用している関係で、画角については、カメラのレンズに左右されるとともに、撮影収録システムも大型化する欠点があった。また、再生時は、収録した映像を、そのままの画角で左目用と右目用とに分けて再生するのが一般的であり、自由な視点で立体映像を見るようなシステムでは無かった。すなわち、見る場合は、撮影者の意図した画角とアングル等の範囲内でしか、再生できないのが常であった。
【０００７】
また、前述した全方位撮影による画像入力装置では、全方位の映像を光学的に非常に歪ませた形で撮影部に取り込み、全方位撮影を行う手段を採用している。このため、撮影部に得られる全方位の映像は、非常に歪みのあるものとなってしまうために、通常歪みの無い映像に処理するには、膨大な演算処理を必要とする問題があった。
【０００８】
上記全方位撮影による画像入力装置は、いずれも、単眼による映像であり、例えば、これらの装置を２台使用して映像を記録しても、自由な視点で全方位にアクセス可能な立体動画映像は実現できないのが現状である。また、必ずもう一方のカメラが視野な中に入ってしまうという欠点がある。
【０００９】
本発明は上記の事情に鑑みてなされたもので、簡単なシステムで全方位立体動画映像を撮影記録することができ、再生時には、ある画角以下の任意の画角で、且つ自由な視点で、再生中にも視点移動が可能な立体映像を提供でき、また、撮影用のカメラは１台であり、かつ視野を遮ることもなく、しかも非常に広い画角の映像を取り込めるようにした画像入力装置を提供することを課題とする。
【００１０】
【課題を解決するための手段】
上記の課題を解決するために、本発明の画像入力処理装置は、光ファイバー素線が多数束ねられて構成された複数の多芯構造体と、これら複数の多芯構造体の各一端に形成された画像を取り込む複数の画像入力部と、これら画像入力部の画像取り込み画角を、隣接する画像入力部間でオーバーラップさせるように画像入力部を同一平面状に一定の角度間隔を保持して配置した画像入力ユニットと、前記多芯構造体の各一端に設けられた前記画像入力部から取り込んだ画像を、前記多芯構造体によりその他端に導いて光学的手段を介してイメージセンサで読み取り電気信号に変換する信号処理部と、前記信号処理部で変換された電気信号を入力し、各画像入力部について、隣接する画像入力部で取り込まれたオーバーラップする画像領域の信号を用いて視差を認識できるように画像を構成するための処理を行う演算処理部と、を具備したことを特徴とする。
【００１１】
また、本発明による画像入力処理装置は、光ファイバー素線が多数束ねられて構成された複数の多芯構造体と、これら複数の多芯構造体の各一端に形成された画像を取り込む複数の画像入力部と、これら画像入力部を同一平面状に一定の角度間隔を保持して放射状に配置された第１画像入力ユニットと、この第１画像入力ユニットの下部に配置され、そのユニットの画像入力部とは異なった視線方向からの画像を取り込めるように画像入力部を同一平面状に一定の角度間隔を保持して配置された第２画像入力ユニットと、前記多芯構造体の各一端に設けられた前記第１、第２画像入力ユニットのそれぞれの画像入力部から取り込んだ画像を、前記多芯構造体により、その他端に導いて光学的手段を介してイメージセンサで読み取り電気信号に変換する信号処理部と、前記信号処理部で変換された電気信号を入力し、前記第１、第２画像入力ユニットのそれぞれの画像入力部から取り込んだ画像信号を用いて視差を認識できるように画像を構成するための処理を行う演算処理部と、を具備したことを特徴とする。
【００１２】
【発明の実施の形態】
以下本発明の実施の形態を図面に基づいて説明する。
【００１３】
［実施の第１形態］
図１（ａ）、（ｂ）は本発明の実施の第１形態を、光ファイバーを用いた水平360度撮影用カメラに適用したときの概略的な構成図および撮影用カメラ（画像入力部）の構成配置説明図で、図１（ａ）において、カメラユニット（画像入力ユニット）１１は、外周面が１２面体に構成された円形体からなり、そのユニット１１の内部には、後述する光ファイバーからなる画像入力部１２ａ、１２ｂ、１２ｃ……が収納され、その画像入力部１２ａ、１２ｂ、１２ｃ……の先端の対物レンズ１３ａ、１３ｂ、１３ｃ……は、前記１２面体の表面に望まれるように設けられる。前記カメラユニット１１は、支柱１４の上部に支持固定される。なお、カメラユニット１１の下部には、図示しないが、１２個のマイクロフォンが画像入力部１２ａ、１２ｂ、１２ｃ……に対応して配置されている。
【００１４】
前記カメラユニット１１の内部には、図１（ｂ）に示すように、画像入力部１２ａ、１２ｂ、１２ｃ……が、周囲360度に対し１２個放射状に一定の角度（図においては３０度づつの角度）間隔を保持して等間隔に配置されている。
【００１５】
前記画像入力部１２ａ、１２ｂ、１２ｃ……は、図２（ａ）〜（ｃ）に示すように、光ファイバー素線１５を多数束ねてその一端面に設けられた対物レンズ１３ａ、１３ｂ、１３ｃ……を介して画像が取り込めるように多芯構造体（以下イメージファイバーと称す）１６ａ、１６ｂ、１６ｃ……から構成される。
【００１６】
前記イメージファイバー１６ａ、１６ｂ、１６ｃ……は、その一端が図２（ｂ）、（ｃ）に示すように、筒体１７で被覆され、先端に対物レンズ１３ａ、１３ｂ、１３ｃ……が設けられる。
【００１７】
前記イメージファイバー１６ａ、１６ｂ、１６ｃ……の他端は、後述の図３に示すように光学的手段を介して撮像素子（ＣＣＤ撮像素子）等のイメージセンサで同時に読み取ることができるように、四角形状に形成されたファイバー束ね部１８に装着される。
【００１８】
ファイバー束ね部１８には、図示のように複数の円筒状の孔１９ａ、１９ｂ、１９ｃ……が格子状に整列して穿設されている。それら円筒状の孔１９ａ、１９ｂ、１９ｃ……には、イメージファイバー１６ａ、１６ｂ、１６ｃ……の端部が挿入されるとともに、イメージファイバー１６ａ、１６ｂ、１６ｃ……の端面は、全て同一面になるように平坦に揃えられる。
【００１９】
図２（ｃ）は画像入力部１２ａ、１２ｂ、１２ｃ……の拡大図で、これら画像入力部１２ａ、１２ｂ、１２ｃ……の先端には、対物レンズ１３ａ、１３ｂ、１３ｃ……若しくは同等の機能を有する機構が組み込まれている。
【００２０】
図３は、前述したファイバー束ね部１８の端面に得られたイメージ像を光学的手段２０を介してイメージセンサとして構成される撮像素子２１の素子面に結像させるようにした概略構成図である。撮像素子２１は、結像された像を電気信号に変換して次に示す図４の信号処理および演算処理部４１に入力される。
【００２１】
図４は、画像入力部で得られた映像を撮像素子で電気信号に変換し処理する回路装置のブロック構成図である。図４において、撮像素子２１からの電気信号は、信号処理および演算処理部４１で処理され、その処理信号は、デバイスインターフェース部４２を介して記録デバイス４３に記録されるとともに、外部インターフェース部４４を介して図示しない外部処理装置に供給される。
【００２２】
なお、信号処理および演算処理部４１以降の電気回路は、通常のデジタル映像記録装置とほぼ同様な装置を使用することができるが、必要に応じて圧縮処理等を併用し、データ量を少なくすることも可能である。また、音声記録についても、複数のマイクロフォンを使用したマルチマイク部４５からの音声をマルチチャンネルで記録して、再生時に見ている映像の方向に応じて再生する音のチャンネルに切り替えるための音声信号を信号処理および演算処理部４１にて処理する。更に、電源部４６は、信号処理および演算処理部４１等の他の各部に電力を供給するものである。
【００２３】
次に上記のように構成された実施の第１形態の作用を図１（ｂ）、図５および図６を用いて述べる。図１（ｂ）、図５（ａ）では、イメージファイバーからなる画像入力部１２ａ、１２ｂ、１２ｃ……で全水平方向の映像を撮影する際に、画像入力部１２ａ、１２ｂ、１２ｃ……（以下便宜上画像入力部を符号Ａ，Ｂ，Ｃで表現する）の隣り合う画像入力部Ａ，Ｂ，Ｃ同士の画角が、2/3オーバーラップするように設定する。このように画角を2/3オーバーラップさせるようにすると、撮像エリアの水平画角は丁度90度となる。
【００２４】
また、図５（ａ）の画像入力部Ｂに写る中央部の30度の画角の範囲は、同時に左側にある画像入力部Ａの右1/3と、同じく右側にある画像入力部Ｃの左1/3に若干の視差を伴う映像として写し出される。この様子を図５（ｂ）に示す。図５（ｂ）において、斜線部分は画像入力部Ａ，Ｂ，Ｃで各々同じエリアが写っている様子を示している。
【００２５】
ここで、画像入力部Ａ，Ｂ，Ｃは、30度間隔で放射状に並んでいるので、各画像入力部Ａ，Ｂ，Ｃから取り込んだ映像の各1/3ずつを連続して並べることで、水平面内360度の映像を３つの視点から再構成することができる。すなわち、この視点の違いが、左右の目に送ったときに、視差として認識され、立体映像として見えることになる。この様子が図６である。
【００２６】
図６（ａ）は隣り合う画像入力部同士で互いに2/3ずつ、画角がオーバーラップしているときの画像で、これら画像には視差を含んでいる。図６（ｂ）は、図６（ａ）の画像入力部Ａ〜Ｆに得られる右端の視野の画像のみで360度パノラマ画像を生成するときのものであり、この図６（ｂ）は特に立体映像生成時の左目用の映像となる。
【００２７】
また、図６（ｃ）は図６（ａ）の画像入力部Ａ〜Ｆに得られる中央部の視野の画像のみで360度パノラマ画像を生成するときのものであり、この図６（ｃ）は特に立体映像生成時のモニタ用の映像となる。
【００２８】
さらに、図６（ｄ）は、図６（ａ）の画像入力部Ａ〜Ｆに得られる左端の視野の画像のみで360度パノラマ画像を生成するときのものであり、この図６（ｄ）は特に立体映像生成時の右目用の映像となる。
【００２９】
図６（ｅ）は、画像入力部Ａの左目画像と画像入力部Ｃの右目画像の範囲を図示斜線で示したものである。
【００３０】
上記のように、各画像入力部Ａ，Ｂ，Ｃから得られる中央部1/3の映像をモニタに映し、隣接する画像入力部で得られる映像の内、左側の右1/3は左目に、右側の左1/3は右目の映像として送出することで、立体動画映像を見ることができるようになる。
【００３１】
次に視点を動かした場合を考えてみる。視点を移動させると言うことは、すなわち、図６における画像入力部Ｂの中央の映像をシフトさせると言うことであり、この時、視点の異なった３種類のパノラマ映像の中央部の視点と左右の視差の関係は、どの位置でも同じであることから、中央部の映像のシフト量と同じだけ左右の映像をシフトさせることで、自由な視点移動を伴った立体動画映像を見ることができる。
【００３２】
図７は画像入力部Ａ，Ｂ，Ｃにおいて、隣り合う画像入力部の同士の画角のオーバーラップを各々1/2に設定した場合の撮影用カメラの構成配置説明図で、図７において、画像入力部は図１（ｂ）に示すように30度間隔で並んでいるので、1/2のオーバーラップ量から計算して、撮像エリアの水平画角は、60度となる。また、図８（ａ），（ｂ）に示すように、画像入力部Ｂの左半分の30度の画角範囲の画像は、左隣りにある画像入力部Ａの右半分と、また画像入力部Ｂの右半分の画像は、右隣りの画像入力部Ｃの左半分の画像と同じ所を見てはいるが、若干の視差を伴った画像となっている。
【００３３】
ここで、図６と同様に、各画像入力部から取り込んだ映像の半分ずつを連続して並べることで、水平面内360度の映像を２種類の異なった視点からの映像として、記録できる。この様子を示したものが、図９（ａ）〜（ｄ）である。この図９（ａ）〜（ｄ）の動作は、前記図６と同様であるから、詳細な説明は省略するが、いずれにしても、これらの視点の異なる映像を、左右の目に見せることで、立体動画像を見ることができる。なお、図９（ｂ）は立体映像生成時の左目用映像、図９（ｃ）は立体映像生成時の右目用映像となり、どちらかの映像を立体映像生成時のモニタ用映像とする。また、視点を移動させた場合についても前記図６と同様であるので、詳細な説明は省略する。
【００３４】
上述した左右の目に異なった映像を送り、立体に見せるシステムには、偏光フィルタを用いて右目用と左目用の映像を分離し、左右の目に視差のある映像を見せるものや、液晶シャッタを用いるようにしてもよい。
【００３５】
［実施の第２形態］
図１０（ａ）〜（ｃ）は本発明の実施の第２形態を、光ファイバーを用いた水平360度撮影用カメラに適用したときの概略的な構成図および撮影用カメラの構成配置説明図で、図１０（ａ）において、上下２段に構成されたカメラユニット（第１、第２画像入力ユニット）１１ａ、１１ｂは、それぞれ外周面が８面体の円形体から構成される。
【００３６】
前記カメラユニット１１ａ、１１ｂの内部には、前述した光ファイバーからなる上段および下段画像入力部１２ａ、１２ｂ、１２ｃ……および１２１ａ、１２１ｂ、１２１ｃ……が収納され、両画像入力部１２ａ、１２ｂ、１２ｃ……および１２１ａ、１２１ｂ、１２１ｃ……の先端の対物レンズ１３ａ、１３ｂ、１３ｃ……および１３１ａ、１３１ｂ、１３１ｃ……は、前記８面体のカメラユニット１１ａ、１１ｂから望まれるように設けられる。
【００３７】
前記カメラユニット１１ａ、１１ｂは、支柱１４の上部に図示のように支持固定される。なお、カメラユニット１１ａ、１１ｂの下部には、図示しないが、８個のマイクロフォンが上段および下段画像入力部１２ａ、１２ｂ、１２ｃ……および１２１ａ、１２１ｂ、１２１ｃ……に対応して配置されている。
【００３８】
前記カメラユニット１１ａの内部は、図１０（ｂ）に示すように、上段画像入力部１２ａ、１２ｂ、１２ｃ……が、周囲360度に対し８個放射状に一定の角度（図１０においては、４５度づつの角度）間隔を保持して等間隔に配置されている。このように構成すると、画像入力部１２ａ、１２ｂ、１２ｃ……の水平画角が４５度であることから、それらの映像を横に並べることで、水平面内全方向のパノラマ撮影ができるようなる。
【００３９】
また、前記カメラユニット１１ｂの内部は、図１０（ｃ）に示すように、下段画像入力部１２１ａ、１２１ｂ、１２１ｃ……が、周囲360度に対し８個放射状に一定の角度（図１０においては、４５度づつの角度）間隔を保持して等間隔に配置されるとともに、上段画像入力部１２ａ、１２ｂ、１２ｃ……に対して光軸の向きが、ほぼ４５度異なるように配置される。このように構成にすると、下段画像入力部１２１ａ、１２１ｂ、１２１ｃ……を、上段画像入力部１２ａ、１２ｂ、１２ｃ……に対し少し視差を持たせた形でのパノラマ撮影ができるようになる。
【００４０】
上記のように互いに視差を伴うパノラマ映像を、それぞれ張り合わせ、360度パノラマにした様子を図１１（ａ）、（ｂ）に示す。図１１（ａ）は左目用映像、図１１（ｂ）は右目用映像のものである。図１１（ａ）、（ｂ）の360度パノラマから、任意の方向と画角の映像を切り出せば、通常のカメラで撮影した映像と変わりはないが、ここで同じ方向の映像で、図１０（ａ）に示す上段カメラユニット１１ａを左目、下段カメラユニット１１ｂを右目に見せることで、立体映像として認識される。
【００４１】
すなわち、図１０（ｂ）、（ｃ）で、左目で上段カメラユニット１１ａの画像入力部Ａからの映像（図中Ａの撮影範囲の映像）を見ているときには、右目には下段カメラユニット１１ｂの画像入力部Ｃの映像（図中Ｃの撮影範囲の映像）を見せる。このようにすることによって、両目には、上下段カメラユニット１１ａ、１１ｂ間の距離に相当する視差を持った映像が送られるので、立体映像と認識されるようになる。
【００４２】
また、視野を例えば、画像入力部Ａによる撮影範囲から画像入力部Ｂによる撮影範囲に移動させたときには、移動量に応じて右目の映像も、画像入力部Ｃによる撮影範囲から画像入力部Ｄによる撮影範囲へと同じ量だけ、移動させることで、違和感なく立体映像を見ながら視線の移動を行うことができる。
【００４３】
上記実施の第２形態では、上下２段のカメラユニットを使用する撮影の場合について述べて来たが、これらのカメラユニットが小型である場合には、もちろん一体に組み込むことが可能である。また、中央および左側・右側と言うように、３段のカメラユニットとして実現することも可能である。図１２（ｂ）には、その３段のカメラユニット１１ａ〜１１ｃとマルチマイクロフォン部４５ａを備え、イメージファイバー１６ａ、１６ｂ……でファイバー束ね部１８に撮影した映像を導くようにした構成図を示す。なお、図１２（ａ）は上下２段のカメラユニット１１ａ、１１ｂとマルチマイクロフォン部４５ａを備えた構成図である。
【００４４】
上記のように実施の第２形態を構成すれば、全方位の立体動画映像を記録するシステムを提供することができる。なお、第１形態と同様に、左右の目に異なった映像を送り立体に見せるシステムには、偏光フィルタを用いて右目用と左目用の映像を分離し、左右の目に視差のある映像を見せるものや、液晶シャッタを用いるようにしても良い。
【００４５】
【発明の効果】
以上述べたように、本発明によれば、従来では不可能であった立体動画映像の再生を可能にする、全方位立体動画映像記録装置を実現できる利点がある。また、立体動画映像の再生時においても、自由な視点移動が可能であり、かつ、撮影用のカメラは、１台のみであるために、視野が塞がれることがない。さらに、大きさ的には、イメージファイバを用いることでコンパクトに製作することが可能であり、自由な視差を設定して装置を製作することができる等の利点がある。
【図面の簡単な説明】
【図１】（ａ）、（ｂ）は本発明の実施の第１形態を、水平360度撮影用カメラに適用したときの概略的な構成図および隣り合う画像入力部同士で互いに2/3ずつ、画角がオーバーラップしていることを示す撮影用カメラの構成配置説明図。
【図２】（ａ）、（ｂ）、（ｃ）は画像入力部の詳細を示す構成説明図。
【図３】ファイバー束ね部の端面に得られたイメージ像を撮像素子に結像させるときの説明図。
【図４】画像入力部で得られた映像を撮像素子で電気信号に変換し処理する回路装置のブロック構成図。
【図５】（ａ）は隣り合う画像入力部同士で互いに2/3ずつ、画角がオーバーラップしていることを示す説明図、（ｂ）は斜線部分が３つの画像入力部で各々同じ範囲を撮影している状態を示す説明図。
【図６】（ａ）は隣り合う画像入力部同士で互いに2/3ずつ、画角がオーバーラップしているときの画像を示す説明図、（ｂ）は立体映像生成時の左目用映像説明図、（ｃ）は立体映像生成時のモニタ用映像説明図、（ｄ）は立体映像生成時の右目用映像説明図、（ｅ）は画像入力部Ａの左目画像と画像入力部Ｃの右目画像の範囲を図示斜線で示したときの説明図。
【図７】隣り合う画像入力部同士で互いに1/2ずつ、画角がオーバーラップしていることを示す撮影用カメラの構成配置説明図。
【図８】（ａ）は隣り合う画像入力部同士で互いに1/2ずつ、画角がオーバーラップしていることを示す説明図、（ｂ）は斜線部分が２つの画像入力部で各々同じ範囲を撮影している状態を示す説明図。
【図９】（ａ）は隣り合う画像入力部同士で互いに半分ずつ、画角がオーバーラップしているときの画像を示す説明図、（ｂ）は立体映像生成時の左目用映像説明図、（ｃ）は立体映像生成時の右目用映像説明図、（ｄ）は画像入力部Ａの左目画像と画像入力部Ｂの右目画像の範囲を示す説明図。
【図１０】（ａ）、（ｂ）、（ｃ）は本発明の実施の第２形態を示すもので、（ａ）は光ファイバーを用いた水平360度撮影用カメラに適用したときの概略的な構成図、（ｂ）は上段撮影用カメラ（画像入力部）の構成配置説明図、（ｃ）は下段撮影用カメラの構成配置説明図。
【図１１】（ａ）、（ｂ）は360度パノラマにした様子を示す左目用映像および右目用映像の説明図。
【図１２】（ａ）は第１形態の全体構成図、（ｂ）は第２形態の全体構成図。
【図１３】（ａ）はミラー式立体映像撮影装置の概略構成図、（ｂ）、（ｃ）は映像イメージの１例を示す説明図。
【図１４】（ａ）は２台のカメラによる立体映像撮影装置の概略構成図、（ｂ）は左目用映像イメージ説明図、（ｃ）は右目用映像イメージ説明図。
【図１５】（ａ）は反射ミラー式パノラマ映像撮影装置の概略構成図、（ｂ）は映像イメージの説明図。
【図１６】（ａ）は超広角レンズ式パノラマ映像撮影装置の概略構成図、（ｂ）映像イメージの説明図。
【符号の説明】
１１…カメラユニット
１１ａ、１１ｂ…上下段カメラユニット
１２ａ、１２ｂ、１２ｃ……画像入力部
１３ａ、１３ｂ、１３ｃ……対物レンズ
１４…支柱
１５…光ファイバー素線
１６ａ、１６ｂ、１６ｃ……多芯構造体（イメージファイバー）
１７…筒体
１８…ファイバー束ね部
１９ａ、１９ｂ、１９ｃ……円筒状の孔
２０…光学的手段
２１…撮像素子
４１…信号処理および演算処理部
４２…デバイスインターフェース部
４３…記録デバイス
４４…外部インターフェース部
４５…マルチマイクロフォン部
４６…電源部

Claims

光ファイバー素線が多数束ねられて構成された複数の多芯構造体と、
これら複数の多芯構造体の各一端に形成された画像を取り込む複数の画像入力部と、
これら画像入力部の画像取り込み画角を、隣接する画像入力部間でオーバーラップさせるように画像入力部を同一平面状に一定の角度間隔を保持して配置した画像入力ユニットと、
前記多芯構造体の各一端に設けられた前記画像入力部から取り込んだ画像を、前記多芯構造体によりその他端に導いて光学的手段を介してイメージセンサで読み取り電気信号に変換する信号処理部と、
前記信号処理部で変換された電気信号を入力し、各画像入力部について、隣接する画像入力部で取り込まれたオーバーラップする画像領域の信号を用いて視差を認識できるように画像を構成するための処理を行う演算処理部と、
を具備した画像入力処理装置。
前記演算処理部が、各画像入力部について、一の画像入力部と隣接する一方の画像入力部で取り込まれたオーバーラップする画像と、該一の画像入力部で取り込まれた画像と、該一の画像入力部と隣接する他方の画像入力部で取り込まれたオーバーラップする画像とを並べることにより視差を認識できるように画像を構成するための処理を行う
請求項１に記載の画像入力処理装置。
前記演算処理部が、各画像入力部について、隣接する一方の画像入力部で取り込まれたオーバーラップする画像と、隣接する他方の画像入力部で取り込まれたオーバーラップする画像とを並べることにより視差を認識できるように画像を構成するための処理を行う
請求項１に記載の画像入力処理装置。
前記複数の画像入力部は、互いに隣り合う画角入力部間で各画角を50％以上オーバーラップさせた
請求項１に記載の画像入力処理装置。
前記複数の画像入力部は、互いに隣り合う画角入力部間で各画角を2/3以上オーバーラップさせた
請求項４に記載の画像入力処理装置。
前記複数の画像入力部は、その入力部を構成する光ファイバーの光学軸が放射状に一定の角度間隔を保持して円形状に配置された
請求項１〜５のいずれか１項に記載の画像入力処理装置。
前記複数の画像入力部は、その入力部の先端に光学レンズを設けた
請求項１〜６のいずれか１項に記載の画像入力処理装置。
光ファイバー素線が多数束ねられて構成された複数の多芯構造体と、
これら複数の多芯構造体の各一端に形成された画像を取り込む複数の画像入力部と、
これら画像入力部を同一平面状に一定の角度間隔を保持して放射状に配置された第１画像入力ユニットと、
この第１画像入力ユニットの下部に配置され、そのユニットの画像入力部とは異なった視線方向からの画像を取り込めるように画像入力部を同一平面状に一定の角度間隔を保持して配置された第２画像入力ユニットと、
前記多芯構造体の各一端に設けられた前記第１、第２画像入力ユニットのそれぞれの画像入力部から取り込んだ画像を、前記多芯構造体により、その他端に導いて光学的手段を介してイメージセンサで読み取り電気信号に変換する信号処理部と、
前記信号処理部で変換された電気信号を入力し、前記第１、及び前記第２画像入力ユニットのそれぞれの画像入力部から取り込んだ画像信号を用いて視差を認識できるように画像を構成するための処理を行う演算処理部と、
を具備した画像入力処理装置。
前記第２画像入力ユニットは、第１画像入力ユニットに対して視差を持たせてパノラマ撮影を行う
請求項８に記載の画像入力処理装置。
前記第１画像入力ユニットは、その画像入力部を構成する光ファイバーの光学軸が放射状に一定の角度間隔を保持して円形状に配置された
請求項８〜９のいずれか１項に記載の画像入力処理装置。
前記複数の画像入力部は、その入力部の先端に光学レンズを設けた
請求項８〜１０のいずれか１項に記載の画像入力処理装置。
前記第２画像入力ユニットの下部に、複数の画像入力ユニットを設ける
請求項８〜１１のいずれか１項に記載の画像入力処理装置。