JP2014531791A - 超広角画像を処理するシステムおよび方法 - Google Patents

超広角画像を処理するシステムおよび方法 Download PDF

Info

Publication number
JP2014531791A
JP2014531791A JP2014527485A JP2014527485A JP2014531791A JP 2014531791 A JP2014531791 A JP 2014531791A JP 2014527485 A JP2014527485 A JP 2014527485A JP 2014527485 A JP2014527485 A JP 2014527485A JP 2014531791 A JP2014531791 A JP 2014531791A
Authority
JP
Japan
Prior art keywords
image
wide
pixels
super
photosensors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014527485A
Other languages
English (en)
Inventor
ウィリアムズ、アダム
Original Assignee
スマート エッジ インベストメンツ リミテッド
スマート エッジ インベストメンツ リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by スマート エッジ インベストメンツ リミテッド, スマート エッジ インベストメンツ リミテッド filed Critical スマート エッジ インベストメンツ リミテッド
Publication of JP2014531791A publication Critical patent/JP2014531791A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14625Optical elements or arrangements associated with the device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14625Optical elements or arrangements associated with the device
    • H01L27/14629Reflectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/702SSIS architectures characterised by non-identical, non-equidistant or non-planar pixel layout
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3138Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] using arrays of modulated light sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3173Constructional details thereof wherein the projection device is specially adapted for enhanced portability
    • H04N9/3176Constructional details thereof wherein the projection device is specially adapted for enhanced portability wherein the projection device is incorporated in a camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Power Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Studio Devices (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

画像センサーと、パノラマ画像等の超広角画像を取得し、画像センサーの平らな感光面に向けるレンズ/ミラー系等とを有するカメラ等の光学装置が提供される。画像センサーは、動画像とすることができる取得された画像を1つ若しくは複数の電気信号または電子信号に変換する。画像センサーは、概して円形の構成で画像センサーの感光面に配置される複数のフォトセンサーまたはピクセルを有する。複数のフォトセンサーまたはピクセルは、各フォトセンサーまたはピクセルのアドレスまたは識別子を参照することによって取得画像のウィンドウ部を画定することができるようにアドレス指定可能であるか、または識別可能である。カメラは、上記電気信号をデジタル画像データに変換する手段と、上記デジタル画像データをバッファリング若しくは記憶する手段とを含む統合システムまたは分散システムの一部をなすことができる。システムは、上記超広角画像のウィンドウ部の選択を受信する入力手段と、上記選択されたウィンドウ部を含むデジタル画像データを、上記バッファまたは記憶手段から取り出し、上記取り出されたデジタル画像データを、表示および/または更なる処理に向けて情報処理手段に送信する手段とを含むこともできる。カメラの新規技術的特徴の多くを共有する画像投影システムも開示される。【選択図】図1a

Description

本発明は、超広角の静止画像および/または動画像を処理するシステムおよび方法に関する。
カメラによって取得される視野または画像ビューは、対象となる場所にあるカメラのレンズによって決まる。例えば、CCTVユニット等の1つまたは複数の従来のタイプのカメラユニットを用いる監視システムの場合、それまではカメラユニットの視野内に無かった、カメラユニットを取り巻く環境からの画像を探索し、おそらくは記録するのに、カメラユニットを制御してパンおよび/またはチルトさせ、画像ビューを変更する必要がある。そのようなカメラユニットのパンおよびチルトでは通常、カメラユニットがモーターを備えるとともに、モーターを制御して、パン動作およびチルト動作を実施する制御信号を受信する何らかの手段を有することが必要である。さらに、モーターは、カメラ動作用にカメラユニットによって必要とされる仕様とは異なる仕様であることが多い電源を必要とする。
監視システムのようなシステムでは、上述したカメラユニットは比較的複雑であり、多くの機械的可動部を有する。したがって、カメラユニットは定期的なメンテナンスを必要とする。しかしながら、メンテナンス提供の難しさは、ユニットが多くの場合、アクセスが容易ではない意図的に選択される位置に配置されることによって深刻化する。さらに、カメラユニットは多くの場合、密閉されたセキュリティ筐体内に収容され、パンおよびチルトを実施するためのモーターによる電力消費に部分的に起因して、望ましくない過熱を生じさせる。過熱の望ましくない結果は、カメラユニットが見る画像シーンが歪むおそれがあることである。また、モーター実施のチルト機能およびパン機能を有する従来のカメラユニットは、製造が高価である。そのようなカメラユニットを用いて、カメラの視野外でイベントが生じる場合、そのイベントが見られず、したがって記録されないという点で、イベントは見落とされる。
エリアのコンスタントな360度監視が求められるか、または望ましい環境では、多くの場合、対象となるエリアの異なる各部分をカバーするのに、異なる方向に向く複数の従来のカメラユニットを配備する必要があり、それにより、監視システムのコストが大幅に増大する。さらに、複数のカメラユニットが重複エリアをカバーする状態であっても、ブラインドスポットがそれでもなお存在することが多い。
幾つかの360度パノラマ画像取得カメラユニットが、ソリッドステート画像記録機能を用いて開発されている。このタイプのカメラユニットが現在、監視システム等で好まれない1つの理由は、記録されるパノラマ画像が、360度パノラマ画像シーンが取得され、次にソリッドステート画像記録手段によって記録される様式の結果として、ひどく歪んだフォーマットで記録されるためである。このタイプのカメラユニットでは、強力な情報処理手段が通常、閲覧前に画像の歪みを補正する必要があり、その結果、ピクチャ品質の損失が生じるとともに、そのようなシステムのコストが大幅に増大する。
画像を画面に投影する場合、従来の構成は、平らな静止画像または動画像を平らな画面上に投影するというものである。したがって、従来のプロジェクターには通常、投影される画像を画面の平らな表面上に結像するように構成される単純な集束レンズが構成される。そのようなプロジェクターは、完全または部分的なパノラマ画像、すなわち、平らではない画面で閲覧されるように構成される平らではない画像を投影するように構成されていない。
本発明の目的は、超広角の静止画像および/または動画像を処理する既知のシステム、カメラ、プロジェクター、および方法に関連する1つまたは複数の問題を或る程度軽減または除去することである。
上記目的は、メインクレームの特徴の組み合わせによって満たされ、サブクレームは、本発明の更なる有利な実施形態を開示する。
本発明の別の目的は、監視画像等を取得する既知のシステム、カメラ、および方法に関連する1つまたは複数の問題を或る程度軽減または除去することである。
本発明の別の目的は、パノラマの静止画像および/または動画像を取得し、記録し、配信し、および/または投影するシステムを提供することである。
本発明の別の目的は、超広角の静止画像および/または動画像を処理するカメラユニットおよび/またはプロジェクターユニットを提供することである。
本発明の別の目的は、ユーザーが、パノラマ画像の画定されたウィンドウ部の閲覧に際して、従来の直線的な表示装置への表示を選択できるようにすることである。
当業者は、以下の説明から、本発明の他の目的を導き出すであろう。したがって、目的の上記記述(statement)は、包括的ではなく、本発明の多くの目的のうちの幾つかを示す役割を果たすにすぎない。
一態様では、本発明は、光学装置の画像センサーを提供し、該画像センサーは、複数のフォトセンサーまたはピクセルを備える平らな感光面を備え、前記複数のフォトセンサーまたはピクセルは、前記平らな感光面上に概して円形の構成で配置され、入射する画像を1つ若しくは複数の電気信号または電子信号に変換する。
複数のフォトセンサーまたはピクセルを、一連の同心円として上記平らな感光面上に配置することができる。代替的には、複数のフォトセンサーまたはピクセルを、上記平らな感光面上に、フォトセンサーまたはピクセルの少なくとも1つの螺旋を含む上記概して円形の構成で配置することができる。複数のフォトセンサーまたはピクセルは、フォトセンサーまたはピクセルの2本以上のインターレースする螺旋として配置することができる。
画像センサーは、超広角画像を取得し、上記複数のフォトセンサーまたはピクセルに入射するように超広角画像を上記平らな感光面に向けるレンズ/ミラー系等の手段を備えることができる。前記超広角画像を取得する手段は、該画像センサーを取り囲む略パノラマの画像を取得するように構成することができる。前記略パノラマの画像はフルパノラマ画像ではなくてもよく、該画像センサーの周囲の選択された平面において360度のドーナツ形の画像ビューを含むことができる。代替的には、前記略パノラマの画像は前記画像取得手段の周囲の概して半球形の画像ビューを含むフルパノラマ画像とすることができる。
画像センサーは、前記1つ若しくは複数の電子信号または電気信号をデジタル画像データに変換する手段を更に備えることができる。
前記複数のフォトセンサーまたはピクセルは、各フォトセンサーまたはピクセルのアドレスを参照することによって、取得される画像のウィンドウ部を画定することができるように、アドレス指定可能とするか、または識別可能とすることができる。
幾つかの実施の形態では、前記光学装置はカメラまたはプロジェクターを含む。
本発明の更なる態様では、光学装置の画像センサーを用いて超広角画像を取得する方法が提供され、該方法は、超広角画像を前記画像センサーの感光面に向けることを含み、前記画像センサーは、複数のフォトセンサーまたはピクセルを有する平らな感光面を備え、前記複数のフォトセンサーまたはピクセルは、前記平らな感光面上に概して円形の構成で配置される。
本発明の別の態様では、光学装置の画像センサーを製造する方法が提供され、本方法は、複数のフォトセンサーまたはピクセルを有する平らな感光面を有する画像センサーを提供することを含み、前記複数のフォトセンサーまたはピクセルは、前記平らな感光面上に概して円形の構成で配置される。
本発明のまた更なる態様では、光学装置の画像センサーが提供され、該画像センサーは、複数のフォトセンサーまたはピクセルを備える感光面を備え、前記複数のフォトセンサーまたはピクセルは、前記感光面に配置され、入射する超広角画像または該超広角画像の一部分を、該超広角画像または該超広角画像の前記一部分を表す画像データに変換可能な1つ若しくは複数の電気信号または電子信号に変換し、前記構成は、前記複数のフォトセンサーまたはピクセルがそれぞれ、前記感光面上で、該複数のフォトセンサーまたはピクセルに入射する前記超広角画像の各部分に概して一致する方向に向けられるようなものである。
本発明のまた更なる態様では、光学装置の画像センサーを用いて超広角画像を取得する方法が提供され、該方法は、前記画像センサーの感光面に超広角画像を向けることを含み、前記画像センサーは、複数のフォトセンサーまたはピクセルを有する感光面を備え、前記複数のフォトセンサーまたはピクセルは、前記感光面上に配置され、入射する前記超広角画像または該超広角画像の一部分を、該超広角画像または該超広角画像の前記一部分を表す画像データに変換可能な1つ若しくは複数の電気信号または電子信号に変換し、前記構成は、前記複数のフォトセンサーまたはピクセルがそれぞれ、前記感光面上で、入射する前記超広角画像の各部分に概して一致する方向に向けられるようなものである。
本発明のまた更なる態様では、本発明は、画像センサーと、パノラマ画像等の超広角画像を取得し、画像センサーの平らな感光面に向けるレンズ/ミラー系等とを有するカメラを提供する。画像センサーは、動画像とすることができる、取得された画像を1つまたは複数の電気信号または電子信号に変換する。画像センサーは、画像センサーの感光面に概して円形の構成で配置される複数のフォトセンサーまたはピクセルを有する。概して円形の構成は、密な螺旋になったフォトセンサーまたはピクセルを含むことができる。複数のフォトセンサーまたはピクセルは、各フォトセンサーまたはピクセルのアドレスまたは識別子を参照することによって取得画像のウィンドウ部を画定することができるようにアドレス指定可能であるか、または識別可能である。カメラは、上記電気信号をデジタル画像データに変換する手段と、上記デジタル画像データをバッファリング、若しくは記憶する手段とを含む統合システムまたは分散システムの一部をなすことができる。システムは、上記超広角画像のウィンドウ部の選択を受信する入力手段と、上記選択されたウィンドウ部を含むデジタル画像データを、上記バッファまたは記憶手段から取り出し、上記取り出されたデジタル画像データを、表示および/または更なる処理に向けて情報処理手段に送信する手段とを含むこともできる。
本発明の第1の主な態様では、超広角画像を取得し記録するシステムが提供され、該システムは、超広角画像を取得し、画像センサーの平らな感光面に向ける手段であって、前記平らな感光面は複数のフォトセンサーまたはピクセルを備え、前記画像センサーは、前記超広角画像を電気信号に変換する、向ける手段と、前記電気信号を前記デジタル画像データに変換する手段と、前記デジタル画像データをバッファリングまたは記憶する手段と、前記超広角画像のウィンドウ部の選択を受信する手段と、前記バッファまたは記憶手段から前記超広角画像の前記選択されたウィンドウ部を含むデジタル画像データを取り出し、該取り出されたデジタル画像データを情報処理手段に送信する手段と、を備える。システムは、カメラユニット等の単一の装置と、関連する処理能力とを含む統合システムとすることができるか、またはネットワークによって接続された幾つかの装置を備える分散システムを備えることができる。
上記システムは、静止画像カメラのように静止画像を取得するように構成することができるが、動画像を取得するように構成されることが好ましく、この場合でも静止画像の機能が保持されることが望ましい。しかし、上記システムは、静止画像能力も保持することが好ましい。
上記システムは、ユーザー要求/選択に応答して、ネットワークを介して配信するのに、取得された動画像または静止画像をデジタルビデオ信号または任意の他の形態の信号に変換する処理手段等を含む。
超広角画像を取得し、画像センサーの感光面に向ける手段は、広角画像を取得する、当業者に既知の任意の適するシステムまたは装置を含むことができる。例えば、画像取得手段は、レンズ、1組のレンズ、ミラー、1組のミラー、プリズム、または1組のプリズムのうちの任意の1つまたは任意の組み合わせを備えることができる。幾つかの実施形態では、画像取得手段は魚眼レンズを備える。
画像取得手段は、画像取得手段を取り囲む略パノラマの画像を取得するように構成されることが好ましい。略パノラマの画像は、フルパノラマ画像でなくてもよく、画像取得手段の周囲の選択された平面における360度のドーナツ形の画像ビューを含むことができる。または、略パノラマの画像は、画像取得手段の周囲の概して半球形の画像ビューを含むフルパノラマ画像とすることができる。
画像センサーは、入射光を電気信号に変換する複数のフォトセンサーまたはピクセルを備える感光面を有する画像センサーチップを備えることができる。電荷結合素子(CCD)チップおよび相補型金属酸化膜半導体(CMOS)チップ等の幾つかのそのようなチップが知られている。しかしながら、当業者には明らかなように、チップの感光面への取得画像入射を1つまたは複数の電気信号に変換するのに適する任意のチップを、本発明のシステムおよびカメラユニットに利用することができる。
複数のフォトセンサーまたはピクセルは、概して円形の構成で上記感光面上に配置される。
一実施形態では、複数のフォトセンサーまたはピクセルは、一連の同心円として上記感光面上に配置することができる。この実施形態では、フォトセンサーまたはピクセルの上記一連の同心円のうちの交互の円を、デジタルビデオ信号の奇数線および偶数線にそれぞれ割り当てることができる。
別の実施形態では、複数のフォトセンサー若しくはピクセルは、フォトセンサー若しくはピクセルの少なくとも1つの密な螺旋として上記感光面に配置することができるか、またはフォトセンサー若しくはピクセルの2つ以上のインターレースする螺旋として配置することができる。この配置は、フォトセンサーまたはピクセルの上記螺旋またはインターレースした線が、上記フォトセンサーまたはピクセルの間にいかなるギャップも残さずに感光面の表面を埋めるようなものとすることができる。
上記超広角画像のウィンドウ部の選択を受信する手段は、パンコマンド、チルトコマンド、および/またはズームインまたはズームアウトコマンド等の、上記選択されたウィンドウ部に関連するコマンドを受信するように構成されることが好ましい。
上記超広角画像のウィンドウ部の選択を受信する手段は、上記超広角画像のそれぞれ別個に選択された2つ以上のウィンドウ部を同時に受信するように構成されることが好ましい。これらの選択は、異なるユーザーからのものであることができ、選択されたウィンドウ部の各画像データは、上記ユーザーの情報処理装置に送信され、閲覧し、更に処理することができる。選択されるウィンドウ部は、同じであってもよく、異なってもよく、または重なってもよく、選択は互いに独立することが好ましい。
当業者に馴染みのある任意の適する記憶手段またはバッファリング手段を、取得された静止画像および/または動画像のデジタル画像データのバッファリングおよび/または記憶に用いることができる。例えば、上記デジタル画像データをバッファリング若しくは記憶する手段は、フラッシュメモリ装置を含むことができるか、またはネットワークを介して上記画像取得手段に接続されるデータベース若しくはメモリバンク等を含むことができる。上記デジタル画像データをバッファリングおよび/または記憶する手段は、例えば、カメラユニットと同様に、画像取得手段と同じ装置の一部を構成することができる。代替的には、上記デジタル画像データをバッファリングおよび/または記憶する手段は、画像取得手段を備える装置とは異なる装置の一部を構成することができる。この後者の場合、上記デジタル画像データをバッファリングおよび/または記憶する上記手段を備える異なる装置は、ネットワークを介して、上記画像取得手段を備える上記装置に接続される。
同じように、上記超広角画像のウィンドウ部の選択を受信する手段は、上記デジタル画像データをバッファリングおよび/または記憶する手段と同じ装置の一部を構成することができ、上記選択手段は、一実施形態では、例えば、カメラユニットの入力画面を含む。代替的には、選択手段は、記憶/バッファリング手段を備える装置とは異なる装置の一部を構成することができ、この場合、上記選択手段を備える異なる装置はネットワークを介して、上記記憶/バッファリング手段を備える上記装置に接続される。
また、上記超広角画像の上記選択されたウィンドウ部を含むデジタル画像データを取り出す手段は、記憶/バッファリング手段と同じ装置の一部を構成することができるか、または異なる装置の一部を構成することができ、上記異なる装置はネットワーク接続される装置である。
同様に、情報処理手段は、記憶/バッファリング手段と同じ装置または異なる装置の一部を構成することができ、上記異なる装置はネットワーク接続される装置である。
情報処理手段は、上記超広角画像のウィンドウ部の上記選択を提供するように構成されることが好ましい。
上記超広角画像のウィンドウ部の選択を受信する手段は、ユーザー選択を受信するように適宜構成されたサーバーを含むことができる。サーバーは、ネットワークを介して上記画像取得手段に接続することができる。同様に、上記選択されたウィンドウ部を含むデジタル画像データを取り出す手段は、ユーザー選択を受信するサーバーを含むことができ、上記サーバーは、ネットワークを介して上記画像取得手段に接続することができる。ウィンドウ選択を受信するサーバーおよびデジタル画像データを取り出すサーバーは、1つの同じサーバーとすることができる。
本発明の第2の主な態様では、超広角画像を取得し記録する方法が提供され、該方法は、超広角画像を取得し、画像センサーの平らな感光面に向けるステップと、前記取得された超広角画像を電気信号に変換するステップと、前記電気信号をデジタル画像データに変換するステップと、前記デジタル画像データをバッファリングまたは記憶するステップと、前記超広角画像のウィンドウ部の選択を受信するステップと、前記バッファまたは記憶手段から前記超広角画像の前記選択されたウィンドウ部を含むデジタル画像データを取り出すステップと、該取り出されたデジタル画像データを情報処理手段に送信するステップと、を含む。
本発明の第3の主な態様では、画像センサーと、超広角画像を取得し、上記画像センサーの平らな感光面に向ける手段とを備えるカメラが提供され、上記画像センサーは、上記超広角画像を電気信号に変換し、上記画像センサーの複数のフォトセンサーまたはピクセルは、概して円形の構成で上記画像センサーの感光面に配置され、上記複数のフォトセンサーまたはピクセルは、各フォトセンサーまたはピクセルのアドレスを参照することによって、取得された画像のウィンドウ部を画定することができるようにアドレス指定可能である。
本発明の第4の主な態様では、カメラユニットの画像センサーが提供され、上記画像センサーは、入射した画像を電気信号に変換する上記画像センサーの平らな感光面を備え、上記感光面は、概して円形の構成で複数のフォトセンサーまたはピクセルを備え、上記複数のフォトセンサーまたはピクセルは、各フォトセンサーまたはピクセルのアドレスを参照することによって、取得された画像のウィンドウ部を画定することができるようにアドレス指定可能である。
第5の主な態様では、本発明は、超広角画像を閲覧面に投影するシステムを提供し、該システムは、超広角画像データを受信する手段と、前記超広角画像データを光学画像に変換し、該光学画像または該光学画像の一部分を画像投影手段に向ける手段と、前記画像投影手段の近傍に搭載される閲覧面と、を備え、前記画像投影手段は、前記光学画像または該光学画像の一部分を前記閲覧面に投影し、前記超広角画像データを前記光学画像に変換する前記手段は、受信する画像データを前記光学画像に変換する複数のフォトセンサーまたはピクセルを備え、前記複数のフォトセンサーまたはピクセルは概して円形の構成で配置される。
複数のフォトセンサーまたはピクセルは、一連の同心円に配置されることが好ましい。フォトセンサーまたはピクセルの上記一連の同心円のうちの交互の円を、上記超広角画像データで具現されるデジタルビデオ信号の奇数線および偶数線にそれぞれ割り当てることができる。
代替的には、複数のフォトセンサーまたはピクセルは、フォトセンサーまたはピクセルの少なくとも1つの螺旋として配置することができる。複数のフォトセンサーまたはピクセルは、フォトセンサーまたはピクセルの2つ以上のインターレースする螺旋として配置されることが好ましい。
複数のフォトセンサーまたはピクセルは、LEDディスプレイパネルまたは発光ピクセル若しくはフォトセンサーを備える集積回路で具現されることが好ましい。
画像投影手段は、上記複数のフォトセンサーまたはピクセルによって生成される光学画像を投影するレンズ、1組のレンズ、ミラー、1組のミラー、プリズム、または1組のプリズムを備えることができる。
上記システムは、上記超広角光学画像のウィンドウ部の選択を受信する手段を含むことができる。
上記システムは、バッファまたは記憶手段から、上記超広角光学画像の上記選択されたウィンドウ部を含むデジタル画像データを取り出す手段を含むこともできる。
上記システムは、ユーザーが装着するヘッドギア内にヘッドアップディスプレイを備えることができ、閲覧面はヘッドギアのバイザーを構成することができ、上記システムは、所定の基準に相対する人物の頭部の移動、ひいてはヘッドギアの移動に応答して、上記超広角光学画像のウィンドウ部の選択を受信するように構成することができる。
投影手段は魚眼レンズを含むことが好ましい。
変換する手段は、上記受信された画像データを略パノラマな光学画像に変換し、上記パノラマ画像またはそのような画像の一部分を閲覧面に投影するように構成されることが好ましい。閲覧面は、投影手段を取り囲むパノラマ閲覧面とすることができ、投影手段は、パノラマ画像を上記パノラマ閲覧面に投影するように構成することができる。パノラマ画像は、フルパノラマ画像でなくてもよく、投影手段の周囲の選択された平面における360度のドーナツ形の画像ビューを含む。代替的には、パノラマ画像は、投影手段の周囲の概して半球形の画像ビューを含むフルパノラマ画像とすることができる。
上記超広角画像のウィンドウ部の選択を受信する手段は、パンコマンド、チルトコマンド、およびズームコマンドのうちの任意のコマンド等の、上記選択されたウィンドウ部に関連するコマンドを受信するように構成することができる。上記超広角画像のウィンドウ部の選択を受信する手段は、上記超広角光学画像のそれぞれ別個に選択された2つ以上のウィンドウ部を同時に受信するように構成することができる。
上記デジタル画像データをバッファリングまたは記憶する手段は、上記閲覧面に上記光学画像または該光学画像の一部分を投影する画像投影手段と同じ装置の一部を構成することができる。代替的には、上記デジタル画像データをバッファリングまたは記憶する手段は、上記閲覧面に上記光学画像または該光学画像の一部分を投影する手段を備える装置とは異なる装置の一部を構成することができる。上記デジタル画像データをバッファリングまたは記憶する上記手段を備える異なる装置は、ネットワークを介して、上記閲覧面に上記光学画像または上記光学画像の一部分を投影する上記手段を備える上記装置に接続することができる。
上記超広角画像のウィンドウ部の選択を受信する手段は、上記デジタル画像データをバッファリングまたは記憶する手段と同じ装置の一部を構成することができる。代替的には、上記超広角画像のウィンドウ部の選択を受信する手段は、上記デジタル画像データをバッファリングまたは記憶する手段を備える装置とは異なる装置の一部を構成することができる。上記超広角画像のウィンドウ部の選択を受信する上記手段を備える異なる装置は、ネットワークを介して、上記デジタル画像データをバッファリングまたは記憶する上記手段を備える上記装置に接続することができる。
上記超広角画像の上記選択されたウィンドウ部を含むデジタル画像データを取り出す手段は、上記デジタル画像データをバッファリングまたは記憶する手段と同じ装置の一部を構成することができる。代替的には、上記超広角画像の上記選択されたウィンドウ部を含むデジタル画像データを取り出す手段は、上記デジタル画像データをバッファリングまたは記憶する手段を備える装置とは異なる装置の一部を構成することができる。上記超広角画像の上記選択されたウィンドウ部を含むデジタル画像データを取り出す上記手段を備える異なる装置は、ネットワークを介して、上記デジタル画像データをバッファリングまたは記憶する上記手段を備える上記装置に接続することができる。
上記デジタル画像データをバッファリングまたは記憶する手段は、フラッシュメモリ装置を含むことが好ましい。代替的には、上記デジタル画像データをバッファリングまたは記憶する手段は、ネットワークを介して上記画像投影手段に接続されたデータベースを含むことができる。
上記超広角画像のウィンドウ部の選択を受信する手段は、上記超広角光学画像のウィンドウ部のユーザー選択を受信するサーバーを含むことができ、上記サーバーは、ネットワークを介して、超広角画像を投影する上記手段に接続される。
上記超広角光学画像の上記選択されたウィンドウ部を含むデジタル画像データを取り出す手段は、上記超広角画像のウィンドウ部のユーザー選択を受信するサーバーを含むことができ、上記サーバーは、ネットワークを介して、上記超広角画像を投影する手段に接続される。
本発明の第6の主な態様では、超広角画像を閲覧面に投影する方法が提供され、該方法は、 超広角画像データを受信することと、複数のフォトセンサーまたはピクセルを用いて前記超広角画像データを光学画像に変換することであって、前記複数のフォトセンサーまたはピクセルは、受信された画像データを前記光学画像に変換し、前記複数のフォトセンサーまたはピクセルは、概して円形の構成で配置される、変換することと、前記光学画像または該光学画像の一部分を画像処理手段に向けることと、前記光学画像または該光学画像の一部分を、前記画像処理手段の近傍に搭載される閲覧面に投影することと、を含む。
本発明の第7の主な態様では、超広角画像を閲覧面に投影するプロジェクターが提供され、本プロジェクターは、超広角画像データを受信する入力と、上記超広角画像データを光学画像に変換し、上記光学画像または該光学画像の一部分を画像投影手段に向ける手段とを備え、上記画像投影手段は、上記光学画像または該光学画像の一部分を、上記画像投影手段の近傍に搭載される閲覧面に投影し、上記超広角画像データを上記光学画像に変換する上記手段は、受信した画像データを上記光学画像に変換する複数のフォトセンサーまたはピクセルを備え、上記複数のフォトセンサーまたはピクセルは、概して円形の構成に配置される。
本発明の第8の主な態様では、ユーザーによって装着されるヘッドギア内のヘッドアップディスプレイが提供され、該ヘッドアップディスプレイは、前記ヘッドギアのバイザーを構成する閲覧面と、光学画像または該光学画像の一部分を前記バイザーの前記閲覧面に投影する、第7の主な態様のプロジェクターと、を備える。
ヘッドアップディスプレイは、所定の基準に相対する人物の頭部の移動、ひいてはヘッドギアの移動に応答して、上記超広角光学画像のウィンドウ部の選択を受信する手段を更に備えることが好ましい。
本発明の第9の主な態様では、電話会議システムが提供され、少なくとも1つの参加者会議ステーションが、本発明の第7の主な態様のプロジェクターを含む。
本発明の概要は、本発明の定義に重要な全ての特徴を必ずしも開示しているわけではなく、本発明は、開示される特徴の部分的組み合わせに存在することができる。
本発明の上記特徴および更なる特徴は、添付図面と併せて、単なる例として提供される以下の好ましい実施形態の説明から明らかになろう。
パノラマ画像を取得する本発明によるカメラシステムの側面図である。 パノラマ画像を取得する本発明によるカメラシステムの平面図である。
図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の一実施形態の平面図である。 図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の一実施形態の平面図である。
図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の別の実施形態の平面図である。 図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の別の実施形態の平面図である。
図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。 図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。
図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。 図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。
図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。 図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。
図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。 図1aおよび図1bのシステムの画像センサーチップのフォトセンサーまたはピクセルの構成の更に別の実施形態の平面図である。
ウィンドウ枠が装置表示画像に重なり、ユーザーが閲覧するウィンドウ部を選択できるようにする状態での、パノラマ画像またはパノラマ画像の代表的な画像の上記表示画像の平面図である。
パノラマ画像の選択されたウィンドウ部と、装置のモニターまたはディスプレイ上の上記選択されたウィンドウ部の表示される画像との関係を示すフォトセンサーまたはピクセルの構成の平面図である。
複数のウィンドウ枠が装置表示画像に重なり、ユーザーが、閲覧する予め定義されたアスペクト比のウィンドウ部を選択できるようにする状態での、パノラマ画像またはパノラマ画像の代表的な画像の上記表示画像の平面図である。
本発明のカメラシステムと、デジタル画像データを1つまたは複数の別個の装置に出力する本発明のプロジェクターシステムとを含む分散ネットワークシステムの概略図である。
本発明によるプロジェクターシステムの第1の実施形態の側面図である。
本発明によるプロジェクターシステムの第2の実施形態の側面図である。
本発明によるプロジェクターシステムの第3の実施形態の側面図である。
周囲半球閲覧面/画面にパノラマ画像を投影するように配置された図12〜図14のうちの任意の図のプロジェクターユニットを示す図であり、閲覧者は周囲画面内に位置する。
周囲半球形閲覧面/画面にパノラマ画像を投影するように配置された図12〜図14のうちの任意の図のプロジェクターユニットを示す図であり、閲覧者は周囲画面内に位置し、プロジェクターは頭上にある。
図16の構成と同様の構成を示す図であるが、周囲画面なしで投影画像を閲覧するように、プロジェクターユニットは下に搭載され、半球形反射素子に面し、反転画像を切頂半球形周囲画面に投影する。
ユーザーが装着したヘッドギア等の形態のヘッドアップディスプレイを備える本発明によるプロジェクターシステムの斜視図である。
本発明によるプロジェクターシステムを利用する会議システムの会議ステーションの概略図である。
図19の複数の会議ステーションを備える会議システムの概略図である。
以下の説明は、単なる例としての好ましい実施形態の説明であり、本発明を実施するために必要な特徴の組み合わせに限定されない。
以下の説明では、超広角画像によって、従来のカメラユニットの通常の画像ビューよりも広い画像、例えば、カメラユニット周囲の180度に等しいか、または180度を超える画像ビューが意味される。より具体的には、この用語は、カメラユニット周囲の360度の環状若しくはドーナツ形の画像ビューを含むことができる略パノラマの画像ビューまたは上記カメラユニット周囲の概して半球の画像フィールド若しくは景色を画定する「完全な」パノラマ画像ビューを指すものとして解釈される。
図1aおよび図1bを参照して、本発明による第1のシステムの第1の主な実施形態を示す。この実施形態は、少なくとも画像センサー12と、超広角画像を取得し、上記画像センサー12の感光面16に向ける手段14とを備える統合カメラユニット10を備える。
超広角画像を取得し、画像センサー12の感光面16に向ける手段14は、超広角画像を取得し、センサー12等の光学チップ上に結像する、当業者に既知の任意の適するシステムまたは装置を含むことができる。例えば、画像取得手段14は、レンズ、1組のレンズ、ミラー、1組のミラー、プリズム、または1組のプリズムのうちの任意の1つまたは任意の組み合わせを備えることができる。この実施形態では、画像取得手段は、半球レンズまたは魚眼レンズ18を備える。魚眼レンズ18は、カメラユニット10を取り囲む略パノラマの画像を取得する。略パノラマの画像は、フルパノラマ画像でなくてもよく、画像取得手段14周囲の選択された平面における360度のドーナツ形画像ビューを含むことが好ましい。大半の用途では、半球形画像シーンの高さの約1/3の深さを有するカメラユニット10を取り囲むドーナツ形画像シーンで十分である。しかしながら、他の用途では、略パノラマの画像は、カメラユニット10を取り囲む概して半球形の画像ビューの全体を含むフルパノラマ画像であることが好ましい。
画像センサー12は、画像センサー12の平らな感光面16に入射する画像光を1つまたは複数の電気信号に変換する。画像センサー12は、画像センサーチップ12等のソリッドステート装置を含む。チップ12の平らな感光面16は、複数のフォトセンサーまたはピクセル(図1aおよび図1bには示されず)を備え、複数のフォトセンサーまたはピクセルはそれぞれ、入射光を1つ若しくは複数の電気信号または電子信号に変換する。図1bに示される図とは対照的に、感光面16は、チップ12の上面の全体を覆わなくてもよく、画像取得手段14の下にあるチップの表面の一部のみを覆うことができる。
電荷結合素子(CCD)チップおよび相補型金属酸化膜半導体(CMOS)チップ等の、画像取得手段14として利用することができる幾つかの光学チップタイプが既に知られている。しかしながら、本発明のこの実施形態のカメラユニット10にはCCDチップが好ましいが、当業者には明らかなように、Foveon社製の画像センサー等の画像取得手段14の感光面に入射する取得画像を1つまたは複数の電気信号に変換するのに適する任意のチップを、本発明のシステムおよびカメラユニットに利用することができる。しかしながら、後述するように、本発明に使用するために、或る特定の新規の変更をチップに行うことができる。
1つのそのような変更は、画像センサーチップ12の複数のフォトセンサーまたはピクセルが、現在利用可能なCCDチップ等で既知のようなフォトセンサーまたはピクセルの行および列の方形格子アレイとは対照的に、概して円形の構成で平らな感光面16に配置されることである。概して円形の構成の選択は主に、従来の構成よりも少ない歪みで、入射される受信画像を最も効率的に、またはより効率的に取得し、および/または水平線を含む従来のモニターディスプレイに表示するための画像または画像の一部分の任意の歪みが存在する場合、その歪みを除去、低減または補正するために必要な処理が少ないパターンのフォトセンサーまたはピクセルを提供するためである。しかしながら、幾つかの追加の予想しなかった技術的利点が、フォトセンサーまたはピクセルの概して円形の構成から生じ、それらの技術的利点は以下の説明から明らかになろう。
図2aおよび図2bに示されるように、本発明のカメラユニット10の一実施形態では、複数のフォトセンサーまたはピクセル20は、等しい数のピクセル20の一連の同心円として上記平らな感光面16上に配置される。これは図2bにおいて最も良く見え、放射状の線22が、ピクセル20の多くの同心円24からの、対応して配置されるピクセル20と半径方向において交差する。フォトセンサーまたはピクセル20の同心円24は、画像センサーチップ12の感光面16の全体を占めることができる。ピクセル20は、隣接するピクセル20の間にスペースがない、すなわち、フォトセンサーまたはピクセルが連続するようなサイズおよび/または形状であることができる。
図2bに示される他の構成では、感光面16の中央エリア26は、密度を低減したフォトセンサーまたはピクセル20を有することができるか、または「完全な」パノラマ画像ビューではなく、部分的なパノラマ画像ビューを提供するカメラユニットに適切なように、任意のフォトセンサーまたはピクセル20をなくすことができる。代替的には、フルパノラマ画像ビューを提供するように構成されるカメラユニットでは、チップの感光面16の中央エリア26は、センサーまたはピクセル20の同心円24によって占められる周囲エリアのパターンとは異なるパターンのフォトセンサーまたはピクセル20を有して、感光面16の外側領域にあることから、中央領域26の同心円24内と同じサイズ、形状、および/または数のピクセルの実施が難しいことを考慮することができる。この実施形態では、各同心円24内のフォトセンサーまたはピクセル20の数は、他の同心円24と同じであるが、外側の円24と比較して内側の円24で、フォトセンサーまたはピクセル20の面積が低減し、および/または異なる形状のものとすることができる。
図3aおよび図3bに示されるように、本発明のカメラユニット10の別の実施形態では、複数のフォトセンサーまたはピクセル20は、不等数のピクセル20の一連の同心円24として上記感光面16上に配置され、各同心円24に概して同じサイズのセンサーまたはピクセル20を収容する。ここでも、チップの感光面16の中央エリア26は、ピクセルを有さなくてもよく、またはセンサー若しくはピクセル20の同心円24によって占められる周囲エリアのパターンとは異なるパターンのフォトセンサー若しくはピクセル20を有することができる。
更に他の実施形態では、感光面16は、互いと同数のセンサーまたはピクセルを有する同心円の外側領域と、互いと同数のセンサーまたはピクセルを有する内側領域とを有するが、外側ゾーンの同心円内のセンサーまたはピクセル数が、内側ゾーンの円内のセンサーまたはピクセル数と異なるように区分けすることができる。感光面16の区分けにより、ゾーンあたりの画像解像度等の異なる画像効果を提供する画像センサーチップ12をもたらす、センサーまたはピクセルの数、形状、および/またはサイズの異なる組み合わせを各ゾーンの同心円に配置することが可能になることが理解されよう。感光面が、センサー若しくはピクセルの非円形構成を有するか、またはセンサー若しくはピクセルを有さない中央エリアゾーン26を含む3つ以上のゾーンを有することができることも理解されよう。
カメラユニットが動画像を取得しており、取得された動画像を表す電気信号がデジタルフォーマットに変換される場合、上記デジタルフォーマットは、好都合には、デジタルビデオフォーマットを含むことができる。これは、インターレース式またはプログレッシブ式のデジタルビデオフォーマットとすることができる。インターレース式のデジタルビデオフォーマットの場合、フォトセンサーまたはピクセル20の上記一連の同心円24の交互の円はそれぞれ、デジタルビデオ信号の奇数線および偶数線に割り当てられる。プログレッシブ式デジタルビデオフォーマットの場合、センサーまたはピクセル20の全ての同心円24が、デジタルビデオ信号のプログレッシブ線に割り当てられる。
図4aおよび図4bに示されるように、本発明のカメラユニット10の別の実施形態では、複数のフォトセンサーまたはピクセル20は、フォトセンサーまたはピクセル20の少なくとも1つの密な螺旋を構成するものとして感光面16上に配置される。ここでも、ピクセル20のサイズおよび/または形状は、隣接するピクセル間または周囲のピクセル間にスペースがないようなものであることができる。最初の図において、図4aは、図2aに示される等しい数のピクセルの一連の同心円に配置されるピクセル20を示すように見えるが、図4bにおいて最も良く見られるように、ピクセル20は、フォトセンサーまたはピクセル20の単一の螺旋28に配置され、ピクセル20は、図4bの半径方向に延びる線30で示されるように半径方向において位置合わせされる。ここでも、チップの感光面16の中央エリア26は、ピクセルを有さなくてもよく、またはセンサー若しくはピクセル20の単一の螺旋28で占められる周囲エリアのパターンとは異なるパターンのフォトセンサーまたはピクセル20を有することができる。
代替的には、図5aおよび図5bに示されるように、センサーまたはピクセル20の単一の螺旋28内のピクセルは、図4aおよび図4bのように半径方向において位置合わせされず、センサーまたはピクセル20の単一の螺旋28が占める感光面16のエリア全体を通して同様の密度を有するように配置される。
図6aおよび図6bに示されるように、感光面16は、半径方向において位置合わせされるピクセル20を有するフォトセンサーまたはピクセル20の2つのインターレースした密な螺旋32、34を備えるが、カメラ用途に応じて、画像センサーチップ12の感光面16を覆うフォトセンサーまたはピクセルの3つ以上のインターレースする密な螺旋が存在することができる。ここでも、チップの感光面16の中央エリア26は、ピクセルを有さなくてもよく、またはセンサー若しくはピクセル20の2つの螺旋32、34によって占められる周囲エリアのパターンとは異なるパターンのフォトセンサー若しくはピクセル20を有することができる。
代替的には、図7aおよび図7bに示されるように、センサーまたはピクセル20の2つの螺旋32、34内のピクセルは、図6aおよび図6bのように半径方向において位置合わせされず、センサーまたはピクセル20の2つの螺旋32、34によって占められる感光面16のエリア全体を通して同様の密度を有するように配置される。
センサーまたはピクセルの1つ若しくは複数の密な螺旋を用いることの1つの予想しなかった技術的な利点は、同心円のセンサーまたはピクセルを用いることによる密度よりも高い密度まで感光面を埋めることが可能なことである。換言すれば、図4a〜図7bに示されないが、センサー若しくはピクセルを有さないか、または同心円の場合とは異なるパターンのセンサー若しくはピクセルを有するはるかに小さな中央エリアを有することが可能であり、それにより、デジタルフォーマットへの画像変換が改善され、それにより、画像センサーチップ表面の中央領域の特別な処理の必要性が低減する。
螺旋になったセンサー若しくはピクセルの1つ若しくは複数の線を形成するピクセル20のサイズおよび/または面積は、1つ若しくは複数の線に沿って同じであることができるか、または線が感光面の中央に近づくにつれて漸次的にサイズおよび/または面積を低減することができる。
1つまたは複数の螺旋を用いることの1つの予想しなかった更なる技術的な利点は、螺旋が密であること、すなわち、螺旋の対応する部分が、隣接するピクセル間または周囲のピクセル間にスペースがないように一緒に近くに配置されることを保証することにより、同心円構成と比較してオフセットが僅かのみであり、それであってもなお、感光面の外縁部から中心点近傍まで延びる1つまたは複数のプログレッシブ線を形成する構成でセンサーまたはピクセルが配置されることである。
感光面が単一の螺旋のセンサーまたはピクセルを備える場合、これはプログレッシブ線デジタルビデオ信号に割り当てることができる。感光面が、センサーまたはピクセルの2つのインターレースした螺旋を備える場合、各線は二重線デジタルビデオ信号(dual line digital video signal)の奇数線または偶数線のそれぞれに割り当てることができる。
図2a〜図7bの実施形態では、フォトセンサーまたはピクセルの線の構成およびセンサーまたはピクセルの形状は、フォトセンサーまたはピクセルの上記1つまたは複数の線が、上記フォトセンサーまたはピクセルの間にギャップを一切残さずに、感光面の表面を埋めるようなものであることができる。さらに、フォトセンサーまたはピクセルは適宜、ベイヤーセンサー、Foveonセンサー、またはCCDセンサー、例えば、3CCDセンサーのうちの任意のセンサーを含むことができる。ベイヤーセンサーは低コストのセンサーであり、画像センサーチップに一般に見られる。ベイヤーセンサーは、赤、緑、または青の光を選択されたピクセルセンサーに通して、赤、緑、および青に感度を有するインターレースグリッドを形成するカラーフィルターアレイを備える。ベイヤーセンサーは、背面照射型センサーも含み、光は、トランジスタおよび金属線がある側とは逆の側から高感度シリコンに入り、それにより、装置側の金属接続が光を遮らず、効率がより高くなる。Foveonセンサーは、階層ピクセルセンサーのアレイを用い、あらゆる位置が3つ全てのカラーチャネルを検知するように、シリコンに固有の波長依存性吸収特性を介して光を分ける。3CCDセンサーは3つの離散した画像センサーを用い、色の分離はダイクロイックプリズムによって行われる。
フォトセンサーまたはピクセル20を概して円形の構成に配置することは、魚眼レンズ18に起因する画像の歪みが、ピクセルの配置によって或る程度相殺され、それにより、任意の残りの歪みを計上するために再実行するデジタル画像データの処理が低減するという利点を提供するが、本発明は、高品質用途で、パターンを特定のレンズ18に「合わせる」ように、すなわち、変更されたパターンが実質的に、上記特定のレンズに起因する全ての歪みを相殺するようピクセル20の概して円形の構成を変更するように、感光面16上のフォトセンサーまたはピクセル20のパターンを変更することを含むことができる。感光面上のピクセルのレイアウトは、当業者によって理解されるマスキングプロセスによって決定され、それゆえ、結果として、レンズの透光特性をパターン化することによって、特定のレンズに合わせられた特定の光学チップ用のマスクを作製することができることになる。パターンの変更は、ピクセルの密度、サイズ、面積、形状等について既に暗に示した変更のうちの幾つかを含むことができる。これは、画像がレンズによって圧縮される場合、ピクセルの密度、サイズ、面積、および/または形状の増大を含むことができ、画像がレンズによって拡大する場合、密度、サイズ、面積、および/または形状の低減を含むことができる。
感光面上のフォトセンサーまたはピクセルの特定の配置にもかかわらず、センサーまたはピクセルの信号出力は、半径方向に読み取るか、または処理することができる。すなわち、感光面の中央点または中央領域付近の最も内側のセンサーの出力をまず読み取り、引き続いて上記最も内側のセンサーから半径方向外側に配置されたセンサーまたはピクセルの出力が続く。代替的には、感光面上の最も外側のセンサーまたはピクセルをまず読み取るか、または処理することができ、引き続いて上記最も外側のセンサーから半径方向内側に配置されたセンサーまたはピクセルの出力が続く。
別の実施形態では、感光面のフォトセンサーまたはピクセルは、超広角画像を半径方向に取得または走査するように、例えば、概して円形の画像を半径方向に取得または走査するように構成することができる。
再び図1aおよび図1bを参照すると、カメラユニット10は、上記フォトセンサーまたはピクセル20によって生成された電気信号をデジタル画像データに変換する手段を含むことができる。変換する手段40は、CCDチップで知られているようにカメラユニットにおいて提供される、適する回路またはCMOSチップで知られているように画像センサーチップ自体に追加の回路を含むことができる。いずれの場合でも、この実施形態でのカメラユニット10が、画像センサーチップ12の出力からのデジタル画像データを生成する回路を含むことが有用であるが、幾つかのカメラユニットでは、用途または使用に応じて、カメラユニットが画像センサーチップ12からの出力信号を遠隔装置(図示せず)に送信する出力を有することができ、上記遠隔装置においてデジタル画像データに変換されることが理解されよう。
したがって、図1a〜図7bを参照してこれまで説明された統合カメラユニット10は、システム内のカメラユニット10を形成することができ、それにより、カメラユニット10は、取得されたパノラマ画像を表すデジタル画像データまたは信号を1つまたは複数の遠隔装置に出力し、遠隔装置において、信号またはデータの更なる処理を実施することができる。そのようなシステムでは、カメラユニット10は、パノラマ画像ビューを取得し、この画像ビューを表すデータまたは信号を、表示および/または更なる処理のために上記遠隔装置のうちの少なくとも1つに伝達するように動作する。カメラユニット10は、静止画像カメラのように静止画像を取得するように構成することができるが、動画像を取得するように構成されることが好ましい。しかし、静止画像能力を保持することも好ましい。
カメラユニット10が、上記フォトセンサーまたはピクセルによって生成された電気信号をデジタル画像データに変換する手段を含む図1aおよび図1bも参照すると、カメラユニット10は、上記デジタル画像データをバッファリングし、および/または記憶する手段40を含むこともできる。当業者に馴染みのある任意の適する記憶またはバッファリング手段40を、カメラユニット10においてデジタル画像データをバッファリングし、および/または記憶するために用いることができる。例えば、上記デジタル画像データをバッファリングまたは記憶する手段40は、フラッシュメモリ装置またはチップを含むことができる。
この実施形態では、カメラユニット10は、上記取得されたパノラマ画像のウィンドウ部の選択を受信する、ボタン、タッチスクリーン等の入力手段42を含む。カメラユニット10は、コンピューター可読命令を記憶するメモリ手段44も有し、コンピューター可読命令は、プロセッサ46によって実行されると、ユーザーが入力手段42を介して、記憶またはバッファリングされたパノラマ画像のウィンドウ部の選択を入力できるようにすることを含むカメラユニット10の動作を制御する。デジタル画像データのバッファリングによって、閲覧された画像シーンのウィンドウ部のリアルタイムの選択が可能になり、一方、デジタル画像データの記憶によって、前に記録された画像シーンのウィンドウ部の選択が可能になることが理解されよう。
図8を参照すると、ウィンドウ部の選択は、パノラマ画像の画像60若しくは図面62またはパノラマ画像の代表的な画像64を、上記カメラユニット10の表示画面48または上記カメラユニット10に接続される周辺装置(図示せず)の表示画面上に、ウィンドウ枠66を上記表示画像60、図面62、または代表的な画像64に重ねた状態で表示することを含むことができる。表示画像60、図面62、または代表的な画像64に相対するウィンドウ枠66の位置は、矢印線68、70、72で示されるようにユーザーによって操作して、表示画像60、図面62、または代表的な画像64の上に移動させ、それにより、取り出しおよび表示/再生に望まれる、パノラマ画像のウィンドウ部を選択することができる。勿論、入力手段42の性質および構成に応じて、所望のウィンドウ部を選択する他の方法を提供することもできる。
取り出しに選択されたウィンドウ部を識別するために、画像センサーチップ12のフォトセンサーまたはピクセル20は、アドレス指定可能または他の様式で識別可能であることが好ましく、それにより、ユーザーがウィンドウ枠66を用いて所望のウィンドウ部の選択を入力すると、これはカメラユニット10のプロセッサ46によって、適切な個々のフォトセンサー若しくはピクセル20またはフォトセンサー若しくはピクセルのブロックおよび/またはフォトセンサー若しくはピクセル20が占める線のアドレスまたは識別子に変換され、選択されたウィンドウ部に応答してどのデジタル画像データを取り出すべきかを判断する。
プロセッサ46は、上記選択されたウィンドウ部を含むデジタル画像データの上記バッファまたは記憶手段40からの取り出しを可能にし、および更に処理され、および/または上記カメラユニット10の画面48に表示するか、または上記取り出されたデジタル画像データをカメラユニット10の出力ポート50において周辺装置若しくはパーソナルコンピューター、個人情報端末、スマートフォン等の別個の表示装置に出力される。
図9を参照すると、図9は、図2a、2bまたは図3a、3bに関して上述したような同心円構成を有する画像センサーチップ12のカメラユニット10によって取得されたパノラマ画像73の選択されたウィンドウ部74と、例えば、カメラユニット10の画面48またはPCの遠隔モニター上のそのようなウィンドウ部74の表示との関係を示す。非円形に配置されるフォトセンサーまたはピクセルを有する画像センサーチップを利用するカメラユニットと比較した場合、従来の平らな表示装置に選択されたウィンドウ部74を表示するために必要な画像データ処理がないか、または処理量が低減されることが理解されよう。
本発明のカメラユニット10によって取得されるパノラマ画像の所望のウィンドウ部を選択する上記方法を、図4a〜図7bのいずれかによる構成のピクセルまたはフォトセンサーを有する光学チップを用いて取得される画像にも等しく用いることが可能なことが理解されよう。
図1aおよび図1bのカメラユニット10では、プロセッサ46は、選択されたウィンドウ部のアスペクト比をユーザーが選べるようにする命令を実行することができる。図10に示されるように、アスペクト比は複数の予め定義されたアスペクト比A、B、Cから選択することができる。上記予め定義されたアスペクト比A、B、Cは、幾つかの従来の装置の表示画面のアスペクト比に関して定義することができる。代替的には、表示ウィンドウ部のアスペクト比は、予め定義される限度内のユーザー定義のアスペクト比を含むことができる。別の代替では、プロセッサ46は、カメラユニットの画面48のアスペクト比または取り付けられた遠隔表示装置の画面のアスペクト比を、要求されたウィンドウ部のアスペクト比として自動的に選択する命令を実行することができる。
これより図11を参照して、本発明による第1のシステムの第2の主な実施形態を示す。これは、パノラマ画像を取得し、上記取得されたパノラマ画像を表すデジタル画像データまたは電気信号を、メモリバンクまたはデータベース102、サーバーまたはコントローラー104、1つまたは複数の入力装置106を含む1つまたは複数の別個の装置に出力するカメラユニット100を含む分散システムを備える。メモリバンクまたはデータベース102は、デジタル画像データの記憶および/またはバッファリングに提供される。別個のメモリバンクまたはデータベース102はまた、カメラユニットが、パノラマ画像を表す、カメラユニット100から受信する電気信号をデジタル画像データに変換する能力を有さない場合、この変換を行うように構成することができる。システムは、上記選択に応答して、1人または複数のユーザーからのパノラマ画像の要求されたウィンドウ部の1つまたは複数の選択を処理し、デジタル画像データを取り出すサーバーまたはコントローラー104を含み、1つまたは複数の入力装置106は、パノラマ画像のウィンドウ部の要求された選択をサーバーまたはコントローラー104に送信し、要求の発行に応答して取り出されたデジタル画像データを受信して、表示等するように構成される。
カメラユニット100は、図1a〜図10に関して説明した本発明の第1の主な実施形態に関して上述したように、画像センサーチップ12を利用する。カメラユニット100は、第1の主な実施形態のカメラユニット10と同様に、画像センサーチップの出力をデジタル画像データに変換する手段を含むことが好ましいが、これは、第2の主な実施形態のシステムが機能するために必須ではない。カメラユニット100は、上記デジタル画像データをローカルにバッファリングまたは記憶する手段を含むこともできるが、デジタル画像データの記憶は、別個のメモリバンクまたはデータベース102によって提供されることが好ましい。したがって、カメラユニット100は、例えば、データを上記カメラユニット100から上記メモリバンク若しくはデータベース102にストリーミングすることによってリアルタイムで、またはデータがバッチ若しくはファイルで送信される場合は非リアルタイムで、上記デジタル画像データを上記カメラユニット100から上記メモリバンク若しくはデータベース102に送信可能なように、上記メモリバンク若しくはデータベース102に接続される。サーバー/コントローラー104および1つまたは複数の入力装置106はまた、メモリバンクまたはデータベース102および/またはカメラユニット100に接続することもできる。入力装置106は、限定ではなく、例えばPC、個人情報端末、スマートフォン、ゲームプレーヤー、スマートテレビ等の画像データを受信して表示する任意の適する電子装置を含むことができる。
装置間、より具体的にはカメラユニット100からメモリバンクまたはデータベース102へのデジタル画像データの送信は、リアルタイムであることができるか、または要求時にバッチで、ポーリングにより、若しくは任意の他の適する送信方式で実行することができる。カメラユニット100は、ケーブル、ケーブル網、または通信ネットワーク108によってメモリバンクまたはデータベース102に接続することができる。サーバー/コントローラー104および入力装置106も、ケーブル、ケーブル網、または通信ネットワーク108によってメモリバンクまたはデータベース102およびカメラユニット100に接続することもできる。通信ネットワーク108は、私設通信ネットワーク、公衆ネットワーク、またはこれら2つの組み合わせとすることができる。ネットワークは、図11ではクラウドで示されるインターネット110を含むか、または備えることができる。ネットワークはまた、ローカルエリアネットワーク(LAN)および/または広域ネットワーク(WAN)を備えるか、または含むこともできる。ネットワーク対応装置の相互接続に用いることができるネットワークの性質を当業者は理解し、この実施形態のシステムでは、システムを構成する別個の遠隔装置は全て、データおよび/またはコマンド、要求、および応答メッセージを共有するためにネットワーク対応であることが好ましい。
図11のシステムは、単なる例として、本発明による1つまたは複数のカメラユニット10、100を利用する監視システム、同様に1つまたは複数のカメラユニット10、100を利用する公衆娯楽イベント配信システム、またはテレビ会議システムを含むことができる。
使用に際して、図11の分散システムのカメラユニット10、100は、パノラマ画像を取得し、上記画像を表すか、または定義する電気信号またはデジタル画像データをメモリバンクまたはデータベース102に提供し、メモリバンクまたはデータベース102は、デジタル画像データをバッファリングし記憶するのにネットワークアクセス可能なデータベースであることが好ましい。
サーバー/コントローラー104は、ユーザー装置106からの要求を処理するように構成される。これらの要求は、パノラマ画像のユーザー要求の選択されたウィンドウ部を備えるか、または含むことができる。要求は、リアルタイムの画像シーンまたは前に記録された画像シーンのウィンドウ部に対する要求とすることができる。いずれの場合でも、サーバー/コントローラー104は、上記要求に応答してデータベース102と通信して、デジタル画像データを取り出し、取り出されたデータを各入力装置106に送信するように機能する。サーバー/コントローラー104はまた、ユーザー装置106から要求された選択に関連する制御コマンドを受信して処理し、それに従ってデータベースから取り出されたデータを変更することができる。
図11のシステムは、監視システムの制御ポイント、TV制作システムの編集ポイント、エンドユーザーのTV、PC、PDA、またはモバイルハンドセット等の入力装置106のユーザーが、入力装置106においてパノラマ画像の一部分を表示または更なる処理に関して要求し、ウィンドウ部の要求される選択に関連するコマンドを発行できるようにする。
再び図10を参照すると、カメラユニットの画像センサー感光面16のレイアウトに準拠して取得されたパノラマ画像73の表示画像60、平面62、または代表的な画像64が示される。予め定義されるアスペクト比のウィンドウ部A、B、Cは、例として、パノラマ画像73の図面上に特定のタイプのユーザー入力装置に合うウィンドウ部で記される。しかしながら、アスペクト比が予め定義されるか、または任意の特定の装置に合わせられることは必須ではないが、そうすることによって幾つかの利点が達成される。
図10に示されるように、ユーザーは、パノラマ画像73のウィンドウ部の選択に関連して幾つかのコマンドを発行することができる。この例では、コマンドは、パンコマンド70、72を含み、それにより、ユーザーは、選択されたウィンドウ部を画像73の周囲でパンすることを要求している。他のコマンドは、選択されたウィンドウ部が図10の平面図の中央に向かって移動することになるチルトコマンド68または選択されたウィンドウ部のより大きな若しくはより小さな表現をレンダリングするズームイン若しくはズームアウト機能を含む。
サーバー/コントローラー104は、例えば、ユーザーの要求されたウィンドウ部が重なることができるように、複数のユーザーから複数の要求を受け入れることができる。さらに、各ユーザーは、上述したコマンドを通して選択されたウィンドウ部を能動的に変更することができ、コマンドは、ユーザーが取得されたパノラマ画像73の任意の部分を見られるようにするリアルタイムコマンドを含むことができる。
本発明による1つまたは複数のカメラユニット10、100と、デジタル画像データのバッファリングおよび/または記憶にメモリ装置40、102とを用いる監視システムでは、制御ポイントにおけるセキュリティ要員は、単一のカメラユニット10、100によって取得される画像を用いて、上記カメラユニット10、100の周囲のパノラマエリアを監視するか、またはモニタリングすることができ、それにより、複数の従来のカメラユニットが同じエリアをカバーする必要性をなくす。さらに、各要員がパン、チルト、およびズーム等のコマンドを発行することができるため、本発明のシステムでのカメラユニットは、物理的なパン動作およびチルト動作を行うためにモーターを有する従来のカメラユニットを提供する必要性または従来のシステムのように或る特定のカメラを或る特定の要員に割り当てる必要性をなくす。
また監視システムでは、セキュリティ要員が、セキュリティ要員の選択されたウィンドウ部のビュー外部で生じる活動をリアルタイムで見ることに失敗した場合であっても、パノラマ画像の記憶により、パノラマ画像を後に見直して、証拠および/または他のセキュリティ目的で上記見過ごした活動を見直すことができる。
公衆娯楽配信システムでは、例えばコンサートの画像を見るために、デジタル権所有者のシステム(図11ではサーバー/コントローラー104で表される)に加入するか、または他の様式で接続しているユーザー106は、パノラマ画像の任意の部分を自由に観察し、制作ディレクターに依拠せずに、画像を閲覧者に利用可能とする。閲覧されるものを自分で編集することができるこの自由は、デジタル権所有者のコンテンツへの加入またはコンテンツのアクセス権を購買する望ましさを大幅に高める。さらに、ユーザーは、パノラマ画像モードで記録されたコンサートまたは公衆娯楽イベントを閲覧する都度、独自の閲覧経験を生み出すことができる。
一態様では、本発明が、360度の景色内でパン機能、チルト機能、およびズーム機能を別々にリアルタイムで制御して、ライブまたは事前記録の両方で遠隔の場所を探索する能力を複数のユーザーに提供するように設計されたソリッドステートカメラシステムに関することを理解することができる。装置は、周囲の環境の完全な360度の景色を取得するCCD等の光学センサーチップに搭載される半球レンズまたは魚眼レンズからなる。
結果として生成される、センサーアレイに衝突する画像は円形であり、装置が水平面にセットされていると仮定すると、大半の用途での主な対象エリアは、円形の外縁部から直径の約1/3までのドーナツ形エリアに位置する水平視野のパノラマである。
センサーアレイの出力は、バッファに供給され、出力のサブセットまたは「ウィンドウ」は次に、ユーザーのモニター装置に適切な解像度およびアスペクト比でユーザーに出力される。次に、ユーザーは、ディスプレイバッファ内のウィンドウの移動を制御して、どの方向で見たいかを選択することができ、それゆえ、複数のユーザーが、任意の要求される解像度およびアスペクト比で360度の景色内のパンパラメーターおよびチルトパラメーターを別々に同時に制御できるようにする。装置の完全な景色の出力は、その全体で見ることはできない場合があるが、記録し、装置によって取得された360度の景色内のいずれの場所でもパンおよびチルトする自由を伴って後に調べることができる。
これより図12を参照して、本発明による第2のシステムの第1の主な実施形態を示す。システムは、超広角画像を閲覧面(図示せず)に投影するシステムを含む。システムは、超広角画像データを受信する入力202等の手段を有するプロジェクターユニット200を備える。プロジェクターユニット200は、上記超広角画像データを光学画像に変換する手段204も有する。この実施形態では、上記変換手段204は、光学チップまたは発光フォトセンサーまたはピクセル205のアレイ206を含む。これらは、例えば、受信したデジタル画像データに具現されるデジタルビデオ信号の奇数線および偶数線が割り当てられる発光素子205の交互の同心円を有することを含め、図2a〜図7bに示される光学チップ12のフォトセンサーまたはピクセルのパターンと同様にして概して円形のパターンに配置される。実際には、プロジェクターユニット200の発光フォトセンサーまたはピクセル205は、発光フォトセンサーまたはピクセル205が、受信した光学画像データから導出される電気信号を光に変換するという点で、本発明の第1のシステムの光学チップ12のピクセルとは逆の動作を実行する。光学チップまたは発光フォトセンサー若しくはピクセル205のアレイ206は、光学画像または上記光学画像の一部分を含む発光を画像投影手段208に向けるように構成される。画面またはバイザー等(図示せず)等の閲覧面を上記画像投影手段208の近傍に取り付けることができ、その場合、上記画像投影手段208は、上記光学画像またはその一部分を上記閲覧面に投影する。幾つかの実施形態では、発光フォトセンサーまたはピクセル205は、発光ダイオード(LED)または液晶ディスプレイ(LCD)素子を含むことができる。
プロジェクターユニット200は、パノラマ画像(静止画像または動画像)を具現する受信したデジタル画像データをバッファリングし、および/または記憶するバッファまたは記憶手段210と、機械実行可能命令を記憶するメモリ手段212と、上記命令を実行して、受信したデジタル画像データを処理し、変換手段204への入力として電気信号に変換するとともに、プロジェクターユニット200の他の動作およびアプリケーションを制御するプロセッサ214とを含むことができる。代替的には、プロジェクターユニット200は、通信ネットワークを介してデータベース等のバッファ/記憶手段に接続することができ、それにより、デジタル画像データは、ネットワークを介して上記データベースからプロジェクターユニット200に送信される。したがって、プロジェクターユニットは、図11に示されるように本発明の第1のシステムの一部を構成することができ、それにより、カメラユニット10、100によって取得されたデジタル画像は、要求に応じて、または何らかの他のトリガー動作により、データベース102に送信され、続けてプロジェクターユニット200に送信される。
使用に際して、受信されたデジタル画像データは、例えば、カメラユニット10、100から直接、または図11の分散システムのデータベース102からプロジェクターユニット200において受信することができる。
本発明の第1のシステムと同様に、画像投影手段208は、上記複数のフォトセンサーまたはピクセルによって生成された光学画像を投影するレンズ、1組のレンズ、ミラー、1組のミラー、プリズム、または1組のプリズムを備えることができるが、図12の実施形態では、画像投影手段208は魚眼レンズ216を備える。魚眼レンズを発光チップまたはアレイ206に合わせて、閲覧面に画像を投影する際の歪みを低減するか、またはなくすことができる。
また、本発明の第1のシステムと同様に、本発明の第2のシステムは、上記超広角光学画像のウィンドウ部の選択を受信する入力手段218を含むことができ、それにより、プロセッサ214は、バッファ若しくは記憶手段210から、またはデータベース(図11)から上記選択されたウィンドウ部を含むデジタル画像データを取り出すように構成される。したがって、動作に際して、ユーザーは、プロジェクターユニット200またはウィンドウ枠を示して、ユーザーがパノラマ画像の一部分を選択できるようにする接続された装置(図示せず)上のウィンドウ化された表示220を介してパノラマ画像のウィンドウ部を選択することができ、次に、パノラマ画像の一部分は閲覧面、例えば表示画面に投影される。上記超広角画像のウィンドウ部の選択を受信する手段は、パンコマンド、チルトコマンド、およびズームコマンドのうちの任意のコマンド等の、上記選択されたウィンドウ部に関連するコマンドを受信するように構成することができる。
上記超広角画像のウィンドウ部の選択を受信する手段は、図11のサーバー/コントローラー104を含むこともでき、サーバー/コントローラー104は、その後プロジェクターユニット200に送信するのに、上記選択されたウィンドウ部を含むデジタル画像データをデータベース102から取り出すように構成することもできる。
これより図13を参照して、本発明による第2のシステムの第2の主な実施形態を示す。これは概して、図12に示される第2のシステムの第1の主な実施形態と同じ構造を有するが、複数の発光ピクセルが、バックライト224等を有するLEDまたはLCD型表示パネル222で置き換えられている。
これより図14を参照して、本発明による第2のシステムの第3の主な実施形態を示す。これは概して、図12に示される第2のシステムの第1の主な実施形態と同じ構造を有するが、複数の発光ピクセルが、走査型ミラー228に提供される概して円形のアレイを走査するレーザー226で置き換えられている。
図15は、パノラマ画像を周囲半球形閲覧面/画面230に投影するように配置された図12〜図14のうちの任意の図のプロジェクターユニットを示し、閲覧者は周囲画面230内に位置する。この構成では、フルパノラマ画像を画面230に投影することができるか、または選択された部分を周囲画面の対応する部分若しくは選択された部分に投影することができる。
図16は、図15の構成と同様の構成を示すが、プロジェクターユニット200は略半球形の周囲画面232の頭上に取り付けられ、プロジェクターユニット200は、図15の構成と比較した場合、反転している。ここでも、フルパノラマ画像を画面232に投影することができるか、または選択された部分を周囲画面の対応する部分若しくは選択された部分に投影することができる。
図17は、図16の構成と同様の構成を示すが、プロジェクターユニット200は、切頂半球形周囲画面232に画像を投影するために、半球形反射素子234の下に、半球形反射素子234に面して取り付けられ、プロジェクターユニット200は同様に、図15の構成と比較した場合、反転する。ここでも、フルパノラマ画像を画面に投影することができるか、または選択された部分を周囲画面の対応する部分若しくは選択された部分に投影することができる。この場合、構成は、投影される画像が、画面232内からではなく、画面232の外部から見られるようなものとすることができる。
図18に示されるように、本発明による第2のシステムは、ユーザーが装着するヘッドギア240の形態のヘッドアップディスプレイを備えることができる。したがって、閲覧面は、ヘッドギア240のバイザー242を構成することができ、それにより、パノラマ画像の一部分は、バイザー242の内面に投影され、ヘッドギアを装着している人物によって閲覧される。この構成では、カメラ10、100によって取得された図18においてXで表されるフルパノラマ画像はヘッドギア240またはヘッドギアに関連する情報処理ユニット(図示せず)に利用可能となる。しかしながら、図18においてYで表される完全な画像の一部分のみが、部分魚眼プロジェクターユニット200によってバイザーに投影される。ヘッドギアの構成は、情報処理ユニットが、所定の基準に相対する人物の頭部の移動、ひいてはヘッドギアの移動に応答して、上記超広角光学画像の選択されたウィンドウ部を受信するようなものである。所定の基準は、人物の体の位置に相対する人物の前方ビューの中間点を表す点または線としてとられる。したがって、情報処理システムに利用可能となるパノラマ画像は、ヘッドギアを装着している人物の周囲のパノラマビューを含むか、または表す。人物が選択された基準から離れて頭部を回転させると、バイザーに表示された画像は、人物が、周囲の画像を直接見る場合に自然に見えるビューに合うように回転する。この構成の利点は、ユーザーが実際に、パノラマビューの任意の部分への直接的な視線を有する必要がないことである。実際には、人物は、閲覧中のパノラマビューの可能な直接的な画像ビューがない閉鎖された環境内にいることができる。
図18に示されるヘッドギアは、ヘッドギアの装着者が周囲画像ビューの中心点に存在せず、上記画像ビューの中心にある車両、例えば航空機を制御中である状況にも適用可能である。この場合、車両の遠隔にいる操作者は、適切な頭部の移動が、バイザーに投影中の新しい画像ビュー部分に変換されることを通して、車両の全周囲を見ることができる。
この構成の更に別の変形では、バイザーまたは閲覧画面は、ヘッドギアの一部をなさなくてもよく、パノラマ画像の一部分を示す部分的な周囲画面を含むことができる。しかしながら、操作者が頭部を動かすと、画面に投影されているパノラマ画像の一部分は、所定の基準に相対する操作者の頭部の位置に関連する部分にスクロールする。
図19および図20は、本発明による電話会議システムを示す。図19は、電話会議ステーション300を示し、一方、図20は複数の電話会議ステーション300を示し、各ステーションは、本発明の第1のシステムによるカメラユニット10、100と、本発明の第2のシステムによるプロジェクターユニット200とを利用する。電話会議システムのこの実施形態では、カメラユニット10、100は、机または会議テーブル310の概して中央に取り付けられ、スピーカー320/マイクロホン330を含み、参加者が互いを見て、話し、かつ聞けるようにする。上記の各会議テーブル310は、閲覧画面280を有するプロジェクターユニット200であり、それにより、電話会議出席者は、上記画面280の外面から、半球形反射器290を介して画面280の内面に投影される他の会議ステーション300のパノラマ画像を見ることができる。
一般に、本発明は、画像センサーと、パノラマ画像等の超広角画像を取得し、画像センサーの感光面に向けるレンズ/ミラー系等とを有するカメラ等の光学装置を提供する。画像センサーは、動画像とすることができる取得された画像を電気信号に変換する。画像センサーは、概して円形の構成で画像センサーの感光面上に配置される複数のフォトセンサーまたはピクセルを有する。概して円形の構成は、フォトセンサーまたはピクセルの密な螺旋を含むことができる。複数のフォトセンサーまたはピクセルは、各フォトセンサーまたはピクセルのアドレスまたは識別子を参照することによって取得画像のウィンドウ部を画定することができるようにアドレス指定可能であるか、または識別可能である。カメラは、上記電気信号をデジタル画像データに変換する手段と、上記デジタル画像データをバッファリングするか、若しくは記憶する手段とを含む統合システムまたは分散システムの一部をなすことができる。システムは、上記超広角画像のウィンドウ部の選択を受信する入力手段と、上記選択されたウィンドウ部を含むデジタル画像データを、上記バッファ手段または記憶手段から取り出し、上記取り出されたデジタル画像データを、表示および/または更なる処理のために情報処理手段に送信する手段とを含むこともできる。パノラマ画像または部分的にパノラマな画像を投影する円形構成の発光素子を利用するプロジェクターユニット等の光学装置も提供される。
本発明は、図面および上記説明において詳細に示され説明されたが、その特性は限定ではなく例示として見なされるべきであり、単に例示的な実施形態が示され説明され、本発明の範囲を決して限定しないことが理解される。本明細書において説明される特徴のうちの任意の特徴を任意の実施形態と併用可能なことを理解することができる。説明のための実施形態は、互いを除外せず、本明細書に記載されていない他の実施形態を除外しない。したがって、本発明は、上述した説明のための実施形態のうちの1つまたは複数の組み合わせを含む実施形態も提供する。本明細書に記載の本発明の変更および変形は、本発明の趣旨および範囲から逸脱せずに行うことができ、したがって、そのような限定は、添付の特許請求の範囲によってのみ示されるように課されるべきである。
以下の特許請求の範囲および本発明の上記説明では、表現言語または必要な意味合いに起因して、文脈上他の意味に解すべき場合を除き、「備える(comprise)」という用語または「備える(comprises)」または「備える(comprising)」等の変形は、包含的な意味で用いられ、すなわち、記載される特徴の存在を特定するが、本発明の様々な実施形態での更なる特徴の存在または追加を除外しない。
任意の従来技術の公報が本明細書において引用される場合、そのような引用は、その公報が当分野の共通一般知識の一部をなすことを承認するものではないことを理解されたい。
任意の従来技術の公報が本明細書において引用される場合、そのような引用は、その公報が当分野の共通一般知識の一部をなすことを承認するものではないことを理解されたい。
(項目1)
光学装置の画像センサーであって、
複数のフォトセンサーまたは複数のピクセルを有する平らな感光面を備え、
上記複数のフォトセンサーまたは上記複数のピクセルは、上記平らな感光面上に概して円形の構成で配置され、入射する画像を1つ若しくは複数の電気信号または電子信号に変換する、画像センサー。
(項目2)
上記複数のフォトセンサーまたは上記複数のピクセルは、上記平らな感光面上に一連の同心円として配置される、項目1に記載の画像センサー。
(項目3)
上記複数のフォトセンサーまたは上記複数のピクセルは、上記平らな感光面上に、複数のフォトセンサーまたは複数のピクセルの少なくとも一つの螺旋を含む上記概して円形の構成で配置される、項目1に記載の画像センサー。
(項目4)
上記複数のフォトセンサーまたは上記複数のピクセルは、上記平らな感光面上に、複数のフォトセンサーまたは複数のピクセルの2つ以上のインターレースした螺旋を含む上記概して円形の構成で配置される、項目3に記載の画像センサー。
(項目5)
超広角画像を取得して上記平らな感光面に向ける手段を更に備え、
上記超広角画像は上記複数のフォトセンサーまたはピクセルに入射する、項目1〜4のいずれか一項に記載の画像センサー。
(項目6)
上記超広角画像を取得する手段は、上記画像センサーを取り囲む略パノラマの画像を取得するように構成される、項目5に記載の画像センサー。
(項目7)
上記略パノラマの画像はフルパノラマ画像ではなく、上記画像センサーの周囲の選択された平面において360度のドーナツ形の画像ビューを含む、項目6に記載の画像センサー。
(項目8)
上記略パノラマの画像は、画像取得手段の周囲の概して半球形の画像ビューを含むフルパノラマ画像である、項目6に記載の画像センサー。
(項目9)
上記1つ若しくは複数の電子信号または電気信号をデジタル画像データに変換する手段を更に備える、項目1〜8のいずれか1項に記載の画像センサー。
(項目10)
上記複数のフォトセンサーまたは上記複数のピクセルは、上記複数のフォトセンサーまたは上記複数のピクセルのそれぞれのアドレスを参照することによって、取得される画像のウィンドウ部を画定することができるように、アドレス指定可能である、項目1〜9のいずれか1項に記載の画像センサー。
(項目11)
上記光学装置は、カメラまたはプロジェクターを含む、項目1〜10のいずれか1項に記載の画像センサー。
(項目12)
光学装置の画像センサーを用いて超広角画像を取得する方法であって、
超広角画像を上記画像センサーの感光面に向けることを含み、
上記画像センサーは、複数のフォトセンサーまたは複数のピクセルを有する平らな感光面を備え、
上記複数のフォトセンサーまたは上記複数のピクセルは、上記平らな感光面上に概して円形の構成で配置される、光学装置の画像センサーを用いて超広角画像を取得する方法。
(項目13)
光学装置の画像センサーを製造する方法であって、
複数のフォトセンサーまたは複数のピクセルを有する平らな感光面を備える画像センサーを提供することを含み、
上記複数のフォトセンサーまたは上記複数のピクセルは、上記平らな感光面上に概して円形の構成で配置される、光学装置の画像センサーを製造する方法。
(項目14)
光学装置の画像センサーであって、
複数のフォトセンサーまたは複数のピクセルを有する感光面を備え、
上記複数のフォトセンサーまたは上記複数のピクセルは、上記感光面に配置されて、入射する超広角画像または上記超広角画像の一部分を、上記超広角画像または上記超広角画像の上記一部分を表す画像データに変換可能な1つ若しくは複数の電気信号または電子信号に変換し、
上記複数のフォトセンサーまたは上記複数のピクセルがそれぞれ、上記感光面上で、上記複数のフォトセンサーまたは上記複数のピクセルに入射する上記超広角画像の対応する部分について概して一致する方向に向けられる、光学装置の画像センサー。
(項目15)
光学装置の画像センサーを用いて超広角画像を取得する方法であって、
上記画像センサーの感光面に超広角画像を向けることを含み、
上記画像センサーは、複数のフォトセンサーまたは複数のピクセルを有する感光面を備え、
上記複数のフォトセンサーまたは上記複数のピクセルは、上記感光面上に配置されて、入射する上記超広角画像または上記超広角画像の一部分を、上記超広角画像または上記超広角画像の上記一部分を表す画像データに変換可能な1つ若しくは複数の電気信号または電子信号に変換し、
上記複数のフォトセンサーまたは上記複数のピクセルはそれぞれ、上記感光面上で、入射する上記超広角画像の対応する部分について概して一致する方向に向けられる、光学装置の画像センサーを用いて超広角画像を取得する方法。
(項目16)
超広角画像を取得し記録するシステムであって、
上記システムは、
超広角画像を取得し、画像センサーの平らな感光面に向ける手段を備え、
上記平らな感光面は複数のフォトセンサーまたは複数のピクセルを有し、上記画像センサーは、上記超広角画像を1つ若しくは複数の電気信号または電子信号に変換し、
上記システムは更に、
上記1つ若しくは複数の電気信号または電子信号をデジタル画像データに変換する手段と、
上記デジタル画像データをバッファリングまたは記憶する手段と、
上記超広角画像のウィンドウ部の選択を受信する手段と、
上記バッファリングまたは記憶手段から、上記超広角画像の上記選択されたウィンドウ部を含むデジタル画像データを取り出し、取り出された上記デジタル画像データを情報処理手段に送信する手段と、を備える、超広角画像を取得し記録するシステム。
(項目17)
上記画像センサーは、項目1に記載の画像センサーを含む、項目16に記載のシステム。
(項目18)
超広角画像を取得し記録する方法であって、
超広角画像を取得し、画像センサーの平らな感光面に向けるステップと、
上記取得された超広角画像を1つ若しくは複数の電気信号または電子信号に変換するステップと、
上記1つ若しくは複数の電気信号または電子信号をデジタル画像データに変換するステップと、
上記デジタル画像データをバッファリングまたは記憶するステップと、
上記超広角画像のウィンドウ部の選択を受信するステップと、
バッファまたは記憶手段から、上記超広角画像の選択された上記ウィンドウ部を含むデジタル画像データを取り出すステップと、
取り出された上記デジタル画像データを情報処理手段に送信するステップと、を備え、
上記平らな感光面は複数のフォトセンサーまたはピクセルを備える、超広角画像を取得し記録する方法。
(項目19)
超広角画像を閲覧面に投影するシステムであって、該システムは、
超広角画像データを受信する手段と、
上記超広角画像データを光学画像に変換し、上記光学画像または上記光学画像の一部分を画像投影手段に向ける手段と、
上記画像投影手段の近傍に搭載される閲覧面と、を備え、
上記画像投影手段は、上記光学画像または上記光学画像の一部分を上記閲覧面に投影し、
上記超広角画像データを上記光学画像に変換する手段は、受信する画像データを上記光学画像に変換する複数のフォトセンサーまたは複数のピクセルを有し、
上記複数のフォトセンサーまたは上記複数のピクセルは概して円形の構成で配置される、超広角画像を閲覧面に投影するシステム。
(項目20)
超広角画像を閲覧面に投影する方法であって、
超広角画像データを受信することと、
複数のフォトセンサーまたは複数のピクセルを用いて受信した上記超広角画像データを光学画像に変換すること、と、
上記光学画像または上記光学画像の一部分を画像処理手段に向けることと、
上記光学画像または上記光学画像の一部分を、上記画像処理手段の近傍に搭載される閲覧面に投影することと、を含み、
上記複数のフォトセンサーまたはピクセルは概して円形の構成で配置される、超広角画像を閲覧面に投影する方法。
(項目21)
ユーザーによって装着されるヘッドギア内のヘッドアップディスプレイであって、
上記ヘッドギアのバイザーを構成する閲覧面と、
光学画像または上記光学画像の一部分を上記バイザーの上記閲覧面に投影する、項目19に記載のシステムを有するプロジェクターと、を備える、ユーザーによって装着されるヘッドギア内のヘッドアップディスプレイ。
(項目22)
少なくとも1つの参加者会議ステーションが、項目19に記載のシステムを有するプロジェクターを備える、電話会議システム。

Claims (22)

  1. 光学装置の画像センサーであって、
    複数のフォトセンサーまたは複数のピクセルを有する平らな感光面を備え、
    前記複数のフォトセンサーまたは前記複数のピクセルは、前記平らな感光面上に概して円形の構成で配置され、入射する画像を1つ若しくは複数の電気信号または電子信号に変換する、画像センサー。
  2. 前記複数のフォトセンサーまたは前記複数のピクセルは、前記平らな感光面上に一連の同心円として配置される、請求項1に記載の画像センサー。
  3. 前記複数のフォトセンサーまたは前記複数のピクセルは、前記平らな感光面上に、複数のフォトセンサーまたは複数のピクセルの少なくとも一つの螺旋を含む前記概して円形の構成で配置される、請求項1に記載の画像センサー。
  4. 前記複数のフォトセンサーまたは前記複数のピクセルは、前記平らな感光面上に、複数のフォトセンサーまたは複数のピクセルの2つ以上のインターレースした螺旋を含む前記概して円形の構成で配置される、請求項3に記載の画像センサー。
  5. 超広角画像を取得して前記平らな感光面に向ける手段を更に備え、
    前記超広角画像は前記複数のフォトセンサーまたはピクセルに入射する、請求項1〜4のいずれか一項に記載の画像センサー。
  6. 前記超広角画像を取得する手段は、前記画像センサーを取り囲む略パノラマの画像を取得するように構成される、請求項5に記載の画像センサー。
  7. 前記略パノラマの画像はフルパノラマ画像ではなく、前記画像センサーの周囲の選択された平面において360度のドーナツ形の画像ビューを含む、請求項6に記載の画像センサー。
  8. 前記略パノラマの画像は、画像取得手段の周囲の概して半球形の画像ビューを含むフルパノラマ画像である、請求項6に記載の画像センサー。
  9. 前記1つ若しくは複数の電子信号または電気信号をデジタル画像データに変換する手段を更に備える、請求項1〜8のいずれか1項に記載の画像センサー。
  10. 前記複数のフォトセンサーまたは前記複数のピクセルは、前記複数のフォトセンサーまたは前記複数のピクセルのそれぞれのアドレスを参照することによって、取得される画像のウィンドウ部を画定することができるように、アドレス指定可能である、請求項1〜9のいずれか1項に記載の画像センサー。
  11. 前記光学装置は、カメラまたはプロジェクターを含む、請求項1〜10のいずれか1項に記載の画像センサー。
  12. 光学装置の画像センサーを用いて超広角画像を取得する方法であって、
    超広角画像を前記画像センサーの感光面に向けることを含み、
    前記画像センサーは、複数のフォトセンサーまたは複数のピクセルを有する平らな感光面を備え、
    前記複数のフォトセンサーまたは前記複数のピクセルは、前記平らな感光面上に概して円形の構成で配置される、光学装置の画像センサーを用いて超広角画像を取得する方法。
  13. 光学装置の画像センサーを製造する方法であって、
    複数のフォトセンサーまたは複数のピクセルを有する平らな感光面を備える画像センサーを提供することを含み、
    前記複数のフォトセンサーまたは前記複数のピクセルは、前記平らな感光面上に概して円形の構成で配置される、光学装置の画像センサーを製造する方法。
  14. 光学装置の画像センサーであって、
    複数のフォトセンサーまたは複数のピクセルを有する感光面を備え、
    前記複数のフォトセンサーまたは前記複数のピクセルは、前記感光面に配置されて、入射する超広角画像または前記超広角画像の一部分を、前記超広角画像または前記超広角画像の前記一部分を表す画像データに変換可能な1つ若しくは複数の電気信号または電子信号に変換し、
    前記複数のフォトセンサーまたは前記複数のピクセルがそれぞれ、前記感光面上で、前記複数のフォトセンサーまたは前記複数のピクセルに入射する前記超広角画像の対応する部分について概して一致する方向に向けられる、光学装置の画像センサー。
  15. 光学装置の画像センサーを用いて超広角画像を取得する方法であって、
    前記画像センサーの感光面に超広角画像を向けることを含み、
    前記画像センサーは、複数のフォトセンサーまたは複数のピクセルを有する感光面を備え、
    前記複数のフォトセンサーまたは前記複数のピクセルは、前記感光面上に配置されて、入射する前記超広角画像または前記超広角画像の一部分を、前記超広角画像または前記超広角画像の前記一部分を表す画像データに変換可能な1つ若しくは複数の電気信号または電子信号に変換し、
    前記複数のフォトセンサーまたは前記複数のピクセルはそれぞれ、前記感光面上で、入射する前記超広角画像の対応する部分について概して一致する方向に向けられる、光学装置の画像センサーを用いて超広角画像を取得する方法。
  16. 超広角画像を取得し記録するシステムであって、
    前記システムは、
    超広角画像を取得し、画像センサーの平らな感光面に向ける手段を備え、
    前記平らな感光面は複数のフォトセンサーまたは複数のピクセルを有し、前記画像センサーは、前記超広角画像を1つ若しくは複数の電気信号または電子信号に変換し、
    前記システムは更に、
    前記1つ若しくは複数の電気信号または電子信号をデジタル画像データに変換する手段と、
    前記デジタル画像データをバッファリングまたは記憶する手段と、
    前記超広角画像のウィンドウ部の選択を受信する手段と、
    前記バッファリングまたは記憶手段から、前記超広角画像の前記選択されたウィンドウ部を含むデジタル画像データを取り出し、取り出された前記デジタル画像データを情報処理手段に送信する手段と、を備える、超広角画像を取得し記録するシステム。
  17. 前記画像センサーは、請求項1に記載の画像センサーを含む、請求項16に記載のシステム。
  18. 超広角画像を取得し記録する方法であって、
    超広角画像を取得し、画像センサーの平らな感光面に向けるステップと、
    前記取得された超広角画像を1つ若しくは複数の電気信号または電子信号に変換するステップと、
    前記1つ若しくは複数の電気信号または電子信号をデジタル画像データに変換するステップと、
    前記デジタル画像データをバッファリングまたは記憶するステップと、
    前記超広角画像のウィンドウ部の選択を受信するステップと、
    バッファまたは記憶手段から、前記超広角画像の選択された前記ウィンドウ部を含むデジタル画像データを取り出すステップと、
    取り出された前記デジタル画像データを情報処理手段に送信するステップと、を備え、
    前記平らな感光面は複数のフォトセンサーまたはピクセルを備える、超広角画像を取得し記録する方法。
  19. 超広角画像を閲覧面に投影するシステムであって、該システムは、
    超広角画像データを受信する手段と、
    前記超広角画像データを光学画像に変換し、前記光学画像または前記光学画像の一部分を画像投影手段に向ける手段と、
    前記画像投影手段の近傍に搭載される閲覧面と、を備え、
    前記画像投影手段は、前記光学画像または前記光学画像の一部分を前記閲覧面に投影し、
    前記超広角画像データを前記光学画像に変換する手段は、受信する画像データを前記光学画像に変換する複数のフォトセンサーまたは複数のピクセルを有し、
    前記複数のフォトセンサーまたは前記複数のピクセルは概して円形の構成で配置される、超広角画像を閲覧面に投影するシステム。
  20. 超広角画像を閲覧面に投影する方法であって、
    超広角画像データを受信することと、
    受信した画像データを光学画像に変換する複数のフォトセンサーまたは複数のピクセルを用いて、受信した前記超広角画像データを光学画像に変換することと、
    前記光学画像または前記光学画像の一部分を画像処理手段に向けることと、
    前記光学画像または前記光学画像の一部分を、前記画像処理手段の近傍に搭載される閲覧面に投影することと、を含み、
    前記複数のフォトセンサーまたはピクセルは概して円形の構成で配置される、超広角画像を閲覧面に投影する方法。
  21. ユーザーによって装着されるヘッドギア内のヘッドアップディスプレイであって、
    前記ヘッドギアのバイザーを構成する閲覧面と、
    光学画像または前記光学画像の一部分を前記バイザーの前記閲覧面に投影する、請求項19に記載のシステムを有するプロジェクターと、を備える、ユーザーによって装着されるヘッドギア内のヘッドアップディスプレイ。
  22. 少なくとも1つの参加者会議ステーションが、請求項19に記載のシステムを有するプロジェクターを備える、電話会議システム。
JP2014527485A 2011-09-06 2012-08-31 超広角画像を処理するシステムおよび方法 Pending JP2014531791A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
HK11109422.6A HK1167067A2 (en) 2011-09-06 2011-09-06 A system and method for processing a very wide angle image
HK11109422.6 2011-09-06
PCT/CN2012/080885 WO2013034065A1 (en) 2011-09-06 2012-08-31 A system and method for processing a very wide angle image

Publications (1)

Publication Number Publication Date
JP2014531791A true JP2014531791A (ja) 2014-11-27

Family

ID=47290424

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014527485A Pending JP2014531791A (ja) 2011-09-06 2012-08-31 超広角画像を処理するシステムおよび方法

Country Status (17)

Country Link
US (1) US20140333719A1 (ja)
EP (1) EP2737531A4 (ja)
JP (1) JP2014531791A (ja)
KR (1) KR102087450B1 (ja)
CN (1) CN103858234A (ja)
AU (1) AU2012306862B2 (ja)
BR (1) BR112014005099A2 (ja)
CA (1) CA2847605A1 (ja)
HK (1) HK1167067A2 (ja)
IL (1) IL231289B (ja)
IN (1) IN2014DN01614A (ja)
MX (1) MX2014002641A (ja)
RU (1) RU2014107967A (ja)
SG (1) SG11201400410TA (ja)
TW (1) TWI530182B (ja)
WO (1) WO2013034065A1 (ja)
ZA (1) ZA201401595B (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6075066B2 (ja) 2012-12-28 2017-02-08 株式会社リコー 画像管理システム、画像管理方法、及びプログラム
CN103543831A (zh) * 2013-10-25 2014-01-29 梁权富 头戴式全景播放装置
RU2552711C1 (ru) * 2014-07-31 2015-06-10 Вячеслав Михайлович Смелков Компьютерная система панорамного телевизионного наблюдения в условиях сложной освещенности и/или сложной яркости объектов и телевизионная камера для ее реализации
GB2532728A (en) * 2014-11-25 2016-06-01 Nokia Technologies Oy A semiconductor chip, a method, an apparatus and a computer program product for image capturing
US11194538B2 (en) * 2014-12-08 2021-12-07 Ricoh Company, Ltd. Image management system, image management method, and program
EP3230969B1 (en) 2014-12-11 2019-04-10 Xtralis AG System and methods of field of view alignment
KR102339142B1 (ko) * 2015-03-02 2021-12-15 최해용 가상현실카메라 지지봉 장치
KR102125284B1 (ko) * 2015-03-11 2020-07-08 에이에스엠엘 네델란즈 비.브이. 검사와 계측을 위한 방법 및 장치
US20200404175A1 (en) * 2015-04-14 2020-12-24 ETAK Systems, LLC 360 Degree Camera Apparatus and Monitoring System
CN104867951B (zh) * 2015-04-23 2018-05-04 豪威科技(上海)有限公司 一种背照式传感器芯片及其制造方法
CN106507025A (zh) * 2016-11-17 2017-03-15 宁波菊风系统软件有限公司 一种移动终端及全景视频通信方法
KR102657386B1 (ko) * 2017-11-06 2024-04-15 한국전자통신연구원 돔형 디스플레이 장치 및 방법
KR102530752B1 (ko) * 2018-08-29 2023-05-10 삼성전자주식회사 이미지 센서 및 이미지 센서를 포함하는 전자 기기와, 이미지 줌 프로세싱 방법
JP7012058B2 (ja) * 2018-11-13 2022-01-27 創惟科技股▲ふん▼有限公司 画像補正方法及びその装置
CN109842766B (zh) * 2018-12-28 2021-05-18 上海集成电路研发中心有限公司 一种极坐标图像传感器及其进行图像处理的方法
JP7336020B2 (ja) * 2019-08-16 2023-08-30 コネ コーポレイション エレベータロープの画像を生成する方法、該方法を実行する制御装置およびコンピュータプログラム製品
EP3917162A1 (en) * 2020-05-27 2021-12-01 Binaurics Audio GmbH System and devices for audio-video spatial communication and event sharing

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0662288A (ja) * 1992-08-07 1994-03-04 Pioneer Electron Corp 広角画像取込み装置
WO2000056075A1 (fr) * 1999-03-12 2000-09-21 Sony Corporation Dispositif fournisseur d'image et son procédé d'utilisation, dispositif de traitement d'image et son procédé d'utilisation, et support d'enregistrement
JP2004309568A (ja) * 2003-04-02 2004-11-04 Shimadzu Corp 全方位撮影装置
US20060055807A1 (en) * 2004-09-14 2006-03-16 Pemer Frederick A Imaging methods, image sensors, imaging systems, and articles of manufacture
JP2006140581A (ja) * 2004-11-10 2006-06-01 Konica Minolta Opto Inc 撮像素子及び画像入力装置
JP2009145368A (ja) * 2007-12-11 2009-07-02 Seiko Epson Corp 電気光学装置、投射型表示装置、プロジェクションシステム、受光装置、撮像装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4267573A (en) * 1978-06-14 1981-05-12 Old Dominion University Research Foundation Image processing system
JPS6422159A (en) * 1987-07-17 1989-01-25 Mitsubishi Electric Corp Video telephone system for still picture transmission
JPH01122159A (ja) * 1987-11-05 1989-05-15 Nec Corp チャージカップルドデバイス
US6201574B1 (en) * 1991-05-13 2001-03-13 Interactive Pictures Corporation Motionless camera orientation system distortion correcting sensing element
JPH06125522A (ja) * 1992-10-09 1994-05-06 Sony Corp ビデオ再生方法及びビデオ記録/再生装置
US5489940A (en) * 1994-12-08 1996-02-06 Motorola, Inc. Electronic imaging system and sensor for correcting the distortion in a wide-angle lens
US6043837A (en) * 1997-05-08 2000-03-28 Be Here Corporation Method and apparatus for electronically distributing images from a panoptic camera system
US6977676B1 (en) * 1998-07-08 2005-12-20 Canon Kabushiki Kaisha Camera control system
US7009645B1 (en) * 1999-09-30 2006-03-07 Imec Vzw Constant resolution and space variant sensor arrays
FR2830128A1 (fr) * 2001-09-26 2003-03-28 Egg Solution Sa Capteur photoelectrique avec des elements de capture de pixels disposes en cercles concentriques et dispositif d'acquisition d'images panoramiques comprenant ce capteur
JP2005311789A (ja) * 2004-04-22 2005-11-04 Fuji Photo Film Co Ltd デジタルカメラ
US20090167884A1 (en) * 2006-06-09 2009-07-02 Connell Jr Raymond S Self-Similar Capture Systems
FR2909778B1 (fr) * 2006-12-06 2009-10-16 Intersigne Soc Par Actions Sim Procede et dispositif pour la realisation de prises de vues a l'aide d'une pluralite de capteurs optoelectroniques.
JP5317586B2 (ja) * 2008-08-28 2013-10-16 ラピスセミコンダクタ株式会社 カメラモジュール及びその製造方法
TWI388019B (zh) * 2009-09-02 2013-03-01 Unimicron Technology Corp 封裝結構之製法
US20110164108A1 (en) * 2009-12-30 2011-07-07 Fivefocal Llc System With Selective Narrow FOV and 360 Degree FOV, And Associated Methods

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0662288A (ja) * 1992-08-07 1994-03-04 Pioneer Electron Corp 広角画像取込み装置
WO2000056075A1 (fr) * 1999-03-12 2000-09-21 Sony Corporation Dispositif fournisseur d'image et son procédé d'utilisation, dispositif de traitement d'image et son procédé d'utilisation, et support d'enregistrement
JP2004309568A (ja) * 2003-04-02 2004-11-04 Shimadzu Corp 全方位撮影装置
US20060055807A1 (en) * 2004-09-14 2006-03-16 Pemer Frederick A Imaging methods, image sensors, imaging systems, and articles of manufacture
JP2006140581A (ja) * 2004-11-10 2006-06-01 Konica Minolta Opto Inc 撮像素子及び画像入力装置
JP2009145368A (ja) * 2007-12-11 2009-07-02 Seiko Epson Corp 電気光学装置、投射型表示装置、プロジェクションシステム、受光装置、撮像装置

Also Published As

Publication number Publication date
EP2737531A1 (en) 2014-06-04
ZA201401595B (en) 2014-12-23
KR20140068983A (ko) 2014-06-09
TW201322755A (zh) 2013-06-01
US20140333719A1 (en) 2014-11-13
SG11201400410TA (en) 2014-04-28
EP2737531A4 (en) 2014-12-31
TWI530182B (zh) 2016-04-11
CA2847605A1 (en) 2013-03-14
CN103858234A (zh) 2014-06-11
MX2014002641A (es) 2014-06-04
KR102087450B1 (ko) 2020-03-11
IL231289B (en) 2018-05-31
BR112014005099A2 (pt) 2017-03-28
IN2014DN01614A (ja) 2015-05-15
RU2014107967A (ru) 2015-10-20
IL231289A0 (en) 2014-04-30
WO2013034065A1 (en) 2013-03-14
AU2012306862B2 (en) 2016-03-03
AU2012306862A1 (en) 2014-03-20
HK1167067A2 (en) 2012-11-16

Similar Documents

Publication Publication Date Title
JP2014531791A (ja) 超広角画像を処理するシステムおよび方法
US7224382B2 (en) Immersive imaging system
US6583815B1 (en) Method and apparatus for presenting images from a remote location
US20100045773A1 (en) Panoramic adapter system and method with spherical field-of-view coverage
US20070182812A1 (en) Panoramic image-based virtual reality/telepresence audio-visual system and method
KR100986228B1 (ko) 카메라 장치 및 화상 기록 재생 방법
EP1178352A1 (en) Method of and apparatus for presenting panoramic images at a local receiver, and a corresponding computer program
JP2018110354A (ja) 通信端末、画像通信システム、通信方法、及びプログラム
JP2018129716A (ja) 画像処理装置、画像処理システム、画像処理方法及びプログラム
KR101685418B1 (ko) 3차원 영상을 생성하는 감시 시스템
CN102077575A (zh) 通过多图像捕获进行的变焦
US20130016181A1 (en) System and method for capturing and displaying cinema quality panoramic images
JP2005517331A (ja) テレビ会議アプリケーションにおける電子画像操作を提供するための装置及び方法
JP2006245822A (ja) 画像配信システム
JP4736381B2 (ja) 撮像装置及び方法、監視システム、プログラム並びに記録媒体
JP2007288354A (ja) カメラ装置、画像処理装置および画像処理方法
EP1698170B1 (en) Device for viewing images, such as for videoconference facilities, related system, network and method of use
JP4583717B2 (ja) 撮像装置及び方法、画像情報提供システム、プログラム、並びに制御装置
JP3804766B2 (ja) 画像通信装置および携帯型電話機
US9098910B2 (en) Method for generating video data stream
JP2013141231A (ja) ビデオ会議装置およびビデオ会議装置の制御方法
JP2006245823A (ja) 画像配信システム
JP2018061243A (ja) 通信端末、表示方法、及びプログラム
US20060055807A1 (en) Imaging methods, image sensors, imaging systems, and articles of manufacture
KR101193129B1 (ko) 다자 동시 제어를 허용하는 실시간 원격 360도 전방향 영상 감시 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150805

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20160202

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160728

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160830

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170328