JP2019500762A - マルチスコピック雑音削減およびハイ・ダイナミック・レンジのためのシステムおよび方法 - Google Patents
マルチスコピック雑音削減およびハイ・ダイナミック・レンジのためのシステムおよび方法 Download PDFInfo
- Publication number
- JP2019500762A JP2019500762A JP2018513646A JP2018513646A JP2019500762A JP 2019500762 A JP2019500762 A JP 2019500762A JP 2018513646 A JP2018513646 A JP 2018513646A JP 2018513646 A JP2018513646 A JP 2018513646A JP 2019500762 A JP2019500762 A JP 2019500762A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image data
- image capture
- capture system
- burst
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 230000009467 reduction Effects 0.000 title description 4
- 238000007493 shaping process Methods 0.000 claims abstract description 18
- 238000012774 diagnostic algorithm Methods 0.000 claims abstract description 17
- 230000006870 function Effects 0.000 claims description 64
- 230000003287 optical effect Effects 0.000 claims description 40
- 238000012937 correction Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 description 18
- 238000003384 imaging method Methods 0.000 description 16
- 230000009466 transformation Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 238000003702 image correction Methods 0.000 description 5
- 238000000844 transformation Methods 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 239000002131 composite material Substances 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 208000012266 Needlestick injury Diseases 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012631 diagnostic technique Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/10—Image enhancement or restoration using non-spatial domain filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/269—Analysis of motion using gradient-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/38—Registration of image sequences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/25—Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/13—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0088—Synthesising a monoscopic image signal from stereoscopic images, e.g. synthesising a panoramic or high resolution monoscopic image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Measurement Of Optical Distance (AREA)
Abstract
Description
本願は、2015年12月7日に出願された米国特許出願番号第14/961、102号に対する優先権を主張し、参照により全体として本明細書に組み込む。
本開示は、ステレオおよびマルチスコピック・カメラシステムにおける雑音削減およびハイ・ダイナミック・レンジを提供する方法およびシステムに関する。
図1Aは、例示的な実施形態に従うシステム100を示す。システム100は第1の画像キャプチャ・システム110および第2の画像キャプチャ・システム120を含む。したがって、幾つかの実施形態では、システム100を立体イメージング・システムと考えてもよい。さらにまたは代替的に、システム100は画像キャプチャ・システム130を含んでもよい。かかるシナリオでは、システム100をマルチスコピック・イメージング・システムと考えてもよい。
図4は、例示的な実施形態に従う方法400を示す。方法400が様々なブロックまたはステップを含んでもよい。当該ブロックまたはステップを独立にまたは組合せで実施してもよい。当該ブロックまたはステップを、任意の順序でおよび/または逐次的にまたは並列に実施してもよい。さらに、ブロックまたはステップを省略するかまたは方法400に追加してもよい。
120 第2の画像キャプチャ・システム
140 ユーザ・インタフェース
142 ディスプレイ
144 コントロール
150 コントローラ
152 プロセッサ(複数可)
154 メモリ
Claims (15)
- コンピューティング・システムにより、バースト画像データを受信するステップであって、前記バースト画像データは第1の画像キャプチャ・システムにより生成される第1の画像データおよび第2の画像キャプチャ・システムにより生成される第2の画像データを含み、前記第1の画像キャプチャ・システムおよび第2の画像キャプチャ・システムの各光軸はベースライン距離により分離され、前記第1の画像データおよび前記第2の画像データは少なくとも1つの画像ペアを含む、ステップと、
前記コンピューティング・システムにより、前記ベースライン距離に少なくとも基づいて前記バースト画像データのステレオ不均衡を決定するステップと、
前記第1の画像データまたは前記第2の画像データのうち少なくとも1つを前記決定されたステレオ不均衡に従って調節して、ワープされた画像スタックを提供するステップと、
バースト診断アルゴリズムに従って少なくとも1つの出力画像を生成するステップであって、前記バースト診断アルゴリズムは前記ワープされた画像スタックの加重平均を決定するステップを含む、ステップと、
を含む、方法。 - 前記コンピューティング・システムにより、少なくとも1つの整形ホモグラフィ関数を決定するステップであって、前記少なくとも1つの整形ホモグラフィ関数は、前記複数の前記画像ペアの夫々の画像ペアを整列するように構成される、ステップと、
前記少なくとも1つの整形ホモグラフィ関数に従って前記第1の画像データまたは前記第2の画像データのうち少なくとも1つを調節するステップと、
をさらに含む、請求項1に記載の方法。 - 前記少なくとも1つの整形ホモグラフィ関数は幾何画素補正関数および光度計画素補正関数を含む、請求項2に記載の方法。
- 前記第1の画像キャプチャ・システムおよび第2の画像キャプチャ・システムの各光軸は実質的に同一の方向を向く、請求項1乃至3の何れか1項に記載の方法。
- 前記バースト画像データの前記ステレオ不均衡を決定するステップは、前記第1の画像データ、前記第2の画像データ、および前記ベースライン距離に基づいて視差関数を推定するステップを含み、場合によっては前記決定されたステレオ不均衡に従って前記第1の画像データまたは前記第2の画像データのうち少なくとも1つを調節するステップは、前記推定された視差関数の逆を前記第1の画像データまたは前記第2の画像データのうち少なくとも1つに適用するステップを含む、請求項1乃至4の何れか1項に記載の方法。
- 前記加重平均は前記ワープされた画像スタックの対応する画素の画素単位平均を含む、請求項1乃至5の何れか1項に記載の方法。
- ハイ・ダイナミック・レンジ(HDR)関数を前記少なくとも1つの出力画像に適用して少なくとも1つのHDR出力画像を提供するステップをさらに含む、請求項1乃至6の何れか1項に記載の方法。
- 前記第1の画像キャプチャ・システムはカラー・フィルタ・アレイに光学的に接続された画像センサを含み、前記第2の画像キャプチャ・システムはカラー・フィルタ・アレイなしの画像センサを含む、請求項1乃至7の何れか1項に記載の方法。
- 前記バースト画像データは、生画像フォーマット、WebP画像フォーマット、またはJPEG画像フォーマットの少なくとも1つに従ってフォーマットされた画像を含み、かつ/または、
前記バースト画像データは2から100個の間の画像を含む、
請求項1乃至8の何れか1項に記載の方法。 - 前記第1の画像キャプチャ・システムはロー・パス・フィルタに光学的に接続された画像センサを含み、前記第2の画像キャプチャ・システムはロー・パス・フィルタのない画像センサを含む、請求項1乃至9の何れか1項に記載の方法。
- 前記第1の画像キャプチャ・システムは第1の焦点距離を有する光学機器に光学的に接続された画像センサを含み、前記第2の画像キャプチャ・システムは第2の焦点距離を有する光学機器に光学的に接続された画像センサを含み、前記第1の焦点距離および前記第2の焦点距離は異なる、請求項1乃至10の何れか1項に記載の方法。
- 前記複数の画像キャプチャ・システムは形状の境界に沿って配置され、前記形状はリング、ディスク、または球のうち1つを含む、請求項1乃至11の何れか1項に記載の方法。
- 前記コンピューティング・システムは、少なくとも1つのプログラム可能回路内シリアルプログラミング(ICSP)マイクロコントローラを含むコントローラを備える、請求項1乃至12の何れか1項に記載の方法。
- 複数の画像キャプチャ・システムであって、前記複数の画像キャプチャ・システムは少なくとも第1の画像キャプチャ・システムおよび第2の画像キャプチャ・システムを含み、前記第1の画像キャプチャ・システムは第1の画像データをキャプチャするように動作可能であり、前記第2の画像キャプチャ・システムは第2の画像データをキャプチャするように動作可能であり、前記第1の画像キャプチャ・システムおよび第2の画像キャプチャ・システムの各光軸はベースライン距離により分離され、前記第1の画像データおよび前記第2の画像データは少なくとも1つの画像ペアを有するバースト画像データを含む、複数の画像キャプチャ・システムと、
メモリおよびプロセッサを備えたコントローラであって、前記メモリは命令を含むように構成され、プロセッサは請求項1乃至13の何れか1項に記載の方法を実施するように前記命令を実行するように構成される、コントローラと、
を備える、システム。 - 実行されたとき、コンピュータに請求項1乃至13の何れか1項に記載の方法を実行させるプロセッサ実行可能命令を含む、コンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/961,102 US9762893B2 (en) | 2015-12-07 | 2015-12-07 | Systems and methods for multiscopic noise reduction and high-dynamic range |
US14/961,102 | 2015-12-07 | ||
PCT/US2016/064290 WO2017100061A1 (en) | 2015-12-07 | 2016-11-30 | Systems and methods for multiscopic noise reduction and high-dynamic range |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019116364A Division JP7186672B2 (ja) | 2015-12-07 | 2019-06-24 | マルチスコピック雑音削減およびハイ・ダイナミック・レンジのためのシステムおよび方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2019500762A true JP2019500762A (ja) | 2019-01-10 |
JP2019500762A5 JP2019500762A5 (ja) | 2019-02-28 |
JP6818015B2 JP6818015B2 (ja) | 2021-01-20 |
Family
ID=58800470
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018513646A Active JP6818015B2 (ja) | 2015-12-07 | 2016-11-30 | マルチスコピック雑音削減およびハイ・ダイナミック・レンジのためのシステムおよび方法 |
JP2019116364A Active JP7186672B2 (ja) | 2015-12-07 | 2019-06-24 | マルチスコピック雑音削減およびハイ・ダイナミック・レンジのためのシステムおよび方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019116364A Active JP7186672B2 (ja) | 2015-12-07 | 2019-06-24 | マルチスコピック雑音削減およびハイ・ダイナミック・レンジのためのシステムおよび方法 |
Country Status (6)
Country | Link |
---|---|
US (4) | US9762893B2 (ja) |
EP (1) | EP3335420A4 (ja) |
JP (2) | JP6818015B2 (ja) |
KR (2) | KR101991474B1 (ja) |
CN (2) | CN110225330A (ja) |
WO (1) | WO2017100061A1 (ja) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10410398B2 (en) * | 2015-02-20 | 2019-09-10 | Qualcomm Incorporated | Systems and methods for reducing memory bandwidth using low quality tiles |
US9762893B2 (en) * | 2015-12-07 | 2017-09-12 | Google Inc. | Systems and methods for multiscopic noise reduction and high-dynamic range |
WO2018048838A1 (en) * | 2016-09-06 | 2018-03-15 | Apple Inc. | Still image stabilization/optical image stabilization synchronization in multi-camera image capture |
US10499042B2 (en) * | 2017-04-01 | 2019-12-03 | Intel Corporation | Barreling and compositing of images |
US10863105B1 (en) | 2017-06-27 | 2020-12-08 | Amazon Technologies, Inc. | High dynamic range imaging for event detection and inventory management |
CN107730464B (zh) * | 2017-10-09 | 2021-03-30 | 四川大学 | 基于块匹配的图像降噪并行算法 |
EP3756163B1 (en) * | 2018-02-23 | 2022-06-01 | Sony Group Corporation | Methods, devices, and computer program products for gradient based depth reconstructions with robust statistics |
EP3766023A4 (en) | 2018-03-13 | 2021-04-21 | Magic Leap, Inc. | IMAGE-ENHANCED DEPTH DETECTION USING AUTOMATIC LEARNING |
CN108717690B (zh) * | 2018-05-21 | 2022-03-04 | 电子科技大学 | 一种高动态范围图片的合成方法 |
US11216923B2 (en) | 2018-05-23 | 2022-01-04 | Samsung Electronics Co., Ltd. | Apparatus and method for successive multi-frame image denoising |
CN108924434B (zh) * | 2018-06-29 | 2020-08-18 | 宁波大学 | 一种基于曝光变换的立体高动态范围图像合成方法 |
US10902556B2 (en) | 2018-07-16 | 2021-01-26 | Nvidia Corporation | Compensating for disparity variation when viewing captured multi video image streams |
KR102525000B1 (ko) | 2018-08-08 | 2023-04-24 | 삼성전자 주식회사 | 복수의 이미지들이 합성된 이미지를 깊이 정보에 기반하여 흐림 처리하는 전자 장치 및 상기 전자 장치의 구동 방법 |
WO2020065995A1 (ja) * | 2018-09-28 | 2020-04-02 | 株式会社Pfu | 画像処理装置、制御方法及び制御プログラム |
WO2020131277A1 (en) | 2018-12-20 | 2020-06-25 | Snap Inc. | Flexible eyewear device with dual cameras for generating stereoscopic images |
GB2588616B (en) * | 2019-10-29 | 2021-10-27 | Visidon Oy | Image processing method and apparatus |
US10965931B1 (en) | 2019-12-06 | 2021-03-30 | Snap Inc. | Sensor misalignment compensation |
CN112288646A (zh) * | 2020-01-07 | 2021-01-29 | 影石创新科技股份有限公司 | 堆叠降噪方法、装置、电子设备及存储介质 |
US11832018B2 (en) | 2020-05-17 | 2023-11-28 | Corephotonics Ltd. | Image stitching in the presence of a full field of view reference image |
JP2023528407A (ja) * | 2020-06-04 | 2023-07-04 | アドヴァンスド ファーム テクノロジーズ インコーポレイテッド | グローバルシャッタ同期式カラーステレオカメラシステム |
KR20220013183A (ko) | 2020-07-24 | 2022-02-04 | 삼성전자주식회사 | 영상 복원 장치 및 방법 |
US20230013884A1 (en) * | 2021-07-14 | 2023-01-19 | Cilag Gmbh International | Endoscope with synthetic aperture multispectral camera array |
US20240221130A1 (en) * | 2023-01-04 | 2024-07-04 | Samsung Electronics Co., Ltd. | System and method for scene-adaptive denoise scheduling and efficient deghosting |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10191396A (ja) * | 1996-12-26 | 1998-07-21 | Matsushita Electric Ind Co Ltd | 中間視点画像生成方法および視差推定方法および画像伝送方法 |
JP2000102040A (ja) * | 1998-09-28 | 2000-04-07 | Olympus Optical Co Ltd | 電子ステレオカメラ |
JP2003209858A (ja) * | 2002-01-17 | 2003-07-25 | Canon Inc | 立体画像生成方法及び記録媒体 |
JP2004007707A (ja) * | 1996-04-05 | 2004-01-08 | Matsushita Electric Ind Co Ltd | 視差推定方法、画像伝送装置および画像伝送方法 |
JP2004120527A (ja) * | 2002-09-27 | 2004-04-15 | Fuji Photo Film Co Ltd | 2眼式デジタルカメラ |
JP2005092121A (ja) * | 2003-09-19 | 2005-04-07 | Sony Computer Entertainment Inc | 撮影補助器、画像処理方法、画像処理装置、コンピュータプログラム、プログラムを格納した記録媒体 |
JP2006093860A (ja) * | 2004-09-21 | 2006-04-06 | Olympus Corp | 2眼撮像系を搭載したカメラ |
JP2007208704A (ja) * | 2006-02-02 | 2007-08-16 | Casio Comput Co Ltd | 撮像装置、画像処理方法及びプログラム |
JP2008312058A (ja) * | 2007-06-15 | 2008-12-25 | Fujifilm Corp | 撮像装置、撮像方法及びプログラム |
JP2009116532A (ja) * | 2007-11-05 | 2009-05-28 | Nippon Telegr & Teleph Corp <Ntt> | 仮想視点画像生成方法および仮想視点画像生成装置 |
JP2009284188A (ja) * | 2008-05-22 | 2009-12-03 | Panasonic Corp | カラー撮像装置 |
JP2010147812A (ja) * | 2008-12-18 | 2010-07-01 | Fujifilm Corp | 複眼カメラ及び画像処理方法 |
JP2012216939A (ja) * | 2011-03-31 | 2012-11-08 | Fujifilm Corp | 画像処理装置、画像処理方法及びプログラム |
JP2012244583A (ja) * | 2011-05-24 | 2012-12-10 | Canon Inc | 撮像装置、画像処理方法及びプログラム |
JP2013090129A (ja) * | 2011-10-18 | 2013-05-13 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
JPWO2011118084A1 (ja) * | 2010-03-24 | 2013-07-04 | 富士フイルム株式会社 | 画像処理装置および画像処理方法 |
JP2015005001A (ja) * | 2013-06-19 | 2015-01-08 | 株式会社 日立産業制御ソリューションズ | 画像信号処理装置,撮像装置および画像処理プログラム |
WO2015119207A1 (ja) * | 2014-02-07 | 2015-08-13 | 株式会社モルフォ | 画像処理装置、画像処理方法、画像処理プログラム及び記録媒体 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3912639B2 (ja) * | 1998-07-17 | 2007-05-09 | 日本ビクター株式会社 | 3次元画像処理装置 |
US7587099B2 (en) | 2006-01-27 | 2009-09-08 | Microsoft Corporation | Region-based image denoising |
US8866920B2 (en) * | 2008-05-20 | 2014-10-21 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
JP5444651B2 (ja) * | 2008-07-16 | 2014-03-19 | カシオ計算機株式会社 | カメラ装置、その撮影方法と撮影制御プログラム |
US8090251B2 (en) * | 2009-10-13 | 2012-01-03 | James Cameron | Frame linked 2D/3D camera system |
CN110708466B (zh) * | 2010-02-19 | 2022-02-18 | 株式会社尼康 | 电子设备及电子设备的摄像方法 |
US8588551B2 (en) * | 2010-03-01 | 2013-11-19 | Microsoft Corp. | Multi-image sharpening and denoising using lucky imaging |
EP2549762B1 (en) * | 2010-03-19 | 2017-05-03 | Panasonic Intellectual Property Management Co., Ltd. | Stereovision-image position matching apparatus, stereovision-image position matching method, and program therefor |
KR101661215B1 (ko) * | 2010-08-16 | 2016-09-30 | 삼성전자주식회사 | 영상 처리 방법 및 영상 처리 장치 |
JP5917054B2 (ja) * | 2011-09-12 | 2016-05-11 | キヤノン株式会社 | 撮像装置、画像データ処理方法、およびプログラム |
KR101854188B1 (ko) * | 2011-10-25 | 2018-05-08 | 삼성전자주식회사 | 3차원 영상 획득 장치 및 3차원 영상 획득 장치에서 깊이 정보 산출 방법 |
JP6031670B2 (ja) | 2011-12-09 | 2016-11-24 | パナソニックIpマネジメント株式会社 | 撮像装置 |
JP2013162272A (ja) | 2012-02-03 | 2013-08-19 | Olympus Imaging Corp | 撮像装置 |
JP5992184B2 (ja) * | 2012-03-09 | 2016-09-14 | 株式会社トプコン | 画像データ処理装置、画像データ処理方法および画像データ処理用のプログラム |
WO2013158784A1 (en) * | 2012-04-17 | 2013-10-24 | 3Dmedia Corporation | Systems and methods for improving overall quality of three-dimensional content by altering parallax budget or compensating for moving objects |
US9526069B2 (en) | 2012-04-20 | 2016-12-20 | Qualcomm Incorporated | Early initiation of dormancy of a radio connection |
WO2013166215A1 (en) * | 2012-05-01 | 2013-11-07 | Pelican Imaging Corporation | CAMERA MODULES PATTERNED WITH pi FILTER GROUPS |
JP2014022806A (ja) * | 2012-07-13 | 2014-02-03 | Sharp Corp | 撮像装置および撮像装置制御方法 |
CN107346061B (zh) * | 2012-08-21 | 2020-04-24 | 快图有限公司 | 用于使用阵列照相机捕捉的图像中的视差检测和校正的系统和方法 |
US8866927B2 (en) | 2012-12-13 | 2014-10-21 | Google Inc. | Determining an image capture payload burst structure based on a metering image capture sweep |
US9633442B2 (en) * | 2013-03-15 | 2017-04-25 | Fotonation Cayman Limited | Array cameras including an array camera module augmented with a separate camera |
US9615012B2 (en) * | 2013-09-30 | 2017-04-04 | Google Inc. | Using a second camera to adjust settings of first camera |
EP2887642A3 (en) * | 2013-12-23 | 2015-07-01 | Nokia Corporation | Method, apparatus and computer program product for image refocusing for light-field images |
EP3099044B1 (en) | 2014-05-15 | 2018-12-26 | Huawei Technologies Co. Ltd. | Multi-frame noise reduction method and terminal |
JP2015144475A (ja) | 2015-03-11 | 2015-08-06 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法、プログラム及び記憶媒体 |
US10237473B2 (en) | 2015-09-04 | 2019-03-19 | Apple Inc. | Depth map calculation in a stereo camera system |
US10284835B2 (en) | 2015-09-04 | 2019-05-07 | Apple Inc. | Photo-realistic shallow depth-of-field rendering from focal stacks |
US9762893B2 (en) * | 2015-12-07 | 2017-09-12 | Google Inc. | Systems and methods for multiscopic noise reduction and high-dynamic range |
-
2015
- 2015-12-07 US US14/961,102 patent/US9762893B2/en active Active
-
2016
- 2016-11-30 JP JP2018513646A patent/JP6818015B2/ja active Active
- 2016-11-30 CN CN201910370555.8A patent/CN110225330A/zh active Pending
- 2016-11-30 KR KR1020187007208A patent/KR101991474B1/ko active IP Right Grant
- 2016-11-30 EP EP16873617.1A patent/EP3335420A4/en active Pending
- 2016-11-30 KR KR1020197017009A patent/KR102142641B1/ko active IP Right Grant
- 2016-11-30 CN CN201680050125.2A patent/CN107925751B/zh active Active
- 2016-11-30 WO PCT/US2016/064290 patent/WO2017100061A1/en active Application Filing
-
2017
- 2017-08-14 US US15/676,145 patent/US10187628B2/en active Active
-
2018
- 2018-12-20 US US16/226,643 patent/US10477185B2/en active Active
-
2019
- 2019-06-24 JP JP2019116364A patent/JP7186672B2/ja active Active
- 2019-11-11 US US16/680,474 patent/US10897609B2/en active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004007707A (ja) * | 1996-04-05 | 2004-01-08 | Matsushita Electric Ind Co Ltd | 視差推定方法、画像伝送装置および画像伝送方法 |
JPH10191396A (ja) * | 1996-12-26 | 1998-07-21 | Matsushita Electric Ind Co Ltd | 中間視点画像生成方法および視差推定方法および画像伝送方法 |
JP2000102040A (ja) * | 1998-09-28 | 2000-04-07 | Olympus Optical Co Ltd | 電子ステレオカメラ |
JP2003209858A (ja) * | 2002-01-17 | 2003-07-25 | Canon Inc | 立体画像生成方法及び記録媒体 |
JP2004120527A (ja) * | 2002-09-27 | 2004-04-15 | Fuji Photo Film Co Ltd | 2眼式デジタルカメラ |
JP2005092121A (ja) * | 2003-09-19 | 2005-04-07 | Sony Computer Entertainment Inc | 撮影補助器、画像処理方法、画像処理装置、コンピュータプログラム、プログラムを格納した記録媒体 |
JP2006093860A (ja) * | 2004-09-21 | 2006-04-06 | Olympus Corp | 2眼撮像系を搭載したカメラ |
JP2007208704A (ja) * | 2006-02-02 | 2007-08-16 | Casio Comput Co Ltd | 撮像装置、画像処理方法及びプログラム |
JP2008312058A (ja) * | 2007-06-15 | 2008-12-25 | Fujifilm Corp | 撮像装置、撮像方法及びプログラム |
JP2009116532A (ja) * | 2007-11-05 | 2009-05-28 | Nippon Telegr & Teleph Corp <Ntt> | 仮想視点画像生成方法および仮想視点画像生成装置 |
JP2009284188A (ja) * | 2008-05-22 | 2009-12-03 | Panasonic Corp | カラー撮像装置 |
JP2010147812A (ja) * | 2008-12-18 | 2010-07-01 | Fujifilm Corp | 複眼カメラ及び画像処理方法 |
JPWO2011118084A1 (ja) * | 2010-03-24 | 2013-07-04 | 富士フイルム株式会社 | 画像処理装置および画像処理方法 |
JP2012216939A (ja) * | 2011-03-31 | 2012-11-08 | Fujifilm Corp | 画像処理装置、画像処理方法及びプログラム |
JP2012244583A (ja) * | 2011-05-24 | 2012-12-10 | Canon Inc | 撮像装置、画像処理方法及びプログラム |
JP2013090129A (ja) * | 2011-10-18 | 2013-05-13 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
JP2015005001A (ja) * | 2013-06-19 | 2015-01-08 | 株式会社 日立産業制御ソリューションズ | 画像信号処理装置,撮像装置および画像処理プログラム |
WO2015119207A1 (ja) * | 2014-02-07 | 2015-08-13 | 株式会社モルフォ | 画像処理装置、画像処理方法、画像処理プログラム及び記録媒体 |
JPWO2015119207A1 (ja) * | 2014-02-07 | 2017-03-23 | 株式会社モルフォ | 画像処理装置、画像処理方法、画像処理プログラム及び記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
EP3335420A1 (en) | 2018-06-20 |
CN107925751A (zh) | 2018-04-17 |
CN110225330A (zh) | 2019-09-10 |
US9762893B2 (en) | 2017-09-12 |
KR101991474B1 (ko) | 2019-06-20 |
CN107925751B (zh) | 2019-06-04 |
US10187628B2 (en) | 2019-01-22 |
JP7186672B2 (ja) | 2022-12-09 |
JP6818015B2 (ja) | 2021-01-20 |
KR20190071011A (ko) | 2019-06-21 |
US20200084429A1 (en) | 2020-03-12 |
KR102142641B1 (ko) | 2020-08-07 |
KR20180030727A (ko) | 2018-03-23 |
US10477185B2 (en) | 2019-11-12 |
WO2017100061A1 (en) | 2017-06-15 |
US10897609B2 (en) | 2021-01-19 |
US20170347088A1 (en) | 2017-11-30 |
EP3335420A4 (en) | 2019-07-03 |
JP2019165506A (ja) | 2019-09-26 |
US20190124319A1 (en) | 2019-04-25 |
US20170163966A1 (en) | 2017-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7186672B2 (ja) | マルチスコピック雑音削減およびハイ・ダイナミック・レンジのためのシステムおよび方法 | |
CN111164647B (zh) | 使用单个相机估算深度 | |
US9544574B2 (en) | Selecting camera pairs for stereoscopic imaging | |
US9918065B2 (en) | Depth-assisted focus in multi-camera systems | |
US9100640B2 (en) | Method and system for utilizing image sensor pipeline (ISP) for enhancing color of the 3D image utilizing z-depth information | |
US9774880B2 (en) | Depth-based video compression | |
US9961272B2 (en) | Image capturing apparatus and method of controlling the same | |
US20230033956A1 (en) | Estimating depth based on iris size | |
JP2016134661A (ja) | 画像処理方法、画像処理装置、撮像装置、プログラム、および、記憶媒体 | |
US20240209843A1 (en) | Scalable voxel block selection | |
GB2555585A (en) | Multiple view colour reconstruction | |
WO2024076363A1 (en) | Field of view correction techniques for shutterless camera systems | |
CN118115360A (zh) | 图像数据的多路处理方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180501 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180823 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20180823 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20181026 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181105 |
|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20190117 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20190225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190624 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20190624 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20190702 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20190708 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20190809 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20190819 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20191223 |
|
C13 | Notice of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: C13 Effective date: 20200203 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20200406 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20200501 |
|
C302 | Record of communication |
Free format text: JAPANESE INTERMEDIATE CODE: C302 Effective date: 20200721 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200727 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20201012 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20201109 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20201207 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20201207 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201225 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6818015 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |