JP2014528059A - ブラー処理装置及び方法 - Google Patents
ブラー処理装置及び方法 Download PDFInfo
- Publication number
- JP2014528059A JP2014528059A JP2014520126A JP2014520126A JP2014528059A JP 2014528059 A JP2014528059 A JP 2014528059A JP 2014520126 A JP2014520126 A JP 2014520126A JP 2014520126 A JP2014520126 A JP 2014520126A JP 2014528059 A JP2014528059 A JP 2014528059A
- Authority
- JP
- Japan
- Prior art keywords
- blur
- occurred
- video
- depth information
- reflected light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Feedback Control In General (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
Description
102 光照射部
104 オブジェクト
110 制御部
120 センサ部
130 ブラー判断部
140 映像処理部
221、222 ゲート
231、232 集積部
200 ピクセル
210 検出部
1400 ブラー処理装置
1410 モデル識別部
1420 検索部
1430 映像処理部
Claims (20)
- 制御信号を生成する制御部と、
照射光信号がオブジェクトにより反射されて戻ってくる反射光信号によって生成される電子を前記制御信号に基づき集積するセンサ部と、
前記制御信号の各々について集積された電子量間の関係に基づきブラーが発生したか否かを判断するブラー判断部と、
を備えることを特徴とするブラー処理装置。 - 前記ブラー判断部は、ブラーがない場合を示す基準電荷量の関係情報と前記集積された電子量間の関係を比較してブラーが発生したか否かを判断することを特徴とする請求項1に記載のブラー処理装置。
- 前記照射光信号が、ToF(Time of Flight)方式カメラによって放出される場合に、前記ブラー判断部は、前記反射光信号の位相差を用いて前記ToF方式カメラによって取得された映像内のブラーが発生したか否かを判断する、ことを特徴とする請求項1に記載のブラー処理装置。
- 前記ブラー判断部は、互いに異なる位相を有する複数の制御信号と前記反射光信号との間の位相差を算出することにより、深さ情報を算出することを特徴とする請求項1又は3に記載のブラー処理装置。
- 前記センサ部は、前記反射光信号と互いに異なる位相を有する複数の制御信号それぞれによって受光された電荷量を取得し、
前記ブラー判断部は、前記取得された電荷量と、前記複数の制御信号の互いに異なる位相によって定められる各電荷量との間の関係が正常範囲から離れるか否かに応じて、前記映像内でブラーが発生したか否かを判断することを特徴とする請求項1、3又は4に記載のブラー処理装置。 - 前記センサ部は、n(nは自然数)個の反射光信号を取得し、
前記ブラー判断部は、互いに異なる位相を有する複数の制御信号と前記n個の反射光信号との間の位相差を算出することによりn個の深さ情報を算出し、算出されたn個の深さ情報の平均値を算出することを特徴とする請求項1、3又は4に記載のブラー処理装置。 - 前記ブラー判断部は、前記算出されたn個の深さ情報のうち少なくとも1つがフラットではない場合、前記映像内にブラーが発生したと判断することを特徴とする請求項6に記載のブラー処理装置。
- 前記ブラー判断部が、ブラーが発生したと判断した場合、ToF方式カメラによって取得された映像内で、前記ブラーが発生したピクセル値をブラーが発生していない周辺の正常ピクセル値で代替して前記ブラーを除去する映像処理部をさらに備えることを特徴とする請求項1乃至7のいずれか一項に記載のブラー処理装置。
- 前記映像処理部は、前記ブラーが発生したブラー領域の深さ情報を、前記映像内で前記ブラーが発生したフレームと異なる時間の隣接フレームに基づいて前記ブラーが発生していない周辺の正常ピクセル値で代替することを特徴とする請求項8に記載のブラー処理装置。
- ToF方式カメラの構造に対応するブラーモデルを識別するモデル識別部と、
前記ToF方式カメラによって取得された映像で前記ブラーモデルに関連するパターンを検索する検索部と、
前記検索により見付かったパターン内のブラー領域をフィルタリングして前記映像内のブラーを除去する映像処理部と、
を備えることを特徴とするブラー処理装置。 - 前記映像処理部は、R−θ空間で前記ブラー領域をフィルタリングすることを特徴とする請求項10に記載のブラー処理装置。
- 位相が互いに異なる複数の制御信号を生成するステップと、
照射光信号がオブジェクトにより反射されて戻ってくる反射光信号によって生成される電子を前記制御信号に基づき集積するステップと、
前記制御信号の各々について集積された電子量間の関係に基づきブラーが発生したか否かを判断するステップと、
を含むことを特徴とするブラー処理方法。 - 前記ブラーが発生したか否かを判断するステップは、ブラーがない場合を示す基準電荷量の関係情報と前記集積された電子量間の関係を比較してブラーが発生したか否かを判断することを特徴とする請求項12に記載のブラー処理方法。
- 前記照射光信号が、ToF方式カメラによって放出される場合、
前記ブラーが発生したか否かを判断するステップは、前記反射光信号の位相差を用いて前記ToF方式カメラによって取得された映像内でブラーが発生したか否かを判断するステップを含むことを特徴とする請求項12に記載のブラー処理方法。 - 前記ブラーが発生したか否かを判断するステップは、互いに異なる位相を有する複数の制御信号と前記反射光信号との間の位相差を算出して深さ情報を算出するステップを含むことを特徴とする請求項12又は14に記載のブラー処理方法。
- 前記ブラーが発生したか否かを判断するステップは、
取得したn(nは自然数)個の反射光信号と、互いに異なる位相を有する複数の制御信号との間の位相差を算出するステップと、
前記算出された結果を用いてn個の深さ情報を算出するステップと、
前記算出されたn個の深さ情報の平均値を算出するステップと、
を含むことを特徴とする請求項12、14又は15に記載のブラー処理方法。 - 前記ブラーが発生したと判断された場合、ToF方式カメラによって取得した映像内で、前記ブラーが発生したピクセル値をブラーが発生していない周辺の正常ピクセル値で代替して前記発生したブラーを除去するステップ、
をさらに含むことを特徴とする請求項12乃至16のいずれか一項に記載のブラー処理方法。 - 前記発生したブラーを除去するステップは、前記ブラーが発生したブラー領域の深さ情報を、前記映像内で前記ブラーが発生したフレームと異なる時間の隣接フレームに基づいて、ブラーが発生していない周辺の正常ピクセル値で代替して前記発生したブラーを除去するステップを含むことを特徴とする請求項17に記載のブラー処理方法。
- ToF方式カメラの構造に対応するブラーモデルを識別するステップと、
前記ToF方式カメラによって取得された映像内で前記ブラーモデルに関連するパターンを検索するステップと、
前記検索により見付かったパターン内でブラーが発生したブラー領域をフィルタリングするステップと、
前記ブラー領域をフィルタリングして映像内の前記ブラーを除去するステップと、
を含むことを特徴とするブラー処理方法。 - 前記見付かったパターン内でブラーが発生したブラー領域をフィルタリングするステップは、R−θ空間で前記ブラー領域をフィルタリングするステップを含むことを特徴とする請求項19に記載のブラー処理方法。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161506758P | 2011-07-12 | 2011-07-12 | |
US61/506,758 | 2011-07-12 | ||
KR10-2012-0075386 | 2012-07-11 | ||
KR1020120075386A KR101929557B1 (ko) | 2011-07-12 | 2012-07-11 | 블러 처리 장치 및 방법 |
PCT/KR2012/005512 WO2013009099A2 (ko) | 2011-07-12 | 2012-07-11 | 블러 처리 장치 및 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014528059A true JP2014528059A (ja) | 2014-10-23 |
JP6193227B2 JP6193227B2 (ja) | 2017-09-06 |
Family
ID=48652383
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014520126A Active JP6193227B2 (ja) | 2011-07-12 | 2012-07-11 | ブラー処理装置及び方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6193227B2 (ja) |
CN (1) | CN103181156B (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016149765A (ja) * | 2015-02-13 | 2016-08-18 | 三星電子株式会社Samsung Electronics Co.,Ltd. | 位相検出ピクセルを利用して深さマップを生成するための映像生成装置 |
CN111798506A (zh) * | 2020-06-30 | 2020-10-20 | 上海数迹智能科技有限公司 | 一种图像处理方法、控制方法、终端及计算机可读存储介质 |
WO2021145065A1 (ja) * | 2020-01-14 | 2021-07-22 | ソニーセミコンダクタソリューションズ株式会社 | 画像生成装置、画像生成方法 |
WO2022190848A1 (ja) * | 2021-03-12 | 2022-09-15 | ソニーグループ株式会社 | 測距装置、測距システム及び測距方法 |
US11693093B2 (en) | 2018-06-13 | 2023-07-04 | Fanuc Corporation | Distance-measuring apparatus that outputs precision information |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11243294B2 (en) | 2014-05-19 | 2022-02-08 | Rockwell Automation Technologies, Inc. | Waveform reconstruction in a time-of-flight sensor |
US9921300B2 (en) | 2014-05-19 | 2018-03-20 | Rockwell Automation Technologies, Inc. | Waveform reconstruction in a time-of-flight sensor |
US9696424B2 (en) | 2014-05-19 | 2017-07-04 | Rockwell Automation Technologies, Inc. | Optical area monitoring with spot matrix illumination |
US9922427B2 (en) | 2014-06-06 | 2018-03-20 | Infineon Technologies Ag | Time-of-flight camera with location sensor system |
CN106997582A (zh) * | 2016-01-22 | 2017-08-01 | 北京三星通信技术研究有限公司 | 飞行时间三维传感器的运动模糊消除方法和设备 |
CN108303702B (zh) * | 2017-12-30 | 2020-08-04 | 武汉灵途传感科技有限公司 | 一种相位式激光测距系统及方法 |
CN111580117A (zh) * | 2019-02-19 | 2020-08-25 | 光宝电子(广州)有限公司 | 飞时测距感测系统的控制方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060176469A1 (en) * | 2005-02-08 | 2006-08-10 | Canesta, Inc. | Method and system to correct motion blur and reduce signal transients in time-of-flight sensor systems |
US20060241371A1 (en) * | 2005-02-08 | 2006-10-26 | Canesta, Inc. | Method and system to correct motion blur in time-of-flight sensor systems |
US20080036996A1 (en) * | 2006-02-08 | 2008-02-14 | Canesta, Inc. | Method and system to correct motion blur and reduce signal transients in time-of-flight sensor systems |
JP2008164496A (ja) * | 2006-12-28 | 2008-07-17 | Toyota Central R&D Labs Inc | 計測装置 |
JP2009079987A (ja) * | 2007-09-26 | 2009-04-16 | Fujifilm Corp | 測距方法および装置 |
JP2009079988A (ja) * | 2007-09-26 | 2009-04-16 | Fujifilm Corp | 測距方法および装置ならびにこれに用いられる撮像素子 |
JP2010286488A (ja) * | 2009-06-09 | 2010-12-24 | Samsung Electronics Co Ltd | 映像処理装置および方法 |
JP2011022088A (ja) * | 2009-07-17 | 2011-02-03 | Panasonic Electric Works Co Ltd | 空間情報検出装置 |
JP2011022089A (ja) * | 2009-07-17 | 2011-02-03 | Panasonic Electric Works Co Ltd | 空間情報検出装置 |
JP2011053216A (ja) * | 2009-09-01 | 2011-03-17 | Samsung Electronics Co Ltd | 距離測定方法、距離測定システム及び距離センサー |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5979208A (ja) * | 1982-10-29 | 1984-05-08 | Canon Inc | ぶれ検知装置 |
US7042507B2 (en) * | 2000-07-05 | 2006-05-09 | Minolta Co., Ltd. | Digital camera, pixel data read-out control apparatus and method, blur-detection apparatus and method |
JP5109803B2 (ja) * | 2007-06-06 | 2012-12-26 | ソニー株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2009036986A (ja) * | 2007-08-01 | 2009-02-19 | Olympus Imaging Corp | 撮影装置および撮影装置の制御方法 |
JP2009036985A (ja) * | 2007-08-01 | 2009-02-19 | Olympus Imaging Corp | 撮影装置および撮影装置の制御方法 |
JP2010032675A (ja) * | 2008-07-28 | 2010-02-12 | Sony Corp | 立体画像表示装置の製造方法および立体画像表示装置 |
CN101582165B (zh) * | 2009-06-29 | 2011-11-16 | 浙江大学 | 基于灰度图像与空间深度数据的摄像机阵列标定算法 |
-
2012
- 2012-07-11 CN CN201280003376.7A patent/CN103181156B/zh active Active
- 2012-07-11 JP JP2014520126A patent/JP6193227B2/ja active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060176469A1 (en) * | 2005-02-08 | 2006-08-10 | Canesta, Inc. | Method and system to correct motion blur and reduce signal transients in time-of-flight sensor systems |
US20060241371A1 (en) * | 2005-02-08 | 2006-10-26 | Canesta, Inc. | Method and system to correct motion blur in time-of-flight sensor systems |
US20080036996A1 (en) * | 2006-02-08 | 2008-02-14 | Canesta, Inc. | Method and system to correct motion blur and reduce signal transients in time-of-flight sensor systems |
JP2008164496A (ja) * | 2006-12-28 | 2008-07-17 | Toyota Central R&D Labs Inc | 計測装置 |
JP2009079987A (ja) * | 2007-09-26 | 2009-04-16 | Fujifilm Corp | 測距方法および装置 |
JP2009079988A (ja) * | 2007-09-26 | 2009-04-16 | Fujifilm Corp | 測距方法および装置ならびにこれに用いられる撮像素子 |
JP2010286488A (ja) * | 2009-06-09 | 2010-12-24 | Samsung Electronics Co Ltd | 映像処理装置および方法 |
JP2011022088A (ja) * | 2009-07-17 | 2011-02-03 | Panasonic Electric Works Co Ltd | 空間情報検出装置 |
JP2011022089A (ja) * | 2009-07-17 | 2011-02-03 | Panasonic Electric Works Co Ltd | 空間情報検出装置 |
JP2011053216A (ja) * | 2009-09-01 | 2011-03-17 | Samsung Electronics Co Ltd | 距離測定方法、距離測定システム及び距離センサー |
Non-Patent Citations (1)
Title |
---|
O. LOTTNER, ET AL.: ""Movement Artefacts in Range Images of Time-of-Flight Cameras"", PROCEEDINGS OF THE 8TH INTERNATIONAL SYMPOSIUM ON SIGNALS, CIRCUITS AND SYSTEMS (ISSCS 2007), vol. 1, JPN6016007348, 13 July 2007 (2007-07-13), pages 1 - 4, XP031128550, ISSN: 0003265386 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016149765A (ja) * | 2015-02-13 | 2016-08-18 | 三星電子株式会社Samsung Electronics Co.,Ltd. | 位相検出ピクセルを利用して深さマップを生成するための映像生成装置 |
US11693093B2 (en) | 2018-06-13 | 2023-07-04 | Fanuc Corporation | Distance-measuring apparatus that outputs precision information |
DE102019004031B4 (de) | 2018-06-13 | 2024-02-01 | Fanuc Corporation | Abstandsmessvorrichtung, die Genauigkeitsinformation ausgibt |
WO2021145065A1 (ja) * | 2020-01-14 | 2021-07-22 | ソニーセミコンダクタソリューションズ株式会社 | 画像生成装置、画像生成方法 |
CN111798506A (zh) * | 2020-06-30 | 2020-10-20 | 上海数迹智能科技有限公司 | 一种图像处理方法、控制方法、终端及计算机可读存储介质 |
WO2022190848A1 (ja) * | 2021-03-12 | 2022-09-15 | ソニーグループ株式会社 | 測距装置、測距システム及び測距方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103181156A (zh) | 2013-06-26 |
CN103181156B (zh) | 2017-09-01 |
JP6193227B2 (ja) | 2017-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6193227B2 (ja) | ブラー処理装置及び方法 | |
CN107204012B (zh) | 降低飞行时间深度成像的功耗 | |
KR101929557B1 (ko) | 블러 처리 장치 및 방법 | |
CN104205169B (zh) | 基于异步光传感器估计光流的方法 | |
KR101863626B1 (ko) | 영상 처리 장치 및 방법 | |
CN109903324B (zh) | 一种深度图像获取方法及装置 | |
JP2021507218A5 (ja) | ||
US9456152B2 (en) | Device and method for blur processing | |
US10354413B2 (en) | Detection system and picture filtering method thereof | |
JP2015034732A (ja) | 距離算出装置、撮像装置および距離算出方法 | |
JP6428924B2 (ja) | 信号機検出装置及び信号機検出方法 | |
JP5539343B2 (ja) | 映像処理方法 | |
CN102821243A (zh) | 图像处理装置、控制图像处理装置的方法以及用于使计算机执行该方法的程序 | |
TWI696841B (zh) | 基於飛行時間測距的運算裝置、感測裝置及處理方法 | |
KR102516495B1 (ko) | 스테레오-시간적 이미지 시퀀스들로부터 향상된 3-d 데이터 재구성을 위한 방법들 및 장치 | |
CN106663322A (zh) | 识别特征 | |
CN110336942A (zh) | 一种虚化图像获取方法及终端、计算机可读存储介质 | |
US9025022B2 (en) | Method and apparatus for gesture recognition using a two dimensional imaging device | |
JP2015524946A (ja) | 画像解像度が改善された超解像画像を形成するための方法及び測定装置 | |
US20190287272A1 (en) | Detection system and picturing filtering method thereof | |
CN113439195A (zh) | 使用动态视觉传感器和图案投影的三维成像和感测 | |
JP6369897B2 (ja) | 自己位置算出装置及び自己位置算出方法 | |
JP6313617B2 (ja) | 距離画像生成装置、物体検出装置および物体検出方法 | |
JP6299319B2 (ja) | 自己位置算出装置及び自己位置算出方法 | |
JP5677234B2 (ja) | エッジ検出装置およびそのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150311 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160301 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160601 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161108 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170207 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170718 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170809 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6193227 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |