JP2016140692A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2016140692A5 JP2016140692A5 JP2015021078A JP2015021078A JP2016140692A5 JP 2016140692 A5 JP2016140692 A5 JP 2016140692A5 JP 2015021078 A JP2015021078 A JP 2015021078A JP 2015021078 A JP2015021078 A JP 2015021078A JP 2016140692 A5 JP2016140692 A5 JP 2016140692A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- surgical
- pixel
- target position
- pixel value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000005286 illumination Methods 0.000 claims description 50
- 239000002131 composite material Substances 0.000 claims description 17
- 238000003384 imaging method Methods 0.000 claims description 12
- 230000001629 suppression Effects 0.000 claims description 8
- 238000001356 surgical procedure Methods 0.000 claims description 8
- 230000002093 peripheral Effects 0.000 claims description 3
- 238000003672 processing method Methods 0.000 claims description 2
- 238000000034 method Methods 0.000 claims 3
- 230000000875 corresponding Effects 0.000 claims 1
- 230000003247 decreasing Effects 0.000 claims 1
- 230000002194 synthesizing Effects 0.000 claims 1
- 238000005516 engineering process Methods 0.000 description 4
Description
本技術の画像処理装置、又は、プログラムは、第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部を備える画像処理装置、又は、そのような画像処理装置として、コンピュータを機能させるためのプログラムである。
本技術の画像処理方法は、第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成するステップを含む画像処理方法である。
本技術の内視鏡システムは、術部生体を撮影する内視鏡と、第1の照明方向の照明光が照射された術部生体を前記内視鏡で撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を前記内視鏡で撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部と、前記合成画像を表示する表示部とを備える内視鏡システムである。
本技術においては、第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照射光が照射された前記術部生体を撮影した第2の手術撮影画像とが合成され、鏡面反射光成分が抑制された合成画像が生成される。
また、周辺照射画像の注目位置の画素の画素値V0が、閾値THより小でないときには、周辺照射画像の注目位置の画素の画素値V0が、鏡面反射光成分が含む可能性があると推定され、中心照射画像の注目位置の画素の画素値VCが、合成画像の注目位置の画素の画素値Cとなる。
Claims (20)
- 第1の照明方向の照明が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部を備える
画像処理装置。 - 前記照明光を照射する照明部を制御する照明制御部をさらに備える
請求項1に記載の画像処理装置。 - 前記照明制御部は、前記照明光の照明方向を、前記第1の照明方向と前記第2の照明方向とに切り替えるように、前記照明部を制御する
請求項2に記載の画像処理装置。 - 前記照明制御部は、前記第1の照明方向の照明光、及び、前記第2の照明方向の照明光それぞれをオン又はオフするように、前記照明部を制御する
請求項2に記載の画像処理装置。 - 前記照明光は、前記術部生体を撮影する内視鏡から照射される
請求項1ないし4のいずれかに記載の画像処理装置。 - 前記照明光は、前記術部生体を撮影する内視鏡とは別の外部器具から照射される
請求項1ないし5のいずれかに記載の画像処理装置。 - 前記第1の手術撮影画像は、前記第1の撮影画像に映る前記術部生体の中心部分に向かう前記第1の照明方向の照明光が照射された画像であり、
前記第2の手術撮影画像は、前記第2の撮影画像に映る前記術部生体の周辺部分に向かう前記第2の照明方向の照射光が照射された画像である
請求項1ないし6のいずれかに記載の画像処理装置。 - 前記第1の手術撮影画像は、奇数フレーム及び偶数フレームのうちの一方のフレームの画像であり、
前記第2の手術撮影画像は、前記奇数フレーム及び前記偶数フレームのうちの他方のフレームの画像である
請求項1ないし7のいずれかに記載の画像処理装置。 - 前記信号処理部は、
第1のフレームの前記第1の手術撮影画像と、前記第1のフレームの次の第2のフレームの前記第2の手術撮影画像とを合成し、
前記第2のフレームの次の第3のフレームの前記第1の手術撮影画像と、前記第3のフレームの次の第4のフレームの前記第2の手術撮影画像とを合成する
ことを繰り返す
請求項8に記載の画像処理装置。 - 前記信号処理部は、
第1のフレームの前記第1の手術撮影画像と、前記第1のフレームの次の第2のフレームの前記第2の手術撮影画像とを合成し、
前記第2のフレームの前記第2の手術撮影画像と、前記第2のフレームの次の第3のフレームの前記第1の手術撮影画像とを合成する
ことを繰り返す
請求項8に記載の画像処理装置。 - 前記信号処理部は、
前記第1の手術撮影画像の注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大である場合、
前記第1の手術撮影画像の前記注目位置の画素の画素値が、閾値より小であるときには、前記第1の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求め、
前記第1の手術撮影画像の前記注目位置の画素の画素値が、閾値より小でないときには、前記第2の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求め、
前記第1の手術撮影画像の注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大でない場合、
前記第2の手術撮影画像の前記注目位置の画素の画素値が、閾値より小であるときには、前記第2の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求め、
前記第2の手術撮影画像の前記注目位置の画素の画素値が、閾値より小でないときには、前記第1の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求める
請求項1ないし10のいずれかに記載の画像処理装置。 - 前記信号処理部は、前記第1の手術撮影画像の注目位置の画素の画素値と、前記第2の手術撮影画像の前記注目位置の画素の画素値との重み付け加算値を、前記合成画像の前記注目位置の画素の画素値として求める
請求項1に記載の画像処理装置。 - 前記信号処理部は、前記重み付け加算値を求めるのに用いる重みを、前記第1の手術撮影画像又は前記第2の手術撮影画像の前記注目位置の画素の画素値に基づいて設定する
請求項12に記載の画像処理装置。 - 前記信号処理部は、
前記第1の手術撮影画像の前記注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大である場合、前記重みを、前記第1の手術撮影画像の前記注目位置の画素の画素値に応じて設定し、
前記第1の手術撮影画像の前記注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大でない場合、前記重みを、前記第2の手術撮影画像の前記注目位置の画素の画素値に応じて設定し、
前記合成画像を含む映像信号のフレームレートは、前記第1の手術撮影画像および前記第2の手術撮影画像を撮影する手術用撮像装置の撮像フレームレートより、低いものである
請求項13に記載の画像処理装置。 - 前記信号処理部は、
前記第1の撮影画像の前記注目位置の画素の画素値VC、前記第2の手術撮影画像の前記注目位置の画素の画素値V0、及び、重みaを用い、前記合成画像の前記注目位置の画素の画素値CをC=a・VC+(1−a)・V0に従って求め、
前記第1の撮影画像の前記注目位置の画素の露出量が、前記第2の撮影画像の前記注目位置の画素の露出量より大である場合、前記第1の撮影画像の前記注目位置の画素の画素値VCの増加に対して減少する重みaを設定し、
前記第1の撮影画像の前記注目位置の画素の露出量が、前記第2の撮影画像の前記注目位置の画素の露出量より大でない場合、前記第2の撮影画像の前記注目位置の画素の画素値V0の増加に対して増加する重みaを設定し、
前記合成画像を含む映像信号のフレームレートは、前記第1の手術画像および前記第2の手術画像を撮像する手術用撮像装置の撮像フレームレートと同じである
請求項14に記載の画像処理装置。 - 前記信号処理部は、
前記第1の手術撮影画像の各画素の画素値に、その画素の露出量に応じたゲインをかけるとともに、前記第2の手術撮影画像の各画素の画素値に、その画素の露出量に応じたゲインをかけ、
前記ゲインをかけた後の前記第1の手術撮影画像と前記第2の手術撮影画像とを合成する
請求項1ないし15のいずれかに記載の画像処理装置。 - 前記信号処理部は、前記ゲインをかけた後の前記第1の手術撮影画像と前記第2の手術撮影画像とを合成することにより生成される前記合成画像の階調を圧縮する
請求項16に記載の画像処理装置。 - 第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する
ステップを含む画像処理方法。 - 第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部
として、コンピュータを機能させるためのプログラム。 - 術部生体を撮影する手術用撮像装置内視鏡と、
第1の照明方向の照明光が照射された術部生体を前記手術用撮像装置内視鏡で撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を前記手術用撮像装置内視鏡で撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部と、
前記合成画像を表示する表示部と
を備える内視鏡システム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015021078A JP6344608B2 (ja) | 2015-02-05 | 2015-02-05 | 画像処理装置、画像処理方法、プログラム、及び、手術システム |
US15/519,980 US10849482B2 (en) | 2015-02-05 | 2016-01-26 | Endoscopic system, image processing apparatus, and image processing method |
EP16706007.8A EP3253273A1 (en) | 2015-02-05 | 2016-01-26 | Endoscopic system, image processing apparapus, and image processing method |
PCT/JP2016/000362 WO2016125450A1 (en) | 2015-02-05 | 2016-01-26 | Endoscopic system, image processing apparapus, and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015021078A JP6344608B2 (ja) | 2015-02-05 | 2015-02-05 | 画像処理装置、画像処理方法、プログラム、及び、手術システム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016140692A JP2016140692A (ja) | 2016-08-08 |
JP2016140692A5 true JP2016140692A5 (ja) | 2017-03-23 |
JP6344608B2 JP6344608B2 (ja) | 2018-06-20 |
Family
ID=55410145
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015021078A Active JP6344608B2 (ja) | 2015-02-05 | 2015-02-05 | 画像処理装置、画像処理方法、プログラム、及び、手術システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US10849482B2 (ja) |
EP (1) | EP3253273A1 (ja) |
JP (1) | JP6344608B2 (ja) |
WO (1) | WO2016125450A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022085551A (ja) * | 2020-11-27 | 2022-06-08 | セイコーエプソン株式会社 | 画像処理装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01160526A (ja) * | 1987-12-18 | 1989-06-23 | Toshiba Corp | 電子内視鏡装置 |
US6088612A (en) * | 1997-04-04 | 2000-07-11 | Medtech Research Corporation | Method and apparatus for reflective glare removal in digital photography useful in cervical cancer detection |
JPH11104075A (ja) | 1997-09-30 | 1999-04-20 | Toshiba Corp | 内視鏡スコープ |
JP2001224549A (ja) | 2000-02-18 | 2001-08-21 | Fuji Photo Film Co Ltd | 内視鏡画像取得方法および装置 |
US6975898B2 (en) * | 2000-06-19 | 2005-12-13 | University Of Washington | Medical imaging, diagnosis, and therapy using a scanning single optical fiber system |
CA2413483A1 (en) * | 2001-12-26 | 2003-06-26 | Kevin R. Forrester | Motion measuring device |
US8929688B2 (en) * | 2004-10-01 | 2015-01-06 | University Of Washington | Remapping methods to reduce distortions in images |
JP2006142003A (ja) | 2004-10-20 | 2006-06-08 | Fuji Photo Film Co Ltd | 明るさ調整方法、画像処理装置および画像処理プログラム |
US7630002B2 (en) * | 2007-01-05 | 2009-12-08 | Microsoft Corporation | Specular reflection reduction using multiple cameras |
US8488243B2 (en) * | 2008-10-27 | 2013-07-16 | Realid Inc. | Head-tracking enhanced stereo glasses |
CA2683206C (en) * | 2009-10-17 | 2018-07-03 | Hermary Opto Electronics Inc. | Enhanced imaging method and apparatus |
EP2339534A1 (en) * | 2009-11-18 | 2011-06-29 | Panasonic Corporation | Specular reflection compensation |
JP2011120646A (ja) | 2009-12-08 | 2011-06-23 | Hoya Corp | 内視鏡スコープおよび内視鏡装置 |
JP2012125293A (ja) * | 2010-12-13 | 2012-07-05 | Olympus Corp | 制御装置、内視鏡装置及びフォーカス制御方法 |
JP2012231422A (ja) | 2011-04-27 | 2012-11-22 | Avermedia Information Inc | グレア除去装置及びグレア除去方法 |
US9593982B2 (en) * | 2012-05-21 | 2017-03-14 | Digimarc Corporation | Sensor-synchronized spectrally-structured-light imaging |
US9912847B1 (en) * | 2012-09-25 | 2018-03-06 | Amazon Technologies, Inc. | Image capture guidance to reduce specular reflection effects |
US10113910B2 (en) * | 2014-08-26 | 2018-10-30 | Digimarc Corporation | Sensor-synchronized spectrally-structured-light imaging |
-
2015
- 2015-02-05 JP JP2015021078A patent/JP6344608B2/ja active Active
-
2016
- 2016-01-26 EP EP16706007.8A patent/EP3253273A1/en not_active Withdrawn
- 2016-01-26 WO PCT/JP2016/000362 patent/WO2016125450A1/en active Application Filing
- 2016-01-26 US US15/519,980 patent/US10849482B2/en active Active
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11835702B2 (en) | Medical image processing apparatus, medical image processing method, and medical observation system | |
US9858666B2 (en) | Medical skin examination device and method for processing and enhancing an image of a skin lesion | |
JP6764574B2 (ja) | 画像処理装置、画像処理方法、プログラム、及び、手術システム | |
JP2015029865A5 (ja) | 画像処理装置および方法、眼底画像処理装置、並びに眼底画像撮影装置 | |
JP2017006330A5 (ja) | ||
US11025835B2 (en) | Imaging device, endoscope apparatus, and method for operating imaging device | |
JP2017507680A5 (ja) | ||
EP1734405A3 (en) | Radiographic imaging apparatus, control method thereof, and radiographic imaging system | |
JP2015029865A (ja) | 画像処理装置および方法、眼底画像処理装置、画像撮影方法、並びに眼底画像撮影装置および方法 | |
JP2013062626A5 (ja) | 撮像装置、画像データ処理方法、およびプログラム | |
JP2017150878A5 (ja) | ||
JP5742970B2 (ja) | 放射線撮影装置 | |
JP2022516472A (ja) | 部分的深度マップからの合成3次元撮像の発生 | |
WO2022056362A1 (en) | Image processing to compensate for scene lighting during surgical procedures | |
WO2013073627A1 (ja) | 画像処理装置及び方法 | |
JP2017184787A5 (ja) | ||
JP2016140692A5 (ja) | ||
JP2013128212A5 (ja) | ||
JP2017070523A (ja) | 光源制御装置、光源制御方法、プログラム、および手術用システム | |
JP7394547B2 (ja) | 制御装置、医療用観察システム、制御方法およびプログラム | |
CN110225247B (zh) | 一种图像处理方法及电子设备 | |
JP6530067B2 (ja) | 内視鏡装置及び内視鏡装置の作動方法 | |
JP5693099B2 (ja) | 画像処理装置、画像処理方法、放射線撮影システム及びプログラム | |
JP6452355B2 (ja) | 撮影装置及びその制御方法、並びに、プログラム | |
US10849482B2 (en) | Endoscopic system, image processing apparatus, and image processing method |