JP2016140692A5 - - Google Patents

Download PDF

Info

Publication number
JP2016140692A5
JP2016140692A5 JP2015021078A JP2015021078A JP2016140692A5 JP 2016140692 A5 JP2016140692 A5 JP 2016140692A5 JP 2015021078 A JP2015021078 A JP 2015021078A JP 2015021078 A JP2015021078 A JP 2015021078A JP 2016140692 A5 JP2016140692 A5 JP 2016140692A5
Authority
JP
Japan
Prior art keywords
image
surgical
pixel
target position
pixel value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015021078A
Other languages
English (en)
Other versions
JP2016140692A (ja
JP6344608B2 (ja
Filing date
Publication date
Application filed filed Critical
Priority to JP2015021078A priority Critical patent/JP6344608B2/ja
Priority claimed from JP2015021078A external-priority patent/JP6344608B2/ja
Priority to US15/519,980 priority patent/US10849482B2/en
Priority to EP16706007.8A priority patent/EP3253273A1/en
Priority to PCT/JP2016/000362 priority patent/WO2016125450A1/en
Publication of JP2016140692A publication Critical patent/JP2016140692A/ja
Publication of JP2016140692A5 publication Critical patent/JP2016140692A5/ja
Application granted granted Critical
Publication of JP6344608B2 publication Critical patent/JP6344608B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本技術の画像処理装置、又は、プログラムは、第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部を備える画像処理装置、又は、そのような画像処理装置として、コンピュータを機能させるためのプログラムである。
本技術の画像処理方法は、第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成するステップを含む画像処理方法である。
本技術の内視鏡システムは、術部生体を撮影する内視鏡と、第1の照明方向の照明光が照射された術部生体を前記内視鏡で撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を前記内視鏡で撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部と、前記合成画像を表示する表示部とを備える内視鏡システムである。
本技術においては、第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照射光が照射された前記術部生体を撮影した第2の手術撮影画像とが合成され、鏡面反射光成分が抑制された合成画像が生成される。
また、周辺照射画像の注目位置の画素の画素値Vが、閾値THより小でないときには、周辺照射画像の注目位置の画素の画素値Vが、鏡面反射光成分が含む可能性があると推定され、中心照射画像の注目位置の画素の画素値Vが、合成画像の注目位置の画素の画素値Cとなる。

Claims (20)

  1. 第1の照明方向の照明が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部を備える
    画像処理装置。
  2. 前記照明光を照射する照明部を制御する照明制御部をさらに備える
    請求項1に記載の画像処理装置。
  3. 前記照明制御部は、前記照明光の照明方向を、前記第1の照明方向と前記第2の照明方向とに切り替えるように、前記照明部を制御する
    請求項2に記載の画像処理装置。
  4. 前記照明制御部は、前記第1の照明方向の照明光、及び、前記第2の照明方向の照明光それぞれをオン又はオフするように、前記照明部を制御する
    請求項2に記載の画像処理装置。
  5. 前記照明光は、前記術部生体を撮影する内視鏡から照射される
    請求項1ないし4のいずれかに記載の画像処理装置。
  6. 前記照明光は、前記術部生体を撮影する内視鏡とは別の外部器具から照射される
    請求項1ないし5のいずれかに記載の画像処理装置。
  7. 前記第1の手術撮影画像は、前記第1の撮影画像に映る前記術部生体の中心部分に向かう前記第1の照明方向の照明光が照射された画像であり、
    前記第2の手術撮影画像は、前記第2の撮影画像に映る前記術部生体の周辺部分に向かう前記第2の照明方向の照射光が照射された画像である
    請求項1ないし6のいずれかに記載の画像処理装置。
  8. 前記第1の手術撮影画像は、奇数フレーム及び偶数フレームのうちの一方のフレームの画像であり、
    前記第2の手術撮影画像は、前記奇数フレーム及び前記偶数フレームのうちの他方のフレームの画像である
    請求項1ないし7のいずれかに記載の画像処理装置。
  9. 前記信号処理部は、
    第1のフレームの前記第1の手術撮影画像と、前記第1のフレームの次の第2のフレームの前記第2の手術撮影画像とを合成し、
    前記第2のフレームの次の第3のフレームの前記第1の手術撮影画像と、前記第3のフレームの次の第4のフレームの前記第2の手術撮影画像とを合成する
    ことを繰り返す
    請求項8に記載の画像処理装置。
  10. 前記信号処理部は、
    第1のフレームの前記第1の手術撮影画像と、前記第1のフレームの次の第2のフレームの前記第2の手術撮影画像とを合成し、
    前記第2のフレームの前記第2の手術撮影画像と、前記第2のフレームの次の第3のフレームの前記第1の手術撮影画像とを合成する
    ことを繰り返す
    請求項8に記載の画像処理装置。
  11. 前記信号処理部は、
    前記第1の手術撮影画像の注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大である場合、
    前記第1の手術撮影画像の前記注目位置の画素の画素値が、閾値より小であるときには、前記第1の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求め、
    前記第1の手術撮影画像の前記注目位置の画素の画素値が、閾値より小でないときには、前記第2の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求め、
    前記第1の手術撮影画像の注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大でない場合、
    前記第2の手術撮影画像の前記注目位置の画素の画素値が、閾値より小であるときには、前記第2の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求め、
    前記第2の手術撮影画像の前記注目位置の画素の画素値が、閾値より小でないときには、前記第1の手術撮影画像の前記注目位置の画素の画素値を、前記合成画像の前記注目位置の画素の画素値として求める
    請求項1ないし10のいずれかに記載の画像処理装置。
  12. 前記信号処理部は、前記第1の手術撮影画像の注目位置の画素の画素値と、前記第2の手術撮影画像の前記注目位置の画素の画素値との重み付け加算値を、前記合成画像の前記注目位置の画素の画素値として求める
    請求項1に記載の画像処理装置。
  13. 前記信号処理部は、前記重み付け加算値を求めるのに用いる重みを、前記第1の手術撮影画像又は前記第2の手術撮影画像の前記注目位置の画素の画素値に基づいて設定する
    請求項12に記載の画像処理装置。
  14. 前記信号処理部は、
    前記第1の手術撮影画像の前記注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大である場合、前記重みを、前記第1の手術撮影画像の前記注目位置の画素の画素値に応じて設定し、
    前記第1の手術撮影画像の前記注目位置の画素の露出量が、前記第2の手術撮影画像の前記注目位置の画素の露出量より大でない場合、前記重みを、前記第2の手術撮影画像の前記注目位置の画素の画素値に応じて設定し、
    前記合成画像を含む映像信号のフレームレートは、前記第1の手術撮影画像および前記第2の手術撮影画像を撮影する手術用撮像装置の撮像フレームレートより、低いものである
    請求項13に記載の画像処理装置。
  15. 前記信号処理部は、
    前記第1の撮影画像の前記注目位置の画素の画素値V、前記第2の手術撮影画像の前記注目位置の画素の画素値V、及び、重みaを用い、前記合成画像の前記注目位置の画素の画素値CをC=a・V+(1−a)・Vに従って求め、
    前記第1の撮影画像の前記注目位置の画素の露出量が、前記第2の撮影画像の前記注目位置の画素の露出量より大である場合、前記第1の撮影画像の前記注目位置の画素の画素値Vの増加に対して減少する重みaを設定し、
    前記第1の撮影画像の前記注目位置の画素の露出量が、前記第2の撮影画像の前記注目位置の画素の露出量より大でない場合、前記第2の撮影画像の前記注目位置の画素の画素値Vの増加に対して増加する重みaを設定し、
    前記合成画像を含む映像信号のフレームレートは、前記第1の手術画像および前記第2の手術画像を撮像する手術用撮像装置の撮像フレームレートと同じである
    請求項14に記載の画像処理装置。
  16. 前記信号処理部は、
    前記第1の手術撮影画像の各画素の画素値に、その画素の露出量に応じたゲインをかけるとともに、前記第2の手術撮影画像の各画素の画素値に、その画素の露出量に応じたゲインをかけ、
    前記ゲインをかけた後の前記第1の手術撮影画像と前記第2の手術撮影画像とを合成する
    請求項1ないし15のいずれかに記載の画像処理装置。
  17. 前記信号処理部は、前記ゲインをかけた後の前記第1の手術撮影画像と前記第2の手術撮影画像とを合成することにより生成される前記合成画像の階調を圧縮する
    請求項16に記載の画像処理装置。
  18. 第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する
    ステップを含む画像処理方法。
  19. 第1の照明方向の照明光が照射された術部生体を撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部
    として、コンピュータを機能させるためのプログラム。
  20. 術部生体を撮影する手術用撮像装置内視鏡と、
    第1の照明方向の照明光が照射された術部生体を前記手術用撮像装置内視鏡で撮影した第1の手術撮影画像と、第2の照明方向の照明光が照射された前記術部生体を前記手術用撮像装置内視鏡で撮影した第2の手術撮影画像とを合成し、鏡面反射光成分が抑制された合成画像を生成する信号処理部と、
    前記合成画像を表示する表示部と
    を備える内視鏡システム。
JP2015021078A 2015-02-05 2015-02-05 画像処理装置、画像処理方法、プログラム、及び、手術システム Active JP6344608B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2015021078A JP6344608B2 (ja) 2015-02-05 2015-02-05 画像処理装置、画像処理方法、プログラム、及び、手術システム
US15/519,980 US10849482B2 (en) 2015-02-05 2016-01-26 Endoscopic system, image processing apparatus, and image processing method
EP16706007.8A EP3253273A1 (en) 2015-02-05 2016-01-26 Endoscopic system, image processing apparapus, and image processing method
PCT/JP2016/000362 WO2016125450A1 (en) 2015-02-05 2016-01-26 Endoscopic system, image processing apparapus, and image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015021078A JP6344608B2 (ja) 2015-02-05 2015-02-05 画像処理装置、画像処理方法、プログラム、及び、手術システム

Publications (3)

Publication Number Publication Date
JP2016140692A JP2016140692A (ja) 2016-08-08
JP2016140692A5 true JP2016140692A5 (ja) 2017-03-23
JP6344608B2 JP6344608B2 (ja) 2018-06-20

Family

ID=55410145

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015021078A Active JP6344608B2 (ja) 2015-02-05 2015-02-05 画像処理装置、画像処理方法、プログラム、及び、手術システム

Country Status (4)

Country Link
US (1) US10849482B2 (ja)
EP (1) EP3253273A1 (ja)
JP (1) JP6344608B2 (ja)
WO (1) WO2016125450A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022085551A (ja) * 2020-11-27 2022-06-08 セイコーエプソン株式会社 画像処理装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01160526A (ja) * 1987-12-18 1989-06-23 Toshiba Corp 電子内視鏡装置
US6088612A (en) * 1997-04-04 2000-07-11 Medtech Research Corporation Method and apparatus for reflective glare removal in digital photography useful in cervical cancer detection
JPH11104075A (ja) 1997-09-30 1999-04-20 Toshiba Corp 内視鏡スコープ
JP2001224549A (ja) 2000-02-18 2001-08-21 Fuji Photo Film Co Ltd 内視鏡画像取得方法および装置
US6975898B2 (en) * 2000-06-19 2005-12-13 University Of Washington Medical imaging, diagnosis, and therapy using a scanning single optical fiber system
CA2413483A1 (en) * 2001-12-26 2003-06-26 Kevin R. Forrester Motion measuring device
US8929688B2 (en) * 2004-10-01 2015-01-06 University Of Washington Remapping methods to reduce distortions in images
JP2006142003A (ja) 2004-10-20 2006-06-08 Fuji Photo Film Co Ltd 明るさ調整方法、画像処理装置および画像処理プログラム
US7630002B2 (en) * 2007-01-05 2009-12-08 Microsoft Corporation Specular reflection reduction using multiple cameras
US8488243B2 (en) * 2008-10-27 2013-07-16 Realid Inc. Head-tracking enhanced stereo glasses
CA2683206C (en) * 2009-10-17 2018-07-03 Hermary Opto Electronics Inc. Enhanced imaging method and apparatus
EP2339534A1 (en) * 2009-11-18 2011-06-29 Panasonic Corporation Specular reflection compensation
JP2011120646A (ja) 2009-12-08 2011-06-23 Hoya Corp 内視鏡スコープおよび内視鏡装置
JP2012125293A (ja) * 2010-12-13 2012-07-05 Olympus Corp 制御装置、内視鏡装置及びフォーカス制御方法
JP2012231422A (ja) 2011-04-27 2012-11-22 Avermedia Information Inc グレア除去装置及びグレア除去方法
US9593982B2 (en) * 2012-05-21 2017-03-14 Digimarc Corporation Sensor-synchronized spectrally-structured-light imaging
US9912847B1 (en) * 2012-09-25 2018-03-06 Amazon Technologies, Inc. Image capture guidance to reduce specular reflection effects
US10113910B2 (en) * 2014-08-26 2018-10-30 Digimarc Corporation Sensor-synchronized spectrally-structured-light imaging

Similar Documents

Publication Publication Date Title
US11835702B2 (en) Medical image processing apparatus, medical image processing method, and medical observation system
US9858666B2 (en) Medical skin examination device and method for processing and enhancing an image of a skin lesion
JP6764574B2 (ja) 画像処理装置、画像処理方法、プログラム、及び、手術システム
JP2015029865A5 (ja) 画像処理装置および方法、眼底画像処理装置、並びに眼底画像撮影装置
JP2017006330A5 (ja)
US11025835B2 (en) Imaging device, endoscope apparatus, and method for operating imaging device
JP2017507680A5 (ja)
EP1734405A3 (en) Radiographic imaging apparatus, control method thereof, and radiographic imaging system
JP2015029865A (ja) 画像処理装置および方法、眼底画像処理装置、画像撮影方法、並びに眼底画像撮影装置および方法
JP2013062626A5 (ja) 撮像装置、画像データ処理方法、およびプログラム
JP2017150878A5 (ja)
JP5742970B2 (ja) 放射線撮影装置
JP2022516472A (ja) 部分的深度マップからの合成3次元撮像の発生
WO2022056362A1 (en) Image processing to compensate for scene lighting during surgical procedures
WO2013073627A1 (ja) 画像処理装置及び方法
JP2017184787A5 (ja)
JP2016140692A5 (ja)
JP2013128212A5 (ja)
JP2017070523A (ja) 光源制御装置、光源制御方法、プログラム、および手術用システム
JP7394547B2 (ja) 制御装置、医療用観察システム、制御方法およびプログラム
CN110225247B (zh) 一种图像处理方法及电子设备
JP6530067B2 (ja) 内視鏡装置及び内視鏡装置の作動方法
JP5693099B2 (ja) 画像処理装置、画像処理方法、放射線撮影システム及びプログラム
JP6452355B2 (ja) 撮影装置及びその制御方法、並びに、プログラム
US10849482B2 (en) Endoscopic system, image processing apparatus, and image processing method