JP6116770B1 - ビデオプロセッサ - Google Patents
ビデオプロセッサ Download PDFInfo
- Publication number
- JP6116770B1 JP6116770B1 JP2016563481A JP2016563481A JP6116770B1 JP 6116770 B1 JP6116770 B1 JP 6116770B1 JP 2016563481 A JP2016563481 A JP 2016563481A JP 2016563481 A JP2016563481 A JP 2016563481A JP 6116770 B1 JP6116770 B1 JP 6116770B1
- Authority
- JP
- Japan
- Prior art keywords
- partition
- video signal
- unit
- signal processing
- resource
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 claims abstract description 142
- 238000005192 partition Methods 0.000 claims abstract description 140
- 230000005856 abnormality Effects 0.000 claims abstract description 29
- 238000012544 monitoring process Methods 0.000 claims abstract description 17
- 238000000638 solvent extraction Methods 0.000 claims description 4
- 235000003392 Curcuma domestica Nutrition 0.000 claims 2
- 244000008991 Curcuma longa Species 0.000 claims 2
- 235000003373 curcuma longa Nutrition 0.000 claims 2
- 235000013976 turmeric Nutrition 0.000 claims 2
- 238000000034 method Methods 0.000 abstract description 21
- 230000008569 process Effects 0.000 abstract description 13
- 230000006870 function Effects 0.000 description 19
- 238000001514 detection method Methods 0.000 description 16
- 238000004891 communication Methods 0.000 description 11
- 230000003287 optical effect Effects 0.000 description 11
- 230000007547 defect Effects 0.000 description 10
- 238000003384 imaging method Methods 0.000 description 10
- 238000005286 illumination Methods 0.000 description 8
- 239000004065 semiconductor Substances 0.000 description 4
- 238000001839 endoscopy Methods 0.000 description 3
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0655—Control therefor
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biophysics (AREA)
- Physics & Mathematics (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Optics & Photonics (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Signal Processing (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Closed-Circuit Television Systems (AREA)
- Debugging And Monitoring (AREA)
Abstract
Description
図1は、本発明の一実施の形態に係るビデオプロセッサを含む内視鏡システムの構成例を示す図である。なお、この内視鏡システムは、例えば医療機関(病院等)での内視鏡検査等に使用される。
内視鏡2は、挿入部が軟性の内視鏡(軟性内視鏡)であって、スコープ制御部21、照明光学系22、対物光学系23、及び撮像素子24を含む。スコープ制御部21は、内視鏡装置4の後述のビデオプロセッサ機能部41のシステム制御部412からケーブル3を介して入力される撮像制御信号に応じて撮像素子24を制御する。照明光学系22は、内視鏡装置4の後述の光源機能部42の光源422から出射されて図示しないライトガイドを介して導かれた照明光を被写体(例えば体腔内の観察部位)に照明する。対物光学系23は、被写体からの反射光(被写体に照明された照明光の反射光)を撮像素子24の撮像面に結像する。撮像素子24は、スコープ制御部21の制御の下に、撮像面に結像されている被写体像(被写体からの反射光)を電気信号である映像信号に変換し、その映像信号を、ケーブル3を介して内視鏡装置4の後述のビデオプロセッサ機能部41の映像信号処理部411へ出力する。
内視鏡装置4は、ビデオプロセッサ機能部41、光源機能部42、モニタ43、記録媒体44、及び操作部45を含む。
映像信号処理部411は、システム制御部412の制御の下に、撮像素子24からケーブル3を介して入力される映像信号を処理する。なお、映像信号処理部411の詳細は、図2を用いて後述する。
また、被写体への照明光の照明方式は、同時式又は面順次式等としてもよい。ここで、同時式とは、白色光を被写体に照明する方式であり、面順次式とは、異なる波長帯域の光(異なる色成分の光)を時系列に順次照明する方式である。
FPGA4111は、内視鏡2の撮像素子24からケーブル3を介して入力される映像信号を、メニーコアプロセッサ4112が処理可能な形式のデータ(例えばPCIe(PCI Express)形式のデータ)に変換してメニーコアプロセッサ4112へ出力する処理を行う。また、FPGA4111は、メニーコアプロセッサ4112から入力されるデータを、モニタ43が表示可能な形式の映像信号に変換してモニタ43へ出力する処理等も行う。
メイン用メモリ領域41133は、システム制御部412による初期設定によりメインパーティションに区分けされたメモリ領域であって、メインパーティション部41122により使用されるメモリ領域である。
なお、上述のように構成された映像信号処理部411を含む内視鏡システム1において、映像信号処理部411は、内視鏡から入力される映像信号を処理する映像信号処理部の一例である。システム制御部412の一部の機能は、映像信号処理部が行う映像信号処理に係るハードウェア及びソフトウェアのリソースを、第1のパーティション及び第2のパーティションに区分けする区分部の一例である。システム制御部412の他の一部の機能は、第1のパーティションに区分けされたリソースに対して、映像信号処理における必要最低限の処理を割り当てる第1の割当部の一例である。システム制御部412の更に他の一部の機能は、第2のパーティションに区分けされたリソースに対して、映像信号処理における、必要最低限の処理を除く処理を割り当てる第2の割当部の一例である。不具合検知部41124は、第1のパーティション及び第2のパーティションに区分けされたリソースの異常を監視する監視部の一例である。リセット部41125は、監視部により異常が検出されたパーティションに区分けされたリソースのみをリセットするリセット部の一例である。
図3に示したように、本動作では、まず、システム制御部412が映像信号処理部411の初期設定を行う(S1乃至S3)。より詳しくは、システム制御部412は、映像信号処理部411が行う表示用映像信号処理に係るハードウェア及びソフトウェアのリソースを、セキュアパーティション及びメインパーティションに区分けし(S1)、セキュアパーティションに区分けされたリソースに対して、表示用映像信号処理における必要最低限の処理を割り当て(S2)、メインパーティションに区分けされたリソースに対して、表示用映像信号処理における、必要最低限の処理を除く処理を割り当てる(S3)。また、システム制御部412による初期設定では、その他、メニーコアプロセッサ4112に含まれるコアを、通信用パーティション、不具合検知用パーティション、及びリセット用パーティションに区分けする処理等も行われる。
例えば、セキュアパーティションに区分けされたリソースと同様のものを、代替セキュアパーティションに区分けされたリソースとして設けるようにし、不具合検知部41124がセキュアパーティションに区分けされたリソースの不具合を検知した場合には、その不具合が解消されるまで、セキュアパーティションに区分けされたリソースに代わって、代替セキュアパーティションに区分けされたリソースが処理を行うようにしてもよい。なお、この場合に、セキュアパーティションに区分けされたリソースに発生した不具合の解消は、そのリソースをリセット部41125がリセットすることによって行われる。そして、その不具合が解消された後は、セキュアパーティションに区分けされたリソースが処理を再開するようにしてもよい。このような変形例によれば、セキュアパーティションに区分けされたリソースに不具合が発生したとしても、モニタ43への映像表示を継続させたままで、セキュアパーティションに区分けされたリソースに発生した不具合の解消が可能になる。
2 内視鏡
3 ケーブル
4 内視鏡装置
21 スコープ制御部
22 照明光学系
23 対物光学系
24 撮像素子
41 ビデオプロセッサ機能部
42 光源機能部
43 モニタ
44 記録媒体
45 操作部
411 映像信号処理部
412 システム制御部
421 光源制御部
422 光源
4111 FPGA
4112 メニーコアプロセッサ
4113 メモリ
41121 セキュアパーティション部
41122 メインパーティション部
41123 通信部
41124 不具合検知部
41125 リセット部
41131 セキュア用メモリ領域
41132 共有メモリ領域
41133 メイン用メモリ領域
Claims (4)
- 内視鏡から入力される映像信号を処理する映像信号処理部と、
前記映像信号処理部が行う映像信号処理に係るハードウェア及びソフトウェアのリソースを、第1のパーティション及び第2のパーティションに区分けする区分部と、
前記第1のパーティションに区分けされたリソースに対して、前記映像信号処理における必要最低限の処理を割り当てる第1の割当部と、
前記第2のパーティションに区分けされたリソースに対して、前記映像信号処理における、前記必要最低限の処理を除く処理を割り当てる第2の割当部と、
前記第1のパーティション及び前記第2のパーティションに区分けされたリソースの異常を監視する監視部と、
前記監視部により異常が検出されたパーティションに区分けされたリソースのみをリセットするリセット部と、
を備えることを特徴とするビデオプロセッサ。 - 前記監視部における監視により前記第2のパーティションに区分けされたリソースの異常が検出された場合、
前記映像信号処理部は、前記リソースが前記リセット部のリセットにより正常に戻るまで、前記第1のパーティションに区分けされたリソースに対して割り当てられた、前記映像信号処理における前記必要最低限の処理のみを行うことを特徴とする請求項1記載のビデオプロセッサ。 - 前記リソースが前記リセット部のリセットにより正常に戻った後、
前記映像信号処理部は、前記第1のパーティションに区分けされたリソースに対して割り当てられた前記映像信号処理における前記必要最低限の処理、及び、前記第2のパーティションに区分けされたリソースに対して割り当てられた前記映像信号処理における前記必要最低限の処理を除く処理を行うことを特徴とする請求項2記載のビデオプロセッサ。 - 前記第1のパーティションに区分けされたリソース及び前記第2のパーティションに区分けされたリソースの各々は、ハードウェアリソースとして、当該パーティション用に区分けされた1つ以上のコアプロセッサと当該パーティション用に区分けされたメモリ領域とを含み、ソフトウェアリソースとして、当該パーティション用に区分けされたオペレーティングシステムと当該パーティション用に区分けされたデバイスドライバ、ミドルウェア、及びアプリケーションの1つ以上とを含むことを特徴とする請求項1に記載のビデオプロセッサ。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015154291 | 2015-08-04 | ||
JP2015154291 | 2015-08-04 | ||
PCT/JP2016/069029 WO2017022364A1 (ja) | 2015-08-04 | 2016-06-27 | 異常監視方法及び異常監視装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6116770B1 true JP6116770B1 (ja) | 2017-04-19 |
JPWO2017022364A1 JPWO2017022364A1 (ja) | 2017-08-03 |
Family
ID=57942797
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016563481A Active JP6116770B1 (ja) | 2015-08-04 | 2016-06-27 | ビデオプロセッサ |
Country Status (5)
Country | Link |
---|---|
US (1) | US10231602B2 (ja) |
EP (1) | EP3332690A1 (ja) |
JP (1) | JP6116770B1 (ja) |
CN (1) | CN107105992B (ja) |
WO (1) | WO2017022364A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2022201597A1 (ja) * | 2021-03-22 | 2022-09-29 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010004979A (ja) * | 2008-06-25 | 2010-01-14 | Fujifilm Corp | 画像処理装置、および内視鏡用プロセッサ装置 |
JP2011244884A (ja) * | 2010-05-24 | 2011-12-08 | Olympus Corp | 内視鏡システム |
JP2013225208A (ja) * | 2012-04-20 | 2013-10-31 | Toyota Motor Corp | 情報処理装置、情報処理方法、及びプログラム |
JP2014059733A (ja) * | 2012-09-18 | 2014-04-03 | Ricoh Co Ltd | 情報処理システム、画像処理装置 |
JP2014115703A (ja) * | 2012-12-06 | 2014-06-26 | Denso Corp | データ処理装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060041252A1 (en) * | 2004-08-17 | 2006-02-23 | Odell Roger C | System and method for monitoring electrosurgical instruments |
JP5384409B2 (ja) * | 2010-03-30 | 2014-01-08 | 富士フイルム株式会社 | 内視鏡装置におけるcmos撮像素子の作動方法 |
JP5220964B1 (ja) * | 2011-07-05 | 2013-06-26 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
US8713378B2 (en) * | 2011-07-07 | 2014-04-29 | Microsoft Corporation | Health monitoring of applications in a guest partition |
JP5298259B1 (ja) * | 2011-09-22 | 2013-09-25 | オリンパスメディカルシステムズ株式会社 | 内視鏡 |
WO2015163084A1 (ja) * | 2014-04-22 | 2015-10-29 | オリンパス株式会社 | データ処理システム及びデータ処理方法 |
JP6353810B2 (ja) * | 2015-04-24 | 2018-07-04 | 富士フイルム株式会社 | 内視鏡システム |
-
2016
- 2016-06-27 JP JP2016563481A patent/JP6116770B1/ja active Active
- 2016-06-27 CN CN201680004206.9A patent/CN107105992B/zh active Active
- 2016-06-27 WO PCT/JP2016/069029 patent/WO2017022364A1/ja active Application Filing
- 2016-06-27 EP EP16832643.7A patent/EP3332690A1/en not_active Withdrawn
-
2017
- 2017-06-01 US US15/611,073 patent/US10231602B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010004979A (ja) * | 2008-06-25 | 2010-01-14 | Fujifilm Corp | 画像処理装置、および内視鏡用プロセッサ装置 |
JP2011244884A (ja) * | 2010-05-24 | 2011-12-08 | Olympus Corp | 内視鏡システム |
JP2013225208A (ja) * | 2012-04-20 | 2013-10-31 | Toyota Motor Corp | 情報処理装置、情報処理方法、及びプログラム |
JP2014059733A (ja) * | 2012-09-18 | 2014-04-03 | Ricoh Co Ltd | 情報処理システム、画像処理装置 |
JP2014115703A (ja) * | 2012-12-06 | 2014-06-26 | Denso Corp | データ処理装置 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2017022364A1 (ja) | 2017-08-03 |
EP3332690A1 (en) | 2018-06-13 |
WO2017022364A1 (ja) | 2017-02-09 |
CN107105992B (zh) | 2018-09-11 |
US10231602B2 (en) | 2019-03-19 |
US20170265716A1 (en) | 2017-09-21 |
CN107105992A (zh) | 2017-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10788908B2 (en) | Electronic device including optical structure | |
US9378181B2 (en) | Scalable computing array | |
US10602049B2 (en) | Endoscopy system and method for processing image of the same | |
US20170132488A1 (en) | Image display apparatus, image display control apparatus, and image display method | |
US20220000340A1 (en) | Signal processing device and medical observation system | |
JP2015195977A (ja) | ゲーム提供サーバ | |
US10905310B2 (en) | Signal processing device and medical observation system | |
JP6807869B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6116770B1 (ja) | ビデオプロセッサ | |
KR20140137814A (ko) | 터치스크린 디스플레이 장치 | |
US10548460B2 (en) | Signal processing apparatus and medical observation system | |
KR20170001189A (ko) | 저속 장거리 인터페이스용 안드로이드 시스템을 위한 다중 영상 장치 및 이미지 처리 방법 | |
WO2016174902A1 (ja) | 中継デバイス及び医療機器 | |
JP6340333B2 (ja) | 内視鏡装置 | |
JP7222662B2 (ja) | 生体情報システム、生体情報センサ及び生体情報処理装置 | |
US20240037808A1 (en) | Systems and methods for real-time processing of medical imaging data utilizing an external processing device | |
Mewada et al. | A Comparative Study Between External USB and MIPI CSI for Medical Imaging and a Device Driver Implementation for Endoscope Camera Using USB |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20170111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170307 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170321 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6116770 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |