JP2016158752A - Endoscope operation support system - Google Patents

Endoscope operation support system Download PDF

Info

Publication number
JP2016158752A
JP2016158752A JP2015038510A JP2015038510A JP2016158752A JP 2016158752 A JP2016158752 A JP 2016158752A JP 2015038510 A JP2015038510 A JP 2015038510A JP 2015038510 A JP2015038510 A JP 2015038510A JP 2016158752 A JP2016158752 A JP 2016158752A
Authority
JP
Japan
Prior art keywords
image
examination
unit
patient
treatment tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015038510A
Other languages
Japanese (ja)
Other versions
JP6373773B2 (en
Inventor
隆之 黒田
Takayuki Kuroda
隆之 黒田
和幸 猪木原
Kazuyuki Inokihara
和幸 猪木原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2015038510A priority Critical patent/JP6373773B2/en
Publication of JP2016158752A publication Critical patent/JP2016158752A/en
Application granted granted Critical
Publication of JP6373773B2 publication Critical patent/JP6373773B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a technology to present relevant past examination images when a treatment instrument is used in an endoscopic examination.SOLUTION: An image management system 100 associates an examination image taken of the inside of a body of a patient in the past, information indicating a type of a treatment instrument included in the examination image, and patient identification information for identifying the patient, and records them. When a processing device 14 identifies the type of the treatment instrument used in an endoscopic examination from an observation image of the inside of the body of the patient taken with an endoscope 12, the image management system 100 identifies an examination image of the same patient in which the treatment instrument of the type identified by the processing device 14 is included from a plurality of past examination images. The processing device 14 displays the identified past examination image in a display device 16 together with the observation image.SELECTED DRAWING: Figure 1

Description

本発明は、内視鏡業務を支援する内視鏡業務支援システムに関する。   The present invention relates to an endoscope operation support system that supports an endoscope operation.

内視鏡検査では、医師が検査前に患者の過去の検査画像を確認することが多い。特に過去に処置を実施し、これから行う検査においても同じ処置を実施する場合には、過去の検査画像から、処置した部位の形状や状態などを確認する。たとえばＥＲＣＰ（内視鏡的逆行性胆管膵管造影）検査では、内視鏡の先端から膵管や胆管の中にカテーテルを挿菅するカニュレーションと呼ばれる手技が行われる。十二指腸乳頭の形状や、膵管、胆管の合流形式は患者ごとに異なるため、過去に同一患者に対して実施したカニュレーションの状況を撮影した検査画像があれば、検査前にみておくことでＥＲＣＰ検査を安全且つ効率的にすすめることができる。   In an endoscopic examination, a doctor often confirms a past examination image of a patient before the examination. In particular, when the treatment is performed in the past and the same treatment is performed in the examination to be performed in the future, the shape and state of the treated site are confirmed from the past examination image. For example, in an ERCP (endoscopic retrograde cholangiopancreatography) examination, a procedure called cannulation is performed in which a catheter is inserted into the pancreatic duct or bile duct from the distal end of the endoscope. Since the shape of the duodenal papilla and the confluence of the pancreatic duct and bile duct differ from patient to patient, if there is an examination image that captures the state of cannulation performed on the same patient in the past, ERCP examination can be done by examining it before the examination. Can be promoted safely and efficiently.

特開２００８−２２０８３９号公報JP 2008-220839 A

しかしながら内視鏡を患者の体内に挿入して検査を開始した後は、過去の検査画像を簡単に確認できる手段がないために、医師は検査前にみた検査画像の記憶に頼るしかない。そこで検査中においても、患者の過去の検査画像を医師に提示できる仕組みを構築することが好ましい。本発明はこうした状況に鑑みなされたものであり、その目的は、内視鏡検査で処置具を使用している場合に、関連する過去の検査画像を医師に提示する技術を提供することにある。   However, after the endoscope is inserted into the patient's body and the examination is started, there is no means for easily confirming the past examination image, so the doctor has to rely on the memory of the examination image seen before the examination. Therefore, it is preferable to construct a mechanism that can present the patient's past examination images to the doctor even during the examination. The present invention has been made in view of such circumstances, and an object thereof is to provide a technique for presenting a related past examination image to a doctor when a treatment tool is used in an endoscopic examination. .

上記課題を解決するために、本発明のある態様の内視鏡業務支援システムは、内視鏡で患者の体内を過去に撮影した検査画像と、検査画像に含まれる処置具の種類を示す情報と、患者を特定する患者識別情報とを関連付けて記録する記録部と、内視鏡で患者の体内を撮影している観察画像から、内視鏡検査で使用されている処置具の種類を特定する処置具検出部と、記録部に記録された複数の検査画像のなかから、同一患者の検査画像であって、処置具検出部が特定した種類の処置具が含まれる検査画像を特定する画像検索部と、画像検索部で特定された過去の検査画像を、観察画像とともに表示する表示制御部と、を備える。   In order to solve the above-described problems, an endoscope operation support system according to an aspect of the present invention includes an inspection image obtained by imaging the patient's body in the past with an endoscope, and information indicating the type of treatment tool included in the inspection image The type of treatment tool used in endoscopy is identified from the recording unit that records the patient identification information that correlates with the patient, and the observation image obtained by imaging the patient's body with the endoscope. An image that identifies a test image of the same patient from among a plurality of test images recorded in the recording device and a treatment tool detection unit that includes the type of treatment tool specified by the treatment tool detection unit A search unit; and a display control unit that displays past inspection images specified by the image search unit together with the observation image.

なお、以上の構成要素の任意の組み合わせ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。   It should be noted that any combination of the above-described constituent elements and a conversion of the expression of the present invention between a method, an apparatus, a system, a recording medium, a computer program, etc. are also effective as an aspect of the present invention.

本発明によれば、内視鏡検査で処置具を使用している場合に、関連する過去の検査画像を提示する技術を提供できる。   ADVANTAGE OF THE INVENTION According to this invention, when using a treatment tool by endoscopy, the technique which presents the related past test | inspection image can be provided.

実施例にかかる内視鏡業務支援システムの構成を示す図である。It is a figure which shows the structure of the endoscope work support system concerning an Example. 画像管理システムの機能ブロックを示す図である。It is a figure which shows the functional block of an image management system. 検査画像の一覧画面の例を示す図である。It is a figure which shows the example of the list screen of a test | inspection image. 処置具の種類および用途の対応関係を示す図である。It is a figure which shows the correspondence of the kind of treatment tool, and a use. 処理装置の機能ブロックを示す図である。It is a figure which shows the functional block of a processing apparatus. 表示装置の表示例を示す図である。It is a figure which shows the example of a display of a display apparatus. 表示された確認メッセージの例を示す図である。It is a figure which shows the example of the displayed confirmation message. 表示された過去の検査画像の例を示す図である。It is a figure which shows the example of the displayed past test | inspection image.

図１は、本発明の実施例にかかる内視鏡業務支援システム１の構成を示す図である。内視鏡業務支援システム１は、内視鏡検査における医師の観察行為を支援するための観察支援システムであり、内視鏡検査を実施するための内視鏡システム１０、過去に撮影した検査画像を管理する画像管理システム１００、端末装置３０、３４を備え、それらはＬＡＮ（ローカルエリアネットワーク）などのネットワーク２によって相互接続される。端末装置３０、３４はたとえばパーソナルコンピュータであって、画面出力可能にそれぞれ表示装置３２、３６と接続されてよいが、端末装置３０、３４は表示装置と一体となったラップトップコンピュータであってもよく、また携帯型タブレットであってもよい。内視鏡システム１０および端末装置３０は、内視鏡検査室内に配置される。   FIG. 1 is a diagram showing a configuration of an endoscope operation support system 1 according to an embodiment of the present invention. The endoscope operation support system 1 is an observation support system for supporting a doctor's observation action in an endoscopic examination, an endoscope system 10 for performing an endoscopic examination, an examination image taken in the past. Are managed by a network 2 such as a LAN (local area network). The terminal devices 30 and 34 are, for example, personal computers, and may be connected to the display devices 32 and 36, respectively, so that screen output is possible, but the terminal devices 30 and 34 may be laptop computers integrated with the display device. It may be a portable tablet. The endoscope system 10 and the terminal device 30 are disposed in an endoscopic examination room.

内視鏡検査は、オーダリングシステム（図示せず）により発行される検査オーダにしたがって実施される。検査オーダは、検査を特定する検査識別情報（検査ＩＤ）、患者を特定する患者識別情報（患者ＩＤ）、検査種別および検査項目を特定する情報、検査予定日時などのオーダ情報を含む。検査ＩＤは、オーダリングシステムにより発行される検査オーダの識別情報であり、患者ＩＤは、医療施設内において患者を一意に識別するために付与された識別情報である。   The endoscopic examination is performed according to an examination order issued by an ordering system (not shown). The examination order includes order identification information such as examination identification information (examination ID) for specifying an examination, patient identification information (patient ID) for specifying a patient, information for specifying an examination type and an examination item, and scheduled examination date and time. The examination ID is identification information of the examination order issued by the ordering system, and the patient ID is identification information given to uniquely identify the patient in the medical facility.

検査開始前、端末装置３０は内視鏡検査オーダの一覧画面を表示装置３２に表示し、医師または看護師がオーダ一覧から、これから実施するオーダを選択すると、端末装置３０は表示装置３２にオーダ詳細確認画面を表示する。医師は、この確認画面をみて、検査内容を確認してから内視鏡検査を開始する。このとき医師は端末装置３０を操作して、これから検査を行う患者の過去の検査画像を表示装置３２に表示させて確認することもできる。   Before the examination is started, the terminal device 30 displays a list screen of the endoscopic examination orders on the display device 32. When the doctor or nurse selects an order to be executed from the order list, the terminal device 30 orders on the display device 32. Display the details confirmation screen. The doctor sees the confirmation screen and confirms the examination content before starting the endoscopic examination. At this time, the doctor can operate the terminal device 30 to display a past examination image of a patient to be examined on the display device 32 for confirmation.

内視鏡システム１０は、内視鏡１２、処理装置１４および表示装置１６を備える。内視鏡１２は、撮像素子１８と、複数のスイッチを含む操作部２０とを有して構成される。複数のスイッチのそれぞれには、処理装置１４の各種機能を予め割り当てることができ、１つのスイッチには、患者の体内を撮影している観察画像を記録するレリーズ機能が割り当てられる。操作部２０の根元には鉗子チャンネルが設けられ、医師は鉗子チャンネルを通じて処置具を出し入れして処置を行う。   The endoscope system 10 includes an endoscope 12, a processing device 14, and a display device 16. The endoscope 12 includes an image sensor 18 and an operation unit 20 including a plurality of switches. Various functions of the processing device 14 can be assigned in advance to each of the plurality of switches, and a release function for recording an observation image obtained by photographing the inside of the patient's body is assigned to one switch. A forceps channel is provided at the base of the operation unit 20, and a doctor performs treatment by inserting and removing a treatment tool through the forceps channel.

撮像素子１８は挿入部の先端に設けられ、挿入部が患者の体内に挿入されて体内を撮像し、医師が操作部２０のレリーズ機能を割り当てられたレリーズスイッチを押したタイミングで、処理装置１４が観察画像を検査画像として取得する。撮像素子１８はＣＣＤイメージセンサまたはＣＭＯＳイメージセンサであり、信号処理回路（図示せず）とともに撮像モジュールを構成する。撮像素子１８は入射光を電気信号に変換し、信号処理回路は、撮像素子１８により光電変換されたデータに対して、Ａ／Ｄ変換、ノイズ除去などの信号処理を施して、処理装置１４に出力する。内視鏡１２および処理装置１４は、撮像ユニット２２を構成する。   The imaging device 18 is provided at the distal end of the insertion unit, and the processing unit 14 is inserted at the timing when the insertion unit is inserted into the patient's body and images the inside of the patient, and the doctor presses the release switch assigned the release function of the operation unit 20. Acquires an observation image as an inspection image. The imaging element 18 is a CCD image sensor or a CMOS image sensor, and constitutes an imaging module together with a signal processing circuit (not shown). The image sensor 18 converts incident light into an electrical signal, and the signal processing circuit performs signal processing such as A / D conversion and noise removal on the data photoelectrically converted by the image sensor 18, and sends it to the processing device 14. Output. The endoscope 12 and the processing device 14 constitute an imaging unit 22.

処理装置１４は、内視鏡システム１０全体を統括的に制御する。処理装置１４の一つの重要な役割は、内視鏡１２により撮影されている観察画像を表示装置１６にライブ表示させることである。医師は表示装置１６に表示される観察画像をみながら、処置具の操作を行う。なお実施例の処理装置１４は表示装置１６に、観察画像とともに、同一患者の過去の検査画像も表示させる機能をもつ。表示装置１６は互いに重ならない２つの表示領域１６ａ、１６ｂを有し、観察画像と過去の検査画像とは、それぞれ異なる表示領域に表示される。   The processing device 14 comprehensively controls the entire endoscope system 10. One important role of the processing device 14 is to display an observation image captured by the endoscope 12 on the display device 16 in a live manner. The doctor operates the treatment tool while viewing the observation image displayed on the display device 16. In addition, the processing apparatus 14 of an Example has a function which displays the past test | inspection image of the same patient on the display apparatus 16 with an observation image. The display device 16 has two display areas 16a and 16b that do not overlap each other, and the observation image and the past examination image are displayed in different display areas.

処理装置１４のもう一つの重要な役割は、医師がレリーズスイッチを押したタイミングで撮像素子１８により撮像されている観察画像を、検査画像として画像管理システム１００に送信して画像記録部（データベース）に記録させることである。処理装置１４は、レリーズスイッチが押されたときの検査画像データを取得し、検査画像データにメタデータを付加して画像管理システム１００に送信する。付加されるメタデータは、検査ＩＤ、患者ＩＤ、検査種別および検査項目を特定する情報、検査画像を特定する検査画像ＩＤ、撮影日時を少なくとも含む。このうち、検査ＩＤ、患者ＩＤ、検査種別および検査項目を特定する情報は、オーダ情報に含まれており、処理装置１４はオーダ情報から、これらのメタデータを検査画像データに付加してよい。画像管理システム１００は、処理装置１４から送信される検査画像データを受け取り、画像記録部に蓄積する。   Another important role of the processing device 14 is that an observation image captured by the imaging device 18 at the timing when the doctor presses the release switch is transmitted to the image management system 100 as an inspection image, and an image recording unit (database). To make it record. The processing device 14 acquires inspection image data when the release switch is pressed, adds metadata to the inspection image data, and transmits the inspection image data to the image management system 100. The added metadata includes at least an examination ID, a patient ID, information for specifying an examination type and an examination item, an examination image ID for identifying an examination image, and an imaging date and time. Among these, information specifying the examination ID, patient ID, examination type, and examination item is included in the order information, and the processing apparatus 14 may add these metadata to the examination image data from the order information. The image management system 100 receives the inspection image data transmitted from the processing device 14 and stores it in the image recording unit.

図２は、画像管理システム１００の機能ブロックを示す。画像管理システム１００は、画像取得部１０２、画像提供部１０４、処置具情報登録部１０６、画像検索部１１０および記録部１２０を備える。画像検索部１１０は、要求受付部１１２および検索実行部１１４を有する。   FIG. 2 shows functional blocks of the image management system 100. The image management system 100 includes an image acquisition unit 102, an image providing unit 104, a treatment instrument information registration unit 106, an image search unit 110, and a recording unit 120. The image search unit 110 includes a request reception unit 112 and a search execution unit 114.

これらの構成はハードウエア的には、任意のプロセッサ、メモリ、その他のＬＳＩで実現でき、ソフトウエア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。   These configurations can be realized by an arbitrary processor, memory, or other LSI in terms of hardware, and can be realized by a program loaded into the memory in terms of software, but here by their cooperation. Draw functional blocks. Accordingly, those skilled in the art will understand that these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof.

内視鏡検査の実施中、画像取得部１０２は、内視鏡１２のレリーズスイッチが押されたタイミングで処理装置１４から送信される検査画像データを取得し、記録部１２０に記録する。検査画像データには、検査ＩＤ、患者ＩＤ、検査種別および検査項目を特定する情報、検査画像を特定する検査画像ＩＤ、撮影日時などのメタデータが付加されている。なお処理装置１４は、検査終了時まで検査画像データを蓄積しておき、検査終了後に、検査中に撮影された全ての検査画像データを画像管理システム１００に送信するようにしてもよい。   During the endoscopic inspection, the image acquisition unit 102 acquires the inspection image data transmitted from the processing device 14 at the timing when the release switch of the endoscope 12 is pressed, and records it in the recording unit 120. The examination image data includes metadata such as examination ID, patient ID, examination type and examination item information, examination image ID that identifies the examination image, and imaging date and time. The processing device 14 may store the inspection image data until the end of the inspection, and may transmit all inspection image data captured during the inspection to the image management system 100 after the inspection ends.

医師は検査を終了すると、内視鏡科に設置された端末装置３４を操作して検査レポートを作成する。医師が端末装置３４においてレポート作成アプリケーションを起動すると、レポート作成アプリケーションは、画像管理システム１００にアクセスして、該当する検査で撮像された検査画像の送信を画像提供部１０４に要求する。画像提供部１０４は、検査ＩＤをキーにして記録部１２０を探索し、記録部１２０から検査画像を読み出して、端末装置３４に提供する。画像提供部１０４は、検査において撮像された全ての検査画像を端末装置３４に提供し、レポート作成アプリケーションは表示装置３６に検査画像の一覧を表示する。   When the doctor finishes the examination, he / she operates the terminal device 34 installed in the endoscopy department and creates an examination report. When the doctor activates the report creation application in the terminal device 34, the report creation application accesses the image management system 100 and requests the image providing unit 104 to transmit the examination image captured in the corresponding examination. The image providing unit 104 searches the recording unit 120 using the inspection ID as a key, reads out the inspection image from the recording unit 120, and provides it to the terminal device 34. The image providing unit 104 provides all the inspection images captured in the inspection to the terminal device 34, and the report creation application displays a list of inspection images on the display device 36.

図３は、ＥＲＣＰ検査で撮影した検査画像の一覧画面の例を示す。医師は、レポート作成画面において、所見情報を入力するとともに、その所見情報に対応する検査画像を一覧画面から選択して対応付けることで、レポートを作成する。   FIG. 3 shows an example of a list screen of inspection images taken by ERCP inspection. On the report creation screen, the doctor inputs the finding information and creates a report by selecting and associating the examination image corresponding to the finding information from the list screen.

実施例の内視鏡業務支援システム１は、医師が検査中に処置具を用いると、同一患者の過去の検査画像であって、同種の処置具が含まれる検査画像を表示装置１６に提示する機能をもつ。そこで画像管理システム１００は、記録部１２０に記録した検査画像のうち、処置具が含まれる検査画像に対して、その処置具の種類を示す情報をメタデータとして予め登録しておき、医師が検査中に処置具を使用したときに、使用した処置具と同種の処置具が含まれる過去の検査画像を検索して抽出できるようにする。   When the doctor uses the treatment tool during the examination, the endoscope work support system 1 according to the embodiment presents a past examination image of the same patient on the display device 16 that includes the same kind of treatment tool. It has a function. Therefore, the image management system 100 registers in advance information indicating the type of the treatment tool as the metadata for the examination image including the treatment tool among the examination images recorded in the recording unit 120, and the doctor performs the examination. When a treatment tool is used, a past examination image including a treatment tool of the same type as the used treatment tool can be searched and extracted.

このために処置具情報登録部１０６は、記録部１２０に記録された検査画像を参照して、処置具が写り込んだ検査画像を特定し、その検査画像に、処置具の種類を示す処置具情報をメタデータとして付加する機能をもつ。処置具情報登録部１０６は、画像認識処理により検査画像中の処置具を検出する。処置具情報登録部１０６による画像認識機能を実現するために、記録部１２０は、処置具を鉗子チャンネルに挿通した際の内視鏡画像を、テンプレート画像として予め記録しておく。   For this purpose, the treatment instrument information registering unit 106 refers to the examination image recorded in the recording unit 120, identifies the examination image in which the treatment instrument is reflected, and the treatment instrument indicating the type of the treatment instrument in the examination image. It has a function to add information as metadata. The treatment tool information registration unit 106 detects a treatment tool in the examination image by image recognition processing. In order to realize the image recognition function by the treatment tool information registration unit 106, the recording unit 120 records in advance, as a template image, an endoscope image when the treatment tool is inserted into the forceps channel.

図４は、内視鏡検査で使用される処置具の種類および用途の対応関係を示す。図４に示す対応テーブルは記録部１２０に記録され、処置具情報登録部１０６が参照できるようになっている。   FIG. 4 shows the correspondence between the types of treatment tools used in endoscopy and the applications. The correspondence table shown in FIG. 4 is recorded in the recording unit 120 so that the treatment instrument information registration unit 106 can refer to the correspondence table.

内視鏡検査では、対応テーブルに示されるように様々な種類の処置具が使用される可能性があり、記録部１２０は処置具の種類ごとに内視鏡１２により撮影されたテンプレート画像を保持している。画像認識による検出精度を高めるために、処置具の種類ごとに、鉗子チャンネルの方向、画像フレーム内における突出長、開閉状態などが異なる複数のテンプレート画像が用意されることが好ましい。また回転により画像中の形状が変化する非対称形状の処置具については、回転角度が異なるテンプレート画像が複数用意されることが好ましい。   In the endoscopy, various types of treatment tools may be used as shown in the correspondence table, and the recording unit 120 holds a template image photographed by the endoscope 12 for each type of treatment tool. doing. In order to increase detection accuracy by image recognition, it is preferable to prepare a plurality of template images having different forceps channel directions, protrusion lengths in the image frame, open / closed states, and the like for each type of treatment instrument. Moreover, it is preferable that a plurality of template images having different rotation angles are prepared for a treatment tool having an asymmetric shape whose shape changes in the image by rotation.

まず処置具情報登録部１０６は、検査画像中に含まれる処置具のエッジを検出する。エッジ検出用の画像として、Ｒ画像またはＧ画像を利用してよい。処置具情報登録部１０６はエッジから線分形状を検出すると、検出した線分形状とテンプレート画像を照合し、一致度が最も高いテンプレート画像の処置具の種類を特定する。   First, the treatment instrument information registration unit 106 detects the edge of the treatment instrument included in the examination image. An R image or a G image may be used as the image for edge detection. When the treatment tool information registration unit 106 detects the line segment shape from the edge, the treatment tool information registration unit 106 collates the detected line segment shape with the template image, and specifies the type of the treatment tool of the template image having the highest degree of matching.

このとき処置具情報登録部１０６は、全ての種類のテンプレート画像との照合処理を行ってもよいが、検査内容を細分化した検査項目に応じて照合対象とするテンプレート画像の絞込を行ってもよい。たとえば図３に示す検査画像の処置具検出処理を行う場合、これらの検査画像はＥＲＣＰ検査で撮影されたものであるため、検査画像に含まれる処置具の種類はＥＲＣＰ検査で使用されるものに限定される。そこで処置具情報登録部１０６は、図４に示す対応テーブルを参照して、ＥＲＣＰ検査を用途とする処置具、すなわちガイドワイヤ、カテーテル、造影カニューレのテンプレート画像と、検査画像に含まれる線分形状との一致度を算出して、処置具の種類を特定してもよい。検査項目に応じた処置具種類の絞込を行うことで、計算負荷を低減できる。   At this time, the treatment instrument information registration unit 106 may perform a collation process with all types of template images, but narrows down the template images to be collated according to the examination items obtained by subdividing the examination contents. Also good. For example, when the treatment tool detection process of the inspection image shown in FIG. 3 is performed, since these inspection images are taken by the ERCP inspection, the types of treatment tools included in the inspection image are those used in the ERCP inspection. Limited. Accordingly, the treatment instrument information registration unit 106 refers to the correspondence table shown in FIG. 4 and treats a treatment instrument for ERCP examination, that is, a template image of a guide wire, a catheter, and a contrast cannula, and a line segment shape included in the examination image. The type of treatment tool may be specified by calculating the degree of coincidence with The calculation load can be reduced by narrowing down the types of treatment tools according to the inspection items.

なお記録部１２０には、図４に示す全ての種類のテンプレート画像が保持されていなくてもよい。たとえばガイドワイヤは非常に細いため、テンプレートマッチングによる検出精度が高くないことが分かっている。またガイドワイヤは、ＥＲＣＰ検査においてカテーテルとともに使用されるものであるため、カテーテルを検出できれば、検査画像に処置具情報をメタデータとして登録することができる。そのためガイドワイヤのテンプレート画像は用意せず、テンプレートマッチングによる検出精度が高いカテーテルのテンプレート画像を用意しておくことで、カニュレーションの手技が行われた検査画像を特定でき、またガイドワイヤのテンプレートマッチングを行わないことで、計算負荷を低減できる。   Note that the recording unit 120 may not hold all types of template images shown in FIG. For example, it is known that the detection accuracy by template matching is not high because the guide wire is very thin. Further, since the guide wire is used together with the catheter in the ERCP examination, if the catheter can be detected, the treatment tool information can be registered as metadata in the examination image. Therefore, by preparing a template image of a catheter with high detection accuracy by template matching without preparing a template image of a guide wire, it is possible to specify an inspection image in which a cannulation technique has been performed, and template matching of a guide wire By not performing the calculation, the calculation load can be reduced.

以上のように処置具情報登録部１０６は、画像認識処理を行うことで、検査画像に含まれる処置具の種類を特定する。処置具情報登録部１０６は、処置具の種類を特定すると、処置具の種類を示す情報を、メタデータとして検査画像に関連付けて記録部１２０に記録する。たとえば図３に示す検査画像の処置具検出処理においては、検査画像５０ａ〜５０ｄに、ＥＲＣＰ検査で使用されたカテーテルが写り込んでいることが検出される。したがって処置具情報登録部１０６は、各検査画像５０ａ〜５０ｄにメタデータとしてカテーテルを示す処置具情報を付加して、記録部１２０に登録する。   As described above, the treatment tool information registration unit 106 performs image recognition processing to identify the type of treatment tool included in the examination image. When the type of the treatment tool is specified, the treatment tool information registration unit 106 records information indicating the type of the treatment tool in the recording unit 120 in association with the examination image as metadata. For example, in the treatment tool detection process of the examination image shown in FIG. 3, it is detected that the catheter used in the ERCP examination is reflected in the examination images 50a to 50d. Therefore, the treatment tool information registration unit 106 adds treatment tool information indicating a catheter as metadata to each of the examination images 50a to 50d and registers the treatment tool information in the recording unit 120.

処置具情報登録部１０６は、以上の処置具検出処理を、記録部１２０に検査画像データが記録されるたびに実行してもよく、また深夜などの特定の時間帯に実行してもよい。いずれにしても処置具情報登録部１０６は、同一患者の次の検査の前までに処置具検出処理を実行し、画像検索部１１０が、次の検査で使用している処置具が写り込んだ検査画像を記録部１２０から探せるようになっていればよい。以上により、記録部１２０は、内視鏡１２で患者の体内を過去に撮影した検査画像と、検査画像に含まれる処置具の種類を示す情報と、患者を特定する患者ＩＤとを関連付けて記録する。   The treatment instrument information registration unit 106 may perform the above treatment instrument detection process every time inspection image data is recorded in the recording unit 120, or may be performed in a specific time zone such as midnight. In any case, the treatment instrument information registration unit 106 executes treatment instrument detection processing before the next examination of the same patient, and the image retrieval unit 110 reflects the treatment instrument used in the next examination. It is only necessary that the inspection image can be searched from the recording unit 120. As described above, the recording unit 120 records the examination image obtained by imaging the patient's body with the endoscope 12 in the past, the information indicating the type of the treatment tool included in the examination image, and the patient ID that identifies the patient in association with each other. To do.

なお処置具情報登録部１０６は、処置具を検出した全ての検査画像に処置具情報を付加してもよいが、処置具情報を付加する検査画像を、医師により選択させてもよい。たとえば図３に示す検査画像一覧画面が表示装置３６に表示されたときに、検査画像５０ａ〜５０ｄにカテーテルが写り込んでいることが医師に通知され、医師が、所望の検査画像を選択して処置具情報登録ボタン５２を操作することで、検査画像に処置具情報が関連付けられて、記録部１２０に記録されてもよい。   The treatment tool information registration unit 106 may add the treatment tool information to all the inspection images in which the treatment tool is detected, or the doctor may select an examination image to which the treatment tool information is added. For example, when the examination image list screen shown in FIG. 3 is displayed on the display device 36, the doctor is notified that the catheter is reflected in the examination images 50a to 50d, and the doctor selects a desired examination image. By operating the treatment tool information registration button 52, the treatment tool information may be associated with the examination image and recorded in the recording unit 120.

また処置具検出処理は、医師により手動で行われてもよい。たとえば図３に示す検査画像一覧画面において、医師が検査画像を指定して処置具情報登録ボタン５２を操作すると、テキスト入力画面が開いて、処置具の種類を示す情報をテキスト入力できる。なお処置具情報登録ボタン５２を操作したとき、処置具の種類一覧が表示されて、医師が、いずれかの種類を選択できるようにしてもよい。この場合、処置具情報登録部１０６は、医師により入力された処置具の種類を示す情報を、検査画像に関連付けて記録部１２０に記録する。これにより画像検索部１１０が、処置具情報をキーにして、処置具が写り込んだ検査画像を探せるようになる。   The treatment instrument detection process may be manually performed by a doctor. For example, on the examination image list screen shown in FIG. 3, when the doctor designates the examination image and operates the treatment instrument information registration button 52, the text input screen opens and information indicating the type of the treatment instrument can be input as text. When the treatment instrument information registration button 52 is operated, a list of treatment instrument types may be displayed so that the doctor can select one of the types. In this case, the treatment tool information registration unit 106 records information indicating the type of the treatment tool input by the doctor in the recording unit 120 in association with the examination image. As a result, the image search unit 110 can search for an inspection image in which the treatment tool is reflected using the treatment tool information as a key.

図５は、処理装置１４の機能ブロックを示す。処理装置１４は、処置具検出部６０、検索要求送信部６２、画像取得部６４、表示制御部６６および画像送信部６８を備える。表示制御部６６は、内視鏡１２で撮像された観察画像を表示装置１６の表示領域１６ｂにライブ表示する。画像送信部６８は、内視鏡１２からレリーズスイッチの操作信号を受け取ると、表示領域１６ｂに表示している観察画像データにメタデータを付加して、画像管理システム１００に送信する。   FIG. 5 shows functional blocks of the processing device 14. The processing device 14 includes a treatment instrument detection unit 60, a search request transmission unit 62, an image acquisition unit 64, a display control unit 66, and an image transmission unit 68. The display control unit 66 displays the observation image captured by the endoscope 12 live on the display area 16 b of the display device 16. When receiving the release switch operation signal from the endoscope 12, the image transmission unit 68 adds metadata to the observation image data displayed in the display area 16b and transmits the observation image data to the image management system 100.

これらの構成はハードウエア的には、任意のプロセッサ、メモリ、その他のＬＳＩで実現でき、ソフトウエア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。   These configurations can be realized by an arbitrary processor, memory, or other LSI in terms of hardware, and can be realized by a program loaded into the memory in terms of software, but here by their cooperation. Draw functional blocks. Accordingly, those skilled in the art will understand that these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof.

図６は、表示装置１６の表示例を示す。この例では、検査種別を胆膵内視鏡検査、検査項目をＥＲＣＰとする検査が行われており、表示領域１６ｂにおいて、内視鏡１２で患者の体内を撮影している観察画像がライブ表示されている様子が示される。   FIG. 6 shows a display example of the display device 16. In this example, inspection is performed with the inspection type being the bile pancreatic endoscopy and the inspection item being the ERCP, and in the display area 16b, the observation image obtained by photographing the inside of the patient with the endoscope 12 is displayed live. Is shown.

処置具検出部６０は、検査中、観察画像に処置具が写り込んでいるか否かを監視する。処置具検出部６０は、動画像の１フレームごとに監視処理を行ってもよいが、所定数のフレームおきに監視処理を行ってもよい。監視処理は、処置具情報登録部１０６による処置具検出処理と同じく、表示されるフレーム画像中に含まれる処置具を画像認識処理により検出することで行われる。処置具情報登録部１０６による処置具検出処理は、記録部１２０に記録されたテンプレート画像を利用したが、処置具検出部６０においても同様に、テンプレート画像を利用する。テンプレート画像は、記録部１２０に記録されたものを利用してもよいが、同じテンプレート画像が、処理装置１４に保持されていてもよい。   The treatment instrument detection unit 60 monitors whether or not the treatment instrument is reflected in the observation image during the examination. The treatment instrument detection unit 60 may perform the monitoring process for each frame of the moving image, but may perform the monitoring process every predetermined number of frames. Similar to the treatment instrument detection process by the treatment instrument information registration unit 106, the monitoring process is performed by detecting the treatment instrument included in the displayed frame image by the image recognition process. The treatment instrument detection process performed by the treatment instrument information registration unit 106 uses the template image recorded in the recording unit 120, but the treatment instrument detection unit 60 similarly uses the template image. Although the template image recorded in the recording unit 120 may be used, the same template image may be held in the processing device 14.

図６に示すように、観察画像に処置具が写り込むと、処置具検出部６０は、処置具の線分形状を検出して、検出した線分形状とテンプレート画像を照合し、一致度が最も高いテンプレート画像の処置具の種類を特定する。処置具検出部６０は、全ての種類のテンプレート画像との照合処理を行ってもよいが、検査項目に応じて照合対象とするテンプレート画像の絞込を行ってもよい。この例では、ＥＲＣＰ検査が実施されているため、観察画像に含まれる処置具の種類はＥＲＣＰ検査で使用されるものに限定される。そこで処置具検出部６０は、図４に示す対応テーブルを参照して、ＥＲＣＰ検査を用途とする処置具、すなわちガイドワイヤ、カテーテル、造影カニューレのテンプレート画像と、観察画像に含まれる線分形状との一致度を算出して、処置具の種類を特定してもよい。検査項目に応じた処置具種類の絞込を行うことで、計算負荷を低減できる。なお処理装置１４は、対応テーブルを保持していてもよい。   As shown in FIG. 6, when the treatment tool is reflected in the observation image, the treatment tool detection unit 60 detects the line shape of the treatment tool, collates the detected line segment shape with the template image, and the degree of coincidence is increased. Identify the type of treatment tool with the highest template image. The treatment instrument detection unit 60 may perform collation processing with all types of template images, but may narrow down template images to be collated according to inspection items. In this example, since the ERCP inspection is performed, the types of treatment tools included in the observation image are limited to those used in the ERCP inspection. Therefore, the treatment instrument detection unit 60 refers to the correspondence table shown in FIG. 4 and treats a treatment instrument for ERCP examination, that is, a template image of a guide wire, a catheter, and a contrast cannula, and a line segment shape included in the observation image. The type of treatment tool may be specified by calculating the degree of coincidence. The calculation load can be reduced by narrowing down the types of treatment tools according to the inspection items. Note that the processing device 14 may hold a correspondence table.

このように処置具検出部６０は、内視鏡１２で患者の体内を撮影している観察画像から、内視鏡検査で使用されている処置具の種類を画像認識により特定する。ここでは処置具検出部６０が、観察画像中にカテーテルが写り込んだことを検出したものとする。検索要求送信部６２は、画像管理システム１００に対して、患者ＩＤおよび処置具の種類を示す情報（ここではカテーテル）を含む画像検索要求を送信する。なお処置具検出部６０は、観察画像中に写り込んだ処置具の種類を特定した後は、その処置具が観察画像に写り続けているか監視し、写り続けている間は、処置具検出処理を実行しなくてよい。処置具が観察画像からフレームアウトすると、処置具検出部６０は、処置具がフレームインしたときに処置具検出処理を実行する。   Thus, the treatment instrument detection unit 60 identifies the type of treatment instrument used in the endoscopic examination from the observation image obtained by photographing the inside of the patient with the endoscope 12 by image recognition. Here, it is assumed that the treatment instrument detection unit 60 detects that the catheter is reflected in the observation image. The search request transmission unit 62 transmits an image search request including information (here, a catheter) indicating the patient ID and the type of treatment tool to the image management system 100. The treatment instrument detection unit 60, after specifying the type of treatment instrument reflected in the observation image, monitors whether or not the treatment instrument continues to be reflected in the observation image. It is not necessary to execute. When the treatment tool is out of frame from the observation image, the treatment tool detection unit 60 executes a treatment tool detection process when the treatment tool is framed in.

画像管理システム１００において、要求受付部１１２が画像検索要求を受け付けると、検索実行部１１４は、記録部１２０に記録された複数の検査画像のなかから、同一患者の検査画像であって、処置具検出部６０が特定した種類の処置具が含まれる検査画像を検索して特定する。この検索処理は、画像検索要求に含まれる患者ＩＤおよび処置具情報をもとに実行される。当該患者が、過去にＥＲＣＰ検査を行っていなければ、記録部１２０には、カテーテルを含む検査画像は記録されていないが、過去にＥＲＣＰ検査を行っていれば、記録部１２０に、カテーテルを含む検査画像が記録されている。検索実行部１１４は、当該患者の検査画像のうち、カテーテルを示す処置具情報が関連付けられたものを探索し、特定した全ての検査画像を処理装置１４に送信する。なおカテーテルを含む検査画像が記録部１２０に記録されていなければ、検索実行部１１４は、当該検査画像が存在しないことを処理装置１４に通知する。   In the image management system 100, when the request reception unit 112 receives an image search request, the search execution unit 114 is an examination image of the same patient from the plurality of examination images recorded in the recording unit 120, and the treatment tool A test image including the type of treatment tool specified by the detection unit 60 is searched and specified. This search process is executed based on the patient ID and treatment tool information included in the image search request. If the patient has not performed an ERCP examination in the past, the examination image including the catheter is not recorded in the recording unit 120, but if the ERCP examination has been performed in the past, the recording unit 120 includes the catheter. An inspection image is recorded. The search execution unit 114 searches for the examination image of the patient associated with the treatment tool information indicating the catheter, and transmits all the identified examination images to the processing device 14. If the examination image including the catheter is not recorded in the recording unit 120, the search execution unit 114 notifies the processing device 14 that the examination image does not exist.

処理装置１４において、画像取得部６４は、カテーテルを含む検査画像を画像管理システム１００から取得する。画像取得部６４が検査画像を取得すると、表示制御部６６は、取得した過去の検査画像を表示する前に、観察画像とは重ならないディスプレイ上の位置に、過去の検査画像を表示することについての確認メッセージを表示する。   In the processing device 14, the image acquisition unit 64 acquires an examination image including a catheter from the image management system 100. When the image acquisition unit 64 acquires the inspection image, the display control unit 66 displays the past inspection image at a position on the display that does not overlap the observation image before displaying the acquired past inspection image. Display the confirmation message.

図７は、表示された確認メッセージ８０の一例を示す。表示制御部６６は、観察画像の表示領域１６ｂとは異なる表示領域１６ａに、確認メッセージ８０を表示する。医師は観察画像をみながら検査を行っているが、撮像画像に処置具が写り込んだ瞬間に過去の検査画像が突然表示されると、注意が検査画像の方に向いてしまう可能性がある。そこで過去の検査画像を表示する前に、お知らせとして確認メッセージ８０を表示することが好ましい。表示装置１６がタッチパネルとして構成されている場合、看護師が確認メッセージ８０の表示領域をタッチすると、過去の検査画像が表示領域１６ａに表示されるようになる。なお内視鏡１２の操作部２０のスイッチの１つに、検査画像の表示機能が割り当てられていれば、医師がそのスイッチを押すことで、検査画像が表示領域１６ａに表示されるようにしてもよい。   FIG. 7 shows an example of the displayed confirmation message 80. The display control unit 66 displays a confirmation message 80 in a display area 16a different from the observation image display area 16b. The doctor is performing the inspection while looking at the observation image, but if the past inspection image is suddenly displayed at the moment when the treatment tool is reflected in the captured image, attention may be directed toward the inspection image. . Therefore, it is preferable to display the confirmation message 80 as a notice before displaying the past examination image. When the display device 16 is configured as a touch panel, when the nurse touches the display area of the confirmation message 80, a past examination image is displayed in the display area 16a. If an examination image display function is assigned to one of the switches of the operation unit 20 of the endoscope 12, the examination image is displayed in the display area 16a when the doctor presses the switch. Also good.

図８は、表示領域１６ａに表示された過去の検査画像の一例を示す。表示制御部６６は、画像検索部１１０で特定された過去の検査画像を、観察画像とともに表示装置１６に表示する。観察画像および検査画像が１つの表示装置１６に表示されることで、医師は、過去の同じ処置を行ったときの部位の形状や状態を容易に確認できるようになる。表示制御部６６は、観察画像とは重ならない位置に検査画像を表示して、観察画像を隠さないようにする。この例では表示制御部６６が観察画像を表示領域１６ｂに表示し、過去の検査画像を表示領域１６ａに表示することで、両画像が重ならないようにしている。   FIG. 8 shows an example of a past examination image displayed in the display area 16a. The display control unit 66 displays the past examination image specified by the image search unit 110 on the display device 16 together with the observation image. By displaying the observation image and the inspection image on one display device 16, the doctor can easily confirm the shape and state of the part when the same treatment in the past is performed. The display control unit 66 displays the inspection image at a position that does not overlap the observation image so as not to hide the observation image. In this example, the display control unit 66 displays the observation image in the display area 16b and displays the past inspection image in the display area 16a, so that the two images do not overlap.

画像検索部１１０で検索された検査画像が複数枚ある場合、表示制御部６６は、表示領域１６ａに、複数枚の検査画像を分割表示してもよい。表示制御部６６は、表示領域１６ａを４分割または９分割に分けて複数枚の検査画像を表示し、いずれかの検査画像が選択されたときに、拡大表示するようにしてもよい。また表示制御部６６は、表示領域１６ａに検査画像を１枚ごとに切替表示して、いずれかの検査画像の表示中に所定の操作がなされると、その検査画像を固定表示してもよい。切替表示は所定秒ごとに自動で切り替えられてもよいが、医師による操作によって切り替えられてもよい。なお切替表示する場合には、検査画像にメタデータとして付加されている撮影日時を参照して、撮影日時が新しい検査画像から順に表示することが好ましい。   When there are a plurality of inspection images searched by the image search unit 110, the display control unit 66 may divide and display the plurality of inspection images in the display area 16a. The display control unit 66 may divide the display area 16a into four or nine divisions to display a plurality of inspection images, and display an enlarged display when any inspection image is selected. Further, the display control unit 66 may switch and display the inspection images one by one in the display area 16a, and if a predetermined operation is performed during display of any inspection image, the inspection image may be fixedly displayed. . The switching display may be switched automatically every predetermined second, but may be switched by an operation by a doctor. In the case of switching display, it is preferable to display in order from the latest inspection image with reference to the shooting date and time added as metadata to the inspection image.

表示制御部６６は、処置具が観察画像に写り込んでいる間、過去の検査画像を表示する。処置具検出部６０は、処置具がフレームアウトしたことを検出すると、表示制御部６６に対して処置具が写り込まなくなったことを通知し、これにより表示制御部６６は検査画像を非表示とする。なお表示制御部６６は、処置具がフレームアウトした場合であっても、処置具検出部６０が新たな処置具を検出するまでの間、過去の検査画像の表示を維持してもよい。フレームアウトした場合に、過去の検査画像を表示し続けるか、または非表示とするかは、ユーザにより設定可能とされてもよい。   The display control unit 66 displays a past examination image while the treatment instrument is reflected in the observation image. When the treatment instrument detection unit 60 detects that the treatment instrument has been out of the frame, the treatment instrument detection unit 60 notifies the display control unit 66 that the treatment instrument is not reflected, and the display control unit 66 thereby displays the examination image as non-display. To do. Note that the display control unit 66 may maintain the display of past examination images until the treatment tool detection unit 60 detects a new treatment tool even when the treatment tool is out of frame. When the frame is out, whether to continue displaying the past inspection image or to hide it may be set by the user.

以上、本発明を実施例をもとに説明した。この実施例は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。   In the above, this invention was demonstrated based on the Example. This embodiment is an exemplification, and it will be understood by those skilled in the art that various modifications can be made to the combination of each component and each processing process, and such modifications are also within the scope of the present invention. .

１・・・内視鏡業務支援システム、１０・・・内視鏡システム、１２・・・内視鏡、１４・・・処理装置、１６・・・表示装置、３４・・・端末装置、３６・・・表示装置、６０・・・処置具検出部、６２・・・検索要求送信部、６４・・・画像取得部、６６・・・表示制御部、６８・・・画像送信部、８０・・・確認メッセージ、１００・・・画像管理システム、１０２・・・画像取得部、１０４・・・画像提供部、１０６・・・処置具情報登録部、１１０・・・画像検索部、１１２・・・要求受付部、１１４・・・検索実行部、１２０・・・記録部。 DESCRIPTION OF SYMBOLS 1 ... Endoscopy operation support system, 10 ... Endoscope system, 12 ... Endoscope, 14 ... Processing device, 16 ... Display device, 34 ... Terminal device, 36 ... Display device, 60 ... Treatment instrument detection unit, 62 ... Search request transmission unit, 64 ... Image acquisition unit, 66 ... Display control unit, 68 ... Image transmission unit, .. confirmation message, 100... Image management system, 102... Image acquisition unit, 104... Image providing unit, 106 .. treatment instrument information registration unit, 110. Request accepting unit, 114... Search execution unit, 120.

Claims (4)

内視鏡で患者の体内を過去に撮影した検査画像と、検査画像に含まれる処置具の種類を示す情報と、患者を特定する患者識別情報とを関連付けて記録する記録部と、
内視鏡で患者の体内を撮影している観察画像から、内視鏡検査で使用されている処置具の種類を特定する処置具検出部と、
前記記録部に記録された複数の検査画像のなかから、同一患者の検査画像であって、前記処置具検出部が特定した種類の処置具が含まれる検査画像を特定する画像検索部と、
前記画像検索部で特定された過去の検査画像を、観察画像とともに表示する表示制御部と、
を備えることを特徴とする内視鏡業務支援システム。 A recording unit that records an examination image obtained by imaging the patient's body in the past with an endoscope, information indicating the type of treatment tool included in the examination image, and patient identification information that identifies the patient;
A treatment instrument detection unit that identifies the type of treatment instrument used in the endoscopy from an observation image obtained by photographing the inside of a patient with an endoscope;
An image search unit for specifying a test image including a treatment tool of the type identified by the treatment tool detection unit, which is a test image of the same patient, from among the plurality of test images recorded in the recording unit;
A display control unit that displays past inspection images identified by the image search unit together with an observation image;
An endoscope operation support system comprising: 前記処置具検出部は、テンプレート画像を利用した画像認識により、観察画像に含まれる処理具の種類を特定する、ことを特徴とする請求項１に記載の内視鏡業務支援システム。   The endoscope operation support system according to claim 1, wherein the treatment tool detection unit identifies the type of processing tool included in the observation image by image recognition using a template image. 前記表示制御部は、観察画像とは重ならない位置に、前記画像検索部で特定された過去の検査画像を表示する、ことを特徴とする請求項１または２に記載の内視鏡業務支援システム。   The endoscope operation support system according to claim 1, wherein the display control unit displays a past examination image specified by the image search unit at a position that does not overlap an observation image. . 前記表示制御部は、過去の検査画像を表示する前に、検査画像を表示することについての確認メッセージを表示する、ことを特徴とする請求項１から３のいずれかに記載の内視鏡業務支援システム。   The endoscopic service according to any one of claims 1 to 3, wherein the display control unit displays a confirmation message about displaying an inspection image before displaying a past inspection image. Support system.
JP2015038510A 2015-02-27 2015-02-27 Endoscope support system Active JP6373773B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015038510A JP6373773B2 (en) 2015-02-27 2015-02-27 Endoscope support system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015038510A JP6373773B2 (en) 2015-02-27 2015-02-27 Endoscope support system

Publications (2)

Publication Number Publication Date
JP2016158752A true JP2016158752A (en) 2016-09-05
JP6373773B2 JP6373773B2 (en) 2018-08-15

Family

ID=56845892

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015038510A Active JP6373773B2 (en) 2015-02-27 2015-02-27 Endoscope support system

Country Status (1)

Country Link
JP (1) JP6373773B2 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018114238A (en) * 2017-01-20 2018-07-26 フクダ電子株式会社 Exercise stress electrocardiogram examination apparatus
WO2018163644A1 (en) * 2017-03-07 2018-09-13 ソニー株式会社 Information processing device, assist system, and information processing method
WO2018198255A1 (en) * 2017-04-26 2018-11-01 オリンパス株式会社 Image processing device, operation method for image processing device, and program
JP2018180276A (en) * 2017-04-13 2018-11-15 オリンパス株式会社 Endoscope device, endoscope system, and method for controlling display of endoscope image
WO2018230183A1 (en) * 2017-06-12 2018-12-20 オリンパス株式会社 Medical information processing system
WO2019008942A1 (en) * 2017-07-03 2019-01-10 富士フイルム株式会社 Medical image processing device, endoscope device, diagnostic support device, medical service support device and report generation support device
WO2019049503A1 (en) * 2017-09-07 2019-03-14 富士フイルム株式会社 Diagnosis support system, endoscope system, processor, and diagnosis support method
WO2022075047A1 (en) * 2020-10-09 2022-04-14 富士フイルム株式会社 Medical image processing device and operation method for same
WO2023282143A1 (en) * 2021-07-07 2023-01-12 富士フイルム株式会社 Information processing device, information processing method, endoscopic system, and report creation assistance device

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981646A (en) * 1995-09-11 1997-03-28 Toshiba Corp Medical image inspection device
JP2004344216A (en) * 2003-05-20 2004-12-09 Olympus Corp Medical appliance control support system and medical appliance control support program
JP2005160660A (en) * 2003-12-02 2005-06-23 Olympus Corp System and method for examination management
JP2006051073A (en) * 2004-08-10 2006-02-23 Olympus Corp Endoscopic system, information processing device, endoscopic apparatus, endoscope washing device and program
JP2009273571A (en) * 2008-05-13 2009-11-26 Fujifilm Corp Washing management system and washing management method for endoscope
JP2010051390A (en) * 2008-08-26 2010-03-11 Fujifilm Corp Device and method for acquiring optical tomographic image
WO2012132790A1 (en) * 2011-03-31 2012-10-04 オリンパス株式会社 Fluorescence observation device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981646A (en) * 1995-09-11 1997-03-28 Toshiba Corp Medical image inspection device
JP2004344216A (en) * 2003-05-20 2004-12-09 Olympus Corp Medical appliance control support system and medical appliance control support program
JP2005160660A (en) * 2003-12-02 2005-06-23 Olympus Corp System and method for examination management
JP2006051073A (en) * 2004-08-10 2006-02-23 Olympus Corp Endoscopic system, information processing device, endoscopic apparatus, endoscope washing device and program
JP2009273571A (en) * 2008-05-13 2009-11-26 Fujifilm Corp Washing management system and washing management method for endoscope
JP2010051390A (en) * 2008-08-26 2010-03-11 Fujifilm Corp Device and method for acquiring optical tomographic image
WO2012132790A1 (en) * 2011-03-31 2012-10-04 オリンパス株式会社 Fluorescence observation device

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7018259B2 (en) 2017-01-20 2022-02-10 フクダ電子株式会社 Exercise stress electrocardiogram inspection device
JP2018114238A (en) * 2017-01-20 2018-07-26 フクダ電子株式会社 Exercise stress electrocardiogram examination apparatus
JP7095679B2 (en) 2017-03-07 2022-07-05 ソニーグループ株式会社 Information processing equipment, support system and information processing method
WO2018163644A1 (en) * 2017-03-07 2018-09-13 ソニー株式会社 Information processing device, assist system, and information processing method
CN110392546B (en) * 2017-03-07 2022-09-02 索尼公司 Information processing apparatus, support system, and information processing method
CN110392546A (en) * 2017-03-07 2019-10-29 索尼公司 Information processing equipment, auxiliary system and information processing method
JPWO2018163644A1 (en) * 2017-03-07 2020-01-09 ソニー株式会社 Information processing apparatus, support system, and information processing method
US20200015927A1 (en) 2017-03-07 2020-01-16 Sony Corporation Information processing apparatus, assistance system, and information processing method
US11123150B2 (en) 2017-03-07 2021-09-21 Sony Corporation Information processing apparatus, assistance system, and information processing method
JP2018180276A (en) * 2017-04-13 2018-11-15 オリンパス株式会社 Endoscope device, endoscope system, and method for controlling display of endoscope image
JP7026447B2 (en) 2017-04-13 2022-02-28 オリンパス株式会社 Endoscope device, endoscope system and display control method for endoscope images
US11564560B2 (en) 2017-04-26 2023-01-31 Olympus Corporation Image processing apparatus, operating method of image processing apparatus, and computer-readable recording medium
WO2018198255A1 (en) * 2017-04-26 2018-11-01 オリンパス株式会社 Image processing device, operation method for image processing device, and program
WO2018230183A1 (en) * 2017-06-12 2018-12-20 オリンパス株式会社 Medical information processing system
JPWO2019008942A1 (en) * 2017-07-03 2020-05-07 富士フイルム株式会社 Medical image processing device, endoscope device, diagnosis support device, medical work support device, and report creation support device
CN110913749A (en) * 2017-07-03 2020-03-24 富士胶片株式会社 Medical image processing device, endoscope device, diagnosis support device, medical service support device, and report creation support device
WO2019008942A1 (en) * 2017-07-03 2019-01-10 富士フイルム株式会社 Medical image processing device, endoscope device, diagnostic support device, medical service support device and report generation support device
US11416985B2 (en) 2017-07-03 2022-08-16 Fujifilm Corporation Medical image processing apparatus, endoscope apparatus, diagnostic support apparatus, medical service support apparatus, and report creation support apparatus
WO2019049503A1 (en) * 2017-09-07 2019-03-14 富士フイルム株式会社 Diagnosis support system, endoscope system, processor, and diagnosis support method
US11398033B2 (en) 2017-09-07 2022-07-26 Fujifilm Corporation Diagnosis support system, endoscope system, processor, and diagnosis support method
JP7091349B2 (en) 2017-09-07 2022-06-27 富士フイルム株式会社 Diagnosis support system, endoscopy system, processor, and how to operate the diagnosis support system
JPWO2019049503A1 (en) * 2017-09-07 2020-10-15 富士フイルム株式会社 Diagnostic support system, endoscopic system, processor, and diagnostic support method
WO2022075047A1 (en) * 2020-10-09 2022-04-14 富士フイルム株式会社 Medical image processing device and operation method for same
WO2023282143A1 (en) * 2021-07-07 2023-01-12 富士フイルム株式会社 Information processing device, information processing method, endoscopic system, and report creation assistance device

Also Published As

Publication number Publication date
JP6373773B2 (en) 2018-08-15

Similar Documents

Publication Publication Date Title
JP6373773B2 (en) Endoscope support system
JP6360455B2 (en) Inspection image browsing support device, operating method thereof and operating program
JP4788927B2 (en) Monitoring network system
EP2865321B1 (en) Medical information management device and medical information management system
JP5302484B1 (en) Medical information management system and management apparatus
JP6284439B2 (en) Medical information processing system
JP2009176234A (en) Medical information system and medical image storage apparatus
JPWO2018074223A1 (en) Endoscope system, terminal device, server, transmission method and program
CN111863201B (en) Medical information processing device and medical information processing method
JP2017102759A (en) Medical examination support system and medical examination support program
JP2019197271A (en) Medical information processing system
WO2020059117A1 (en) Preliminary-cleaning management device and server device
JP6637291B2 (en) Medical support system and examination image search method
JP2017068801A (en) Medical care report preparation supporting system
JP2017086685A (en) Endoscope work support system
JP6249908B2 (en) Information processing system
JP6169038B2 (en) Medical practice support system
JP6591267B2 (en) Endoscopic image management device
JP5698787B2 (en) Medical information system
JP2017090981A (en) Medical information display system and medical information display method
WO2023135816A1 (en) Medical assistance system and medical assistance method
JP6968843B2 (en) Medical diagnostic server, medical diagnostic method, and program
Ong et al. Application of KinectTM and wireless technology for patient data recording and viewing system in the course of surgery
JP2022064153A (en) Program, image management device, and online medical care system
JP6071218B2 (en) Conference preparation system, conference preparation method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170623

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180307

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180403

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180522

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180703

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180718

R151 Written notification of patent or utility model registration

Ref document number: 6373773

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250