JP2020024286A - 計測装置、計測装置の作動方法、およびプログラム - Google Patents

計測装置、計測装置の作動方法、およびプログラム Download PDF

Info

Publication number
JP2020024286A
JP2020024286A JP2018148559A JP2018148559A JP2020024286A JP 2020024286 A JP2020024286 A JP 2020024286A JP 2018148559 A JP2018148559 A JP 2018148559A JP 2018148559 A JP2018148559 A JP 2018148559A JP 2020024286 A JP2020024286 A JP 2020024286A
Authority
JP
Japan
Prior art keywords
designated
designated point
image
information
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018148559A
Other languages
English (en)
Inventor
尚史 遠藤
Naofumi Endo
尚史 遠藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2018148559A priority Critical patent/JP2020024286A/ja
Priority to CN201910666223.4A priority patent/CN110858397A/zh
Priority to US16/527,776 priority patent/US20200053296A1/en
Publication of JP2020024286A publication Critical patent/JP2020024286A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/02Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • G01B11/03Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring coordinates of points
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • G01C11/30Interpretation of pictures by triangulation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • G01N2021/0106General arrangement of respective parts
    • G01N2021/0118Apparatus with remote processing
    • G01N2021/0137Apparatus with remote processing with PC or the like
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Computer Hardware Design (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

【課題】計測装置の操作性の低下を抑制することができ、かつ指定点の位置が被写体の計測に適しているか否かを示す情報をユーザーに提示する。【解決手段】表示制御部は、画像および指定点情報を表示部に表示させる。前記指定点情報は、複数の指定点に含まれる少なくとも1つの前記指定点の位置が被写体の計測に適しているか否かを示す。前記複数の指定点に含まれる少なくとも1つの前記指定点の位置情報が入力装置に入力された後、前記表示制御部は、非表示期間を除く期間のみにおいて、前記指定点情報を前記表示部に表示させる。前記非表示期間は、前記複数の指定点に含まれる第1の指定点の前記位置情報が前記入力装置に入力されてから、前記複数の指定点に含まれる第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の少なくとも一部を含む。【選択図】図3

Description

本発明は、計測装置、計測装置の作動方法、およびプログラムに関する。
近年、ボイラー、タービン、エンジン、および化学プラントなどの検査において、内部の傷および腐食を観察するために工業用内視鏡が広く用いられている。工業用内視鏡の例として、計測内視鏡装置が特許文献1に開示されている。計測内視鏡装置において、内視鏡の先端に2個の光学系が設けられている。計測内視鏡装置は、三角測量の原理を利用したステレオ計測により3次元計測を実行する。検査において検査対象物の内部に傷などの不具合箇所が発見されたとき、ユーザーはこのような計測内視鏡装置を用いて傷の大きさ等を計測する。これにより、ユーザーは、検査対象物の分解および修理が必要であるか否かを判断することができる。そのため、計測内視鏡装置ができるだけ正確に3次元計測を行えることが非常に重要である。計測内視鏡装置は、ユーザーによって画像上で指定された指定点の位置に基づいて3次元計測を実行する。
ステレオ計測以外の3次元計測を実行する装置も利用されている。例えば、パターン光を投影する手段が挿入部の先端に設けられた装置が利用されている。この装置は、被写体に投影されたパターンを解析することにより3次元計測を実行することができる。
上記のように、計測内視鏡装置ができるだけ正確に計測を実行できることが非常に重要である。一般的に、ユーザーはできるだけ計測精度の高い状態で計測が実行されることを望んでいる。そのため、指定点が計測に適しているか否かを判断するための情報をユーザーに提示することは非常に重要である。
特開2004−33487号公報
装置が指定点の状態を示す情報をユーザーに提示するタイミングは非常に重要である。例えば、面積計測モードでは、20個以上の指定点が指定される状況が考えられる。全ての指定点の各々に対して画像上に情報を表示し続けることにより、ユーザーが指定点を指定するための操作が妨げられる場合がある。あるいは、既に指定された点がその情報によって隠される場合がある。そのため、計測装置が使いにくくなる可能性が考えられる。
本発明は、指定点の位置が被写体の計測に適しているか否かを示す情報をユーザーに提示することができ、かつ計測装置の操作性の低下を抑制することができる計測装置、計測装置の作動方法、およびプログラムを提供することを目的とする。
本発明は、被写体の画像を取得する画像取得部と、入力装置に入力された位置情報に基づいて、前記画像上に複数の指定点を設定し、前記位置情報は前記画像における前記複数の指定点の各々の位置を示す指定点設定部と、前記画像および指定点情報を表示部に表示させ、前記指定点情報は、前記複数の指定点に含まれる少なくとも1つの前記指定点の位置が前記被写体の計測に適しているか否かを示す表示制御部と、前記複数の指定点に基づいて前記計測を実行する計測部と、を有し、前記複数の指定点に含まれる少なくとも1つの前記指定点の前記位置情報が前記入力装置に入力された後、前記表示制御部は、非表示期間を除く期間のみにおいて、前記指定点情報を前記表示部に表示させ、前記非表示期間は、前記複数の指定点に含まれる第1の指定点の前記位置情報が前記入力装置に入力されてから、前記複数の指定点に含まれる第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の少なくとも一部を含み、前記第2の指定点は前記第1の指定点と異なることを特徴とする計測装置である。
本発明の計測装置において、前記複数の指定点のうち前記第1の指定点の前記位置情報が前記入力装置に最初に入力され、前記複数の指定点のうち前記第2の指定点の前記位置情報が前記入力装置に最後に入力され、前記非表示期間は、前記第1の指定点の前記位置情報が前記入力装置に入力されてから、前記第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の全てを含むことを特徴とする。
本発明の計測装置は、計測モードに基づいて、前記第2の指定点の前記位置情報が前記入力装置に入力されたか否かを判断する判断部をさらに有し、前記第2の指定点の前記位置情報が前記入力装置に入力されたと前記判断部が判断したとき、前記非表示期間が終了し、前記計測部は、前記計測モードに基づく方法により前記被写体の計測を実行することを特徴とする。
本発明の計測装置において、前記第1の指定点の前記位置情報が前記入力装置に入力された後、前記表示制御部は、前記第1の指定点の前記指定点情報を前記表示部に表示させ、前記第1の指定点の前記指定点情報が表示された後、前記表示制御部は、前記第1の指定点の前記指定点情報を非表示にさせ、前記非表示期間は、前記第1の指定点の前記指定点情報が非表示になってから、前記第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の全てを含むことを特徴とする。
本発明の計測装置において、前記第1の指定点の前記位置情報が前記入力装置に入力されたときから所定時間が経過するまで、前記表示制御部は、前記指定点情報を前記表示部に表示させることを特徴とする。
本発明の計測装置において、前記指定点情報が表示されている間、前記指定点設定部は前記指定点の設定を停止することを特徴とする。
本発明の計測装置において、前記表示制御部はさらに、前記入力装置に入力されるマーク位置情報に基づいて、前記画像上にマークを表示させ、前記マーク位置情報は前記画像上の前記マークの位置を示し、前記指定点を指定する指示が前記入力装置に入力されたとき、前記指定点設定部は、前記マーク位置情報が示す前記マークの前記位置に、前記複数の指定点に含まれる1つの前記指定点を設定し、前記マークの動きに基づいて前記非表示期間が設けられることを特徴とする。
本発明の計測装置において、前記非表示期間は、前記マークが前記画像上で移動している期間の全てを含み、移動中の前記マークが停止したとき、前記非表示期間が終了することを特徴とする。
本発明の計測装置において、前記非表示期間は、前記マークが前記画像上で移動している期間の全てを含み、前記第1の指定点を指定する前記指示が前記入力装置に入力されたとき、前記非表示期間が終了し、前記第1の指定点を指定する前記指示が前記入力装置に入力された後、前記マークの動きに基づいて前記非表示期間が開始され、前記第2の指定点を指定する前記指示が前記入力装置に入力されたとき、前記非表示期間が終了することを特徴とする。
本発明の計測装置において、前記マークが移動している間、前記指定点設定部は前記指定点の設定を停止することを特徴とする。
本発明の計測装置において、前記表示制御部は、前記指定点情報が前記複数の指定点と重ならない位置に前記指定点情報を表示させることを特徴とする。
本発明の計測装置において、前記画像取得部は、互いに視差を有する第1の画像および第2の画像を取得し、前記指定点設定部は、前記第1の画像上に前記複数の指定点を設定し、前記表示制御部は、前記第1の画像および前記指定点情報を前記表示部に表示させ、前記指定点情報は、前記第2の画像の少なくとも一部であることを特徴とする。
本発明は、画像取得部が被写体の画像を取得する第1のステップと、指定点設定部が、入力装置に入力された位置情報に基づいて、前記画像上に複数の指定点を設定し、前記位置情報は前記画像における前記複数の指定点の各々の位置を示す第2のステップと、表示制御部が前記画像を表示部に表示させる第3のステップと、計測部が前記複数の指定点に基づいて前記被写体の計測を実行する第4のステップと、前記複数の指定点に含まれる少なくとも1つの前記指定点の前記位置情報が前記入力装置に入力された後、前記表示制御部が、非表示期間を除く期間において、指定点情報を前記表示部に表示させ、前記指定点情報は、前記複数の指定点に含まれる少なくとも1つの前記指定点の位置が前記計測に適しているか否かを示し、前記非表示期間は、前記複数の指定点に含まれる第1の指定点の前記位置情報が前記入力装置に入力されてから、前記複数の指定点に含まれる第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の少なくとも一部を含み、前記第2の指定点は前記第1の指定点と異なる第5のステップと、を有することを特徴とする計測装置の作動方法である。
本発明は、被写体の画像を取得する第1のステップと、入力装置に入力された位置情報に基づいて、前記画像上に複数の指定点を設定し、前記位置情報は前記画像における前記複数の指定点の各々の位置を示す第2のステップと、前記画像を表示部に表示させる第3のステップと、前記複数の指定点に基づいて前記被写体の計測を実行する第4のステップと、前記複数の指定点に含まれる少なくとも1つの前記指定点の前記位置情報が前記入力装置に入力された後、非表示期間を除く期間において、指定点情報を前記表示部に表示させ、前記指定点情報は、前記複数の指定点に含まれる少なくとも1つの前記指定点の位置が前記計測に適しているか否かを示し、前記非表示期間は、前記複数の指定点に含まれる第1の指定点の前記位置情報が前記入力装置に入力されてから、前記複数の指定点に含まれる第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の少なくとも一部を含み、前記第2の指定点は前記第1の指定点と異なる第5のステップと、をコンピュータに実行させるためのプログラムである。
本発明によれば、計測装置、計測装置の作動方法、およびプログラムは、指定点の位置が被写体の計測に適しているか否かを示す情報をユーザーに提示することができ、かつ計測装置の操作性の低下を抑制することができる。
本発明の第1の実施形態による内視鏡装置の全体構成を示す斜視図である。 本発明の第1の実施形態による内視鏡装置の内部構成を示すブロック図である。 本発明の第1の実施形態によるCPUの機能構成を示すブロック図である。 本発明の第1の実施形態のステレオ計測による計測点の3次元座標の算出方法を説明するための参考図である。 本発明の第1の実施形態における計測処理の手順を示すフローチャートである。 本発明の第1の実施形態における画像を示す参考図である。 本発明の第1の実施形態における計測処理の手順を示すフローチャートである。 本発明の第1の実施形態における計測処理の手順を示すフローチャートである。 本発明の第1の実施形態の変形例における画像を示す参考図である。 本発明の第1の実施形態の変形例における画像を示す参考図である。 本発明の第1の実施形態の変形例における画像を示す参考図である。 本発明の第1の実施形態の変形例における画像を示す参考図である。 本発明の第2の実施形態における計測処理の手順を示すフローチャートである。 本発明の第2の実施形態における計測処理の手順を示すフローチャートである。 本発明の第2の実施形態における画像を示す参考図である。 本発明の第2の実施形態における画像を示す参考図である。 本発明の第2の実施形態における画像を示す参考図である。 本発明の第2の実施形態における画像を示す参考図である。 本発明の第3の実施形態における計測処理の手順を示すフローチャートである。 本発明の第3の実施形態における対応点表示処理の手順を示すフローチャートである。 本発明の第3の実施形態における画像を示す参考図である。 本発明の第3の実施形態における画像を示す参考図である。 本発明の第3の実施形態における画像を示す参考図である。 本発明の第3の実施形態における画像を示す参考図である。 本発明の第3の実施形態における画像を示す参考図である。 本発明の第3の実施形態の変形例における計測処理の手順を示すフローチャートである。 本発明の第3の実施形態の変形例における画像を示す参考図である。 本発明の第3の実施形態の変形例における画像を示す参考図である。 本発明の第3の実施形態の変形例における画像を示す参考図である。 本発明の第3の実施形態の変形例における画像を示す参考図である。
以下、図面を参照し、本発明の実施形態を説明する。以下では、計測装置の例として内視鏡装置を使用する。
(第1の実施形態)
図1は、本発明の第1の実施形態による内視鏡装置1の全体構成を示す。図2は、内視鏡装置1の内部構成を示す。図1に示す内視鏡装置1は、内視鏡2と、装置本体3とを有する。内視鏡2は、細長な挿入部20と、操作部6とを有する。ユーザーは、操作部6を操作することにより、装置全体の制御に必要な指示を入力する。装置本体3は、内視鏡2に接続されている。装置本体3は、モニタ4と、筐体5とを有する。モニタ4は、内視鏡2によって取得された被写体の画像および操作メニュー等を表示する。筐体5は、内部に制御装置10(図2参照)を有する。
操作部6は、ユーザーインタフェースである。例えば、操作部6は、ボタン、スイッチ、キー、マウス、ジョイスティック、タッチパッド、トラックボール、およびタッチパネルの少なくとも1つである。モニタ4は、LCD(Liquid Crystal Display)等のディスプレイである。
挿入部20は、被検体の内部に挿入される。挿入部20は、硬質な先端部21と、湾曲可能な湾曲部22と、柔軟性を有する可撓管部23とを有する。挿入部20において先端側に先端部21が配置されている。挿入部20において本体側に可撓管部23が配置されている。先端部21と可撓管部23との間に湾曲部22が配置されている。先端部21には、被写体の光学像を形成するための光学アダプタが着脱可能である。
図2に示す筐体5は、内視鏡ユニット8と、CCU(カメラコントロールユニット)9と、制御装置10とを有する。内視鏡ユニット8は、観察に必要な照明光を供給する光源装置と、湾曲部22を湾曲させる湾曲装置とを有する。CCU9は、撮像素子28を駆動する。撮像素子28から出力された撮像信号がCCU9に入力される。CCU9は、撮像素子28により取得された撮像信号に対して、増幅およびノイズ除去等を含む前処理を実行する。CCU9は、処理された撮像信号をNTSC信号等の映像信号に変換する。
制御装置10は、映像信号処理回路12と、ROM(Read Only Memory)13と、RAM(Random Access Memory)14と、カードインタフェース15と、外部機器インタフェース16と、制御インタフェース17と、CPU(Central Processing Unit)18とを有する。
映像信号処理回路12は、CCU9から出力された映像信号に対して、所定の映像処理を施す。例えば、映像信号処理回路12は、CCU9から出力された映像信号と、CPU18によって生成されるグラフィック画像信号とを合成する。グラフィック画像信号は、操作画面の画像および計測情報等を含む。計測情報は、カーソル、指定点のマーク、および計測結果等を含む。映像信号処理回路12は、合成された映像信号をモニタ4に出力する。
ROM13は、CPU18が内視鏡装置1の動作を制御するためのプログラムが記録された不揮発性の記録媒体である。RAM14は、CPU18が内視鏡装置1の制御のために使用する情報を一時的に記憶する揮発性の記録媒体である。CPU18は、ROM13に記録されたプログラムに基づいて内視鏡装置1の動作を制御する。
着脱可能な記録媒体であるメモリカード32がカードインタフェース15に接続される。カードインタフェース15は、メモリカード32に記憶されている制御処理情報および画像情報等を制御装置10に取り込む。また、カードインタフェース15は、内視鏡装置1によって生成された制御処理情報および画像情報等をメモリカード32に記録する。
USB機器等の外部機器が外部機器インタフェース16に接続される。例えば、パーソナルコンピュータ31が外部機器インタフェース16に接続される。外部機器インタフェース16は、パーソナルコンピュータ31へ情報を送信し、かつパーソナルコンピュータ31から情報を受信する。これによって、パーソナルコンピュータ31のモニタが情報を表示することができる。また、ユーザーは、パーソナルコンピュータ31に指示を入力することにより、内視鏡装置1の制御に関する操作を行うことができる。
制御インタフェース17は、操作部6、内視鏡ユニット8、およびCCU9と動作制御のための通信を行う。制御インタフェース17は、ユーザーによって操作部6に入力された指示をCPU18に通知する。制御インタフェース17は、光源装置および湾曲装置を制御するための制御信号を内視鏡ユニット8に出力する。制御インタフェース17は、撮像素子28を制御するための制御信号をCCU9に出力する。
CPU18が実行するプログラムは、コンピュータ読み取り可能な記録媒体に記録されてもよい。この記録媒体に記録されたプログラムを内視鏡装置1以外のコンピュータが読み込み、かつ実行してもよい。例えば、パーソナルコンピュータ31がプログラムを読み込んで実行してもよい。パーソナルコンピュータ31は、プログラムに従って、内視鏡装置1を制御するための制御情報を内視鏡装置1に送信することにより内視鏡装置1を制御してもよい。あるいは、パーソナルコンピュータ31は、内視鏡装置1から映像信号を取得し、かつ取得された映像信号を用いて計測を実行してもよい。
上述したプログラムは、そのプログラムを保持するコンピュータから、伝送媒体を経由して、あるいは伝送媒体中の伝送波により内視鏡装置1に伝送されてもよい。プログラムを伝送する「伝送媒体」は、情報を伝送する機能を有する媒体である。情報を伝送する機能を有する媒体は、インターネット等のネットワーク(通信網)および電話回線等の通信回線(通信線)を含む。上述したプログラムは、前述した機能の一部を実現してもよい。さらに、上述したプログラムは、差分ファイル(差分プログラム)であってもよい。コンピュータに既に記録されているプログラムと差分プログラムとの組合せが、前述した機能を実現してもよい。
撮像素子28は、イメージセンサである。撮像素子28は、挿入部20の先端に配置される。先端部21に装着される光学アダプタは、互いに視差を有する2つの光学系を有する。撮像素子28は、2つの光学系の結像位置に配置された撮像面を有する。撮像素子28は、第1の光学系によって撮像面に形成された第1の光学像と、第2の光学系によって撮像面に形成された第2の光学像とに基づいて撮像信号を生成する。つまり、撮像素子28は、第1の画像および第2の画像を生成する。第1の画像は、第1の光学系によって得られた第1の光学像に対応する。第2の画像は、第2の光学系によって得られた第2の光学像に対応する。第1の画像および第2の画像は、互いに視差を有する。例えば、左側の視野に対応する画像が第1の画像と定義され、かつ右側の視野に対応する画像が第2の画像と定義される。右側の視野に対応する画像が第1の画像と定義され、かつ左側の視野に対応する画像が第2の画像と定義されてもよい。
上記のように、内視鏡装置1は、撮像素子28(画像取得部)と、モニタ4(表示部)と、CPU18とを有する。撮像素子28は、被写体を撮像し、かつ撮像信号を生成する。撮像信号は、被写体の画像を含む。したがって、撮像素子28は、被写体を撮像することにより生成された、その被写体の画像を取得する。撮像素子28により取得された画像は映像信号処理回路12を経由してCPU18に入力される。モニタ4は、映像信号に基づく画像と、後述する指定点情報とを表示する。
撮像素子28は、被写体の画像を取得する画像取得部の機能を有する。画像取得部は、画像入力装置であってもよい。例えば、パーソナルコンピュータ31が計測装置として動作する場合、画像取得部は、内視鏡装置1と通信を実行する通信インタフェース(通信機)である。画像取得部は無線通信機であってもよい。画像取得部は、画像が記録された記録媒体から画像を読み出す読み出し回路であってもよい。
図3は、CPU18の機能構成を示す。情報生成部70、タイミング判断部71、表示位置算出部72、制御部73、指定点設定部74、計測モード設定部75、計測部76、表示制御部77、およびカーソル位置検出部78によってCPU18の機能が構成されている。図3に示すブロックの少なくとも1つがCPU18とは別の回路で構成されてもよい。
図3に示す各部は、プロセッサおよび論理回路の少なくとも1つで構成されてもよい。例えば、プロセッサは、CPU、DSP(Digital Signal Processor)、およびGPU(Graphics Processing Unit)の少なくとも1つである。例えば、論理回路は、ASIC(Application Specific Integrated Circuit)およびFPGA(Field−Programmable Gate Array)の少なくとも1つである。図3に示す各部は、1つまたは複数のプロセッサを含むことができる。図3に示す各部は、1つまたは複数の論理回路を含むことができる。
図3に示す構成の概略を説明する。指定点設定部74は、操作部6(入力装置)に入力された位置情報に基づいて、画像上に複数の指定点を設定する。位置情報は画像における複数の指定点の各々の位置を示す。表示制御部77は、画像および指定点情報をモニタ4に表示させる。指定点情報は、複数の指定点に含まれる少なくとも1つの指定点の位置が被写体の計測に適しているか否かを示す。計測部76は、複数の指定点に基づいて被写体の計測を実行する。複数の指定点に含まれる少なくとも1つの指定点の位置情報が操作部6に入力された後、表示制御部77は、非表示期間を除く期間のみにおいて、指定点情報をモニタ4に表示させる。非表示期間は、複数の指定点に含まれる第1の指定点の位置情報が操作部6に入力されてから、複数の指定点に含まれる第2の指定点の位置情報が操作部6に入力されるまでの期間の少なくとも一部を含む。第2の指定点は第1の指定点と異なる。
図3に示す構成の詳細を説明する。制御部73は、各部が実行する処理を制御する。表示制御部77は、画像をモニタ4に表示させる。例えば、表示制御部77は、映像信号処理回路12によって実行される処理を制御する。表示制御部77は、映像信号処理回路12によって処理された画像をモニタ4へ出力させる。モニタ4は、映像信号処理回路12から出力された画像を表示する。例えば、表示制御部77は、第1の画像をモニタ4に表示させる。表示制御部77は、第1の画像および第2の画像をモニタ4に表示させてもよい。
表示制御部77は、ユーザーが指定点を指定するためのカーソルをモニタ4に表示させる。つまり、表示制御部77は、画像上にカーソルを表示させる。例えば、表示制御部77は、カーソルのグラフィック画像信号を生成する。表示制御部77は、生成されたグラフィック画像信号を映像信号処理回路12に出力する。映像信号処理回路12は、CCU9から出力された映像信号と、CPU18から出力されたグラフィック画像信号とを合成する。これにより、カーソルが画像に重畳される。映像信号処理回路12は、合成された映像信号をモニタ4に出力する。モニタ4は、カーソルが重畳された画像を表示する。例えば、表示制御部77は、第1の画像上にカーソルを表示させる。カーソルは、ユーザーが画像上の特定の位置を指定するためのマークである。アイコンまたはポインター等がカーソルの代わりに表示されてもよい。
ユーザーは、操作部6を操作することにより、カーソルの位置情報を操作部6に入力する。操作部6は、ユーザーが操作部6に入力した位置情報を出力する。操作部6から出力された位置情報は、入力部である制御インタフェース17に入力される。制御インタフェース17に入力された位置情報は、CPU18に入力される。カーソル位置検出部78は、操作部6に入力された位置情報が示す位置を検出する。表示制御部77は、操作部6に入力された位置情報が示す位置にカーソルを表示させる。
表示制御部77は、指定点のマークおよび計測結果をモニタ4に表示させる。つまり、表示制御部77は、画像上に指定点のマークおよび計測結果を表示させる。例えば、表示制御部77は、指定点のマークおよび計測結果の各々のグラフィック画像信号を生成する。その後、カーソルを表示するための処理と同様の処理が実行される。モニタ4は、指定点のマークおよび計測結果が重畳された画像を表示する。指定点のマークは、画像上の指定点の位置を示す。
ユーザーは、操作部6を操作することにより、指定点を指定する指示を操作部6に入力する。操作部6は、ユーザーが操作部6に入力した指示を出力する。操作部6から出力された指示は、制御インタフェース17に入力される。制御インタフェース17に入力された指示は、CPU18に入力される。指定点を指定する指示が操作部6に入力されたとき、指定点設定部74は、カーソルの位置情報が示す位置に、複数の指定点に含まれる1つの指定点を設定する。ユーザーは、上記の操作を繰り返し実行する。そのため、複数の位置情報が操作部6に入力される。指定点設定部74は、複数の位置情報の各々が示す位置に指定点を設定することにより複数の指定点を設定する。指定点設定部74によって設定された指定点の位置情報は、RAM14に保持される。指定点が特定の画像に関連付けられることにより、指定点が設定される。例えば、指定点設定部74は、第1の画像上に複数の指定点を設定する。
指定点は、ユーザーの指示によって決定された注目位置の座標情報である。指定点は、被写体上の計測位置を示す。指定点の指定は、ユーザーが指定点の位置を内視鏡装置1に指示することを意味する。指定点の設定は、指定点設定部74が指定点の位置を画像に関連付けることを意味する。
ユーザーは、操作部6を操作することにより、計測モードを指定する指示を操作部6に入力する。計測モードは、2点間距離計測、面積計測、線基準計測、または面基準計測等である。2点間計測は、2つの指定点間の3次元距離を計測するモードである。面積計測は、少なくとも3つの指定点で規定された3次元領域の面積を計測するモードである。線基準計測は、2つの指定点で規定された3次元直線と1つの指定点との間の3次元距離を計測するモードである。面基準計測は、3つの指定点で規定された3次元領域と1つの指定点との間の3次元距離を計測するモードである。操作部6は、ユーザーが操作部6に入力した指示を出力する。操作部6から出力された指示は、制御インタフェース17に入力される。制御インタフェース17に入力された指示は、CPU18に入力される。計測モード設定部75は、操作部6に入力された指示に基づいて、複数の計測モードのいずれか1つを選択する。計測モード設定部75は、選択した計測モードをRAM14に保持する。これにより、計測モードが内視鏡装置1に設定される。計測モード設定部75は、撮像素子28によって取得された画像に基づいて計測モードを選択してもよい。
計測部76は、第1の画像および第2の画像を使用し、ステレオ計測の原理に基づいて、被写体の3次元計測を実行する。具体的には、計測部76は、指定点設定部74によって設定された指定点の位置の3次元座標を算出する。計測部76は、算出された3次元座標に基づいて被写体の3次元形状のサイズを計測する。
情報生成部70は、指定点の位置が被写体の計測に適しているか否かを示す指定点情報を生成する。例えば、指定点情報は、画像において指定点を含む領域の輝度分布である。指定点情報は、指定点の特徴度合い(エッジ)を示す情報であってもよい。指定点情報は、テクスチャ情報であってもよい。指定点情報は、指定点の位置における深さ情報(被写体までの距離)であってもよい。指定点情報は、様々な情報を総合的に判断することにより得られる指標としての信頼度であってもよい。指定点情報は、これらの情報とは異なる情報であってもよい。情報生成部70は、指定点の信頼度に基づいて、複数の指定点情報のうち表示される指定点情報を選択してもよい。
表示制御部77は、指定点情報をモニタ4に表示させる。つまり、表示制御部77は、画像上に指定点情報を表示させる。例えば、表示制御部77は、指定点情報のグラフィック画像信号を生成する。その後、カーソルを表示するための処理と同様の処理が実行される。モニタ4は、指定点情報が重畳された画像を表示する。例えば、表示制御部77は、第1の画像および指定点情報をモニタ4に表示させる。
計測部76が計測処理においてステレオ計測を実行する場合、指定点情報は対応点の情報であってもよい。対応点の情報は、一般的に知られているマッチング処理において得られる。例えば、指定点が第1の画像に設定された場合、マッチング処理を実行することにより、第2の画像において指定点に対応する位置の対応点が検出される。指定点情報は、第2の画像の少なくとも一部であってもよい。例えば、指定点情報は、第2の画像において対応点の周辺の画像であってもよい。指定点情報は、第2の画像の全体であってもよい。対応点の情報は、マッチング処理において算出された相関値等であってもよい。
表示位置算出部72は、指定点設定部74によって設定された指定点の位置に基づいて、指定点情報を表示する位置を算出する。例えば、表示位置算出部72は、指定点情報が指定点と重ならないような位置を算出する。表示制御部77は、表示位置算出部72によって算出された位置に指定点情報を表示させる。
タイミング判断部71は、計測モードおよび指定点に基づいて、指定点情報を表示するタイミングを判断する。タイミング判断部71が指定点情報を表示すると判断した場合、表示制御部77は、指定点情報をモニタ4に表示させる。
表示制御部77は、指定点情報が表示されない非表示期間を制御する。非表示期間は、第1の指定点の位置情報が操作部6に入力されてから、第2の指定点の位置情報が操作部6に入力されるまでの期間の全体または一部を含む。第1の指定点は、最初に設定される指定点とは限らない。第2の指定点は、2番目に設定される指定点とは限らない。
例えば、複数の指定点のうち第1の指定点の位置情報が入力される前に非表示期間が開始される。つまり、ユーザーによって第1の指定点が指定される前に非表示期間が開始される。計測処理の開始と同時に非表示期間が開始されてもよい。第2の指定点の位置情報が操作部6に入力されるまで、非表示期間が継続する。第2の指定点の位置情報が操作部6に入力されたとき、非表示期間が終了する。つまり、ユーザーによって第2の指定点が指定されたとき、表示制御部77は、指定点情報をモニタ4に表示させる。
第1の実施形態において、複数の指定点のうち第1の指定点の位置情報が操作部6に最初に入力される。第1の実施形態において、複数の指定点のうち第2の指定点の位置情報が操作部6に最後に入力される。第1の実施形態において、非表示期間は、第1の指定点の位置情報が操作部6に入力されてから、第2の指定点の位置情報が操作部6に入力されるまでの期間の全てを含む。
第1の指定点を除く全ての指定点の位置情報が操作部6に入力される前、第1の指定点の位置情報が操作部6に入力される。第2の指定点を除く全ての指定点の位置情報が操作部6に入力された後、第2の指定点の位置情報が操作部6に入力される。非表示期間が終了した後、表示制御部77は、指定点情報をモニタ4に表示させる。つまり、全ての指定点の位置情報が操作部6に入力された後、表示制御部77は、指定点情報をモニタ4に表示させる。指定点設定部74は、非表示期間において複数の指定点を設定する。
タイミング判断部71は、設定された計測モードに基づいて、第2の指定点の位置情報が操作部6に入力されたか否かを判断する。第2の指定点の位置情報が操作部6に入力されたとタイミング判断部71が判断したとき、非表示期間が終了する。計測部76は、計測モードに基づく方法により被写体の計測を実行する。
所定の計測モードにおいて、指定点の数は固定されている場合が多い。例えば、2点間距離計測における指定点の数は2である。線基準計測における指定点の数は3である。面基準計測における指定点の数は4である。所定の計測モードが設定された場合、タイミング判断部71は、所定の数の指定点が指定されたか否かを判断する。これにより、タイミング判断部71は、非表示期間が終了するタイミングを判断することができる。
計測部76が3次元座標を算出する方法について説明する。モニタ4は、映像信号処理回路12に入力される映像信号(画像データ)に基づく画像を表示する。計測部76は、画像上で指定された位置に対応する3次元座標を計算する。3次元座標を計算する位置は、画像内でユーザーが指定する計測位置(計測点)である。ユーザーが指定する計測点の3次元座標は、被写体の3次元形状のサイズ(計測結果)を求めるために使用される。一例としてステレオ計測による3次元座標の計算方法について説明する。
ステレオ光学アダプタが先端部21に装着された状態で画像が取得される。ステレオ光学アダプタは、ステレオ計測を実行するための専用レンズである。ステレオ光学アダプタは、左右の2つの観察視野を有する。被写体からの光がステレオ光学アダプタに入射する。ステレオ光学アダプタによって、同一の被写体に対応する左右の2つの被写体像が形成される。2つの被写体像は撮像素子28に入射し、かつ撮像素子28によって撮像される。取得された画像は、2つの被写体像を含む。取得された画像のうち、2つの被写体像に対応する領域の画像を左画像(第1の画像)および右画像(第2の画像)と定義する。
図4を参照し、ステレオ計測の原理を説明する。ステレオ計測では、2つの光学測距点の座標に基づいて、三角測量の原理を使用して被写体の3次元座標が算出される。2つの光学測距点は、2つの光学系が捉えた2つの被写体像に対応する。左の光学中心(第1の光学中心63)と右の光学中心(第2の光学中心64)とを結ぶ線分の中点が原点Oとして定義される。また、右方向が正であるx軸と、下方向が正であるy軸とが定義される。また、光軸と平行に光学系から遠ざかる方向が正であるz軸が定義される。
左の光学系および右の光学系によって得られた被写体像を含む画像に対して、三角測量の原理により、計測点60の3次元座標(X,Y,Z)が以下の(1)式から(3)式を用いて計算される。歪み補正が施された左の画像面の計測点61と、歪み補正が施された右の画像面の対応点62との2次元座標はそれぞれ、(X,Y)、(X,Y)である。これらの2次元座標の原点はそれぞれ、左の光学系および右の光学系の光軸と画像面との交点O、交点Oである。第1の光学中心63と第2の光学中心64との距離はDである。焦点距離はFである。パラメータtは、D/(X−X)である。
X=t×X+D/2・・・(1)
Y=−t×Y・・・(2)
Z=t×F・・・(3)
上記のように画像面上の計測点61の座標と対応点62の座標とが決定された場合、パラメータDとパラメータFとを用いて計測点60の3次元座標を求めることができる。一般的に、ステレオ計測において対応点はマッチング処理によって算出される。マッチング処理において、被写体の第1の位置に対応する、その被写体の第2の位置が検出される。被写体の第1の位置は、一方の光学系(第1の光学系)を通った光に基づく画像における被写体の位置である。被写体の第2の位置は、他方の光学系(第2の光学系)を通った光に基づく画像における被写体の位置である。マッチング処理には様々な手法がある。例えば、テンプレートマッチングを行うマッチング手法がある。濃淡のエッジ部分などの特徴点に基づいてマッチングを行うマッチング手法もある。位相限定相関法(POC:Phase Only Correlation)を用いたマッチング手法もある。位相限定相関法では、画像をフーリエ変換することにより得られる位相成分の相関が計算される。本発明の実施形態に適用されるマッチング手法は、上記のマッチング手法に限らない。
いくつかの点の3次元座標を求めることによって、様々な計測機能が実現可能である。例えば、2点間の距離、2点を結ぶ線と1点の距離、複数点を結ぶ線で囲まれた領域の面積、基準面の深さ、および表面形状等が計測される。ユーザーは、様々な計測モードから所望の計測モードを選択することができる。また、第1の光学中心63または第2の光学中心64から被写体までの距離(物体距離)を求めることも可能である。物体距離は、先端部21から被写体までの距離であって、例えば撮像素子28または観察光学系から被写体までの距離である。上記のステレオ計測を行うためには、挿入部20の先端部21とステレオ光学アダプタとを含む光学系の特性を示す光学データが必要である。例えば、マッチング処理および光学データの詳細は特開2004−49638号公報に記載されているので、その説明を省略する。
本発明の実施形態に適用できる計測方法は、ステレオ計測に限らない。例えば、パターン投影方式等が本発明の実施形態に適用されてもよい。パターン投影方式では、被写体に投影されたパターン光を撮像することにより取得されたパターン画像が解析される。その解析の結果に基づいて3次元座標が算出される。
パターン投影方式では一般的に、パターンの検出精度が低い場合、3次元座標の計算結果の精度が悪くなる。例えば、パターン光が投影された被写体の反射率が低い場合、正確なパターンの検出が難しい。あるいは、パターン光が投影されている間に投影部が動く場合等には、正確なパターンの検出が難しい。パターン投影方式における指定点情報は、例えばパターンの明暗によって生じる輝度値の差である。パターン投影方式における指定点情報は、パターンが投影されたときに発生しているブレ量等であってもよい。
第1の実施形態における計測処理の詳細を説明する。図5は、計測処理の手順を示す。映像信号に基づく画像は、様々な観察状況で取得される。観察状況によって、計測しやすい画像が取得され、あるいは計測しにくい画像が取得される。取得される画像は、計測のためにメモリカード32に記録された画像、または装置本体3内に一時的に記録された画像(フリーズ画像)である。画像は、静止画に限らない。例えば、画像は、リアルタイムに取得される映像信号(LIVE動画)であってもよい。第1の実施形態において、画像が静止画である場合における計測処理の流れを説明する。
ユーザーの指示により、CPU18は、ユーザーが計測したい対象物が撮像された状態で画像を取得する(ステップS1)。このとき、撮像素子28は、被写体を撮像し、かつ撮像信号を生成する。CCU9は、撮像信号に基づいて映像信号を生成する。CPU18は、映像信号すなわち画像をCCU9から取得する。
画像が取得された後、ユーザーは所望の計測モードを選択する。計測モード設定部75は、ユーザーによって選択された計測モードを内視鏡装置1に設定する(ステップS2)。計測モード設定部75は、画像の状態に基づいて、適当な計測モードを選択し、かつその計測モードを内視鏡装置1に設定してもよい。以下では、面基準計測を例として、各処理を説明する。面基準計測では、画像上の3つの指定点によって基準面が形成される。基準面と4番目の指定点との間の深さもしくは高さが計測される。
計測モードが設定された後、表示制御部77は、画像をモニタ4に表示させる。モニタ4は、画像を表示する(ステップS3)。ステレオ計測では、2枚の画像が取得される。ステップS3において、1枚の画像のみ、あるいは2枚の画像が表示される。以下では、1枚の画像のみが表示される例を説明する。
画像が表示された後、表示制御部77は、カーソルをモニタ4に表示させる。モニタ4は、カーソルを画像上に表示する(ステップS4)。ステップS4において、モニタ4は、カーソルを画像上の所定の位置に表示する。例えば、モニタ4は、カーソルを画像の中心に表示する。
カーソルが表示された後、ユーザーは、操作部6を操作することによりカーソルを所望の計測位置に移動させることができる。また、ユーザーは、操作部6を操作することにより所望の計測位置において指定点を指定することができる。指定点設定部74は、操作部6の状態を監視することにより、ユーザーによって指定点が指定されたか否かを判断する。カーソル位置検出部78は、画像上のカーソルの位置情報が示す位置を検出する。ユーザーによって最初の指定点P1が指定されたとき、指定点設定部74は、画像上のカーソルの位置情報が示す位置に指定点P1を設定する(ステップS5)。
指定点P1が設定された後、指定点設定部74は、指定点P1を設定する方法と同様の方法により、画像上のカーソルの位置情報が示す位置に指定点P2を設定する(ステップS6)。指定点P2が設定された後、指定点設定部74は、指定点P1を設定する方法と同様の方法により、画像上のカーソルの位置情報が示す位置に指定点P3を設定する(ステップS7)。3つの指定点P1,P2,P3によって基準面が形成される。
指定点P3が設定された後、指定点設定部74は、指定点P1を設定する方法と同様の方法により、画像上のカーソルの位置情報が示す位置に最後の指定点P4を設定する(ステップS8)。指定点P4は、深さまたは高さの計測位置を示す。
ステップS8における処理が終了したとき、面基準計測に必要な4つの指定点の指定が完了する。タイミング判断部71は、操作部6の状態を監視することにより、ユーザーによって4番目の指定点が指定されたか否かを判断する。4番目の指定点が指定されたとき、タイミング判断部71は、非表示期間を終了すると判断する。つまり、タイミング判断部71は、指定点情報を表示すると判断する。タイミング判断部71は、判断結果を制御部73に通知する。制御部73は、その判断結果に基づいて、指定点情報の生成を情報生成部70に指示し、かつ指定点情報の表示を表示制御部77に指示する。
面基準計測では、4つの指定点が指定されたとき指定点の指定が完了する。例えば、2点間距離計測では、2つの指定点が指定されたとき指定点の指定が完了する。線基準計測では、3つの指定点が指定されたとき指定点の指定が完了する。
指定点P4が設定された後、情報生成部70は、指定点情報を生成する(ステップS9)。指定点情報の態様は様々である。以下では、指定点情報は、各指定点の対応点の周辺領域の画像である。計測部76は、マッチング処理を実行することにより、4つの指定点の各々の対応点を算出する。つまり、計測部76は、4つの対応点を算出する。情報生成部70は、制御部73から、計測部76によって算出された対応点情報を受け取る。情報生成部70は、4つの対応点の各々を含む領域を第2の画像から切り出す。情報生成部70は、4つの領域を第2の画像から切り出すことにより、4つの指定点情報を生成する。
指定点情報が生成された後、表示位置算出部72は、指定点情報の表示位置を算出する(ステップS10)。表示位置算出部72は、各指定点の周辺において、指定点情報と指定点とが重ならない領域を算出する。表示位置算出部72は、その領域の座標情報を制御部73に通知する。制御部73は、指定点情報が表示される領域の座標情報を表示制御部77に通知する。
指定点情報の表示位置が算出された後、表示制御部77は、指定点情報をモニタ4に表示させる。モニタ4は、指定点情報を第1の画像上に表示する(ステップS11)。
指定点情報が表示された後、計測部76は、4つの指定点に基づいて、3次元計測を実行する(ステップS12)。ステレオ計測の場合、図4を参照して説明した計測原理に従って3次元計測が実行される。計測部76は、計測結果を制御部73に通知する。制御部73は、計測結果を表示制御部77に通知する。
3次元計測が終了した後、表示制御部77は、計測結果をモニタ4に表示させる(ステップS13)。ステップS13における処理が終了したとき、計測処理が終了する。
図5に示す計測処理が開始されたとき、非表示期間が開始される。ステップS11において指定点情報が表示されたとき、非表示期間が終了する。
図5は、処理の流れの1つの例を示す。本発明の実施形態の効果を得るための処理の流れは、図5に限らない。例えば、ステップS12における処理は、ステップS8における処理とステップS9における処理との間に実行されてもよい。
複数の指定点の一部のみの指定点情報が表示されてもよい。例えば、情報生成部70は、前述した信頼度を指定点毎に算出してもよい。情報生成部70は、信頼度が低い指定点のみの指定点情報を生成してもよい。表示制御部77は、信頼度が低い指定点のみの指定点情報をモニタ4に表示させてもよい。
図6は、モニタ4に表示された画像を示す。第1の画像G10が表示される。各指定点のマークが第1の画像G10上の各指定点の位置に表示される。図6では、4つのマークM10,M11,M12,M13が表示される。カーソルC10および計測結果R10が第1の画像G10上に表示される。4番目の指定点が指定されたときの状態が図6に示されている。4つの指定点情報I10,I11,I12,I13が第1の画像G10上に表示される。各指定点情報は、各指定点の対応点の周辺の画像である。各指定点情報は、第1の画像G10と対になる第2の画像から一部の領域を切り出すことにより生成される。各指定点情報は、対応点のマークを含む。対応点のマークは、第2の画像における対応点の位置に表示される。
指定点情報I10は、マークM10の近傍に表示され、マークM10と重ならない。指定点情報I11は、マークM11の近傍に表示され、マークM11と重ならない。指定点情報I12は、マークM12の近傍に表示され、マークM12と重ならない。指定点情報I13は、マークM13の近傍に表示され、マークM13と重ならない。各指定点情報は、拡大画像または縮小画像であってもよい。
計測結果R10は、各指定点と重ならない。また、計測結果R10は、各指定点情報と重ならない。表示位置算出部72は、各指定点情報の位置に基づいて、計測結果R10を表示する位置を算出する。例えば、表示位置算出部72は、計測結果R10が各指定点情報と重ならないような位置を算出する。表示制御部77は、表示位置算出部72によって算出された位置に計測結果R10を表示させる。
指定点情報I10,I11,I12,I13は、互いに重ならない。例えば、表示位置算出部72は、複数の指定点情報が互いに重ならないような位置を算出する。表示制御部77は、表示位置算出部72によって算出された位置に複数の指定点情報を表示させる。
ユーザーは、指定点情報を確認することにより、指定点の位置が被写体の計測に適しているか否かを判断する。第1の画像における指定点の位置と、第2の画像における対応点の位置とが同じである場合、ユーザーは、指定点の位置が被写体の計測に適していると判断することができる。第1の画像における指定点の位置と、第2の画像における対応点の位置とが異なる場合、ユーザーは、指定点の位置が被写体の計測に適していないと判断することができる。
指定点の位置が被写体の計測に適していない場合、ユーザーは任意の指定点を指定し直してもよい。あるいは、新たな画像が取得され、かつその画像を用いて計測処理が再度実行されてもよい。これらの対応によって、内視鏡装置1は、より正確な計測結果を得ることができる。
ユーザーが任意の指定点を指定し直す場合、ユーザーは、修正したい指定点を選択する。例えば、タッチパネルが使用できる場合、ユーザーは、修正したい指定点の位置をタッチしてもよい。例えば、ユーザーがリモコンでカーソルを動かしている場合、ユーザーは、修正したい指定点の位置までカーソルを動かし、かつ決定ボタンを押してもよい。例えば、モニタ4上に修正ボタンがある場合、ユーザーは、修正したい指定点をタッチパネルまたはリモコン等により選択し、かつ修正ボタンを押してもよい。修正対象の指定点が選択された後の修正作業において、指定点の指定は完了していない。そのため、指定点情報は非表示となる。
第1の実施形態において、全ての指定点の指定が完了したとき、指定点情報が表示される。1回目の計測に使用された画像と同じ画像を使用して2回目の計測が実行される場合、1回目の計測において表示された指定点情報は不要である。例えば、ユーザーが2回目の計測への移行を装置に伝えたとき、表示制御部77は、1回目の計測において表示された指定点情報を非表示としてもよい。例えば、次の計測への移行を指示するためのボタンがモニタ4上に表示されてもよい。あるいは、1回目の計測において表示された指定点情報を非表示とするためのボタンがモニタ4上に表示されてもよい。
図7は、図5に示す計測処理と異なる計測処理の手順を示す。図5に示す処理と同じ処理の説明を省略する。
図5に示す計測処理では、全ての指定点が設定された後、指定点情報の表示位置が算出される。図7に示す計測処理では、1つの指定点が設定されるたびに、指定点情報の表示位置が算出される。
ステップS5の後、表示位置算出部72は、ステップS5において設定された指定点P1の指定点情報の表示位置を算出する(ステップS10a)。ステップS10aの後、ステップS6における処理が実行される。
ステップS6の後、表示位置算出部72は、ステップS6において設定された指定点P2の指定点情報の表示位置を算出する(ステップS10b)。ステップS10bの後、ステップS7における処理が実行される。
ステップS7の後、表示位置算出部72は、ステップS7において設定された指定点P3の指定点情報の表示位置を算出する(ステップS10c)。ステップS10cの後、ステップS8における処理が実行される。
ステップS8の後、表示位置算出部72は、ステップS8において設定された指定点P4の指定点情報の表示位置を算出する(ステップS10d)。ステップS10dの後、ステップS9における処理が実行される。
表示位置算出部72は、ステップS11において、各指定点情報が各指定点と重ならないことを確認してもよい。各指定点情報が各指定点と重ならないことが確認できた場合、表示位置算出部72は、ステップS11において指定点情報をモニタ4に表示させてもよい。少なくとも1つの指定点情報が少なくとも1つの指定点と重なる場合、表示位置算出部72は、指定点情報が指定点と重ならないような位置を再度算出してもよい。
図5または図7に示す処理において、1つの指定点が設定されるたびに、その指定点の指定点情報が生成されてもよい。その場合、ユーザーによって最後に指定された指定点が画像上に設定された後、指定点情報が表示される。
図8は、2以上の指定点が設定される場合に実行される計測処理の手順を示す。図8は、図5に示す処理を一般化した処理を示す。図5に示す処理と同じ処理の説明を省略する。4つの指定点が設定される場合、図8に示す処理は図5に示す処理と同様である。図5に示す処理と同じ処理の説明を省略する。
ステップS4の後、変数Nが1に設定される(ステップS14)。ステップS14の後、指定点設定部74は、図5に示すステップS5における処理と同様の処理を実行することにより、画像上のカーソルの位置情報が示す位置に指定点PNを設定する(ステップS15)。指定点PNは、N番目に設定される指定点である。
ステップS15の後、タイミング判断部71は、最後の指定点の位置情報が操作部6に入力されたか否かを判断する。つまり、タイミング判断部71は、指定点の指定が完了したか否かを判断する(ステップS16)。計測処理に必要な指定点の数は、計測モード毎に異なる。そのため、タイミング判断部71は、設定された計測モードと、ユーザーによって既に指定された指定点の数とに基づいて、指定点の指定が完了したか否かを判断することができる。
指定点の指定が完了したことを示す明示的な指示がユーザーによって操作部6に入力されたとき、タイミング判断部71は、指定点の指定が完了したと判断してもよい。例えば、面積計測において、タイミング判断部71は、ユーザーからの明示的な指示に基づいて、指定点の指定が完了したと判断することができる。
ステップS16において、指定点の指定が完了していないとタイミング判断部71が判断した場合、変数Nに1が加算される(ステップS17)。ステップS17の後、ステップS15において次の指定点が設定される。
ステップS16において、指定点の指定が完了したとタイミング判断部71が判断した場合、情報生成部70は、図5に示すステップS9における処理と同様の処理を実行することにより、N個の指定点の各々の指定点情報を生成する(ステップS9a)。ステップS9aの後、ステップS10における処理が実行される。
本発明の各態様の内視鏡装置の作動方法は、第1から第5のステップを有する。撮像素子28は、第1のステップ(ステップS1)において、被写体の画像を取得する。指定点設定部74は、第2のステップ(ステップS5からS8)において、操作部6に入力された位置情報に基づいて、画像上に複数の指定点を設定する。表示制御部77は、第3のステップ(ステップS3)において、画像をモニタ4に表示させる。計測部76は、第4のステップ(ステップS12)において、複数の指定点に基づいて被写体の計測を実行する。複数の指定点に含まれる少なくとも1つの指定点の位置情報が操作部6に入力された後、表示制御部77は、非表示期間を除く期間のみにおいて、第5のステップ(ステップS11)において、指定点情報をモニタ4に表示させる。本発明の各態様の内視鏡装置の作動方法は、第1から第5のステップ以外のステップを有する必要はない。
第1の実施形態の内視鏡装置1において、表示制御部77は、非表示期間を除く期間のみにおいて、指定点情報をモニタ4に表示させる。指定点情報は、少なくとも1つの指定点の位置が被写体の計測に適しているか否かを示す。非表示期間は、第1の指定点の位置情報が操作部6に入力されてから、第2の指定点の位置情報が操作部6に入力されるまでの期間の少なくとも一部を含む。少なくとも第1の指定点の指定が終了した後、指定点情報が表示される。指定点情報は、指定点を指定するためのユーザーの操作を妨げにくい。そのため、内視鏡装置1は、指定点の位置が被写体の計測に適しているか否かを示す情報をユーザーに提示することができ、かつ装置の操作性の低下を抑制することができる。
指定点情報が表示されるため、ユーザーは、正しい計測結果が得られるか否かを判断しやすい。指定点の位置が計測に適していない場合、ユーザーは計測をやり直すことができる。
表示制御部77は、指定点情報が複数の指定点と重ならない位置に指定点情報を表示させる。そのため、ユーザーが指定点の位置を確認するとき、指定点情報は視認性を低下させにくい。そのため、ユーザーの作業効率が悪化しにくい。例えば、対応点の周辺の画像が指定点情報として表示される場合、ユーザーは、指定点の位置と対応点の位置とを比較することにより、指定点の位置が計測に適しているか否かを判断することが考えられる。指定点が指定点情報によって隠されると、ユーザーは指定点の位置と対応点の位置とを比較することができない。仮に、指定点に重なっている指定点情報をユーザーが動かせる場合でも、作業が煩雑になる。指定点情報が指定点と重ならないため、操作性がさらに向上する。
同様に、計測結果が指定点情報と重ならないため、操作性がさらに向上する。複数の指定点情報が互いに重ならないため、操作性がさらに向上する。
タイミング判断部71は、計測モードに基づいて、指定点の指定が終了するタイミング、すなわち非表示期間が終了するタイミングを判断する。ユーザーは、指定点の指定が終了したことを装置に伝える必要がない。そのため、ユーザーの負担が軽減される。
(第1の実施形態の変形例)
本発明の第1の実施形態の変形例を説明する。図9は、モニタ4に表示された画像を示す。図6に示す部分と同じ部分の説明を省略する。
図6に示す指定点情報I10,I11,I12,I13の代わりに指定点情報I20が第1の画像G10上に表示される。指定点情報は、全ての指定点の対応点の周辺の画像を含む。各指定点情報は、第1の画像G10と対になる第2の画像から一部の領域を切り出すことにより生成される。例えば、指定点情報は、第2の画像上の全ての対応点を含む領域の縮小画像である。
情報生成部70は、計測モードに基づいて、第1の指定点情報と第2の指定点情報とのいずれか1つを選択してもよい。第1の指定点情報は、各指定点の指定点情報である。第1の指定点情報は、第1の画像G10と対になる第2の画像から各指定点の対応点を含む領域を切り出すことにより生成される。第2の指定点情報は、全ての指定点に対応する指定点情報である。第2の指定点情報は、第1の画像G10と対になる第2の画像から全ての指定点の対応点を含む領域を切り出すことにより生成される。表示制御部77は、選択された指定点情報をモニタ4に表示させてもよい。
例えば、計測モードが2点間計測または線基準計測である場合、情報生成部70は、第1の指定点情報を選択する。つまり、指定点の数が少ない計測モードが設定された場合、情報生成部70は、第1の指定点情報を選択する。計測モードが面積計測または面基準計測である場合、情報生成部70は、第2の指定点情報を選択する。つまり、指定点の数が多い計測モードが設定された場合、情報生成部70は、第2の指定点情報を選択する。
情報生成部70は、指定点の位置に基づいて、第1の指定点情報と第2の指定点情報とのいずれか1つを選択してもよい。例えば、情報生成部70は、複数の指定点によって囲まれる領域の大きさと画像の大きさとを比較する。その領域は、最も外側に配置された3つ以上の指定点を結ぶ線分によって囲まれる領域である。その領域の大きさが画像の大きさの2分の1以上である場合、情報生成部70は、第1の指定点情報を選択する。その領域の大きさが画像の大きさの2分の1よりも小さい場合、情報生成部70は、第2の指定点情報を選択する。
図10および図11は、モニタ4に表示された画像を示す。図6に示す部分と同じ部分の説明を省略する。図10において、4つの指定点によって囲まれる領域の大きさは第1の画像G10の大きさの2分の1以上である。この場合、情報生成部70は、第1の指定点情報を選択する。つまり、1つの対応点を含む指定点情報が指定点毎に表示される。図10において、指定点情報は省略されている。
図11において、4つの指定点によって囲まれる領域の大きさは第1の画像G10の大きさの2分の1よりも小さい。この場合、情報生成部70は、第2の指定点情報を選択する。つまり、全ての指定点の対応点を含む指定点情報が表示される。図11において、指定点情報は省略されている。
複数の指定点の密度によって指定点情報の表示形態が変化する。そのため、ユーザーは指定点の位置と対応点の位置とを比較しやすい。
表示制御部77は、各指定点の指定点情報を指定点から水平方向または垂直方向に離れた位置に表示させてもよい。図12は、モニタ4に表示された画像を示す。図6に示す部分と同じ部分の説明を省略する。各指定点と対応点とは、水平方向または垂直方向に並ぶ。マークM10が示す指定点と、指定点情報I10における対応点とは、水平方向に並ぶ。マークM11が示す指定点と、指定点情報I11における対応点とは、垂直方向に並ぶ。マークM12が示す指定点と、指定点情報I12における対応点とは、垂直方向に並ぶ。マークM13が示す指定点と、指定点情報I13における対応点とは、水平方向に並ぶ。
ユーザーは、指定点の位置と対応点の位置とを比較することにより、指定点の位置が計測に適しているか否かを判断する。指定点と対応点とが水平方向または垂直方向に並ぶため、ユーザーは指定点の位置と対応点の位置とを比較しやすい。
図9と同様に、各指定点情報が、指定点と指定点とを結ぶ直線と重ならなくてもよい。例えば、表示位置算出部72は、各指定点の位置に基づいて、指定点情報を表示する位置を算出する。例えば、表示位置算出部72は、指定点情報が上記の直線と重ならないような位置を算出する。表示制御部77は、表示位置算出部72によって算出された位置に指定点情報を表示させる。
指定点と指定点とを結ぶ直線と重ならない位置に指定点情報が表示される。そのため、ユーザーは指定点の位置と対応点の位置とを比較しやすい。
指定点情報の表示位置を制御する方法は上記の方法に限らない。例えば、表示制御部77は、指定点情報の種類または指定点の信頼度に基づいて指定点情報の表示位置を制御してもよい。
(第2の実施形態)
第1の実施形態の内視鏡装置1を使用して、本発明の第2の実施形態を説明する。第1の指定点の位置情報が操作部6に入力された後、表示制御部77は、第1の指定点の指定点情報をモニタ4に表示させる。第1の指定点の指定点情報がモニタ4に表示された後、表示制御部77は、第1の指定点の指定点情報を非表示にさせる。非表示期間は、第1の指定点の指定点情報が非表示になってから、第2の指定点の位置情報が操作部6に入力されるまでの期間の全てを含む。第1の指定点は、最初に設定される指定点とは限らない。第2の指定点は、2番目に設定される指定点とは限らない。第2の指定点は、第1の指定点の次に設定される指定点である。
第1の指定点の位置情報が操作部6に入力されてから非表示期間が開始されるまで、表示制御部77は、指定点情報をモニタ4に表示させる。指定点情報の表示期間は、所定の長さの期間である。第1の指定点の位置情報が操作部6に入力されたときから所定時間が経過するまで、表示制御部77は、指定点情報をモニタ4に表示させる。所定時間が経過したとき、非表示期間が開始される。指定点情報が表示されている間、ユーザーの操作にかかわらず、指定点設定部74は指定点の設定を停止する。指定点情報が表示されている間、表示制御部77は、ユーザーの操作にかかわらず、カーソルの表示位置を固定してもよい。つまり、指定点情報が表示されている間、カーソルの移動が停止してもよい。
図13は、計測処理の手順を示す。図8に示す処理と同じ処理の説明を省略する。
ステップS15の後、情報生成部70は、指定点情報を生成する(ステップS9b)。例えば、指定点情報は、各指定点の対応点の周辺領域の画像である。計測部76は、マッチング処理を実行することにより、ステップS15において設定された指定点PNの対応点を算出する。情報生成部70は、制御部73から、計測部76によって算出された対応点情報を受け取る。情報生成部70は、対応点を含む領域を第2の画像から切り出すことにより、指定点情報を生成する。
指定点情報が生成された後、表示位置算出部72は、指定点情報の表示位置を算出する(ステップS10b)。指定点情報の表示位置が算出された後、表示制御部77は、指定点情報をモニタ4に表示させる(ステップS11b)。図13に示す計測処理では、1つの指定点が設定されるたびに、指定点情報が生成され、かつ指定点情報が表示される。
指定点情報が表示された後、タイミング判断部71は、所定時間待機する(ステップS20)。表示制御部77は、指定点情報をモニタ4に表示させ続ける。タイミング判断部71は、ステップS11bの処理が実行されたときから経過した時間に基づいて、非表示期間を開始するタイミングを判断する。所定時間が経過したとき、タイミング判断部71は、非表示期間を開始すると判断する。つまり、タイミング判断部71は、指定点情報を非表示にすると判断する。タイミング判断部71は、判断結果を制御部73に通知する。制御部73は、その判断結果に基づいて、指定点情報の非表示を表示制御部77に指示する。
ステップS20において、所定時間の情報が使用される。所定時間の情報は、非表示期間の開始タイミングの判断に使用される。例えば、所定時間の情報は、内視鏡装置1のメモリに予め記録されている。ユーザーが操作部6に所定時間の情報を入力してもよい。
所定時間が経過した後、表示制御部77は、指定点情報を非表示にさせる(ステップS21)。モニタ4は、指定点情報の表示を停止する。指定点情報が非表示になった後、ステップS16における処理が実行される。
ステップS16において、指定点の指定が完了していないとタイミング判断部71が判断した場合、図8に示す処理と同様に、ステップS17における処理が実行される。ステップS16において、指定点の指定が完了したとタイミング判断部71が判断した場合、ステップS12における処理が実行される。
図13に示す計測処理が開始されたとき、非表示期間が開始される。ステップS11bにおいて指定点情報が表示されたとき、非表示期間が終了する。指定点情報が表示され、かつ所定時間が経過したとき、ステップS21において指定点情報が非表示になる。このとき、非表示期間が開始される。次の指定点情報が表示されるまで、非表示期間が継続する。
ステップS15において指定点が設定されてからステップS21において非表示期間が開始されるまで、指定点設定部74は指定点の指定を受け付けない。この期間において操作部6に入力された指定点の位置情報は無効になる。この期間において指定点設定部74は指定点の設定を停止する。非表示期間において、指定点設定部74は指定点の指定を受け付け、かつ指定点を設定する。
図14は、図13に示す計測処理と異なる計測処理の手順を示す。図13に示す処理と同じ処理の説明を省略する。
ステップS16において、指定点の指定が完了したとタイミング判断部71が判断した場合、図8に示す処理と同様に、ステップS9a、ステップS10、およびステップS11の各々における処理が実行される。ステップS11の後、ステップS12における処理が実行される。
図13に示す計測処理において、全ての指定点の指定が完了した後、指定点情報は表示されない。図14に示す計測処理において、全ての指定点の指定が完了した後、全ての指定点の各々の指定点情報が表示される。ユーザーは、最後に全ての指定点の位置を一括で確認することができる。
全ての指定点の指定が完了した後に実行される処理の態様は様々である。例えば、全ての指定点の指定が完了した後、全ての指定点の各々の指定点情報が所定時間だけ表示されてもよい。全ての指定点の指定が完了した後、信頼度が低い指定点のみの指定点情報が表示されてもよい。
図15から図18は、図13に示す計測処理が実行されたときのモニタ4の状態を示す。ステップS3において、図15(a)に示す第1の画像G10がモニタ4に表示される。ステップS4において、図15(a)に示すカーソルC10が第1の画像G10上に表示される。例えば、カーソルC10は矢印である。カーソルC10の先端の位置がカーソルC10の位置である。
ユーザーは、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。ステップS15において指定点が第1の画像G10上に設定されたとき、図15(b)に示すマークM10が第1の画像G10上に表示される。マークM10の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図15(b)に示す指定点情報I10が第1の画像G10上に表示される。指定点情報I10は、マークM10と重ならない。ユーザーは、マークM10が示す指定点と、指定点情報I10が示す対応点とを比較する。指定点情報I10が表示されてから所定時間が経過したとき、ステップS21において、指定点情報I10は非表示になる(図15(c))。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる(図16(a))。ステップS15において指定点が第1の画像G10上に設定されたとき、図16(b)に示すマークM11が第1の画像G10上に表示される。マークM11の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図16(b)に示す指定点情報I11が第1の画像G10上に表示される。指定点情報I11は、マークM11と重ならない。ユーザーは、マークM11が示す指定点と、指定点情報I11が示す対応点とを比較する。指定点情報I11が表示されてから所定時間が経過したとき、ステップS21において、指定点情報I11は非表示になる(図16(c))。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる(図17(a))。ステップS15において指定点が第1の画像G10上に設定されたとき、図17(b)に示すマークM12が第1の画像G10上に表示される。マークM12の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図17(b)に示す指定点情報I12が第1の画像G10上に表示される。指定点情報I12は、マークM12と重ならない。ユーザーは、マークM12が示す指定点と、指定点情報I12が示す対応点とを比較する。指定点情報I12が表示されてから所定時間が経過したとき、ステップS21において、指定点情報I12は非表示になる(図17(c))。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる(図18(a))。ステップS15において指定点が第1の画像G10上に設定されたとき、図18(b)に示すマークM13が第1の画像G10上に表示される。マークM13の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図18(b)に示す指定点情報I13が第1の画像G10上に表示される。指定点情報I13は、マークM13と重ならない。ユーザーは、マークM13が示す指定点と、指定点情報I13が示す対応点とを比較する。面基準計測が内視鏡装置1に設定されている場合、4つの指定点が設定されたとき、全ての指定点の指定が完了する。指定点情報I13が表示されてから所定時間が経過したとき、ステップS21において、指定点情報I12は非表示になる(図18(c))。ステップS13において、図18(c)に示す計測結果R10が第1の画像G10上に表示される。
指定点情報の表示位置は様々である。指定点情報は、各指定点と重ならない。ユーザーが指定点の位置と対応点の位置とを比較しやすくするために、指定点情報が指定点から水平方向または垂直方向に離れた位置に表示されてもよい。計測結果が指定点情報と重ならない位置に表示されてもよい。複数の指定点情報が、互いに重ならない位置に表示されてもよい。指定点と指定点とを結ぶ直線と重ならない位置に指定点情報が表示されてもよい。
第2の実施形態の内視鏡装置1において、各指定点が指定された後、表示制御部77は、指定点情報をモニタ4に表示させる。ユーザーが指定点を指定するたびに、ユーザーは、指定点の位置が被写体の計測に適しているか否かを判断することができる。
各指定点の位置情報が操作部6に入力されたときから所定時間が経過するまで、表示制御部77は、指定点情報をモニタ4に表示させる。位置情報が所定時間のみ表示されるため、指定点を指定するためのユーザーの操作は妨げられにくい。そのため、内視鏡装置1は、装置の操作性の低下を抑制することができる。
指定点情報が表示されている間、指定点設定部74は指定点の設定を停止する。そのため、内視鏡装置1は、指定点の位置の確認をユーザーに促すことができる。
(第3の実施形態)
第1の実施形態の内視鏡装置1を使用して、本発明の第3の実施形態を説明する。表示制御部77は、操作部6に入力されるカーソルの位置情報(マーク位置情報)に基づいて、画像上にカーソルを表示させる。カーソルの位置情報は画像上のカーソルの位置を示す。指定点を指定する指示が操作部6に入力されたとき、指定点設定部74は、カーソルの位置情報が示すカーソルの位置に、複数の指定点に含まれる1つの指定点を設定する。カーソルの動きに基づいて非表示期間が設けられる。
非表示期間は、カーソルが画像上で移動している期間の全てを含む。移動中のマークが停止したとき、非表示期間が終了する。
カーソルが移動し始めたとき、非表示期間が開始される。カーソルが画像上で移動している間、非表示期間が継続する。カーソルが停止したとき、非表示期間が終了する。カーソルが移動している間、ユーザーが指定点を正確に指定することは難しい。そのため、ユーザーは、カーソルを停止させ、かつ指定点を指定する。カーソルが停止した後、表示制御部77は、指定点情報をモニタ4に表示させる。
図19は、計測処理の手順を示す。図8に示す処理と同じ処理の説明を省略する。
ステップS4の後、対応点表示処理が開始される(ステップS30)。ここでは、指定点情報として、画像から対応点を含む領域を切り出すことにより生成された対応点画像を表示する場合の例を示している。対応点表示処理については、後述する。対応点表示処理が開始された後、ステップS14における処理が実行される。
ステップS16において、指定点の指定が完了していないとタイミング判断部71が判断した場合、図8に示す処理と同様に、ステップS17における処理が実行される。ステップS16において、指定点の指定が完了したとタイミング判断部71が判断した場合、ステップS12における処理が実行される。
図20は、ステップS30における対応点表示処理の手順を示す。図20に示す対応点表示処理は、図19に示す計測処理と並行して実行される。
カーソル位置検出部78は、カーソルの位置を監視し、かつカーソルが停止しているか否かを判断する(ステップS301)。
ステップS301において、カーソルが停止しているとカーソル位置検出部78が判断した場合、制御部73は、対応点画像を表示中であるか否かを判断する(ステップS302)。対応点画像は、カーソルの位置の対応点を含む領域の画像である。対応点画像は、第2の画像の一部である。
ステップS302において、対応点画像を表示中であると制御部73が判断した場合、ステップS301における処理が実行される。ステップS302において、対応点画像を表示中ではないと制御部73が判断した場合、計測部76は、マッチング処理を実行することにより、カーソルの位置の対応点を算出する。情報生成部70は、制御部73から、計測部76によって算出された対応点情報を受け取る。情報生成部70は、対応点を含む領域を第2の画像から切り出すことにより、対応点画像を生成する(ステップS303)。
対応点画像が生成された後、表示位置算出部72は、対応点画像の表示位置を算出する(ステップS304)。表示位置算出部72は、カーソルの位置の周辺において、対応点画像とカーソルとが重ならない領域を算出する。表示位置算出部72は、その領域の座標情報を制御部73に通知する。制御部73は、対応点画像が表示される領域の座標情報を表示制御部77に通知する。
対応点画像の表示位置が算出された後、タイミング判断部71は、所定時間待機する(ステップS305)。タイミング判断部71は、ステップS304の処理が実行されたときから経過した時間に基づいて、非表示期間を終了するタイミングを判断する。所定時間が経過したとき、タイミング判断部71は、非表示期間を終了すると判断する。つまり、タイミング判断部71は、対応点画像を表示すると判断する。タイミング判断部71は、判断結果を制御部73に通知する。制御部73は、その判断結果に基づいて、対応点画像の表示を表示制御部77に指示する。
ステップS305において、所定時間の情報が使用される。所定時間の情報は、非表示期間の終了タイミングの判断に使用される。例えば、所定時間の情報は、内視鏡装置1のメモリに予め記録されている。ユーザーが操作部6に所定時間の情報を入力してもよい。
所定時間が経過した後、表示制御部77は、対応点画像をモニタ4に表示させる。モニタ4は、対応点画像を第1の画像上に表示する(ステップS306)。対応点画像が表示された後、ステップS301における処理が実行される。なお、ステップS305において、タイミング判断部71が所定時間待機する間は、表示制御部77はカーソルの移動を禁止してもよい。その場合、表示制御部77はステップS306の後にカーソルを移動可能としてもよい。また、ステップS305における待機中に表示制御部77がカーソルの移動を受け付ける場合には、表示制御部77は、ステップS305の処理を実行中にカーソルが動いたか否かを確認してもよい。ステップS305の処理を実行中にカーソルが動いた場合には処理がステップS301へ強制的に移行しても良い。
ステップS301において、カーソルが停止していないとカーソル位置検出部78が判断した場合、表示制御部77は、対応点画像を非表示にさせる(ステップS307)。モニタ4は、対応点画像の表示を停止する。対応点画像が非表示になった後、ステップS301における処理が実行される。カーソルが停止しておらず、かつ対応点画像が既に非表示になっている場合、ステップS307における処理は実行されない。
図20に示す対応点表示処理によれば、カーソルが移動し始めたとき、ステップS307における処理によって、対応点画像は非表示になる。カーソルが移動している間、非表示期間が継続する。つまり、対応点画像は表示されない。カーソルが停止したとき、非表示期間が終了する。つまり、ステップS303からステップS306における処理によって、対応点画像が表示される。カーソルが再度移動し始めたとき、ステップS307における処理によって、対応点画像は非表示になる。
一般的に、カーソルが停止しているとき、ユーザーは指定点を指定する。ユーザーが指定点を指定するとき、対応点画像が表示されている。その対応点画像は指定点情報と等価である。
ステップS16において、指定点の指定が完了したとタイミング判断部71が判断した場合、図20に示す対応点表示処理が終了してもよい。カーソルが移動している間、ユーザーが指定点を指定するための操作にかかわらず、指定点設定部74は指定点の設定を停止してもよい。例えば、カーソルが移動している間、指定点設定部74は指定点の指定を受け付けない。
全ての指定点の指定が完了した後に実行される処理の態様は様々である。例えば、全ての指定点の指定が完了した後、全ての指定点の各々の指定点情報が表示されてもよい。全ての指定点の指定が完了した後、全ての指定点の各々の指定点情報が所定時間だけ表示されてもよい。全ての指定点の指定が完了した後、信頼度が低い指定点のみの指定点情報が表示されてもよい。
図21から図25は、図19に示す計測処理が実行されたときのモニタ4の状態を示す。ステップS3において、図21(a)に示す第1の画像G10がモニタ4に表示される。ステップS4において、図21(a)に示すカーソルC10が第1の画像G10上に表示される。最初にカーソルC10が表示されたとき、カーソルC10は停止している。そのため、ステップS306において、図21(a)に示す対応点画像I30が第1の画像G10上に表示される。対応点画像I30は、カーソルC10と重ならない。
ユーザーは、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。カーソルC10が移動し始めたとき、ステップS307において、対応点画像I30は非表示になる。カーソルC10が移動している間、対応点画像は表示されない(図21(b))。カーソルC10が停止し、かつ所定時間が経過したとき、ステップS306において、図21(c)に示す対応点画像I31が第1の画像G10上に表示される。対応点画像I31は、カーソルC10と重ならない。
ステップS15において指定点が第1の画像G10上に設定されたとき、図22(a)に示すマークM10が第1の画像G10上に表示される。マークM10の位置は、カーソルC10の位置と同じである。マークM10は、対応点画像I31と重ならない。ユーザーが指定点を指定したとき、対応点画像I31は指定点の対応点の周辺領域を示す。ユーザーは、マークM10が示す指定点と、対応点画像I31が示す対応点とを比較する。対応点画像I31は、指定点情報である。ユーザーが指定点を指定した後、カーソルC10が動かない限り、対応点画像I31は表示され続ける。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。カーソルC10が移動し始めたとき、ステップS307において、対応点画像I31は非表示になる。カーソルC10が移動している間、対応点画像は表示されない(図22(b))。カーソルC10が停止し、かつ所定時間が経過したとき、ステップS306において、図22(c)に示す対応点画像I32が第1の画像G10上に表示される。対応点画像I32は、カーソルC10と重ならない。
ステップS15において指定点が第1の画像G10上に設定されたとき、図23(a)に示すマークM11が第1の画像G10上に表示される。マークM11の位置は、カーソルC10の位置と同じである。マークM11は、対応点画像I32と重ならない。ユーザーが指定点を指定したとき、対応点画像I32は指定点の対応点の周辺領域を示す。ユーザーは、マークM11が示す指定点と、対応点画像I32が示す対応点とを比較する。対応点画像I32は、指定点情報である。ユーザーが指定点を指定した後、カーソルC10が動かない限り、対応点画像I32は表示され続ける。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。カーソルC10が移動し始めたとき、ステップS307において、対応点画像I32は非表示になる。カーソルC10が移動している間、対応点画像は表示されない(図23(b))。カーソルC10が停止し、かつ所定時間が経過したとき、ステップS306において、図23(c)に示す対応点画像I33が第1の画像G10上に表示される。対応点画像I33は、カーソルC10と重ならない。
ステップS15において指定点が第1の画像G10上に設定されたとき、図24(a)に示すマークM12が第1の画像G10上に表示される。マークM12の位置は、カーソルC10の位置と同じである。マークM12は、対応点画像I33と重ならない。ユーザーが指定点を指定したとき、対応点画像I33は指定点の対応点の周辺領域を示す。ユーザーは、マークM12が示す指定点と、対応点画像I33が示す対応点とを比較する。対応点画像I33は、指定点情報である。ユーザーが指定点を指定した後、カーソルC10が動かない限り、対応点画像I33は表示され続ける。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。カーソルC10が移動し始めたとき、ステップS307において、対応点画像I33は非表示になる。カーソルC10が移動している間、対応点画像は表示されない(図24(b))。カーソルC10が停止し、かつ所定時間が経過したとき、ステップS306において、図24(c)に示す対応点画像I34が第1の画像G10上に表示される。対応点画像I34は、カーソルC10と重ならない。
ステップS15において指定点が第1の画像G10上に設定されたとき、図25に示すマークM13が第1の画像G10上に表示される。マークM13の位置は、カーソルC10の位置と同じである。マークM13は、対応点画像I34と重ならない。ユーザーが指定点を指定したとき、対応点画像I34は指定点の対応点の周辺領域を示す。ユーザーは、マークM13が示す指定点と、対応点画像I34が示す対応点とを比較する。対応点画像I34は、指定点情報である。面基準計測が内視鏡装置1に設定されている場合、4つの指定点が設定されたとき、全ての指定点の指定が完了する。ステップS13において、図25に示す計測結果R10が第1の画像G10上に表示される。
指定点情報の表示位置は様々である。指定点情報は、各指定点と重ならない。ユーザーが指定点の位置と対応点の位置とを比較しやすくするために、指定点情報が指定点から水平方向または垂直方向に離れた位置に表示されてもよい。計測結果が指定点情報と重ならない位置に表示されてもよい。複数の指定点情報が、互いに重ならない位置に表示されてもよい。指定点と指定点とを結ぶ直線と重ならない位置に指定点情報が表示されてもよい。
第3の実施形態の内視鏡装置1において、カーソルが停止した後、表示制御部77は、指定点情報をモニタ4に表示させる。ユーザーが指定点を指定するためにカーソルを停止させたとき、ユーザーは、指定点の位置が被写体の計測に適しているか否かをリアルタイムに判断することができる。
カーソルが停止したときから所定時間が経過した後、表示制御部77は、指定点情報をモニタ4に表示させる。カーソルが移動している間、指定点情報は表示されない。また、カーソルが停止したときから所定時間が経過するまで、指定点情報は表示されない。そのため、ユーザーが一定時間内に小刻みにカーソルの移動とカーソルの停止とを繰り返したとしても、その都度、指定点情報が表示されることを防ぐことができ、指定点を指定するためのユーザーの操作は妨げられにくい。その結果、内視鏡装置1は、装置の操作性の低下を抑制することができる。
ユーザーが指定点を指定するための操作を行っている間、既に設定された指定点の指定点情報は表示されず、カーソルの位置の指定点情報のみが表示される。そのため、指定点を指定するためのユーザーの操作は妨げられにくい。その結果、内視鏡装置1は、装置の操作性の低下を抑制することができる。
カーソルが移動している間、指定点設定部74は指定点の設定を停止する。カーソルが停止しているときのみ、ユーザーは、指定点を指定することができる。そのため、ユーザーが指定点を正確に指定しやすい。
(第3の実施形態の変形例)
本発明の第3の実施形態の変形例を説明する。非表示期間は、カーソルが画像上で移動している期間の全てを含む。第1の指定点を指定する指示が操作部6に入力されたとき、非表示期間が終了する。第1の指定点を指定する指示が操作部6に入力された後、カーソルの動きに基づいて非表示期間が開始される。第2の指定点を指定する指示が操作部6に入力されたとき、非表示期間が終了する。
カーソルが移動し始めたとき、非表示期間が開始される。指定点情報が表示されたとき、非表示期間が終了する。カーソルが移動している間、ユーザーが指定点を正確に指定することは難しい。そのため、ユーザーは、カーソルを停止させ、かつ指定点を指定する。指定点が指定された後、表示制御部77は、指定点情報をモニタ4に表示させる。
図26は、計測処理の手順を示す。図13に示す処理と同じ処理の説明を省略する。
図13に示す計測処理と同様に、ステップS15において指定点PNが設定された後、ステップS9b、ステップS10b、ステップS11bの各々における処理が実行される。ステップS11bにおいて、指定点情報が画像上に表示される。指定点情報が表示された後、タイミング判断部71は、ステップS16において、指定点の指定が完了したか否かを判断する。
ステップS16において、指定点の指定が完了したとタイミング判断部71が判断した場合、図13に示す計測処理と同様に、ステップS12における処理が実行される。ステップS16において、指定点の指定が完了していないとタイミング判断部71が判断した場合、カーソル位置検出部78は、カーソルの位置を監視し、かつカーソルが動いたか否かを判断する(ステップS40)。
ステップS40において、カーソルが停止しているとタイミング判断部71が判断した場合、ステップS40における判断が継続する。ステップS40において、カーソルが動いたとタイミング判断部71が判断した場合、タイミング判断部71は、非表示期間を開始すると判断する。つまり、タイミング判断部71は、指定点情報を非表示にすると判断する。タイミング判断部71は、判断結果を制御部73に通知する。制御部73は、その判断結果に基づいて、指定点情報の非表示を表示制御部77に指示する。
表示制御部77は、指定点情報を非表示にさせる(ステップS41)。モニタ4は、指定点情報の表示を停止する。指定点情報が非表示になった後、ステップS17における処理が実行される。
図26に示す計測処理が開始されたとき、非表示期間が開始される。ステップS11bにおいて指定点情報が表示されたとき、非表示期間が終了する。カーソルが動いたとき、ステップS41において指定点情報が非表示になる。このとき、非表示期間が開始される。ユーザーがカーソルを停止させ、かつ指定点を指定した後、ステップS11bにおいて指定点情報が表示される。このとき、非表示期間が終了する。
カーソルが移動している間、ユーザーが指定点を指定するための操作にかかわらず、指定点設定部74は指定点の設定を停止してもよい。例えば、カーソルが移動している間、指定点設定部74は指定点の指定を受け付けない。
全ての指定点の指定が完了した後に実行される処理の態様は様々である。例えば、全ての指定点の指定が完了した後、全ての指定点の各々の指定点情報が所定時間だけ表示されてもよい。全ての指定点の指定が完了した後、信頼度が低い指定点のみの指定点情報が表示されてもよい。
図27から図30は、図26に示す計測処理が実行されたときのモニタ4の状態を示す。ステップS3において、図27(a)に示す第1の画像G10がモニタ4に表示される。ステップS4において、図27(a)に示すカーソルC10が第1の画像G10上に表示される。
ユーザーは、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。ステップS15において指定点が第1の画像G10上に設定されたとき、図27(b)に示すマークM10が第1の画像G10上に表示される。マークM10の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図27(b)に示す指定点情報I10が第1の画像G10上に表示される。指定点情報I10は、マークM10と重ならない。ユーザーは、マークM10が示す指定点と、指定点情報I10が示す対応点とを比較する。カーソルC10が停止している間、指定点情報I10は表示され続ける。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。カーソルC10が移動し始めたとき、ステップS41において、指定点情報I10は非表示になる。カーソルC10が移動している間、指定点情報は表示されない(図27(c))。ユーザーは、指定点を指定したい位置でカーソルC10を停止させる(図28(a))。
ステップS15において指定点が第1の画像G10上に設定されたとき、図28(b)に示すマークM11が第1の画像G10上に表示される。マークM11の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図27(b)に示す指定点情報I11が第1の画像G10上に表示される。指定点情報I11は、マークM11と重ならない。ユーザーは、マークM11が示す指定点と、指定点情報I11が示す対応点とを比較する。カーソルC10が停止している間、指定点情報I11は表示され続ける。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。カーソルC10が移動し始めたとき、ステップS41において、指定点情報I10は非表示になる。カーソルC10が移動している間、指定点情報は表示されない(図28(c))。ユーザーは、指定点を指定したい位置でカーソルC10を停止させる(図29(a))。
ステップS15において指定点が第1の画像G10上に設定されたとき、図29(b)に示すマークM12が第1の画像G10上に表示される。マークM12の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図29(b)に示す指定点情報I12が第1の画像G10上に表示される。指定点情報I12は、マークM12と重ならない。ユーザーは、マークM12が示す指定点と、指定点情報I12が示す対応点とを比較する。カーソルC10が停止している間、指定点情報I12は表示され続ける。
ユーザーは、次の指定点を指定するために、操作部6を操作することによりカーソルC10を第1の画像G10上で移動させる。カーソルC10が移動し始めたとき、ステップS41において、指定点情報I10は非表示になる。カーソルC10が移動している間、指定点情報は表示されない(図29(c))。ユーザーは、指定点を指定したい位置でカーソルC10を停止させる(図30(a))。
ステップS15において指定点が第1の画像G10上に設定されたとき、図30(b)に示すマークM13が第1の画像G10上に表示される。マークM13の位置は、カーソルC10の位置と同じである。その後、ステップS11bにおいて、図30(b)に示す指定点情報I13が第1の画像G10上に表示される。指定点情報I13は、マークM13と重ならない。ユーザーは、マークM13が示す指定点と、指定点情報I13が示す対応点とを比較する。面基準計測が内視鏡装置1に設定されている場合、4つの指定点が設定されたとき、全ての指定点の指定が完了する。ステップS13において、図30(b)に示す計測結果R10が第1の画像G10上に表示される。
指定点情報の表示位置は様々である。指定点情報は、各指定点と重ならない。ユーザーが指定点の位置と対応点の位置とを比較しやすくするために、指定点情報が指定点から水平方向または垂直方向に離れた位置に表示されてもよい。計測結果が指定点情報と重ならない位置に表示されてもよい。複数の指定点情報が、互いに重ならない位置に表示されてもよい。指定点と指定点とを結ぶ直線と重ならない位置に指定点情報が表示されてもよい。
第3の実施形態の変形例の内視鏡装置1において、カーソルが停止し、かつ指定点を指定する指示が操作部6に入力された後、表示制御部77は、指定点情報をモニタ4に表示させる。ユーザーが指定点を探すとき、指定点情報は非表示となるため、指定点を指定するためのユーザーの操作は妨げられにくい。その結果、内視鏡装置1は、装置の操作性の低下を抑制することができる。
指定点が指定されるたびに指定点情報が表示される。ユーザーは、指定点を指定するたびに指定点の位置を確認することができ、かつ指定点の妥当性を1点毎に判断することができる。
以上、本発明の好ましい実施形態を説明したが、本発明はこれら実施形態およびその変形例に限定されることはない。本発明の趣旨を逸脱しない範囲で、構成の付加、省略、置換、およびその他の変更が可能である。また、本発明は前述した説明によって限定されることはなく、添付のクレームの範囲によってのみ限定される。
1 内視鏡装置
2 内視鏡
3 装置本体
4 モニタ
5 筐体
6 操作部
8 内視鏡ユニット
9 CCU
10 制御装置
12 映像信号処理回路
13 ROM
14 RAM
15 カードインタフェース
16 外部機器インタフェース
17 制御インタフェース
18 CPU
20 挿入部
21 先端部
22 湾曲部
23 可撓管部
28 撮像素子
70 情報生成部
71 タイミング判断部
72 表示位置算出部
73 制御部
74 指定点設定部
75 計測モード設定部
76 計測部
77 表示制御部
78 カーソル位置検出部

Claims (14)

  1. 被写体の画像を取得する画像取得部と、
    入力装置に入力された位置情報に基づいて、前記画像上に複数の指定点を設定し、前記位置情報は前記画像における前記複数の指定点の各々の位置を示す指定点設定部と、
    前記画像および指定点情報を表示部に表示させ、前記指定点情報は、前記複数の指定点に含まれる少なくとも1つの前記指定点の位置が前記被写体の計測に適しているか否かを示す表示制御部と、
    前記複数の指定点に基づいて前記計測を実行する計測部と、
    を有し、
    前記複数の指定点に含まれる少なくとも1つの前記指定点の前記位置情報が前記入力装置に入力された後、前記表示制御部は、非表示期間を除く期間のみにおいて、前記指定点情報を前記表示部に表示させ、前記非表示期間は、前記複数の指定点に含まれる第1の指定点の前記位置情報が前記入力装置に入力されてから、前記複数の指定点に含まれる第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の少なくとも一部を含み、前記第2の指定点は前記第1の指定点と異なる
    ことを特徴とする計測装置。
  2. 前記複数の指定点のうち前記第1の指定点の前記位置情報が前記入力装置に最初に入力され、
    前記複数の指定点のうち前記第2の指定点の前記位置情報が前記入力装置に最後に入力され、
    前記非表示期間は、前記第1の指定点の前記位置情報が前記入力装置に入力されてから、前記第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の全てを含む
    ことを特徴とする請求項1に記載の計測装置。
  3. 計測モードに基づいて、前記第2の指定点の前記位置情報が前記入力装置に入力されたか否かを判断する判断部をさらに有し、
    前記第2の指定点の前記位置情報が前記入力装置に入力されたと前記判断部が判断したとき、前記非表示期間が終了し、
    前記計測部は、前記計測モードに基づく方法により前記被写体の計測を実行する
    ことを特徴とする請求項2に記載の計測装置。
  4. 前記第1の指定点の前記位置情報が前記入力装置に入力された後、前記表示制御部は、前記第1の指定点の前記指定点情報を前記表示部に表示させ、
    前記第1の指定点の前記指定点情報が表示された後、前記表示制御部は、前記第1の指定点の前記指定点情報を非表示にさせ、
    前記非表示期間は、前記第1の指定点の前記指定点情報が非表示になってから、前記第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の全てを含む
    ことを特徴とする請求項1に記載の計測装置。
  5. 前記第1の指定点の前記位置情報が前記入力装置に入力されたときから所定時間が経過するまで、前記表示制御部は、前記指定点情報を前記表示部に表示させる
    ことを特徴とする請求項4に記載の計測装置。
  6. 前記指定点情報が表示されている間、前記指定点設定部は前記指定点の設定を停止する
    ことを特徴とする請求項5に記載の計測装置。
  7. 前記表示制御部はさらに、前記入力装置に入力されるマーク位置情報に基づいて、前記画像上にマークを表示させ、前記マーク位置情報は前記画像上の前記マークの位置を示し、
    前記指定点を指定する指示が前記入力装置に入力されたとき、前記指定点設定部は、前記マーク位置情報が示す前記マークの前記位置に、前記複数の指定点に含まれる1つの前記指定点を設定し、
    前記マークの動きに基づいて前記非表示期間が設けられる
    ことを特徴とする請求項1に記載の計測装置。
  8. 前記非表示期間は、前記マークが前記画像上で移動している期間の全てを含み、
    移動中の前記マークが停止したとき、前記非表示期間が終了する
    ことを特徴とする請求項7に記載の計測装置。
  9. 前記非表示期間は、前記マークが前記画像上で移動している期間の全てを含み、
    前記第1の指定点を指定する前記指示が前記入力装置に入力されたとき、前記非表示期間が終了し、
    前記第1の指定点を指定する前記指示が前記入力装置に入力された後、前記マークの動きに基づいて前記非表示期間が開始され、
    前記第2の指定点を指定する前記指示が前記入力装置に入力されたとき、前記非表示期間が終了する
    ことを特徴とする請求項7に記載の計測装置。
  10. 前記マークが移動している間、前記指定点設定部は前記指定点の設定を停止する
    ことを特徴とする請求項7に記載の計測装置。
  11. 前記表示制御部は、前記指定点情報が前記複数の指定点と重ならない位置に前記指定点情報を表示させる
    ことを特徴とする請求項1に記載の計測装置。
  12. 前記画像取得部は、互いに視差を有する第1の画像および第2の画像を取得し、
    前記指定点設定部は、前記第1の画像上に前記複数の指定点を設定し、
    前記表示制御部は、前記第1の画像および前記指定点情報を前記表示部に表示させ、
    前記指定点情報は、前記第2の画像の少なくとも一部である
    ことを特徴とする請求項1に記載の計測装置。
  13. 画像取得部が被写体の画像を取得する第1のステップと、
    指定点設定部が、入力装置に入力された位置情報に基づいて、前記画像上に複数の指定点を設定し、前記位置情報は前記画像における前記複数の指定点の各々の位置を示す第2のステップと、
    表示制御部が前記画像を表示部に表示させる第3のステップと、
    計測部が前記複数の指定点に基づいて前記被写体の計測を実行する第4のステップと、
    前記複数の指定点に含まれる少なくとも1つの前記指定点の前記位置情報が前記入力装置に入力された後、前記表示制御部が、非表示期間を除く期間において、指定点情報を前記表示部に表示させ、前記指定点情報は、前記複数の指定点に含まれる少なくとも1つの前記指定点の位置が前記計測に適しているか否かを示し、前記非表示期間は、前記複数の指定点に含まれる第1の指定点の前記位置情報が前記入力装置に入力されてから、前記複数の指定点に含まれる第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の少なくとも一部を含み、前記第2の指定点は前記第1の指定点と異なる第5のステップと、
    を有することを特徴とする計測装置の作動方法。
  14. 被写体の画像を取得する第1のステップと、
    入力装置に入力された位置情報に基づいて、前記画像上に複数の指定点を設定し、前記位置情報は前記画像における前記複数の指定点の各々の位置を示す第2のステップと、
    前記画像を表示部に表示させる第3のステップと、
    前記複数の指定点に基づいて前記被写体の計測を実行する第4のステップと、
    前記複数の指定点に含まれる少なくとも1つの前記指定点の前記位置情報が前記入力装置に入力された後、非表示期間を除く期間において、指定点情報を前記表示部に表示させ、前記指定点情報は、前記複数の指定点に含まれる少なくとも1つの前記指定点の位置が前記計測に適しているか否かを示し、前記非表示期間は、前記複数の指定点に含まれる第1の指定点の前記位置情報が前記入力装置に入力されてから、前記複数の指定点に含まれる第2の指定点の前記位置情報が前記入力装置に入力されるまでの期間の少なくとも一部を含み、前記第2の指定点は前記第1の指定点と異なる第5のステップと、
    をコンピュータに実行させるためのプログラム。
JP2018148559A 2018-08-07 2018-08-07 計測装置、計測装置の作動方法、およびプログラム Pending JP2020024286A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018148559A JP2020024286A (ja) 2018-08-07 2018-08-07 計測装置、計測装置の作動方法、およびプログラム
CN201910666223.4A CN110858397A (zh) 2018-08-07 2019-07-19 测量装置、测量装置的工作方法以及存储介质
US16/527,776 US20200053296A1 (en) 2018-08-07 2019-07-31 Measurement device, method of operating measurement device, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018148559A JP2020024286A (ja) 2018-08-07 2018-08-07 計測装置、計測装置の作動方法、およびプログラム

Publications (1)

Publication Number Publication Date
JP2020024286A true JP2020024286A (ja) 2020-02-13

Family

ID=69406646

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018148559A Pending JP2020024286A (ja) 2018-08-07 2018-08-07 計測装置、計測装置の作動方法、およびプログラム

Country Status (3)

Country Link
US (1) US20200053296A1 (ja)
JP (1) JP2020024286A (ja)
CN (1) CN110858397A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022054400A1 (ja) * 2020-09-11 2022-03-17 富士フイルム株式会社 画像処理システム、プロセッサ装置、内視鏡システム、画像処理方法及びプログラム

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7045963B2 (ja) * 2018-08-30 2022-04-01 オリンパス株式会社 計測装置の作動方法、計測装置、およびプログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645870B2 (en) * 2005-03-31 2014-02-04 Adobe Systems Incorporated Preview cursor for image editing
US9984474B2 (en) * 2011-03-04 2018-05-29 General Electric Company Method and device for measuring features on or near an object
US10019812B2 (en) * 2011-03-04 2018-07-10 General Electric Company Graphic overlay for measuring dimensions of features using a video inspection device
US9842430B2 (en) * 2013-12-17 2017-12-12 General Electric Company Method and device for automatically identifying a point of interest on a viewed object
JP6599014B2 (ja) * 2016-08-26 2019-10-30 オリンパス株式会社 計測処理装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022054400A1 (ja) * 2020-09-11 2022-03-17 富士フイルム株式会社 画像処理システム、プロセッサ装置、内視鏡システム、画像処理方法及びプログラム

Also Published As

Publication number Publication date
US20200053296A1 (en) 2020-02-13
CN110858397A (zh) 2020-03-03

Similar Documents

Publication Publication Date Title
JP6323183B2 (ja) 画像処理装置および画像処理方法
JP5530225B2 (ja) 内視鏡装置およびプログラム
JP4873794B2 (ja) 画像処理計測装置及び計測内視鏡装置
JP2011158549A (ja) 内視鏡装置およびプログラム
US20110018987A1 (en) Endoscope apparatus and measuring method
JP2015129746A (ja) 異常の表面上の最深点を自動的に識別するための方法およびデバイス
US20200074666A1 (en) Method of operating measurement device, measurement device, and recording medium
WO2017199285A1 (ja) 画像処理装置及び画像処理方法
US20060176321A1 (en) Endoscope apparatus
JP2020024286A (ja) 計測装置、計測装置の作動方法、およびプログラム
JP5186286B2 (ja) 計測用内視鏡装置およびプログラム
JP5307407B2 (ja) 内視鏡装置およびプログラム
JP2006329684A (ja) 画像計測装置及び方法
JP2020126208A (ja) 3次元画像表示方法、3次元画像表示装置、およびプログラム
US11055865B2 (en) Image acquisition device and method of operating image acquisition device
US10432916B2 (en) Measurement apparatus and operation method of measurement apparatus
JP6081209B2 (ja) 内視鏡装置およびプログラム
JP5253109B2 (ja) 内視鏡装置および内視鏡画像用プログラム
JP5361246B2 (ja) 内視鏡装置およびプログラム
JP6400767B2 (ja) 計測内視鏡装置
JP5602449B2 (ja) 内視鏡装置
US20120100512A1 (en) Inspection apparatus and inspection method
JP2007174355A (ja) ディスプレイの評価装置、評価方法及びプログラム
JP2010020232A (ja) 内視鏡装置およびプログラム
US20120107780A1 (en) Inspection apparatus and inspection method