CN104321005B - 立体视觉内窥镜装置 - Google Patents
立体视觉内窥镜装置 Download PDFInfo
- Publication number
- CN104321005B CN104321005B CN201380026375.9A CN201380026375A CN104321005B CN 104321005 B CN104321005 B CN 104321005B CN 201380026375 A CN201380026375 A CN 201380026375A CN 104321005 B CN104321005 B CN 104321005B
- Authority
- CN
- China
- Prior art keywords
- light
- subject
- anaglyph
- distance
- endoscope device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00193—Optical arrangements adapted for stereoscopic vision
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00071—Insertion part of the endoscope body
- A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
- A61B1/00096—Optical elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00188—Optical arrangements with focusing or zooming features
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
- A61B1/051—Details of CCD assembly
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1076—Measuring physical dimensions, e.g. size of the entire body or parts thereof for measuring dimensions inside body cavities, e.g. using catheters
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2407—Optical details
- G02B23/2415—Stereoscopic endoscopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/571—Depth or shape recovery from multiple images from focus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/236—Image signal generators using stereoscopic image cameras using a single 2D image sensor using varifocal lenses or mirrors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
- G02B30/27—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
- G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
Abstract
实时生成被摄体的立体图像的动态图像。提供一种立体视觉内窥镜装置(1),其具有:单一的物镜(5),其会聚来自被摄体的光并成像;光分割部(13),其分割被该物镜(5)会聚的光;摄像元件(6、7),其在分割后的各光的成像位置上对被摄体的光学像进行拍摄;对焦位置调节部(11、12),其对分割后的各光赋予彼此不同的光路长度;运算部(14),其根据由摄像元件(6、7)取得的二维图像运算被摄体的各位置与物镜(5)之间的物体距离;以及视差图像生成部(15),其使用所运算出的物体距离,生成从多个视点观察被摄体而得到的多个视点图像。
Description
技术领域
本发明涉及立体视觉内窥镜装置。
背景技术
当前已知如下的相机,通过在光轴方向上驱动单一的物镜而在不同的对焦位置上对被摄体进行多次拍摄,使用得到的多个图像运算从物镜到被摄体的距离分布信息,使用计算出的距离分布信息生成被摄体的视差图像(例如,参照专利文献1)。视差图像是从对应于观察者的右眼和左眼的2个视点观察被摄体而得到的一对视点图像。能够根据视差图像构建被摄体的立体图像。
根据专利文献1,能够使用单一的物镜生成这样的一对图像,因而相比具有对应于右眼和左眼的2个物镜的相机而言结构为小型,非常适用于内窥镜。
现有技术文献
专利文献
专利文献1日本特开平5-7373号公报
发明内容
发明欲解决的课题
然而,在专利文献1的情况下,为了取得视差图像,必须在驱动物镜的同时对被摄体多次拍摄,因而需要较长的时间。因此,具有难以实时地将被摄体的立体图像作为动态图像进行观察的问题。
本发明就是鉴于上述情况而完成的,其目的在于提供一种能够实时生成被摄体的立体图像的动态图像的立体视觉内窥镜装置。
用于解决课题的手段
为了达成上述目的,本发明提供以下的手段。
本发明提供一种立体视觉内窥镜装置,其具有:单一的物镜,其会聚来自被摄体的光并成像;光分割部,其将被该物镜会聚的光分割为2部分以上的光;摄像元件,其配置于被该光分割部分割后的各光的成像位置上,对所述被摄体的光学像进行拍摄;对焦位置调节部,其对被所述光分割部分割后的2部分以上的光赋予彼此不同的光路长度;运算部,其根据由所述摄像元件取得的2个以上的所述被摄体的二维图像,运算所述被摄体的各位置与所述物镜之间的物体距离;以及视差图像生成部,其使用由该运算部运算出的所述物体距离,生成从多个视点观察所述被摄体而得到的多个视点图像。
根据本发明,在由物镜会聚的来自被摄体的光被光分割部分割为2部分以上之后,通过对焦位置调节部被赋予彼此不同的光路长度,然后通过摄像元件分别进行拍摄。因此,由摄像元件取得的二维图像成为在不同的对焦位置拍摄同一视野而得到的图像。
通过运算部根据这种对焦位置不同的多个二维图像运算被摄体的物体距离的分布,视差图像生成部根据所计算出的物体距离的分布通过运算来生成多个视点图像。
这种情况下,作为视差图像的基础的多个视点图像是同时拍摄到的,能够以足够短的间隔生成视差图像。由此,能够实时生成被摄体的立体图像的动态图像。
在上述发明中,所述视差图像生成部也可以将所述多个视点的间隔设定为小于所述物镜的直径的距离。
在根据使用单一物镜拍摄到的多个二维图像通过运算生成视差图像的情况下,能够不依赖于物镜的直径而设定视点间的距离(基线长度)。根据视差图像构建的立体图像的基线长度越长则越强调纵深感。因此,能够通过立体图像再现在使用2个物镜取得2个视点图像的结构中无法再现的被摄体的纵深感。
在上述发明中,也可以是,具有显示部,该显示部根据由所述视差图像生成部生成的所述多个视点图像构建并显示立体图像,所述视差图像生成部生成如下的视差图像,即在所述物体距离与显示于所述显示部的立体图像上再现的纵深方向上的距离之间,具有大致线性关系。
由此,能够在立体图像上准确再现被摄体具有的纵深方向的距离。因此,观察者能够根据立体图像准确把握被摄体的纵深方向的位置。
在上述发明中,也可以是,具有显示部,该显示部根据由所述视差图像生成部生成的所述多个视点图像构建并显示立体图像,所述视差图像生成部生成如下的视差图像,即在所述物体距离与显示于所述显示部的立体图像上再现的纵深方向上的再现距离之间,具有所述再现距离的变化相对于所述物体距离的变化而向上凸出的非线性的关系。
由此,能够在立体图像上压缩并再现被摄体具有纵深方向的距离。因此,在通过立体图像观察具有纵深的被摄体的情况下,能够降低立体图像赋予给观察者的眼部疲劳感。
在上述发明中,也可以是,所述视差图像生成部将所述多个视点的间隔设定为5mm以下。
由此,在被拍摄的被摄体较小的情况下,能够使在立体图像上再现的被摄体的纵深感适度。
在上述发明中,也可以是,所述视差图像生成部将所述多个视点的间隔设定为多个距离,生成多个视差图像。
由此,能够针对同一个被摄体观察纵深感不同的多个立体图像。
在上述发明中,也可以是,所述光分割部使分割后的2部分以上的光彼此大致平行地输出,所述摄像元件的摄像面被分割为2个以上的区域,在各个区域分别对从所述光分割部输出的所述2部分以上的光进行拍摄。
由此,能够使摄像元件共通化,进一步简化结构。
在上述发明中,也可以是,所述对焦位置调节部具有2个棱镜,该2个棱镜彼此接合,其接合面被配置成与所述物镜的光轴交叉,所述光分割部具有分束器,该分束器设置于所述接合面上,使从所述物镜入射到一个所述棱镜的光中的一部分光向另一个所述棱镜透射,使另一部分光向与所述光轴交叉的方向偏转。
由此,能够使光分割部和对焦位置调节部形成为一体的结构,能够简化结构。
在上述发明中,所述光分割部也可以具有小于所述摄像元件的外径尺寸的外径尺寸。
由此,能够实现更小型的结构。
在上述发明中,也可以是,所述视差图像生成部生成如下的视差图像,即从各视点观察所述被摄体的假想视线的交叉位置配置于被所述摄像元件拍摄的2部分以上的光的对焦位置彼此之间。
由此,能够在图像的中心观察距离处获得接近对焦位置的图像,提供鲜锐度较高的图像。
在上述发明中,也可以是,所述摄像元件具有成像状态检测部,该成像状态检测部通过相位差方式检测要拍摄的所述光的成像状态。
由此,能够通过简单的结构检测由摄像元件拍摄的光的成像状态。
发明的效果
根据本发明,具有能够实时生成被摄体的立体图像的动态图像的效果。
附图说明
图1是本发明的一个实施方式的立体视觉内窥镜装置的整体结构图。
图2是图1的立体视觉内窥镜装置所具有的物镜和棱镜型分束器的放大图。
图3是说明图1的视差图像生成部为了生成视差图像而设定的各种参数的图。
图4A是表示基线长度为5mm时的物体距离与再现距离之间的关系的曲线图。
图4B是表示基线长度为3mm时的物体距离与再现距离之间的关系的曲线图。
图4C是基线长度为1mm时的物体距离与再现距离之间的关系的曲线图。
图5是表示图1的立体视觉内窥镜装置的变形例的局部结构图。
图6是表示图1的立体视觉内窥镜装置的另一个变形例的局部结构图。
图7是表示图1的立体视觉内窥镜装置的另一个变形例的局部结构图。
图8是表示图1的立体视觉内窥镜装置的另一个变形例的局部结构图。
图9是表示图1的立体视觉内窥镜装置的另一个变形例的局部结构图。
图10是表示图1的立体视觉内窥镜装置的另一个变形例的局部结构图。
具体实施方式
以下,参照附图说明本发明的一个实施方式的立体视觉内窥镜装置1。
本实施方式的立体视觉内窥镜装置1如图1所示,具有:内窥镜主体(以下,也称作主体)2,其在不同的对焦位置上对被摄体进行拍摄并取得2个二维图像;图像处理单元3,其从该主体2接受2个二维图像,并根据这些二维图像生成视差图像;以及立体图像显示部(显示部)4,其根据由该图像处理单元3生成的视差图像构建并显示立体图像。
主体2具有:单一的物镜5,其会聚来自被摄体的光并形成被摄体的光学像;2个如CCD这样的摄像元件6、7,其对通过该物镜5形成的光学像进行拍摄;二维图像生成部8、9,其根据通过这些摄像元件6、7得到的图像信息生成二维图像;以及棱镜型分束器10,其配置于物镜5与2个摄像元件6、7之间。
图2是放大了主体2所具有的物镜5和棱镜型分束器10的图。
作为物镜5,例如,具有4mm的直径和80°的视场角。
棱镜型分束器10具有斜面彼此接合的2个直角棱镜(对焦位置调节部)11、12、以及由设置于这些直角棱镜11、12的接合面上的电介质膜构成的分束器(光分割部)13。直角棱镜11、12配置为斜面与物镜5的光轴以45°交叉。
从物镜5射入前段侧的第1直角棱镜11的光被分束器13分割为大致同等的光量的2部分。所分割的一部分光相对于物镜5的光轴偏转90°,在第1摄像元件6上成像。所分割的另一部分光透射过分束器13并在第2直角棱镜12内直线行进,在第2摄像元件7上成像。
这里,各直角棱镜11、12对由分束器13分割的2部分光赋予彼此不同的光路长度。例如图2所示,设一部分光的光路长度为a+b,另一部分光的光路长度为a+c时,以使得b<c的方式设定各直角棱镜11、12的尺寸。a、b、c都为光路长度,被定义为直角棱镜11、12的尺寸与直角棱镜11、12的折射率之积。由此,第1摄像元件6和第2摄像元件7为同一视野且同时拍摄对焦位置不同的光学像。2部分光的光路长度之差可根据物镜5的光学设计和基于主体2的被摄体的物体距离以及最终生成的视差图像的视差来适当设计,例如为2mm。
由第1摄像元件6和第2摄像元件7取得的图像信息分别在二维图像生成部8、9中被转换为二维图像,然后被发送给图像处理单元3。
图像处理单元3具有:深度分布生成部14,其从各二维图像生成部8、9接受对焦位置不同的2个二维图像,根据2个二维图像通过运算生成包含被摄体的各位置的物体距离的信息在内的深度分布;以及视差图像生成部15,其使用由该深度分布生成部14生成的深度分布生成视差图像。
深度分布生成部14根据2个二维图像中的被摄体的像的模糊量,计算物镜5的前端与被摄体的各位置之间的物体距离。在各二维图像中,物镜5在光轴方向(纵深方向)上相对于对焦位置的偏差量越大,则像的模糊量就越大。此外,在对焦位置彼此不同的2个二维图像中,被摄体的像的模糊量彼此不同。深度分布生成部14保持如下的数据库,该数据库将从物镜5的前端到被摄体的物体距离与二维图像的像的模糊量的关系对应起来。深度分布生成部14通过参照该数据库,计算2个二维图像的各位置的模糊量的差为最小的物体距离,作为该位置的被摄体的物体距离。
视差图像生成部15使用由深度分布生成部14生成的深度分布,通过运算生成视差图像。视差图像是从对应于观察者的右眼和左眼的2个视点观察被摄体而得到的一对视点图像。视差图像生成部15将生成的视差图像输出给立体图像显示部4。
立体图像显示部4根据从视差图像生成部15接受的视差图像构建并显示被摄体的立体图像。
这种情况下,根据本实施方式的立体视觉内窥镜装置1,图像处理单元3从二维图像生成部8、9接受由2个摄像元件6、7同时拍摄到的2个二维图像,依次生成视差图像并输出给立体图像显示部4。即,视差图像的生成所需的时间足够短,因此立体图像显示部4能够以立体图像的动态图像的方式大致实时显示由摄像元件6、7连续拍摄为动态图像的被摄体的二维图像。
接着,进一步详细说明通过视差图像生成部15生成的视差图像。
为了生成视差图像,如图3所示,需要设定观察被摄体X的2个视点A、B的位置和从各视点A、B观察被摄体X的视线方向。如果视点A、B的纵深方向的位置与物镜5的前端的位置相同(即,物体距离为零),则通过设定基线长度d、内向角θ、交叉距离r,能够在几何学上确定视点A、B的位置和视线方向。基线长度d是视点A、B间的距离。内向角θ是连结各视点A、B与注视点O的2条视线所成的角度。交叉距离r是2条视线交叉的注视点O与视点A、B在纵深方向上的距离。
在本实施方式中,假设注视点O为二维图像的中心,是具有与被摄体X的远位端(被摄体X的各位置中的最远离物镜5的前端的位置)P相同的物体距离的点。即,交叉距离r是被摄体X的远位端P的物体距离,通过被摄体X而唯一确定。通过将交叉距离r设为远位端P的物体距离,从而能够消除仅显现于一个视点图像上的区域。基线长度d和内向角θ彼此依赖而进行变化,确定了一方时另一方也被确定。轴S与物镜5的光轴一致。
另一方面,观察所生成的立体图像的观察者从立体图像得到的纵深感是根据主体2的视场角、显示立体图像的立体图像显示部4的视场角、观察者的左右两眼的间隔、通过左右两眼观察同一注视点时的2条视线所成的角度(辐辏角)而确定的。其中,这些条件都为固定值,或者都存在预先设定的适当值。因此,用于调节赋予给观察者的立体图像的纵深感的参数实际为上述交叉距离r、基线长度d和内向角θ。
这里,说明基线长度d与观察者得到的立体图像的纵深感之间的关系。图4A、图4B和图4C表示使基线长度d变化为5mm、3mm和1mm时的物体距离与再现距离之间的关系。再现距离是观察者从显示于立体图像显示部4上的立体图像得到的被摄体X的纵深方向的距离,是根据立体图像显示部4的视场角和观察者的辐辏角计算的。图4A至图4C所示的曲线图是假定被摄体X的远位端P的物体距离为60mm的情况并设交叉距离r为60mm而计算出来的。此外,这些曲线图是设立体图像显示部4的视场角为40°、观察者的辐辏角为5°而计算出来的。
在设基线长度d为5mm的情况下,如图4A所示,物体距离和再现距离具有物体距离越大则再现距离的变化量相比物体距离的变化量越大的非线性关系,曲线图为向下凸出的曲线。在该关系中,会在立体图像上产生近前的被摄体相对于远处的被摄体而突出、看起来较小的所谓的盆景效果(箱庭効果)。即,在立体图像上,近前侧的被摄体显示为存在于比实际位置更靠近前侧,远处的被摄体显示为存在于比实际位置更远处。因此,观察者难以根据立体图像把握被摄体的准确的立体形状。此外,这种过分强调了纵深感的立体图像会对观察者赋予较大的疲劳感。
在设基线长度d为3mm的情况下,如图4B所示,物体距离与再现距离为大致线性关系,被摄体X的纵深感在立体图像上被准确再现。在该关系中,实际用肉眼观察被摄体X时的纵深感与立体图像上的被摄体的纵深感一致。因此,观察者能够根据立体图像容易地把握作为被摄体X的组织和处理工具等在纵深方向的准确的位置关系。
在设基线长度d为1mm的情况下,如图4C所示,物体距离和再现距离具有如下的非线性关系,即物体距离越大,则再现距离的变化量相对于物体距离的变化量越小,曲线图为向上凸出的曲线。而且,被摄体在纵深方向上被压缩,在立体图像上产生所谓的纸板效果(書き割り効果)。这种关系适于观察在纵深方向上形状大幅变化的被摄体的情况下。即,观察者在观察立体图像上纵深不同的位置时需要改变辐辏,纵深的差异越大则越容易疲劳。对此,在被摄体在纵深方向上被压缩的立体图像上,辐辏的调节幅度较小即可,因此能够降低赋予给观察者的疲劳感。
视差图像生成部15保持如下的表,该表存储了图4B所示的物体距离与再现距离为大致线性关系的交叉距离r与基线长度d的组合。视差图像生成部15从深度分布中提取出物体距离的最大值,将提取的物体距离的最大值设定为交叉距离r,参照表设定对应于所设定的交叉距离r的基线长度d。然后,使用所设定的交叉距离r和基线长度d生成视差图像。
根据这样生成的视差图像构建的立体图像向观察者赋予与实际的被摄体X的纵深感一致的被摄体的纵深感。因此,具有观察者能够根据立体图像始终准确把握被摄体X的纵深方向的位置的优点。
此外,在使用2个物镜取得被摄体的视差图像的2眼式的立体视觉内窥镜的情况下,作为基线长度的左右的物镜的光轴间距离的下限存在极限,因而无法充分缩小基线长度。例如,按照本实施方式那样并排排列2个直径为4mm的物镜时,基线长度的下限将超过4mm,无法生成基线长度为3mm或1mm的视差图像。
通过内窥镜观察的被摄体X为几mm到10mm左右较小的程度,因而为了通过立体图像再现与实物的被摄体X的纵深感同等的被摄体的纵深感,必须也减小基线长度。然而,通过2眼式的立体视觉内窥镜得到的立体图像的基线长度相比被摄体的尺寸而言过大,因此被过分强调了纵深感。对此,根据本实施方式,能够使视差图像的基线长度d为物镜5的直径以下,能够生成适当的纵深感的立体图像。
此外,还能够使用单一的二维图像生成深度分布,但这种情况下,无法区分二维图像的亮度值的变化是由于像的立体形状,还是由于像的模糊,因此所计算出的物体距离可能产生误差。例如,有时凸形状被计算为凹形状,无法再现被摄体的正确的立体形状。与此相对,根据本实施方式,使用2个二维图像,计算2个二维图像的模糊量之差为最小的物体距离,从而能够准确计算物体距离。由此,能够生成准确再现被摄体的立体形状的立体图像。
另外,在本实施方式中,视差图像生成部15设定交叉距离r和基线长度d作为参数,然而也可以代之而设定交叉距离r和内向角θ。如上所述,基线长度d和内向角θ是彼此依赖地发生变化的值,在取代基线长度d而改变内向角θ的情况下,图4A至图4C所示的物体距离与再现距离的关系的说明也成立。因此,视差图像生成部15可以采用内向角θ代替基线长度d作为生成视差图像时的参数。
此外,在本实施方式中,在视差图像生成部15生成视差图像时,将交叉距离r作为被摄体X的远位端P的物体距离,但是,也可以采用其他值作为交叉距离r。这种情况下,优选将交叉距离r设定为通过摄像元件6、7拍摄的光学像的2个对焦位置间的距离。
此外,在本实施方式中,视差图像生成部15也可以设定多个基线长度d,根据同一个二维图像生成基线长度d不同的多个视差图像。例如,视差图像生成部15可以构成为,具有设基线长度d为1mm来生成视差图像的第1模式和设基线长度d为3mm来生成视差图像的第2模式,并且能够由观察者选择将通过何种模式生成的视差图像输出给立体图像显示部4。
观察者在俯瞰观察被摄体X的整体的情况下,通过选择第1模式,即使是具有纵深的被摄体,能够在降低了对眼部的负担的情况下观察立体图像。另一方面,观察者在要详细观察被摄体的一部分的情况下,通过选择第2模式,能够根据立体图像准确把握被摄体X的立体形状,例如能够准确进行对于被摄体的处理。
此外,视差图像生成部15也可以根据深度分布中包含的物体距离的信息,进行第1模式与第2模式的切换。例如,在物体距离的最大值与最小值之差为规定的阈值以上的情况下选择第1模式,在所述差小于规定的阈值的情况下选择第2模式。
此外,立体图像显示部4也可以将作为视差图像的一对视点图像在左右方向上错开显示,以使得观察者的左右的视线不在一点交叉,调节左右的视点图像间的距离,从而调节观察者得到的纵深感。
在立体地观察视差图像的情况下,表示物体距离与再现距离之间的关系的曲线的斜率(即曲线相交的位置)根据观察者的辐辏角而发生变化。即,通过变更左右的视点图像的间隔来调节观察者的辐辏角,通过增大辐辏角,从而能够降低观察者从立体图像得到的被摄体的纵深感。
此外,在本实施方式中说明的光分割部、对焦位置调节部和摄像元件的结构仅为一例,并不限于这种结构。图5至图10分别表示光分割部、对焦位置调节部和摄像元件的变形例。
在图5中,对焦位置调节部具有被接合的2个棱镜111a、111b,光分割部具有设置于棱镜111a、111b的接合面上的分束器131。在该结构中,被分束器131分割的2部分光从2个棱镜111a、111b彼此平行地输出,在共同的摄像元件61的不同区域上被拍摄。通过如上构成,具有1个摄像元件61即可,因此能够进一步简化主体2的前端部的结构,能够实现该前端部的小型化。
在图6中,对焦位置调节部具有被接合的2个棱镜112a、112b,光分割部具有设置于棱镜112a、112b的接合面上的偏光分束器132a、对通过该偏光分束器132a而偏转的一部分光赋予相位差的相位差板16、使射入该相位差板16的光向相反侧折返的反射镜17。通过如上构成,能够进一步自由地设定被偏光分束器132a分割后的2部分光的光路长度之差。
在图7中,对焦位置调节部具有彼此接合的4个棱镜113a、113b、113c、113d,光分割部具有设置于4个棱镜113a、113b、113c、113d的接合面上的2个分束器133a、133b。4个棱镜113a、113b、113c、113d以接合面形成彼此垂直交叉的2个平面的方式接合,来自物镜5(省略图示)的光被2个分束器133a、133b分割为3部分的光。
被分割的3部分的光被各个摄像元件63a、63b、63c拍摄。通过如上构成,深度分布生成部14根据对焦位置不同的3个二维图像生成深度分布。因此,对于在纵深方向上形状大幅变化的被摄体也能生成更为准确的深度分布,能够构建更为准确地再现了被摄体的立体形状的立体图像。
图8表示在图6的结构中追加了1个棱镜112c和1个分束器132b以及1个摄像元件62b的变形例,能够将从物镜5(省略图示)射入的光分割为3部分的光,取得对焦位置不同的3个二维图像。
图9表示如下变形例,即仅通过棱镜114a、114b、114c将来自物镜5(省略图示)的光分割为3部分的光,并通过摄像元件64a、64b、64c拍摄分割后的各部分的光。即,棱镜114a、114b、114c构成光分割部和对焦位置调节部。
此外,在本实施方式中,摄像元件6、7也可以在摄像面上具有通过相位差方式检测该摄像面的光的成像状态的成像状态检测部。以往,检测由于穿过不同瞳区域后的光束而形成的各像间的相位差,由此检测成像状态。
作为成像状态检测部18,如图10所示,优选采用在日本特开2012-22147号公报中记载的光学滤波器。该光学滤波器使来自物镜5的光中的穿过一个瞳区域后的光束射入摄像元件6、7的一部分像素列中,使传过其他瞳区域后的光束射入与一部分像素列平行且设置于该一部分像素列的附近的其他的像素列中。图中的符号18h、18v表示视野角瞳控制元件,符号18a表示透明部件。
成像状态检测部也可以构成为,使用遮光掩模仅使穿过了瞳区域的光中的一部分通过。或者,成像状态检测部也可以构成为,通过调整微透镜的位置使穿过了不同的瞳区域的光射入像素列中。
这样,通过具有成像状态检测部,能够准确计量检测部的距离信息,通过附加该准确的距离信息,能够进一步提高在摄像面整个表面的距离估计的精度。
符号说明
1 立体视觉内窥镜装置
2 内窥镜主体
3 图像处理单元
4 立体图像显示部(显示部)
5 物镜
6、7 摄像元件
8、9 二维图像生成部
10 棱镜型分束器
11、12 直角棱镜(对焦位置调节部)
13 分束器(光分割部)
14 深度分布生成部(运算部)
15 视差图像生成部
16 相位差板
17 反射镜
18 成像状态检测部
A、B 视点
X 被摄体
d 基线长度
r 交叉距离
O 注视点
S 轴
θ 内向角
Claims (11)
1.一种立体视觉内窥镜装置,其具有:
单一的物镜,其会聚来自被摄体的光而成像;
光分割部,其将被该物镜会聚的光分割为2部分以上的光;
摄像元件,其配置于被该光分割部分割后的具有彼此不同的光路长度的各光的成像位置上,对所述被摄体的光学像进行拍摄;
对焦位置调节部,其对被所述光分割部分割后的2部分以上的光赋予彼此不同的光路长度;
运算部,其根据由所述摄像元件取得的2个以上的所述被摄体的二维图像,运算所述被摄体的各位置与所述物镜之间的物体距离;以及
视差图像生成部,其使用由该运算部运算出的所述物体距离,生成从多个视点观察所述被摄体而得到的多个视点图像。
2.根据权利要求1所述的立体视觉内窥镜装置,其中,
所述视差图像生成部将所述多个视点的间隔设定为小于所述物镜的直径的距离。
3.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述立体视觉内窥镜装置具有显示部,该显示部根据由所述视差图像生成部生成的所述多个视点图像构建并显示立体图像,
所述视差图像生成部生成如下的视差图像,即在所述物体距离与显示于所述显示部的立体图像上再现的纵深方向上的再现距离之间,具有大致线性关系。
4.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述立体视觉内窥镜装置具有显示部,该显示部根据由所述视差图像生成部生成的所述多个视点图像构建并显示立体图像,
所述视差图像生成部生成如下的视差图像,即在所述物体距离与显示于所述显示部的立体图像上再现的纵深方向上的再现距离之间,具有所述再现距离的变化相对于所述物体距离的变化向上凸的非线性的关系。
5.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述视差图像生成部将所述多个视点的间隔设定为5mm以下。
6.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述视差图像生成部将所述多个视点的间隔设定为多个距离,生成多个视差图像。
7.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述光分割部使分割后的2部分以上的光彼此大致平行地输出,
所述摄像元件的摄像面被分割为2个以上的区域,在各个区域分别对从所述光分割部输出的所述2部分以上的光进行拍摄。
8.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述对焦位置调节部具有2个棱镜,该2个棱镜彼此接合,其接合面被配置成与所述物镜的光轴交叉,
所述光分割部具有分束器,该分束器设置于所述接合面上,使从所述物镜入射到一个所述棱镜的光中的一部分光向另一个所述棱镜透射,使另一部分光向与所述光轴交叉的方向偏转。
9.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述光分割部具有小于所述摄像元件的外径尺寸的外径尺寸。
10.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述视差图像生成部生成如下的视差图像,即从各视点观察所述被摄体而得到的假想视线的交叉位置配置于被所述摄像元件拍摄的2部分以上的光的对焦位置彼此之间。
11.根据权利要求1或2所述的立体视觉内窥镜装置,其中,
所述摄像元件具有成像状态检测部,该成像状态检测部通过相位差方式检测要拍摄的所述光的成像状态。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012118754A JP5965726B2 (ja) | 2012-05-24 | 2012-05-24 | 立体視内視鏡装置 |
JP2012-118754 | 2012-05-24 | ||
PCT/JP2013/061304 WO2013175899A1 (ja) | 2012-05-24 | 2013-04-16 | 立体視内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104321005A CN104321005A (zh) | 2015-01-28 |
CN104321005B true CN104321005B (zh) | 2017-02-22 |
Family
ID=49623601
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380026375.9A Active CN104321005B (zh) | 2012-05-24 | 2013-04-16 | 立体视觉内窥镜装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20150073209A1 (zh) |
EP (1) | EP2856922B1 (zh) |
JP (1) | JP5965726B2 (zh) |
CN (1) | CN104321005B (zh) |
WO (1) | WO2013175899A1 (zh) |
Families Citing this family (65)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014034339A1 (ja) * | 2012-08-30 | 2014-03-06 | オリンパスメディカルシステムズ株式会社 | 内視鏡 |
GB2505926A (en) * | 2012-09-14 | 2014-03-19 | Sony Corp | Display of Depth Information Within a Scene |
JP6023919B2 (ja) | 2014-09-18 | 2016-11-09 | オリンパス株式会社 | 内視鏡システム |
JP6153675B2 (ja) * | 2015-05-12 | 2017-06-28 | オリンパス株式会社 | 立体内視鏡装置 |
WO2017024422A1 (zh) * | 2015-08-13 | 2017-02-16 | 明士股份有限公司 | 使用色度成形法的内视镜立体可视化系统及方法 |
JP2018007840A (ja) * | 2016-07-13 | 2018-01-18 | オリンパス株式会社 | 画像処理装置 |
DE102017123320A1 (de) * | 2017-10-09 | 2019-04-11 | Olympus Winter & Ibe Gmbh | Stereoendoskop |
WO2019133753A1 (en) | 2017-12-27 | 2019-07-04 | Ethicon Llc | Hyperspectral imaging in a light deficient environment |
WO2020095366A1 (ja) * | 2018-11-06 | 2020-05-14 | オリンパス株式会社 | 撮像装置、内視鏡装置及び撮像装置の作動方法 |
US11937784B2 (en) | 2019-06-20 | 2024-03-26 | Cilag Gmbh International | Fluorescence imaging in a light deficient environment |
US11622094B2 (en) | 2019-06-20 | 2023-04-04 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for fluorescence imaging |
US11233960B2 (en) | 2019-06-20 | 2022-01-25 | Cilag Gmbh International | Fluorescence imaging with fixed pattern noise cancellation |
US11892403B2 (en) | 2019-06-20 | 2024-02-06 | Cilag Gmbh International | Image synchronization without input clock and data transmission clock in a pulsed fluorescence imaging system |
US11624830B2 (en) | 2019-06-20 | 2023-04-11 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for laser mapping imaging |
US10952619B2 (en) | 2019-06-20 | 2021-03-23 | Ethicon Llc | Hyperspectral and fluorescence imaging and topology laser mapping with minimal area monolithic image sensor |
US20200397246A1 (en) | 2019-06-20 | 2020-12-24 | Ethicon Llc | Minimizing image sensor input/output in a pulsed hyperspectral, fluorescence, and laser mapping imaging system |
US11172811B2 (en) | 2019-06-20 | 2021-11-16 | Cilag Gmbh International | Image rotation in an endoscopic fluorescence imaging system |
US11898909B2 (en) | 2019-06-20 | 2024-02-13 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed fluorescence imaging system |
US11671691B2 (en) | 2019-06-20 | 2023-06-06 | Cilag Gmbh International | Image rotation in an endoscopic laser mapping imaging system |
US11412152B2 (en) | 2019-06-20 | 2022-08-09 | Cilag Gmbh International | Speckle removal in a pulsed hyperspectral imaging system |
US11141052B2 (en) | 2019-06-20 | 2021-10-12 | Cilag Gmbh International | Image rotation in an endoscopic fluorescence imaging system |
US11375886B2 (en) | 2019-06-20 | 2022-07-05 | Cilag Gmbh International | Optical fiber waveguide in an endoscopic system for laser mapping imaging |
US11758256B2 (en) | 2019-06-20 | 2023-09-12 | Cilag Gmbh International | Fluorescence imaging in a light deficient environment |
US11134832B2 (en) | 2019-06-20 | 2021-10-05 | Cilag Gmbh International | Image rotation in an endoscopic hyperspectral, fluorescence, and laser mapping imaging system |
US11265491B2 (en) | 2019-06-20 | 2022-03-01 | Cilag Gmbh International | Fluorescence imaging with fixed pattern noise cancellation |
US10979646B2 (en) | 2019-06-20 | 2021-04-13 | Ethicon Llc | Fluorescence imaging with minimal area monolithic image sensor |
US11122967B2 (en) | 2019-06-20 | 2021-09-21 | Cilag Gmbh International | Driving light emissions according to a jitter specification in a fluorescence imaging system |
US11617541B2 (en) | 2019-06-20 | 2023-04-04 | Cilag Gmbh International | Optical fiber waveguide in an endoscopic system for fluorescence imaging |
US11187658B2 (en) | 2019-06-20 | 2021-11-30 | Cilag Gmbh International | Fluorescence imaging with fixed pattern noise cancellation |
US11903563B2 (en) | 2019-06-20 | 2024-02-20 | Cilag Gmbh International | Offset illumination of a scene using multiple emitters in a fluorescence imaging system |
US11172810B2 (en) | 2019-06-20 | 2021-11-16 | Cilag Gmbh International | Speckle removal in a pulsed laser mapping imaging system |
US11931009B2 (en) | 2019-06-20 | 2024-03-19 | Cilag Gmbh International | Offset illumination of a scene using multiple emitters in a hyperspectral imaging system |
US11716543B2 (en) | 2019-06-20 | 2023-08-01 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for fluorescence imaging |
US11284785B2 (en) | 2019-06-20 | 2022-03-29 | Cilag Gmbh International | Controlling integral energy of a laser pulse in a hyperspectral, fluorescence, and laser mapping imaging system |
US20200397239A1 (en) | 2019-06-20 | 2020-12-24 | Ethicon Llc | Offset illumination of a scene using multiple emitters in a fluorescence imaging system |
US11412920B2 (en) | 2019-06-20 | 2022-08-16 | Cilag Gmbh International | Speckle removal in a pulsed fluorescence imaging system |
US11187657B2 (en) | 2019-06-20 | 2021-11-30 | Cilag Gmbh International | Hyperspectral imaging with fixed pattern noise cancellation |
US11122968B2 (en) | 2019-06-20 | 2021-09-21 | Cilag Gmbh International | Optical fiber waveguide in an endoscopic system for hyperspectral imaging |
US11674848B2 (en) | 2019-06-20 | 2023-06-13 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for hyperspectral imaging |
US11700995B2 (en) | 2019-06-20 | 2023-07-18 | Cilag Gmbh International | Speckle removal in a pulsed fluorescence imaging system |
US10841504B1 (en) | 2019-06-20 | 2020-11-17 | Ethicon Llc | Fluorescence imaging with minimal area monolithic image sensor |
US11237270B2 (en) | 2019-06-20 | 2022-02-01 | Cilag Gmbh International | Hyperspectral, fluorescence, and laser mapping imaging with fixed pattern noise cancellation |
US11218645B2 (en) | 2019-06-20 | 2022-01-04 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for fluorescence imaging |
US11221414B2 (en) | 2019-06-20 | 2022-01-11 | Cilag Gmbh International | Laser mapping imaging with fixed pattern noise cancellation |
US11398011B2 (en) | 2019-06-20 | 2022-07-26 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed laser mapping imaging system |
US11280737B2 (en) | 2019-06-20 | 2022-03-22 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed fluorescence imaging system |
US11925328B2 (en) | 2019-06-20 | 2024-03-12 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed hyperspectral imaging system |
US11540696B2 (en) | 2019-06-20 | 2023-01-03 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed fluorescence imaging system |
US11288772B2 (en) | 2019-06-20 | 2022-03-29 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed fluorescence imaging system |
US11633089B2 (en) | 2019-06-20 | 2023-04-25 | Cilag Gmbh International | Fluorescence imaging with minimal area monolithic image sensor |
US11550057B2 (en) | 2019-06-20 | 2023-01-10 | Cilag Gmbh International | Offset illumination of a scene using multiple emitters in a fluorescence imaging system |
US11457154B2 (en) | 2019-06-20 | 2022-09-27 | Cilag Gmbh International | Speckle removal in a pulsed hyperspectral, fluorescence, and laser mapping imaging system |
US11516387B2 (en) | 2019-06-20 | 2022-11-29 | Cilag Gmbh International | Image synchronization without input clock and data transmission clock in a pulsed hyperspectral, fluorescence, and laser mapping imaging system |
US11471055B2 (en) | 2019-06-20 | 2022-10-18 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed fluorescence imaging system |
US11294062B2 (en) | 2019-06-20 | 2022-04-05 | Cilag Gmbh International | Dynamic range using a monochrome image sensor for hyperspectral and fluorescence imaging and topology laser mapping |
US11432706B2 (en) | 2019-06-20 | 2022-09-06 | Cilag Gmbh International | Hyperspectral imaging with minimal area monolithic image sensor |
US11793399B2 (en) | 2019-06-20 | 2023-10-24 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed hyperspectral imaging system |
US11154188B2 (en) | 2019-06-20 | 2021-10-26 | Cilag Gmbh International | Laser mapping imaging and videostroboscopy of vocal cords |
US11276148B2 (en) | 2019-06-20 | 2022-03-15 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed fluorescence imaging system |
US11533417B2 (en) | 2019-06-20 | 2022-12-20 | Cilag Gmbh International | Laser scanning and tool tracking imaging in a light deficient environment |
US11012599B2 (en) | 2019-06-20 | 2021-05-18 | Ethicon Llc | Hyperspectral imaging in a light deficient environment |
US11389066B2 (en) | 2019-06-20 | 2022-07-19 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed hyperspectral, fluorescence, and laser mapping imaging system |
US11895397B2 (en) | 2019-06-20 | 2024-02-06 | Cilag Gmbh International | Image synchronization without input clock and data transmission clock in a pulsed fluorescence imaging system |
US11686847B2 (en) | 2019-06-20 | 2023-06-27 | Cilag Gmbh International | Pulsed illumination in a fluorescence imaging system |
TWI718805B (zh) * | 2019-12-11 | 2021-02-11 | 財團法人工業技術研究院 | 內視鏡立體成像裝置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2963990B1 (ja) * | 1998-05-25 | 1999-10-18 | 京都大学長 | 距離計測装置及び方法並びに画像復元装置及び方法 |
US7405877B1 (en) * | 2003-02-10 | 2008-07-29 | Visionsense Ltd. | Stereoscopic endoscope |
JP2010092283A (ja) * | 2008-10-08 | 2010-04-22 | Chiba Univ | 立体画像作成装置及び方法並びに内視鏡検査システム |
CN201641949U (zh) * | 2009-03-26 | 2010-11-24 | 庞维克 | 单镜头立体内窥镜系统 |
CN202173382U (zh) * | 2011-07-08 | 2012-03-28 | 蓝莫德(天津)科学仪器有限公司 | 双目单通道一体式窥镜 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3112485B2 (ja) | 1991-01-22 | 2000-11-27 | オリンパス光学工業株式会社 | 立体電子スチルカメラ |
JP2001103513A (ja) * | 1999-09-27 | 2001-04-13 | Sanyo Electric Co Ltd | 2次元映像を3次元映像に変換する方法 |
JP2001108916A (ja) * | 1999-10-08 | 2001-04-20 | Olympus Optical Co Ltd | 硬性鏡光学系 |
US20040125228A1 (en) * | 2001-07-25 | 2004-07-01 | Robert Dougherty | Apparatus and method for determining the range of remote objects |
US7101334B2 (en) * | 2001-10-31 | 2006-09-05 | Olympus Corporation | Optical observation device and 3-D image input optical system therefor |
US7170677B1 (en) * | 2002-01-25 | 2007-01-30 | Everest Vit | Stereo-measurement borescope with 3-D viewing |
GB0301923D0 (en) * | 2003-01-28 | 2003-02-26 | Qinetiq Ltd | Imaging system |
JP2004313523A (ja) * | 2003-04-17 | 2004-11-11 | Pentax Corp | 固体撮像素子、電子内視鏡 |
JP4459549B2 (ja) * | 2003-05-16 | 2010-04-28 | Hoya株式会社 | 固体撮像素子、電子内視鏡、及び電子内視鏡装置 |
US20090076329A1 (en) * | 2007-09-17 | 2009-03-19 | Wei Su | Disposable Stereoscopic Endoscope System |
DE102008018636B4 (de) * | 2008-04-11 | 2011-01-05 | Storz Endoskop Produktions Gmbh | Vorrichtung und Verfahren zur endoskopischen 3D-Datenerfassung |
JP5443802B2 (ja) * | 2009-03-24 | 2014-03-19 | オリンパス株式会社 | 蛍光観察装置 |
JP2013521941A (ja) * | 2010-03-12 | 2013-06-13 | ヴァイキング・システムズ・インコーポレーテッド | 立体的可視化システム |
WO2011158498A1 (ja) * | 2010-06-15 | 2011-12-22 | パナソニック株式会社 | 撮像装置及び撮像方法 |
JP2012022147A (ja) * | 2010-07-14 | 2012-02-02 | Olympus Corp | 位相差検出用情報取得装置、位相差検出装置、撮像装置 |
US9066086B2 (en) * | 2010-12-08 | 2015-06-23 | Industrial Technology Research Institute | Methods for generating stereoscopic views from monoscopic endoscope images and systems using the same |
JP2011211739A (ja) * | 2011-06-01 | 2011-10-20 | Fujifilm Corp | 立体視画像作成装置、立体視画像出力装置及び立体視画像作成方法 |
WO2013046902A1 (ja) * | 2011-09-29 | 2013-04-04 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
-
2012
- 2012-05-24 JP JP2012118754A patent/JP5965726B2/ja active Active
-
2013
- 2013-04-16 WO PCT/JP2013/061304 patent/WO2013175899A1/ja active Application Filing
- 2013-04-16 EP EP13793831.2A patent/EP2856922B1/en not_active Not-in-force
- 2013-04-16 CN CN201380026375.9A patent/CN104321005B/zh active Active
-
2014
- 2014-11-19 US US14/547,600 patent/US20150073209A1/en not_active Abandoned
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2963990B1 (ja) * | 1998-05-25 | 1999-10-18 | 京都大学長 | 距離計測装置及び方法並びに画像復元装置及び方法 |
US7405877B1 (en) * | 2003-02-10 | 2008-07-29 | Visionsense Ltd. | Stereoscopic endoscope |
JP2010092283A (ja) * | 2008-10-08 | 2010-04-22 | Chiba Univ | 立体画像作成装置及び方法並びに内視鏡検査システム |
CN201641949U (zh) * | 2009-03-26 | 2010-11-24 | 庞维克 | 单镜头立体内窥镜系统 |
CN202173382U (zh) * | 2011-07-08 | 2012-03-28 | 蓝莫德(天津)科学仪器有限公司 | 双目单通道一体式窥镜 |
Also Published As
Publication number | Publication date |
---|---|
CN104321005A (zh) | 2015-01-28 |
EP2856922A4 (en) | 2016-01-27 |
JP2013244104A (ja) | 2013-12-09 |
EP2856922B1 (en) | 2018-10-10 |
US20150073209A1 (en) | 2015-03-12 |
EP2856922A1 (en) | 2015-04-08 |
WO2013175899A1 (ja) | 2013-11-28 |
JP5965726B2 (ja) | 2016-08-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104321005B (zh) | 立体视觉内窥镜装置 | |
US7768702B2 (en) | Medical stereo observation system | |
KR101237945B1 (ko) | 무안경식 디스플레이를 위한 시차 이미지의 특정한 정렬시스템 및 방법 | |
US9066086B2 (en) | Methods for generating stereoscopic views from monoscopic endoscope images and systems using the same | |
US9192286B2 (en) | Stereoscopic visualization system | |
CN107396087B (zh) | 裸眼三维显示装置及其控制方法 | |
RU2519518C2 (ru) | Устройство генерирования стереоскопического изображения, способ генерирования стереоскопического изображения и программа | |
US20160295194A1 (en) | Stereoscopic vision system generatng stereoscopic images with a monoscopic endoscope and an external adapter lens and method using the same to generate stereoscopic images | |
US20040066555A1 (en) | Method and apparatus for generating stereoscopic images | |
US6788274B2 (en) | Apparatus and method for displaying stereoscopic images | |
CN109259717A (zh) | 一种立体内窥镜及内窥镜测量方法 | |
JP2007068876A (ja) | 医療用立体観察システム | |
JP2002223458A (ja) | 立体映像作成装置 | |
JP2006208407A (ja) | 立体画像観察用顕微鏡システム | |
Honda et al. | Three-dimensional display technologies satisfying" super multiview condition" | |
JP4975256B2 (ja) | 立体映像呈示装置 | |
CN112165613B (zh) | 基于水平运动的动态随机点立体图的立体视锐度测试方法 | |
JP2011141381A (ja) | 立体画像表示装置及び立体画像表示方法 | |
JP3425402B2 (ja) | 立体画像を表示する装置および方法 | |
JP2012042524A (ja) | 画像処理装置および方法 | |
JP2842735B2 (ja) | 複数視点3次元画像入力装置、画像合成装置、及びその画像出力装置 | |
KR101192121B1 (ko) | 양안시차 및 깊이 정보를 이용한 애너그리프 영상 생성 방법 및 장치 | |
RU2474973C2 (ru) | Устройство стереовидения в реальном времени | |
Hill | Scalable multi-view stereo camera array for real world real-time image capture and three-dimensional displays | |
US11966045B2 (en) | Optical focus adjustment based on occlusion |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |