CN109937567A - 图像处理装置和方法以及程序 - Google Patents

图像处理装置和方法以及程序 Download PDF

Info

Publication number
CN109937567A
CN109937567A CN201780068284.XA CN201780068284A CN109937567A CN 109937567 A CN109937567 A CN 109937567A CN 201780068284 A CN201780068284 A CN 201780068284A CN 109937567 A CN109937567 A CN 109937567A
Authority
CN
China
Prior art keywords
image
setting
screen
display
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780068284.XA
Other languages
English (en)
Other versions
CN109937567B (zh
Inventor
万修太郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN109937567A publication Critical patent/CN109937567A/zh
Application granted granted Critical
Publication of CN109937567B publication Critical patent/CN109937567B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/18Signals indicating condition of a camera member or suitability of light
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00011Operational features of endoscopes characterised by signal transmission
    • A61B1/00013Operational features of endoscopes characterised by signal transmission using optical means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147Holding or positioning arrangements
    • A61B1/00149Holding or positioning arrangements using articulated arms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147Holding or positioning arrangements
    • A61B1/0016Holding or positioning arrangements using motor drive units
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00188Optical arrangements with focusing or zooming features
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00193Optical arrangements adapted for stereoscopic vision
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0669Endoscope light sources at proximal end of an endoscope

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Optics & Photonics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biophysics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

本技术涉及能够提高可用性的图像处理装置和方法以及程序。图像处理装置包括:设置单元,其将将图像的显示方向翻转为预定方向的翻转功能设置为on或off;以及控制单元,其当接受将翻转功能为on的指令时通过在预定方向上翻转屏幕和显示与翻转功能的设置相关的屏幕。本技术可以应用于数码相机。

Description

图像处理装置和方法以及程序
技术领域
本技术涉及图像处理装置和方法以及程序,更具体地,涉及可以提高可用性的图像处理装置和方法以及程序。
背景技术
例如,已经提出了一种与相机相关联的技术,其中当显示从通过展开宽视图获取的图像中切出具有不同视图的两个图像并进行排列的半宽图像时,一个视图的图像被横向反转并显示(例如,参见专利文献1)。
当使用应用了这种技术并且安装在车辆中的相机执行成像并且显示获取的半宽图像时,场景在半宽图像中具有不同视图的两个区域中以相同方向流动,因此,该技术可用于诸如驾驶辅助的应用。
此外,当使用相机执行成像时,可以根据使用的应用,用手抓住相机或者将相机固定到车辆、天花板等来捕获图像。然而,当在倒置相机的情况下捕获运动图像时,图像的顶部和底部或声音的左右声道被反转。
因此,还提出了在假设用反转的相机捕获图像的情况下上下反转记录图像或交换声音的左右声道的功能。
引用列表
专利文件
专利文献1:日本专利申请公开No.2008-28778
发明内容
本发明要解决的问题
然而,在上述技术中,例如,在倒置相机的情况下捕获图像时的成像操作等可能是不方便的,并且不能说仅通过上下反转捕获图像来提高可用性。
本技术是考虑到上述情况而作出的,其目的是提高可用性。
解决问题的方法
根据本技术的一个方面,提供了一种图像处理装置,包括:设置单元,所述设置单元将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及控制单元,所述控制单元当接收到将翻转功能设置为ON的指令时在所述预定方向上反转与所述翻转功能的设置相关联的屏幕,并且显示反转的屏幕。
控制单元可以当接收到将翻动功能设置为ON的指令时在上下方向上反转与翻转功能的设置相关联的屏幕,并且显示反转的屏幕。
当翻转功能被设置为OFF时,控制单元可以不显示与翻转功能的设置相关联的屏幕。
与翻转功能的设置相关联的屏幕可以是翻转功能的说明屏幕。
可以在说明屏幕上显示当翻转功能被设置为ON时操作单元的行为的说明。
与翻转功能的设置相关联的屏幕可以是用于翻转功能的设置的确认屏幕。
当在显示确认屏幕的状态下指示取消翻转功能的设置时,设置单元可以取消在显示确认屏幕之前已经执行的翻转功能的设置。
可以在确认屏幕上显示用于取消翻转功能的设置的取消按钮。
当所述翻转功能被设置为ON时,可以执行通过成像获取的图像的上下反转、通过声音收集获取的收集声音的右声道和左声道的交换、显示屏幕的上下反转显示或者分配给与相互不同方向相关联的操作单元的功能的交换中的至少一个。
根据本技术的另一方面,提供了一种图像处理方法或程序,包括以下步骤:将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及当接收到将所述翻转功能设置为ON的指令时,在所述预定方向上反转与所述翻转功能的设置相关联的屏幕并显示反转的屏幕。
根据本技术的方面,将图像的显示方向反转到预定方向的翻转功能被设置为ON或OFF,并且当接收到将翻转功能设置为ON的指令时,与翻转功能的设置相关联的屏幕被在预定方向上反转并且被显示。
发明效果
根据本技术的方面,能够提高可用性。
顺便提及,本技术不限于上述效果,并且可以具有本公开中描述的任何效果。
附图说明
图1是示出成像装置的外观配置的示例的图。
图2是示出成像装置的外观配置的示例的图。
图3是示出成像装置的外观配置的示例的图。
图4是示出成像装置的外观配置的示例的图。
图5是示出成像装置的功能配置的示例的图。
图6是描述翻转设置的图。
图7是描述翻转设置的图。
图8是描述翻转设置的图。
图9是描述翻转设置处理的流程图。
图10是描述运动图像的翻转设置和捕获的图。
图11是描述运动图像的翻转设置和捕获的图。
图12是描述成像过程的流程图。
图13是描述图像的翻转设置和输出的图。
图14是描述图像的翻转设置和输出的图。
图15是描述输出处理的流程图。
图16是描述方向键的翻转设置和行为的图。
图17是描述方向键的翻转设置和行为的图。
图18是描述与DISP功能相关联的显示的改变的图。
图19是描述与DISP功能相关联的显示的改变的图。
图20是描述与DISP功能相关联的显示的改变的图。
图21是示出功能设置屏幕的显示示例的图。
图22是示出WB设置屏幕的显示示例的图。
图23是示出菜单屏幕的显示示例的图。
图24是描述键操作处理的流程图。
图25是示出远程操作单元的外观配置的示例的图。
图26是描述命令执行处理的流程图。
图27是示出计算机的配置的示例的图。
图28是示意性地示出内窥镜手术系统的配置的示例的图。
图29是示出图28中所示的相机头和CCU的功能配置的示例的框图。
具体实施方式
在下文中,将参考附图描述应用本技术的实施例。
<第一实施例>
<成像装置的外观配置的示例>
首先,将参考1至4描述作为应用本技术的图像处理装置的示例的成像装置的外观配置的示例。
图1示出了成像装置的外观的正视图。
成像装置11包括例如数码相机等,并且被配置为在作为摄影者的用户用手拿着成像装置11的状态下执行成像以及在成像装置11被固定到自行车、天花板、墙壁等的状态下执行成像。
在成像装置11的前表面上设置将来自被摄体的光引导到未示出的成像元件的透镜21。此外,在图中的成像装置11的前表面上的透镜21下方设置由在捕获运动图像时收集环境声音的麦克风构成的声音收集单元22-1和声音收集单元22-2。基本上,由声音收集单元22-1收集的声音变为右声道的声音,并且由声音收集单元22-2收集的声音变为左声道的声音。
顺便提及,在下面的描述中,当声音收集单元22-1和声音收集单元22-2彼此不区分时,它们也简称为声音收集单元22。
在图中的成像装置11的前表面的左上侧设置有计数灯(tally lamp)23。在成像装置11捕获运动图像时开启计数灯23,并且在成像装置未捕获运动图像时关闭计数灯23。
此外,在生成中,当使用成像装置11捕获运动图像或静止图像时,在箭头A11表示的顶面在上下方向上面向上侧的状态下,即,在由箭头A12表示的底面朝向地面的状态下执行成像。
因此,例如,如图2所示,电源按钮41、快门按钮42、声音输出单元43等被设置在成像装置11的顶面上。顺便提及,图2示出了当从图1中的上侧向下侧观察时的成像装置11的顶视图。
电源按钮41是当成像装置11通电或断电时操作的按钮。当捕获静止图像时、当开始捕获运动图像时、当停止运动图像的成像时等操作快门按钮42。此外,快门按钮42用作用于在未示出的显示单元上显示菜单屏幕等的状态下确定选择的输入键(选择按钮)。
声音输出单元43例如由扬声器等构成,并且在再现运动图像时再现运动图像的声音。
此外,在与图1所示的成像装置11的前表面相对的表面上,即,成像装置11的后表面上,例如,如图3所示,设置各种按钮等。顺便提及,在图3中,图3中的成像装置11的上侧是顶面侧,并且图3中的成像装置11的下侧是底面侧。
显示单元61设置在成像装置11的后表面上,该显示单元61例如由液晶显示器(LCD)等构成并且显示各种图像。
此外,在显示单元61周围设置有计数灯62、向上按钮63、向下按钮64、向左按钮65、向右按钮66和菜单按钮67。
类似于设置在成像装置11的前表面上的计数灯23,计数灯62在捕获运动图像时开启,而在没有捕获运动图像时关闭。
当对显示在显示单元61上的图像、菜单屏幕等执行向上操作时,操作向上按钮63。
也就是说,例如,当菜单屏幕上的光标等被移动到菜单屏幕的顶端时或者例如,当执行用于显示靠近通过成像获取的图像顶端的区域的滚动操作时,操作向上按钮63。
在以下描述中,特别假设从图像、菜单屏幕等的中心指向顶端的方向也被称为屏幕向上方向,并且类似地,从图像、菜单屏幕等的中心指向底部、左端和右端的方向也分别被称为屏幕向下方向、屏幕向左方向和屏幕向右方向。例如,屏幕向上方向是相对于图像、菜单屏幕等的向上方向,即,在图像或菜单屏幕上的向上方向。
此外,在以下描述中,假设在图像、菜单屏幕等上执行与屏幕向上方向、屏幕向下方向、屏幕向左方向和屏幕向右方向相关联的操作的功能也分别被称为向上操作功能、向下操作功能、向左操作功能和向右操作功能。
因此,将向上操作功能(诸如与相对于诸如图像或菜单屏幕的显示屏幕的向上方向相关联的操作,即,在屏幕向上方向上移动光标等的滚动操作或显示靠近屏幕向上方向的一端的区域)分配给向上按钮63。
除了上述,在捕获图像或再现图像时切换显示单元61上的显示时,也操作向上按钮63。也就是说,当操作向上按钮63时,在尽可能少地显示指示各种设置的标记等的状态下、更多地显示指示各种设置的标记的状态下、显示与图像相关联的直方图的状态下等,根据对向按钮63的操作来切换显示单元61上的显示。
在以下描述中,在捕获图像或再现图像时切换显示单元61上的显示的功能被称为DISP功能。
以这种方式,向上操作功能和DISP功能被分配给向上按钮63。
指示DISP功能的字符“DISP”被在成像装置11的后表面上打印在图中的向上按钮63上方,即,在箭头W11指示的部分中。用户(人)可以通过查看打印的字符立即理解DISP功能被分配给向上按钮63。
向下按钮64被设置在图中的向上按钮63的下方,即,在其底面侧。当执行屏幕向下操作时,操作向下按钮64。也就是说,向下操作功能被分配给向下按钮64。
此外,除了向下操作功能之外,多个预定功能中的任意功能可以选择性地分配给向下按钮64。例如,在初始设置中,再现功能被分配给向下按钮64。当操作向下按钮64时,开始再现最新捕获的图像。
当对显示在显示单元61上的图像、菜单屏幕等执行屏幕向右操作时,操作向右按钮66。也就是说,向右操作功能被分配给向右按钮66。
具体地,例如,当在菜单屏幕上在屏幕向右方向上移动光标等时或者例如当显示通过成像获取的图像的右端附近的区域的滚动操作时,操作向右按钮66。
此外,除了向右操作功能之外,显示功能设置屏幕的功能显示功能(以下称为Fn功能)被分配给向右按钮66。也就是说,例如,当在捕获图像等时操作向右按钮66时,功能设置屏幕被显示在显示单元61上。
指示Fn功能的字符“Fn”被在成像装置11的后表面上打印在图中向右按钮66的右侧,即,在箭头W12指示的部分中。用户可以通过查看打印的字符立即理解Fn功能被分配给向右按钮66。
顺便提及,描述了在按钮附近打印指示预先分配给按钮的功能的字符(诸如字符“DISP”和“Fn”)的示例,但是可以打印指示功能等的符号。
向左按钮65被设置在图中向右按钮66的左侧。当执行屏幕向左操作时,操作向左按钮65。也就是说,向左操作功能被分配给向左按钮65。
此外,除了向左操作功能之外,多个预定功能中的任意功能可以选择性地分配给向左按钮65。例如,在初始设置中,白平衡(WB)设置功能被分配给向左按钮65。当在捕获图像等时操作向左按钮65时,在显示单元61上显示用于选择用作白平衡调整的前提的成像环境的WB设置屏幕。
以这种方式,向上按钮63、向下按钮64、向左按钮65和向右按钮66与向上、向下、向左和向右方向相关联,并且在与按钮(键)相关联的方向上执行操作的功能和不与方向相关联的功能被分配给其。也就是说,与方向相关联的功能和不与方向相关联的功能被预先分配给作为与方向相关联的操作单元的按钮。
在下面的描述中,当它们没有特别地彼此区分时,向上按钮63、向下按钮64、向左按钮65和向右按钮66也被称为方向键。在图3所示的示例中,指示与每个方向键相关联的方向的箭头被打印在方向键上。此外,仅需要为每个方向键分配至少一个功能。也就是说,可以将一个或多个功能分配给每个方向键。
此外,菜单按钮67被设置在图中向左按钮65的左侧。当在显示单元61上显示菜单屏幕时,操作菜单按钮67。也就是说,向菜单按钮67分配显示菜单屏幕的菜单显示功能。
盖子68被在成像装置11的后表面上附接到图中的显示单元61的左侧。盖子68可以通过操作锁定按钮69从成像装置11拆卸。
如箭头Q11所示,各种端子或槽被在成像装置11的主体中设置在盖子68下方。这里,箭头Q11所示的图示出了盖子68从成像装置11的主体的后表面的左侧部分拆卸的状态。
在该示例中,在成像装置11的主体的盖子68下方设置高清晰度多媒体接口(HDMI)(注册商标)端子70和通用串行总线(USB)(注册商标)端子71作为用于外部连接的输入和输出端子。
此外,在成像装置11的主体的盖子68下方设置用于附接麦克风的端子72、作为可从成像装置11拆卸的可移除记录介质的插入孔的槽73、以及用于示出对可移除记录介质的访问的介质访问灯74等。
此外,例如,在成像装置11的底面上设置有作为用于将成像装置11固定到三脚架等的固定部分的插座91,如图4所示。例如,当使用插座91将成像装置11固定到天花板、墙壁等时,可以在成像装置11反转或旋转90度的状态下执行捕获图像。
<成像装置的功能配置的示例>
下面将描述成像装置11的功能配置的示例。
图5是示出成像装置11的功能配置的示例的图。顺便提及,图5中的对应于图1至图4中的元件的元件将参考相同的附图标记,并且将适当地省略其描述。
在图5所示的示例中,成像装置11可以利用远程操作单元121远程操作,并且诸如具有显示器的记录器或显示器的外部装置122连接到成像装置11。在描述中,假设外部装置122是具有显示器的记录器。另外,外部装置122和成像装置11可以由专用于外部装置122的外部装置远程操作单元123远程操作。
成像装置11包括成像单元131、声音收集单元22、操作单元132、控制单元133、可移除记录介质134、声音输出单元43、显示单元61、通信单元135和输入和输出端子136。
成像单元131包括图1所示的透镜21、成像元件等,通过在控制单元133的控制下接收来自被摄体的光并对接收到的光进行光电转换来捕获图像,并将捕获图像的图像数据提供给控制单元133。接下来,在下面的描述中,由成像单元131获取的图像也被特别称为捕获图像。
声音收集单元22在控制单元133的控制下收集环境声音,并将作为结果获取的收集声音的声音数据提供给控制单元133。
操作单元132包括例如图2中所示的电源按钮41和快门按钮42、图3中所示的向上按钮63至菜单按钮67、以及布置为与显示单元61重叠的触摸面板等,并将对应于用户操作的信号提供给控制单元133。
控制单元133控制成像装置11的整个操作。控制单元133包括设置单元151、屏幕上显示(OSD)图像生成单元152、显示控制单元153和记录控制单元154。
设置单元151基于来自操作单元132的信号执行各种设置。OSD图像生成单元152生成OSD图像。
OSD图像的示例包括指示标记的图像或指示成像装置11的各种设置或状态的图像,诸如指示成像模式的标记、指示电池的剩余电量的图像、指示白平衡设置的标记等。
显示控制单元153控制显示单元61或外部装置122上的各种图像的显示。记录控制单元154控制通过成像获取的图像数据或通过声音收集获取的声音数据在可移除记录介质134或外部装置122上的记录。
可移动记录介质134是可以附接到成像装置11和从成像装置11拆卸的记录介质,并且当其插入到图3所示的槽73中时附接到成像装置11。可移除记录介质134记录从控制单元133提供的图像数据或声音数据,并且如果需要,将其上记录的图像数据或声音数据提供给控制单元133。
通信单元135通过无线或有线通信接收从远程操作单元121发送的命令,并将接收的命令提供给控制单元133。
例如,远程操作单元121是专用于成像装置11的远程命令器或用于通过使用红外光等的无线通信或使用端子71等的有线通信发送命令的通用目的远程命令器,并且可以是由智能手机等体现。
输入和输出端子136例如是包括图3中所示的端子70或端子71等的输入和输出单元,并且与外部装置122通信。
例如,输入和输出端子136将从控制单元133提供的图像数据或声音数据输出到外部装置122,或者将从外部装置122提供的命令等输出到控制单元133。
<翻转设置>
顺便提及,如上所述,成像装置11可以在用户用手拿着它的状态下使用,或者可以在固定到天花板、墙壁等的状态下使用。
例如,当成像装置11在其被反向固定的状态下使用时,以上下反转状态记录捕获图像,并且以交换状态记录收集声音的右声道和左声道。
因此,在成像装置11中设置了即使当在反转状态下使用成像装置11时也禁止图像的上下反转的翻转功能。翻转功能是将图像(诸如,捕获图像、再现图像或菜单屏幕)的显示方向上下反转到预定方向(即这里的上下方向)的功能。此外,在该实施例中,即使当在反转状态下使用成像装置11时,声音的右声道和左声道也不会被翻转功能反转。
这里,对于由成像单元131获取的捕获图像,用于确认在成像期间在显示单元61上显示的视角的图像被称为直通图像,并且要记录在可移动记录介质134等上的记录图像被称为记录图像。此外,由声音收集单元22获取的声音也被称为收集声音,并且要记录在可移除记录介质134等上的记录声音也被称为记录声音。
例如,当关闭翻转设置时,即,当翻转功能被设置为OFF时,假设在非反转状态下(即,在成像装置11的底面在上下方向上面向下侧(地面侧)的状态下)使用成像装置11。
因此,在关闭翻转设置的状态下,捕获图像和收集声音变为记录图像和记录声音而不进行任何改变。
此外,尽管稍后将描述其细节,但是还显示诸如OSD图像或菜单屏幕的显示屏幕,使得成像装置11的顶面在关闭翻转设置的状态下面向屏幕向上方向。
顺便提及,在下面的描述中,当没有特别区分时,在显示单元61上显示的诸如记录图像、OSD图像和菜单图像的图像(屏幕)也简称为显示屏幕。这里,直通图像不包括在显示屏幕中(从中排除)。
此外,在以下描述中,当在显示单元61上显示显示屏幕时,显示屏幕的顶端(即,屏幕向上方向上的一端)位于显示单元61的顶面侧的显示状态被称为正常显示状态。在正常显示状态下,在从用户看时,显示单元61的顶面位于上侧的状态下,直立于使用成像装置11的用户在显示单元61上显示字符等。
另一方面,在开启翻转设置的状态下,即翻转功能被设置为ON的状态下,捕获图像被上下反转,即,捕获图像被旋转180度,以成为记录图像,并且收集声音的右声道和左声道被交换,以成为记录声音。
此外,尽管稍后将描述细节,但是诸如OSD图像或菜单屏幕的显示屏幕被上下反转并显示,使得成像装置11的底面在开启翻转设置状态下面向屏幕向上方向。也就是说,显示屏幕的显示方向被上下反转。
顺便提及,在以下描述中,当在显示单元61上显示显示屏幕时,显示屏幕的顶端(即,屏幕向上方向上的一端)位于显示单元61的底面侧的显示状态被称为反转显示状态。
在反转显示状态下,在当从用户看时,显示单元61的底面位于上侧的状态下,直立于使用成像装置11的用户在显示单元61上显示字符等。换句话说,在反转显示状态下,在当从用户看时,显示单元61顶面位于上侧的状态下,以与使用成像装置11的用户的垂直翻转状态在显示单元61上显示字符等。
此外,在开启翻转设置的状态下,成像装置11的方向键的行为也变化。也就是说,分配给与不同方向相关联的两个方向键的功能在两个方向键之间交换。
当以这种方式将翻转功能设置为ON时,执行在生成记录图像时的捕获图像的上下反转、在生成记录声音时的收集声音的右声道和左声道的交换、显示屏幕的上下反转显示和方向键之间的分配功能的交换,但是可以执行其中的至少一个。例如,当翻转功能被设置为ON时,至少可以执行图像的显示方向的上下反转,诸如在生成记录图像时的捕获图像的上下反转或者显示屏幕的上下反转显示。在这种情况下,可以执行或不执行在生成记录声音时的收集声音的右声道和左声道的交换或方向键之间的分配功能的交换。
<翻转设置中的操作>
将在下面更详细地描述翻转设置。
首先,将描述当翻转功能被设置为ON或OFF时的操作。
用户可以通过操作设置在成像装置11的后表面上的菜单按钮67等来执行将翻转设置设置为ON或OFF的设置操作,以在显示单元61上显示菜单屏幕。
例如,当在关闭翻转设置的状态下操作菜单按钮67时,显示控制单元153响应于从用作操作单元132的菜单按钮67提供的信号将菜单屏幕的数据提供给显示单元61,并显示图6所示的菜单屏幕。
在图6所示的示例中,在菜单屏幕上并行排列(显示)包括显示字符“翻转”的菜单项MA11的多个菜单项。菜单项MA11是用于执行翻动设置的菜单项,并且菜单项MA11中显示的字符“Off”指示当前翻转设置被关闭。因此,在图6所示的示例中,菜单屏幕的显示状态是正常显示状态。
此外,在该示例中,菜单项MA11被强调,即,处于与其他菜单项不同的显示状态,并且菜单项MA11处于选择状态。
在该状态下,例如,假设用户操作设置在成像装置11的顶面上的快门按钮42等,并指示确定菜单项MA11的选择。
然后,显示控制单元153响应于从用作操作单元132的快门按钮42等提供的信号,将翻转设置屏幕的数据提供给显示单元61,并显示例如图7所示的翻转设置屏幕。
在图7所示的示例中,由于用于执行翻转设置的翻转设置屏幕FC11被显示为与图6所示的菜单屏幕重叠并且翻转设置被关闭,因此翻转设置屏幕FC11也被在正常显示状态下显示。
在翻转设置屏幕FC11上显示用于将翻转功能设置为ON的设置项CA11-1和用于将翻转功能设置为OFF的设置项CA11-2。特别地,在设置项CA11-1中显示字符“On”,并且在设置项CA11-2中显示字符“Off”。顺便提及,在以下描述中,当设置项CA11-1和设置项CA11-2没有特别地彼此区分时,它们也简称为设置项CA11。
当显示翻转设置屏幕FC11时,用户通过操作方向键、快门按钮42等来执行翻转设置以选择设置项CA11或者确定选择状态下的设置项CA11的选择。
在图7所示的示例中,强调并选择用于关闭翻转设置的设置项CA11-2。当在该状态下执行确定选择设置项CA11-2的操作时,设置单元151基于从操作单元132提供的信号关闭翻转设置,并记录指示设置结果的翻转设置信息。
顺便提及,更具体地,设置单元151记录翻转设置信息并通过在确定选择设置项CA11-2时将记录的翻转设置信息设置为指示翻转功能被设置为OFF的信息来更新翻转设置信息。
当以这种方式关闭翻转设置时,显示控制单元153然后将例如显示单元61的显示返回到图6所示的菜单屏幕,或者将显示返回到显示菜单屏幕之前的状态,例如,显示直通图像的状态。
另一方面,当选择用于开启翻转设置的设置项CA11-1并且用户执行确定设置项CA11-1的选择的操作时,设置单元151基于从操作单元132提供的信号来开启翻转设置,并记录指示设置结果的翻转设置信息。也就是说,用指示翻转功能被设置为ON的信息更新翻转设置信息。
此外,当开启翻转设置时,显示控制单元153此后立即控制显示单元61,使得例如显示作为与图8所示的翻转设置相关联的屏幕的说明屏幕,即,与翻转功能的设置相关联的屏幕。
在该示例中,由于翻转设置被开启,因此以反转显示状态显示说明屏幕。也就是说,在显示单元61上以上下反转状态显示说明屏幕,使得说明屏幕的顶端面对成像装置11的底面。
翻转功能的说明显示在说明屏幕上。具体地,在说明屏幕上显示指示当开启翻转设置时操作单元132的行为,特别是,用作操作单元132的方向键的行为的说明的字符“在上按钮和下按钮功能之间切换。”和字符“在左按钮和右按钮功能之间切换。”。
也就是说,在说明屏幕上显示指示方向键中与相反方向相关联的按钮(诸如向上按钮63和向下按钮64)的行为(功能)的说明。类似地,在说明屏幕上还显示指示方向键中与相反方向相关联的按钮(诸如向左按钮65和向右按钮66)的行为(功能)的说明。
顺便提及,稍后将描述基于翻转设置的方向键等的行为的细节。此外,这里已经描述了显示方向键的行为的说明的情况作为说明屏幕的示例。然而,说明屏幕不受特别限制,只要显示指示包括当开启翻转设置时的显示状态的成像装置11等的行为的说明(诸如指示显示被上下反转的说明或者远程操作单元的行为的说明)即可。
如上所述,在成像装置11中,在开启翻转设置之后,立即以反转显示状态显示在翻转设置被开启时显示成像装置11的行为的说明的说明屏幕。因此,可以通知用户翻转设置被开启并且可以使用户直观且容易地理解在设置之后的行为,并且因此能够提高成像装置11的可用性。特别地,通过以反转显示状态显示说明屏幕,用户可以容易地理解显示单元61的显示是上下反转的。
此外,在用户已经确认说明屏幕的说明细节时操作的按钮BT11也显示在图8所示的说明屏幕中,并且在按钮BT11中显示字符“OK”。
通过在说明屏幕上设置按钮BT11,可以提示用户确认翻转设置被开启。因此,在该示例中,说明屏幕还用作用于执行翻转设置的确认(即,翻转功能的设置的确认)的确认屏幕。
当用户操作按钮BT11时,显示单元61的显示然后返回到例如图6所示的菜单屏幕或者返回到显示菜单屏幕之前的状态,例如,显示直通图像的状态。
此外,这里已经描述了在说明屏幕上设置作为用于确认翻转设置被开启的OK按钮的按钮BT11的示例,但是除了按钮BT11之外,还可以设置用于取消开启翻转设置的取消按钮。
在这种情况下,用户通过操作用作操作单元132的方向键等来操作说明屏幕上的取消按钮以使已由用户执行的开启翻转设置的选择操作无效。
当用户在显示说明屏幕(确认屏幕)并且指示取消开启翻转功能的设置的状态下操作取消按钮时,设置单元151基于来自操作单元132的信号取消已经在显示说明屏幕之前刚刚执行的翻转功能的设置。此外,显示控制单元153控制显示单元61,使得显示单元61的显示返回到图7所示的翻转设置屏幕FC11。然后,当新执行翻转设置时,设置单元151记录指示新设置结果的翻转设置信息。
当可以以这种方式在翻转设置的说明屏幕上取消之前刚刚执行的翻转功能的设置时,能够进一步提高可用性。
下面将描述当执行上述翻转设置时成像装置11的具体操作。也就是说,下面将参考图9所示的流程图描述由成像装置11执行的翻转设置处理。当在显示单元61上显示图7所示的翻转设置屏幕FC11时,开始该翻转设置处理。
在步骤S11中,设置单元151基于来自操作单元132的信号确定是否开启翻转设置。
例如,当用户操作操作单元132并且确定选择翻转设置屏幕FC11上的设置项CA11-1时,确定开启翻转设置。另一方面,当确定选择翻转设置屏幕FC11上的设置项CA11-2时,确定不开启翻转设置,即,关闭翻转设置。
当在步骤S11中确定要开启翻转设置时,即,当接收到开启翻转功能的指令时,设置单元151在步骤S12中响应于确定用户对设置项CA11-1的选择的操作基于从操作单元132提供的信号开启翻转设置。
具体地,用指示翻转设置被开启的信息更新由设置单元151记录的翻转设置信息。换句话说,设置单元151生成指示翻转设置被开启的翻转设置信息,并记录所生成的翻转设置信息。
在步骤S13中,显示控制单元153将说明屏幕的数据提供给显示单元61,基于记录在设置单元151中的指示翻转设置被开启的翻转设置信息控制显示单元61,使得在显示单元61上显示上下反转的说明屏幕。因此,例如,如图8所示,在显示单元61上以反转显示状态显示说明屏幕。
当显示说明屏幕时,翻转设置处理结束。在这种情况下,当用户操作按钮BT11时,显示单元61的显示返回到菜单屏幕或返回到直通图像的显示。
另一方面,当在步骤S11中确定不开启翻转设置,即,关闭翻转设置时,设置单元151在步骤S14中响应于确定用户对设置项CA11-2的选择的操作基于从操作单元132提供的信号关闭翻转设置。
具体地,用指示翻转设置被关闭的信息更新由设置单元151记录的翻转设置信息。换句话说,设置单元151生成指示翻转设置被关闭的翻转设置信息,并记录所生成的翻转设置信息。
当关闭翻转设置时,翻转设置处理此后结束。在这种情况下,显示单元61的显示返回到例如菜单屏幕或返回到直通图像的显示。也就是说,例如,当关闭翻转设置时,显示控制单元153不显示与翻转功能的设置相关联的屏幕,例如图8所示的说明屏幕。
当以这种方式响应于用户对翻转设置屏幕的操作而记录翻转设置信息并且开启翻转设置时,成像装置11此后立即以反转显示状态显示说明屏幕。因此,可以使用户容易地理解翻转设置是否被开启或者当开启翻转设置时执行什么行为,因此能够提高成像装置11的可用性。
<运动图像的捕获>
下面将描述当开启和关闭翻转设置时捕获图像时的操作。
例如,当在翻转设置关闭的状态下捕获运动图像时,捕获图像和收集声音变为记录图像并且记录声音而不进行任何改变。此外,在显示单元61上执行正常显示状态下的显示。
因此,例如,当在如图10中的箭头Q21所示的成像装置11的底面面向地面的状态(下文中也称为正常使用状态)下执行成像时,显示在显示单元61上的OSD图像或直通图像直立地显示给用户。
顺便提及,当用户在正常使用状态下使用成像装置11时,假设用户在当从用户看时显示单元61的顶面位于成像装置11的上侧,且当从当从用户看时显示单元61的底面位于成像装置11的下侧的状态下看显示单元61。这在以下描述中是相同的。
此外,当用户在成像装置11被上下反转的状态下使用成像装置11时(下文中也称为反转使用状态),假设用户在当从用户看时显示单元61的底面位于成像装置11的上侧,且当从当从用户看时显示单元61的顶面位于成像装置11的下侧的状态下看显示单元61。
此外,当提到OSD图像或直通图像直立地显示给用户时,这意味着OSD图像上的字符既不反转也不放下,而是以与用户通常看直通图像上的字符和被摄体的状态也以与用户实际看到被摄体相同的方式显示给用户相同的方式直立地显示给用户。在以下描述中,当提及用户直立地看到某物时,这意味着在该状态下从用户看到图像等。
当关闭翻转设置并且在正常使用状态下执行成像时,如箭头Q21所示,也以用户实际看到被摄体类似的状态记录记录图像,如箭头Q22所示,并且也以右声道和左声道正确的状态记录记录声音。
此外,例如,当关闭翻转设置并且在反转使用状态下执行成像时,如箭头Q23所示,即,在成像装置11上下反转的状态下执行成像时,在直通图像上显示被摄体,如同用户看到实际被摄体,但OSD图像以上下反转状态显示给用户。
此外,当关闭翻转设置并且在反转使用状态下执行成像时,如箭头Q23所示,与用户实际看到的被摄体不同,以上下反转状态记录记录图像,如箭头Q24所示,并且,与实际声音不同,以右声道和左声道被反转的状态记录记录声音。
以这种方式,当关闭翻转设置时,正常使用状态是正确使用状态,并且反转使用状态是错误使用状态。也就是说,当关闭翻转设置时,假设在正常使用状态下使用成像装置11,并且不假设在反转使用状态下使用它。
另一方面,当在开启翻转设置的状态下捕获运动图像时,将捕获图像上下反转为记录图像,并且将收集声音的右声道和左声道交换为记录声音。此外,在显示单元61上执行反转显示状态下的显示。这里,直通图像在反转显示状态下不显示,并且在正常显示状态下显示。
因此,当开启翻转设置并且在正常使用状态下由成像装置11执行成像时,例如,如图11中的箭头Q31所示,以与用户看到实际被摄体相同的方式在直通图像上显示被摄体,但OSD图像以上下反转状态显示给用户。
当开启翻转设置并且在正常使用状态下执行成像时,如箭头Q31所示,与用户实际看到的被摄体不同,以上下反转状态记录记录图像,如箭头Q32所示,并且与实际声音不同,也以右声道和左声道被反转的状态记录记录声音。
此外,例如,当开启翻转设置并且由成像装置11在反转使用状态下执行成像时,如箭头Q33所示,显示单元61上显示的OSD图像或直通图像被用户直立地看到。
当开启翻转设置并且在反转使用状态下执行成像时,如箭头Q33所示,以与用户实际看到被摄体类似的状态记录记录图像,如箭头Q34所示,并且也以其右声道和左声道正确的状态记录记录声音。
以这种方式,当开启翻转设置时,反转使用状态是正确使用状态,并且正常使用状态是错误使用状态。也就是说,当开启翻转设置时,假设使用反转使用状态下的成像装置11,并且不假设在正常使用状态下使用它。
下面将描述当捕获运动图像时成像装置11的上述操作。也就是说,下面将参考图12所示的流程图描述使用成像装置11的成像处理。
在步骤S41中,成像单元131开始捕获图像。也就是说,成像单元131通过接收从被摄体入射的光并执行光电转换来捕获每帧的图像并且将获取的图像数据顺序地提供给控制单元133。
在步骤S42中,声音收集单元22开始收集环境声音,并且将收集声音的声音数据顺序地提供给控制单元133。
在步骤S43中,控制单元133确定是否开启翻转设置。例如,当设置单元151中记录的翻转设置信息是指示翻转设置被开启的信息时,确定翻转设置被开启。
当在步骤S43中确定开启翻转设置时,显示控制单元153在步骤S44中显示上下反转的OSD图像以与直通图像重叠。
也就是说,显示控制单元153将由成像单元131获取的捕获图像的图像数据作为直通图像的图像数据提供给显示单元61而不进行任何改变,并且在显示单元61上显示直通图像。
此外,显示控制单元153根据各种设置基于由OSD图像生成单元152生成的OSD图像的图像数据生成以上下反转状态显示OSD图像(即,以反转显示状态显示OSD图像)的图像数据,并将生成的图像数据设置为最终OSD图像的图像数据。然后,显示控制单元153将所生成的OSD图像的图像数据提供给显示单元61,并控制显示单元61,使得显示处于反转显示状态的OSD图像以与直通图像重叠。
因此,例如,在显示单元61上显示由图11中的箭头Q31指示或箭头Q33指示的直通图像和OSD图像。
在步骤S45中,记录控制单元154上下反转捕获图像,并将反转的捕获图像设置为记录图像。
也就是说,记录控制单元154基于从成像单元131提供的捕获图像的图像数据生成用于显示以反转显示状态显示的捕获图像(即,以上下反转状态显示的图像)的图像数据,作为用于记录图像的图像数据。
在步骤S46中,记录控制单元154交换收集声音的右声道和左声道,并将交换的声音设置为记录声音。
也就是说,记录控制单元154基于从声音收集单元22提供的收集声音的声音数据生成声音数据的右声道和左声道被交换的声音数据,并将所生成的声音数据设置为用于记录声音的声音数据。
通过上述处理,例如,如图11中的箭头Q32或箭头Q34所示,获取用于再现运动图像的记录图像的图像数据和记录声音的声音数据。
例如,当获取记录图像的图像数据和记录声音的声音数据时,记录控制单元154将图像数据和声音数据提供给可移除记录介质134,并将图像数据和声音数据记录在其中。此外,例如,记录图像的图像数据和记录声音的声音数据可以由控制单元133经由输入和输出端子136提供给外部装置122。
然后,当适当地记录记录图像的图像数据和记录声音的声音数据等时,成像处理结束。
另一方面,当在步骤S43中确定没有开启翻转设置时,即,当关闭翻转设置时,处理流程转到步骤S47。
在步骤S47中,显示控制单元153显示OSD图像以与直通图像重叠。
也就是说,显示控制单元153将由成像单元131获取的捕获图像的图像数据作为直通图像的图像数据提供给显示单元61而不进行任何改变,并且在显示单元61上显示直通图像。
此外,显示控制单元153将由OSD图像生成单元152根据各种设置生成的OSD图像的图像数据提供给显示单元61而不进行任何改变,并控制显示单元61使得OSD显示正常显示状态下的图像以与直通图像重叠。
因此,例如,在显示单元61上显示由图10中的箭头Q21指示或由箭头Q23指示的直通图像和OSD图像。
在步骤S48中,记录控制单元154将捕获图像设置为记录图像而不进行任何改变。也就是说,记录控制单元154将从成像单元131提供的捕获图像的图像数据设置为记录图像的图像数据而不进行任何改变。
在步骤S49中,记录控制单元154将收集声音设置为记录声音而不进行任何改变。也就是说,记录控制单元154将从声音收集单元22提供的收集声音的声音数据设置为记录声音的声音数据而不进行任何改变。
通过上述处理,例如,如图10中的箭头Q22或箭头Q24所示,获取用于再现运动图像的记录图像的图像数据和记录声音的声音数据。
例如,当获取记录图像的图像数据和记录声音的声音数据时,记录控制单元154将图像数据和声音数据提供给可移除记录介质134,并将图像数据和声音数据记录在其中。此外,例如,可以使用控制单元133经由输入和输出端子136将记录图像的图像数据和记录声音的声音数据提供给外部装置122。
然后,当适当地记录记录图像的图像数据和记录声音的声音数据等时,成像处理结束。
以这种方式,成像装置11根据翻转设置是开启还是关闭来生成记录图像和记录声音。具体地,通过在开启翻转设置时将捕获图像上下反转为记录图像并且将收集声音的右声道和左声道交换为记录声音,即使当以反转使用状态使用成像装置11时也能够获取适当再现的记录图像和记录声音。
<将图像等输出到外部>
此外,当由成像装置11获取的图像或声音输出到外部装置122时,控制图像或声音的输出,使得在正常显示状态下显示诸如OSD图像的各种图像并且正确地再现声音,而不依赖于翻转设置是开启还是关闭。这是,例如,因为外部装置122的显示器不经常在上下反转状态下使用。
因此,当在外部装置122上显示OSD图像或菜单屏幕时,成像装置11将诸如OSD图像或菜单屏幕的数据输出到外部装置122而不进行任何改变,使得它们在正常显示状态下显示。此外,成像装置11将记录图像的图像数据或记录声音的声音数据输出到外部装置122而不进行任何改变,从而正确地再现运动图像。
因此,例如,当如图13中的箭头Q41所示关闭翻转设置时,假设在正常使用状态下执行捕获运动图像,并且获取的记录图像和记录声音和OSD图像被输出到外部装置122,使得它们显示在外部装置122上。
在这种情况下,如箭头Q41所示,用户可以直立地看到成像装置11中的OSD图像或直通图像。
此外,在这种情况下,如箭头Q42所示,用户直立地看到作为构成外部装置122的显示器的显示单元181中的OSD图像和记录图像。也就是说,在记录图像中,以与用户实际看到被摄体相同的方式显示被摄体。
另一方面,例如,当如箭头Q43所示关闭翻转设置时,假设在反转使用状态下捕获运动图像,并且获取的记录图像和记录声音以及OSD图像被输出到外部装置122使得它们显示在外部装置122上。
在这种情况下,如箭头Q43所示,成像装置11中的直通图像上的被摄体以与用户实际看到被摄体相同的方式显示,但是OSD图像以上下反转的状态显示给用户。
此外,在这种情况下,如箭头Q44所示,外部装置122的显示单元181上的OSD图像被直接显示给用户,但是与用户实际上看到的被摄体不同,记录图像中的被摄体被以上下反转的状态显示。
另一方面,例如,当如图14中的箭头Q51所示开启翻转设置时,假设在正常使用状态下捕获运动图像并且获取的记录图像和记录声音和OSD图像被输出到外部装置122,使得它们显示在外部装置122上。
此外,在这种情况下,如箭头Q51所示,成像装置11中的直通图像上的被摄体以与用户实际看到被摄体相同的方式显示,但OSD图像以上下反转的状态显示给用户。
此外,在这种情况下,如箭头Q52所示,外部装置122的显示单元181中的OSD图像被直立地显示给用户,但是与用户实际上看到的被摄体不同,记录图像中的被摄体被以上下反转的状态显示。
另一方面,例如,当如箭头Q53所示开启翻转设置时,假设在反转使用状态下捕获运动图像,并且将获取的记录图像和记录声音和OSD图像输出到外部装置122使得它们显示在外部装置122上。
在这种情况下,如箭头Q53所示,成像装置11中的OSD图像或直通图像被直立地显示给用户。
此外,在这种情况下,如箭头Q54所示,外部装置122的显示单元181中的OSD图像和记录图像被直立地显示给用户。也就是说,记录图像中的被摄体以与用户实际看到的被摄体相同的方式显示。
以这种方式,当记录图像或记录声音被输出到外部装置122并且通过成像装置11在正确使用状态下执行成像时,外部装置122中的OSD图像或记录图像被直立地显示并且记录声音可以正确再现。
下面将描述如上所述使成像装置11将OSD图像、记录图像和记录声音输出到外部装置122的处理。也就是说,下面将参考图15所示的流程图描述成像装置11的输出处理。
例如,当使用成像装置11捕获运动图像时,即,例如,当正在执行上面参考图12描述的成像处理时或者当由外部装置122再现成像之后记录在可移除记录介质134上的运动图像(即记录图像和记录声音)时,执行该输出处理。
在步骤S81中,控制单元133经由输入和输出端子136将由OSD图像生成单元152生成的OSD图像的图像数据输出到外部装置122而不进行任何改变。因此,OSD图像被直立地显示在外部装置122上。
在步骤S82中,控制单元133经由输入和输出端子136将记录图像的图像数据和记录声音的声音数据输出到外部装置122而不进行任何改变,然后结束输出处理。
例如,当捕获运动图像时,在步骤S82中,将在图12中的步骤S45和S46的处理或图12中的步骤S48和S49的处理中获取的记录图像的图像数据和记录声音的声音数据输出到外部装置122。
此外,例如,当没有捕获移动时,从可移除记录介质134读取的记录图像的图像数据和记录声音的声音数据被输出到外部装置122。
提供给外部装置122的记录图像的图像数据和记录声音的声音数据被记录在外部装置122中,或者用于外部装置122中的再现处理。因此,例如,当在显示单元181上显示记录图像时,被摄体的方向根据成像装置11的翻转设置和使用状态而变化,如图13中的箭头Q42或箭头Q44所示的示例或图14中的箭头Q52或箭头Q54所示的示例。
以这种方式,成像装置11在不依赖于翻转设置是开启还是关闭的情况下将OSD图像、记录图像和记录声音输出到外部装置122而不进行任何改变。
因此,当由成像装置11在正确使用状态下捕获图像并且在外部装置122的显示单元181上显示被摄体的图像以例如在捕获运动图像期间确认视角等时,OSD图像或记录图像被直立地显示在外部装置122上,并且还可以正确地再现记录声音。因此,能够提高可用性。
<方向键的操作>
此外,用作成像装置11中的操作单元132的方向键的行为根据翻转设置是开启还是关闭而变化。
也就是说,在关闭翻转设置的状态下,向上操作功能和DISP功能被分配给向上按钮63,并且向下操作功能和另一个所选功能被分配给向下按钮64。顺便提及,在下面的描述中,假设再现功能被作为另一个所选功能分配给向下按钮64。
当在该状态下开启翻转设置时,与相反方向相关联的向上按钮63和向下按钮64的分配功能彼此交换。
也就是说,在开启翻转设置的状态下,向下操作功能和再现功能被分配给向上按钮63,并且向上操作功能和DISP功能被分配给向下按钮64。
在这种情况下,例如,如图3所示,在向上按钮63附近打印字符“DISP”,但是当操作向上按钮63时,执行实现再现功能而不是DISP功能的处理。也就是说,当开启翻转设置并且操作设置在字符“DISP”周围的向上按钮63时,控制单元133不执行实现由字符“DISP”指示的DISP功能的处理,而是执行与实现DISP功能的处理不同的实现再现功能的处理。
此外,在关闭翻转设置的状态下,向左操作功能和另一个所选功能被分配给向左按钮65,并且向右操作功能和Fn功能被分配给向右按钮66。顺便提及,在在下面的描述中,假设WB设置功能被作为另一个所选功能分配给向左按钮65。
当在该状态下开启翻转设置时,与相反方向相关联的向左按钮65和向右按钮66的分配功能彼此交换。
也就是说,在开启翻转设置的状态下,向右操作功能和Fn功能被分配给向左按钮65,并且向左操作功能和WB设置功能被分配给向右按钮66。
在这种情况下,例如,如图3所示,字符“Fn”被打印在向右按钮66的附近,但是当操作向右按钮66时,执行实现WB设置功能而不是Fn功能的处理。也就是说,即使当操作向右按钮66时,也不执行实现Fn功能的处理。
对于与方向相关联的方向键,当开启翻转设置时,方向键的分配功能在与相反方向相关联的方向键之间交换,即在与预定方向相关联的方向键和与和预定方向相反的方向相关联的方向键之间交换。换句话说,改变了功能的分配目的地。
此时,除了诸如向上操作功能的与方向相关联的功能(即,实现与方向相关联的操作的功能)之外,不与方向相关联的功能(诸如DISP功能、Fn功能和WB设置功能)的分配目的地被交换。
此外,对于不与方向相关联的按钮(键),不改变按钮的分配功能,而不依赖于翻转设置是开启还是关闭。
例如,菜单按钮67、电源按钮41和快门按钮42是与方向无关的按钮(操作单元),并且不交换这些按钮的分配功能,而不依赖于翻转设置开启还是关闭。也就是说,不改变与诸如菜单按钮67之类的方向无关的操作单元的分配功能。
因此,例如,菜单显示功能被分配给菜单按钮67,而不依赖于翻转设置是开启还是关闭。
如上所述,通过当开启翻转设置时,交换与相反方向相关联的方向键的分配功能,当用户以反转使用状态使用成像装置11时,用户可以以与当在正常使用状态下使用成像装置11时相同的操作感操作键。因此,能够提高成像装置11的可用性。
因此,当例如如图16和图17所示操作方向键时、成像装置11的行为根据翻转设置是开启还是关闭或成像装置11的使用状态而变化。
顺便提及,图16和图17中与图3中的元件相对应的元件由相同的附图标记表示,并且将适当地省略其描述。此外,在图16和17中,箭头U、箭头D、箭头L和箭头R分别表示屏幕向上方向、屏幕向下方向、屏幕向左方向和屏幕向右方向。
例如,当关闭翻转设置并且用户在正常使用状态下操作方向键时,如图16中的箭头Q61所示,在初始设置中分配给方向键的功能的方向上和与用户看的相同方向上执行操作。这里,在初始设置中向每个方向键分配功能是指在关闭翻转设置的状态下分配功能。
当操作向上按钮63、向下按钮64、向左按钮65和向右按钮66时,执行图16中的向上、向下、向左和向右操作。另外,在箭头Q61所示的示例中,图中的向上、向下、向左和向右方向分别是屏幕向上方向、屏幕向下方向、屏幕向左方向和屏幕向右方向。
因此,例如,当用户在显示单元61上显示光标的状态下操作向上按钮63时,光标在作为图中的向上按钮63中打印的箭头的方向的向上方向上移动。此外,在图中,向上方向是朝向显示在显示单元61上的屏幕的顶端的方向,即,屏幕向上方向。
此外,例如,当关闭翻转设置并且用户在反转使用状态下操作方向键时,如图16中的箭头Q62所示,在初始设置中分配给方向键的功能的方向上和与用户看的相同方向上执行操作。
也就是说,当操作向上按钮63、向下按钮64、向左按钮65和向右按钮66时,执行图16中的向下、向上、向右和向左操作。这里,在箭头Q62所示的示例中,图中的向上、向下、向左和向右方向分别是屏幕向下方向、屏幕向上方向、屏幕向右方向和屏幕向左方向。
因此,例如,当用户在显示单元61上显示光标的状态下操作向上按钮63时,光标在作为图中打印在向上按钮63中的箭头的方向的向下方向上移动。此外,在箭头Q62所示的示例中,图中的向下方向是朝向显示在显示单元61上的屏幕的顶端的方向,即,屏幕向上方向。
此外,当开启翻转设置时,交换向上按钮63和向下按钮64的分配功能,并且交换向左按钮65和向右按钮66的分配功能。
因此,例如,当开启翻转设置并且用户在正常使用状态下操作方向键时,如图17中的箭头Q71所示,给方向键的功能分配不同于翻转设置关闭时的功能分配,但操作是在与用户看到的相同方向上执行的。
也就是说,当操作向上按钮63、向下按钮64、向左按钮65和向右按钮66时,执行图17中的向上、向下、向左和向右操作。此外,在箭头Q71所示的示例中,图中的向上、向下、向左和向右方向分别是屏幕向下方向、屏幕向上方向、屏幕向右方向和屏幕向左方向。
因此,例如,当用户在显示单元61上显示光标的状态下操作向上按钮63时,光标在作为图中打印在向上按钮63中的箭头的方向的向上方向上移动。这里,在图中,向上方向是朝向显示在显示单元61上的屏幕的底端的方向,即,屏幕向下方向。
当以这种方式开启翻转设置时,相对于显示屏幕与和向上方向相反的向下方向(即,屏幕向下方向)的操作的功能被分配给与向上方向相关联的向上按钮63,并且功能以类似的方式分配给其他方向键。
此外,例如,当开启翻转设置并且用户在反转使用状态下操作方向键时,如图17中的箭头Q72所示,给方向键的功能分配不同于翻转设置关闭时的功能分配,但操作是在与用户看到的相同方向上执行的。
也就是说,当操作向上按钮63、向下按钮64、向左按钮65和向右按钮66时,执行图17中的向下、向上、向右和向左操作。这里,在箭头Q72所示的示例中,图中的向上、向下、向左和向右方向分别是屏幕向上方向、屏幕向下方向、屏幕向左方向和屏幕向右方向。
因此,例如,当用户在显示单元61上显示光标的状态下操作向上按钮63时,光标在作为图中打印在向上按钮63中的箭头的方向的向下方向上移动。此外,在箭头Q72所示的示例中,图中的向下方向是朝向显示在显示单元61上的屏幕的底端的方向,即,屏幕向下方向。
在以这种方式开启翻转设置的状态下,交换分配给方向键的功能。
因此,当用户操作方向键时执行的操作的方向和与相对于诸如菜单屏幕或记录图像的屏幕的方向键相关联的方向相反。也就是说,当操作与向上方向相关联的向上按钮63时,例如,执行与相对于显示屏幕的向下方向(即,屏幕向下方向)相关联的操作。
然而,当开启翻转设置时,显示屏幕上下反转并显示,即显示方向上下反转。因此,当用户操作方向键时,在方向键上打印的箭头的方向上执行操作。也就是说,操作在与用户看到的相同方向上执行。
因此,用户可以以与关闭翻转设置时类似的操作感执行操作,并且因此能够提高成像装置11的可用性。
此外,在开启翻转设置的状态下,在方向键之间交换不与方向相关联的操作的功能。
因此,即使当用户开启翻转设置并以反转使用状态使用成像装置11时,用户也可以以与关闭翻转设置和在正常使用状态下使用成像装置11时相同的操作感执行操作,因此能够进一步提高可用性。
具体地,例如,当如图16中的箭头Q61所示的示例中那样关闭翻转设置,并且在正常使用状态下捕获运动图像期间或再现记录介质期间操作从用户看时打印向上箭头的向上按钮63时,执行DISP功能。
也就是说,当用户操作分配了DISP功能的向上按钮63时,如图8至图20所示,切换成像装置11的显示单元61上的显示。
例如,在图18所示的示例中,在显示单元61上显示包括诸如成像模式或电池中剩余电量的最小必要信息的OSD图像。
此外,在图19所示的示例中,在显示单元61上显示包括比图18所示的OSD图像更多的信息(诸如测光模式或白平衡调整的设置)的OSD图像。
此外,在图20所示的示例中,除了与图18所示的OSD图像类似的最小必要信息之外,还在显示单元61上显示包括如下一些信息的OSD图像,所述一些信息包括直通图像或记录图像的亮度直方图。
每当用户操作分配了DISP功能的向上按钮63时,显示单元61上的显示例如从图18所示的显示切换到图19所示的显示,并进一步切换到图20所示的显示。以这种方式,执行显示的切换。
此时,由于字符“DISP”被打印在分配了DISP功能的向上按钮63附近,因此用户可以容易地切换显示。
另一方面,例如,当如图17中的箭头Q72所示的示例中那样开启翻转设置,并且在反转使用状态下捕获运动图像期间或再现记录介质期间操作从用户看时打印向上箭头的向下按钮64时,执行DISP功能。
以这种方式,分配DISP功能的方向键(按钮)根据翻转设置是开启还是关闭而变化。然而,在任何情况下,当在为翻转设置假定的使用状态下使用成像装置11的用户操作从用户看时打印向上箭头的方向键时,可以执行DISP功能。也就是说,用户可以以相同的操作感执行DISP功能的操作,而不依赖于翻转设置。
与DISP功能类似,用户可以以相同的操作感执行再现功能的操作,而不依赖于翻转设置是开启还是关闭。
也就是说,例如,当如图16中的箭头Q61所示的示例中那样关闭翻转设置并且在正常使用状态下使用成像装置时,用户可以通过操作当从用户看时打印向下箭头的向下按钮64来指示执行再现功能。
另一方面,例如,当如图17中的箭头Q72所示的示例中那样开启翻转设置并且在反转使用状态下使用成像装置时,用户可以通过操作当从用户看时打印向下箭头的操作向上按钮63指示执行再现功能。
此外,对于向左按钮65和向右按钮66以及向上按钮63和向下按钮64,用户可以以类似的操作感执行操作,而不依赖于翻转设置。
也就是说,例如,当如图16中的箭头Q61所示的示例中那样关闭翻转设置并且用户在正常使用状态下捕获运动图像期间操作向右按钮66时,执行分配给向右按钮66的Fn功能。
具体地,当操作向右按钮66时,例如,在显示单元61上显示图21所示的功能设置屏幕。在该示例中,可以在功能设置屏幕上执行诸如成像模式、曝光、ISO感光度、测光模式和白平衡调整的各种设置。
另一方面,例如,当如图17中的箭头Q72所示的示例中那样开启翻转设置并且在反转使用状态下使用成像装置时,用户可以通过操作向左按钮65在显示单元61上显示如图21所示的功能设置屏幕。也就是说,可以执行Fn功能。
以这种方式,不依赖于翻转设置是开启还是关闭,用户可以通过操作从用户看时打印向右箭头的方向键(按钮)来指示执行Fn功能。
此外,例如,当如图16中的箭头Q61所示的示例中那样关闭翻转设置并且用户在正常使用状态下捕获运动图像等期间操作向左按钮65时,执行分配给向左按钮65的WB设置功能。
具体地,当操作向左按钮65时,例如,在显示单元61上显示图22所示的WB设置屏幕。在该示例中,可以在WB设置屏幕上设置白平衡调整中的成像环境,诸如晴天、荧光灯、自动。
另一方面,例如,当如图17中的箭头Q72所示的示例中那样开启翻转设置并且在反转使用状态下使用成像装置时,用户可以通过操作向右按钮66在显示单元61上显示如图22所示的WB设置屏幕。也就是说,可以执行WB设置功能。这里,在这种情况下,由于开启翻转设置,因此WB设置屏幕以反转显示状态显示。
以这种方式,不依赖于翻转设置是开启还是关闭,用户可以通过操作从用户看时打印向左箭头的方向键(按钮)来指示执行WB设置功能。
此外,如上所述,即使开启翻转设置,也不改变与方向不相关联的按钮(诸如菜单按钮67)的分配功能。
因此,当用户操作菜单按钮67时,例如,在显示单元61上显示图23所示的菜单屏幕,而不依赖于翻转设置是开启还是关闭。
用户可以通过在以这种方式显示的菜单屏幕上执行诸如选择或确定的操作来执行各种设置。例如,在图23所示的示例中,用户可以执行记录图像的质量的设置、记录图像的大小的设置等。
下面将描述使成像装置11执行与如上所述操作方向键时的操作相对应的处理的键操作处理。也就是说,下面将参照图24所示的流程图描述由成像装置11执行的键操作处理。
例如,当用户操作成像装置11的一个方向键时,开始该键操作处理。当用户操作用作操作单元132的方向键时,对应于用户操作的信号从操作单元132提供给控制单元133。
在步骤S111中,控制单元133基于记录在设置单元151中的翻转设置信息来确定翻转设置是否开启。
当在步骤S111中确定翻转设置被开启时,处理流程转到步骤S112。
在步骤S112中,控制单元133基于以用户操作为基础并且从操作单元132提供的信号和步骤S111的确定结果执行实现预先分配给与和操作的方向键的方向相反的方向的方向键的功能的处理。这里,预先分配的功能是指在初始设置状态下分配的功能,即,在翻转设置被关闭的状态下分配的功能。
换句话说,在步骤S112中,控制单元133基于步骤S111的确定结果来交换方向键的分配功能。另外,控制单元133基于从操作单元132提供的信号,执行实现在由用户操作的方向键上交换分配的功能之后分配的功能的处理。
因此,例如,假设用户在显示单元61上显示菜单屏幕的状态下操作向上按钮63。
在这种情况下,控制单元133识别与和用户操作的向上按钮63相关联的向上方向相反的向下方向相关联的向下按钮64,并且执行实现在翻转设置被关闭的状态下被分配给向下按钮64的向下操作功能的处理。也就是说,控制单元133的显示控制单元153控制显示单元61,使得显示在菜单屏幕上的光标在屏幕向下方向上移动。
当开启翻转设置时,可以通过执行分配给与在翻转设置关闭的状态下操作的方向键的方向相反的方向键的分配功能来执行基于翻转设置开启时的分配的功能处理。
当以这种方式执行基于方向键的操作的处理时,键操作处理结束。
另一方面,当在步骤S111中确定翻转设置未开启时,即,翻转设置被关闭时,处理流程转到步骤S113。
在步骤S113中,控制单元133基于以用户的操作为基础并且从操作单元132提供的信号和步骤S111的确定结果,执行实现预先分配给操作的方向键的功能的处理,然后结束关键操作过程。
在这种情况下,控制单元133执行在翻转设置被关闭的状态下分配给操作的方向键的功能。因此,例如,当用户在显示单元61上显示菜单屏幕的状态下操作向上按钮63时,控制单元133的显示控制单元153控制显示单元61使得显示在菜单屏幕上的光标在屏幕向上方向上移动。
以这种方式,成像装置11基于翻转设置和预先分配给方向键的功能,基于方向键的操作执行处理。也就是说,成像装置11根据翻转设置交换方向键的功能,并基于方向键的操作执行处理。因此,可以使用户以相同的操作感执行操作,而不依赖于翻转设置,因此能够提高成像装置11的可用性。
顺便提及,上面已经描述了交换分配给与相反方向相关联的方向键的功能的示例。这是因为假设以反转使用状态使用成像装置11。
然而,例如,可以想到的是,成像装置11在其中以成像装置11的光轴作为旋转轴以顺时针方向或逆时针方向旋转90度的状态下使用。可以通过翻转设置来执行基于这种使用假设的设置。
在这种情况下,例如,当假设成像装置11在其旋转90度的状态下使用时,例如,可以将预先分配给向右按钮66的功能分配给向上按钮63,并且可以将预先分配给向下按钮64的功能分配给向右按钮66。也就是说,可以将预先分配给与预定方向相关联的方向键的功能分配给与相对于预定方向形成预定角度(诸如90度)的方向相关联的方向键。通过以这种方式交换四个方向键的分配功能,即使当成像装置11在其旋转90°的状态下使用时,也可以使用户以与正常使用状态相似的操作感执行操作。
<远程操作单元中的操作>
另一方面,当用户利用作为外部装置的远程操作单元121远程操作成像装置11时,用户在观看显示在显示单元61上的菜单屏幕等的同时操作远程操作单元121。
此时,基于用户对远程操作单元121的操作的命令从远程操作单元121发送到成像装置11,并且成像装置11执行从远程操作单元121接收的命令,而不依赖于翻转设置是开启还是关闭。
例如,假设在远程操作单元121中设置向上按钮211、向下按钮212、向左按钮213和向右按钮214,如图25所示。顺便提及,图25示出了远程操作单元121的外观配置的示例。
向上按钮211是分配了向上操作功能和DISP功能的按钮,并且对应于成像装置11的向上按钮63。
此外,向下按钮212是分配向下操作功能和另一所选功能的按钮,并且对应于成像装置11的向下按钮64。这里,假设再现功能被作为另一所选功能分配给向下按钮212。
向左按钮213是分配了向左操作功能和另一所选功能的按钮,并且对应于成像装置11的向左按钮65。这里,假设WB设置功能被作为另一所选功能分配给向左按钮213。
向右按钮214是分配向右操作功能和Fn功能的按钮,并且对应于成像装置11的向右按钮66。
类似于成像装置11的方向键,向上按钮211、向下按钮212、向左按钮213和向右按钮214分别是与向上、向下、向左和向右方向相关联的按钮(方向键)。
特别地,在远程操作单元121中,由于当从用户看时、向上按钮211、向下按钮212、向左按钮213和向右按钮214设置在上侧、下侧、左侧和右侧,因此用户可以根据其设置位置直观地理解按钮(方向键)与哪些方向相关联。
例如,假设如图16中的箭头Q61所示关闭翻转设置,并且用户在正常使用状态下使用成像装置11的状态下操作远程操作单元121的一个方向键。在这种情况下,在分配给方向键的功能的方向上以及从用户看到的相同方向上执行操作。
也就是说,当操作向上按钮211、向下按钮212、向左按钮213和向右按钮214时,执行图16中的向上、向下、向左和向右方向的操作。在箭头Q61所示的示例中,图中的向上、向下、向左和向右方向分别是屏幕向上方向、屏幕向下方向、屏幕向左方向和屏幕向右方向。
此外,例如,当如图16中的箭头Q62所示关闭翻转设置并且用户在以反转状态使用成像装置11状态下操作远程操作单元121的一个方向键时,在分配给方向键的功能的方向上,但是在与从用户看到的方向相反的方向上执行操作。
也就是说,当操作向上按钮211、向下按钮212、向左按钮213和向右按钮214时,执行图16中向下、向上、向右和向左方向的操作。以这种方式,在箭头Q62所示的示例中,用户对方向键的操作被看作是如同在与从用户看到的方向相反的方向上执行操作。
然而,在箭头Q62所示的示例中,由于图中的向上、向下、向左和向右方向分别是屏幕向下方向、屏幕向上方向、屏幕向右方向和屏幕向左方向,因此处理实际上是如远程操作单元121所操作的那样执行的。
类似地,例如,当如图17中的箭头Q71所示开启翻转设置并且用户在正常使用状态下使用成像装置11的状态下操作远程操作单元121的一个方向键时,在分配给方向键的功能的方向上,但是在与从用户看到的方向相反的方向上执行操作。
也就是说,当操作向上按钮211、向下按钮212、向左按钮213和向右按钮214时,执行图17中向下、向上、向右和向左方向的操作。
另一方面,例如,当如图17中的箭头Q72所示开启翻转设置并且用户在以反转状态使用成像装置11的状态下操作远程操作单元121的一个方向键时,在分配给方向键的功能的方向上以及从用户看到的相同方向上执行操作。
也就是说,当操作向上按钮211、向下按钮212、向左按钮213和向右按钮214时,执行图17中的向上、向下、向左和向右方向的操作。在箭头Q72所示的示例中,由于图中的向上、向下、向左和向右方向分别是屏幕向上方向、屏幕向下方向、屏幕向左方向和屏幕向右方向,因此处理实际上是在与如同远程操作单元121所操作那样用户看到的相同方向上执行的。
顺便提及,这里已经描述了与显示屏幕的面内方向相关联的操作,并且不交换分配给远程操作单元121的方向键的其他功能。因此,例如,当用户在捕获图像期间或在图像的再现期间操作向上按钮211时,执行实现DISP功能的处理,而不依赖于成像装置11中的翻转设置是开启还是关闭。
如上所述,与成像装置11的主体的方向键不同,通过禁止远程操作单元121上的功能的交换(诸如操作的方向的反转),可以使用户以相同的操作感执行操作,而不依赖于翻转设置。
也就是说,当在假定翻转设置的使用状态下使用成像装置11的用户操作远程操作单元121的方向键而不依赖于翻转设置是开启还是关闭时,在成像装置11中执行方向键的方向上的操作。因此,能够在不给用户带来不适的情况下执行操作并且提高可用性。
例如,关于成像装置11,当开启翻转设置时,假设在反转使用状态下使用成像装置11,即,假设在上下反转状态下使用成像装置11。因此,当在其间交换与相反方向相关联的方向键的分配功能时,其可用性更加优异。
另一方面,关于远程操作单元121,没有用户在上下反转状态下使用远程操作单元121而不依赖于翻转设置是开启还是关闭。因此,当不交换分配给远程操作单元121的方向键的功能时,其可用性更加优异。
此外,在这种情况下,由于可以参考成像装置11中的翻转设置信息来识别菜单屏幕的显示屏幕上的向上、向下、向左和向右方向,记录图像等,因此可以基于识别结果正确地执行来自远程操作单元121的命令。
通过以这种方式参考成像装置11侧的翻转设置信息执行命令,可以在远程操作单元121侧执行操作,而不依赖于翻转设置是开启还是关闭。
顺便提及,这里已经描述了当操作远程操作单元121的方向键时成像装置11的行为,但是即使当使用用于外部装置的远程操作单元123远程操作成像装置11时,成像装置11的行为也类似于远程操作单元121被操作时的情况。
在这种情况下,例如,在外部装置122的显示单元181上显示经由输入和输出端子136从成像装置11的显示控制单元153提供的菜单屏幕或记录图像。然后,用户在观看显示菜单屏幕等的显示单元181的同时操作用于外部装置的远程操作单元123的方向键等。
然后,从用于外部装置的远程操作单元123发送基于用户操作的命令,并且由外部装置122接收该命令。外部装置122经由输入和输出端子136将以这种方式从用于外部装置的远程操作单元123接收的命令提供给控制单元133,并且提供有该命令的控制单元133执行该命令。
当以这种方式执行命令时,经由输入和输出端子136从显示控制单元153提供给外部装置122的显示单元181的菜单屏幕等包括命令的执行结果。
下面将描述使成像装置11执行如上所述的从远程操作单元121或用于外部装置的远程操作单元123接收的命令的命令执行处理。也就是说,下面将参考图26所示的流程图描述由成像装置11执行的命令执行处理。顺便提及,当执行命令执行处理时,成像装置11中会议控制单元133的显示控制单元153基于翻转设置信息执行控制,使得显示屏幕以正常显示状态或反转显示状态显示。
在步骤S141中,控制单元133获取从作为外部装置的远程操作单元121或用于外部装置的远程操作单元123输出的命令。
例如,控制单元133从通信单元135获取从远程操作单元121发送并由通信单元135接收的命令。此外,例如,控制单元133经由输入和输出端子136从外部装置122获取从用于外部装置的远程操作单元123发送的命令。
在步骤S142中,控制单元133基于记录在设置单元151中的翻转设置信息执行由获取的命令指示的处理,并且结束命令执行处理。也就是说,控制单元133基于翻转功能的设置,执行从远程操作单元121或用于外部装置的远程操作单元123输出的命令。
例如,当接收到用于指示相对于远程操作单元121在预定方向上操作向上按钮211等的命令时,控制单元133执行控制,使得相对于显示屏幕执行与预定方向相关联的操作。具体地,例如,假设用户操作远程操作单元121的向上按钮211以指示与相对于远程操作单元121的向上方向相关联的操作,基于该操作的命令被获取,以及表示翻转设置被开启的信息被作为翻转设置信息记录在设置单元151中。
在这种情况下,例如,当在显示单元61上以反转显示状态显示菜单屏幕时,控制单元133的显示控制单元153执行相对于菜单屏幕在屏幕向上方向上在菜单屏幕上移动光标并使用光标选择菜单项的处理,作为命令指示的处理。此时,由于显示控制单元153可以通过参考翻转设置信息来识别朝向成像装置11的底面的方向是屏幕向上方向,因此能够沿由命令指示的右侧方向移动光标。
此外,例如,假设用户操作远程操作单元121的向上按钮211,基于操作的命令被获取,并且指示翻转设置被关闭的信息被作为翻转设置信息记录在设置单元151中。
在这种情况下,例如,当在显示单元61上以正常显示状态显示菜单屏幕时,控制单元133的显示控制单元153执行相对于菜单屏幕在屏幕向上方向上在菜单屏幕上移动光标,并使用光标选择菜单项的处理作为命令指示的处理。
此外,例如,当除了显示菜单屏幕的状态之外,在显示单元61上显示正在再现的图像等的状态下接收到指示预定方向上的操作的命令时,执行控制,使得相对于显示屏幕执行与预定方向相关联的操作,诸如滚动操作。
此外,例如,假设用户操作远程操作单元121的向上按钮211并且获取基于该操作的命令。在这种情况下,例如,当正在捕获运动图像或正在再现记录图像时,控制单元133的显示控制单元153控制显示单元61,使得执行实现DISP功能的处理作为命令指示的处理。具体地,例如,执行切换参照图18至20描述的显示的处理,作为实现DISP功能的处理。
以这种方式,例如,当获取指示与预定方向相关联的操作的命令时,即,获取指示预定方向上的操作(诸如向上操作功能)的命令时,控制单元133参考翻转设置信息识别显示屏幕是否是以上下反转等显示。然后,控制单元133执行所获取的命令,使得相对于显示屏幕执行与预定方向相关联的操作,即,使得相对于显示屏幕执行预定方向上的操作。
另一方面,例如,当获取指示诸如DISP功能的不与方向相关联的操作的命令时,控制单元133执行命令而不进行任何改变,使得执行不与方向相关联的操作,而不依赖于翻转设置何时开启或关闭。也就是说,执行控制使得执行不与方向相关联的操作。
如上所述,成像装置11获取从远程操作单元121或用于外部装置的远程操作单元123输出的命令,并且基于翻转设置信息执行命令。
通过以这种方式基于翻转设置信息执行命令,远程操作单元121或用于外部装置的远程操作单元123可以执行操作而不依赖于翻转设置是开启还是关闭,并且能够提高可用性。
<计算机的配置示例>
顺便提及,上述一系列处理可以用硬件执行或者可以用软件执行。当在软件中执行一系列处理时,将构成软件的程序安装在计算机中。这里,计算机的示例包括结合到专用硬件中的计算机、可以通过在其中安装各种程序来执行各种功能的通用个人计算机等。
图27是示出根据程序执行上述一系列处理的计算机的硬件配置的示例的框图。
在计算机中,中央处理单元(CPU)501、只读存储器(ROM)502和随机存取存储器(RAM)503经由总线504彼此连接。
输入和输出接口505进一步连接到总线504。输入单元506、输出单元507、记录单元508、通信单元509和驱动器510连接到输入和输出接口505。
输入单元506由输入开关、按钮、麦克风、成像元件等构成。输出单元507由显示器、扬声器等构成。记录单元508由硬盘、非易失性存储器等构成。通信单元509由网络接口等构成。驱动器510驱动可移动记录介质511,诸如磁盘、光盘、磁光盘或半导体存储器。
在具有上述配置的计算机中,例如,通过使CPU 501经由输入和输出接口505和总线504将记录在记录单元508中的程序加载到RAM 503中并执行加载的程序来执行上述一系列处理。
由计算机(CPU 501)执行的程序可以被记录在例如用作封装介质等的可移除记录介质511上并且可以被提供。此外,可以经由有线或诸如局域网、因特网和数字卫星广播的无线传输介质来提供程序。
在计算机中,通过将可移动记录介质511设置到驱动器510,可以经由输入和输出接口505将程序安装在记录单元508中。此外,程序可以通过通信单元509经由有线或无线传输介质接收,并且可以安装在记录单元508中。另外,程序可以预先安装在ROM 502或记录单元508中。
顺便提及,由计算机执行的程序可以是用于按照本说明书中描述的顺序以时间序列执行处理的程序,或者可以是用于并行地或在必要的时刻(例如当调用时)执行处理的程序。
此外,本技术的实施例不限于上述实施例,并且可以在不脱离本技术的主旨的情况下以各种形式进行修改。
例如,本技术可以具有云计算的配置,其中一个功能经由网络分布到多个装置并且被共同处理。
此外,上述流程图中描述的步骤可以由一个装置执行,或者可以由多个装置分发和执行。
此外,当一个步骤包括多个处理时,一个步骤中包括的多个处理可以由一个装置执行,或者可以由多个装置分发和执行。
<应用示例>
根据本公开的技术可以应用于各种产品。例如,根据本公开的技术可以应用于内窥镜手术系统。
图28是示出可以应用根据本公开的技术的内窥镜手术系统5000的示意性配置的示例的图。在图28中,示出了操作者(医生)5067使用内窥镜手术系统5000对病床5069上的患者5071执行外科手术的状态。如图所示,内窥镜手术系统5000包括内窥镜5001、其他手术仪器5017、支撑内窥镜5001的支撑臂单元5027、以及安装有用于内窥镜外科手术的各种装置的推车5037。
在内窥镜外科手术中,多个管状穿刺工具(称为套管针5025a至5025d)刺穿腹壁而不是切割和打开腹壁。然后,将内窥镜5001的镜筒5003或其他手术仪器5017从套管针5025a至5025d插入患者5071的体腔中。在所示的示例中,将气动导管5019、能量治疗工具5021和钳子5023作为其他手术仪器5017插入患者5071的体腔中。此外,能量治疗工具5021是用于使用高频电流或超声波振动进行组织的切割和分离、血管的封闭等的治疗工具。这里,图中所示的手术仪器5017仅仅是示例,并且例如,通常用于内窥镜外科手术中的各种手术仪器(诸如镊子和牵开器)可以用作手术仪器5017。
使用内窥镜5001捕获的患者5071的体腔中的手术部位的图像显示在显示装置5041上。例如,操作者5067在观看实时显示在显示装置5041上的手术部位的图像的同时使用能量治疗工具5021或钳子5023执行诸如切割患病区域的治疗。顺便提及,尽管未示出,但是在外科手术期间,由操作者5067、助手等支撑气动导管5019、能量处理工具5021和钳子5023。
(支撑臂单元)
支撑臂单元5027包括从基部5029延伸的臂部5031。在所示的示例中,臂部5031包括接头5033a、5033b和5033c以及连杆5035a和5035b,并且在臂控制器5045的控制下被驱动。内窥镜5001由臂部5031支撑,并且其位置和姿势被控制。因此,可以实现内窥镜5001的位置的稳定固定。
(内窥镜)
内窥镜5001包括镜筒5003和相机头5005,其中镜筒5003从其尖端开始具有预定长度的区域插入到患者5071的体腔中,相机头5005连接到镜筒5003的基部。在所示的示例中,内窥镜5001被示出为包括刚性镜筒5003的所谓的刚性内窥镜,但是内窥镜5001可以包括包括柔性镜筒5003的所谓的柔性内窥镜。
在镜筒5003的顶端设置有安装有物镜的开口。光源单元5043连接到内窥镜5001,并且由光源单元5043产生的光通过在镜筒5003中延伸的导光管被引导到镜筒的尖端,并经由物镜施加到患者5071的体腔中的观察目标。顺便提及,内窥镜5001可以是直视内窥镜、斜视内窥镜或侧视内窥镜。
在相机头5005中设置光学系统和成像元件,并且来自观察目标的反射光(观察光)通过光学系统聚焦在成像元件上。通过成像元件对观察光进行光电转换,并生成对应于观察光的电信号,即,对应于观察图像的图像信号。图像信号作为RAW数据被发送到相机控制单元(CCU)5039。顺便提及,通过适当地驱动光学系统来调整放大率和焦距的功能被安装在相机头5005中。
顺便提及,为了应对例如立体视觉(3D显示)等,可以在相机头5005中设置多个成像元件。在这种情况下,在镜筒5003中设置多个中继光学系统,以将观察光引导到多个成像元件。
(安装在推车中的各种装置)
CCU 5039由中央处理单元(CPU)、图形处理单元(GPU)等构成,并且全面地控制内窥镜5001和显示装置5041的操作。具体地,关于图像信号,CCU 5039执行用于显示基于从相机头5005接收的图像信号的图像的各种图像处理,诸如显影处理(去马赛克处理)等。CCU5039将已经过图像处理的图像信号提供给显示装置5041。此外,CCU 5039将控制信号发送到相机头5005并控制其驱动。控制信号可以包括关于成像条件的信息,诸如放大率或焦距。
显示装置5041在CCU 5039的控制下显示基于经过CCU 5039的图像处理的图像信号图像。当内窥镜5001处理具有诸如4K(水平像素3840×垂直像素2160)、8K(水平像素7680×垂直像素4320)等的高分辨率的成像时,和/或当内窥镜5001处理3D显示时,可以显示具有高分辨率的图像的显示装置和/或可以显示3D图像的显示装置可以用作显示装置5041。当内窥镜5001处理诸如4K或8K的高分辨率的成像时,可以使用尺寸为55英寸或更大的显示装置作为显示装置5041,由此能够进一步获得沉浸感。此外,可以根据用途设置具有不同分辨率和尺寸的多个显示装置5041。
光源单元5043例如由诸如发光二极管(LED)的光源构成,并且将用于对手术部位进行成像的照射光提供给内窥镜5001。
臂控制器5045例如由诸如CPU的处理器构成,并且根据预定程序操作,使得根据预定控制系统控制支撑臂单元5027的臂部5031的驱动。
输入装置5047是内窥镜手术系统5000的输入接口。用户可以经由输入装置5047执行向内窥镜手术系统5000的各种信息的输入或指令的输入。例如,用户经由输入装置5047输入诸如患者的身体信息的关于外科手术的各种信息或关于外科手术方法的信息。此外,例如,用户经由输入装置5047输入驱动臂部5031的指令、改变使用内窥镜5001的成像条件(诸如,照射光的类型、放大率和焦距)的指令、用于驱动能量处理工具5021的指令等。
输入装置5047的类型不受限制,并且输入装置5047可以包括各种已知的输入装置。例如,鼠标、键盘、触摸板、开关、脚踏开关5057和/或杆等可以用作输入装置5047。当触摸板用作输入装置5047时,触摸面板可以设置在显示装置5041的显示表面上。
或者,输入装置5047是诸如眼镜可穿戴装置、头戴式显示器(HMD)等的由用户佩戴的装置,并且基于由装置检测到的用户的手势或视线执行各种输入。此外,输入装置5047包括可以检测用户的移动的相机,并且基于从由相机捕获的图像检测到的用户的手势或视线来执行各种输入。此外,输入装置5047包括可收集用户声音的麦克风,并且经由麦克风基于声音执行各种输入。以这种方式,通过构成输入装置5047使得以非接触方式输入各种信息,特别是清洁区域中的用户(例如,操作员5067)可以以非接触方式操作非清洁区域中的装置。此外,由于用户可以在不将手从携带的手术仪器上分离的情况下操作装置,因此能够提高用户的便利性。
治疗工具控制器5049控制能量处理工具5021的驱动,以用于烧灼或切割组织、封闭血管等。气动装置5051经由气动导管5019向体腔供应气体,以扩展患者5071的体腔,以便确保使用内窥镜5001的操作者的视野和工作空间。记录器5053是一种可以记录有关外科手术的各种信息的装置。打印机5055是能够以各种形式(诸如文本、图像或图形)打印关于外科手术的各种信息的装置。
下面将更详细地描述内窥镜手术系统5000的特征配置。
(支撑臂单元)
支撑臂单元5027包括用作安装件的基部5029和从基部5029延伸的臂部5031。在所示的示例中,臂部5031包括多个接头5033a、5033b和5033c以及连接到接头5033b的多个连杆5035a和5035b,但是为简化起见,图28中简化并示出了臂部5031的结构。实际上,可以适当地设置接头5033a至5033c和连杆5035a和5035b的形状、数量和布置,接头5033a至5033c的旋转轴的方向等,使得臂部5031具有期望的自由度。例如,臂部5031可以适当地配置为具有六个或更多个自由度。因此,由于内窥镜5001可以在臂部5031的可移动范围内自由移动,因此内窥镜5001的镜筒5003可以沿期望的方向插入患者5071的体腔中。
致动器设置在接头5033a至5033c中,并且接头5033a至5033c配置为通过驱动致动器围绕预定的旋转轴旋转。通过使用臂控制器5045控制致动器的驱动,控制接头5033a至5033c的旋转角度并控制臂部5031的驱动。因此,可以实现对内窥镜5001的位置和姿势的控制。此时,臂控制器5045可以使用诸如力控制或位置控制的各种已知控制系统来控制臂部5031的驱动。
例如,通过使操作者5067经由输入装置5047(包括脚踏开关5057)适当地执行操作输入,臂部5031的驱动可以由臂控制器5045适当地控制并且可以基于操作输入来控制内窥镜5001的位置和姿势。通过该控制,臂部5031的尖端的内窥镜5001能够从任意位置移动到任意位置,并且能够固定地支撑在移动的位置。顺便提及,臂部5031可以在所谓的主从系统中操作。在这种情况下,臂部5031可以由用户通过安装在远离手术室的位置的输入装置5047远程操作。
此外,当使用力控制时,臂控制器5045可以执行所谓的动力辅助控制,用于接收来自用户的外力并驱动接头5033a至5033c的致动器,使得臂部5031沿着外力平稳地移动。因此,当用户直接触摸臂部5031并移动臂部5031时,用户可以用相对小的力移动臂部5031。因此,能够以更简单的操作更直观地移动内窥镜5001并且改善用户的便利性。
这里,通常,在内窥镜外科手术中,内窥镜5001由称为内窥镜师(scopist)的医生支撑。另一方面,由于通过使用支撑臂单元5027可以在不使用人手的情况下更可靠地固定内窥镜5001的位置,因此能够稳定地获得手术部位的图像并且平稳地执行外科手术。
顺便提及,臂控制器5045可以不必设置在推车5037中。此外,臂控制器5045可以不必由单个装置构成。例如,臂控制器5045可以设置在支撑臂单元5027的臂部5031的每个接头5033a至5033c中,或者臂部5031的驱动控制可以通过多个臂控制器5045的协作来实现。
(光源单元)
光源单元5043将用于对手术部位成像的照射光提供给内窥镜5001。光源单元5043例如由LED、激光束源或作为其组合的白色光源构成。此时,当白色光源由RGB激光束源组合构成时,可以高精度地控制每种颜色(每个波长)的输出强度和输出定时,从而可以执行光源单元5043中的捕获图像的白平衡调整。此外,在这种情况下,通过以时分方式用来自RGB激光光源的激光束照射观察目标并且与照射定时同步地控制相机头5005的成像元件的驱动,可以也以时分方式捕获对应于RGB颜色的图像。根据该方法,能够在成像元件中不设置滤色器的情况下获得彩色图像。
此外,可以控制光源单元5043的驱动,使得其输出光的强度每隔预定时间改变。通过与光强度的改变定时同步地控制相机头5005的成像元件的驱动,使得以时分方式获取图像并组合所获取的图像,能够生成具有高动态范围的图像,而没有黑色缺陷和光晕。
此外,光源单元5043可以被配置为提供与特殊光成像对应的预定波长带的光。在特殊光成像中,例如通过施加比使用身体组织中的光吸收的波长依赖性进行正常观察时的照射光(例如,白光)的波长带窄的光来执行对诸如粘膜表面层的血管的预定组织成像的所谓的窄带成像。或者,在特殊光成像中,可以执行使用通过激发光照射生成的荧光获取图像的荧光成像。在荧光成像中,可以执行用激发光照射身体组织并观察来自身体组织的荧光(自动荧光成像),或者将诸如吲哚菁绿(ICG)的试剂局部注射到身体组织中并且用与试剂的荧光波长相对应的激发光照射身体组织,以获取荧光图像等。光源单元5043可以被配置为提供与特殊光成像对应的窄带光和/或激发光。
(相机头和CCU)
下面将参考图29更详细地描述内窥镜5001的相机头5005和CCU 5039的功能。图29是示出图28所示的相机头5005和CCU 5039的功能配置的示例的框图。
参照图29,相机头5005包括透镜单元5007、成像单元5009、驱动单元5011、通信单元5013和相机头控制单元5015作为其功能单元。此外,CCU 5039包括通信单元5059、图像处理单元5061和控制单元5063作为其功能单元。相机头5005和CCU 5039彼此连接以经由传输线缆5065在它们之间执行双向通信。
首先,将描述相机头5005的功能配置。透镜单元5007是设置在与镜筒5003的连接部分中的光学系统。从镜筒5003的尖端提供的观察光被引导到相机头5005并入射在透镜单元5007上。透镜单元5007由包括变焦透镜和聚焦透镜的多个透镜的组合构成。调节透镜单元5007的光学特性,使得观察光聚焦在成像单元5009的成像元件的光接收表面上。此外,变焦透镜和聚焦透镜构造成为使得其光轴上的位置可移动以调整捕获图像的放大率和焦点。
成像单元5009由成像元件构成,并设置在透镜单元5007的后级。通过透镜单元5007的观察光聚焦在成像元件的光接收表面上,并且由光电转换生成对应于观察图像的图像信号。由成像单元5009生成的图像信号被提供给通信单元5013。
例如,具有可以捕获彩色图像的Bayer阵列的互补金属氧化物半导体(CMOS)型图像传感器被用作构成成像单元5009的成像元件。顺便提及,例如,可以应对具有4K或更高的高分辨率成像的成像元件可以用作成像元件。当获取具有高分辨率的手术部位的图像时,操作者5067可以更详细地理解手术部位的状态并且可以更平稳地执行外科手术。
此外,构成成像单元5009的成像元件被配置为具有一对成像元件,用于获取与3D显示相对应的右眼图像信号和左眼图像信号中的每一个。通过执行3D显示,操作者5067可以更准确地理解手术部位中的生物组织的深度。顺便提及,当以多板系统构造成像单元5009时,可以设置多个透镜单元5007以对应于成像元件。
此外,成像单元5009可以不必设置在相机头5005中。例如,成像单元5009可以紧接在物镜之后设置在镜筒5003中。
驱动单元5011由致动器构成,并且在相机头控制单元5015的控制下沿着光轴将透镜单元5007的变焦透镜和聚焦透镜移动预定距离。因此,可以适当地调整由成像单元5009捕获的捕获图像的放大率和焦点。
通信单元5013由向CCU 5039发送和从CCU 5039接收各种信息的通信装置构成。通信单元5013经由传输线缆将从成像单元5009获取的图像信号作为RAW数据发送到CCU5039。此时,优选地,通过光通信发送图像信号,以低延迟显示手术部位的捕获图像。这是因为,由于操作者5067在外科手术时使用捕获图像观察患病区域的状态的同时进行外科手术,因此需要实时显示手术部位的运动图像,以进行更安全和可靠的外科手术。当使用光通信时,在通信单元5013中设置将电信号转换为光信号的光电转换模块。图像信号由光电转换模块转换为光信号,然后经由传输线缆5065发送到CCU 5039。
此外,通信单元5013从CCU 5039接收用于控制相机头5005的驱动的控制信号。控制信号包括例如关于成像条件的信息,诸如用于指定捕获图像的帧速率的信息、用于指定成像时的曝光值的信息和/或用于指定捕获图像的放大率和焦点的信息。通信单元5013将接收到的控制信号提供给相机头控制单元5015。顺便提及,来自CCU 5039的控制信号也可以通过光通信发送。在这种情况下,在通信单元5013中设置将光信号转换为电信号的光电转换模块。控制信号由光电转换模块转换为电信号,然后提供给相机头控制单元5015。
顺便提及,诸如帧速率、曝光值、放大率和焦点的成像条件由CCU 5039的控制单元5063基于所获取的图像信号自动设置。也就是说,所谓的自动曝光(AE)、自动聚焦(AF)和自动白平衡(AWB)功能被安装在内窥镜5001中。
相机头控制单元5015基于经由通信单元5013从CCU 5039接收的控制信号来控制相机头5005的驱动。例如,相机头控制单元5015基于用于指定捕获图像的帧速率的信息和/或用于指定成像时的曝光的信息控制成像单元的成像元件的驱动5009。此外,例如,相机头控制单元5015基于用于指定捕获图像的放大率和焦点的信息,经由驱动单元5011适当地移动透镜单元5007的变焦透镜和调焦透镜。相机头控制单元5015还可以具有存储用于识别镜筒5003或相机头5005的信息的功能。
顺便提及,通过将透镜单元5007、成像单元5009等的构造设置成具有高气密性和防水性的封闭结构,相机头5005可以具有耐高压灭菌的能力。
下面将描述CCU 5039的功能配置。通信单元5059由向相机头5005发送和从相机头5005接收各种信息的通信装置构成。通信单元5059经由传输线缆5065接收从相机头5005发送的图像信号。此时,如上所述,可以通过光通信适当地发送图像信号。在这种情况下,在通信单元5059中设置将光信号转换为电信号的光电转换模块,以对应于光通信。通信单元5059将图像信号已被转换成的电信号提供给图像处理单元5061。
此外,通信单元5059将用于控制相机头5005的驱动的控制信号发送到相机头5005。还可以通过光通信发送控制信号。
图像处理单元5061对作为从相机头5005发送的RAW数据的图像信号执行各种图像处理。图像处理的示例包括各种已知的信号处理,诸如显影处理、图像质量增强处理(诸如带强调处理、超分辨率处理、降噪(NR)处理和/或相机抖动校正处理)和/或放大处理(电子变焦处理)等。此外,图像处理单元5061对用于执行AE功能、AF功能和AWB功能的图像信号执行检测处理。
图像处理单元5061由诸如CPU或GPU的处理器构成,并且可以通过允许处理器根据预定程序进行操作来执行上述图像处理或检测处理。顺便提及,当图像处理单元5061由多个GPU构成时,图像处理单元5061适当地划分与图像信号相关联的信息,并且由多个GPU并行地执行图像处理。
控制单元5063执行各种控制以使用内窥镜5001对手术部位进行成像并显示捕获图像。例如,控制单元5063生成用于控制相机头5005的驱动的控制信号。此时,当用户输入成像条件时,控制单元5063基于用户的输入生成控制信号。或者,当AE功能、AF功能和AWB功能安装在内窥镜5001中时,控制单元5063基于图像处理单元5061中的检测处理的结果适当地计算最佳曝光值、最佳焦距和白平衡,并生成控制信号。
此外,控制单元5063基于经过图像处理单元5061的图像处理的图像信号在显示装置5041上显示手术部位的图像。此时,控制单元5063使用各种图像识别技术识别出手术部位的图像中的各种物体。例如,控制单元5063可以通过检测包括在手术部位的图像中的物体的边缘的形状、颜色等来识别诸如钳子的手术仪器、特定生物部分、出血、使用能量处理工具5021时的雾等。控制单元5063使用在显示装置5041上显示手术部位的图像时的识别结果,显示各种手术支持信息以与手术部位的图像重叠。当手术支持信息重叠显示并呈现给操作者5067时,能够更安全和可靠地执行外科手术。
将相机头5005和CCU 5039彼此连接的传输线缆5065是对应于电信号的通信的电信号线缆、对应于光通信的光纤、或其组合线缆。
这里,在所示示例中,使用传输线缆5065以有线方式执行通信,但是可以以无线方式执行相机头5005和CCU 5039之间的通信。当以无线方式进行其间的通信时,传输线缆5065不需要安装在手术室中,因此能够解决传输线缆5065妨碍手术室中医务人员的移动的问题。
上面已经描述了可以应用根据本公开的技术的内窥镜手术系统5000的示例。顺便提及,这里已经描述了内窥镜手术系统5000作为示例,但是可以应用根据本公开的技术的系统不限于该示例。例如,根据本公开的技术可以应用于检查柔性内窥镜系统或显微镜手术系统。
根据本公开的技术可以适当地应用于上述元件中的显示装置5041。根据操作者5067所处的位置、显示装置5041的布置、内窥镜5001的方向等使用翻转功能以上下或横向反转状态显示在显示装置5041上显示的图像可能更适合于操作者。
通过将根据本公开的技术应用于这种情况,用户可以通过按照来自输入装置5047等的输入在预定方向上反转显示在OSD图像、菜单等中的与翻转功能的设置相关联的屏幕,并显示当将显示装置5041上的直通图像的显示方向反转到预定方向时的反转屏幕等来简单地理解翻转设置被开启或者当开启翻转设置时执行什么行为,因此能够提高内窥镜手术系统5000的可用性。
此外,本技术可以体现为以下配置。
(1)一种图像处理装置,包括:
设置单元,所述设置单元将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及
控制单元,所述控制单元当接收到将翻转功能设置为ON的指令时将与所述翻转功能的设置相关联的屏幕反转到所述预定方向,并且显示反转的屏幕。
(2)根据(1)所述的图像处理装置,其中,所述控制单元当接收到将所述翻转功能设置为ON的指令时在上下方向反转与所述翻转功能的设置相关联的屏幕,并且显示反转的屏幕。
(3)根据(1)或(2)所述的图像处理装置,其中,当所述翻转功能被设置为OFF时,控制单元不显示与所述翻转功能的设置相关联的屏幕。
(4)根据(1)至(3)中任一项所述的图像处理装置,其中,与所述翻转功能的设置相关联的屏幕是对于翻转功能的说明屏幕。
(5)根据(4)所述的图像处理装置,其中,在所述说明屏幕上显示对当所述翻转功能被设置为ON时的操作单元的行为的说明。
(6)根据(1)至(5)中任一项所述的图像处理装置,其中,与所述翻转功能的设置相关联的屏幕是对于所述翻转功能的设置的确认屏幕。
(7)根据(6)所述的图像处理装置,其中,当在显示所述确认屏幕的状态下指示取消所述翻转功能的设置时,所述设置单元取消在显示所述确认屏幕之前已经执行的所述翻转功能的设置。
(8)根据(7)所述的图像处理装置,其中,在所述确认屏幕上显示用于取消所述翻转功能的设置的取消按钮。
(9)根据(1)至(8)中任一项所述的图像处理装置,其中,当所述翻转功能被设置为ON时,执行通过成像获取的图像的上下反转、通过声音收集获取的收集声音的右声道和左声道的交换、显示屏幕的上下反转显示或者分配给与相互不同方向相关联的操作单元的功能的交换中的至少一个。
(10)一种图像处理方法,包括以下步骤:
将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及
当接收到将所述翻转功能设置为ON的指令时,在所述预定方向上反转与所述翻转功能的设置相关联的屏幕并显示反转的屏幕。
(11)一种使计算机执行处理的程序,所述处理包括以下步骤:
将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及
当接收到将所述翻转功能设置为ON的指令时,在所述预定方向上反转与所述翻转功能的设置相关联的屏幕并显示反转的屏幕。
附图标记列表
11 成像装置
22 声音收集装置
61 人机界面
63 向上按钮
64 向下按钮
65 向左按钮
66 向右按钮
131 成像装置
133 控制单元
135 通信单元
136 输入和输出端子
151 设置单元
152 OSD图像生成单元
153 显示控制单元
154 记录控制单元

Claims (11)

1.一种图像处理装置,包括:
设置单元,所述设置单元将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及
控制单元,所述控制单元当接收到将翻转功能设置为ON的指令时将与所述翻转功能的设置相关联的屏幕反转到所述预定方向,并且显示反转的屏幕。
2.根据权利要求1所述的图像处理装置,其中,所述控制单元当接收到将所述翻转功能设置为ON的指令时在上下方向反转与所述翻转功能的设置相关联的屏幕,并且显示反转的屏幕。
3.根据权利要求1所述的图像处理装置,其中,当所述翻转功能被设置为OFF时,控制单元不显示与所述翻转功能的设置相关联的屏幕。
4.根据权利要求1所述的图像处理装置,其中,与所述翻转功能的设置相关联的屏幕是对于翻转功能的说明屏幕。
5.根据权利要求4所述的图像处理装置,其中,在所述说明屏幕上显示对当所述翻转功能被设置为ON时的操作单元的行为的说明。
6.根据权利要求1所述的图像处理装置,其中,与所述翻转功能的设置相关联的屏幕是对于所述翻转功能的设置的确认屏幕。
7.根据权利要求6所述的图像处理装置,其中,当在显示所述确认屏幕的状态下指示取消所述翻转功能的设置时,所述设置单元取消在显示所述确认屏幕之前已经执行的所述翻转功能的设置。
8.根据权利要求7所述的图像处理装置,其中,在所述确认屏幕上显示用于取消所述翻转功能的设置的取消按钮。
9.根据权利要求1所述的图像处理装置,其中,当所述翻转功能被设置为ON时,执行通过成像获取的图像的上下反转、通过声音收集获取的收集声音的右声道和左声道的交换、显示屏幕的上下反转显示或者分配给与相互不同方向相关联的操作单元的功能的交换中的至少一个。
10.一种图像处理方法,包括以下步骤:
将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及
当接收到将所述翻转功能设置为ON的指令时,在所述预定方向上反转与所述翻转功能的设置相关联的屏幕并显示反转的屏幕。
11.一种使计算机执行处理的程序,所述处理包括以下步骤:
将用于将图像的显示方向反转为预定方向的翻转功能设置为ON或OFF;以及
当接收到将所述翻转功能设置为ON的指令时,在所述预定方向上反转与所述翻转功能的设置相关联的屏幕并显示反转的屏幕。
CN201780068284.XA 2016-11-10 2017-10-27 图像处理装置和方法以及非暂态计算机可读介质 Active CN109937567B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-219405 2016-11-10
JP2016219405 2016-11-10
PCT/JP2017/038846 WO2018088236A1 (ja) 2016-11-10 2017-10-27 画像処理装置および方法、並びにプログラム

Publications (2)

Publication Number Publication Date
CN109937567A true CN109937567A (zh) 2019-06-25
CN109937567B CN109937567B (zh) 2021-06-22

Family

ID=62110408

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780068284.XA Active CN109937567B (zh) 2016-11-10 2017-10-27 图像处理装置和方法以及非暂态计算机可读介质

Country Status (5)

Country Link
US (1) US20190268547A1 (zh)
EP (1) EP3541064A4 (zh)
JP (1) JPWO2018088236A1 (zh)
CN (1) CN109937567B (zh)
WO (1) WO2018088236A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018078463A (ja) * 2016-11-10 2018-05-17 ソニー株式会社 画像処理装置および設定方法、並びにプログラム

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1398367A (zh) * 1999-12-28 2003-02-19 爱华株式会社 带显示功能的电子设备
CN1485227A (zh) * 2002-09-24 2004-03-31 李大民 一种后视的方法及其实现该方法的装置
JP2004282624A (ja) * 2003-03-18 2004-10-07 Kyocera Corp 撮像機能付き携帯端末装置
CN1604620A (zh) * 2003-10-01 2005-04-06 佳能株式会社 图像捕获设备、图像显示方法和程序
CN1848032A (zh) * 2005-04-06 2006-10-18 索尼株式会社 信息处理装置、信息处理方法、记录介质和程序
CN1937710A (zh) * 2005-09-22 2007-03-28 日本胜利株式会社 电子设备系统
CN201403138Y (zh) * 2009-04-28 2010-02-10 天津三星光电子有限公司 Lcd显示屏横向翻转的数码相机
CN101917548A (zh) * 2010-08-11 2010-12-15 无锡中星微电子有限公司 自适应调整画面的摄像装置及方法
CN102238353A (zh) * 2010-05-06 2011-11-09 Lg电子株式会社 用于操作图像显示设备的方法及图像显示设备
US20120081593A1 (en) * 2010-10-04 2012-04-05 Sony Corporation Imaging apparatus and display apparatus
CN202435489U (zh) * 2011-12-26 2012-09-12 四川九洲电器集团有限责任公司 摄像机吊顶安装图像自动翻转装置
CN103974184A (zh) * 2013-01-24 2014-08-06 华为终端有限公司 声道切换的方法、装置及多媒体设备
US20150007072A1 (en) * 2013-06-28 2015-01-01 Canon Kabushiki Kaisha Electronic apparatus, its control method and program, and storage medium

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6019269U (ja) * 1983-07-15 1985-02-09 オリンパス光学工業株式会社 ビデオカメラ
US5661632A (en) * 1994-01-04 1997-08-26 Dell Usa, L.P. Hand held computer with dual display screen orientation capability controlled by toggle switches having first and second non-momentary positions
US20040095480A1 (en) * 2002-11-20 2004-05-20 Battles Amy E. System and method for providing help with operating an image capture device
JP2006033724A (ja) * 2004-07-21 2006-02-02 Fuji Photo Film Co Ltd 情報処理装置及び情報処理方法
KR101129382B1 (ko) * 2004-11-16 2012-03-26 삼성전자주식회사 이미지 회전 장치 및 방법
US8014760B2 (en) * 2006-09-06 2011-09-06 Apple Inc. Missed telephone call management for a portable multifunction device
KR20080084021A (ko) * 2007-03-14 2008-09-19 삼성테크윈 주식회사 회전형 표시장치를 장착한 디지털 영상 처리장치
US8125461B2 (en) * 2008-01-11 2012-02-28 Apple Inc. Dynamic input graphic display
JP2012168793A (ja) * 2011-02-15 2012-09-06 Seiko Epson Corp 画像表示装置および画像表示装置の制御方法
JP5977497B2 (ja) * 2011-09-22 2016-08-24 オリンパス株式会社 内視鏡装置、作動方法およびプログラム
KR20140021821A (ko) * 2012-08-09 2014-02-21 삼성전자주식회사 이미지 캡처 장치 및 이미지 캡처 방법
JP5921427B2 (ja) * 2012-12-27 2016-05-24 キヤノン株式会社 撮像制御装置及びその制御方法
JP6150652B2 (ja) * 2013-07-29 2017-06-21 キヤノン株式会社 撮像装置、撮像装置の制御方法及びプログラム並びに記録媒体
CN105453544B (zh) * 2013-07-30 2018-12-25 佳能株式会社 显示控制设备及其控制方法
KR20150019795A (ko) * 2013-08-16 2015-02-25 엘지전자 주식회사 이동단말기 및 그 제어방법
KR20180005071A (ko) * 2016-07-05 2018-01-15 엘지전자 주식회사 이동 단말기 및 그 제어방법

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1398367A (zh) * 1999-12-28 2003-02-19 爱华株式会社 带显示功能的电子设备
CN1485227A (zh) * 2002-09-24 2004-03-31 李大民 一种后视的方法及其实现该方法的装置
JP2004282624A (ja) * 2003-03-18 2004-10-07 Kyocera Corp 撮像機能付き携帯端末装置
CN1604620A (zh) * 2003-10-01 2005-04-06 佳能株式会社 图像捕获设备、图像显示方法和程序
CN1848032A (zh) * 2005-04-06 2006-10-18 索尼株式会社 信息处理装置、信息处理方法、记录介质和程序
CN1937710A (zh) * 2005-09-22 2007-03-28 日本胜利株式会社 电子设备系统
CN201403138Y (zh) * 2009-04-28 2010-02-10 天津三星光电子有限公司 Lcd显示屏横向翻转的数码相机
CN102238353A (zh) * 2010-05-06 2011-11-09 Lg电子株式会社 用于操作图像显示设备的方法及图像显示设备
CN101917548A (zh) * 2010-08-11 2010-12-15 无锡中星微电子有限公司 自适应调整画面的摄像装置及方法
US20120081593A1 (en) * 2010-10-04 2012-04-05 Sony Corporation Imaging apparatus and display apparatus
CN202435489U (zh) * 2011-12-26 2012-09-12 四川九洲电器集团有限责任公司 摄像机吊顶安装图像自动翻转装置
CN103974184A (zh) * 2013-01-24 2014-08-06 华为终端有限公司 声道切换的方法、装置及多媒体设备
US20150007072A1 (en) * 2013-06-28 2015-01-01 Canon Kabushiki Kaisha Electronic apparatus, its control method and program, and storage medium

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王琼华 等: "《集成成像3D拍摄与显示方法》", 《液晶与显示》 *

Also Published As

Publication number Publication date
WO2018088236A1 (ja) 2018-05-17
US20190268547A1 (en) 2019-08-29
JPWO2018088236A1 (ja) 2019-09-26
EP3541064A1 (en) 2019-09-18
EP3541064A4 (en) 2019-11-20
CN109937567B (zh) 2021-06-22

Similar Documents

Publication Publication Date Title
JP6950707B2 (ja) 情報処理装置および方法、並びにプログラム
CN109863755B (zh) 信号处理设备、方法和程序
EP3571662B1 (en) Video signal processing apparatus, video signal processing method, and program for dynamic range compression
JPWO2019012857A1 (ja) 撮像装置、画像生成方法
EP3357235B1 (en) Information processing apparatus, multi-camera system and non-transitory computer-readable medium
JPWO2019031000A1 (ja) 信号処理装置、撮像装置、信号処理方法及びプログラム
WO2018088237A1 (ja) 画像処理装置および設定方法、並びにプログラム
JP7146735B2 (ja) 制御装置、外部機器、医療用観察システム、制御方法、表示方法およびプログラム
JP2019004978A (ja) 手術システムおよび手術用撮像装置
EP3641296A1 (en) Image processing device, image processing method, and image capture system
EP3934234A1 (en) Imaging device, imaging method, and program
CN109937567A (zh) 图像处理装置和方法以及程序
JP7092111B2 (ja) 撮像装置、映像信号処理装置および映像信号処理方法
WO2020203265A1 (ja) 映像信号処理装置、映像信号処理方法および撮像装置
US20200059608A1 (en) Image processing device, control method, and program
WO2021010020A1 (ja) 画像処理装置、撮像装置、画像処理方法、プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant