CN102377938A - 摄像设备、程序和摄像方法 - Google Patents

Abstract

本发明涉及摄像设备、程序和摄像方法。一种摄像设备，包括当通过合成提供拍摄用辅助信息的第一和第二辅助图像，生成合成辅助图像时，改变在第二辅助图像中设定的透明背景区域中的第一辅助图像的透明度的辅助图像合成单元，和使合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上的显示控制单元。

Description

摄像设备、程序和摄像方法

技术领域

本公开涉及摄像设备，程序和摄像方法。

背景技术

通常，诸如数字照相机之类的摄像设备具备利用例如LCD(液晶显示器)等的背面板的显示单元和电子取景器。在显示单元中，能够实时取景地显示摄像单元输出的拍摄图像，并且能够与拍摄图像重叠地显示拍摄辅助信息，比如摄影模式和变焦放大倍率。

通过利用这种显示单元，例如，提出了一种向用户提供辅助用户决定摄像构图的信息的技术。例如，在未经审查的日本专利申请公报No.2007-279767中，说明了一种在电子取景器中，与拍摄图像重叠地显示诸如网格图形之类的辅助线的技术。在未经审查的日本专利申请公报No.2009-33507中，说明了一种按照相同方式，重叠并且显示图形图像，比如用户任意绘制的格子线的技术。在未经审查的日本专利申请公报No.2007-36983中，说明了一种在可换镜头数字照相机中，与拍摄图像合成地显示与每个镜头相应的刻度线、格子线等的技术。

发明内容

当利用上述技术，与拍摄图像重叠地显示多种辅助信息时，所述多种信息被重叠，但存在阻碍用户决定摄像构图的问题。例如，当与拍摄图像重叠地显示在未经审查的日本专利申请公报No.2007-279767中说明的网络线和代表作为利用自动聚焦的聚焦目标的区域的自动聚焦框时，网格线显示在自动聚焦框中，从而可能难以识别自动聚焦框中的拍摄图像部分。

理想的是提供一种能够抑制与拍摄图像重叠显示的多个辅助信息的干扰的新的或者改进的摄像设备，程序和摄像方法。

按照本公开的一个实施例，提供一种摄像设备，包括：当通过合成提供拍摄用辅助信息的第一和第二辅助图像，生成合成辅助图像时，改变在第二辅助图像中设定的透明背景区域中的第一辅助图像的显示区域的透明度的辅助图像合成单元；和使合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上的显示控制单元。

辅助图像合成单元至少可根据添加到第二辅助图像中的合成模式信息，改变所述透明度。

辅助图像合成单元可使第一辅助图像的显示区域在背景区域中完全透明。

背景区域可以是包括第二辅助图像的显示区域的区域。

第一辅助图像可以是拍摄图像的基准线图像，第二辅助图像可以是拍摄图像的区域线图像。

基准线图像可以是网格线图像，区域线图像可以是自动聚焦范围图像。

自动聚焦框图像可包括多个自动聚焦框。

基准线图像可以是网格线图像，区域线图像可以是面部检测范围图像。

摄像设备还可包括按照用操作单元获得的用户操作，设定变更后的透明度的控制单元。

摄像设备还可包括按照摄像处理的状态，自动设定变更后的透明度的控制单元。

按照本公开的另一个实施例，提供一种使计算机执行下述步骤的程序：当通过合成提供拍摄用辅助信息的第一和第二辅助图像，生成合成辅助图像时，改变在第二辅助图像中设定的透明背景区域中的第一辅助图像的显示区域的透明度；和使合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上。

按照本公开的又一个实施例，提供一种摄像方法，包括：当通过合成提供拍摄用辅助信息的第一和第二辅助图像，生成合成辅助图像时，改变在第二辅助图像中设定的透明背景区域中的第一辅助图像的显示区域的透明度；和使合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上。

按照如上所述的本公开的实施例，能够抑制与拍摄图像重叠显示的多个辅助信息的干扰。

附图说明

图1是图解说明按照本公开的第一实施例的摄像设备的功能结构的方框图。

图2A-图2C是图解说明按照第一实施例的基准线图像的例子的示图。

图3A和3B是图解说明按照第一实施例的区域线图像的例子的示图。

图4是图解说明按照第一实施例的辅助图像的合成处理的例子的示图。

图5A-5C是图解说明按照第一实施例的显示图像的例子的示图。

图6是图解说明按照第一实施例的辅助图像的合成处理的流程图。

图7是图解说明按照本公开的第二实施例的模式设定屏幕的示图。

图8是图解说明按照本公开的第三实施例的区域线图像的例子的示图。

图9是图解说明按照第三实施例的区域线图像的例子的示图。

图10是图解说明按照第三实施例的区域线图像的例子的示图。

图11是图解说明按照第三实施例的区域线图像的例子的示图。

具体实施方式

下面参考附图，详细说明本公开的优选实施例。在说明书和附图中，相同的附图标记被赋予功能结构基本相同的构成元件，以避免重复的说明。

将按照下述顺序进行说明。

1.第一实施例

1-1.摄像设备的功能结构。

1-2.辅助图像的结构

1-3.辅助图像的合成

2.第二实施例

3.第三实施例

4.综述

1.第一实施例

1-1.摄像设备的功能结构。

首先参考图1，说明按照本公开的第一实施例的摄像设备的功能结构。图1是图解说明按照本公开的第一实施例的摄像设备100的功能结构的方框图。

摄像设备100拍摄被摄对象的图像，并把通过拍摄而获得的静止图像或运动图像作为数字图像数据记录在记录介质中。摄像设备100被实现成例如数字照相机，还可被实现成具有上述摄像功能的任意电子设备。

参见图1，摄像设备100包括摄像单元100，拍摄图像处理单元103，拍摄图像记录单元105，存储单元107，操作单元109，控制单元111，自动聚焦单元113，面部检测单元115，辅助图像合成单元117，显示控制单元119和显示单元121。

摄像单元101拍摄被摄对象的图像，并输出拍摄的图像。例如，摄像单元101包括摄像光学系统，摄像元件，定时信号发生器和光学组件驱动单元等。摄像光学系统由诸如各种透镜，例如聚焦透镜和变焦透镜，消除不必要的波长的滤光器，和光圈之类的光学组件构成。从被摄对象入射的光学图像(被摄对象图像)经摄像光学系统的光学组件，形成于摄像元件的曝光面上。摄像元件(图像传感器)由诸如CCD(电荷耦合器件)或CMOS(互补金属氧化物半导体)之类的固态摄像元件构成。摄像元件进行导引自摄像光学系统的光学图像的光电转换，然后把代表拍摄图像的图像信号(模拟图像信号)输出给拍摄图像处理单元103。

拍摄图像处理单元103对从摄像单元101输出的代表拍摄图像的图像信号进行预定处理，并输出处理后的图像信号。可利用例如DSP(数字信号处理器)实现拍摄图像处理单元103。例如，拍摄图像处理单元103包括模拟信号处理单元，模/数转换单元，数字信号处理单元等等。模拟信号处理单元是预处理图像信号的所谓模拟前端。例如，模拟信号处理单元对从摄像单元101输出的图像信号进行CDS(相关双采样)处理，基于PGA(可编程增益放大器)的增益处理等等。模/数转换单元把从模拟信号处理单元输入的模拟图像信号转换成数字图像信号，并把该数字信号输出给数字信号处理单元。数字信号处理单元对输入的数字图像信号进行数字信号处理，比如噪声消除，白平衡调整，色彩校正，边缘增强和γ校正，并把数字信号处理后的图像信号输出给拍摄图像记录单元105和显示控制单元109。拍摄图像处理单元103不一定进行模拟和数字信号处理。例如，摄像单元110可输出数字图像信号，于是，拍摄图像处理单元103可以只进行数字信号处理。

拍摄图像记录单元105按照预定的压缩编码格式，比如JPEG(联合图像专家组)，压缩从拍摄图像处理单元103输出的信号处理后的图像信号，并把压缩数据作为图像数据保存在存储单元107中。拍摄图像记录单元105还把代表关于图像数据的附加信息的元数据保存在存储单元107中。可按照和拍摄图像处理单元103相同的方式，利用例如DSP，实现拍摄图像记录单元105。

关于摄像设备100的处理的数据被保存在存储单元107中。例如，存储单元107可以是诸如闪速ROM(只读存储器)或DRAM(动态随机存取存储器)之类的半导体存储器，诸如BD(蓝光光盘)、DVD(数字通用光盘)或CD(压缩光盘)之类的光盘，或者硬盘。存储单元107可以是内置于摄像设备100中的存储装置，或者可以是可安装到摄像设备100上，和从摄像设备100上取下的可拆卸介质，比如存储卡。存储单元107可包括各种存储装置或可拆卸介质。不仅拍摄图像记录单元105把图像数据保存在存储单元107中，而且控制单元111使用的程序，和后面说明的辅助图像的数据可被保存在存储单元107中。

充当操作摄像设备100的用户接口的操作单元109具有设置在摄像设备100外部的各种操作按钮，比如快门按钮、十字按钮或者菜单按钮，触摸面板或者遥控器，并把与用户的操作相应的操作信号输出给控制单元111。操作单元109把与用户的操作(例如摄像设备100的操作和停止，静止图像的拍摄，开始和停止拍摄运动图像，或者摄像设备100的各种功能的设定)相应的操作信号，输出给控制单元111。

控制单元111控制摄像设备100的各个单元的操作。例如，控制单元111可利用诸如设置在DSP中的微控制器之类的运算处理装置实现。控制单元111根据保存在例如包括在存储单元107中的闪速ROM中的程序工作，从而执行为控制所必需的各种运算处理。在运算处理中，可以使用包括在存储单元107中的DRAM。上面说明的程序可保存在盘记录介质，或者诸如存储卡之类的可拆卸存储介质中，可提供给摄像设备100。程序可经由诸如LAN(局域网)或因特网之类的网络下载到摄像设备100中。

自动聚焦单元113通过控制单元111，移动包括在摄像单元101中的摄像光学系统的聚焦透镜，从而自动把摄像光学系统聚焦到特定的被摄对象上。可按照和拍摄图像处理单元103相同的方式，利用例如DSP实现自动聚焦单元113。自动聚焦单元113可输出关于后面说明的自动聚焦框或自动聚焦区域的信息。自动聚焦单元113可按照例如相差检测方式工作。在这种情况下，自动聚焦单元113利用诸如检测线传感器(未示出)之类的光电传感器，检测在拍摄图像中预置的自动聚焦框中的相差。随后，自动聚焦单元113根据所述相差，计算把摄像光学系统聚焦到自动聚焦框中的特定被摄对象上的焦点位置。另外，自动聚焦单元113通过控制单元111，控制摄像单元101的光学组件驱动单元，以移动聚焦透镜，从而把摄像光学系统聚焦到特定的被摄对象上。自动聚焦单元113可借助用户通过操作单元109的操作，或者关于多个预置的自动聚焦框中的一个或多个自动提取的自动聚焦框，进行聚焦处理。自动聚焦单元113可按照对比度检测方式工作。这种情况下，首先，自动聚焦单元113通过控制单元111控制摄像单元101的光学组件驱动单元，从而移动聚焦透镜。随后，自动聚焦单元113检测拍摄图像的包括被摄对象的特定自动聚焦区域中的对比度，并把对比度最大的位置指定为聚焦位置。自动聚焦区域可以是拍摄图像中的任意区域，例如可以是后面说明的面部检测单元115检测到的面部区域。

面部检测单元115检测包括在拍摄图像中的一个或多个面部。可按照和拍摄图像处理单元103相同的方式，利用例如DSP实现面部检测单元115。面部检测单元115根据拍摄图像，利用诸如小波变换和Haar特征检测之类的算法，计算面部区域。面部区域可以是包括下巴、耳朵和眉毛的最小矩形的坐标值。面部区域不一定是矩形，可以是诸如三角形或椭圆形之类的形状。面部检测单元115可被设定成检测包括在拍摄图像中的所有面部，可被设定成检测用面部区域的大小等的顺序限定的多个面部。面部检测单元115可输出计算的面部区域的信息。

辅助图像合成单元117合成用于与拍摄图像重叠显示的多个辅助图像，从而生成合成辅助图像，并把合成辅助图像输出给显示控制单元119。可按照和拍摄图像处理单元103相同的方式，利用例如DSP实现辅助图像合成单元117。辅助图像是提供摄像用辅助信息的图像。具体地说，辅助图像可以是代表自动聚焦框(自动聚焦单元113的聚焦目标)的图像，面部检测单元115检测的面部区域的图像，帮助用户决定摄像构图的网格线的图像，代表拍摄模式、变焦放大率等的设定值的图像，或者当摄像设备100具备触摸面板时，操作按钮的图像。辅助图像可基于预先保存在存储单元107中的图像数据，可依据自动聚焦单元113或面部检测单元115的输出而生成。例如，辅助图像合成单元117把多个辅助图像都合成为一层，从而生成一个合成辅助图像。在这种情况下，辅助图像合成单元117可改变辅助图像的特定部分的透明度。辅助图像合成单元117可参考后面说明的添加到辅助图像中的合成模式信息，以改变透明度。辅助图像合成单元117的处理将在后面说明。

显示控制单元119进行显示单元121的显示控制，以显示各种数据。可按照和拍摄图像处理单元103相同的方式，利用例如DSP实现显示控制单元119。例如，显示控制单元119把图像数据输出给显示单元121，在所述图像数据中，从辅助图像合成单元117输出的合成辅助图像与由拍摄图像处理单元103实时拍摄和输入的拍摄图像(通过图像)重叠。显示单元121由例如LCD或有机EL(电致发光)显示器构成，显示从显示控制单元119输入的图像数据。在这种情况下，其中使摄像用辅助信息与正在拍摄的拍摄图像重叠显示的图像被显示在显示单元121上。因此，用户能够一边查看正在拍摄的图像和与正在拍摄的图像有关的辅助信息，一边操作摄像设备100。

从显示控制单元119输出给显示单元121的图像数据定期更新。辅助图像合成单元117可按照图像数据的更新，定期合成辅助图像，从而生成合成辅助图像，并把合成辅助图像输出给显示控制单元119。当待合成的辅助图像被更新时，辅助图像合成单元117可合成辅助图像，从而生成合成辅助图像，并把合成辅助图像输出给显示控制单元119。在这种情况下，合成辅助图像可被保存在存储单元107中，可被显示控制单元119反复使用，直到辅助图像合成单元117输出下一张合成辅助图像为止。

1-2.辅助图像的结构

下面参考图2A-图3B，说明按照本公开的第一实施例的辅助图像的结构。图2A-2C是图解说明作为按照本公开的第一实施例的第一辅助图像的基准线图像210的例子的示图。图3A和3B是图解说明作为按照本公开的第一实施例的第二辅助图像的区域线图像220的例子的示图。这里，举例说明基准线图像210和区域线图像220这两个辅助图像。不过，例如，可代替这两个辅助图像，或者与这两个辅助图像一起使用其它辅助图像，比如代表拍摄模式、变焦放大率等的设定值的图像，和当摄像设备100具备触摸面板时，操作按钮的图像。

(1)基准线图像

图2A-2C表示作为第一辅助图像的基准线图像210的三个例子。基准线图像210被显示成当用户决定构图时的基准或目标。具体地说，基准线图像可以是水平线，垂直线，其中组合水平线和垂直线的网格线，或者表示屏幕200的中央的中央标记。基准线图像210可被预先作为图像数据，保存在摄像设备100的存储单元107中。在每个基准线图像210中，除显示区域211外的部分是透明区域。当使基准线图像210与其它图像，比如拍摄图像重叠时，重叠的图像被透明地显示在透明区域中。

在图2A中所示的基准线图像210a中，显示区域211a是把屏幕200分成三个垂直部分和三个水平部分的网格线。在图2B中所示的基准线图像210b中，显示区域211b是把屏幕200分成四个垂直部分和六个水平部分的网格线，从而与图2A中所示的显示区域相比更精细。在图2C中所示的基准线图像210c中，显示区域211c是把屏幕200分成四个垂直部分和四个水平部分的网格线，和屏幕200的对角线。

除了这三个例子之外，可以存在具有与用户的用途或喜好相应的各种图案的基准线图像210。摄像设备100可被预先设置，以显示任意基准线图像210，显示的基准线图像210是可按照用户的操作选择的。在摄像设备100中，可以选择识别和自动显示拍摄图像的内容的基准线图像210。

(2)区域线图像

图3A和3B表示作为第二辅助图像的区域线图像220的两个例子。例如，区域线图像220可以是在摄像设备100的自动聚焦单元113的处理中使用的自动聚焦框，或者面部检测单元115检测的面部区域。例如，按照当自动聚焦单元113按相差检测方式工作时的自动聚焦框相同的方式，区域线图像220可预先作为图像数据被保存在摄像设备100的存储单元107中。例如，区域线图像220可以是当自动聚焦单元113按对比度检测方式工作时的自动聚焦框，或者按照由面部检测单元115检测的面部区域相同的方式，由摄像设备100的每个单元生成并保存在存储单元107中的图像。在每个区域线图像220中，除显示区域221外的部分是透明区域。当使区域线图像220与另一图像，诸如基准线图像210或者拍摄图像重叠时，重叠的图像被透明地显示在透明区域中。

在区域线图像220中还设定背景区域223。背景区域223是包括显示区域221的区域。具体地说，如图所示，背景区域223可以是代表区域线图像220中被显示区域221环绕的区域的内部的区域。背景区域223还包括在显示区域221附近的区域。当使区域线图像220与诸如基准线图像210之类的另一辅助图像重叠时，可以在背景区域223中改变诸如重叠的基准线图像210之类的另一辅助图像的透明度。改变透明度的处理将在后面说明。

图3A中所示的区域线图像220a是当自动聚焦单元113按照相差检测方式工作时，在屏幕200上设定的多个自动聚焦框中的图像。尽管图3A中表示了9个自动聚焦框，不过自动聚焦框的数目并不局限于此，可以显示一个或任意多个自动聚焦框。图3A表示多个自动聚焦框之一的放大图。显示区域221a基本上为矩形区域，所述矩形代表自动聚焦框。背景区域223a是包括所述矩形的内部区域及其附近的区域。

图3B中所示的区域线图像220b是当自动聚焦单元113按照对比度检测方式工作时，能够在屏幕200上设定的多个自动聚焦区域中的图像。尽管图3B中表示了9个自动聚焦区域，不过自动聚焦区域的数目并不局限于此，可以显示一个或任意多个自动聚焦区域。图3B表示多个自动聚焦区域之一的放大图。显示区域221b是具有被组合成使得显示成自动聚焦区域的四个钩状图形大体构成矩形的形状的区域，所述矩形代表自动聚焦区域。背景区域223b是包括所述矩形的内部及其附近的区域。

1-3.辅助图像的合成

下面参考图4-图6，说明按照本公开的第一实施例的辅助图像的合成。图4是图解说明按照第一实施例的辅助图像的合成处理的例子的示图。图5A-5C是图解说明第一实施例中显示的图像的例子的示图。图6是图解说明按照第一实施例的辅助图像的合成处理的流程图。

(1)处理的示意说明

图4示意地表示按照第一实施例的摄像设备100中的辅助图像的合成处理的例子。辅助图像合成单元117合成包括作为第一辅助图像的基准线图像210b和作为第二辅助图像的区域线图像220b的多个辅助图像，从而生成合成辅助图像250。待合成的辅助图像还包括其它辅助图像215和225。例如，如上所述，其它辅助图像215和225可以是表示拍摄模式、变焦放大率等的设定值的图像，或者当摄像设备100具备触摸面板时，操作按钮的图像。

在所示的例子中，待合成的辅助图像的组合是一个例子。因此，例如，基准线图像210b可以是其它种类的基准线图像，比如参考图2A和图2C说明的基准线图像210a和210c。区域线图像220b可以是其它种类的区域线图像，比如参考图3A说明的区域线图像220a。第一辅助图像不一定是基准线图像210，第二辅助图像不一定是区域线图像220。辅助图像合成单元117合成的多个辅助图像至少包括第一辅助图像和第二辅助图像，可以不存在其它的辅助图像215和225，也可存在更多的辅助图像。

在辅助图像合成单元117合成的多个辅助图像中设定显示优先级。在所示的例子中，从优先级低的一侧开始，按照作为第一辅助图像的基准线图像210b，其它的辅助图像215，作为第二辅助图像的区域线图像220b，和其它的辅助图像225的顺序，设定显示优先级。辅助图像合成单元117把每个辅助图像数据看作其中显示优先级较低的辅助图像是低层并且显示优先级较高的辅助图像是高层的层结构，并通过从低层顺序重叠辅助图像，合成辅助图像，从而生成合成辅助图像250。

在所示例子中设定的显示优先级是一个例子。因此，例如，作为第一辅助图像的基准线图像210b不一定是最低层，其它辅助图像215可被设定成较低层。可不存在比区域线图像220b更上位的层次，区域线图像220b可以是最高层。第二辅助图像的显示优先级可被设定成高于第一辅助图像的显示优先级，其它辅助图像215和225的显示优先级可被任意设定。

在所示例子中，首先，辅助图像合成单元117合成作为第一辅助图像的基准线图像210b，作为最低层。基准线图像210b包括显示区域211b，显示区域211b是把屏幕200分成四个垂直部分和六个水平部分的网格线。随后，辅助图像合成单元117合成作为上一层的其它辅助图像215。之后，辅助图像合成单元117合成作为较高层的为第二辅助图像的区域线图像220b。区域线图像220b包括显示区221b和背景区223b，显示区221b是具有被组合成使得显示成自动聚焦区域的四个钩状图形大体构成矩形的形状的区域，背景区域223b是包括所述矩形的内部及其附近的区域。随后，辅助图像合成单元117合成作为最高层的其它辅助图像225，从而完成合成辅助图像250。

在合成辅助图像250中，显示基准线图像210b的显示区域211b和区域线图像220b的显示区域221b。为简化起见，其它辅助图像215和225的显示区域未被示出。作为基准线图像210b(第一辅助图像)的显示区域211b的网格线相对于在第二辅助图像的区域线图像220b中设定的背景区域223b是透明的。即，在区域线图像220b的背景区域223b中，不显示基准线图像210b的显示区域211b。原因在于基准线图像210b的显示区域211b的透明度相对于区域线图像220b的背景区域223b被改变，从而基准线图像210b的显示区域211b完全透明。基准线图像210b的显示区域211b可以不是完全透明的，可以是半透明的。类似地，其它辅助图像215的显示区域(未示出)也可以相对于在区域线图像220b中设定的背景区域223b是透明或半透明的。辅助图像合成单元117改变基准线图像210b的显示区域211b的透明度的处理将在后面说明。

(2)显示图像的例子

图5A-5C表示按照第一实施例的摄像设备100的显示控制单元119显示在显示单元121上的图像的例子。用参考图4说明的处理生成的合成辅助图像250与显示控制单元119的拍摄图像300重叠，并显示在显示单元121上。这里，显示包括在合成辅助图像250中的基准线图像210b的显示区域211b，和区域线图像220b的显示区域221b。为简化起见，未显示其它辅助图像215和225的显示区域。

图5A表示其中作为基准线图像210b的显示区域211b的网格线相对于区域线图像220b的背景区域223b完全透明的例子。因此，在拍摄图像300中，显示在用区域线图像220b的显示区域221b表示的矩形区域中的部分的网格线的干扰被消除，从而能够使该部分的可视性最大化。用户可以使用由于显示显示区域211b，在除屏幕200的背景区域223b外的部分的网格线。显示在拍摄图像300中的矩形区域中的部分可以是例如作为自动聚焦单元113的聚焦目标的自动聚焦框，或者代表面部检测单元115检测的面部区域的面部检测框。

图5B表示其中作为基准线图像210b的显示区域211b的网格线相对于区域线图像220b的背景区域223b半透明的例子。因此，在拍摄图像300中，显示在用区域线图像220b的显示区域221b表示的矩形区域中的部分的网格线的干扰被降低，从而，能够在提高该部分的可视性的时候，在某种程度上确保该部分的网格线的可视性。按照和图5A中所示情况相同的方式，显示在拍摄图像300中的矩形区域中的部分可以是自动聚焦框或者面部检测框。

图5C表示其中作为基准线图像210b的显示区域211b的网格线相对于区域线图像220b的背景区域223b被原样显示的例子。这种情况下，类似于其它部分，在拍摄图像300中，在用区域线图像220b的显示区域221b表示的矩形区域中显示的部分，显示网格线。例如，在希望优先显示网格线的情况下，摄像设备100可转换是否改变显示区域211相对于背景区域223的透明度。

(3)处理的详细说明

在第一实施例中，辅助图像用RGBA颜色模型表示。RGBA颜色模型是其中对每个像素，设定颜色R(红)、G(绿)和B(蓝)的信息，和指定图像数据中的透明度的α值A的信息，以表示图像的颜色的方法。α值A在0～1的范围内，可被这样设定，以致在α值为0时，图像完全透明，在α值为1时，图像完全不透明。颜色表示方法不必局限于RGBA颜色模型，可以使用任何方法，如果能够改变图像中的透明度的话。

下面，说明当使用RGBA颜色模型时，辅助图像的基本合成处理。为简化起见，这里说明合成两层：高层和低层的情况，不过这同样适用于合成三层以上的情况。如公式1中所示，设定低层的任意像素的RGBA值。

R＝dR

G＝dG…(1)

B＝dB

A＝dA

如公式2中所示，设定高层的RGBA值。

R＝sR

G＝sG…(2)

B＝sB

A＝sA

这种情况下，如公式3中所示，表示合成后像素的RGBA值。

R＝sR×sA+dR×(1-sA)

G＝sG×sA+dG×(1-sA)…(3)

B＝sB×sA+dB×(1-sA)

A＝sA+dA×(1-sA))

例如，当高层的α值sA是接近于1的值时，低层的R、G和B被高层的R、G和B阻挡，从而很难反映到合成后的像素。同时，当高层的α值sA是接近于0的值时，低层的R、G和B通过高层的R、G和B，从而反映到合成后的像素。

在第一实施例中，合成模式信息被添加到每个辅助图像中。合成模式信息可被预先添加到保存在摄像设备100的存储单元107中的辅助图像的图像数据中，可由控制单元111添加或更新。辅助图像合成单元117根据合成模式信息，改变作为第一辅助图像的基准线图像210的显示区域211的透明度。合成模式信息可以是例如表1中所示的数字信息。

表1

合成模式	值
		正常合成模式	0
重写模式	255
		透明度改变模式	1～100

这里，“正常合成模式”是原样合成对应于高层的辅助图像，而不改变对应于低层的辅助图像的模式。“重写模式”是在对应于高层的辅助图像的背景区域中，合成完全透明的对应于低层的辅助图像的模式。“透明度改变模式”是改变对应于低层的辅助图像的透明度，并在对应于高层的辅助图像的背景区域中，合成低层的辅助图像的模式。在“透明度改变模式”下，能够设定变更后的透明度的值，通过调整所述值，能够调整使对应于低层的辅助图像半透明的程度。

合成模式信息不必添加到所有辅助图像中。例如，合成模式信息可以只被添加到作为改变对应于低层的辅助图像的透明度的第二辅助图像的区域线图像220中。在这种情况下，辅助图像合成单元117可通过把合成模式视为“正常合成模式”，处理未被添加合成模式信息的其它辅助图像。

图6表示图解说明按照第一实施例的摄像设备100的辅助图像合成单元117的处理的流程图。该处理是以辅助图像的层为单位的循环处理，从低层开始进行该处理，以便用多个辅助图像生成一个合成辅助图像。

首先，辅助图像合成单元117判定待合成的层的合成模式是否是“重写模式”(步骤S101)。当合成模式是“重写模式”时，辅助图像合成单元117在低层上重写该层，从而完成合成(步骤S103)。

下面，说明当把高层放在低层上时的处理。例如，将说明其中高层是作为第二辅助图像的区域线图像220，低层是作为第一辅助图像的基准线图像210的情况。在这种情况下，在除与区域线图像220的背景区域223对应的部分外的部分，进行上面说明的基本处理，合成后的像素的RGBA值如公式3中所示。在与区域线图像220的背景区域223对应的部分，进行与上述基本合成处理不同的合成处理，合成后的像素的RGBA值如公式4中所示。

R＝sR

G＝sG…(4)

B＝sB

A＝sA

因此，只有区域线图像220的RGBA值反映到合成辅助图像250中。即，作为第一辅助图像的基准线图像210相对于在作为第二辅助图像的区域线图像220中设定的背景区域223是完全透明的。因此，在背景区域223中区域线图像220的像素完全透明(sA＝0)的部分，合成辅助图像250是透明的，在合成辅助图像250和拍摄图像300的合成后的图像中，完全透明地显示拍摄图像300。

重新参见图6，在步骤S101，当判定待合成的层的合成模式不是“重写模式”时，辅助图像合成单元117之后判定待合成的层的合成模式是否是“透明度改变模式”(步骤S105)。当合成模式是“透明度改变模式”时，辅助图像合成单元117改变低层的透明度，并合成该待合成的层(步骤S107)。

下面，说明当改变低层的透明度，并合成高层时的处理。例如，将说明高层是作为第二辅助图像的区域线图像220，低层是作为第一辅助图像的基准线图像210的情况。在这种情况下，在除与区域线图像220的背景区域223对应的部分外的部分，进行上面说明的基本合成处理，合成后的像素的RGBA值如公式3中所示。在与区域线图像220的背景区域223对应的部分，进行与上述基本合成处理不同的合成处理，合成后的像素的RGBA值如公式5中所示。vA的值是在通过把表1中所示的合成模式信息中，在“透明度改变模式”情况下设定的数值1～100除以100而获得的0.01～1的范围内的值。

R＝sR×sA+dR×(1-sA)

G＝sG×sA+dG×(1-sA)…(5)

B＝sB×sA+dB×(1-sA)

A＝sA+dA×vA×(1-sA)

因此，区域线图像220的RGBA和具有按照vA值改变的透明度的基准线图像210的RGBA值反映到合成辅助图像250中。在公式5中，用dA×VA重写公式3的dA。即，作为第一辅助图像的基准线图像210的透明度被改变，基准线图像210相对于在作为第二辅助图像的区域线图像220中设定的背景区域223是半透明的。依据关于合成模式信息设定的数值改变半透明度，随着所述值变小，基准线图像210变得更透明。从而，在区域线图像220的像素相对于背景区域223完全透明(sA＝0)的部分，基准线图像210被显示在合成辅助图像250上，不过α值dA小于基准线图像210的初始α值dA(于是，vA在0.01～1的范围中)，基准线图像210的显示区域211被半透明显示。因此，在合成辅助图像250和拍摄图像300的合成后图像上，有一点透明地显示拍摄图像300。

重新参见图6，在步骤S105，当判定待合成的层的合成模式不是“透明度改变模式”时，辅助图像合成单元117判定待合成的层的合成模式是“正常合成模式”。随后，辅助图像合成单元117原样合成该待合成的层和低层(步骤S109)。在这种情况下，在包括与区域线图像220的背景区域223对应的部分的区域中，进行上面说明的基本合成处理，合成后像素的RGBA值如公式3中所示。

在步骤S103、步骤S107或步骤109中的合成处理之后，辅助图像合成单元117判定待合成的层是否是最高层(步骤S111)。当待合成的层是最高层时，辅助图像合成单元117结束处理。在步骤S111，当待合成的层不是最高层时，辅助图像合成单元117转移到上一层的处理(步骤S113)，并返回步骤S101。

2.第二实施例

下面参考图7，说明本公开的第二实施例。本公开的第二实施例和第一实施例的不同之处在于摄像设备具有显示模式设定功能，不过其它的功能结构大体上与第一实施例的相同，不再重复详细的说明。

在第二实施例中，控制单元111按照利用操作单元109获得的用户操作，改变在作为第二辅助图像的区域线图像220中设定的合成模式信息，从而设定在辅助图像合成单元117进行的改变之后作为第一辅助图像的基准线图像210的透明度。具体地说，控制单元111把在区域线图像220中设定的合成模式改变成“正常合成模式”、“重写模式”和“透明度改变模式”任意之一。控制单元111可改变代表变更后的基准线图像210的透明度的值，以致合成模式是“透明度改变模式”。合成模式信息被控制单元111改变的辅助图像并不局限于区域线图像220，可以是其它辅助图像。

图7表示由按照本公开的第二实施例的摄像设备100中的显示控制单元119显示的显示模式设定屏幕400。通过按压包括在摄像设备100的操作单元109中的菜单按钮，把显示模式设定屏幕400显示在显示单元121上。在所示的例子中，显示模式设定屏幕400包括重写模式按钮410，透明度改变模式按钮420和正常合成模式按钮430。控制单元111利用包括在操作按钮109中的十字按钮、触摸面板等，依据所述按钮的操作，获得用于设定在基准线图像210的改变之后的透明度的用户操作。从而，例如，当用户按下重写模式按钮410时，控制单元111把添加到保存在存储单元107中的区域线图像220中的合成模式信息的合成模式设定成“重写模式”。

显示模式设定屏幕400不必是所示的屏幕。例如，显示模式设定屏幕400可以只包括重写模式按钮410和正常合成模式按钮430。显示模式设定屏幕400可以包括直接设定在基准线图像210的改变之后的透明度的调节工具，比如滑动条。

作为本公开的第二实施例的改进例子，控制单元111可按照摄像处理的状态，自动改变在作为第二辅助图像的区域线图像220中设定的合成模式信息，从而设定在辅助图像合成单元117进行的改变之后作为第一辅助图像的基准线图像210的透明度。例如，通过把自动聚焦单元113的聚焦看作触发信号，控制单元111可改变基准线图像210相对于作为自动聚焦框中的图像的区域线图像220的背景区域223的透明度，从而使基准线图像210完全透明或半透明。通过把面部检测单元115进行的低层区域的检测看作触发信号，控制单元111可改变基准线图像210相对于作为面部检测框中的图像的区域线图像220的背景区域223的透明度，从而使基准线图像210完全透明或半透明。

3.第三实施例

下面参考图8-11，说明本公开的第三实施例。本公开的第三实施例在作为第二辅助图像的区域线图像220的结构方面不同于第一实施例，不过，其它的功能结构大体上与第一实施例相同，不再重复详细的说明。在下面的说明中，为了易于理解显示状态，区域线图像220被表示成与拍摄图像300重叠。

图8表示作为按照本实施例的区域线图像220的第一个例子的区域线图像220c。区域线图像220c中的显示区域221c是在屏幕200上设定的一个自动聚焦框。例如，显示区域221c可代表作为用户设定的摄像设备100的自动聚焦单元113的自动聚焦目标的区域，或者用自动聚焦单元113的处理聚焦的区域。

图9表示作为按照本实施例的区域线图像220的第二个例子的区域线图像220d。区域线图像220d中的显示区域221d是在屏幕200上设定的多个自动聚焦框。包括在显示区域221d中的所述多个自动聚焦框可具有彼此不同的透明度。在所示例子中，显示区域221d是15个自动聚焦区域，包括一个基本上不透明的自动聚焦框，和14个半透明的自动聚焦框。这些自动聚焦框中的半透明自动聚焦框可代表例如作为摄像设备100的自动聚焦单元113的自动聚焦目标的区域。基本上不透明的自动聚焦框可代表例如15个自动聚焦框之中，作为用户选择的自动聚焦单元113的自动聚焦目标的区域，或者15个自动聚焦框之中，用自动聚焦单元113的处理聚焦的区域。

图10表示作为按照本实施例的区域线图像220的第三个例子的区域线图像220e。区域线图像220e中的显示区221e是在屏幕200上设定的多个自动聚焦框。包括在显示区域221e中的所有多个自动聚焦框都是半透明显示的。在所示例子中，显示区域221e是15个半透明显示的自动聚焦框。这样的自动聚焦框可代表例如作为摄像设备100的自动聚焦单元113的自动聚焦目标的区域。

图11表示作为按照本实施例的区域线图像220的第四个例子的区域线图像220f。区域线图像220f中的显示区221f是在屏幕200上设定的多个自动聚焦框。包括在显示区域221f中的所有多个自动聚焦框基本上不透明。在所示例子中，显示区域221f是5个自动聚焦框。自动聚焦框的数目并不局限于5个。这样的自动聚焦框可代表例如用摄像设备100的自动聚焦单元113的处理聚焦的区域。

下面说明利用上述四种区域线图像220c～220f的摄像设备100的操作例子。在所述操作例子中，摄像设备100从多个自动聚焦框中自动提取可聚焦的自动聚焦框。首先，辅助图像合成单元117生成包括图10中所示的区域线图像220e的合成辅助图像250。合成辅助图像250与拍摄图像300重叠，从而用户识别出可以是自动聚焦单元113的自动聚焦目标的区域。在这种状态下，当用户操作例如包括在操作单元109中的快门按钮，以向控制单元111传送代表聚焦指令的操作信号时，控制单元111操纵自动聚焦单元113进行聚焦。结果，当存在多个聚焦区域时，控制单元111生成图11中所示的区域线图像220f，从而将其提供给辅助图像合成单元117。当存在一个聚焦区域时，控制单元111生成图8中所示的区域线图像220c，从而将其提供给辅助图像合成单元117。辅助图像合成单元117生成包括区域线图像220f或区域线图像220c的合成辅助图像250。合成辅助图像250与拍摄图像300重叠，从而用户识别出由自动聚焦单元113聚焦的区域。

下面说明利用四种区域线图像220c～220f的摄像设备100的操作例子。在这个操作例子中，摄像设备100从多个自动聚焦框中，选择根据用户的操作而聚焦的自动聚焦框。首先，辅助图像合成单元117生成包括图9中所示的区域线图像220d的合成辅助图像250。用相对于区域线图像220d基本不透明的颜色表示的自动聚焦框代表当前选择的自动聚焦框。在这种状态下，用户操作例如包括在操作单元109中的十字键，以移动选择的自动聚焦框。控制单元111按照用户的操作，更新用相对于区域线图像220d基本不透明的颜色表示的自动聚焦框的位置，从而把更新的区域线图像220d提供给辅助图像合成单元117。当用户操作例如包括在操作单元109中的快门按钮，以把表示聚焦指令的操作信号传给控制单元111时，控制单元111操纵自动聚焦单元113进行聚焦。这种情况下，控制单元111生成图8中所示的区域线图像220c，从而将其提供给辅助图像合成单元117。辅助图像合成单元117生成包括区域线图像220c的合成辅助图像250。合成辅助图像250与拍摄图像300重叠，从而用户识别用选择的自动聚焦框代表的区域中的聚焦。

在上面说明的本公开的第三实施例中，相对于区域线图像220的背景区域223，改变诸如网格线之类的基准线图像的透明度，从而通过利用例如区域线图像220c～220f，用户在摄像设备100的操作中容易识别包括在自动聚焦框中的图像。

4.综述

按照本公开的实施例的摄像设备包括当通过合成提供拍摄用辅助信息的第一和第二辅助图像，生成合成辅助图像时，改变在第二辅助图像中设定的透明背景区域中的第一辅助图像的显示区域的透明度的辅助图像合成单元，和使合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上的显示控制单元。借助这种结构，由于当重叠地显示第一辅助图像和第二辅助图像时，在第二辅助图像的背景区域中的第一辅助图像的透明度被改变，因此能够抑制第一辅助图像对于第二辅助图像的干扰。

辅助图像合成单元至少可根据添加到第二辅助图像中的合成模式信息，改变所述透明度。借助这种结构，当在多个辅助图像中设定对应于第一辅助图像和第二辅助图像的多个组合时，可通过组合它们，设定改变透明度的方法。

辅助图像合成单元可使第一辅助图像在背景区域中完全透明。借助这种结构，在合成辅助图像中，只有第二辅助图像被显示在第二辅助图像的背景区域中，从而用户能够清楚地认识第二辅助图像代表的内容。

背景区域可以是包括第二辅助图像的显示区域的区域。借助这种结构，在第二辅助图像的显示区域附近，确保一定程度的边缘，第一辅助图像的显示区域和第二辅助图像的显示区域不是连续的，从而用户能够容易地区分和认识第一辅助图像和第二辅助图像。

第一辅助图像可以是拍摄图像的基准线图像，第二辅助图像可以是拍摄图像的区域线图像。借助这种结构，当显示在屏幕的特定部分的区域线图像与显示在整个屏幕上的基准线图像重叠时，能够抑制基准线图像对于用区域线图像代表的区域的干扰。

基准线图像可以是网格线图像，区域线图像可以是自动聚焦范围图像。借助这种结构，透明或半透明地显示自动聚焦框中的网格线，从而易于认识包括在自动聚焦框中的被摄对象。

自动聚焦框图像可包括多个自动聚焦框。借助这种结构，能够容易地区分和从区域线图像中识别设定在拍摄图像中的多个自动聚焦框，从而能够容易地认识包括在自动聚焦框中的被摄对象。

基准线图像可以是网格线图像，区域线图像可以是面部检测范围图像。借助这种结构，透明或半透明地显示面部检测框中的网格线，从而能够容易地认识包括在面部检测框中的面部。

摄像设备还可包括按照用操作单元获得的用户操作，设定变更后的透明度的控制单元。借助这种结构，能够按照拍摄的被摄对象或者用户的喜好，任意设定把第二辅助图像的背景区域中的第一辅助图像的透明度改变到什么程度。

摄像设备还可包括按照摄像处理的状态，自动设定变更后的透明度的控制单元。借助这种结构，能够按照摄像处理的状态的变更，例如自动聚焦的聚焦或者面部区域的检测，设定更适合于用户的透明度。

本申请包含与在2010年8月23日向日本专利局提交的日本优先权专利申请JP 2010-186294中公开的主题相关的主题，该专利申请的整个内容在此引为参考。

本领域的技术人员应明白，根据设计要求和其它因素，可以产生各种修改、组合、子组合和变更，只要它们在所附的权利要求或其等同物的范围之内。

Claims (12)

1.一种摄像设备，包括：

辅助图像合成单元，当通过合成提供拍摄用辅助信息的第一辅助图像和第二辅助图像来生成合成辅助图像时，改变第一辅助图像在在第二辅助图像中设定的透明背景区域中的透明度；和

显示控制单元，使所述合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上。

2.按照权利要求1所述的摄像设备，其中所述辅助图像合成单元至少根据添加到第二辅助图像中的合成模式信息，改变所述透明度。

3.按照权利要求1所述的摄像设备，其中所述辅助图像合成单元使第一辅助图像在所述背景区域中完全透明。

4.按照权利要求1所述的摄像设备，其中所述背景区域是包括第二辅助图像的显示区域的区域。

5.按照权利要求1所述的摄像设备，其中第一辅助图像是所述拍摄图像的基准线图像，并且

其中第二辅助图像是所述拍摄图像的区域线图像。

6.按照权利要求5所述的摄像设备，其中所述基准线图像是网格线图像，并且

其中所述区域线图像是自动聚焦框图像。

7.按照权利要求6所述的摄像设备，其中所述自动聚焦框图像包括多个自动聚焦框。

8.按照权利要求5所述的摄像设备，其中所述基准线图像是网格线图像，并且

其中所述区域线图像是面部检测范围图像。

9.按照权利要求1所述的摄像设备，还包括按照用操作单元获得的用户操作来设定变更后的透明度的控制单元。

10.按照权利要求1所述的摄像设备，还包括按照摄像处理的状态来自动设定变更后的透明度的控制单元。

11.一种使计算机执行下述步骤的程序：

当通过合成提供拍摄用辅助信息的第一和第二辅助图像，生成合成辅助图像时，改变在第二辅助图像中设定的透明背景区域中的第一辅助图像的显示区域的透明度；和

使合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上。

12.一种摄像方法，包括：

当通过合成提供拍摄用辅助信息的第一辅助图像和第二辅助图像，生成合成辅助图像时，改变第一辅助图像在在第二辅助图像中设定的透明背景区域中的透明度；和

使所述合成辅助图像与拍摄图像重叠，并把图像显示在显示单元上。

Images