摄像装置、通信设备、摄像方法和信息报知方法
技术领域
本发明涉及摄像装置、通信设备、摄像方法和信息报知方法。
背景技术
近年来,已知如下技术:在数字照相机等摄像装置中,使用通信技术将通过摄像生成的图像数据依次发送到便携电话等外部通信设备(例如,参照日本专利特开2003-250079号公报)。
该技术是利用通信设备对摄像装置进行远程操作的技术。
具体而言,在该技术中,通信设备依次接收从摄像装置发送的图像数据,在该通信设备中设置的显示部中依次显示与该图像数据对应的实时取景图像。通信设备的用户确认通信设备的显示部中显示的实时取景图像,并在希望使摄像装置执行摄影的时机对通信设备执行摄影操作。通过该摄影操作,从通信设备向摄像装置发送摄影指示。摄像装置在接收到该摄影指示之后,拍摄被摄体,生成图像数据,将该图像数据发送给通信设备。
但是,在电波环境变化、摄像装置与通信设备之间的通信状态处于不良状态的情况下(无线信号的强度降低的情况下等),由于图像数据的数据量较大,在摄像装置与通信设备之间不能进行图像数据的收发。因此,通信设备的用户不能进行协同操作,此外,不能确认实时取景图像(不能掌握摄像装置的视野区域),不能利用摄像装置与通信设备之间的通信进行操作、确认、摄影。即,存在不能实现方便性的提高这样的问题。
本发明是鉴于上述情况而完成的,目的在于提供一种能够实现方便性的提高的摄像装置、通信设备、摄像方法和信息报知方法。
发明内容
本发明的一个方式的摄像装置具有:摄像部,其拍摄被摄体而生成图像数据;特征信息生成部,其根据所述图像数据生成数据量小于该图像数据的特征信息,该特征信息表示与该图像数据对应的图像中包含的被摄体像的特征;摄像侧第1通信部,其与外部的通信设备之间连接为能够收发信息;摄像侧第2通信部,其以与所述摄像侧第1通信部的通信方式不同的通信方式,与所述通信设备之间连接为能够收发信息;通信状态判定部,其判定所述通信设备与所述摄像侧第1通信部之间的通信状态是否良好;以及摄像侧通信控制部,其在所述通信状态判定部判定为所述通信设备与所述摄像侧第1通信部之间的通信状态不良的情况下,经由所述摄像侧第2通信部,向所述通信设备发送所述特征信息。
本发明的另一方式的通信设备与摄像装置之间进行通信,其中,该通信设备具有:设备侧通信部,其与所述摄像装置之间连接为能够收发信息;设备侧通信控制部,其经由所述设备侧通信部,从所述摄像装置接收特征信息,该特征信息的数据量小于由所述摄像装置生成的图像数据,且该特征信息表示与该图像数据对应的图像中包含的被摄体像的特征;以及报知部,其根据经由所述设备侧通信部接收到的所述特征信息,报知表示被摄体像的特征的信息。
本发明的另一方式的摄像方法是由拍摄被摄体的摄像装置执行的摄像方法,其中,该摄像方法具有如下步骤:拍摄被摄体而生成图像数据;判定外部通信设备与摄像侧第1通信部之间的通信状态是否良好;根据所述图像数据生成数据量小于该图像数据特征信息,该特征信息表示与该图像数据对应的图像中包含的被摄体像的特征;在判定为所述通信设备与所述摄像侧第1通信部之间的通信状态不良的情况下,经由通信方式与所述摄像侧第1通信部不同的摄像侧第2通信部,向所述通信设备发送所述特征信息。
本发明的一个方式的信息报知方法是由与摄像装置之间进行通信的通信设备执行的摄像方法,其中,在从所述摄像装置接收到特征信息之后,根据该特征信息,报知表示被摄体像的特征的信息,其中,该特征信息的数据量小于由所述摄像装置生成的图像数据,且该特征信息表示与该图像数据对应的图像中包含的被摄体像的特征。
关于以上记述的内容及本发明的其它特征、优点、技术和产业意义,如果对照附图来解读以下的本发明的详细说明,则能够进一步理解。
附图说明
图1是示意性示出本发明的实施方式1的摄像系统的结构的图。
图2是示出图1所示的摄像系统的结构的框图。
图3是示出图1和图2所示的摄像装置的动作的流程图。
图4是示出图3所示的特征信息的生成处理(步骤S106)的流程图。
图5A是用于说明图3和图4所示的特征信息的生成处理(步骤S106)的图。
图5B是用于说明图3和图4所示的特征信息的生成处理(步骤S106)的图。
图6是示出图1和图2所示的通信设备的动作的流程图。
图7是用于说明图6所示的特征图像的生成处理(步骤S207)的图。
图8A是用于说明图6和图7所示的特征图像的生成处理(步骤S207)的图。
图8B是用于说明图6和图7所示的特征图像的生成处理(步骤S207)的图。
图9是示出本发明的实施方式1的变形例的图。
图10是示出本发明的实施方式2的特征信息的生成处理(步骤S106)的流程图。
图11A是用于说明图10所示的特征信息的生成处理(步骤S106)的图。
图11B是用于说明图10所示的特征信息的生成处理(步骤S106)的图。
图12是用于说明本发明的实施方式2的特征图像的生成处理(步骤S207)的图。
图13A是用于说明图12所示的特征图像的生成处理(步骤S207)的图。
图13B是用于说明图12所示的特征图像的生成处理(步骤S207)的图。
图14是示出本发明的实施方式3的特征信息的生成处理(步骤S106)的流程图。
图15是示出本发明的实施方式3的特征图像的生成处理(步骤S207)的流程图。
图16是示出本发明的实施方式4的特征信息的生成处理(步骤S106)的流程图。
图17是示出本发明的实施方式4的通信设备的动作的流程图。
图18是示出本发明的实施方式5的特征信息的生成处理(步骤S106)的流程图。
图19是示出本发明的实施方式5的通信设备的动作的流程图。
具体实施方式
以下,参照附图,对本具体实施方式(以下记作实施方式)进行说明。此外,本发明不受限于以下说明的实施方式。此外,在附图的记载中,对相同部分标注相同标号。
实施方式1
摄像系统的概略结构
图1是示意性示出本发明的实施方式1的摄像系统1的结构的图。图2是示出摄像系统1的结构的框图。
摄像系统1具有通过无线通信连接为能够彼此收发信息的摄像装置2和通信设备3(图1、图2),以及附件4(图1)。
附件的结构
附件4是使摄像装置2和通信设备3机械连接的部件。
更具体而言,如图1所示,附件4装配在通信设备3的背面。此外,在附件4中设置有安装用孔4A,该安装用孔4A在俯视时具有圆形状,供摄像装置2嵌入。
进而,在经由附件4使摄像装置2和通信设备3彼此机械连接的状态下,摄像系统1的整体形状成为看似数字照相机的形状。
此外,作为摄像系统1,不限于具有附件4的结构,也可以构成为省略附件4。
摄像装置的结构
此外,以下,作为摄像装置2的结构,主要说明本发明的主要部分。
如图2所示,摄像装置2具有光学系统21、驱动部22、位置检测部23、操作部24、第1摄像部25、第1存储器部26、第1记录部27、摄像侧通信部28和第1控制部29。而且,这些部件21~29被收纳在具有整体大致圆柱形状的镜头镜筒20(图1)内部。即,如图1所示,摄像装置2的整体形状具有与所谓可更换镜头的整体形状大致相同的形状。
光学系统21从规定的视野区域使光会聚,使该会聚的光在构成第1摄像部25的摄像元件(图示省略)的摄像面上成像。如图2所示,该光学系统21具有变焦镜头211和对焦镜头212。
变焦镜头211使用一个或多个透镜构成,通过沿着图2虚线所示的光轴移动而变更光学系统21的变焦倍率。
对焦镜头212使用一或多个透镜构成,通过沿着图2虚线所示的光轴移动而变更光学系统21的焦点位置和焦距。
驱动部22在第1控制部29的控制下,使构成光学系统21的各镜头211、212沿光轴移动。如图2所示,该驱动部22具有变焦驱动部221和对焦驱动部222。
变焦驱动部221使用步进电机或DC电机等构成,使变焦镜头211沿光轴移动。
对焦驱动部222使用步进电机或DC电机等构成,使对焦镜头212沿光轴移动。
位置检测部23检测构成光学系统21的各镜头211、212在光轴上的位置。如图2所示,该位置检测部23具有变焦位置检测部231和对焦位置检测部232。
变焦位置检测部231使用光遮断器(photo interrupter)等构成,检测由变焦驱动部221驱动的变焦镜头211在光轴上的位置。
具体而言,变焦位置检测部231将变焦驱动部221中包含的驱动用电机的旋转量转换为脉冲数,根据转换后的脉冲数,检测变焦镜头211在光轴上从以无限远为基准的基准位置起的位置。
对焦位置检测部232使用光遮断器等构成,利用与变焦位置检测部231相同的方法,检测由对焦驱动部222驱动的对焦镜头212在光轴上的位置。
操作部24是设置在镜头镜筒20的周围的操作环、设置在镜头镜筒20的外表面上的按钮及开关等,其受理光学系统21内的变焦镜头211及对焦镜头212在光轴上的位置的变更操作及摄影操作等用户操作。进而,操作部24将该用户操作对应的指示信号输出到第1控制部29。
第1摄像部25在第1控制部29的控制下,拍摄被摄体而生成图像数据。该第1摄像部25使用CCD(Charge Coupled Device:电荷耦合器件)等摄像元件和信号处理部等构成,其中,所述摄像元件接收光学系统21成像出的被摄体像并将其转换为电信号,所述信号处理部对来自该摄像元件的电信号(模拟信号)进行信号处理(A/D转换等),由此生成数字的图像数据。进而,在第1控制部29的控制下,将由第1摄像部25生成的图像数据和与该图像数据生成的时刻相关的时刻信息(以下记作时间戳)关联起来,依次存储到第1存储器部26中。此外,根据摄像系统1的用户对摄像装置2(操作部24)及对通信设备3的摄影操作,将由第1摄像部25生成的图像数据记录到第1记录部27中。
第1存储器部26依次存储由第1摄像部25生成的图像数据(包含时间戳),并存储后述的由特征信息生成部291生成的特征信息(包含时间戳)。
第1记录部27记录第1控制部29执行的各种程序(包含摄像程序)、光学系统21的倍率、焦距、视场角、像差和F值(亮度)等与光学系统21的特性相关的特性信息。此外,第1记录部27根据摄像系统1的用户对摄像装置2(操作部24)及对通信设备3的摄影操作,记录由第1摄像部25生成的图像数据。此外,在图2中,为了便于说明,第1记录部27设为具有第1信息记录部271的结构,但在本实施方式1中不具有第1信息记录部271。
在第1控制部29的控制下,摄像侧通信部28与通信设备3之间,按照规定的协议进行包含通信所需的信号的各种数据的无线通信。如图2所示,该摄像侧通信部28具有摄像侧第1通信部281和摄像侧第2通信部282。
摄像侧第1通信部281是用于与通信设备3之间进行第1通信的通信接口。该第1通信具有能够进行图像数据等大容量的数据通信信道容量,为了建立连接需要耗费较长的时间。
在本实施方式1中,作为该第1通信,采用了Wi-Fi(Wireless Fidelity:无线保真)(注册商标)通信。此外,作为该第1通信,除了可以采用Wi-Fi通信以外,还可以采用利用3G无线的通信及WiMAX(Worldwide Interoperability for Microwave Access:全球微波接入互操作性)通信等其它通信。
例如,在Wi-Fi(注册商标)通信的情况下,假定为局域网,作为设备的功能分配,成为接入点(access point)和站(station)的关系,作为概略的连接处理,成为使站与由接入点构筑的无线网络连接的关系。
作为大体的连接顺序,假定遵循如下Step1、2而连接到多个设备的网络:(Step1)接入点构筑无线网络,报知自己的网络识别符(SSID),(Step2)站检索所报知的网络识别符(SSID),连接到期望的网络(接入点),假定遵循这样的Step1、2而连接到多个设备的网络,因此,覆盖范围较大,且需要考虑干扰的问题并遵循严密的识别步骤。因此,有时在建立连接时耗费时间。不过,关于数据通信,能够在按接入点、站的各自的定时来进行数据收发。此处,将摄像装置2侧当作接入点,将通信设备3当作站即可。此外,该关系也可以相反。能够以10兆比特/秒以上的速度进行通信,因此,能够高速地发送图像。
摄像侧第2通信部282是用于与通信设备3之间进行第2通信的通信接口,第2通信是与第1通信不同的通信方式。该第2通信具有比第1通信中的通信信道容量小的通信信道容量,相比第1通信,能够以较短的时间建立连接。
在本实施方式1中,作为该第2通信,采用了Bluetooth(注册商标)通信(例如,Bluetooth Low Energy(低功耗蓝牙)等)。此外,作为该第2通信,除了可以采用Bluetooth(注册商标)通信以外,还可以采用红外线通信(IrDA(Infrared Data Association:红外数据协会))等其它通信。
例如,在Bluetooth(注册商标)通信的情况下,作为设备的功能分配,成为近距离的一对一关系的主/从的关系,作为概略连接处理,主控设备为了检索期望的从属设备而进行连接,仅通过询问和应答的关系即可建立通信,是较为简便的。
作为大体的连接顺序,遵循如下Step1~3:(Step1)主控设备进行是否存在从属设备设备的询问(Inquiry),(Step2)从属设备对来自主控设备的询问(Inquiry)返回应答,(Step3)主控设备在存在应答的从属设备中,与期望的从属设备进行连接。不过,在数据通信中,按照来自主控设备的数据收发指示进行数据收发,在主控设备不允许时,不能进行数据收发。此处,在从通信设备3控制摄像装置2的情况下,通信设备3为主控设备,摄像装置2为从属设备,因此,通信设备3能够根据用户的需求,迅速地从摄像装置2取得所需的信息。不过,通信速度最高为2兆比特/秒左右,不是特别适合于动态图像的图像传输。
第1控制部29使用CPU(Central Processing Unit:中央处理器)等构成,根据来自操作部24的指示信号或经由摄像侧通信部28输入的来自通信设备3的指示信号,控制摄像装置2整体的动作。如图2所示,该第1控制部29具有特征信息生成部291、摄像侧通信控制部292和通信状态判定部293。
特征信息生成部291根据第1存储器部26中存储的最新的图像数据生成数据量小于该图像数据的特征信息,该特征信息表示与该图像数据对应的图像中包含的被摄体像的特征。此外,“最新”是指,在基于时间戳的时刻上最新(以下相同)。进而,将由特征信息生成部291生成的特征信息(包含与该特征信息的生成中使用的图像数据关联起来的时间戳)存储到第1存储器部26中。
摄像侧通信控制部292经由摄像侧通信部28,与通信设备3之间建立基于第1通信和第2通信的通信连接。进而,摄像侧通信控制部292根据通信状态判定部293的判定结果,利用第1通信或第2通信,将第1记录部27中记录的特性信息、与位置检测部23检测出的变焦镜头211和对焦镜头212的各位置相关的位置信息、第1存储器部26中存储的最新的图像数据(包含时间戳)以及由特征信息生成部291生成的特征信息(包含时间戳)等发送给通信设备3。此外,摄像侧通信控制部292利用第1通信或第2通信,从通信设备3接收摄影指示及光学系统21的动作指示。
通信状态判定部293判定摄像装置2与通信设备3之间的基于第1通信的通信状态是否良好。
例如,通信状态判定部293检测利用第1通信从通信设备3发送的信号(在本实施方式1中为Wi-Fi(注册商标)的信号)的信号强度。进而,在该信号强度为规定的阈值以上的情况下,通信状态判定部293判定为基于第1通信的通信状态良好。另一方面,在该信号强度小于上述阈值的情况下,通信状态判定部293判定为基于第1通信的通信状态不良。
通信设备的结构
通信设备3是与摄像装置2进行无线通信设备,例如,构成为数字照相机、数码摄像机、或便携电话及平板型便携设备等,(在图1中,将通信设备3示出作为便携电话(智能手机)示出)。
此外,以下,作为通信设备3的结构,主要说明本发明的主要部分。
如图2所示,该通信设备3具有输入部31、显示部32、第2摄像部33、第2存储器部34、第2记录部35、设备侧通信部36和第2控制部37。
输入部31使用受理用户操作的按钮、开关、触摸面板等构成,将与该用户操作对应的指示信号输出到第2控制部37。
显示部32使用由液晶或有机EL(Electro Luminescence:电致发光)等构成的显示面板构成,在第2控制部37的控制下显示规定的图像。
第2摄像部33被设置在背面(图1),在第2控制部37的控制下,拍摄被摄体而生成图像数据。该第2摄像部33使用使被摄体像成像的光学系统331(图1)、CCD等摄像元件(图示省略)以及信号处理部等构成,其中,所述摄像元件接收光学系统331成像出的被摄体像并将其转换为电信号,所述信号处理部对来自该摄像元件的电信号(模拟信号)进行信号处理(A/D转换等),由此生成数字的图像数据。
以下,将由摄像装置2(第1摄像部25)生成的图像数据记作摄像侧图像数据,将由通信设备3(第2摄像部33)生成的图像数据记作设备侧图像数据。
第2存储器部34存储由第2摄像部33生成的设备侧图像数据、经由设备侧通信部36从摄像装置2接收到的信息。
如图2所示,第2记录部35具有程序记录部351和图像数据记录部352。此外,在图2中,为了便于说明,第2记录部35设为具有第2信息记录部353的结构,但在本实施方式1中不具有第2信息记录部353。
程序记录部351记录第2控制部37执行的各种程序(包含显示程序)和在程序的执行中使用的各种数据等。
在第2控制部37的控制下,图像数据记录部352根据摄像系统1的用户对输入部31的摄影操作,记录由摄像装置2生成的摄像侧图像数据或由第2摄像部33生成的设备侧图像数据。
在第2控制部37的控制下,设备侧通信部36与摄像装置2之间按照规定的协议进行包含通信所需的信号的各种数据的无线通信。如图2所示,该设备侧通信部36具有设备侧第1通信部361和设备侧第2通信部362。
设备侧第1通信部361是用于与摄像装置2之间进行第1通信的通信接口。
设备侧第2通信部362是用于与摄像装置2之间进行第2通信的通信接口。
第2控制部37使用CPU等构成,根据来自输入部31的指示信号等,进行与构成通信设备3的各部对应的指示及数据的传输等,总体地控制通信设备3的动作。如图2所示,该第2控制部37具有设备侧通信控制部371、特征图像生成部372、显示控制部373和摄像控制部374。
设备侧通信控制部371经由设备侧通信部36,与摄像装置2之间建立基于第1通信和第2通信的通信连接。进而,设备侧通信控制部371利用第1通信或第2通信,从摄像装置2接收特性信息、位置信息、摄像侧图像数据(包含时间戳)、特征信息(包含时间戳)等。此外,设备侧通信控制部371根据摄像系统1的用户对输入部31的摄影操作,利用第1通信或第2通信向摄像装置2发送摄影指示。此外,设备侧通信控制部371根据使摄像系统1的用户对输入部31进行的使光学系统21动作(变更变焦镜头211、对焦镜头212在光轴上的位置)的操作,利用第1通信或第2通信,向摄像装置2发送光学系统21的动作指示。
特征图像生成部372根据第2存储器部34中存储的最新的特征信息,生成表示被摄体像的特征的特征图像。进而,将由特征图像生成部372生成的特征图像(包含与在该特征图像的生成中使用的特征信息关联起来的时间戳)存储在第2存储器部34中。
显示控制部373控制显示部32的动作,使显示部32显示与第2存储器部34中存储的摄像侧图像数据对应的实时取景图像或第2存储器部34中存储的特征图像。
而且,上述显示部32、特征图像生成部372和显示控制部373具有作为本发明的报知部的功能。
在通信设备3被设定为通信摄影模式(利用摄像装置2拍摄被摄体的模式)的情况下,在存在摄像系统1的用户对输入部31的摄影操作的情况下,摄像控制部374经由设备侧通信部36,利用第1通信或第2通信发送表示进行摄影的摄影指示(也包含通过该摄影得到的摄像侧图像数据的传输请求)。然后,在从摄像装置2发送来摄像侧图像数据的情况下,摄像控制部374将该摄像侧图像数据记录到图像数据记录部352中。
另一方面,在通信设备3被设定为通常摄影模式(利用第2摄像部33拍摄被摄体的模式)的情况下,在存在通信设备3的用户对输入部31的摄影操作的情况下,摄像控制部374使第2摄像部33拍摄被摄体,并将由第2摄像部33生成的设备侧图像数据记录到图像数据记录部352中。
摄像系统的动作
接下来,对上述摄像系统1的动作进行说明。
此外,以下,假设已经在摄像装置2和通信设备3之间建立(完成)了基于第1通信和第2通信的各通信连接。此外,主要说明摄像侧图像数据、特征信息和摄影指示的收发,对特性信息、位置信息和动作指示的收发省略说明。此外,将通信设备3设定为通信摄影模式。
以下,作为摄像系统1的动作,依次对摄像装置2的动作和通信设备3的动作进行说明。
摄像装置的动作
图3是示出摄像装置2的动作(本发明的摄像方法)的流程图。
在根据摄像系统1的用户对操作部24的操作而接通摄像装置2的电源(步骤S101:是)时,第1控制部29使第1摄像部25开始摄像(步骤S102:摄像步骤)。将由第1摄像部25生成的摄像侧图像数据(包含时间戳)依次存储到第1存储器部26中。
接下来,通信状态判定部293判定摄像装置2与通信设备3之间的基于第1通信的通信状态是否良好(步骤S103)。
当在步骤S103中判定为基于第1通信的通信状态良好的情况下(步骤S104:是),摄像侧通信控制部292经由摄像侧第1通信部281,利用第1通信将第1存储器部26中存储的最新的摄像图像数据(包含时间戳)发送给通信设备3(步骤S105)。
另一方面,当在步骤S103中判定为基于第1通信的通信状态不良的情况下(步骤S104:否),特征信息生成部291根据第1存储器部26中存储的最新的摄像侧图像数据,生成特征信息,该特征信息表示与该摄像侧图像数据对应的图像中包含的被摄体像的特征的特征信息(步骤S106:特征信息生成步骤)。将由特征信息生成部291生成的特征信息(包含时间戳)存储到第1存储器部26中。
此外,关于特征信息的生成处理(步骤S106)的详细情况,将在后面记述。
接下来,摄像侧通信控制部292经由摄像侧第2通信部282,利用第2通信将第1存储器部26中存储的最新的特征信息(包含时间戳)发送给通信设备3(步骤S107:发送步骤)。
在步骤S105或步骤S107之后,摄像侧通信控制部292判定是否利用第1通信或第2通信从通信设备3接收到摄影指示(步骤S108)。
在判断为没有接收到摄影指示的情况下(步骤S108:否),第1控制部29判断是否存在摄像系统1的用户对操作部24的摄影操作(步骤S109)。
在判断为没有摄影操作的情况下(步骤S109:否),摄像装置2返回到步骤S101。
在判断为接收到摄影指示的情况下(步骤S108:是)、或者在判断为存在摄影操作的情况下(步骤S109:是),第1控制部29使第1摄像部25进行摄像(步骤S110)。
接下来,第1控制部29将通过该摄像而生成的摄像侧图像数据(包含时间戳)记录到第1记录部27中(步骤S111)。
接下来,摄像侧通信控制部292经由摄像侧第1通信部281,利用第1通信将第1记录部27中记录的最新的摄像侧图像数据发送给通信设备3(传输)(步骤S112)。
此处,在由通信状态判定部293判定为基于第1通信的通信状态不良的情况下,在由通信状态判定部293判定为基于第1通信的通信状态良好之后,摄像侧通信控制部292执行步骤S112。
特征信息的生成处理
接下来,对特征信息的生成处理(步骤S106)进行说明。
图4是示出特征信息的生成处理(步骤S106)的流程图。图5A和图5B是用于说明特征信息的生成处理(步骤S106)的图。具体而言,图5A是示出如下方式的一例的图:利用摄像系统1,一边观察通信设备3中的显示部32的画面,一边拍摄被摄体(在图5A中为“两位女性”)。此外,在图5A中,摄像系统1没有使用附件4。图5B是示出在图5A的方式中由摄像装置2拍摄到的图像W101的图。
特征信息生成部291读出第1存储器部26中存储的最新的摄像侧图像数据(步骤S106A)。
接下来,特征信息生成部291利用模式匹配等方法,检测与该读出的最新的摄像侧图像数据对应的图像中包含的人物像(被摄体像)的面部(步骤S106B)。
当在步骤S106B中能够检测出人物像的面部的情况下(步骤S106C:是),特征信息生成部291确定在与摄像图像数据对应的图像(在图5A、图5B的例子中为图像W101)内检测出的面部的“数量(图5A、图5B的例子中为“两个”)”、该图像内的该面部的“位置(坐标值)”和“大小”,生成该确定的面部的“数量”、“位置”和“大小”作为特征信息(步骤S106D)。当然,也可以提取更详细的信息,除了可以提取“面部的朝向”以外,还可以提取与“性别”、“表情”及“姿态”相关的信息而进行特征信息化。当然,也可以进行个人认证。
另一方面,当在步骤S106B中未能检测出人物像的面部的情况下(步骤S106C:否),特征信息生成部291表示生成“在视野区域中没有人。”的特征信息(表示在与图像数据对应的图像中不包含被摄体像的特征的信息)(步骤S106E)。
然后,在步骤S106D或步骤S106E之后,摄像装置2返回到图3所示的主程序。
此外,此处对人的面部进行了记述,但关于面部以外的图像判定,也能够可以应用相同的考虑方法。例如,也可以将能够根据位置及颜色判定是天空还是大海的信息、直线及曲线等对比度变化的状况进行特征信息化。
通信设备的动作
接下来,对通信设备3的动作(本发明的信息报知方法)进行说明。
图6是示出通信设备3的动作的流程图。
在根据摄像系统1的用户对输入部31的操作而接通通信设备3的电源(步骤S201:是)时,设备侧通信控制部371判定是否经由设备侧第1通信部361,利用第1通信而从摄像装置2接收到摄像侧图像数据(包含时间戳)的(步骤S202)。
在判断为接收到摄像侧图像数据(包含时间戳)的情况下(步骤S202:是),设备侧通信控制部371将该接收到的摄像侧图像数据(包含时间戳)存储到第2存储器部34中。然后,显示控制部373使显示部32显示(实时取景显示)与第2存储器部34中存储的最新的摄像侧图像数据对应的实时取景图像(步骤S203)。
接下来,摄像控制部374判断是否存在摄像系统1的用户对输入部31的摄影操作(步骤S204)。
在判断为没有摄影操作的情况下(步骤S204:否),通信设备3返回到步骤S201。
另一方面,在判断为存在摄影操作的情况下(步骤S204:是),摄像控制部374经由设备侧第1通信部361,利用第1通信向摄像装置2发送摄影指示(还包含通过摄影得到的摄像侧图像数据的传输请求)(步骤S205)。然后,通信设备3返回到步骤S201。
在判断为没有接收到摄像侧图像数据的情况下(步骤S202:否),设备侧通信控制部371判定是否经由设备侧第2通信部362,利用第2通信而从摄像装置2接收到特征信息(包含时间戳)(步骤S206)。
在判断为没有接收到特征信息(包含时间戳)的情况下(步骤S206:否),通信设备3返回到步骤S201。
另一方面,在判断为接收到特征信息(包含时间戳)的情况下(步骤S206:是),设备侧通信控制部371将该接收到的特征信息(包含时间戳)存储到第2存储器部34中。然后,特征图像生成部372根据该特征信息,生成表示被摄体像的特征的特征图像(步骤S207)。将由特征图像生成部372生成的特征图像(包含时间戳)存储到第2存储器部34中。
此外,关于特征图像的生成处理(步骤S207)的详细情况,将在后面记述。
接下来,显示控制部373使显示部32显示第2存储器部34中存储的最新的特征图像(步骤S208)。
上述步骤S206~S208相当于本发明的报知步骤。
接下来,摄像控制部374判断是否存在摄像系统1的用户对输入部31的摄影操作(步骤S209)。
在判断为没有摄影操作的情况下(步骤S209:否),通信设备3返回到步骤S201。
另一方面,在判断为存在摄影操作的情况下(步骤S209:是),摄像控制部374经由设备侧第2通信部362,利用第2通信向摄像装置2发送摄影指示(还包含通过摄影得到的摄像侧图像数据的传输请求)(步骤S210)。然后,通信设备3返回到步骤S201。
特征图像的生成处理
接下来,对特征图像的生成处理(步骤S207)进行说明。
图7是示出特征图像的生成处理(步骤S207)的流程图。图8A和图8B是用于说明特征图像的生成处理(步骤S207)的图。具体而言,图8A是示出与图5A和图5B对应地,在图像W101内检测出人物像(被摄体像)的面部的情况下(步骤S106C:是)生成的特征图像W201的图。图8B是示出没有检测出人物像(被摄体像)的面部的情况下(步骤S106C:否)生成的特征图像W202的图。
特征图像生成部372读出第2存储器部34中存储的最新的特征信息(步骤S207A)。
接下来,特征图像生成部372根据该读出的最新的特征信息,判定在摄像装置2的特征信息的生成处理(步骤S106)中是否检测出人物像(被摄体像)的面部(步骤S207B)。
在判断为检测出人物像的面部的情况下(步骤S207B:是),特征图像生成部372,识别特征信息(面部的“数量”、“位置(坐标值)”和“大小”),生成如下特征图像:在指定的位置(坐标值)配置有模仿面部而成的图形,该图形具有指定的面部数量且具有指定的大小(步骤S207C)。
在图8A的例子中,特征图像生成部372采用圆形状的图形F(F1、F2)作为模仿面部而成的图形。而且,在图5A、图5B、图8A的例子中,指定的面部数量为“两个”,因此,特征图像生成部372如图8A所示那样生成特征图像W201,在该特征图像W201中,按指定的大小且指定的位置(坐标值)配置有两个圆形状的图形F1、F2。此处,之所以用图形来表现,是因为在大小、位置及数量等中容易直观地确认,当然,也可以加入性别及表情等信息而进行虚拟形象(avatar)的表现。作为虚拟形象,可以根据个人认证结果进行变化,也可以是由用户自行制作。在该情况下,更容易进行识别,更加享受使摄影更具乐趣。在从发送拍摄到的图像到被显示为止期间,只要不打乱该构图,则虚拟形象可以移动或聊天来拖延时间。由此,用户能够排解烦躁,度过Wi-Fi(注册商标)等的连接等待时间。在该情况下,在图6所示的步骤S208中,可以适当地按时间顺序或逐渐地改变对应虚拟形象而进行显示、或者以动画方式切换多个图像、输出声音、改变文字显示。也可以输出“连接中”等警告或字幕那样的内容。当然,除了图形表现、虚拟形象表现以外,也可以补充文字表现,用声音对其进行再现而进行辅助。如果显示部采用振动、变形那样的结构,则能够通过盲触来判断面部的位置。如上所述,也可以是设为显示判定天空、大海、直线或曲线等而得到的结果。例如,可以显示“水平线位于画面中央”等。也可以添加姿态传感器等的信息而进行一步显示“水平线倾斜”等。
另一方面,在判断为没有检测出人物像的面部的情况下(步骤S207B:否),特征图像生成部372如图8B的例子所示那样生成特征图像W202,该特征图像W202中显示“在视野区域中没有人。”这样的消息M1的文字(表示在与图像数据对应的图像中不包含被摄体像的特征的信息)(步骤S207D)。
然后,在步骤S207C或步骤S207D之后,通信设备3返回到图6所示的主程序。
在以上说明的本实施方式1的摄像系统1中,摄像装置2通过摄像生成摄像侧图像数据,并生成数据量小于该摄像侧图像数据的特征信息,该特征信息表示与该摄像侧图像数据对应的图像中包含的被摄体像的特征。此外,在摄像装置2与通信设备3之间的基于第1通信的通信状态良好的情况下,摄像系统1利用第1通信进行摄像侧图像数据的收发,在基于第1通信的通信状态不良的情况下,利用作为与第1通信不同的通信方式的利用第2通信进行特征信息的收发。然后,在从摄像装置2接收到摄像侧图像数据的情况下,通信设备3显示与该摄像侧图像数据对应的实时取景图像,在从摄像装置2接收到特征信息的情况下,通信设备3根据该特征信息,生成表示被摄体像的特征的特征图像并进行显示。
根据以上说明,即使在基于第1通信的通信状态不良的情况下,借助特征信息的收发和特征图像的显示,摄像系统1的用户通过确认通信设备3使显示部32显示的特征图像,能够掌握摄像装置2的视野区域。即,即使在上述的情况下,也能够利用摄像装置2与通信设备3之间的通信进行摄影,起到实现方便性提高这样的效果。
此外,在本实施方式1中,摄像装置2在与摄像侧图像数据对应的图像内检测出被摄体像的面部,生成该面部的“数量”、“大小”和“位置(坐标值)”作为特征信息。进而,在从摄像装置2接收到该特征信息时,通信设备3生成并显示如下特征图像(在图8A的例子中为特征图像W201):在基于该特征信息的位置配置有模仿被摄体的面部而成的图形,该图形具有基于该特征信息的数量且具有基于该特征信息的大小(在图8A的例子中,为图形F(F1、F2))。
因此,即使在基于第1通信的通信状态不良而不能确认实时取景图像的情况下,摄像系统1的用户通过确认通信设备3使显示部32显示的特征图像(在图8A的例子中为特征图像W201),能够大体设定进行摄影时的构图。因此,进一步实现方便性的提高。
实施方式1的变形例
图9是示出上述实施方式1的变形例的图。具体而言,图9是示出在特征信息的生成处理(步骤S106)中检测出人物像的面部的情况下(步骤S106C:是)生成的特征图像W203的图。
在上述实施方式1中,在步骤S207C中,生成利用图形F来表现人物像的面部的“数量”、“位置”和“大小”的特征图像W201,但是不限于此,如图9所示,也可以生成显示消息M2的文字的特征图像W203。
具体而言,在判断为检测出人物像的面部检测的情况下(步骤S207B:是),特征图像生成部372识别特征信息(面部数量、位置(坐标值)和大小),如图9所示那样生成特征图像W203,该特征图像W203显示“可在画面○○处以大小△△看到□个人。”这样的消息M2的文字。其也可以是通过声音来再现。
这样,在利用消息M2的文字来表现(特征图像W203的显示)摄像装置2的视野区域的情况下,摄像系统1的用户通过确认该特征图像W203,也能够大体地设定进行摄影时的构图。
在上述实施方式1中,特征信息生成部291确定与摄像侧图像数据对应的图像中包含的被摄体像的面部的“数量”、“大小”和“位置”的全部,但是不限于此,也可以确定被摄体像的面部的“数量”、“大小”和“位置”中的至少任意一个,生成该确定出的被摄体像的面部的“数量”、“大小”和“位置”中的至少任意一个作为特征信息。
实施方式2
接下来,对本发明的实施方式2进行说明。
在以下的说明中,针对与上述实施方式1相同的结构和步骤,标注相同标号,省略或简化其详细说明。
相对于在上述实施方式1中说明的摄像系统1(图2),本实施方式2的摄像系统中的特征信息和特征图像的生成处理不同。
以下,对本实施方式2的摄像系统的结构进行说明。
摄像系统的结构
在构成本实施方式2的摄像装置2的第1控制部29(特征信息生成部291))中,相对于在上述实施方式1中说明的第1控制部29(特征信息生成部291),变更了特征信息的生成处理的功能。
在构成本实施方式2的通信设备3的第2控制部37(特征图像生成部372)中,相对于在上述实施方式1中说明的第2控制部37(特征图像生成部372),变更了特征图像的生成处理的功能更。
而且,显示部32、特征图像生成部372和显示控制部373具有作为本发明的报知部的功能。
此外,构成本实施方式2的通信设备3的第2记录部35与在上述实施方式1中说明的第2记录部35的不同之处在于,追加了第2信息记录部353(图2)。
第2信息记录部353记录被摄体像信息(以下记作第2被摄体像信息),该被摄体像信息按多种被摄体像的每一类别而与表示该被摄体像的特征的信息关联起来。
此处,作为被摄体像的类别,例如可例举“人”、“犬”、“猫”和“鸟”等动物、“大厦”等建筑物、“山”、“天空”、“大海”等风景等。此外,作为表示被摄体像的特征的信息,例如可例举“形状”、“颜色”、“移动量(移动速度)”等。
摄像系统的动作
接下来,对本实施方式2的摄像系统1的动作进行说明。
以下,作为摄像系统1的动作,依次对摄像装置2的动作和通信设备3的动作进行说明。
摄像装置的动作
本实施方式2的摄像装置2的动作(本发明的摄像方法)相对于上述实施方式1中说明的摄像装置2的动作(图3、图4),仅特征信息的生成处理(步骤S106)不同。因此,以下,作为摄像装置2的动作,仅对特征信息的生成处理(步骤S106)进行说明。
图10是示出本发明的实施方式2的特征信息的生成处理(步骤S106)的流程图。图11A和图11B是用于说明本发明的实施方式2的特征信息的生成处理(步骤S106)的图。具体而言,图11A是示出如下方式的一例的图:利用摄像系统1,一边观察通信设备3中的显示部32的画面,一边拍摄被摄体(在图11A中为“鸟”)。此外,在图11A中,摄像系统1不使用附件4。图11B是示出在图11A的方式中,由摄像装置2拍摄到的图像W102的图。
特征信息生成部291与上述实施方式1同样地读出第1存储器部26中存储的最新的摄像侧图像数据(步骤S106A)。
接下来,特征信息生成部291确定与该读出的最新的摄像侧图像数据对应的图像中包含的被摄体像(步骤S106F)。
例如,特征信息生成部291通过解析摄像图像数据,计算出所关注的像素与其周围的像素之间的相关性(亮度、色差、色相、明度、饱和度等相关性)。然后,特征信息生成部291根据该相关性,提取出用于决定与摄像图像数据对应的图像中包含的被摄体像的轮廓的特征点,通过提取该特征点,由此确定被摄体像(轮廓)。
在步骤S106F中确定出被摄体像的情况下(步骤S106G:是),特征信息生成部291将在与摄像图像数据对应的图像(在图11A、图11B的例子中为图像W102)内确定出的被摄体像(在图5A、图5B的例子为“鸟”)的“形状”、该图像内的“大小”和“位置(坐标值)”以及“颜色”存储到第1存储器部26中(步骤S106H)。
接下来,特征信息生成部291判断在第1存储器部26中是否存储有(是否存在前次取得的摄像侧图像数据)在步骤S106A中读出的最新的摄像侧图像数据的紧前取得的摄像侧图像数据(在步骤S106F中,被摄体像的确定完成)(步骤S106I)。此外,“紧前”是指在基于时间戳的时刻上的紧前。
在判断为不存在前次取得的摄像侧图像数据的情况下(步骤S106I:否),摄像装置2转入步骤S106N。
另一方面,在判断为存在前次取得的摄像侧图像数据的情况下(步骤S106I:是),特征信息生成部291对最新的摄像侧图像数据(被摄体像)与前次取得的摄像侧图像数据(被摄体像)进行比较(步骤S106J)。
作为在步骤S106J中对各摄像侧图像数据进行比较的结果,在判断为与各摄像侧图像数据对应的图像中包含的被摄体像没有移动的情况下(步骤S106K:否),摄像装置2转入步骤S106N。
另一方面,作为在步骤S106J中对各摄像侧图像数据进行比较的结果,在判断为与各摄像侧图像数据对应的图像中包含的被摄体像发生运动的情况下(步骤S106K:是),特征信息生成部291将该被摄体像的图像内的“移动方向(从与前次取得的摄像侧图像数据对应的图像内的被摄体像的位置朝向与最新的摄像侧图像数据对应的图像内的被摄体像的位置的方向)”和“移动量(和前次取得的摄像侧图像数据对应的图像内的被摄体像的位置(坐标值)与和最新的摄像侧图像数据对应的图像内的被摄体像的位置(坐标值)的坐标间距离(移动速度))”存储到第1存储器部26中(步骤S106L)。
接下来,特征信息生成部291生成在步骤S106H和S106L中存储到第1存储器部26中的被摄体像的“形状”、“大小”、“位置”、“颜色”、“移动方向”和“移动量(移动速度)”作为特征信息(步骤S106M)。
在判断为不存在前次取得的摄像侧图像数据的情况下(步骤S106I:否)、或者在判断为与各摄像侧图像数据对应的图像中包含的被摄体像没有移动的情况下(步骤S106K:否),特征信息生成部291生成在步骤S106H中存储到第1存储器部26中的被摄体像的“形状”、“大小”、“位置”和“颜色”作为特征信息(步骤S106N)。
此外,在由于摄像侧图像数据的对比度较低、或在摄像侧图像数据中不包含被摄体像等而在步骤S106F中不能确定出被摄体像的情况下(步骤S106G:否),特征信息生成部291生成表示“不能确定出被摄体像”的特征信息(步骤S106O)。
然后,在步骤S106M、步骤S106N、或步骤S106O之后,摄像装置2返回到图3所示的主程序。
通信设备的动作
接下来,对本实施方式2的通信设备3的动作(本发明的信息报知方法)进行说明。
本实施方式2的通信设备3的动作相对于在上述实施方式1中说明的通信设备3的动作(图6、图7),仅特征图像的生成处理(步骤S207)不同。因此,以下,作为通信设备3的动作,仅对特征图像的生成处理(步骤S207)进行说明。
图12是示出本发明的实施方式2的特征图像的生成处理(步骤S207)的流程图。图13A和图13B是用于说明本发明的实施方式2的特征图像的生成处理(步骤S207)的图。具体而言,图13A是示出与图11A和图11B对应地,在图像W102内确定出被摄体像的情况下(步骤S106G:是)生成的特征图像W204的图。图13B是示出没有确定出被摄体像的情况下(步骤S106G:否)生成的特征图像W205的图。
特征图像生成部372与上述实施方式1同样地读出第2存储器部34中存储的最新的特征信息(步骤S207A)。
接下来,特征图像生成部372根据该读出的最新的特征信息,判断是否在摄像装置2的特征信息的生成处理(步骤S106)中确定出被摄体像(步骤S207E)。
在判断为确定出被摄体像的情况下(步骤S207E:是),特征图像生成部372参照第2信息记录部353中记录的第2被摄体像信息,并估计与特征信息匹配的被摄体像(类别)(步骤S207F)。
此处,在特征信息为被摄体像的“形状”、“大小”、“位置”和“颜色”的情况下,特征图像生成部372参照第2被摄体像信息,并估计与基于该特征信息的被摄体像的“形状”和“颜色”匹配的被摄体像(类别)。此外,在特征信息为被摄体像的“形状”、“大小”、“位置”、“颜色”、“移动方向”和“移动量(移动速度)”的情况下,特征图像生成部372参照第2被摄体像信息,并估计与基于该特征信息的被摄体像的“形状”、“颜色”和“移动量(移动速度)”匹配的被摄体像(类别)。
当在步骤S207F中能够估计出被摄体像(类别)的情况下(步骤S207G:是),特征图像生成部372生成表示该估计出的被摄体像的类别和特征信息的文字作为特征图像(步骤S207H)。
在图13A的例子中,特征图像生成部372生成特征图像W204,该特征图像W204显示内嵌有针对“被摄体像的类别”、“大小”、“位置”、“颜色”、“移动方向”和“移动量”的项目而估计出的被摄体像的类别(在图11A、图11B、图13A的例子中为“鸟”)及特征信息的文字信息L。当然,也可以是虚拟形象等图像表现。在上述实施方式1的情况下也相同,关于虚拟形象信息等,只要信息设备将其记录到第2记录部35等中即可,可以下载或自行制作。
当在第2被摄体像信息中不存在与特征信息匹配的被摄体像(类别)而在步骤S207F中不能估计出被摄体像(类别)的情况下(步骤S207G:否),特征图像生成部372生成表示特征信息的文字作为特征图像(步骤S207I)。
例如,特征图像生成部372生成在图13A所示的特征图像W204中没有“被摄体像的类别”项目的特征图像。
在判断为没有确定出被摄体像的情况下(步骤S207E:否),特征图像生成部372可以如图13B的例子所示那样生成特征图像W205,该特征图像W205显示“在视野区域中不存在能够确定的被摄体像”的消息M3的文字(步骤S207J)。
然后,在步骤S207H、步骤S207I或步骤S207J之后,通信设备3返回到图6所示的主程序。
根据以上说明的本实施方式2,除了具有与上述实施方式1相同的效果以外,还具有如下效果。
在本实施方式2中,摄像装置2确定与摄像侧图像数据对应的图像中包含的被摄体像的“形状”、“大小”、“颜色”、“位置”、“移动方向”和“移动量(移动速度)”,生成该确定出的被摄体像的“形状”、“大小”、“颜色”、“位置”、“移动方向”和“移动量(移动速度)”作为特征信息。然后,在从摄像装置2接收该特征信息时,通信设备3根据该特征信息和第2被摄体像信息,估计被摄体像的类别,生成包含该估计出的被摄体像的类别的特征图像(在图13A的例子中为特征图像W204)并进行显示。
因此,即使在基于第1通信的通信状态不良而不能确认实时取景图像的情况下,摄像系统1的用户通过确认通信设备3使显示部32显示的特征图像(在图13A的例子中为特征图像W204),也能够掌握自己希望摄影的被摄体像(图11A、图11B的例子为“鸟”)是否进入摄像装置2的视野区域。此外,摄像系统1的用户除了能够确认被摄体像的类别以外,还确认确认包含被摄体像的“大小”及“位置”等的特征图像(在图13A的例子中为特征图像W204),由此,能够大体地设定进行摄影时的构图。因此,进一步实现方便性的提高。
实施方式2的变形例
在上述实施方式2中,摄像装置2构成为在步骤S107中仅将特征信息发送给通信设备3,但是不限于此,除了可以发送特征信息以外,还可以构成为发送如下附加信息。
作为附加信息,可以例示出如下距离信息:在摄像装置2中设置距离传感器,与由该距离传感器测定出的从摄像装置2到被摄体的距离相关的距离信息。此外,关于从摄像装置2到被摄体的距离的测定方法,不限于利用距离传感器进行测定的方法,也可以采用根据摄像侧图像数据计算该距离的方法。此外,作为附加信息,可以例示出如下仰角信息:在摄像装置2中设置方位角传感器,与由该方位角传感器测定出的从摄像装置2朝向被摄体的仰角相关的仰角信息。此外,作为附加信息,可以例示出如下当前位置信息:在摄像装置2中设置当前位置取得部,该当前位置取得部利用GPS(Global Positioning System:全球定位系统)取得该摄像装置2的当前位置,与该当前位置取得部取得的摄像装置2的当前位置相关的当前位置信息。此外,作为附加信息,可以例示出如下日期时间信息:在摄像装置2中设置实时时钟等,与从该实时时钟等提供的当前的日期时间相关的日期时间信息。
而且,在步骤S207F中,通信设备3除了可以根据特征信息以外,还可以根据上述附加信息来估计被摄体像(类别)。
在上述实施方式2中,特征信息生成部291在步骤S106F~S106H中确定与摄像侧画数据对应的图像中包含的被摄体像的“形状”、“大小”、“位置”和“颜色”的全部,但是不限于此,也可以构成为确定被摄体像的“形状”、“大小”、“位置”和“颜色”中的至少任意一个,将该确定出的被摄体像的“形状”、“大小”、“位置”和“颜色”中的至少任意一个存储到第1存储器部26中。此外,特征信息生成部291在步骤S106J~S106L中,确定与最新的摄像侧图像数据和前次取得的摄像侧图像数据对应的各图像中包含的被摄体像的“移动方向”和“移动量”的全部,但是不限于此,也可以构成为确定被摄体像的“移动方向”和“移动量”中的至少任意一个,将该确定出的被摄体像的“移动方向”和“移动量”中的至少任意一个存储到第1存储器部26中。
实施方式3
接下来,对本发明的实施方式3进行说明。
在以下的说明中,针对与上述实施方式1、2相同的结构和步骤,标注相同标号,省略或简化其详细说明。
本实施方式3的摄像系统相对于在上述实施方式1中说明的摄像系统1(图2),特征信息和特征图像的生成处理不同。
以下,对本实施方式3的摄像系统的结构进行说明。
摄像系统的结构
在构成本实施方式3的摄像装置2的第1控制部29(特征信息生成部291)中,相对于在上述实施方式1中说明的第1控制部29(特征信息生成部291),变更了特征信息的生成处理的功能。
此外,在构成本实施方式3的摄像装置2的第1记录部27中,追加了与在上述实施方式1中说明的第1记录部27不同的第1信息记录部271(图2)。
第1信息记录部271记录如下的被摄体像信息(以下记作第1被摄体像信息),该被摄体像信息与在上述实施方式2中说明的第2信息记录部353中记录的被摄体像信息(第2被摄体像信息)相同。
在构成本实施方式3的通信设备3的第2控制部37(特征图像生成部372)中,相对于在上述实施方式1中说明的第2控制部37(特征图像生成部372),变更了特征图像的生成处理的功能。
而且,显示部32、特征图像生成部372和显示控制部373具有作为本发明的报知部的功能。
摄像系统的动作
接下来,对本实施方式3的摄像系统1的动作进行说明。
以下,作为摄像系统1的动作,依次对摄像装置2的动作和通信设备3的动作进行说明。
摄像装置的动作
本实施方式3的摄像装置2的动作(本发明的摄像方法)相对于在上述实施方式1中说明的摄像装置2的动作(图3、图4),仅特征信息的生成处理(步骤S106)不同。因此,以下,作为摄像装置2的动作,仅对特征信息的生成处理(步骤S106)进行说明。
图14是示出本发明的实施方式3的特征信息的生成处理(步骤S106)的流程图。
如图14所示,本实施方式3的特征信息的生成处理相对于在上述实施方式2中说明的特征信息的生成处理(图10),在将步骤S106M、S106N变更为步骤S106P~S106T这点上不同。因此,以下,仅对步骤S106P~S106T进行说明。
步骤S106P在步骤S106L之后被执行。
具体而言,特征信息生成部291与在上述实施方式2中说明的步骤S207F同样地参照第1信息记录部271中记录的第1被摄体像信息,并估计与在步骤S106H和步骤S106L中存储到第1存储器部26中的被摄体像的“形状”、“大小”、“位置”、“颜色”、“移动方向”和“移动量(移动速度)”匹配的被摄体像(类别)(步骤S106P)。
在判断为不存在前次取得的摄像侧图像数据的情况下(步骤S106I:否)、或在判断为与各摄像侧图像数据对应的图像中包含的被摄体像没有移动的情况下(步骤S106K:否)执行步骤S106Q。
具体而言,特征信息生成部291与在上述实施方式2中说明的步骤S207F同样地参照第1信息记录部271中记录的第1被摄体像信息,估计与在步骤S106H中存储到第1存储器部26中的被摄体像的“形状”、“大小”、“位置”和“颜色”匹配的被摄体像(类别)(步骤S106Q)。
当在步骤S106P或步骤S106Q中能够估计出被摄体像(类别)的情况下(步骤S106R:是),特征信息生成部291生成该估计出的被摄体像的类别和第1存储器部26中已存储的信息作为特征信息(步骤S106S)。
另一方面,当在步骤S106P或步骤S106Q中不能估计出被摄体像(类别)的情况下(步骤S106R:否),特征信息生成部291仅生成第1存储器部26中已存储的信息作为特征信息(步骤S106T)。
此外,关于上述第1存储器部26中已存储的信息,在步骤S106P中尝试估计被摄体像(类别)情况与在步骤S106Q中尝试估计被摄体像(类别)情况不同。
即,当在步骤S106P中尝试估计被摄体像(类别)的情况下,上述信息为在步骤S106H和步骤S106L中存储到第1存储器部26中的被摄体像的“形状”、“大小”、“位置”、“颜色”、“移动方向”和“移动量(移动速度)”。另一方面,当在步骤S106Q中尝试估计被摄体像(类别)的情况下,上述信息为在步骤S106H中存储到第1存储器部26中的被摄体像的“形状”、“大小”、“位置”和“颜色”。
然后,在步骤S106S、步骤106T或步骤S106O之后,摄像装置2返回到图3所示的主程序。
通信设备的动作
接下来,对本实施方式3的通信设备3的动作(本发明的信息报知方法)进行说明。
本实施方式3的通信设备3的动作相对于在上述实施方式1中说明的通信设备3的动作(图6、图7),仅特征图像的生成处理(步骤S207)不同。因此,以下,作为通信设备3的动作,仅对特征图像的生成处理(步骤S207)进行说明。
图15是示出本发明的实施方式3的特征图像的生成处理(步骤S207)的流程图。
如图15所示,本实施方式3的特征图像的生成处理相对于上述实施方式2中说明的特征图像的生成处理(图12),在将步骤S207F~S207I变更为步骤S207K这点上不同。因此,以下,仅对步骤S207K进行说明。
在判断为确定出被摄体像的情况下(步骤S207E:是),执行步骤S207K。
具体而言,特征图像生成部372与图13A所示的特征图像W204同样地,生成显示基于特征信息的文字信息L的特征图像(步骤S207K)。
然后,在步骤S207K或步骤S207J之后,通信设备3返回到图6所示的主程序。
即使在如以上说明的本实施方式3那样在摄像装置2侧进行被摄体像(类别)的估计的情况下,也能够得到与上述实施方式2相同的效果。
实施方式3的变形例
在上述实施方式3中,摄像装置2构成为在步骤S106P、S106Q中,根据被摄体像的“形状”等信息来估计被摄体像(类别),但是不限于此,除了可以根据该信息以外,还可以根据以下的附加信息来估计被摄体像(类别)。
作为附加信息,可以例示出如下距离信息:在摄像装置2中设置距离传感器,与由该距离传感器测定出的从摄像装置2到被摄体的距离相关的距离信息。此外,关于从摄像装置2到被摄体的距离的测定方法,不限于利用距离传感器进行测定的方法,也可以采用根据摄像侧图像数据计算该距离的方法。此外,作为附加信息,可以例示出如下仰角信息:在摄像装置2中设置方位角传感器,与由该方位角传感器测定出的从摄像装置2朝向被摄体的仰角相关的仰角信息。此外,作为附加信息,可以例示出如下当前位置信息:在摄像装置2中设置当前位置取得部,该当前位置取得部利用GPS(Global Positioning System:全球定位系统)取得该摄像装置2的当前位置,与该当前位置取得部取得的摄像装置2的当前位置相关的当前位置信息。此外,作为附加信息,可以例示出如下日期时间信息:在摄像装置2中设置实时时钟等,与从该实时时钟等提供的当前的日期时间相关的日期时间信息。
实施方式4
接下来,对本发明的实施方式4进行说明。
在以下的说明中,针对与上述实施方式1相同的结构和步骤,标注相同标号,省略或简化其详细说明。
本实施方式4的摄像系统相对于在上述实施方式1中说明的摄像系统1(图2),特征信息的生成处理和基于该特征信息的图像的显示处理不同。
以下,对本实施方式4的摄像系统的结构进行说明。
摄像系统的结构
在构成本实施方式4的摄像装置2的第1控制部29(特征信息生成部291)中,相对于在上述实施方式1中说明的第1控制部29(特征信息生成部291),变更了特征信息的生成处理的功能。
在构成本实施方式4的通信设备3的第2控制部37中,针对上述实施方式1中说明的第2控制部37(图2)省略了特征图像生成部372。伴随该特征图像生成部372的省略,在第2控制部37(显示控制部372)中,相对于在上述实施方式1中说明的第2控制部37,变更了基于特征信息的图像的显示处理的功能。
而且,显示部32和显示控制部373具有作为本发明的报知部的功能。
摄像系统的动作
接下来,对本实施方式4的摄像系统1的动作进行说明。
以下,作为摄像系统1的动作,依次对摄像装置2的动作和通信设备3的动作进行说明。
摄像装置的动作
本实施方式4的摄像装置2的动作(本发明的摄像方法)相对于在上述实施方式1中说明的摄像装置2的动作(图3、图4),仅特征信息的生成处理(步骤S106)不同。因此,以下,作为摄像装置2的动作,仅对特征信息的生成处理(步骤S106)进行说明。
图16是示出本发明的实施方式4的特征信息的生成处理(步骤S106)的流程图。
特征信息生成部291与上述实施方式1同样地读出第1存储器部26中存储的最新的摄像侧图像数据(步骤S106A)。
接下来,特征信息生成部291实施使该读出的最新的摄像侧图像数据的图像尺寸缩小的缩放(resize)处理(步骤S106U),生成实施该缩放处理之后的缩放图像数据作为特征信息(步骤S106V)。
然后,在步骤S106V之后,摄像装置2返回到图3所示的主程序。
通信设备的动作
接下来,对本实施方式4的通信设备3的动作(本发明的信息报知方法)进行说明。
图17是示出本发明的实施方式4的通信设备3的动作的流程图。
如图17所示,本实施方式4的通信设备3的动作相对于在上述实施方式1中说明的通信设备3的动作(图6、图7),仅在省略特征图像的生成处理(步骤S207)这点上以及在将步骤S206、S208变更为步骤S211、S212这点上不同。因此,以下,作为通信设备3的动作,仅对步骤S211、S212进行说明。
在判断为没有接收到摄像侧图像数据的情况下(步骤S202:否),执行步骤S211。
具体而言,设备侧通信控制部371判定是否经由设备侧第2通信部362,利用第2通信而从摄像装置2接收到作为特征信息的缩放图像数据(包含时间戳)(步骤S211)。
在判断为没有接收到缩放图像数据(包含时间戳)的情况下(步骤S211:否),通信设备3返回到步骤S201。
另一方面,在判断为接收到缩放图像数据(包含时间戳)的情况下(步骤S211:是),设备侧通信控制部371将该接收到的缩放图像数据(包含时间戳)存储到第2存储器部34中。然后,显示控制部373读出第2存储器部34中存储的最新的缩放图像数据,使显示部32显示与该缩放图像数据对应的图像(步骤S212)。
然后,步骤S212之后,通信设备3转入步骤S209。
上述步骤S211、S212相当于本发明的报知步骤。
根据以上说明的本实施方式4,除了具有与上述实施方式1相同的效果以外,还具有如下效果。
在本实施方式4的摄像系统1中,摄像装置2对摄像侧图像数据实施缩放处理,生成实施该缩放处理之后的缩放图像数据作为特征信息。然后,在从摄像装置2接收到该特征信息(缩放图像数据)时,通信设备3显示与该缩放图像数据对应的图像。
如上所述,能够利用单纯的图像处理生成特征信息,此外,不需要对特征信息进行解析等来生成特征图像,因此,既能够实现摄像系统1的结构的简化,又能够能够享受与上述实施方式1相同的效果。
实施方式5
接下来,对本发明的实施方式5进行说明。
在以下的说明中,针对与上述实施方式1相同的结构和步骤,标注相同标号,省略或简化其详细说明。
本实施方式5的摄像系统相对于在上述实施方式1中说明的摄像系统1(图2),特征信息的生成处理和基于该特征信息的图像的显示处理不同。
以下,对本实施方式5的摄像系统的结构进行说明。
摄像系统的结构
在构成本实施方式5的摄像装置2的第1控制部29(特征信息生成部291)中,相对于在上述实施方式1中说明的第1控制部29(特征信息生成部291),变更了特征信息的生成处理的功能。
构成本实施方式5的通信设备3的第2控制部37相对于在上述实施方式1中说明的第2控制部37(图2),省略了特征图像生成部372。伴随该特征图像生成部372的省略,在第2控制部37(显示控制部373)中,相对于在上述实施方式1中说明的第2控制部37(显示控制部373),变更了基于特征信息的图像的显示处理的功能。
而且,显示部32和显示控制部373具有作为本发明的报知部的功能。
摄像系统的动作
接下来,对本实施方式5的摄像系统1的动作进行说明。
以下,作为摄像系统1的动作,依次对摄像装置2的动作和通信设备3的动作进行说明。
摄像装置的动作
本实施方式5的摄像装置2的动作(本发明的摄像方法)相对于在上述实施方式1中说明的摄像装置2的动作(图3、图4),仅特征信息的生成处理(步骤S106)不同。因此,以下,作为摄像装置2的动作,仅对特征信息的生成处理(步骤S106)进行说明。
图18是示出本发明的实施方式5的特征信息的生成处理(步骤S106)的流程图。
特征信息生成部291与上述实施方式1同样地读出第1存储器部26中存储的最新的摄像侧图像数据(步骤S106A)。
接下来,特征信息生成部291对该读出的最新的摄像侧图像数据的各像素值进行二值化(步骤S106W),生成该二值化之后的二值化图像数据作为特征信息(步骤S106X)。
然后,在步骤S106X之后,摄像装置2返回到图3所示的主程序。
通信设备的动作
接下来,对本实施方式5的通信设备3的动作(本发明的信息报知方法)进行说明。
图19是示出本发明的实施方式5的通信设备3的动作的流程图。
如图19所示,本实施方式5的通信设备3的动作相对于在上述实施方式1中说明的通信设备3的动作(图6、图7),仅在省略了特征图像的生成处理(步骤S207)这点上以及将步骤S206、S208变更为步骤S213、S214这点上不同。因此,以下,作为通信设备3的动作,仅对步骤S213、S214进行说明。
在判断为没有接收到摄像侧图像数据的情况下(步骤S202:否),执行步骤S213。
具体而言,设备侧通信控制部371判定是否经由设备侧第2通信部362,利用第2通信而从摄像装置2接收到作为特征信息的二值化数据(包含时间戳)的(步骤S213)。
在判断为没有接收到二值化图像数据(包含时间戳)的情况下(步骤S213:否),通信设备3返回到步骤S201。
另一方面,在判断为接收到二值化图像数据(包含时间戳)的情况下(步骤S213:是),设备侧通信控制部371将该接收到的二值化图像数据(包含时间戳)存储到第2存储器部34中。然后,显示控制部373读出第2存储器部34中存储的最新的二值化图像数据,使显示部32显示与该二值化图像数据对应的图像(步骤S214)。
然后,在步骤S214之后,通信设备3转入步骤S209。
上述步骤S213、S214相当于本发明的报知步骤。
根据以上说明的本实施方式5,除了具有与上述实施方式1相同的效果以外,还具有如下效果。
在本实施方式5的摄像系统1中,摄像装置2对摄像侧图像数据的各像素值进行二值化,生成该二值化之后的二值化图像数据作为特征信息。然后,通信设备3在从摄像装置2接收到该特征信息(二值化图像数据)时,显示与该二值化图像数据对应的图像。
如上所述,能够利用单纯的图像处理生成特征信息,不需要对特征信息进行解析等来生成特征图像,因此,既能够实现摄像系统1的结构的简洁化,又能够能够得到与上述实施方式1相同的效果。
其它实施方式
到此为止,对本具体实施方式进行了说明,但本发明不应仅限于上述实施方式1~5。
在上述实施方式1~5中,作为摄像装置2,例示了整体形状为与所谓交换可更换镜头的整体形状大致相同的镜头型照相机,但是不限于此,也可以由通常的数字照相机(无论有无显示部)构成。
在上述实施方式1~5中,构成为在基于第1通信的通信状态不良的情况下,利用第2通信发送特征信息(步骤S107),但是不限于此,由于特征信息的数据量小于摄像侧图像数据,因此,也可以利用第1通信发送特征信息。此外,也可以构成为,无论基于第1通信的通信状态是否良好,始终利用第1通信发送特征信息。在该情况下,在摄像系统1中,可以省略进行第2通信的通信接口。
在上述实施方式1~5中,在基于第1通信的通信状态不良的情况下,进行特征信息的生成(步骤S106)和发送(步骤S107),但是不限于此。例如,也可以构成为,在通信状态判定部293中判定是否建立基于第1通信的通信连接,在没有建立(完成)基于第1通信的通信连接的情况下,建立基于第2通信的通信连接,执行步骤S106和步骤S107。
在上述实施方式1~5中,通信设备3根据特征信息,生成特征图像并显示,但是不限于此,也可以构成为,根据特征信息,报知表示被摄体像的特征的声音。
也可以变更、组合在上述实施方式1~5中说明的结构。例如,也可以构成为,组合在实施方式1中说明的结构与在实施方式4中说明的结构,摄像装置生成被摄体像的面部的“数量”、“大小”和“位置”和缩放图像数据作为特征信息并进行发送。此时,通信设备显示与表示上述被摄体像的面部的“数量”、“大小”和“位置”的特征图像及缩放图像数据对应的图像。
此外,处理流程不限于在上述实施方式1~5中说明的流程图中的处理顺序,在不产生矛盾范围内可以进行变更。
此外,在本说明书中,使用流程图说明的处理的算法可以记述为程序。这样的程序可以记录在计算机内部的记录部中,也可以记录在计算机可读取的记录介质中。关于程序对记录部或记录介质的记录,可以在将计算机或记录介质作为产品提供时进行,也可以利用经由通信网络的下载进行。