CN113099118B - 摄像装置以及图像处理方法 - Google Patents

摄像装置以及图像处理方法 Download PDF

Info

Publication number
CN113099118B
CN113099118B CN202110381252.3A CN202110381252A CN113099118B CN 113099118 B CN113099118 B CN 113099118B CN 202110381252 A CN202110381252 A CN 202110381252A CN 113099118 B CN113099118 B CN 113099118B
Authority
CN
China
Prior art keywords
image data
image
person
unit
composition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110381252.3A
Other languages
English (en)
Other versions
CN113099118A (zh
Inventor
平林正幸
桥本康宣
清水宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maxell Ltd filed Critical Maxell Ltd
Priority to CN202110381252.3A priority Critical patent/CN113099118B/zh
Publication of CN113099118A publication Critical patent/CN113099118A/zh
Application granted granted Critical
Publication of CN113099118B publication Critical patent/CN113099118B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure

Abstract

提供一种摄像装置以及图像处理方法。摄像装置具备:摄像处理部,对被摄体进行摄像而生成图像数据;面部识别处理部,执行图像数据的面部识别处理;存储设备部,记录图像数据;及合成处理部,以使在多个图像数据的各个图像数据中被摄像的人物包含于一个图像数据的方式执行合成处理,生成合成数据。面部识别处理部对第一图像数据执行面部识别处理而识别第一人物。在存储设备部记录有在与第一图像数据的拍摄定时不同的任意拍摄定时被拍摄、并具有与第一图像数据的背景相同的背景、且拍摄有与第一人物不同的第二人物的第二图像数据的情况下合成处理部使用第一图像数据及第二图像数据生成在相同的背景上重叠有第一人物及第二人物的合成数据。

Description

摄像装置以及图像处理方法
本申请是申请号为201580079346.8(PCT/JP2015/068535)、申请日为2015年6月26日(递交日为2017年10月27日)、发明名称为“摄像装置以及图像处理方法”的发明专利申请的分案申请。
技术领域
本发明涉及摄像装置以及图像处理方法,特别涉及对摄像有多个人的图像数据进行合成的技术。
背景技术
作为本技术领域的背景技术,在专利文献1中,将“能够容易地对包括拍摄者的多个人的集体照进行拍摄”为课题,作为其解决手段,公开了“在数码相机中,在刚刚指示合成拍摄模式之后,由一名拍摄者拍摄其他被拍摄者(多个)的拍摄图像a。接下来,将数码相机交给某个其他被拍摄者,拍摄先前的拍摄者一名的拍摄图像b。另外,在预定的合成条件例如在一方的拍摄图像内有预定尺寸以上的多个面部、且在另一方的拍摄图像内有一个预定尺寸以上的面部的情况下、在两个拍摄图像a、b各自检测出的面部的人物结构不同的情况下,制作新的合成图像c,该新的合成图像c是将在连续拍摄的两张拍摄图像a、b中的某一方所包含的面部图像合成到另一方而得到的。由此,容易地合成拍摄有全部多个人的集体照”。
现有技术文献
专利文献1:美国专利申请公开第2012/120273号说明书(摘要)
发明内容
在上述专利文献1中,在刚刚指示合成拍摄模式之后连续拍摄拍摄图像a、b(以下称为“一连串的拍摄”)时,根据它们制作合成图像c。但是,例如在一连串的拍摄中出现其它快门时机的情况下,在一连串的拍摄结束以前无法拍摄其它图像,所以可能会错过快门时机,而且在一方的照片不满意的情况下需要从最初重新拍摄,所以生成合成照片时的操作性存在进一步改善的余地。
本发明是鉴于上述实际情况而完成的,其目的在于提供一种提高在容易地生成包括多个人的全员的照片时的操作性的摄像装置以及图像处理方法。
作为用于解决所述课题的手段,使用权利要求书记载的技术。若举出一个例子,则在一种摄像装置中具备:摄像处理部,对被摄体进行摄像而生成图像数据;面部识别处理部,执行所述图像数据的面部识别处理;图像记录部,记录所述图像数据;以及合成处理部,以使在多个图像数据的各个图像数据中被摄像的人物包含于一个图像数据的方式执行合成处理,生成合成数据,所述面部识别处理部针对第一图像数据执行所述面部识别处理来识别第一人物的面部,在所述图像记录部中记录有在与所述第一图像数据的拍摄定时不同的任意拍摄定时被拍摄、并且具有与所述第一图像数据的背景相同的背景、且摄像有与所述第一人物不同的第二人物的第二图像数据的情况下,所述合成处理部使用所述第一图像数据以及所述第二图像数据来生成在所述相同的背景上重叠有所述第一人物以及所述第二人物的所述合成数据。
根据本发明,能够提供一种提高在容易地生成包括多个人的全员的照片时的操作性的摄像装置以及图像处理方法。上述以外的课题、结构以及效果通过以下实施方式的说明将更加明确。
附图说明
图1A是示出第一实施方式的摄像装置的结构例的框图。
图1B是示出第一实施方式的摄像装置的软件结构图的图。
图2A是第一实施方式的摄像装置的前视图。
图2B是第一实施方式的摄像装置的后视图。
图3是示出第一实施方式的摄像装置的整体的动作例的流程图。
图4是示出第一实施方式的摄像装置的其它动作例(自动合成模式)的流程图。
图5是示出第一实施方式的合成处理部的动作例的流程图。
图6A是示出第一实施方式的摄像装置刚刚拍摄后的显示部的显示例的图。
图6B是示出第一实施方式的由摄像装置合成的图像数据的显示例的图。
图7A是示出第一实施方式的是否记录由摄像装置合成的图像数据的选择画面的显示例的图。
图7B是示出第一实施方式的未能由摄像装置合成图像的情况下的显示例的图。
图8是示出第一实施方式的是否显示由摄像装置与其它图像合成而得到的图像数据的选择画面的显示例的图。
图9是示出第一实施方式的图像数据的检索和合成的一个例子的说明图。
图10是示出第一实施方式的图像数据的检索和合成的一个例子的说明图。
图11是示出第二实施方式的摄像装置的整体的动作例的流程图。
图12是示出第二实施方式的合成处理部的动作例的流程图。
图13A是示出第二实施方式的在摄像装置中再现按钮被按压的情况下的显示部的显示例的图。
图13B是示出第二实施方式的在摄像装置中被变更为其它图像数据的情况下的显示部的显示例的图。
图14A是示出第二实施方式的在摄像装置中合成按钮被按压的情况下的显示部的显示例的图。
图14B是示出第二实施方式的在摄像装置中被变更为其它图像数据的情况下的显示部的显示例的图。
图15是示出第二实施方式的图像数据的检索和合成的一个例子的说明图。
图16是示出第三实施方式的摄像装置的整体的动作例的流程图。
图17是示出第三实施方式的合成处理部的动作例的流程图。
图18A是示出第三实施方式的在摄像装置中刚刚拍摄后或者再现按钮被按压的情况下的显示部的显示例的图。
图18B是示出第三实施方式的由摄像装置合成的图像数据的显示例的图。
图19是示出第三实施方式的图像数据的检索和合成的一个例子的说明图。
图20A是示出第四实施方式的摄像装置的结构例的框图。
图20B是示出第四实施方式的摄像装置的软件结构图的图。
图21是示出第四实施方式的合成处理部的动作例的流程图。
图22是示出第四实施方式的图像数据的检索和合成的一个例子的说明图。
(符号说明)
1:摄像装置;101:主控制部;102:ROM;103:RAM;104:存储设备部;106:外部记录介质;110:摄像部;115:GPS接收部;120:无线通信部;1022:位置信息获取部;1023:摄像处理部;1024:图像记录部;1025:图像再现部;1027:合成处理部;1028:面部识别处理部。
具体实施方式
以下,使用附图说明本发明的实施方式。在全部附图中,对同一结构附加同一符号而省略其重复说明。在以下的实施方式中,以本发明的摄像装置为例进行说明。
<第一实施方式>
第一实施方式是如下实施方式:通过手动合成模式(由用户指示合成之后进行合成的动作模式)或者自动合成模式(摄像装置自动地进行合成的动作模式),对显示中的图像数据和摄像装置选择出的图像数据进行合成。
[摄像装置的硬件结构]
图1A是示出本发明的第一实施方式的摄像装置的结构例的框图。
在图1A中,主控制部101由CPU(Central Processing Unit,中央处理单元)等构成,依照在ROM(Read Only Memory,只读存储器)102或者RAM(Random Access Memory,随机存取存储器)103中存储的各种动作程序以及数据,控制摄像装置1的整体。系统总线100是用于在控制部101与摄像装置1中的各部分之间进行数据发送接收的数据通信路。
ROM102是储存有用于控制摄像装置1的各种程序的存储器,例如使用如EEPROM(Electrically Erasable Programmable ROM,电可擦除可编程ROM)、闪存ROM那样的可改写的ROM。
RAM103被用作在ROM102中存储的程序执行时的临时存储区域或者拍摄到的图像的临时存储。
存储设备部104(与图像记录部相当)存储摄像装置1的动作设定值等信息,例如使用如闪存ROM、SSD(Solid State Drive,固态硬盘)那样的非易失性且可改写的设备。
ROM102以及RAM103也可以与主控制部101一体地构成。另外,ROM102也可以并非如图1A所示的独立结构,而设为使用存储设备部104中的一部分存储区域。
外部存储介质接口(I/F)105是用于对如SD卡那样的可收纳、取出于摄像装置1的外部记录介质106记录/读出信息的接口。
外部接口107是用于扩展摄像装置1的功能的接口群,在本实施方式中,具有USB(Universal Serial Bus,通用串行总线)接口(I/F)107a、影像输出接口(I/F)107b、声音输出接口(I/F)107c。USB接口107a能够与个人电脑或者电视接收装置等外部装置的USB接口连接,由外部装置对在存储设备部104或者外部记录介质106中保存的图像数据等进行读入、显示等。影像输出接口107b以及声音输出接口107c对外部影像/声音输出设备进行影像信号/声音信号的输出。在此,影像输出接口107b、声音输出接口107c也可以使用HDMI(High-Definition Multimedia Interface,高清晰多媒体接口:注册商标)将影像和声音一起输出。
声音输入部108由将摄像装置1周边的声音变换为电信号的麦克风、以及将变换为电信号的声音变换为数字信号的声音数据的A/D变换器等构成。
声音信号处理部109对从声音输入部输入的声音数据进行滤波处理、依照在外部记录介质106中记录的动态图像的格式而变换声音数据的处理等。
摄像部110具备:包括用于缩放、聚焦动作的镜头的光学系统;为了缩放、聚焦动作而驱动上述镜头的机构系统;以及将从镜头输入的被摄体的光图像变换为电信号的CCD或者CMOS等图像传感器和将变换为电信号的图像变换为数字信号的图像数据的A/D变换器等电系统的设备。
图像信号处理部111对从摄像部110输入的图像数据进行白平衡调整、曝光调整、伽玛校正等图像处理。另外,依照在外部记录介质106中记录的格式,例如进行在动态图像的情况下变换为MPEG2或者H.264等的图像数据、在静止图像的情况下变换为JPEG、TIFF等的图像数据的处理等。另外,进行在存储设备部104或者外部记录介质106中存储的图像数据的合成处理、面部识别处理、模式匹配处理等。
显示部112显示由摄像部110的图像传感器所摄像的被摄体的图像、在存储设备部104或者外部记录介质106中记录的图像、或者用于进行摄像装置1的各种设定的画面等。
操作部113是对摄像装置1进行操作指示的输入的指示输入部,具有电源接通/断开按钮、快门按钮、再现按钮、合成按钮、用于进行各种设定的按钮等。另外,也可以在显示部112的表面设置触摸面板,通过检测显示于显示部112的按钮等的位置和接触到触摸面板的位置,对摄像装置1进行操作指示的输入。
计时部114例如使用RTC(Real Time Clock,实时时钟)电路来测量从用户设定的日期时间/时刻起的经过时间并输出日期时间/时刻信息,根据从计时部114获取到的日期时间/时刻信息对图像数据附加日期时间/时刻信息来进行记录。
GPS接收部115接收来自多个GPS卫星的电波,能够根据接收到的信号来获取摄像装置1的位置(纬度、经度等)信息。该位置信息也附加到图像数据而记录。
电源部116包括电池(未图示),基于来自主控制部101的指示,根据电源接通状态、电源断开状态、电源断开待机状态等状态来供给向构成摄像装置1的各部位的电源。
摄像装置1只要具备摄像部110,则既可以是数码相机、便携电话、智能手机、平板终端、导航装置等,也可以是PDA(Personal Digital Assistants,个人数字助理)、笔记本型PC(Personal Computer,个人电脑)。也可以是具备通信功能的音乐播放器、便携型游戏机等或者其它便携用数字设备。另外,也可以是可穿戴的智能手表、智能眼镜等。
[摄像装置的软件结构]
图1B是示出第一实施方式的摄像装置的软件结构图的图,示出ROM102、RAM103以及存储设备部104中的软件的结构。
在图1B中,主控制部101执行在ROM102中存储的程序,由此构成基本动作执行部1021、位置信息获取部1022、摄像处理部1023、图像记录部1024、图像再现部1025、电源管理部1026、合成处理部1027、面部识别处理部1028。另外,设为RAM103具备在执行在ROM102中存储的程序时根据需要而临时地保持数据的临时存储区域1031、临时地存储由摄像处理部1023经由摄像部110拍摄到的图像的图像临时存储区域1032。
存储设备部104还具有存储有执行在ROM102中存储的程序时的设定信息的设定信息存储区域1041、以及存储由摄像装置1拍摄到的静止图像数据、动态图像数据的图像存储区域1042等。
此外,以下为了简化说明,记载为主控制部101执行在ROM102中储存的程序来进行各动作块的控制。
基本动作执行部1021控制摄像装置1的各种设定、整体的动作。
位置信息获取部1022进行根据由GPS接收部115接收到的来自GPS卫星的信号来获取摄像装置1的纬度、经度等位置信息的处理。另外,也可以具备Wi-Fi(注册商标)接收功能,通过使用Wi-Fi的电波接收水平的信息校正位置信息来提高精度、或者使用Wi-Fi的电波接收水平的信息来获取位置信息。
在操作部113所包含的快门按钮被按压的情况下,摄像处理部1023进行将由摄像部110所摄像的被摄体的图像数据导入到RAM103的图像临时存储区域1032的处理。
图像记录部1024进行将被导入到图像临时存储区域1032的图像数据记录到存储设备部104的图像存储区域1042、或者经由外部记录介质接口105记录到外部记录介质106的处理。
图像再现部1025进行将由摄像部110的图像传感器所摄像的被摄体的图像经由RAM103的图像临时存储区域1032而显示于显示部112的处理。另外,进行读出在存储设备部104或者外部记录介质106中记录的图像数据而显示于显示部112的处理。
电源管理部1026通过操作部113所包含的电源按钮进行控制对构成摄像装置1的各部位供给的电源的处理。
在操作部113所包含的合成按钮被按压的情况下、合成后的图像数据的显示被选择的情况下等,合成处理部1027进行合成在存储设备部104、外部记录介质106中存储的图像数据的处理。
面部识别处理部1028进行在RAM103、存储设备部104、外部记录介质106中存储的图像数据的面部识别处理。
上述ROM102中存储的程序也可以为在产品出厂的时间点预先被储存的状态。另外,也可以在产品出厂后经由USB接口部107a储存利用个人电脑从因特网上的服务器装置等获取到的程序。
此外,也可以不对RAM103设置图像临时存储区域1032,而对摄像部110或者图像信号处理部111设置临时存储图像数据的缓冲存储器。
[摄像装置的外观图]
参照图2A以及图2B,说明第一实施方式的摄像装置的外观。
图2A是摄像装置1的前视图。在摄像装置1的正面配置有构成摄像部110的镜头。另外,在摄像装置1的上部配置有构成操作部113的电源按钮113-1、快门按钮113-2。
图2B是摄像装置1的后视图。在摄像装置1的背面,配置有显示部112、以及构成操作部113的选择/确定操作按钮113-3、用于进行各种设定/文件操作处理选择等的菜单按钮113-4、用于再现在存储设备部104或者外部记录介质106中记录的图像数据的再现按钮113-5、用于合成图像数据的合成按钮113-6(与合成指示操作部相当)。也可以设为显示部112具备触摸传感器,而能够代替快门按钮113-2、选择/确定操作按钮113-3、菜单按钮113-4、再现按钮113-5、合成按钮113-6来操作。
[摄像装置的整体动作]
图3是示出第一实施方式的摄像装置的整体的动作例的流程图。在图3中,说明手动模式、即以用户输入图像合成的指示的操作、更具体而言以以下例子中的“按下图像合成按钮(S312;“是”)”为契机来执行图像合成处理(S313)的情况的动作的流程。
首先,通过电源管理部1026进行按下电源按钮113-1的确认。如果未被按下(S301;“否”),则不转移到接下来的步骤而在本步骤待机。
在电源按钮113-1被按压的情况下(S301;“是”),进行摄像装置1的启动处理(S302)。在启动时,将由摄像部110的图像传感器所摄像的被摄体的图像显示于显示部112。
通过电源管理部1026进行按下电源按钮113-1的确认。在电源按钮113-1被按压的情况下(S303;“是”),进行摄像装置1的结束处理(S304)。
在电源按钮113-1未被按压的情况下(S303;“否”),通过摄像处理部1023进行按下快门按钮113-2的确认。在快门按钮113-2被按压的情况下(S305;“是”),摄像部110摄像并获取被摄体的图像数据(S306),存储到RAM103的图像临时存储区域1032。另外,摄像的机型、光圈值、像素数、ISO感光度、拍摄日期时间、位置信息等附加信息也存储到图像临时存储区域1032。另外,通过图像记录部1024将在图像临时存储区域1032中存储的图像数据以及附加信息记录到存储设备部104或者外部记录介质106(S307)。然后,将通过摄像部110摄像并存储到图像临时存储区域1032的图像数据显示于显示部112(S309)。
在快门按钮113-2未被按压的情况下(S305;“否”),通过图像再现部1025进行按下再现按钮113-5的确认。在再现按钮113-5被按压的情况下(S308;“是”),在存储设备部104、外部记录介质106中记录的图像数据通过图像再现部1025再现而显示于显示部112(S309)。能够按压再现按钮113-5来使再现/显示的图像显示于显示部112。该显示于显示部112的图像数据、以及用户拍摄而生成并显示于显示部112的图像数据(S306)与第一图像数据相当。
图6A是示出利用摄像装置1刚刚拍摄之后的显示部112的显示例的图。以山为背景拍摄到人物A。拍摄到的图像数据的显示时间例如是3秒左右,也可以做成用户能够变更。在经过预定时间时,图像数据的显示消失,在再现按钮113-5被按压时再次显示。
在再现按钮113-5未被按压的情况下(S308;“否”),通过合成处理部1027进行按下合成按钮113-6的确认。在合成按钮113-6被按压的情况下(S312;“是”),通过合成处理部1027合成由摄像部110摄像并经由图像临时存储区域1032记录到存储设备部104、外部记录介质106的图像数据(S313),合成后的图像数据显示于显示部112(S315)。
图6B是示出由摄像装置1合成后的图像数据的显示例的图。对包括以山为背景拍摄到的人物A的图像,合成出以相同的山为背景拍摄到的人物B。
在通过选择/确定操作按钮113-3进行将合成后的图像数据记录到存储设备部104、外部记录介质106的选择/确定时(S317:“是”),图像记录部1024将由合成处理部1027合成的图像数据记录到存储设备部104、外部记录介质106(S318)。
图7A是示出是否记录由摄像装置1合成后的图像数据的选择画面的显示例的图。用户通过选择/确定操作按钮113-3来选择确定“是”、“否”。
在通过选择/确定操作按钮113-3进行了不将合成后的图像数据记录到存储设备部104、外部记录介质106的选择/确定的情况下(S317:“否”)、或者合成按钮未被按下的情况下(S312;“否”),在图像再现处理(S315)之后或者图像再现处理(S309)之后,返回到步骤S303。
图7B是示出在未能合成图像的情况下的显示例的图。在未能合成图像的情况(S313的图像合成处理的结果是未能合成的情况)下,不将图7A而将图7B所示的画面显示于显示部112。
通过进行以上的S301~S318的处理,进行图像的记录、再现以及合成。
此外,也可以并非通过独立的合成按钮113-6,而通过菜单按钮113-4、选择/确定操作按钮113-3选择合成处理并执行。另外,也可以预先登记重要人物,在拍摄到该人物的情况下自动地进行合成动作。另外,也可以在不按压快门按钮113-2而对具备触摸传感器的显示部112所显示的被摄体进行触摸来拍摄被摄体的情况下,如果被摄体是人物,则将该人物登记为重要人物。另外,也可以在拍摄到的人物从图像的中心偏移预定值以上或者预定比例以上的情况下、例如从中心偏移20%以上的情况下,自动地进行合成动作。
接下来,参照图4,说明在拍摄到人物时自动地进行合成处理的所谓自动合成模式中的图像合成处理。图4是示出第一实施方式的摄像装置1的其它动作例(自动合成模式)的流程图。
图4的S401~S409与图3的S301~S309相同,所以省略说明。
合成处理部1027确认是否为自动合成模式(S412)。预先通过菜单按钮113-4、选择/确定操作按钮113-3设定自动合成模式。因此,菜单按钮113-4、选择/确定操作按钮113-3与模式设定部相当。
在自动合成模式的情况下(S412;“是”),合成处理部1027对由摄像部110摄像并经由图像临时存储区域1032记录到存储设备部104、外部记录介质106的图像数据进行合成(S413)。合成处理部1027在图像临时存储区域1032进行合成处理。
显示部112显示用于选择是否显示合成后的图像数据的画面。用户通过选择/确定操作按钮113-3进行是否显示合成后的图像数据的选择/确定(S414;“是”)。
图8是示出是否由摄像装置1显示与其它图像合成的图像数据的选择画面的显示例的图。用户通过选择/确定操作按钮113-3选择确定“是”、“否”。在未能与其它图像合成的情况下不显示。
S415~418:与图3的S315~S318相同,所以省略说明。
在未被设定为自动合成模式的情况下(S412;“否”)、或者不显示合成后的图像数据的情况下(S414;“否”),返回到S403。
通过进行以上的S401~S418的处理,在自动合成模式中进行图像的记录、再现以及合成。
[图像合成处理]
接下来,说明S313和S411的图像合成处理。
图5是示出合成处理部1027的动作例的流程图。
合成处理部1027从在存储设备部104的图像存储区域1042或者外部记录介质106中存储的图像数据中,检索在与显示部112所显示的图像相同的拍摄日下最新的图像(S501)。以下,将检索出的图像称为“检索图像”,将显示部112所显示的图像称为“显示图像”。
合成处理部1027基于由位置信息获取部1022获取到的位置信息,确认检索图像的拍摄地点是否与显示图像的拍摄地点相同(S502)。
在拍摄地点相同的情况下(S502;“是”),确认检索图像的拍摄日期时间和显示图像的拍摄日期时间是否为预定时间内(S503)。预定时间例如是3分钟左右,也可以做成用户能够变更。
在拍摄日期时间为预定时间内的情况下(S503;“是”),通过模式匹配确认检索图像的背景是否与显示图像的背景相同(S504)。
在背景相同的情况下(S504;“是”),通过面部识别处理部1028确认检索图像是否包含与显示图像包含的人物相同的人物(S505)。
在未包含相同人物的情况下(S505;“否”),确认在使检索图像和显示图像重叠时在显示图像内显示图像所摄像的人物的位置与想要从检索图像抽出并合成到显示图像的人物的位置是否重叠(S506)。除了以在人物稍微重叠的情况下设为“是”的方式设定判定水平以外、以仅在面部重叠的情况下设为“是”等的方式设定判定水平。
在检索图像和显示图像的拍摄地点相同(S502;“是”)、且拍摄日期时间为预定时间内(S503;“是”)、且背景相同(S504;“是”)、且不包含相同人物(S505;“否”)、且人物的位置不重叠的情况下(S506;“否”),通过轮廓检测抽取检索图像的人物,粘贴到显示图像而合成(S507)。或者,通过轮廓检测抽取显示图像的人物,粘贴到检索图像而合成。
在检索图像和显示图像的拍摄地点不相同的情况下(S502;“否”)、或者拍摄日期时间并非预定时间内的情况下(S503;“否”)、或者背景不相同的情况下(S504;“否”)、或者包括相同人物的情况下(S505;“是”)、或者人物重叠的情况下(S506;“是”),确认是否有同一拍摄日的其它图像(S508)。
在有其它图像的情况下(S508;“是”),接下来检索新的图像(S509)而返回到S502,继续处理。在无其它图像的情况下(S508;“否”),结束处理。此外,S502以及S503的顺序也可以变更,这些步骤相当于检索第二图像数据的候补的处理。
通过进行以上的S501~S509的处理,对粘贴到显示图像的图像进行检索,抽取人物而合成。
进而,也可以将地磁传感器搭载到摄像装置,在上述判定中添加摄像装置的朝向是否相同。
另外,也可以在未搭载GPS的摄像装置的情况下,通过省略S502来执行合成处理。
图9是示出第一实施方式的图像数据的检索和合成的一个例子的说明图。
图像数据901~905是在北纬35°24′53″、东经138°51′31″并在2015.03.15的10:02:00~10:02:55依次拍摄到的图像数据。图像数据901、902、904、905背景相同,仅图像数据903背景不同。
通过计时部114获取日期时间信息,通过GSP接收部115获取位置信息。
图像数据901、902是由人物A对人物B进行拍摄而得到的图像数据,图像数据903是由人物A或者人物B对鸟进行拍摄而得到的图像数据。图像数据904、905是由人物B对人物A进行拍摄而得到的图像数据。
一般而言,用户反复进行拍摄,直至得到满意的图像数据。图像数据901、902都是由人物A对人物B进行拍摄而得到的图像数据,但表明因为图像数据901的人物B没有笑,所以由人物A重新拍摄出图像数据902。同样地,图像数据904、905都是由人物B对人物A进行拍摄而得到的图像数据,但表明因为图像数据904的人物A没有笑,所以由人物B重新拍摄出图像数据905。另外,图像数据903表示在一连串的拍摄(意味着拍摄图像数据901至905的期间)中拍摄到突然出现的鸟。
在摄像装置1的快门按钮113-2被按压时拍摄被摄体,显示部112显示拍摄到的图像。然后,在合成按钮113-6被按压时合成图像。
图像数据906是从图像数据902、905合成的图像数据。
上述图6A是在摄像装置1刚刚拍摄出图像数据905之后或者在拍摄后再现按钮113-5被按压之后的显示部112的显示例。在此,在摄像装置1的合成按钮113-6被按压时,依照图5的流程图检索图像数据903,合成图像数据902和905,生成图像数据906。图6B是摄像装置1合成的图像数据906的显示例。
图像数据901~904的拍摄地点与图像数据905的拍摄地点相同(S502;“是”)、且拍摄日期时间为预定时间内(S503;“是”)。图像数据904包含与图像数据905相同的人物(S505;“是”)。图像数据903的背景与图像数据905的背景不同(S504;“否”)。图像数据901、902是与图像数据905背景相同(S504;“是”)、且不包含相同人物(S505;“否”)、且人物不重叠的情况(S506;“否”)。其中,作为最新的图像数据,选择图像数据902,与图像数据905合成,生成合成图像数据906。在图9的例子中,图像905与第一图像数据相当,图像902与第二图像数据相当。图像数据903由于背景与图像数据905不同而被排除,但在摄像装置1具备带缩放功能的镜头的情况下,也可以排除镜头焦距相差预定值以上的图像数据。
此外,以背景为基准进行合成,由此能够吸收各图像数据的视角偏移。例如,通过轮廓检测抽取图像数据902的人物B,以背景为基准而粘贴到图像数据905。或者,也可以通过轮廓检测抽取图像数据905的人物A,以背景为基准与图像数据902合成。
图10是示出第一实施方式的图像数据的检索和合成的一个例子的说明图。
图像数据1001、1002是在北纬35°24′53″、东经138°51′31″并在2015.03.16的10:02:00~10:02:50依次拍摄到的图像数据。图像数据1001、1002背景相同。
图像数据1001是由人物A对人物B进行拍摄而得到的图像数据,图像数据1002是由人物B对人物A进行拍摄而得到的图像数据。
在拍摄到图像数据1002之后,在按压摄像装置1的合成按钮113-6时,合成图像。或者,通过自动合成模式在拍摄后自动地合成图像。
合成图像数据1003是从图像数据1001、1002合成的图像数据。
在将合成图像数据1003记录到存储设备部104、外部记录介质106之后或者不记录而由人物A对人物B重新进行拍摄而得到的图像是图像数据1004。图像数据1001、1004都是由人物A对人物B进行拍摄而得到的图像数据,但表明因为图像数据1001的人物B没有笑,所以由人物A重新拍摄出图像数据1004。另外,也能够人物B对人物A重新进行拍摄。
在拍摄到图像数据1004之后按压摄像装置1的合成按钮113-6时,再次合成图像。或者,通过自动合成模式在拍摄后再次自动地合成图像。
图像数据1005是从图像数据1002、1004合成的图像数据。
进而,还能够重新拍摄,能够将拍摄和合成反复几次来获取期望的合成图像。
以上,在本实施方式中,摄像装置能够在对成为合成对象的图像进行拍摄之后合成按钮被按压时,检索最佳的图像来进行合成。或者,摄像装置能够在拍摄后自动地检索最佳的图像来进行合成。
也可以拍摄几张成为合成对象的图像,摄像装置从其中检索对于合成最佳的图像。另外,关于成为合成对象的多个图像,如果具有相同的背景,则无论拍摄定时如何,都能够设为合成对象。因此,即使在进行仅一方的图像的重新拍摄的情况下、或者在成为合成对象的图像的拍摄定时的期间拍摄到不成为合成对象的图像的情况下,也能够排除不成为合成对象的图像来执行合成处理。另外,能够将拍摄和合成反复进行几次来获取期望的合成图像。由此,能够提高对多个人容纳到一张图像的合成图像进行拍摄时的操作性。此外,在本实施方式中,示出了优先地选择更加新的图像的例子,但也可以优先地选择包含笑脸的人物、朝向正面的人物的图像。
<第二实施方式>
第二实施方式是使用由用户选择出的图像数据来进行合成的实施方式。
[摄像装置的整体动作]
图11是示出第二实施方式的摄像装置的整体的动作例的流程图。
S1101~S1108与图3的S301~S308相同,所以省略说明。
由摄像部110摄像并存储到图像临时存储区域1032的图像数据显示于显示部112(S1109)。
在再现按钮113-5被按压的情况下(S1108;“是”)、以及通过选择/确定操作按钮113-3选择图像的变更的情况下(S1111;“是”),在存储设备部104、外部记录介质106中记录的图像数据通过图像再现部1025再现而显示于显示部112(S1110)。在此,选择/确定操作按钮113-3作为用户对在存储设备部104中存储的图像进行选择的操作部件发挥功能,所以与选择操作部相当。
图13A是示出在再现按钮113-5被按压的情况下的显示部112的显示例的图。
在用户通过选择/确定操作按钮113-3选择是否将显示部112所显示的图像数据变更为其它图像数据时,显示部112所显示的图像数据代替为其它图像数据(S1111;“是”)。
图13B是示出在被变更为其它图像数据的情况下的摄像装置1的显示部112的显示例的图。
S1112与图3的S312相同,所以省略说明。
在合成按钮113-6被按压的情况下(S1112;“是”)、以及通过选择/确定操作按钮113-3选择图像的变更的情况下(S1116;“是”),通过合成处理部1027对在存储设备部104、外部记录介质106中记录的图像数据进行合成(S1113:“是”)。在图像临时存储区域1032进行合成。
S1115与图3的S315相同,所以省略说明。
图14A是在合成按钮113-6被按压的情况下的显示部112的显示例。
用户通过选择/确定操作按钮113-3选择是否将合成的图像数据变更为其它图像数据(S1116)。
图14B是在被变更为其它图像数据的情况下的摄像装置1的显示部112的显示例。在S1116中,不变更选择出的图像数据1404,而变更与其合成的图像数据1401~1403。
S1117~S1118与图3的S317~S318相同,所以省略说明。
通过进行以上的S1101~S1118的处理,进行图像的记录、再现以及合成。
[图像合成处理]
接下来,说明S1113的图像合成处理。图12是示出第二实施方式的合成处理部的动作例的流程图。
确认是否有用户的图像变更指示(S1200)。
在无用户的图像变更指示的情况下(S1200;“否”),检索在与显示部所显示的图像相同的拍摄日下最新的图像(S1201)。
S1202~S1209与图5的S502~S509相同,所以省略说明。
在有用户的图像变更指示的情况下(S1200;“是”)、或者检索图像和显示图像的拍摄地点不相同的情况下(S1202;“否”)、或者拍摄日期时间并非预定时间内的情况下(S1203;“否”)、或者背景不相同的情况下(S1204;“否”)、或者包含相同人物的情况下(S1205;“是”)、或者合成的人物重叠的情况下(S1206;“是”),确认是否有同一拍摄日的其它图像(S1208),在有其它图像的情况下(S1208;“是”),接下来检索新的图像(S1209)而返回到S1202,继续处理。在无其它图像的情况下(S1208;“否”),结束处理。
通过进行以上的S1200~S1209的处理,对粘贴到显示图像的图像进行检索而合成。
图15是示出第二实施方式的图像数据的检索和合成的一个例子的说明图。
图像数据1501~1505是在北纬35°24′53″、东经138°51′31″并在2015.03.15的10:02:00~10:02:55依次拍摄到的图像数据。图像数据1501~1505背景相同。图像数据1501~1503是由人物A对人物B进行拍摄而得到的图像数据,图像数据1504、1505是由人物B对人物A进行拍摄而得到的图像数据。
在摄像装置1的快门按钮113-2被按压时拍摄被摄体,显示部112显示拍摄到的图像。然后,在合成按钮113-6被按压时合成图像。
图像数据1506是从图像数据1502、1504合成的图像数据。
以上,根据本实施方式,能够得到与第一实施方式同样的效果,并且用户还能够自由地选择要合成的图像。
<第三实施方式>
第三实施方式是仅将登记人物添加到合成后的图像并将未登记人物从合成后的图像删除的实施方式。
[摄像装置的整体动作]
图16是示出第三实施方式的摄像装置的整体的动作例的流程图。
S1601~S1612与图3的S301~S312相同,所以省略说明。
图18A是示出在摄像装置1刚刚拍摄后或者在再现按钮113-5被按压的情况下的显示部112的显示例的图。虽然以山为背景拍摄到人物A,但还拍摄到未登记人物C、D。将人物A、B预先登记为重要人物。另外,也可以在代替快门按钮113-2而对具备触摸传感器的显示部112所显示出的人物进行触摸来拍摄的情况下,将该人物登记为重要人物。
在合成按钮113-6被按压的情况下(S1612;“是”),通过合成处理部1027对由摄像部110摄像并存储到图像临时存储区域1032的图像数据、和在存储设备部104、外部记录介质106中记录的图像数据进行合成(S1613)。在图像临时存储区域1032进行合成,通过合成添加登记人物,删除未登记人物。
图18B是示出通过摄像装置1合成的图像数据的显示例的图。将以相同的山为背景拍摄到的人物B合成到包括以山为背景拍摄到的人物A的图像。另外,删除未登记人物C、D。
S1615~S1618与图3的S315~S318相同,所以省略说明。
通过进行以上的S1601~S1618的处理,进行图像的记录、再现以及合成。
[图像合成处理]
接下来,说明S1613的图像合成处理。
图17是示出第三实施方式的合成处理部的动作例的流程图。
S1701~S1706与图5的S501~S506相同,所以省略说明。
在检索图像和显示图像的拍摄地点相同(S1702;“是”)、且拍摄日期时间为预定时间内(S1703;“是”)、且背景相同(S1704;“是”)、且不包含相同人物(S1705;“否”)、且人物不重叠的情况(S1706;“否”)下,通过轮廓检测抽取检索图像的登记人物,粘贴到显示图像而合成。或者,通过轮廓检测抽取显示图像的登记人物,粘贴到检索图像而合成(S1707)。
进而,抽取与显示图像的未登记人物所存在的位置对应的检索图像的背景,粘贴到显示图像(进行背景数据的合成),由此删除未登记人物。或者,抽取检索图像的未登记人物所存在的位置的显示图像的背景,粘贴到检索图像,由此删除未登记人物。
S1708~S1709与图5的S508~S509相同,所以省略说明。
在合成图像后(S1707)、或者在无同一拍摄日的其它图像的情况下(S1708;“否”),合成处理部1027确认在合成后的图像数据中是否存在未登记的人物(S1710)。
在合成后的图像数据中存在未登记的人物的情况下(S1710;“是”),合成处理部1027确认是否有其它图像(S1711)。
在有其它图像的情况下(S1711;“是”),检索其它图像并抽出(S1712),在无其它图像的情况下(S1711;“否”),结束处理。
合成处理部1027确认检索图像的拍摄地点和合成后的图像的拍摄地点是否相同(S1713)。
在拍摄地点相同的情况下(S1713;“是”),合成处理部1027确认检索图像的拍摄日期时间和合成后的图像的拍摄日期时间是否为预定时间内(S1714)。预定时间例如是3分钟左右,也可以做成用户能够变更。
在拍摄日期时间为预定时间内的情况下(S1714;“是”),合成处理部1027确认检索图像的背景和显示图像的背景是否相同(S1715)。
在背景相同的情况下(S1715;“是”),合成处理部1027删除未登记的人物(S1716),返回到S1710。
在不包含未登记人物的情况下(S1710;“否”)、或者无同一拍摄日的其它图像的情况下(S1711;“否”),结束处理。
通过进行以上的S1700~S1716的处理,对粘贴到显示图像的图像进行检索,抽取登记人物并合成,删除未登记人物。
图19是示出图像数据的检索和合成的一个例子的说明图。
图像数据1901~1903是在北纬35°24′53″、东经138°51′31″并在2015.03.16的10:02:00~10:02:50依次拍摄到的图像数据。图像数据1901~1903背景相同。
图像数据1901、1902是由人物A对人物B进行拍摄而得到的图像数据,但在图像数据1902中此外还拍摄有未登记人物D。表明因为图像数据1901的人物B没有笑,所以由人物A重新拍摄出图像数据1902。图像数据1903是由人物B对人物A进行拍摄而得到的图像数据,但还拍摄有未登记人物C、D。人物A、B预先登记为重要人物。另外,也可以在代替快门按钮113-2而对具备触摸传感器的显示部112所显示的人物进行触摸来拍摄的情况下,将该人物登记为重要人物。
在摄像装置1的快门按钮113-2被按压时拍摄被摄体,显示部112显示拍摄到的图像。然后,在合成按钮113-6被按压时,合成图像。
图像数据1904是从图像数据1902、1903进行登记人物的合成和未登记人物C的删除而得到的图像数据。
例如,通过轮廓检测抽取图像数据1902的人物B,以背景为基准粘贴到图像数据1903,由此将人物B合成到图像数据1902。进而,将与图像数据1903的未登记人物C所存在的位置对应的图像数据1902的背景粘贴到图像数据1903的未登记人物C,由此能够删除未登记人物C。或者,也可以通过轮廓检测抽取图像数据1903的人物A,以背景为基准与图像数据1902合成,生成合成后的图像数据1904。在某一方或者两方的图像数据中存在未登记人物的情况下,可以从未登记人物多的一方的图像数据中抽取登记人物,粘贴到登记人物少的一方的图像数据。
接下来,将与图像数据1904的未登记人物D所存在的位置对应的图像数据1901的背景粘贴到图像数据1904的未登记人物D,由此删除未登记人物D。
图像数据1905是从图像数据1904、1901进行未登记人物D的删除而得到的图像数据。
以上,根据本实施方式,能够得到与第一实施方式同样的效果,并且进而能够仅将登记人物添加到图像而删除未登记人物。此外,在本实施方式中,示出了将登记人物添加到图像而删除未登记人物的例子,但还能够不将登记人物添加到图像而删除未登记人物。
<第四实施方式>
第四实施方式是如下实施方式:在对未摄像有人物的仅有背景的图像(以下称为“背景图像”)进行了摄像的情况下使用该背景图像,在无背景图像的情况下对在网络上公开的摄像有背景的图像数据进行检索而使用这些背景图像,删除未登记人物。
[摄像装置的硬件结构]
在图20A中,对与图1A相同的处理部分附加相同的符号,省略说明。
图20A是示出第四实施方式的摄像装置的结构例的框图。图20A所示的摄像装置1具有无线通信部120,经由接入点装置2与外部网络3连接,与外部网络3上的服务器装置4进行数据的发送接收。通过基于Wi-Fi(注册商标)等的无线连接来进行与接入点装置2的连接。接入点装置2也可以是移动通信运营商的基站。另外,也可以并非摄像装置1直接与接入点2进行数据的发送接收,而经由智能手机、便携终端进行数据的发送接收。
服务器装置4具有多个有位置信息的图像数据、无位置信息的图像数据,摄像装置1能够经由接入点装置2、网络3获取各种图像数据。
[摄像装置的软件结构]
图20B是本实施例的摄像装置1的软件结构图,对与图1B相同的处理部分附加相同的符号,省略说明。
图20B是示出所示的第四实施方式的摄像装置的软件结构图的图。ROM部102具有无线连接处理部1029,通过控制无线通信部120进行与接入点装置2的无线连接处理。另外,通过位置信息获取部1022进行对在主体的存储设备104或者外部记录介质106中记录的图像文件的元数据的位置信息进行更新的处理。
[图像合成处理]
接下来,说明图像合成处理。图21是示出第四实施方式的合成处理部的动作例的流程图。
S2101~S2110与图17的S1701~S1710相同,所以省略说明。
在图像数据中存在未登记的人物的情况下(S2110;“是”),确认在存储设备部104的图像存储区域1042中是否有其它图像(S2111)。
在有其它图像的情况下(S2111;“是”),检索其它图像(S2112),在无其它图像的情况下(S2111;“否”),进入到S2117。
S2113~S2116与图17的S1713~S1716相同,所以省略说明。
在存储设备部104的图像存储区域1042中无其它图像的情况下(S2111;“否”),经由接入点装置2与外部网络3连接,检索外部网络3上的服务器装置4的图像(S2117)。然后,使用网络上的图像进行与S2116同样的处理,删除未登记人物(S2118)。
通过进行以上的S2101~S2118的处理,对粘贴到显示图像的图像进行检索,抽取登记人物并合成,删除未登记人物。
图22是示出第四实施方式的图像数据的检索和合成的一个例子的说明图。
图像数据2201~2203是在北纬35°24′53″、东经138°51′31″并在2015.03.16的10:02:00~10:02:50依次拍摄到的图像数据。图像数据2201~2203背景相同。
图像数据2201是由人物A对人物B进行拍摄而得到的图像数据,但还拍摄有未登记人物D。图像数据2202是由人物B对人物A进行拍摄而得到的图像数据,但还拍摄有未登记人物C、D。将人物A、B预先登记为重要人物。另外,也可以在代替快门按钮113-2而对具备触摸传感器的显示部112所显示的人物进行触摸来拍摄的情况下,将该人物登记为重要人物。
在摄像装置1的快门按钮113-2被按压时拍摄被摄体,显示部112显示拍摄到的图像。然后,在合成按钮113-6被按压时合成图像。
合成图像数据2203是从图像数据2201、2202进行登记人物的合成和未登记人物C的删除而得到的图像数据。
例如,通过轮廓检测抽取图像数据2201的人物B,以背景为基准粘贴到图像数据2202,并且将与图像数据2202的未登记人物C所存在的位置对应的图像数据2201的背景粘贴到图像数据2202的未登记人物C,从而删除未登记人物C。或者,通过轮廓检测抽取图像数据2202的人物A,以背景为基准粘贴到图像数据2201。在某一方或者两方的图像数据中存在未登记人物的情况下,可以从未登记人物多的一方的图像数据中抽取登记人物,粘贴到登记人物少的一方的图像数据。
然后,能够通过重新拍摄出在相同背景下不存在未登记人物D的图像(背景图像)并粘贴而删除未登记人物D。
但是,若在未登记人物D长时间未离开其地点的情况下,无法拍摄出在相同背景下不存在未登记人物D的图像(背景图像)。
因此,检索在网络上公开的图像数据,粘贴检索出的图像数据2204(在北纬35°24′53″、东经138°51′31″,2015.03.10的09:30:00),删除未登记人物D。通过模式匹配进行图像数据的检索,找出类似的图像数据。也可以使用拍摄地点、拍摄季节、拍摄日期时间等来检索。
合成图像数据2205是使用在网络上检索出的图像数据2204从合成图像数据2203删除未登记人物D而得到的图像数据。
通过将与合成图像数据2203的未登记人物D所存在的位置对应的图像数据2204的背景粘贴到合成图像数据2203的未登记人物D,删除未登记人物D。
以上,本实施方式能够得到与第三实施方式同样的效果,并且进而能够检索在网络上公开的图像数据,使用检索出的图像数据来删除未登记人物。
另外,也可以做成能够根据在网络上公开的图像数据的拍摄地点而与用户在相同的地点拍摄到的图像数据进行合成。
以上,说明了本发明的实施方式,但可以理解实现本发明的技术的结构当然不限于上述实施方式,而有各种变形例。例如,能够将某个实施方式的结构的一部分与其它实施方式的结构替换,另外还能够对某个实施方式的结构添加其它实施方式的结构。这些全部属于本发明的范畴。另外,在文中、图中出现的数值、消息等也仅为一个例子,即使使用不同的数值、消息等也不会有损本发明的效果。
另外,在各处理例中说明的程序既可以是各自独立的程序,也可以由多个程序构成一个应用程序。另外,也可以将进行各处理的顺序重排来执行。
上述本发明的功能等的一部分或者全部例如也可以通过用集成电路设计等而用硬件实现。另外,也可以通过微处理器单元等对实现各个功能等的动作程序进行解释并执行而用软件实现。也可以将硬件和软件一起使用。
另外,在图中示出的控制线、信息线是在说明上认为必要而示出的,未必示出产品上的所有控制线、信息线。也可以认为实际上几乎所有结构相互连接。

Claims (5)

1.一种摄像装置,其特征在于,具备:
摄像处理部,对被摄体进行摄像而生成图像数据;
图像记录部,记录所述图像数据;
图像再现部,再现所述图像数据;
面部识别处理部,执行所述图像数据的面部识别处理;
合成处理部,以使在多个图像数据的各个图像数据中被摄像的人物包含于一个图像数据的方式执行合成处理,生成合成数据;以及
选择操作部,用于用户选择在所述图像记录部中记录的图像数据,
在由所述图像再现部再现了第一图像数据时,所述面部识别处理部针对所述第一图像数据执行所述面部识别处理来识别第一人物的面部,
在所述图像记录部中记录有在与所述第一图像数据的拍摄定时不同的任意拍摄定时被拍摄、并具有判定为与所述第一图像数据的背景相同的背景、且摄像有与所述第一人物不同的第二人物的第二图像数据的情况下,所述合成处理部将由所述选择操作部选择的图像数据作为所述第二图像数据,使用所述第一图像数据以及所述第二图像数,生成在所述第一图像数据的背景上有所述第一人物以及所述第二人物的所述合成数据。
2.一种摄像装置,其特征在于,具备:
摄像处理部,对被摄体进行摄像而生成图像数据;
图像记录部,记录所述图像数据;
图像再现部,再现所述图像数据;
面部识别处理部,执行所述图像数据的面部识别处理;
合成处理部,以使在多个图像数据的各个图像数据中被摄像的人物包含于一个图像数据的方式执行合成处理,生成合成数据,以及
模式设定部,用于设定为在所述图像再现部再现了所述图像数据时使所述合成处理部执行所述合成处理的自动合成模式,
所述面部识别处理部针对第一图像数据执行所述面部识别处理来识别第一人物的面部,
在所述图像记录部中记录有在与所述第一图像数据的拍摄定时不同的任意拍摄定时被拍摄、并具有判定为与所述第一图像数据的背景相同的背景、且摄像有与所述第一人物不同的第二人物的第二图像数据的情况下,所述合成处理部使用所述第一图像数据以及所述第二图像数据,生成在所述第一图像数据的背景上有所述第一人物以及所述第二人物的所述合成数据,
在被设定为所述自动合成模式的情况下,在所述图像再现部再现了所述图像数据时,所述面部识别处理部针对所述图像数据开始面部识别处理。
3.根据权利要求2所述的摄像装置,其特征在于,
在由所述图像再现部再现了的图像数据中,在从该图像数据的图像中心偏移预定比例以上的位置存在摄像有人物的被摄体区域的情况下,所述合成处理部针对所述图像数据开始所述合成处理。
4.一种摄像装置,其特征在于,具备:
摄像处理部,对被摄体进行摄像而生成图像数据;
位置信息获取部,获取与摄像所述被摄体的位置对应的位置信息;
图像记录部,记录所述图像数据和所述位置信息;
图像再现部,再现所述图像数据;
面部识别处理部,执行所述图像数据的面部识别处理;以及
合成处理部,以使在多个图像数据的各个图像数据中被摄像的人物包含于一个图像数据的方式执行合成处理,生成合成数据,
所述面部识别处理部针对第一图像数据执行所述面部识别处理来识别第一人物的面部,
在所述图像记录部中记录有在与所述第一图像数据的拍摄定时不同的任意拍摄定时被拍摄、并且具有判定为与所述第一图像数据的背景相同的背景、且摄像有与所述第一人物不同的第二人物的第二图像数据的情况下,所述合成处理部将附加有与附加到所述第一图像数据的位置信息相同的位置信息作为检索条件,从记录于所述图像记录部的图像数据中抽出所述第二图像数据,所述合成处理部使用所述第一图像数据以及抽出的所述第二图像数据,生成在相同的所述第一图像数据的背景上有所述第一人物以及所述第二人物的所述合成数据。
5.一种图像处理方法,其特征在于,包括:
设定当对被摄体进行摄像得到的图像数据被再现时开始执行使用该图像数据的合成处理的动作模式的步骤;
生成摄像有第一人物的第一图像数据的步骤;
针对所述第一图像数据执行面部识别处理而识别所述第一人物的步骤;
从记录有与所述第一图像数据不同的图像数据的图像记录部检索并读出具有判定为与所述第一图像数据的背景相同的背景、且摄像有与所述第一人物不同的第二人物的第二图像数据的步骤;以及
生成在相同的所述第一图像数据的背景上有所述第一人物以及所述第二人物的合成数据的步骤。
CN202110381252.3A 2015-06-26 2015-06-26 摄像装置以及图像处理方法 Active CN113099118B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110381252.3A CN113099118B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
PCT/JP2015/068535 WO2016208070A1 (ja) 2015-06-26 2015-06-26 撮像装置及び画像処理方法
CN202110381252.3A CN113099118B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法
CN201580079346.8A CN107710731B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201580079346.8A Division CN107710731B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法

Publications (2)

Publication Number Publication Date
CN113099118A CN113099118A (zh) 2021-07-09
CN113099118B true CN113099118B (zh) 2023-08-22

Family

ID=57585226

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201580079346.8A Active CN107710731B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法
CN202110381333.3A Active CN113099119B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法
CN202110381252.3A Active CN113099118B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201580079346.8A Active CN107710731B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法
CN202110381333.3A Active CN113099119B (zh) 2015-06-26 2015-06-26 摄像装置以及图像处理方法

Country Status (4)

Country Link
US (5) US10542224B2 (zh)
JP (1) JP6537608B2 (zh)
CN (3) CN107710731B (zh)
WO (1) WO2016208070A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102374013B1 (ko) * 2016-09-16 2022-03-11 소니 세미컨덕터 솔루션즈 가부시키가이샤 촬상 장치 및 전자 기기
CN110140152B (zh) * 2017-10-20 2020-10-30 三菱电机株式会社 数据处理装置、可编程显示器及数据处理方法
CN109089045A (zh) * 2018-09-18 2018-12-25 上海连尚网络科技有限公司 一种基于多个摄像装置的摄像方法及设备及其终端
US11513669B2 (en) * 2020-02-28 2022-11-29 Micron Technology, Inc. User interface for modifying pictures
US11776237B2 (en) * 2020-08-19 2023-10-03 Adobe Inc. Mitigating people distractors in images

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1720527A (zh) * 2002-11-06 2006-01-11 佳能株式会社 通信装置、图像存储装置、摄像装置以及它们的控制方法
CN102075675A (zh) * 2010-12-24 2011-05-25 富泰华工业(深圳)有限公司 便携式电子装置及其拍照方法
CN102469263A (zh) * 2010-11-16 2012-05-23 卡西欧计算机株式会社 拍摄装置及图像合成方法
CN103747180A (zh) * 2014-01-07 2014-04-23 宇龙计算机通信科技(深圳)有限公司 照片拍摄方法及拍照终端

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11136568A (ja) 1997-10-31 1999-05-21 Fuji Photo Film Co Ltd タッチパネル操作式カメラ
US7221395B2 (en) * 2000-03-14 2007-05-22 Fuji Photo Film Co., Ltd. Digital camera and method for compositing images
JP4508596B2 (ja) 2002-11-06 2010-07-21 キヤノン株式会社 通信装置、画像記憶装置およびそれらの制御方法
JP2004248020A (ja) 2003-02-14 2004-09-02 Fuji Photo Film Co Ltd 画像処理装置および画像処理システム
JP2005033532A (ja) * 2003-07-14 2005-02-03 Noritsu Koki Co Ltd 写真処理装置
JP2010108475A (ja) 2008-10-03 2010-05-13 Sony Corp 画像処理装置および方法、プログラム、並びに記録媒体
JP4670976B2 (ja) 2008-10-03 2011-04-13 ソニー株式会社 学習装置および方法、認識装置および方法、プログラム、並びに記録媒体
JP2011118694A (ja) 2009-12-03 2011-06-16 Sony Corp 学習装置および方法、認識装置および方法、並びにプログラム
JP5105550B2 (ja) * 2009-03-19 2012-12-26 カシオ計算機株式会社 画像合成装置及びプログラム
JP5267279B2 (ja) 2009-03-31 2013-08-21 カシオ計算機株式会社 画像合成装置及びプログラム
JP4752941B2 (ja) * 2009-03-31 2011-08-17 カシオ計算機株式会社 画像合成装置及びプログラム
US20150009359A1 (en) * 2013-03-19 2015-01-08 Groopic Inc. Method and apparatus for collaborative digital imaging
JP5761323B2 (ja) 2013-12-17 2015-08-12 カシオ計算機株式会社 撮像装置、撮像方法、及びプログラム
KR20160057867A (ko) * 2014-11-14 2016-05-24 삼성전자주식회사 디스플레이 장치 및 그에 의한 이미지 처리 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1720527A (zh) * 2002-11-06 2006-01-11 佳能株式会社 通信装置、图像存储装置、摄像装置以及它们的控制方法
CN102469263A (zh) * 2010-11-16 2012-05-23 卡西欧计算机株式会社 拍摄装置及图像合成方法
CN102075675A (zh) * 2010-12-24 2011-05-25 富泰华工业(深圳)有限公司 便携式电子装置及其拍照方法
CN103747180A (zh) * 2014-01-07 2014-04-23 宇龙计算机通信科技(深圳)有限公司 照片拍摄方法及拍照终端

Also Published As

Publication number Publication date
CN107710731B (zh) 2021-05-04
CN113099118A (zh) 2021-07-09
US11528432B2 (en) 2022-12-13
WO2016208070A1 (ja) 2016-12-29
JPWO2016208070A1 (ja) 2018-03-08
US20220046167A1 (en) 2022-02-10
US20230075223A1 (en) 2023-03-09
US11870944B2 (en) 2024-01-09
CN113099119B (zh) 2023-08-22
US11159714B2 (en) 2021-10-26
JP6537608B2 (ja) 2019-07-03
US10542224B2 (en) 2020-01-21
US20180241951A1 (en) 2018-08-23
CN107710731A (zh) 2018-02-16
US20200112694A1 (en) 2020-04-09
CN113099119A (zh) 2021-07-09
US20240106972A1 (en) 2024-03-28

Similar Documents

Publication Publication Date Title
US8599251B2 (en) Camera
US11528432B2 (en) Imaging device and image processing method
KR101720774B1 (ko) 디지털 촬영 장치 및 그의 사진 제공 방법
KR20050062573A (ko) 휴대 전화기
JP4706159B2 (ja) 画像再生装置および画像再生方法
JP2002209131A (ja) 電子カメラおよび画像システム
JP2012084052A (ja) 撮像装置、制御方法及びプログラム
JP6703361B2 (ja) 撮像装置及び画像処理方法
JP6265621B2 (ja) 表示制御装置およびプログラム
JP7362696B2 (ja) 撮像装置
JP6916342B2 (ja) 撮像装置及び画像処理方法
JP2008271239A (ja) カメラ、コンテンツ作成方法、及びプログラム
CN103581512B (zh) 拍摄装置和方法
JP2008072675A (ja) 撮像装置
JP2009088749A (ja) 撮像装置、シナリオによる画像撮影方法、およびプログラム
US9571717B2 (en) Imaging device, imaging system, imaging method, and computer-readable recording medium
JP6704301B2 (ja) 撮像装置、及び撮像表示システム
JP2006050176A (ja) 画像表示装置、撮像装置、カレンダ表示方法、及びプログラム
JP2010109634A (ja) 画像表示装置及び撮像装置
JP2022137136A (ja) 表示装置
JP5687480B2 (ja) 撮影装置、撮影方法及び撮影プログラム
JP2012094090A (ja) 情報処理装置、情報処理方法及びプログラム
JP2016051939A (ja) 撮影装置、制御方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Kyoto, Japan

Applicant after: MAXELL, Ltd.

Address before: Kyoto, Japan

Applicant before: MAXELL HOLDINGS, Ltd.

CB02 Change of applicant information
TA01 Transfer of patent application right

Effective date of registration: 20211111

Address after: Kyoto, Japan

Applicant after: MAXELL HOLDINGS, Ltd.

Address before: Kyoto, Japan

Applicant before: MAXELL, Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant