CN101365061A - 摄像装置、摄像系统以及摄像方法 - Google Patents

摄像装置、摄像系统以及摄像方法 Download PDF

Info

Publication number
CN101365061A
CN101365061A CNA2008101449281A CN200810144928A CN101365061A CN 101365061 A CN101365061 A CN 101365061A CN A2008101449281 A CNA2008101449281 A CN A2008101449281A CN 200810144928 A CN200810144928 A CN 200810144928A CN 101365061 A CN101365061 A CN 101365061A
Authority
CN
China
Prior art keywords
image
mentioned
view data
classification
camera head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008101449281A
Other languages
English (en)
Other versions
CN101365061B (zh
Inventor
野中修
Original Assignee
Olympus Corp
Olympus Imaging Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp, Olympus Imaging Corp filed Critical Olympus Corp
Priority to CN201210540735.4A priority Critical patent/CN103037164B/zh
Publication of CN101365061A publication Critical patent/CN101365061A/zh
Application granted granted Critical
Publication of CN101365061B publication Critical patent/CN101365061B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet

Abstract

本发明提供摄像装置、摄像系统以及摄像方法,在摄像装置(1)中具有:摄像部(2),其将图像转换成图像数据;图像分类部,其对图像数据进行分类;以及显示部(8),其用于根据图像分类部的分类结果,显示与作为摄影对象而推荐的图像相关的信息。并且,具有摄影辅助功能的服务器(31)是从具有将图像转换成图像数据的摄像部的摄像装置(1)接收上述图像数据的服务器,在该服务器中具有:场景判定部(32),其对接收到的图像数据进行图像分类,判定是否重复拍摄了典型图像;指导信息部(33),其根据场景判定部(32)的判定结果,输出与作为摄影对象而推荐的图像相关的信息;以及通信部,其将信息输出到摄像装置(1)。

Description

摄像装置、摄像系统以及摄像方法
技术领域
本发明涉及摄像装置、摄像系统以及摄像方法,详细地说,是涉及拍摄被摄体图像、将该拍摄的被摄体图像进行分类、并可根据该结果向摄影者显示建议信息的摄像装置、摄像系统以及摄像方法。
背景技术
近年,这样的图像观赏法正在普及,即:通过利用PC通信和互联网、便携电话线路等的通信功能来发送由数码相机等摄像装置所拍摄的图像,并在其环境下观赏图像。利用这种通信功能,可实现以下等多种观赏方法,例如,在博客等的页面上刊登自己拍摄的照片,可供许多人观赏,并且将图像发送到可供许多人观赏的大型电视。
在以往的银盐胶卷时代,考虑到胶卷的耗费和洗像费用,只拍摄决定性的一张来观赏,然而,关于上述那样的在当前环境下观赏照片,从观赏决定性的一张变化到将许多图像作为一个作品来观赏。在观赏一系列图像的情况下,要求的是这样的照片集,即:即使没有特别说明,但通过观赏多个照片,也能充分了解拍摄时的状况。
例如,在将运动会和学艺会等的孙子的活动照片发送到不能去观看的祖父母的家的电视等再现装置的情况下,只是以孙子运动的图像不能传达状况,并且,孙子的父母也想要看自己孩子的照片。这样,在不仅发送给离摄影者近的人还要简单地发送给离摄影者远的人时,多数情况下还需要摄影者未意识到的被摄体的图像。
并且,如图9所示,在将相机所拍摄的图像显示在电视20的画面上供家人观赏的情况下,当只拍摄了一个人时,除了成为摄影对象的人以外,连家人也不怎么引起兴趣。如果是能感受到事件在什么样的场所或会场进行、以及什么样的人作为观众观看的图像,则也会带来身临其境感,除了成为摄影对象的人以外也能观赏,并且成为值得观赏的图像。
为了拍摄除成为摄影对象人以外的人也具有兴趣的图像,在利用相机进行辅助摄影时,图像识别技术是重要的。近年,不仅在监视用相机中,而且在消费者用的相机中,从图像中检测脸部的技术(日本特开2006—101111号公报(2006年4月13日公开)以下称为现有技术1)、以及在互联网上判定图像的相似度的技术等普及起来。并且,使相机与互联网无线连接的技术、将互联网上传播的内容表现在家电产品上的技术等正在普及。
上述现有技术1所公开的摄影装置将所拍摄的摄影图像预先存储在对照用文件内,判定摄影图像与存储在对照用文件内的图像是否一致,并可根据该对照结果来确认是否拍摄了预定的摄影对象。
并且,在日本特开2007—287014号公报(2007年11月1日公开)所公开的图像处理装置等中提出了如下方案,即:将所拍摄的人物进行分类,按各活动进行分类显示,而这些都是不忘拍摄用户预先决定为要拍摄的图像的技术。
并且,在日本特开2007—166250号公报(2007年6月28日公开)所公开的相机等中,提供了指示摄影者进行构图的方案,而该方案仅辅助用户决定构图。
为了扩大摄影区域,相机被投入了如下等许多技术,即:扩大曝光和焦点控制范围,并且通过变焦镜头扩大视场角范围,但是,许多用户倾向于在相同状况下按相同构图仅拍摄相同被摄体,没有最大限度地充分利用这种相机的潜在能力。
现有技术中公开的摄影装置可有效且可靠地进行预定的摄影对象的摄影,然而在该摄影装置中需要预先存储对照用的图像,因而较麻烦,并且难以说现有技术中公开的摄影装置是可根据各个状况提供摄影对象以外的人在观赏摄影图像时也具有兴趣的图像的摄影装置。
发明内容
本发明的目的是提供一种可根据各个状况拍摄除摄影者和摄影对象以外的人也具有兴趣的图像的摄像装置、摄像系统以及摄像方法。
本发明的摄像装置具有:摄像部,其将图像转换成图像数据;图像分类部,其对上述图像数据进行分类;以及显示部,其用于根据上述图像分类部分类的结果,判定摄影者无意中仅拍摄了相同图像的状况,显示与作为摄影对象而推荐的图像相关的信息,以便能取得有变化的图像。
并且,本发明的摄像系统具有:摄像部,其将被摄体图像转换成图像数据;图像分类部,其对上述图像数据进行分类;以及显示部,其用于根据上述图像分类部的分类结果,显示与作为摄影对象而推荐的图像相关的信息。
而且,根据本发明的摄像方法,在该方法中:将图像转换成图像数据;对上述图像数据进行分类;以及根据上述分类,显示与作为摄影对象而推荐的图像相关的信息。
而且,本发明的具有摄影辅助功能的服务器是从摄像装置接收图像数据的服务器,该摄像装置具有将图像转换成上述图像数据的摄像部,该服务器具有:场景判定部,其进行对接收到的上述图像数据进行分类的图像分类,判定是否重复拍摄了典型图像;指导信息部,其根据上述场景判定部的判定结果,输出与作为摄影对象而推荐的图像相关的信息;以及通信部,其将上述信息输出到上述摄像装置。
附图说明
图1是本发明的第1实施方式的相机的框图。
图2是示出本发明的第1实施方式的相机中的相机控制的流程图。
图3是示出本发明的第1实施方式的相机中的需要显示的流程图。
图4是本发明的第1实施方式的相机中的图像分类的流程图。
图5A、图5B、图5C是在本发明的第1实施方式中说明摄影图像的图。
图6是本发明的第2实施方式的相机中的图像分类的流程图。
图7是由本发明的第3实施方式的相机和服务器构成的摄像系统的框图。
图8是示出本发明的第3实施方式的相机中的相机控制的流程图。
图9是示出在电视画面上观赏由以往构成的相机所拍摄的图像的状况的图。
具体实施方式
以下,根据附图并通过应用了本发明的摄像装置对优选实施方式进行说明。本发明的第1实施方式的摄像装置是数码相机,该数码相机大致是将摄像元件所取得的被摄体图像的图像数据以动态图像形式显示在显示装置上,并可根据释放按钮的操作将静态图像数据记录在记录介质内。在该数码相机内具有将被摄体图像分类的功能,即,除了相机所具有的变焦功能和对焦功能以外,还可以利用判定图像的技术,将摄影图像分类为单人图像、集体图像、风景图像等以显示摄影倾向,并且在以同一人为目标摄影多帧这样的想要拍摄典型图像的情况下,可显示和警告该意思。
这种典型场景的连续对于喜欢它的人能感到快乐,然而对此并不感兴趣的人却要没完没了地看不感兴趣的图像,观赏行为则变成了非常痛苦的事情。并且,对于喜欢典型场景的人来说,加入用于强调的其他图像往往也会令人快乐。
因此,例如在电视等上进行显示,在由许多人观赏许多图像的状况下,或者如相册那样排列各种图像来进行观赏的场景中,尽可能显示变化丰富的图像可避免这种不便。然而,摄影者一般在摄影地点热衷于自己感兴趣的对象物,大多在不知不觉中拍摄典型图像。在本实施方式中,提供一种可避免这些不便并可拍摄变化丰富的图像的摄像装置。
以下,对将第1实施方式的摄像装置应用于数码相机的例子进行详述。图1是本发明的第1实施方式的数码相机10的框图。在相机10的内部设置有控制部1、摄像部2、镜头判定部3、记录部4、显示信息部5、操作判定部6、被摄体判定部7、显示部8、以及钟表部9。
控制部1由MPU(Micro Processing Unit:微处理电路)等构成,与所述的摄像部2至钟表部9等各部分连接,从上述各部分输入信号并输出控制信号,控制相机10整体。摄像部2具有用于使被摄体图像成像的摄影镜头,将通过该摄影镜头成像的被摄体图像进行光电转换,输出图像信号。
镜头判定部3可判定摄影镜头的变焦位置(焦距、变焦倍率)和焦点位置(被摄体距离),这里所判定的变焦位置和焦点位置的信息可在记录摄影图像数据时一并记录。
记录部4对基于摄像部2所输出的图像信号的图像数据进行压缩处理并记录在记录介质内。钟表部9是计量日期时间的钟表,在将摄影图像数据记录在记录部4内时,可一并记录该日期时间信息(时刻信息)。
操作判定部6对设置在相机10上的操作开关、操作转盘等操作部件的状态进行检测,并判定操作状态。被摄体判定部7具有脸检测功能,该脸检测功能是从图像中根据具有人脸特征的阴影图形来判定脸在画面内的位置和脸的大小。
被摄体判定部7具有检测画面中的对比度和亮度的分布、以及颜色配合等的各检测部,并具有对摄像图像的特征加以分析、且对被摄体图像是单人摄影、集体摄影、风景摄影进行分类判定的功能。
显示信息部5根据被摄体判定部7的判定,对通过摄像部2取得的、记录在记录部4内的摄影图像进行分类并判定摄影倾向,并且在仅拍摄特定图像的情况下进行警告。
显示部8根据从摄像部2输出的图像数据将被摄体图像作为动态图像进行实时取景显示,可用于替代摄影时的取景器。并且,显示部8根据再现按钮等的操作,读出记录在记录部4的记录介质内的图像数据,解压缩处理后进行显示。而且,显示部8根据显示信息部5的输出来显示摄影倾向,并在仅对特定图像过度拍摄的情况下进行警告和显示。
显示部8设置在相机10的背面,在图1所示的例子中,在显示部8的左侧示出摄影图像的倾向,在右侧进行实时取景显示8a。摄影图像被分类为肖像图像8b、单人图像8c、集体图像(多人图像)8d以及风景图像8e,摄影图像的摄影帧数分别按各图像加以分类,并在右侧由条形图8f、8g、8h显示。
在图1所示的显示部8的例子中,大部分是单人图像8c,集体图像8h少,风景等表现周围气氛的照片少。因此,用粗线框表示风景图像8e的周围进行显示,警告只能得到单调图像,并将风景图像作为推荐图像来显示。在右侧的实时取景显示中,由于要拍摄相似倾向的图像,因而示出已发出了警告的位置。另外,该警告和推荐图像的显示当然可以变更为以下等各种显示方法,即:使用红色等显眼的颜色显示框的粗线,并使用文字或记号显示类别名称,还可以使框线闪烁。
这样,在本实施方式中,将实际上拍摄哪种图像多的情况以容易知道其内容且可见的方式显示在显示部8上。并且,由于该显示内容是分析了实际所拍摄的图像后的结果,因而用户能立即掌握自己的摄影倾向,并可判断哪里不足。
当在摄影前出现这种显示时,用户即使拍摄相同被摄体,也能进行采取以下方法的摄影,即:利用变焦镜头控制视场角,从脸的大小较大的肖像摄影切换到也拍摄背景和其他人物的快拍摄影。
下面,使用图2所示的流程图说明本实施方式的数码相机10进行摄影辅助显示时的动作。在该例中,尤其示出相机10被设定为摄影模式时的控制。当相机控制流程开始时,首先,进行实时取景显示(S1)。在该实时取景显示中,如上所述,根据摄像部2的输出将被摄体图像以动态图像形式显示在显示部8上。取代光学式取景器,摄影者可在观察实时取景显示的同时决定构图。
然后,用户判定是否设定为指导模式(摄影辅助模式)(S2)。该指导模式是在摄影时进行显示指导的模式,如上所述,在显示摄影图像的倾向并只能获得单调图像的情况下,以典型图像进行警告显示。指导模式通过未图示的操作部件来设定,通过操作判定部6检测是否设定了指导模式。
在步骤S2中的判定结果是未设定指导模式的情况下,跳到步骤S6,另一方面,在设定了指导模式的情况下,执行需要显示的子程序(S3),在该子程序(S3)中,对实时取景图像加以分析,并判断是否需要显示指导。即,在该子程序中,在进行实时取景显示的图像是与记录在记录部4内的摄影图像相同的图像的情况下,或者在仅拍摄了相同图像的情况下,判断为需要显示指导。关于该子程序,使用图3在后面描述。
接下来,根据步骤S3中的需要显示的判断结果,判定是否需要显示指导(S4),在判定结果是不需要显示的情况下,跳到步骤S6,另一方面,在需要显示指导的情况下,对摄影者需要的图像进行显示(S5)。即,如图1的显示部8所例示的那样,显示摄影图像的倾向,并使用粗框等对需要哪个图像(推荐图像)进行警告和显示。在进行了警告和显示的情况下,用户通过按照警告和显示来变更被摄体,可拍摄使一系列的摄影图像发生变化、不会令观赏者厌烦的相片。
然后,判定是否操作释放按钮进行摄影(S6)。在判定结果是未进行摄影的情况下,返回到步骤S2,进行上述动作。另一方面,在操作了释放按钮的情况下,进行摄影(S7)。在摄影时,通过摄像部2取得被摄体图像的图像数据,进行压缩处理之后将该图像数据记录在记录部4内。每当记录时,从钟表部9取得摄影日期时间信息,将其一并记录(S8)。并且,例如变焦位置信息、焦点位置信息等其他信息也一并记录。
接下来,进行图像分类(S9)。如图1所示,图像分类是分类为肖像图像、单人图像、集体图像、风景图像等。这里的图像分类的分类结果在返回该流程并再次执行步骤S5时使用于对图像倾向的显示。图像分类的详细动作使用图4在后面描述。
下面,使用图3对判定是否需要显示指导的步骤S3的子程序加以说明。当进入该子程序时,首先,进行实时取景图像的分析(S11)。在该分析中,使用被摄体判定部7从图像中检测脸。接下来,判定所检测的被摄体的脸的个数(S12)。判定所判定的脸个数是否有多个(S13),在没有多个的情况下,跳到步骤S15,在有多个的情况下,选择位于中央的脸(S14)。
接下来,判定典型图像是否过多(S15)。在该步骤中,使用在前面步骤中所选择的脸,通过将该脸与典型图像进行比较,判定典型图像是否多于规定数。该典型图像是指,在仅拍摄了相同的典型图像的情况下,在观赏时感到厌烦的图像;当典型图像多时,观赏照片并不愉快。关于典型图像是否过多的判定,在图4所示的图像分类的子程序中进行说明。当实时取景显示中的图像与典型图像相同时,成为需要辅助显示的候选。
在步骤S15中判定为典型图像不是过多的情况下,返回到原来的流程,另一方面,在典型图像过多的情况下,接下来判定是否是相似图像(S16)。在这里的判定中,在脸的表情相似的情况下,或者在拍摄特定人物的情况下,判断为是相似图像。并且,每当进行相似图像的判断时还可以考虑背景。
在步骤S16中的判定结果是不相似的情况下,返回到原来的流程,另一方面,在是相似图像的情况下,判定为需要辅助显示(S17)。即,实时取景显示中的图像是仅仅具有典型的让人感到厌烦的构图的图像,而且是拍摄了特定人物的图像,因而判断为需要辅助显示,以便对实时取景显示中的图像的摄影进行警告和显示。当进行了该判断时,在所述步骤S5(参照图2)中进行警告和显示。
下面,使用图4说明步骤S9(参照图2)中的图像分类的子程序。另外,在该程序中,也对典型图像是否过多进行判定。当进入该图像分类的子程序时,首先,使用被摄体判定部7进行摄影图像的分析(S21)。
接下来,根据该分析结果判定所检测的脸的个数(S22)。并且,判定与图像一起记录的摄影时的变焦镜头的设定位置(在一并使用数字变焦的情况下,还考虑数字变焦)和焦点位置(S23)。通过判定摄影光学系统的设定位置,可知道对焦的被摄体的距离,在为远距离的情况下,可判断为是风景。
然后,判定是否有脸(S24)。在判定结果是没有脸的情况下,判定是否是风景图像(S25)。是否是风景图像的判定是根据图像识别或摄影时的焦点位置信息来进行的。在判定结果为不是风景的情况下,返回到原来的流程,在是风景的情况下,判定为风景图像(S26)。在该步骤中,将风景图像数目增加一个,并在图1所示的条形图显示中加以利用。
在步骤S24中的判定结果是有脸图像的情况下,判定脸图像数目是否是多个(S27)。在判定结果是存在多个脸图像的情况下,判定为集体照片(S41),临时存储位于中央的脸图像(S42)。
接下来,判定摄影是否在作为规定时间的3分钟以内拍摄了作为规定张数的5张以上(S43),在判定结果为“否”的情况下,返回到原来的流程,另一方面,在为“是”的情况下,收集5张先前临时存储的脸图像并进行比较和判定(S44)。在该步骤中的判定结果是该5张以上的图像不是相似图像的情况下,返回到原来的流程。另外,该规定时间3分钟和规定张数5张可以适当决定为设计值,并且是可变更的值。
另一方面,在步骤S45中的判定结果是5张脸图像相似的情况下,视为仅拍摄了过后一看就厌烦的典型图像的状况,判定为典型图像拍摄过多(S46)。并且,此时还判定是哪种构图。例如,可以记录此时的脸的大小和位置,而且可以基于详细的图像匹配和记录区域来记录脸图像。
在步骤S46中,在摄影时,还对图像是否为相同人物成为主要被摄体的图像进行判定,当仅是相同人物时,可以进行警告,建议也拍摄其他人物等。在该情况下,对拍摄其他图像更好的意思进行显示。这是因为,当拍摄了相同人物总是在正中当主角的图像时,会使其他人扫兴。
特别是仅对中央的人物进行判定,能缩短相同人物判定所花的时间,或者可提高判定精度。并且,当对画面内的所有人物进行判定时,即使在相同人物总是拍摄在画面端部的情况下,也有可能判定为是典型图像。但是只出现在端部的人物作为典型图像被警告显示并不优选。
即,在为照片的情况下,由于图像区域有限,因而人物配置的印象大不相同,对于总是位于正中的人是同一人的照片,与该正中的人相关的人以外的人看该照片时大多不感兴趣。即使拍了别人,但在总是横拍的情况下,有时在该人不当主角时也感到不满。
另外,这样,在拍摄多个人物并且相同人物总是处于正中的情况下,在运动会和学艺会等中,可视为仅拍摄了自己孩子的场景。在该状况下,父母往往是脑海中充满了自己的孩子而忘记拍摄其他的场景,因而采用本实施方式的方法,可拍摄变化丰富的图像。
在步骤S27中,在判定结果为脸图像是一个的情况下,接着判定该脸图像是否为规定大小以下(S31)。在判定结果是规定大小以下的情况下,判定为单人图像(S32)。在该情况下,设想是为不靠近被摄体的附近且难以摄影的运动会和学艺会或者发表会等场景。
接下来,与步骤S44一样,对完成摄影的5张进行判定(S33),判定该5张摄影图像例如是否是在3分钟以内拍摄的图像(S34)。在判定结果是在3分钟以内拍摄的图像的情况下,进入到所述步骤S46,判定为典型图像过多。即,在已拍摄的5张是在3分钟以内拍摄的图像的情况下,认为是无意中使相机一直朝向一个被摄体而忘记拍摄其他图像,因而判定为典型图像过多。并且,在判定结果不是在3分钟以内拍摄的图像的情况下,返回到原来的流程。
在步骤S31中的判定结果为是大于规定大小的脸图像的情况下,判定为肖像图像(S35)。即,这是因为,即便是单人的照片,但在以较大的脸图像进行摄影的情况下,被认为是像模特儿摄影会那样纯粹想要专注拍摄该被摄体的情况。
在这种情况下,反映专注的摄影者的意志,使典型图像成为肖像的脸特写图像,但也可以不对典型图像进行判定。这样,还自动判定摄影场景,以防止进行容易陷入该状况的单调摄影,因而可防止在不需要的场景中产生多余的图像而脱离用户注意的状况。当然也可以对典型图像判进行定。
当在步骤S35中进行了肖像判定时,返回到原来的流程。另外,在该情况下,由于过后在记忆中会残留还拍摄了其他照片的事情,因而不直接返回,而与步骤S33以下一样,可以反映规定时间的张数。
这样,在本实施方式中,将摄影图像分类为风景图像(S26)、单人图像(S32)、集体图像(S41)以及肖像图像(S35),对摄影图像的张数进行计数。在步骤S5中,该图像分类的计数结果在显示部8中显示为条形图8f、8g、8h。
并且,在图像分类的子程序中,在以下情况下判定为典型图像过多,即:(1)集体图像在3分钟以内拍摄了5张以上,而且中央的脸图像是相似图像且很有可能是同一人,(2)对于单人图像,最近完成摄影的5张图像是在3分钟以内被拍摄的。
在为肖像摄影的情况下,也可以重复进行这种典型图像的判断。在许多模特儿摄影会中,初学者从相同位置仅拍摄相同构图,然而高级者或接近模特儿,或远离模特儿,不仅改变视场角,而且还改变拍摄角度,设法使表情和姿势加以变化来进行摄影。
即,进行从脸的检测到表情的检测和纵横构图切换的判定,判定距离和变焦的差异,在它们是相同的状况或相同的设定时,可以进行相同的典型图像判定。然而,在本实施方式中的说明中,目的在于明确可根据摄影图像判定摄影场景并据此设定典型图像,因而对这种详细的应用未作图示。
通过执行本实施方式中的流程,不会只看到图5B所示的典型图像,即使是图5A所示的会场的风景和相同人物,也能将图5C所示的更靠近附近的图像等混在一起,制作有变化和故事性的照片集或相册。因此,可防止这样的失败:专心于眼前的兴趣,过度集中于摄影,忘记客观上能使人快乐的变化丰富的摄影。
下面,使用图6说明本发明的第2实施方式。在本发明的第1实施方式中,通过重点使用脸的位置和大小来进行判定,防止了成为典型的无聊图像,在第2实施方式中,还考虑其他要素来进行是否是典型图像的判断。该第2实施方式将第1实施方式中图4所示的图像分类的子程序变更为图6所示的流程,除此以外相同,因而以不同点为中心进行说明。
当进入图6所示的图像分类的子程序时,首先,判定附带记录在摄影图像上的摄影时的变焦位置(S51)。接下来,判定图像中的脸的大小(S52),判定附带记录在摄影图像上的摄影时的摄影镜头的焦点位置(S53)。
然后,使用在步骤S51中求出的变焦位置,判定与规定焦距相比是否是望远侧(S54)。在运动会和学艺会等事件中,为了拍摄远处的自己孩子,往往在望远侧进行摄影,此时,视场角变窄,视野越来越窄,往往变成过后不能使人快乐的信息量少的图像。因此,在望远侧进行了摄影的情况下能成为典型图像候选。
在步骤S54中被判定为望远摄影的情况下,判定在步骤S52中求出的图像的脸的大小是否小于规定大小(S55)。在进行了望远摄影的情况下可成为典型图像的候选,然而也有使用望远镜头的离焦成像的肖像等,在该情况下,在该步骤中,由于脸图像大,因而从典型图像候选中排除。
在步骤S55中的判定结果是脸的大小大于规定大小的情况下,返回到原来的流程,另一方面,在小于规定大小的情况下,作为典型图像的候选(S56)。即,在本实施方式中,在是望远摄影而且脸较小的情况下,设为典型图像的候选。接下来,判定是否拍摄了5张以上典型图像候选(S57)。另外,在本实施方式中,判定典型图像候选是否是5张以上,然而该5张是可根据状况适当变更的值。
在步骤S57中的判定结果是典型图像候选不足5张的情况下,返回到原来的流程,在是5张以上的情况下,判定该5张典型图像候选是否是在规定期间内拍摄的(S58)。在判定结果不是规定期间内的情况下,直接返回到原来的流程,然而在是规定期间内的情况下,设为典型图像(S59)。即,在规定期间内拍摄了5张以上的典型图像候选的情况下,担心变成集中于一件事情而没有变化、过后一看就感到无聊的典型摄影,为了不会变成相同的摄影,而设为比较用图像。
在步骤S54中,在不是望远摄影的情况下,根据变焦位置和焦点位置进行距离判定(S61)。当知道摄影光学系统的变焦位置和焦点位置时,得到被摄体的距离信息。使用这里求出的距离来判定是否比规定距离远(S62)。
在距离信息比规定距离远的情况下,往往成为视点没有变化、过后一看感到无聊的图像,因而在该情况下也设为典型图像的候选。例如,在拍摄站在舞台上的人的情况下,该人是较远距离处10~20m的被摄体,然而在这种状况下,若仅专注于舞台上的摄影,往往忘记拍摄去观看的人和该活动举办地的建筑物等,容易成为单调图像。除了这种舞台上的人物的表情以外,走下舞台时的表情等也发生变化,因此令人愉快,当舞台闭幕时,一时紧张而忘记这种拍照。因此,基于距离来进行场景判定也成为重要的判断。
因此,在步骤S62中的判定结果是比规定距离远的情况下,跳到步骤S56,执行上述步骤,在成为单调图像的情况下设为典型图像。另一方面,在比规定距离近的情况下,返回到原来的流程。
这样,在本发明的第2实施方式中,根据摄影时的焦点位置、变焦位置以及脸的大小,在以下时视为典型图像,即:(1)在望远摄影的情况下,在规定时间内拍摄了规定张数的脸大小为规定大小以下的典型图像候选时,或者(2)在不是望远摄影的情况下,在比规定距离远的情况下,在规定时间内进行了规定张数摄影时。通过作为典型图像来处理,与第1实施方式一样,可对摄影者进行警告和显示等。
如上所述,在本实施方式中,可通过判定脸大小、距离变化、变焦位置来判断图像容易变得单调的状况,从而可防止发生该状况。
在本实施方式中,设想了在学校活动中拍摄舞台上的自己孩子的状况,专门对望远摄影变为典型图像的情况作了说明,然而,即使是广角的摄影场景,当让也有容易变得单调的状况。例如,在聚会等中,当考虑仅拍摄整体气氛时,仅得到杂乱的图像,容易忘记拍摄传达各人是什么样的状态的照片。
在这种状况下,例如经常插入参加者的特写、或者二三人排列的图像这样的将目标缩小到较少成员的图像,从而可进行更令人快乐的具有变化的观赏。在以上图示的例子中,尽管没有描述连这种聚会场景都能对应的流程,然而按照相同的想法可防止在这种场景中拍摄单调图像。
并且,这里主要对基于视场角等的警告作了说明,然而可以根据视场角以外的条件进行建议。在拍摄近距离的花等的场景中,根据图像的特征和距离等判定为拍摄花的场景,例如,可以指示改变光圈或曝光来进行摄影,使得在该摄影中基于被摄场深度的远近感表现和颜色表现具有变化。
下面,使用图7和图8说明本发明的第3实施方式。在本发明的第1和第2实施方式中,使用独立型数码相机,防止了成为典型的无聊图像,在第3实施方式中,与通过网络连接的服务器协作,进行是否是典型图像等的判断,显示摄影图像倾向,并在想要拍摄典型图像的情况下进行警告和显示。
该第3实施方式仅有以下不同点,即:将第1实施方式中的图1所示的结构框图置换为图7所示的框图,并将图2所示的相机控制流程变更为图8所示的流程,因而以不同点为中心进行说明。
第3实施方式的数码相机10与图1所示的数码相机10相比较,不同点仅是具有通信部12。该通信部12通过互联网等网络30与外部的服务器31之间进行收发。相机10通过通信部12将图像数据以及该图像数据附带的日期时间信息(时刻)、脸位置信息、脸大小信息、变焦位置信息、距离信息等数据11发送到服务器31。
在服务器31内设置有场景判定部32和指导信息部33。与第1和第2实施方式一样,场景判定部32分析和判定摄影图像,进行图像分类,分析摄影图像倾向,判定是否成为典型图像摄影。并且,指导信息部33根据场景判定部32的输出,生成用于显示在相机10上的建议(辅助、指导)信息14。这里生成的建议信息14从图中未示出的通信部起经由网络30发送到相机10。
在指导信息部33中生成的建议信息14从服务器31的收发部经由网络30发送到相机10的通信部12。相机10将所接收的建议信息14显示在显示部8上。
使用图8所示的流程图说明与这样构成的服务器31协作的相机10的动作。当启动相机控制流程时,与步骤S1一样,开始实时取景显示(S101)。之后,在步骤S102至步骤S108中进行与图1的步骤S2和步骤S4至步骤S8相同的动作。
在第1实施方式中,在步骤S9中,在相机10内执行图像分类的子程序,而在第3实施方式中,该作业在服务器31内进行。因此,在步骤S109中,将数据11发送到服务器31,并从服务器31接收建议信息14。
当对服务器31结束通信时则返回,从步骤S101起重复地进行动作。然后,使用从服务器31接收的建议信息,在步骤S104中判定是否需要显示摄影辅助,在步骤S105中,从服务器取得应该显示的建议,进行摄影辅助显示。
这样,在本实施方式中,与相机10内所进行的图像分类等的子程序相当的部分是在服务器31中进行。由于可与处理能力高的外部服务器连接并进行各种分析和判定,因而可进行高级图像处理,可向用户提供更适当的建议。
例如在聚会会场设置大屏幕,将这种摄像系统使用在依次发送要显示在大屏幕上的摄影图像的相机等上是非常有效的。映射在这种屏幕上的图像需要成为供许多人快乐欣赏的图像,并且必须避免成为只顾及自己的单调摄影。
不限定于以还具有运算能力的服务器为前提进行了上述说明的被摄体人数和构图,而且可进行基于表情和姿势、以及穿着的服装、被拍摄的人、或者所供应的料理和室内装饰(它们可判断为是近距离且没有人物的图像)进行分类,从而可提醒摄影师注意图像不变得单调。
特别是在摄影前,对之后要摄影的图像是否是典型图像进行判定,可设法避免由于在无意中增加了相同摄影而使观赏者感到厌烦。即,当判定出典型图像时,显示图7所示的建议信息14,可进行如下暗示:不仅人数多的人物的照片,而且针对每个人的肖像、有时包括料理在内等的照片,也需要拍摄成赋予变化的图像。
如以上说明那样,在本发明的各实施方式中,观赏的人可捕捉进行图像观赏的状态并进行与该状态相应的摄影,因而可提供能生成完成率高的内容的摄像装置和摄像系统。
另外,在本实施方式中,作为摄影图像的分类,采用了单人摄影、集体摄影、风景摄影、肖像摄影这4个分类,然而不限于此,可进行适当变更,增加对运动中的被摄体进行拍摄的运动体摄影等其他的摄影等。
并且,在本实施方式中,在显示部8上按所分类的各图像显示摄影频率,并将实时取景显示加以排列后再显示,然而显示方法可进行各种变更,例如,可以仅显示推荐图像,并可以切换摄影频率和实时取景显示。
另外,在本实施方式中,使用数码相机作了说明,然而作为数码相机,当然可以是数字单眼反射相机和小型数码相机,并且也可以是内置于移动电话和移动信息终端(PDA,Personal Digital Assist,个人数字助理)等中的相机。另外,在本实施方式中使用静态图像数据作了说明,然而本发明也能适用于动态图像数据。
另外,本发明不限于上述实施方式,在实施阶段中可在不背离本发明主旨的范围内将构成要素加以变形后具体实施。并且,可通过将上述实施方式所公开的多个构成要素适当组合,来形成各种发明。例如,可以删除实施方式中所示的全部构成要素中的若干构成要素。而且,可以将不同实施方式中的构成要素适当组合。

Claims (14)

1.一种摄像装置,该摄像装置包括以下:
摄像部,其将图像转换成图像数据;
图像分类部,其对上述图像数据进行分类;以及
显示部,其用于根据上述图像分类部的分类结果,显示与作为摄影对象而推荐的图像相关的信息。
2.根据权利要求1所述的摄像装置,上述摄像部将被摄体图像转换成动态图像数据,并根据释放操作将上述图像转换成静态图像数据;上述显示部显示通过上述摄像部拍摄的动态图像,并显示与上述推荐的图像相关的信息。
3.根据权利要求1所述的摄像装置,上述图像分类部将与上述图像数据对应的图像分类为若干个类别;上述显示部进行规定显示,以便拍摄属于上述若干个类别的图像中的属于摄影张数少的类别的图像。
4.根据权利要求1所述的摄像装置,上述摄像部将图像转换成动态图像数据,并根据释放操作将上述图像转换成静态图像数据;该摄像装置还具有相似图像判定部,该相似图像判定部对上述动态图像数据是否与上述图像分类部所分类的规定的基准图像数据相似进行判定,当通过上述相似图像判定部判定为上述动态图像数据与上述基准图像数据相似时,上述显示部显示与上述推荐的图像相关的信息。
5.根据权利要求4所述的摄像装置,当在规定时间内拍摄了属于规定类别的静态图像数据时,上述图像分类部将上述静态图像数据设为上述基准图像数据。
6.根据权利要求4所述的摄像装置,当在规定时间内对属于规定类别的静态图像数据拍摄了规定帧数时,上述图像分类部将上述静态图像数据设为上述基准图像数据。
7.根据权利要求4所述的摄像装置,当根据摄影镜头的规定变焦倍率在规定时间内对静态图像数据拍摄了规定帧数时,上述图像分类部将上述静态图像数据设为上述基准图像数据。
8.根据权利要求4所述的摄像装置,当根据摄影镜头的规定焦距在规定时间内对静态图像数据拍摄了规定帧数时,上述图像分类部将上述静态图像数据设为上述基准图像数据。
9.一种摄像系统,该摄像系统包括以下:
摄像部,其将被摄体图像转换成图像数据;
图像分类部,其对上述图像数据进行分类;以及
显示部,其用于根据上述图像分类部的分类结果,显示与作为摄影对象而推荐的图像相关的信息。
10.根据权利要求9所述的摄像系统,上述摄像系统具有摄像装置和经由通信线路与该摄像装置连接的服务器,上述摄像装置具有上述摄像部和上述显示部,上述服务器具有上述图像分类部。
11.一种摄像方法,在该摄像方法中,
将图像转换成图像数据;
对上述图像数据进行分类;以及
根据上述分类,显示与作为摄影对象而推荐的图像相关的信息。
12.根据权利要求11所述的摄像方法,在该方法中,
记录上述图像数据,
在上述推荐图像的显示中,从记录的上述图像数据中提取基准图像数据,在当前取得的图像数据与上述基准图像数据相似的情况下,进行上述推荐图像的显示。
13.根据权利要求11所述的摄像方法,
上述分类包括风景图像、单人图像、集体图像以及肖像图像中的至少一个分类。
14.一种服务器,该服务器从摄像装置接收图像数据,该摄像装置具有将图像转换成上述图像数据的摄像部,该服务器包括以下:
场景判定部,其进行对接收到的上述图像数据进行分类的图像分类,判定是否重复拍摄了典型图像;
指导信息部,其根据上述场景判定部的判定结果,输出与作为摄影对象而推荐的图像相关的信息;以及
通信部,其将上述信息输出到上述摄像装置。
CN2008101449281A 2007-08-10 2008-08-07 摄像装置、摄像系统以及摄像方法 Expired - Fee Related CN101365061B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210540735.4A CN103037164B (zh) 2007-08-10 2008-08-07 摄像装置以及摄像方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2007209140A JP2009044602A (ja) 2007-08-10 2007-08-10 撮像装置、撮像システム及び撮像方法
JP2007209140 2007-08-10
JP2007-209140 2007-08-10

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201210540735.4A Division CN103037164B (zh) 2007-08-10 2008-08-07 摄像装置以及摄像方法

Publications (2)

Publication Number Publication Date
CN101365061A true CN101365061A (zh) 2009-02-11
CN101365061B CN101365061B (zh) 2013-01-30

Family

ID=40346086

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201210540735.4A Expired - Fee Related CN103037164B (zh) 2007-08-10 2008-08-07 摄像装置以及摄像方法
CN2008101449281A Expired - Fee Related CN101365061B (zh) 2007-08-10 2008-08-07 摄像装置、摄像系统以及摄像方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201210540735.4A Expired - Fee Related CN103037164B (zh) 2007-08-10 2008-08-07 摄像装置以及摄像方法

Country Status (3)

Country Link
US (1) US8212911B2 (zh)
JP (1) JP2009044602A (zh)
CN (2) CN103037164B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102332091A (zh) * 2010-07-13 2012-01-25 佳能株式会社 摄像装置及其控制方法、拍摄支持系统及个体评价方法
CN101897135B (zh) * 2007-12-11 2013-10-30 苹果公司 用于用户简档的图像记录趋势识别
CN104584048A (zh) * 2013-08-16 2015-04-29 金泰宽 在线及离线联动游戏系统及计算机程序
WO2015184896A1 (zh) * 2015-01-09 2015-12-10 中兴通讯股份有限公司 图片分类方法、装置及智能终端
CN105163034A (zh) * 2015-09-28 2015-12-16 广东欧珀移动通信有限公司 一种拍照方法及移动终端
CN106464802A (zh) * 2014-05-21 2017-02-22 谷歌技术控股有限责任公司 增强的图像捕获
CN108985264A (zh) * 2012-08-01 2018-12-11 索尼公司 显示控制装置、显示控制方法和程序
US10250799B2 (en) 2014-05-21 2019-04-02 Google Technology Holdings LLC Enhanced image capture
CN112087574A (zh) * 2014-05-21 2020-12-15 谷歌技术控股有限责任公司 增强的图像捕获

Families Citing this family (156)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8554868B2 (en) 2007-01-05 2013-10-08 Yahoo! Inc. Simultaneous sharing communication interface
KR20100013864A (ko) * 2008-08-01 2010-02-10 삼성디지털이미징 주식회사 디지털 영상 처리기에서 촬영정보 제공 장치 및 방법
JP5402409B2 (ja) * 2009-08-31 2014-01-29 ソニー株式会社 撮影条件設定装置、撮影条件設定方法及び撮影条件設定プログラム
JP5616819B2 (ja) 2010-03-10 2014-10-29 富士フイルム株式会社 撮影アシスト方法、そのプログラム、その記録媒体、撮影装置および撮影システム
KR101794350B1 (ko) * 2011-02-08 2017-12-04 삼성전자주식회사 휴대단말기의 영상 촬영 방법
US8675112B2 (en) * 2011-06-24 2014-03-18 Intellectual Ventures Fund 83 Llc Imaging device providing capture location guidance
EP2732383B1 (en) 2011-07-12 2018-04-04 Snap Inc. Methods and systems of providing visual content editing functions
WO2013053395A1 (en) * 2011-10-13 2013-04-18 Electrolux Home Products Corporation N.V. On screen help with contextual shortcut on an appliance
US11734712B2 (en) 2012-02-24 2023-08-22 Foursquare Labs, Inc. Attributing in-store visits to media consumption based on data collected from user devices
US8972357B2 (en) 2012-02-24 2015-03-03 Placed, Inc. System and method for data collection to validate location data
US10155168B2 (en) 2012-05-08 2018-12-18 Snap Inc. System and method for adaptable avatars
WO2014031899A1 (en) 2012-08-22 2014-02-27 Goldrun Corporation Augmented reality virtual content platform apparatuses, methods and systems
US8775972B2 (en) 2012-11-08 2014-07-08 Snapchat, Inc. Apparatus and method for single action control of social network profile access
US9742713B2 (en) 2013-05-30 2017-08-22 Snap Inc. Apparatus and method for maintaining a message thread with opt-in permanence for entries
US9705831B2 (en) 2013-05-30 2017-07-11 Snap Inc. Apparatus and method for maintaining a message thread with opt-in permanence for entries
US10439972B1 (en) 2013-05-30 2019-10-08 Snap Inc. Apparatus and method for maintaining a message thread with opt-in permanence for entries
KR101706901B1 (ko) 2013-06-24 2017-02-14 미쓰비시덴키 가부시키가이샤 파워 반도체소자의 구동 회로
US9083770B1 (en) 2013-11-26 2015-07-14 Snapchat, Inc. Method and system for integrating real time communication features in applications
US9811245B2 (en) 2013-12-24 2017-11-07 Dropbox, Inc. Systems and methods for displaying an image capturing mode and a content viewing mode
CA2863124A1 (en) 2014-01-03 2015-07-03 Investel Capital Corporation User content sharing system and method with automated external content integration
US9628950B1 (en) 2014-01-12 2017-04-18 Investment Asset Holdings Llc Location-based messaging
US10082926B1 (en) 2014-02-21 2018-09-25 Snap Inc. Apparatus and method for alternate channel communication initiated through a common message thread
US8909725B1 (en) 2014-03-07 2014-12-09 Snapchat, Inc. Content delivery network for ephemeral objects
US9276886B1 (en) 2014-05-09 2016-03-01 Snapchat, Inc. Apparatus and method for dynamically configuring application component tiles
US9396354B1 (en) 2014-05-28 2016-07-19 Snapchat, Inc. Apparatus and method for automated privacy protection in distributed images
US9537811B2 (en) 2014-10-02 2017-01-03 Snap Inc. Ephemeral gallery of ephemeral messages
IL239237B (en) 2014-06-05 2018-12-31 Rotem Efrat Network document extension
US9113301B1 (en) 2014-06-13 2015-08-18 Snapchat, Inc. Geo-location based event gallery
US9225897B1 (en) 2014-07-07 2015-12-29 Snapchat, Inc. Apparatus and method for supplying content aware photo filters
US10055717B1 (en) 2014-08-22 2018-08-21 Snap Inc. Message processor with application prompts
US10423983B2 (en) 2014-09-16 2019-09-24 Snap Inc. Determining targeting information based on a predictive targeting model
US10824654B2 (en) 2014-09-18 2020-11-03 Snap Inc. Geolocation-based pictographs
US11216869B2 (en) 2014-09-23 2022-01-04 Snap Inc. User interface to augment an image using geolocation
US10284508B1 (en) 2014-10-02 2019-05-07 Snap Inc. Ephemeral gallery of ephemeral messages with opt-in permanence
US9723200B2 (en) 2014-10-15 2017-08-01 Microsoft Technology Licensing, Llc Camera capture recommendation for applications
US9015285B1 (en) 2014-11-12 2015-04-21 Snapchat, Inc. User interface for accessing media at a geographic location
CN104410768B (zh) * 2014-11-12 2018-08-10 广州三星通信技术研究有限公司 信息传输方法和装置
US10311916B2 (en) 2014-12-19 2019-06-04 Snap Inc. Gallery of videos set to an audio time line
US9385983B1 (en) 2014-12-19 2016-07-05 Snapchat, Inc. Gallery of messages from individuals with a shared interest
US9854219B2 (en) 2014-12-19 2017-12-26 Snap Inc. Gallery of videos set to an audio time line
US9754355B2 (en) 2015-01-09 2017-09-05 Snap Inc. Object recognition based photo filters
US11388226B1 (en) 2015-01-13 2022-07-12 Snap Inc. Guided personal identity based actions
US10133705B1 (en) 2015-01-19 2018-11-20 Snap Inc. Multichannel system
US9521515B2 (en) 2015-01-26 2016-12-13 Mobli Technologies 2010 Ltd. Content request by location
US10223397B1 (en) 2015-03-13 2019-03-05 Snap Inc. Social graph based co-location of network users
KR102217723B1 (ko) 2015-03-18 2021-02-19 스냅 인코포레이티드 지오-펜스 인가 프로비저닝
US9692967B1 (en) 2015-03-23 2017-06-27 Snap Inc. Systems and methods for reducing boot time and power consumption in camera systems
JP6640460B2 (ja) 2015-03-30 2020-02-05 富士フイルム株式会社 画像撮影装置、画像撮影方法、プログラムおよび記録媒体
US9881094B2 (en) 2015-05-05 2018-01-30 Snap Inc. Systems and methods for automated local story generation and curation
US10135949B1 (en) 2015-05-05 2018-11-20 Snap Inc. Systems and methods for story and sub-story navigation
US10993069B2 (en) 2015-07-16 2021-04-27 Snap Inc. Dynamically adaptive media content delivery
US10817898B2 (en) 2015-08-13 2020-10-27 Placed, Llc Determining exposures to content presented by physical objects
JP6861342B2 (ja) * 2015-09-18 2021-04-21 パナソニックIpマネジメント株式会社 撮像装置および撮像装置とサーバとを含むシステム
US9652896B1 (en) 2015-10-30 2017-05-16 Snap Inc. Image based tracking in augmented reality systems
US9984499B1 (en) 2015-11-30 2018-05-29 Snap Inc. Image and point cloud based tracking and in augmented reality systems
US10474321B2 (en) 2015-11-30 2019-11-12 Snap Inc. Network resource location linking and visual content sharing
US10354425B2 (en) 2015-12-18 2019-07-16 Snap Inc. Method and system for providing context relevant media augmentation
US11023514B2 (en) 2016-02-26 2021-06-01 Snap Inc. Methods and systems for generation, curation, and presentation of media collections
US10679389B2 (en) 2016-02-26 2020-06-09 Snap Inc. Methods and systems for generation, curation, and presentation of media collections
US10285001B2 (en) 2016-02-26 2019-05-07 Snap Inc. Generation, curation, and presentation of media collections
US10339365B2 (en) 2016-03-31 2019-07-02 Snap Inc. Automated avatar generation
US11900418B2 (en) 2016-04-04 2024-02-13 Snap Inc. Mutable geo-fencing system
US11044393B1 (en) 2016-06-20 2021-06-22 Pipbin, Inc. System for curation and display of location-dependent augmented reality content in an augmented estate system
US10638256B1 (en) 2016-06-20 2020-04-28 Pipbin, Inc. System for distribution and display of mobile targeted augmented reality content
US11785161B1 (en) 2016-06-20 2023-10-10 Pipbin, Inc. System for user accessibility of tagged curated augmented reality content
US11876941B1 (en) 2016-06-20 2024-01-16 Pipbin, Inc. Clickable augmented reality content manager, system, and network
US10805696B1 (en) 2016-06-20 2020-10-13 Pipbin, Inc. System for recording and targeting tagged content of user interest
US11201981B1 (en) 2016-06-20 2021-12-14 Pipbin, Inc. System for notification of user accessibility of curated location-dependent content in an augmented estate
US10334134B1 (en) 2016-06-20 2019-06-25 Maximillian John Suiter Augmented real estate with location and chattel tagging system and apparatus for virtual diary, scrapbooking, game play, messaging, canvasing, advertising and social interaction
US10430838B1 (en) 2016-06-28 2019-10-01 Snap Inc. Methods and systems for generation, curation, and presentation of media collections with automated advertising
US9681265B1 (en) 2016-06-28 2017-06-13 Snap Inc. System to track engagement of media items
US10733255B1 (en) 2016-06-30 2020-08-04 Snap Inc. Systems and methods for content navigation with automated curation
US10348662B2 (en) 2016-07-19 2019-07-09 Snap Inc. Generating customized electronic messaging graphics
CN109804411B (zh) 2016-08-30 2023-02-17 斯纳普公司 用于同时定位和映射的系统和方法
US10432559B2 (en) 2016-10-24 2019-10-01 Snap Inc. Generating and displaying customized avatars in electronic messages
EP3535756B1 (en) 2016-11-07 2021-07-28 Snap Inc. Selective identification and order of image modifiers
US10567598B2 (en) * 2016-11-24 2020-02-18 Canon Kabushiki Kaisha Information processing apparatus and method of controlling the same
US10203855B2 (en) 2016-12-09 2019-02-12 Snap Inc. Customized user-controlled media overlays
US11616745B2 (en) 2017-01-09 2023-03-28 Snap Inc. Contextual generation and selection of customized media content
US10454857B1 (en) 2017-01-23 2019-10-22 Snap Inc. Customized digital avatar accessories
US10915911B2 (en) 2017-02-03 2021-02-09 Snap Inc. System to determine a price-schedule to distribute media content
US11250075B1 (en) 2017-02-17 2022-02-15 Snap Inc. Searching social media content
US10319149B1 (en) 2017-02-17 2019-06-11 Snap Inc. Augmented reality anamorphosis system
US10074381B1 (en) 2017-02-20 2018-09-11 Snap Inc. Augmented reality speech balloon system
US10565795B2 (en) 2017-03-06 2020-02-18 Snap Inc. Virtual vision system
US10523625B1 (en) 2017-03-09 2019-12-31 Snap Inc. Restricted group content collection
US10581782B2 (en) 2017-03-27 2020-03-03 Snap Inc. Generating a stitched data stream
US10582277B2 (en) 2017-03-27 2020-03-03 Snap Inc. Generating a stitched data stream
US11170393B1 (en) 2017-04-11 2021-11-09 Snap Inc. System to calculate an engagement score of location based media content
US10387730B1 (en) 2017-04-20 2019-08-20 Snap Inc. Augmented reality typography personalization system
US10212541B1 (en) 2017-04-27 2019-02-19 Snap Inc. Selective location-based identity communication
CN110945555A (zh) 2017-04-27 2020-03-31 斯纳普公司 社交媒体平台上用户位置的区域级别表示
US11893647B2 (en) 2017-04-27 2024-02-06 Snap Inc. Location-based virtual avatars
US10467147B1 (en) 2017-04-28 2019-11-05 Snap Inc. Precaching unlockable data elements
US10803120B1 (en) 2017-05-31 2020-10-13 Snap Inc. Geolocation based playlists
US11475254B1 (en) 2017-09-08 2022-10-18 Snap Inc. Multimodal entity identification
US10740974B1 (en) 2017-09-15 2020-08-11 Snap Inc. Augmented reality system
US10499191B1 (en) 2017-10-09 2019-12-03 Snap Inc. Context sensitive presentation of content
US10573043B2 (en) 2017-10-30 2020-02-25 Snap Inc. Mobile-based cartographic control of display content
US11265273B1 (en) 2017-12-01 2022-03-01 Snap, Inc. Dynamic media overlay with smart widget
US11017173B1 (en) 2017-12-22 2021-05-25 Snap Inc. Named entity recognition visual context and caption data
US10678818B2 (en) 2018-01-03 2020-06-09 Snap Inc. Tag distribution visualization system
US11507614B1 (en) 2018-02-13 2022-11-22 Snap Inc. Icon based tagging
US10979752B1 (en) 2018-02-28 2021-04-13 Snap Inc. Generating media content items based on location information
US10885136B1 (en) 2018-02-28 2021-01-05 Snap Inc. Audience filtering system
US10327096B1 (en) 2018-03-06 2019-06-18 Snap Inc. Geo-fence selection system
KR102574151B1 (ko) 2018-03-14 2023-09-06 스냅 인코포레이티드 위치 정보에 기초한 수집가능한 항목들의 생성
US11163941B1 (en) 2018-03-30 2021-11-02 Snap Inc. Annotating a collection of media content items
US10219111B1 (en) 2018-04-18 2019-02-26 Snap Inc. Visitation tracking system
CN108848300A (zh) * 2018-05-08 2018-11-20 百度在线网络技术(北京)有限公司 用于输出信息的方法和装置
US10896197B1 (en) 2018-05-22 2021-01-19 Snap Inc. Event detection system
US10679393B2 (en) 2018-07-24 2020-06-09 Snap Inc. Conditional modification of augmented reality object
US10997760B2 (en) 2018-08-31 2021-05-04 Snap Inc. Augmented reality anthropomorphization system
US10698583B2 (en) 2018-09-28 2020-06-30 Snap Inc. Collaborative achievement interface
EP3644600B1 (en) * 2018-10-22 2022-06-15 Ricoh Company, Ltd. Imaging device, information processing method, system, and carrier means
US10778623B1 (en) 2018-10-31 2020-09-15 Snap Inc. Messaging and gaming applications communication platform
US10939236B1 (en) 2018-11-30 2021-03-02 Snap Inc. Position service to determine relative position to map features
US11199957B1 (en) 2018-11-30 2021-12-14 Snap Inc. Generating customized avatars based on location information
US11032670B1 (en) 2019-01-14 2021-06-08 Snap Inc. Destination sharing in location sharing system
US10939246B1 (en) 2019-01-16 2021-03-02 Snap Inc. Location-based context information sharing in a messaging system
US11294936B1 (en) 2019-01-30 2022-04-05 Snap Inc. Adaptive spatial density based clustering
US11972529B2 (en) 2019-02-01 2024-04-30 Snap Inc. Augmented reality system
US10936066B1 (en) 2019-02-13 2021-03-02 Snap Inc. Sleep detection in a location sharing system
US10838599B2 (en) 2019-02-25 2020-11-17 Snap Inc. Custom media overlay system
US10964082B2 (en) 2019-02-26 2021-03-30 Snap Inc. Avatar based on weather
US10852918B1 (en) 2019-03-08 2020-12-01 Snap Inc. Contextual information in chat
US11868414B1 (en) 2019-03-14 2024-01-09 Snap Inc. Graph-based prediction for contact suggestion in a location sharing system
US11852554B1 (en) 2019-03-21 2023-12-26 Snap Inc. Barometer calibration in a location sharing system
US11249614B2 (en) 2019-03-28 2022-02-15 Snap Inc. Generating personalized map interface with enhanced icons
US10810782B1 (en) 2019-04-01 2020-10-20 Snap Inc. Semantic texture mapping system
US10560898B1 (en) 2019-05-30 2020-02-11 Snap Inc. Wearable device location systems
US10582453B1 (en) 2019-05-30 2020-03-03 Snap Inc. Wearable device location systems architecture
US10893385B1 (en) 2019-06-07 2021-01-12 Snap Inc. Detection of a physical collision between two client devices in a location sharing system
US11307747B2 (en) 2019-07-11 2022-04-19 Snap Inc. Edge gesture interface with smart interactions
US11821742B2 (en) 2019-09-26 2023-11-21 Snap Inc. Travel based notifications
US11218838B2 (en) 2019-10-31 2022-01-04 Snap Inc. Focused map-based context information surfacing
US11128715B1 (en) 2019-12-30 2021-09-21 Snap Inc. Physical friend proximity in chat
US10880496B1 (en) 2019-12-30 2020-12-29 Snap Inc. Including video feed in message thread
US11429618B2 (en) 2019-12-30 2022-08-30 Snap Inc. Surfacing augmented reality objects
US11343323B2 (en) 2019-12-31 2022-05-24 Snap Inc. Augmented reality objects registry
US11169658B2 (en) 2019-12-31 2021-11-09 Snap Inc. Combined map icon with action indicator
US11228551B1 (en) 2020-02-12 2022-01-18 Snap Inc. Multiple gateway message exchange
US11516167B2 (en) 2020-03-05 2022-11-29 Snap Inc. Storing data based on device location
US11619501B2 (en) 2020-03-11 2023-04-04 Snap Inc. Avatar based on trip
US11430091B2 (en) 2020-03-27 2022-08-30 Snap Inc. Location mapping for large scale augmented-reality
US10956743B1 (en) 2020-03-27 2021-03-23 Snap Inc. Shared augmented reality system
US11503432B2 (en) 2020-06-15 2022-11-15 Snap Inc. Scalable real-time location sharing framework
US11314776B2 (en) 2020-06-15 2022-04-26 Snap Inc. Location sharing using friend list versions
US11483267B2 (en) 2020-06-15 2022-10-25 Snap Inc. Location sharing using different rate-limited links
US11290851B2 (en) 2020-06-15 2022-03-29 Snap Inc. Location sharing using offline and online objects
US11308327B2 (en) 2020-06-29 2022-04-19 Snap Inc. Providing travel-based augmented reality content with a captured image
JPWO2022004305A1 (zh) * 2020-06-30 2022-01-06
US11349797B2 (en) 2020-08-31 2022-05-31 Snap Inc. Co-location connection service
US11606756B2 (en) 2021-03-29 2023-03-14 Snap Inc. Scheduling requests for location data
US11645324B2 (en) 2021-03-31 2023-05-09 Snap Inc. Location-based timeline media content system
US11829834B2 (en) 2021-10-29 2023-11-28 Snap Inc. Extended QR code

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7872670B2 (en) * 2002-04-22 2011-01-18 Sanyo Electric Co., Ltd. Camera performing photographing in accordance with photographing mode depending on object scene
JP3959690B2 (ja) * 2003-10-01 2007-08-15 ソニー株式会社 撮像装置および撮像方法
KR20050060996A (ko) * 2003-12-17 2005-06-22 삼성테크윈 주식회사 디지털 카메라의 제어 방법
JP2005311878A (ja) * 2004-04-23 2005-11-04 Olympus Corp カメラおよびカメラの制御方法
US20050248681A1 (en) * 2004-05-07 2005-11-10 Nikon Corporation Digital camera
JP4423131B2 (ja) * 2004-08-02 2010-03-03 キヤノン株式会社 情報管理装置
US7430369B2 (en) * 2004-08-16 2008-09-30 Canon Kabushiki Kaisha Image capture apparatus and control method therefor
JP4461987B2 (ja) 2004-09-29 2010-05-12 カシオ計算機株式会社 撮影装置及びプログラム
JP2007010898A (ja) * 2005-06-29 2007-01-18 Casio Comput Co Ltd 撮像装置及びそのプログラム
JP4840848B2 (ja) * 2005-09-21 2011-12-21 ソニー株式会社 撮影装置、情報処理方法、並びにプログラム
JP2007159095A (ja) * 2005-11-14 2007-06-21 Olympus Imaging Corp 撮像装置
CN102231801B (zh) * 2005-11-25 2013-07-10 株式会社尼康 电子摄像机及图像处理装置
JP2007166250A (ja) 2005-12-14 2007-06-28 Pentax Corp モニタ表示装置を備えるカメラ
JP2007184733A (ja) * 2006-01-05 2007-07-19 Fujifilm Corp 撮像装置及び撮影モード表示方法
JP4792985B2 (ja) * 2006-01-18 2011-10-12 カシオ計算機株式会社 カメラ装置、撮影条件設定方法、及び、プログラム
JP2007287014A (ja) 2006-04-19 2007-11-01 Seiko Epson Corp 画像処理装置、画像処理方法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101897135B (zh) * 2007-12-11 2013-10-30 苹果公司 用于用户简档的图像记录趋势识别
CN102332091A (zh) * 2010-07-13 2012-01-25 佳能株式会社 摄像装置及其控制方法、拍摄支持系统及个体评价方法
CN108985264A (zh) * 2012-08-01 2018-12-11 索尼公司 显示控制装置、显示控制方法和程序
US11974038B2 (en) 2012-08-01 2024-04-30 Sony Corporation Display control device and display control method for image capture by changing image capture settings
CN104584048A (zh) * 2013-08-16 2015-04-29 金泰宽 在线及离线联动游戏系统及计算机程序
US11290639B2 (en) 2014-05-21 2022-03-29 Google Llc Enhanced image capture
CN106464802A (zh) * 2014-05-21 2017-02-22 谷歌技术控股有限责任公司 增强的图像捕获
US10250799B2 (en) 2014-05-21 2019-04-02 Google Technology Holdings LLC Enhanced image capture
CN112087574A (zh) * 2014-05-21 2020-12-15 谷歌技术控股有限责任公司 增强的图像捕获
US11019252B2 (en) 2014-05-21 2021-05-25 Google Technology Holdings LLC Enhanced image capture
US11575829B2 (en) 2014-05-21 2023-02-07 Google Llc Enhanced image capture
CN112087574B (zh) * 2014-05-21 2023-03-24 谷歌技术控股有限责任公司 增强的图像捕获
US11943532B2 (en) 2014-05-21 2024-03-26 Google Technology Holdings LLC Enhanced image capture
CN105824859A (zh) * 2015-01-09 2016-08-03 中兴通讯股份有限公司 图片分类方法、装置及智能终端
WO2015184896A1 (zh) * 2015-01-09 2015-12-10 中兴通讯股份有限公司 图片分类方法、装置及智能终端
CN105163034B (zh) * 2015-09-28 2018-06-29 广东欧珀移动通信有限公司 一种拍照方法及移动终端
CN105163034A (zh) * 2015-09-28 2015-12-16 广东欧珀移动通信有限公司 一种拍照方法及移动终端

Also Published As

Publication number Publication date
CN103037164A (zh) 2013-04-10
JP2009044602A (ja) 2009-02-26
US20090040324A1 (en) 2009-02-12
CN101365061B (zh) 2013-01-30
US8212911B2 (en) 2012-07-03
CN103037164B (zh) 2016-05-25

Similar Documents

Publication Publication Date Title
CN101365061B (zh) 摄像装置、摄像系统以及摄像方法
US9438806B2 (en) Photographing apparatus and photographing method for displaying combined avatar and map information related to a subject
CN101866106B (zh) 摄像装置
CN102511013A (zh) 摄像装置及其控制方法和程序
US20060039674A1 (en) Image editing apparatus, method, and program
CN102196173A (zh) 成像控制设备与成像控制方法
CN101998057A (zh) 照相机及照相机的显示控制方法
US20060050166A1 (en) Digital still camera
JP2009141516A (ja) 画像表示装置,カメラ,画像表示方法,プログラム,画像表示システム
CN102263896A (zh) 图像处理单元、图像处理方法和程序
WO2015145769A1 (ja) 撮像装置、情報処理装置、撮影補助システム、撮影補助プログラム及び撮影補助方法
CN103369244A (zh) 图像合成设备、图像合成方法
CN113655887A (zh) 一种虚拟现实设备及静态录屏方法
JP6529108B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
CN104144285B (zh) 拍摄设备、拍摄辅助方法、显示装置及显示方法
JP2008066886A (ja) カメラ、通信制御装置、撮影技術援助システム、撮影技術援助方法、プログラム
Highton Virtual reality photography: creating panoramic and object images
JP4870503B2 (ja) カメラ、ブログ管理システム
WO2017022296A1 (ja) 情報管理装置及び情報管理方法、並びに映像再生装置及び映像再生方法
JP5032363B2 (ja) 画像表示方法
Nuska The DSLR revolution and its impact on documentary and ethnographic filmmaking
JP2009100371A (ja) 画像表示装置及び記録再生装置
TWM577213U (zh) Movable camera
JP5509287B2 (ja) 再生表示装置、再生表示プログラム、再生表示方法、および画像処理サーバー
JP2012029119A (ja) 表示制御装置、カメラ、および、表示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160222

Address after: Tokyo, Japan, Japan

Patentee after: Olympus Corporation

Address before: Tokyo, Japan

Patentee before: Olympus Imaging Corp.

Patentee before: Olympus Corporation

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130130

Termination date: 20190807

CF01 Termination of patent right due to non-payment of annual fee