CN107925724B - 在具有相机的设备中支持摄影的技术及其设备 - Google Patents

在具有相机的设备中支持摄影的技术及其设备 Download PDF

Info

Publication number
CN107925724B
CN107925724B CN201680049317.1A CN201680049317A CN107925724B CN 107925724 B CN107925724 B CN 107925724B CN 201680049317 A CN201680049317 A CN 201680049317A CN 107925724 B CN107925724 B CN 107925724B
Authority
CN
China
Prior art keywords
face
photographing range
camera
signal indicating
photographing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201680049317.1A
Other languages
English (en)
Other versions
CN107925724A (zh
Inventor
乌瑟汝·维加姆
阿普尔·科恩瑟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN107925724A publication Critical patent/CN107925724A/zh
Application granted granted Critical
Publication of CN107925724B publication Critical patent/CN107925724B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/17—Image acquisition using hand-held instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G06V40/173—Classification, e.g. identification face re-identification, e.g. recognising unknown faces across different face tracks
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • G08B5/36—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Electromagnetism (AREA)
  • Studio Devices (AREA)

Abstract

本公开提供了一种用于在具有相机的设备中支持摄影的方法，该方法包括以下操作：当相机被驱动时，识别相机的摄影区域内的对象的面部；基于关于所识别的面部的信息，确定指示改变摄影区域的信号；以及基于该确定，输出指示改变摄影区域的信号。

Description

在具有相机的设备中支持摄影的技术及其设备
技术领域
本公开涉及一种用于在装备有相机的装置中支持拍照的方法，并且更具体地涉及一种用于提供提示以便可以拍摄改进的自拍照或快照的支持方法。
背景技术
随着诸如智能手机或平板电脑之类的具有数码相机的用户设备(UE)最近变得流行，使用具有相机的UE拍摄用户本人(即自拍)的照片已成为常规。
图1示出了用户以自拍的形式拍摄的示例性照片。
参考图1，可以注意到已经拍摄了照片，包括与画面内的对象相对应的用户的全部或部分面部。
在一般摄影中，用户拍摄照片，通过取景器检查对象。因此，可以拍摄出对象位于画面中适当位置的照片。同时，当用户将具有相机的UE的镜头指向用户时，用户通过按下拍摄按钮进行自拍。也就是说，用户在不通过取景器适当地检查对象的情况下进行自拍。结果，拍摄出了对象不完整的照片，例如，对象可能不完全或部分地包括在画面中，或者可能没有位于适当的位置。
发明内容
技术问题
本公开提供了一种仅通过一次点击(或一次按钮输入)来启动包括预期对象的自拍照或快照的方法。
此外，本公开提供了一种用于防止具有相机的用户设备(UE)拍摄对象的全部或部分不包括在拍照范围内，或者对象被布置在适当位置的自拍照或快照的方法。
此外，本公开提供了一种用于防止拍照范围内包括未知人物的拍摄的方法。
技术方案
在本发明的一个方面中，一种用于在装备有相机的装置中支持拍照的方法包括：当驱动所述相机时，识别所述相机的拍照范围内的对象的面部；基于关于所识别的面部的信息来确定指示改变所述拍照范围的信号；以及基于所述确定来输出指示改变所述拍照范围的信号。
在本发明的另一方面中，一种装备有相机的用于支持拍照的装置包括：相机，用于识别拍照范围内的对象的面部；以及控制器，用于基于关于所识别的面部的信息来确定指示改变所述拍照范围的信号，并且基于所述确定来控制指示改变所述拍照范围的信号的输出。
有益效果
根据本公开，用户可以容易地自拍。此外，用户可以简单地通过一次点击(或一次按钮输入)来拍摄其中对象被布置在拍照范围内的适当位置的照片。
根据本公开，用户可以拍摄包括对象的完整自拍，而不管用户是专家还是新手。
此外，根据本公开，用户可以拍摄其中仅通过一次点击排除非预期对象(例如，未知的人)的照片。
附图说明
图1是示出用户以自拍的形式拍摄的照片的示例性视图；
图2是示出根据本公开的装备有相机的用户终端(UE)的面部识别处理的示例性视图；
图3是示出根据本公开的用于在装备有相机的UE中支持基于面部识别的优选自拍拍摄的方法的示例性视图；
图4是示出根据本公开的在装备有相机的UE中的显示器上输出指示改变拍照范围的视觉信号的示例性视图；
图5是示出根据本公开在装备有相机的UE中输出通过发光二极管(LED)闪光灯指示改变拍照范围的视觉信号的示例性视图；
图6是示出了根据本公开的通过装备有相机的UE中的扬声器输出指示改变拍照范围的声音信号的示例性视图；
图7是示出根据本公开的通过装备有相机的UE中的振动器输出指示改变拍照范围的振动信号的示例性视图；
图8是示出根据本公开的在装备有相机的UE中识别拍照范围内遗漏的面部并输出指示改变拍照范围的信号的处理的示例性视图；
图9是示出根据本公开的例如在装备有相机的UE中用于识别拍摄实际照片的拍照范围内遗漏的面部的方法的示例性视图；
图10是示出了根据本公开的使用装备有相机的UE中的UE的变焦功能来识别遗漏的面部并进行自拍的方法的示例性视图；
图11是示出根据本公开的在装备有相机的UE中识别拍照范围内的未知面部并输出指示改变拍照范围的信号的处理的示例性视图；
图12是示出根据本公开的通过计算装备有相机的UE中的z-距离和z-间隙来确定位于拍照范围内的未知面部的候选的处理的示例性视图；
图13是示出根据本公开的在装备有相机的UE中获取在拍照范围内识别的面部的z-距离的概念的示例性视图；
图14是示出根据本公开的在装备有相机的UE中在拍照范围内识别未知面部的情况的示例性视图；
图15是示出根据本公开的在装备有相机的UE中在拍照范围内识别未知面部的情况的另一示例性视图；
图16是示出根据本公开的在装备有相机的UE中在拍照范围内识别未知面部的情况的另一示例性视图；
图17是示出在根据本公开的装备有相机的UE中在拍照范围内识别未知面部并将其应用于广角镜头的情况的示例性视图；
图18是示出根据本公开的在装备有相机的UE中识别拍照范围内的剪切面部并输出指示改变拍照范围的信号的处理的示例性视图；
图19是示出根据本公开的在装备有相机的UE中在拍照范围内识别剪切面部并且确定指示改变拍照范围的信号的情况的示例性视图；
图20是示出根据本公开的例如在装备有相机的UE中用于识别拍摄实际照片的拍照范围内的剪切面部的方法的示例性视图；
图21是示出根据本公开的用于在装备有相机的UE中在三种情况下顺序地确定改变拍照范围的需要的方法的示例性流程图；
图22是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的示例性视图；
图23是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图；
图24是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图；
图25是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图；
图26是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图；
图27是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图；和
图28是示出根据本公开的UE的结构的框图。
实施本发明的模式
下面将参考附图详细描述本公开的实施例。将避免对本公开的通常已知的功能或结构的详细描述，以免其模糊本公开的主题。尽管在本公开中使用的术语是考虑到本公开中的功能来定义的，但是可以根据用户或操作者的意图或习惯来改变这些术语。因此，应当理解本公开，而不仅仅是通过所使用的实际术语，而是通过位于其中的每个术语的含义。
在详细描述本公开之前，本公开中使用的一些术语可以被解释为但不限于以下含义。
在本公开中，“装备有相机的用户设备(UE)”是指具有数字相机的任何类型的装置，即“装备有相机的装置”。例如，UE可以是智能手机、平板电脑和小型相机中的任何一个。UE可以被称为移动站(MS)、移动设备(ME)、设备、终端等。
在本公开中，拍照范围是指装备有相机的UE要捕捉的目标范围。当用户按下拍照范围的拍摄按钮时，用户可以拍摄拍照范围的照片。拍照范围可以用术语画面代替。
在本公开中，遗漏的面部是指期望包括但实际上不包括在拍照范围内的面部。
在本公开中，未知面部是指拍摄照片的用户不知道的人的面部。
在本公开中，剪切面部是指不完全地而是部分地包括在拍照范围内的面部。
本公开提出了一种用于在拍照范围内识别被摄对象的面部(面部识别)并且使用通过装备有相机的UE识别出的面部的信息来发送指示改变拍照范围的信号，以便用户可以改变相机的拍照范围的方法。
图2是示出根据本公开的装备有相机的UE中的面部识别处理的示例性视图。
面部识别是一种在照片中识别人的技术。图2(a)和2(b)示出了在装备有相机的UE中的相机的拍照范围内识别对象(即，人)的面部的示例性操作。在图2(a)或图2(b)中，在人的面部周围绘制的正方形(例如，200和202)表示在装备有相机的UE中在拍照范围内识别出人的面部。可以在每个面部角度识别人的面部。可以基于人的眼睛、嘴、鼻子、颧骨或下巴的相对位置或形状来唯一地识别拍照范围内的每个人(即面部)。图2(c)示出了一个人在不同面部角度的识别。在面部周围绘制的正方形中的十字形点210、212和214表示由面部识别技术识别的眼睛和嘴的位置。该面部识别技术可用于确定适当地拍摄包括所有对象的照片所需的操作。这里将避免面部识别技术的具体实现的详细描述，以免其模糊本公开的主题。
图3是示出根据本公开的用于在装备有相机的UE中支持基于面部识别的优选自拍拍摄的方法的示例性视图。
UE的相机可以由例如相机应用程序驱动。一旦UE的相机被驱动，UE就对相机(300)的拍照范围内的对象执行面部识别。对象可以是例如人。
UE可以基于面部识别操作300的结果来确定当前拍照范围是否需要改变。如果当前拍照范围需要改变，则UE可以确定指示改变拍照范围的信号(305)。例如，UE可以例如通过检查所识别的面部是否完全包括在UE的拍照范围内来确定需要改变拍照范围。以这种方式，UE可以防止照片包括剪切的面部。在另一示例中，UE可以通过将关于在前一拍照范围内识别的面部的信息与关于在当前拍照范围内识别的面部的信息进行比较来确定需要改变拍照范围。因此，UE可以在照片中包括遗漏的面部。在另一示例中，UE可以通过计算包括在拍照范围内的面部的三维(3D)距离之间的差来确定需要改变拍照范围。因此，UE可以消除照片拍照范围内的未知面部(对要进行自拍的用户而言未知的人的面部)。
UE可以基于所作出的确定输出指示改变拍照范围的信号(305)。在本公开中，“信号”可以由术语“提示”代替。指示改变拍照范围的信号可以以可以在UE中输出的各种形式来表示。例如，指示信号可以采取通过显示器、发光二极管(LED)闪光灯等输出的可视信号的形式，通过扬声器输出的声音信号或通过振动器输出的振动信号的形式。
此外，在响应于(由用户)指示改变拍照范围的信号而出现拍照范围的改变时，UE可以通过再次执行面部识别操作300，确定是否需要改变拍照范围的操作305和输出指示改变拍照范围的信号的操作310中的至少一个来支持优选自拍拍摄。
图4是示出根据本公开的在装备有相机的UE中的显示器上指示改变拍照范围的视觉信号的输出的示例性视图。
即，装备有根据本公开的相机的UE可以通过显示器输出图4的示例中所示的图像或图标形式的视觉信号。观看可视信号的用户可以执行对应于可视信号的操作，从而可以调整UE的相机面对的方向。结果，相机的拍照范围可以改变。
图4(a)示出了指示在与用户相反的方向上翻动UE左端的动作，即指示“左转”的示例性信号。
图4(b)示出了指示在与用户相反的方向上翻动UE的右端的动作，即指示“右转”的示例性信号。
图4(c)示出了指示在与用户相反的方向上翻转UE的顶端的动作，即指示“上翻”的示例性信号。
图4(d)示出了指示在与用户相反的方向上翻动UE的底端的动作，即指示“下翻”的示例性信号。
图4(e)示出了指示转动垂直UE到水平方向的动作，即指示“旋转90-水平”或“翻转”的示例性信号。
图4(f)示出了指示转动水平UE到垂直方向的动作，即指示“旋转90-垂直”或“翻转”的示例性信号。
图4(g)示出了指示将UE向右移动(不旋转)的动作，即指示“向右移动”的示例性信号。
图4(h)示出了指示将UE向左移动(不旋转)的动作，即指示“向左移动”的示例性信号。
图5是示出了根据本公开的在装备有相机的UE中输出通过LED闪光灯指示改变拍照范围的视觉信号的示例性视图。
图5(a)至图5(j)示出装备有相机的UE包括紧邻相机透镜的两个LED闪光灯500和510的示例性情况。
图5(a)至图5(g)示出了基于LED闪光灯的颜色指示改变拍照范围的示例性信号，以及图5(h)至图5(j)示出了根据LED闪光灯的闪烁速率指示改变拍照范围的示例性信号。
图5(a)是示出了LED闪光灯500和510都关闭并且因此UE不向用户输出信号的状态的示例性视图。
图5(b)示出了当垂直布置两个LED闪光灯时，通过将(例如)对应于UE将被移动的向下方向的“较低”LED闪光灯(例如)变为红色来指示“向下移动”的示例性信号。图5(c)示出了通过将“较低”LED闪光灯(例如)变为绿色指示用户已经适当地改变拍照范围的示例性信号。
图5(d)示出了当两个LED闪光灯水平布置时，通过将(例如)对应于UE将要移动的左方向的“左”LED闪光灯(例如)变为红色指示“向左移动”的示例性信号。图5(e)示出了通过将“左”LED闪光灯(例如)变为绿色指示用户已经适当地改变拍照范围的示例性信号。
图5(f)示出了当两个LED闪光灯水平布置时，通过将(例如)对应于UE将被移动的右方向的“右”LED闪光灯(例如)变为红色来指示“向右移动”的示例性信号。图5(g)示出了通过将“右”LED闪光灯(例如)变为绿色指示用户已经适当地改变拍照范围的示例性信号。
图5(h)示出了当垂直布置两个LED闪光灯时，通过以红色闪烁(例如)对应于UE将要移动的向下方向的“较低”LED闪光灯(例如)指示“向下移动”的示例性信号。如果用户已经响应于图5(h)的指示信号在优选方向上移动了UE，UE可以通过增加或减少“较低”LED闪光灯的闪烁速率(闪烁速度)来指示优选的改变。例如，如图5(i)中所示，如果通过降低闪烁速率来指示进行了优选改变，则可以通过(例如)完全关闭图5(h)中所示的闪烁的“较低”LED闪光灯来指示用户完成拍照范围的适当改变。例如，如图5(j)中所示，如果通过增加闪烁速率来指示进行了优选改变，则可以通过(例如)完全打开图5(h)中所示的闪烁的“较低”LED闪光灯来指示用户完成拍照范围的适当改变。
图6是示出了根据本公开的通过装备有相机的UE中的扬声器输出指示改变拍照范围的声音信号的示例性视图。
例如，UE可以通过扬声器600输出语音信号，诸如“左转”、“右转”、“上翻”、“下翻”、“向左移动”、“向右移动”、“向上移动”、“向下移动”、“向后移动”、“向前移动”、“旋转90度”、“放大”或“缩小”。在另一示例中，UE可以向用户输出诸如嘟嘟声的声音信号。这里，要指示的动作可以通过区分嘟嘟声的数量而彼此区分。
图7是示出了根据本公开的通过装备有相机的UE中的振动器输出指示改变拍照范围的振动信号的示例性视图。
根据本公开，由于UE在壳体的四个端部中的每一个端部处具有振动器，所以这四个端部可以单独地产生振动。即，UE可以通过局部振动向用户指示改变拍照范围的动作。
图7(a)示出了示例性振动信号，其指示在与用户相反的方向上翻动UE的右端的动作，即，通过驱动右端振动器来指示“右转”，从而在UE中的UE的右端产生振动信号。
图7(b)示出了示例性振动信号，其指示在与用户相反的方向上翻动UE的左端的动作，即，通过驱动左端振动器来指示“左转”，从而在UE中的UE的左端产生振动信号。
图7(c)示出了示例性振动信号，该示例性振动信号指示在与用户相反的方向上翻动UE的底端的动作，即，通过驱动底端振动器来指示“下翻”，从而在UE中的UE的底端产生振动信号。
图7(d)和图7(e)示出了指示90度旋转的示例性振动信号，其通过驱动UE的四个端部中的两个相邻端部处的振动器而产生。例如，图7(d)示出了示例性振动信号，其指示通过在底端和右端同时输出振动信号而转动垂直UE到水平方向的动作，即“旋转90-水平”。例如，图7(e)示出了示例性振动信号，其指示通过在底端和左端同时输出振动信号而转动水平UE到垂直方向的动作，即“旋转90-垂直”。
现在，将给出根据本公开的用于确定在装备有相机的UE的支持方法中是否需要改变拍照范围的操作305的详细描述。
图8是示出根据本公开的在装备有相机的UE中识别拍照范围内的遗漏的面部并输出指示改变拍照范围的信号的处理的示例性视图。
UE的相机可以由例如相机应用程序驱动。一旦UE的相机被驱动，UE就对相机的拍照范围内的对象执行面部识别(800)。
UE计算关于所有识别的面部的信息(805)。关于面部的信息可以是例如面部周围的识别面部的数量，并且可以表示为辐射图。可以为每个唯一识别的面部计算辐射图。下面将参照图9详细描述辐射图.
UE可以基于关于所识别的面部的信息来确定在拍照范围内是否存在遗漏的面部(810)。可以通过与存储在UE中的关于在先前拍照范围内识别的面部的信息进行比较来确定在拍照范围内是否存在遗漏的面部。也就是说，UE可以将关于在前一拍照范围内识别的面部的信息(例如，辐射图)与关于在当前拍照范围内识别的面部的信息进行比较，并且如果这两个信息不匹配，则UE可以确定在当前拍照范围内存在遗漏的面部。如果UE最初执行面部识别，则没有要与当前拍照范围进行比较的拍照范围。因此，可以不执行操作810。
UE可以根据确定结果确定需要改变拍照范围，并且确定指示改变拍照范围的信号(815)。例如，如果确定在当前拍照范围的左侧中存在遗漏面部，则UE可以以各种可用形式(视觉信号、声音信号或振动信号)中的任一种来确定指示“左转”或“向左移动”的信号，这是因为UE需要将拍照范围扩展到左侧。
随后，UE可以输出所确定的信号(820)。可选地，UE可以以具有相同含义的两种或多种形式同时输出指示信号。例如，当使用UE的后置相机拍摄自拍时，用户不能在显示器上观看视觉信号。因此，可以分别通过LED闪光灯和扬声器同时输出视觉信号和语音信号，以便提高用户的感知。
可选地，UE还可以在输出指示改变拍照范围的信号之后确定用户是否已经改变了拍照范围(825)。在这种情况下，UE可以通过再次执行操作800至操作820来支持改进的自拍拍摄。
图9是示出根据本公开的例如在装备有相机的UE中拍摄实际照片的用于识别拍照范围内的遗漏的面部的方法的示例性视图。
当用户使用UE的前置相机或后置相机拍摄照片时，UE可以通过面部识别通知用户遗漏的面部来提示用户调整相机。
UE可以唯一地识别包括在拍照范围内的所有面部，并且存储关于所识别的面部的信息。例如，UE可以以辐射图的形式为每个识别的面部计算辐射方向数。
在图9(a)中，在拍照范围的一部分中识别的三个面部表示为三个正方形900、902和904。
图9(b)是示出关于UE唯一识别的面部900的信息的计算的示例性视图。例如，UE可以以辐射图910的形式计算在面部900周围识别的其他面部的数量。图9(b)所示的辐射图910表示在面部900的10点方向上存在一个识别面部，并且在面部900的2点方向上存在一个识别面部。
图9(c)示出了通过比较关于在两个拍照范围内识别的面部的信息来确定遗漏的面部的存在的原理。
例如，假设右图像930表示先前拍照范围，左图像920表示当前拍照范围。在前一拍照范围内识别的面部940的辐射图944指示在面部940的9点钟方向和4点钟方向中的每一个方向上存在一个面部。在当前拍照范围920中识别的面部940的辐射图942指示仅在面部940的4点钟方向上存在一个面部。因此，UE可以确定在当前拍照范围920中已经遗漏了一个面部922。
在另一示例中，假设左图像920表示先前的拍照范围，右图像930表示当前的拍照范围。在先前的拍照范围920中识别的面部950的辐射图952指示在面部950的8点钟方向和3点钟方向中的每一个方向上存在一个面部。在当前拍照范围930中识别的面部950的辐射图954指示仅在面部950的8点钟方向上存在一个面部。因此，UE可以确定在当前拍照范围930中已经遗漏了一个面部932。
因此，UE可以确定需要改变拍照范围以包括遗漏的面部922或932，并且输出指示改变拍照范围的相应信号。
图10是示出根据本公开的使用装备有相机的UE中的UE的变焦功能来识别遗漏的面部并拍摄自拍的方法的示例性视图。
在通过面部识别确定在第一拍照范围1000的左侧中存在遗漏面部之后，UE可以输出指示改变拍照范围(向左移动)的第一信号。第二拍照范围1010是根据第一信号调整相机之后的拍照范围。在通过面部识别确定在第二拍照范围1010的右侧中存在遗漏的面部之后，UE可以输出指示缩小的第二信号而不是指示右移动的信号，因为UE知道在左侧中可能存在已经遗漏的面部。例如，第二拍照范围1010是两倍缩放的结果，而第三拍照范围1020是1.5倍缩放的结果。可选地，UE可以通过直接“缩小”镜头来拍摄拍照范围，而不向用户输出指示“缩小”的信号。
图11是示出根据本公开的在装备有相机的UE中识别拍照范围内的未知面部并输出指示改变拍照范围的信号的处理的示例性视图。
UE的相机可以由例如相机应用程序驱动。一旦UE的相机被驱动，则UE可以对相机的拍照范围内的对象执行面部识别(1100)。
UE计算所识别的面部之间的3D距离(即z轴距离)和二维(2D)距离(即x轴间隙)(1105)。UE可以使用z轴距离和x轴间隙来确定“未知”的面部的候选。可选地，使用z轴距离和x轴间隙来确定未知的面部的候选的操作可以包括图12的示例中示出的操作。
UE可以基于计算出的z轴距离和x轴间隙来确定在拍照范围内是否存在未知的面部(1110)。例如，UE可以确定距特定面部(例如，最靠近拍照范围中心的面部)的z轴距离大于预定阈值的面部是“未知的面部”。在另一示例中，UE可以确定距特定面部(例如，最靠近拍照范围中心的面部)具有最大z轴距离的面部是“未知的面部”。例如，UE可以确定与特定面部(例如，最靠近拍照范围中心的面部)的x轴间隙大于预定阈值的面部是“未知的面部”。在另一示例中，UE可以确定具有距特定面部(例如，最靠近拍照范围中心的面部)的最大x轴间隙的面部是“未知的面部”。在另一个示例中，UE可以定义一个或多个群集，每个群集是所识别的面部内的一组基准点，并且确定具有少量基准点的群集内的面部是未知的面部。将参照图16更详细地描述使用群集来确定未知的面部的方法.
UE可以根据确定结果确定需要改变拍照范围，并且确定指示改变拍照范围的信号(1115)。例如，如果UE确定在当前拍照范围的左侧中存在遗漏的面部，则UE可以以各种可用形式(视觉信号、声音信号或振动信号)中的任一种确定指示“右转”或“向右移动”的信号，这是因为UE需要将拍照范围扩展到左侧。
为了帮助理解所指示的方向，面部在拍照范围内的位置与要自拍的用户相反。因此，从用户的观点来看，指示信号指示在与遗漏的面部的位置(左侧)相反的方向上“右转”或“向右移动”。在本公开中，可以基于这种理解来描述由指示信号指示的方向。
随后，UE可以输出所确定的信号(1120)。可选地，UE可以以具有相同含义的两种或多种形式同时输出指示信号。
可选地，UE还可以在输出指示改变拍照范围的信号之后确定用户是否已经改变了拍照范围(1125)。在这种情况下，UE可以通过再次执行操作1110至操作1120来支持改进的自拍拍摄。
图12是示出根据本公开的通过计算装备有相机的UE中的z-距离和z-间隙来确定位于拍照范围内的未知的面部的候选的处理的示例性视图。
一旦UE通过驱动相机识别面部，则UE可以从相机获取所识别面部之间的z轴距离(1200)。将参考图13的示例描述获取UE中识别的面部的z轴距离的概念.
UE可以获取在拍照范围内识别的面部的直角坐标(1205)。UE使用直角坐标获取面部之间的x轴间隙(1210)。UE从拍照范围内的面部中确定具有最大x轴间隙的面部(1215)。
UE可以按照其值的顺序排列所获取的z轴距离(1225)。UE确定具有最大z轴距离或大于预定阈值的z轴距离的面部(1230)。
UE可以确定具有所确定的最大x轴间隙的面部、具有所确定的最大z轴距离的面部或具有大于预定阈值的z轴距离的面部作为未知的面部的候选(1220)。
图13是示出根据本公开的在装备有相机的UE中获取在拍照范围内识别的面部的z轴距离的概念的示例性视图。
在拍照范围内识别的面部1300内的一个基准点1302的2D直角坐标可以表示为(XImi k，YImi k)。这里，XImi k表示第k个面部的第i个基准点的x坐标，而YImi k表示第k个面部的第i个基准点的y坐标。UE可以将面部1300的基准点1302的2D直角坐标转换为真实空间中面部1310的基准点1312的3D直角坐标(XRi k、YRi k、ZRi k)。这里，XRi k表示第k个面部的第i个基准点的x坐标，YRi k表示第k个面部的第i个基准点的y坐标，ZRi k表示第k个面部的第i个基准点的z坐标。
UE可以使用拍照范围内的面部1300的z坐标来计算面部之间的z轴距离。
例如，UE可以以下述方式执行从2D直角坐标计算3D z坐标的处理。首先，UE可以执行生成确定z坐标所需的模型的预处理。预处理可以包括收集2D基准点和3D位置训练数据的操作，以及从3D训练数据建立模型的操作。随后，UE在以下过程中使用该模式确定z坐标。首先，UE通过相机识别面部。其次，UE检测识别出的面部的基准点的2D直角坐标。第三，UE向模型输入2D直角坐标。第四，UE可以从模型获取基准点的z坐标。
图14是示出根据本公开的在装备有相机的UE中在拍照范围内识别未知的面部的情况的示例性视图。
图14的左图像是UE的示例性当前拍照范围。由UE在拍照范围内识别的面部在右图像中表示为正方形1420、1422和1424。
UE计算在拍照范围内识别的面部的z轴距离。第一面部1420与第二面部1422之间的2D平面上的x轴间隙类似于第一面部1420与第三面部1424之间的2D平面上的x轴间隙。然而，可以注意到，第三面部1424在3D空间中远离第一面部1420。3D空间中的距离可以基于x轴1400上的z轴距离来确定。即，第一面部1420与第三面部1424之间的z轴距离1404相对于第一面部1400与第二面部1402之间的z轴距离1402大。
即使第三面部1424和第一面部1420在相同的z轴1420上，如果第三面部1424具有较大的z轴距离，这意味着第三面部1424在实际3D空间中远离第一面部1420。因此，用户(即，第一面部1420)很可能不知道第三面部1424，并且UE可以确定第三面部1424是未知的面部。这里，为了消除拍照范围左侧的未知的面部1424，UE可以输出例如指示拍照范围的左移动的信号1410。
图15是示出根据本公开的在装备有相机的UE中在拍照范围内识别未知的面部的情况的另一示例性视图。
图15的左图像是UE的示例性拍照范围。由UE在拍照范围内识别的面部在右图像中表示为正方形1520、1522、1524和1526。
UE计算在拍照范围内识别的面部的x轴间隙。第一面部1520与第二面部1522之间的2D平面上的x轴间隙1502类似于第二面部1520与第三面部1524之间的2D平面上的x轴间隙1504。然而，可以注意到，第一面部1520与第四面部1526之间的x轴间隙1500相对较大。
如果第四面部1526具有如上所述的相对大的x轴间隙，则UE可以确定第四面部1526是未知的面部。因此，为了消除拍照范围右侧的未知的面部1526，例如，UE可以输出指示拍照范围右转的信号1510。
图16是示出根据本公开的在装备有相机的UE中在拍照范围内识别未知的面部的情况的另一示例性视图。
UE可以基于基准点的2D平面位置的接近度将基准点聚集在所识别的面部内，并且确定具有少量基准点的群集内的面部是未知的面部。
具体地，UE可以感测所识别的面部的基准点。图16(a)示出了通过UE的相机识别基准点来确定面部周围的正方形的示例性过程。也就是说，UE可以通过以1600、1602和1604的顺序识别基准点来确定围绕面部的正方形。
UE可以设置基准点聚集为群集的区域。图16(b)示出了示例性群集1610、1612、1614和1616，每个群集都是UE已经在拍照范围内识别的面部的基准点集合。
UE可以将2D平面上彼此靠近的群集合并成一个群集。图16(c)示出了群集1610、1612和1614已经合并到其中的示例性群集1620。在此，由于在群集1616附近不存在群集，所以群集1616被保持为新群集1622而不被合并。
UE可以确定包括在群集1622中的面部1636，该面部1636包括群集1620与1622之间的较少数量的基准点。图16(d)示出了将所识别的面部1630、1632、1634和1636中的面部1636确定为未知的面部的示例。
图17是示出在根据本公开的装备有相机的UE中在拍照范围内识别未知的面部并将其应用于广角镜头的情况的示例性视图。
本公开的未知面部识别方法还可应用于通过移动UE在广角图片(如全景图片)中拍摄的广角自拍。图像1700是通过广角自拍拍摄的多个人物的照片。
根据本公开，在由广角自拍拍摄生成的图像1710中，可以将右上角的面部1712确定为未知的面部。例如，由于面部1712具有最大z轴距离，所以面部1712可以被确定为未知的面部。在此，UE可以通过图像1710的后处理来自动裁剪未知的面部1712。因此，UE可以生成不包括未知的面部的新的广角自拍图片1720。
图18是示出根据本公开的在装备有相机的UE中识别拍照范围内的剪切面部并输出指示改变拍照范围的信号的处理的示例性视图。
UE的相机可以由例如相机应用程序驱动。一旦UE的相机被驱动，UE就对拍照范围内的对象执行面部识别(1800)。
UE确定围绕所识别的每个面部的正方形区域(1805)。正方形可以被确定为甚至包括缓冲区域以围绕诸如毛发或耳朵以及面部的区域。
UE可以通过检查与面部相对应的正方形是否完全包括在拍照范围内来确定剪切面部是否包括在其中(1810)。例如，UE可以基于与包括在拍照范围内的识别出的面部相对应的正方形的比率来确定面部是否已经被切断。也就是说，如果在拍照范围内仅包括小于阈值比(例如，0.95)的特定正方形的一部分，则UE可以确定对应于特定正方形的面部是剪切面部。
UE可以根据确定结果确定需要改变拍照范围，并且确定指示改变拍照范围的信号(1815)。例如，如果确定在当前拍照范围的左侧中存在剪切面部，则UE可以以各种可用形式(视觉信号、声音信号或振动信号)中的任一种来确定指示“左转”或“向左移动”的信号，这是因为拍照范围需要扩展到左侧。将参考图19更详细地描述在UE处确定指示信号的示例。
随后，UE可以输出所确定的信号(1820)。可选地，UE可以以具有相同含义的两种或多种形式同时输出指示信号。
可选地，UE还可以在输出指示改变拍照范围的信号之后执行确定用户是否已经改变拍照范围的操作(1825)。在这种情况下，UE可以通过再次执行操作1810至操作1820来支持改进的自拍拍摄。
图19是示出根据本公开的在装备有相机的UE中在拍照范围内识别剪切面部并且确定指示改变拍照范围的信号的情况的示例性视图。
在图18的操作1810之后，UE可以可选地执行以下操作。
UE可以检查是否包括剪切面部(1900)。
如果确定不包括剪切面部，则UE可以确定不输出指示信号(1915)。
如果确定包括剪切面部，则UE可以确定在与剪切面部的正方形所处的方向相反的方向上是否存在没有面部的可用间隙(1905)。
如果在相反方向上存在可用间隙，则UE可以输出指示改变拍照范围的信号，以将对应于剪切面部的正方形完全包括在拍照范围内。例如，UE可以确定输出诸如“左转”之类的指示信号(当在拍照范围的左侧中存在剪切面部时)(1920)。
如果在相反方向上没有可用间隙，则UE可以检查UE当前是否垂直放置(1910)。
如果UE当前垂直放置，则UE可以输出指示UE的水平定位的信号，以便进一步确保左侧和右侧的可用间隙。例如，UE可以确定输出诸如“旋转90-水平”(1925)的指示信号。
如果UE当前没有垂直放置，则UE可不确保左侧和右侧的任何更多可用间隙。因此，UE可以确定输出诸如“缩小”或“向后移动”的信号(1930)。
图20是示出根据本公开的例如在装备有相机的UE中拍摄实际照片的用于识别拍照范围内的剪切面部的方法的示例性视图。
参考图20(a)作为示例，UE识别拍照范围内的四个面部，并且确定与所识别的四个面部相对应的四个正方形。四个正方形中最左侧的正方形2000不完全包括在拍照范围内。UE可以确定对应于“不完整”的正方形2000的面部是“剪切面部”。因此，UE可以确定输出指示改变拍照范围的信号，以便将剪切面部完全包括在拍照范围内。
参照图作为示例的20(b)，UE识别拍照范围内的四个面部，并且确定与所识别的四个面部相对应的四个正方形。四个正方形中最右侧的正方形2010的一部分不包括在拍照范围内。UE可以确定对应于未部分包括的正方形2010的面部是“剪切面部”。这里，UE确定在与剪切面部2010定位的方向(即，右侧)相反的方向(即，左侧)上存在可用间隙2015，并且确定输出诸如“右转”或“向右移动”的指示信号以在剪切面部定位的方向上扩展拍照范围。
图21是示出根据本公开的在装备有相机的UE中在三种情况下顺序地确定需要改变拍照范围的示例性方法的流程图。
UE的相机可以由例如相机应用程序驱动。一旦UE的相机被驱动，则UE可以对相机的拍照范围内的对象执行面部识别(2100)。
UE可以顺序地执行以下操作中的至少一个：确定在拍照范围内是否存在剪切面部的操作2105、确定在拍照范围内是否存在未知的面部的操作2115、以及使用关于识别面部的信息确定在拍照范围内是否遗漏面部的操作2120。然而，UE可以以任何其他顺序进行确定，而不限于图21所示的顺序。如果确定存在剪切面部、未知的面部或遗漏的面部，则UE可以确定指示改变拍照范围的信号。
随后，UE可以基于在操作2105、2115和2120中做出的确定中的至少一个来输出所确定的指示信号(2110)。
可选地，UE还可以在输出指示改变拍照范围的信号之后执行确定用户是否已经改变拍照范围的操作(2125)。在这种情况下，UE可以通过再次执行操作2100至操作2120中的至少一个来支持改进的自拍拍摄。
图22是示出根据本公开的在装备有相机的UE中指示关于示例性照片的拍照范围的改变的信号的输出的示例性视图。
在图22中，可以注意到，在拍照范围内识别的两个面部2200和2202聚集在右侧。在这种情况下，UE可以输出指示信号以将面部2200和2202放置在拍照范围的中心。例如，UE可以输出指示“左转”的信号2210以将拍照范围扩展到右侧。
图23是示出根据本公开的在装备有相机的UE中指示关于示例性照片的拍照范围的改变的信号的输出的另一示例性视图。
在图23中，在拍照范围内围绕最左侧面部的正方形2305和围绕最上侧面部的正方形2300接触拍照范围的周边(即，边界)。UE可以确定正方形2305和2300不完全包括在拍照范围内，并且因此表示剪切面部。在这种情况下，UE可以输出指示在拍照范围内完全包括对应于剪切面部2305和2300的正方形的信号。例如，UE可以输出分别指示“向左旋转”和“向上旋转”的信号2310和2322，以便将拍照范围扩展到向左和向上。
图24是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图。
在图24中，三个识别面部2400、2402和2406被布置在拍照范围内的z轴2410上。在所识别的面部中，左面部2406与中间面部2402具有大的z轴距离2405(例如，等于或大于阈值)。UE可以确定具有大的z轴距离的左面部2405是未知的面部。在这种情况下，UE可以输出指示信号以消除拍照范围内的未知的面部2406。例如，UE可以输出指示“旋转90-垂直”的信号2420，以将拍照范围从当前水平构图改变为垂直构图。
图25是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图。
在图25中，三个识别面部2500、2502和2504布置在拍照范围内的z轴2510上。在所识别的面部中，左面部2504与中间面部2502具有大的z轴距离2154(例如，等于或大于阈值)。UE可以确定具有大的z轴距离的左面部2504是未知的面部。在这种情况下，UE可以输出指示信号以消除拍照范围内的未知的面部2504。例如，为了消除拍照范围内的未知的面部2504，UE可以输出指示“左转”的信号2520以将拍照范围扩展到右侧。
图26是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图。
在图26中，三个识别面部2600、2602和2604被布置在拍照范围内的x轴2610上。在所识别的面中，右面部2604与中间面部2602具有大的x轴间隙2615(例如，等于或大于阈值)。UE可以确定具有大的x轴间隙的右面部2604是未知的面部。在这种情况下，UE可以输出指示信号以消除拍照范围内的未知的面部2604。例如，UE可以输出指示“旋转90-垂直”的信号2620，以将拍照范围从当前水平构图改变为垂直构图。
图27是示出根据本公开的在装备有相机的UE中输出指示关于示例性照片的拍照范围的改变的信号的另一示例性视图。
在图27中，三个识别面部2700、2702和2704被布置在拍照范围内的x轴2710上。在所识别的面部中，右面部2704与中间面部2702之间具有大的x轴间隙2129(例如，等于或大于阈值)。UE可以确定具有大的x轴间隙的右面部2704是未知的面部。在这种情况下，UE可以输出指示信号以消除拍照范围内的未知的面部2704。例如，UE可以输出指示“右转”的信号2720以将拍照范围扩展到左侧。
图28是根据本公开的UE的框图。
根据本公开，UE 2800可以包括控制器2810和相机2830。控制器2810可以控制本公开中描述的操作。相机2830可以在控制器2810的控制下执行诸如拍照、面部识别或3D z轴坐标的计算之类的操作。
UE 2800还可以包括用于输出本公开中描述的至少一个指示信号的至少一个输出单元。例如，输出单元可以是用于输出可视信号的显示器2820、用于输出声音的扬声器2840、用于输出光的闪光灯2850或用于产生振动的至少一个振动器2870中的至少一个。UE2800可以包括在壳体的四个端部中的至少两个端部的每一个处的振动器2870。
UE 2820还可包括用于与网络的基站或另一UE通信的收发器2860。
应当注意，图1至图28中示出的UE的示例性拍照范围、支持方法的流程图、示例性指示信号和框图并不旨在限制本公开的范围。也就是说，图2至图28中示出的所有组件或步骤不应被解释为用于实现本公开的强制组件，并且在不脱离本公开的范围和精神的情况下，本公开甚至可以利用一部分组件来实现。
上述操作可以通过提供在UE的组件中存储相应程序代码的存储设备来执行。即，UE的控制器可以通过读取存储在存储器中的程序代码并由处理器或中央处理单元(CPU)执行程序代码来执行上述操作。
本公开中描述的UE的各种组件和模块可以使用硬件电路来操作，所述硬件电路例如是硬件电路的组合，所述硬件电路例如是基于互补金属氧化物半导体的逻辑电路、固件和嵌入在机器可读介质中的软件和/或硬件和固件和/或软件。例如，可以使用诸如晶体管、逻辑门和ASIC的电路来实现各种电结构和方法。
虽然已经参照本发明的某些示例性实施例示出和描述了本发明，但是本领域技术人员将理解，在不脱离由所附权利要求及其等同物限定的本发明的精神和范围的情况下，可以对其进行形式和细节上的各种改变。

Claims (11)

1.一种用于在装备有相机的装置中支持拍照的方法，所述方法包括：
当所述相机被驱动时，识别所述相机的拍照范围内的对象的面部；
基于关于所识别的面部的信息，检查在所述拍照范围内是否存在遗漏的面部、在所述拍照范围内是否存在未知面部以及在所述拍照范围内是否存在剪切面部中的至少一个，以确定指示改变所述拍照范围的信号；和
基于所述确定，输出所述指示改变所述拍照范围的信号，
其中，所述关于所识别的面部的信息包括以辐射图的形式存储的位于所识别的面部附近的其他面部的数量，并且
其中，检查在所述拍照范围内是否存在遗漏的面部包括：如果先前拍照范围内的所识别的面部的辐射图的第一方向上的其他面部的数量大于所述拍照范围内的所识别的面部的辐射图中的所述第一方向上的其他面部的数量，则确定在所述拍照范围内存在遗漏的面部；以及
基于在所述拍照范围内所述遗漏的面部，确定指示改变所述拍照范围的信号。
2.根据权利要求1所述的方法，其中，所述信号是指示改变所述拍照范围的视觉信号、声音信号和振动信号中的至少一个。
3.根据权利要求2所述的方法，其中，所述视觉信号通过所述装备有相机的装置的显示器以图像或图标的形式输出。
4.根据权利要求2所述的方法，其中，所述视觉信号通过所述装备有所述相机的装置的发光二极管LED闪光灯以光的形式输出。
5.根据权利要求2所述的方法，其中，所述振动信号以由振动器产生的振动的形式输出，所述振动器设置在所述装备有相机的装置的四个端部中的至少两个端部处。
6.根据权利要求1所述的方法，其中，所述信号是以下信号之一：指示所述装备有相机的装置在特定方向上的旋转的第一信号；指示所述装备有相机的装置在特定方向上的移动的第二信号；指示所述装备有相机的装置从水平构图或垂直构图改变为垂直构图或水平构图的第三信号；以及指示对所述相机的变焦功能的操纵的第四信号。
7.根据权利要求1所述的方法，其中，所述关于所识别的面部的信息是所述拍照范围内的所识别的面部的z轴距离或x轴间隙，并且所述确定在所述拍照范围内是否存在未知面部包括：如果所识别的面部的z轴距离或x轴间隙大于预定阈值，则确定在所述拍照范围内存在未知面部。
8.根据权利要求1所述的方法，其中，所述关于所识别的面部的信息是包括所识别的面部的基准点的正方形区域，并且所述确定在所述拍照范围内是否存在剪切面部包括：如果所识别的面部的正方形区域没有完全包括在所述拍照范围内，则确定在所述拍照范围内存在剪切面部。
9.根据权利要求1所述的方法，其中，所述关于所识别的面部的信息是关于根据在所述拍照范围内识别的基准点的邻近度合并的至少两个群集的信息，并且所述确定在所述拍照范围内是否存在未知面部包括：确定在所述至少两个群集中具有少量基准点的群集中包括的面部是未知面部。
10.一种装备有相机的装置，用于支持拍照，所述装置包括：
所述相机，被配置为获取对象的照片；和
控制器，被配置为识别所述相机的拍照范围内的所述对象的面部；基于关于所识别的面部的信息，检查在所述拍照范围内是否存在遗漏的面部、在所述拍照范围内是否存在未知面部以及在所述拍照范围内是否存在剪切面部中的至少一个，以确定指示改变所述拍照范围的信号；并且基于所述确定来控制所述指示改变所述拍照范围的信号的输出，
其中，所述关于所识别的面部的信息包括以辐射图的形式存储的位于所识别的面部附近的其他面部的数量，
其中，所述控制器进一步被配置为：
如果先前拍照范围内的所识别的面部的辐射图的第一方向上的其他面部的数量大于所述拍照范围内的所识别的面部的辐射图中的所述第一方向上的其他面部的数量，则确定在所述拍照范围内存在遗漏的面部；以及
基于在所述拍照范围内所述遗漏的面部，确定指示改变所述拍照范围的信号。
11.根据权利要求10所述的装置，其中，所述控制器被配置为执行权利要求2至9中任一项所述的方法。
CN201680049317.1A 2015-08-24 2016-08-24 在具有相机的设备中支持摄影的技术及其设备 Expired - Fee Related CN107925724B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2015-0118712 2015-08-24
KR1020150118712A KR102469694B1 (ko) 2015-08-24 2015-08-24 카메라를 구비하는 장치에서 사진 촬영 지원 기법
PCT/KR2016/009389 WO2017034321A1 (ko) 2015-08-24 2016-08-24 카메라를 구비하는 장치에서 사진 촬영 지원 기법 및 그 장치

Publications (2)

Publication Number Publication Date
CN107925724A CN107925724A (zh) 2018-04-17
CN107925724B true CN107925724B (zh) 2021-06-11

Family

ID=58100496

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680049317.1A Expired - Fee Related CN107925724B (zh) 2015-08-24 2016-08-24 在具有相机的设备中支持摄影的技术及其设备

Country Status (4)

Country Link
US (1) US10868956B2 (zh)
KR (1) KR102469694B1 (zh)
CN (1) CN107925724B (zh)
WO (1) WO2017034321A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113228615B (zh) * 2018-12-28 2023-11-07 索尼集团公司 信息处理装置、信息处理方法和计算机可读记录介质
US11863863B2 (en) * 2020-07-22 2024-01-02 Unity IPR ApS System and method for frustum context aware digital asset suggestions

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101086604A (zh) * 2006-06-09 2007-12-12 索尼株式会社 成像设备、成像设备的控制方法以及计算机程序
CN101370087A (zh) * 2007-04-02 2009-02-18 三星Techwin株式会社 数字图像处理装置中提供构图信息的方法和设备
JP2009105705A (ja) * 2007-10-24 2009-05-14 Fujifilm Corp 撮像装置およびその動作制御方法
CN103916592A (zh) * 2013-01-04 2014-07-09 三星电子株式会社 用于在具有照相机的便携式终端中拍摄肖像的设备和方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7453506B2 (en) * 2003-08-25 2008-11-18 Fujifilm Corporation Digital camera having a specified portion preview section
JP4853320B2 (ja) * 2007-02-15 2012-01-11 ソニー株式会社 画像処理装置、画像処理方法
JP2008225550A (ja) * 2007-03-08 2008-09-25 Sony Corp 画像処理装置、画像処理方法、およびプログラム
JP4424364B2 (ja) * 2007-03-19 2010-03-03 ソニー株式会社 画像処理装置、画像処理方法
JP4396720B2 (ja) * 2007-03-26 2010-01-13 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
JP4818987B2 (ja) 2007-05-21 2011-11-16 オリンパスイメージング株式会社 撮像装置、表示方法、及びプログラム
KR101352206B1 (ko) * 2007-08-14 2014-01-15 삼성전자주식회사 영상구도를 자동조정하는 영상촬영 장치 및 방법
JP2009055449A (ja) 2007-08-28 2009-03-12 Fujifilm Corp 撮影装置
JP4894712B2 (ja) * 2007-10-17 2012-03-14 ソニー株式会社 構図判定装置、構図判定方法、プログラム
KR101362765B1 (ko) * 2007-11-07 2014-02-13 삼성전자주식회사 촬영 장치 및 그 제어 방법
US8300117B2 (en) * 2008-03-28 2012-10-30 Fuji Xerox Co., Ltd. System and method for exposing video-taking heuristics at point of capture
JP5144487B2 (ja) * 2008-12-15 2013-02-13 キヤノン株式会社 主顔選択装置、その制御方法、撮像装置及びプログラム
JP2010278624A (ja) 2009-05-27 2010-12-09 Sony Corp 撮影装置および方法、並びにプログラム
JP2012010162A (ja) 2010-06-25 2012-01-12 Kyocera Corp カメラ装置
US8675113B2 (en) 2012-02-24 2014-03-18 Research In Motion Limited User interface for a digital camera
JP2014077994A (ja) * 2012-09-20 2014-05-01 Canon Inc 画像表示装置、その制御方法および制御プログラム並びに撮像装置
KR101316805B1 (ko) 2013-05-22 2013-10-11 주식회사 파이브지티 자동 얼굴 위치 추적 및 얼굴 인식 방법 및 시스템
KR20150095046A (ko) * 2014-02-12 2015-08-20 엘지전자 주식회사 이동 단말기 및 그 제어방법
JP6641181B2 (ja) * 2016-01-06 2020-02-05 キヤノン株式会社 画像処理装置および撮像装置、それらの制御方法ならびにプログラム
US10469730B2 (en) * 2016-05-18 2019-11-05 Canon Kabushiki Kaisha Imaging device and control method for simultaneously outputting an image pickup signal and a parallax image signal

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101086604A (zh) * 2006-06-09 2007-12-12 索尼株式会社 成像设备、成像设备的控制方法以及计算机程序
CN101370087A (zh) * 2007-04-02 2009-02-18 三星Techwin株式会社 数字图像处理装置中提供构图信息的方法和设备
JP2009105705A (ja) * 2007-10-24 2009-05-14 Fujifilm Corp 撮像装置およびその動作制御方法
CN103916592A (zh) * 2013-01-04 2014-07-09 三星电子株式会社 用于在具有照相机的便携式终端中拍摄肖像的设备和方法

Also Published As

Publication number Publication date
KR20170023494A (ko) 2017-03-06
US20200244873A1 (en) 2020-07-30
KR102469694B1 (ko) 2022-11-23
WO2017034321A1 (ko) 2017-03-02
US10868956B2 (en) 2020-12-15
CN107925724A (zh) 2018-04-17

Similar Documents

Publication Publication Date Title
US10157477B2 (en) Robust head pose estimation with a depth camera
US10755438B2 (en) Robust head pose estimation with a depth camera
US20170316582A1 (en) Robust Head Pose Estimation with a Depth Camera
US20170223261A1 (en) Image pickup device and method of tracking subject thereof
CN114365197A (zh) 在具有多个物理参与者的环境中放置虚拟内容
US9986155B2 (en) Image capturing method, panorama image generating method and electronic apparatus
US20150201124A1 (en) Camera system and method for remotely controlling compositions of self-portrait pictures using hand gestures
US8400532B2 (en) Digital image capturing device providing photographing composition and method thereof
JP2010161718A (ja) 画像処理装置及び画像処理方法
US9628700B2 (en) Imaging apparatus, imaging assist method, and non-transitory recoding medium storing an imaging assist program
JP2006319610A (ja) 撮像装置
WO2019104569A1 (zh) 一种对焦方法、设备及可读存储介质
US10462358B2 (en) Information processing apparatus, information processing system, and information processing method
JP2005092657A (ja) 画像表示装置および画像表示方法
US11138743B2 (en) Method and apparatus for a synchronous motion of a human body model
CN107925724B (zh) 在具有相机的设备中支持摄影的技术及其设备
CN113870213A (zh) 图像显示方法、装置、存储介质以及电子设备
CN110622501A (zh) 图像处理装置及电子设备
KR20210133674A (ko) 증강 현실 장치 및 그 제어 방법
US9843715B2 (en) Photographic apparatus, stroboscopic image prediction method, and a non-transitory computer readable storage medium storing stroboscopic image prediction program
CN111935389A (zh) 拍摄对象切换方法、装置、拍摄设备及可读存储介质
CN110245618B (zh) 3d识别装置及方法
US11949993B2 (en) Electric device, controlling method of controlling electric device, and computer readable storage medium
CN104125387A (zh) 摄影导引方法与电子装置
TWI524213B (zh) 控制方法及電子裝置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210611

CF01 Termination of patent right due to non-payment of annual fee