CN113256676A - 电子设备、摄像显示控制装置、摄像显示系统 - Google Patents

电子设备、摄像显示控制装置、摄像显示系统 Download PDF

Info

Publication number
CN113256676A
CN113256676A CN202110179085.4A CN202110179085A CN113256676A CN 113256676 A CN113256676 A CN 113256676A CN 202110179085 A CN202110179085 A CN 202110179085A CN 113256676 A CN113256676 A CN 113256676A
Authority
CN
China
Prior art keywords
moving image
subject
enlarged display
information
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110179085.4A
Other languages
English (en)
Inventor
羽田充宏
村上则明
高井翔平
斋藤尭范
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN113256676A publication Critical patent/CN113256676A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

一种电子设备，其包括：摄像装置、显示装置以及控制装置，所述电子设备的特征在于，所述控制装置进行如下处理：从所述摄像装置摄像的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；参照与所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及使所述动态图像中放大所述放大显示对象被包含的区域且显示。

Description

电子设备、摄像显示控制装置、摄像显示系统
技术领域
本发明是关于电子设备、摄像显示控制装置、摄像显示系统、摄像显示控制方法及记录介质。
背景技术
以往，已知跟踪动态图像的一部分独立显示的技术。例如，日本特开2014-220724号公报公开了显示控制装置，所述显示控制装置使在第一显示区域持续显示从动态图像上映出的人物中作为跟踪对象被选择的第一人物的图像，并且使在第二显示区域显示在播放中的时间动态图像上映出的第二人物的图像。
然而，在如上述那样的现有技术中，存在用户自己找出作为跟踪对象的被摄体且需要进行选择的操作的问题。
本发明的一方式的目的在于用户无需操作就能放大显示被摄体。
为了解决上述问题，本发明的一方式所涉及的电子设备包括：摄像装置、显示装置以及控制装置，所述电子设备的特征在于，所述控制装置进行如下处理：从所述摄像装置摄像的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；参照与所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及使所述动态图像中放大所述放大显示对象被包含的区域且显示。
根据本发明的一方式，用户无需操作就能放大显示被摄体。
附图说明
图1是表示本发明的实施方式一所涉及的摄像显示系统的硬件构成的框图。
图2是表示本发明的实施方式一所涉及的摄像显示系统的功能构成的框图。
图3是表示本发明的实施方式一所涉及的摄像装置的处理的流程图。
图4是表示本发明的实施方式一所涉及的显示控制装置的处理的流程图。
图5是表示本发明的实施方式一所涉及的动态图像帧的例子的图。
图6是表示本发明的实施方式一所涉及的显示装置的画面的例子的图。
图7是表示本发明的实施方式一所涉及的显示装置的画面的例子的图。
图8是表示本发明的实施方式二所涉及的摄像显示装置的功能构成的框图。
具体实施方式
〔实施方式一〕
以下，详细说明本发明的实施方式一。
本实施方式所涉及的摄像显示系统100使用已有的物体识别技术、构图判断技术、个人识别技术等，在摄像动态图像时决定跟踪对象(缩放对象的被摄体)。由此，用户不需要找出跟踪对象而点击(tap)，能够实现放大播放。
(摄像显示系统100的构成)
图1是表示本实施方式所涉及的摄像显示系统100的硬件构成的框图。如图1所示，摄像显示系统100包括摄像装置1、存储装置2、显示控制装置3以及显示装置4。
摄像装置1摄像动态图像，使存储装置2存储该动态图像。
存储装置2存储各种信息。存储装置2例如是内置在摄像装置1或外部连接的HDD(Hard Disk Drive)、SSD(Solid State Drive)、SD(Secure Digital)存储卡等。存储装置2存储有摄像显示系统100进行动作所需要的程序(操作系统、应用等)、数据(包含用户数据)。
显示控制装置3是控制显示装置4的装置，且连接在显示装置4以及存储装置2，例如由集成电路(例如，SoC(System-on-a-chip)等)构成。显示控制装置3例如是智能电话、输入板终端以及PC等的主体。此外，显示控制装置3也可以进行显示以外的其他的控制(通信控制等)。
显示装置4是通过规定的分辨率(显示分辨率)来显示图像的显示装置。显示装置4例如由有机EL(electro luminescent)显示器、液晶显示器或投影仪等构成。
(摄像装置1的硬件构成)
摄像装置1包括摄像部11、CPU13(Central Processing Unit)、GPU14(GraphicsProcessing Unit)以及存储器15。
摄像部11摄像动态图像。CPU13进行应用的动作等的各种运算处理。GPU14进行与图像处理相关的处理。存储器15是暂时存储运算处理以及图像处理所需要的信息的存储器。
(显示控制装置3的硬件构成)
显示控制装置3包括CPU32、GPU33以及存储器34。
显示控制部31位于显示装置4与存储装置2之间，使显示装置4显示存储装置2的数据。CPU32进行应用动作等的各种运算处理。GPU33进行与图像处理相关的处理。存储器34是暂时存储运算处理以及图像处理所需要的信息的存储器。
此外，显示装置4也可以是包括显示控制装置3的构成。在此情况下，显示装置4例如是智能电话、输入板终端以及PC等的主体。
(摄像装置1的功能构成)
图2是表示本实施方式所涉及的摄像显示系统100的功能构成的框图。如图2所示，摄像装置1包括摄像部11以及控制部16。控制部16包括动态图像录像部12、生成部161、抽出部162以及AI引擎163。存储装置2至少存储动态图像数据(动态图像)21以及缩放区域信息22。
动态图像录像部12使摄像部11摄像的动态图像作为动态图像数据21存储于存储装置2。当从生成部161取得缩放区域信息时，使动态图像录像部12将该缩放区域信息作为缩放区域信息22存储于存储装置2。缩放区域信息包括被摄体被包含的区域的范围以及该区域的放大率。
生成部161参照与在摄像部11摄像的动态图像中包含的被摄体的各个相关的信息，进行生成缩放区域信息(放大显示对象信息)的处理，所述缩放区域信息用于从该动态图像中包含的被摄体选择放大显示对象的信息。更详细而言，生成部161利用从抽出部162取得的AI引擎163的识别结果，选择动态图像中的缩放区域，作成包含缩放区域的范围的缩放区域信息。然后，生成部161在生成缩放区域信息的处理中，决定作为放大显示对象选择的被摄体被包含的区域的放大率，将该放大率追加在上述缩放区域信息，向动态图像录像部12输出该缩放区域信息。
抽出部162进行如下处理：从摄像部11摄像的动态图像抽出在该动态图像中包含的被摄体以及与该被摄体的各个相关的被摄体信息(信息)。该被摄体信息包括被摄体的名称、被摄体的尺寸、被摄体的位置、被摄体中是否有脸、被摄体的脸的表情、被摄体的动作、被摄体的朝向、被摄体的数量、被摄体的亮度以及被摄体的构图信息中至少一个。更详细而言，抽出部162作为控制AI引擎163的部分，使AI引擎163解析摄像部11摄像的动态图像，向生成部161输出AI引擎163的识别结果。
此外，被摄体的名称是指包含被摄体的种类(人、狗、猫等)，在被摄体是人的情况下，包含该被摄体的个人名称。
另外，被摄体的构图信息是动态图像的帧的构图信息且是指通过被摄体以及其背景来规定的构图的好坏，更详细而言，优选包括与该构图相关的评价值。
AI引擎163分别通过固有的方法来解析动态图像，通过抽出部162向生成部161输出与在该动态图像中包含的被摄体相关的识别结果。例如，AI引擎1631在动态图像中进行构图判断。构图判断是指判断缩放后的图像的、与构图相关的评价值是否规定值以上。AI引擎1631学习通常被认为良好构图识别的图像，对接近此类图像的动态图像赋予高的指数(评价值)。
AI引擎1632在动态图像中进行物体识别。物体识别是指在动态图像中识别人、狗、猫等的特定的物体。AI引擎1633在动态图像中进行个人识别。个人识别是指在动态图像中识别预先注册的人物。
此外，AI引擎163的数量没有限制，AI引擎163也可以进行上述之外的判断方法、识别方法。另外，AI引擎163也可以不需要进行个人识别。即，也无需安装进行个人识别的AI引擎1633。
(显示控制装置3的功能构成)
如图2所示，显示控制装置3包括显示控制部31以及选择部35。
显示控制部31进行如下处理：使显示装置4显示存储在存储装置2的动态图像数据21。当选择部35特定放大显示对象时，显示控制部31放大(扩大)成为放大显示对象的被摄体被包含的区域，使显示装置4显示动态图像数据21。在缩放区域信息包括被摄体被包含的区域的范围以及该区域的放大率。此外，显示控制部31也可以缩小被摄体被包含的区域。
选择部35进行如下处理：参照存储在存储装置2的缩放区域信息22，从动态图像数据21中包含的被摄体确定放大显示对象。但是，在播放时，选择部35也可以进行选择放大显示对象(缩放区域)的处理(选择步骤)。
此外，也可以使摄像装置1与显示控制装置3一体化。在此情况下，也可以设置摄像显示控制装置，所述摄像显示控制装置控制摄像装置1以及显示装置4，并且包括抽出部162、生成部161、选择部35以及显示控制部31。
(摄像装置1的处理)
图3是表示本实施方式所涉及的摄像装置1的处理的流程图。图5是表示本实施方式所涉及的动态图像帧的例子的图。以下，参照图3、图5说明摄像装置1的处理。
摄像装置1的处理是例如用户启动安装在智能电话等的相机应用而被开始。相机应用被启动，则摄像部11摄像动态图像。然后，动态图像录像部12使摄像部11摄像的动态图像作为动态图像数据21存储于存储装置2。
(步骤S301)
摄像装置1的控制部16启动AI引擎163。在此情况下，抽出部162根据摄像装置1的CPU的功能、存储器的容量等，启动至少一个AI引擎163(可以是一个，也可以是多个)。
(步骤S302)
控制部16的抽出部162使用已在步骤S301中启动的AI引擎163来判断此时在摄像中的动态图像数据是否存在缩放对象。是否存在缩放对象的判断是根据AI引擎163而不同。
例如，AI引擎1631判断在放大动态图像的图像中是否有可以作为构图(与构图相关的评价值是规定值以上)的图像。“放大动态图像的图像”是指在放大包含AI引擎1631以外的AI引擎抽出的物体、人物等的区域的情况的图像。
AI引擎1632判断在动态图像是否有人、狗、猫等的特定的物体。AI引擎1633判断在动态图像是否有预先注册的人物。此外，控制部16也可以通过上述之外的方法来判断是否存在缩放对象。
在动态图像存在缩放对象的情况下(步骤S302的是)，控制部16执行步骤S303的判断。在此情况下，在执行步骤S303的判断之前，抽出部162预先从动态图像抽出被摄体以及与该被摄体的各个相关的信息(抽出步骤)。例如，如图5所示，对于动态图像51，生成实线以及虚线的矩形框，所述实线以及虚线的矩形框表示该被摄体是缩放对象。
在动态图像不存在缩放对象的情况下(步骤S302的否)，控制部16执行步骤S306的处理。
(步骤S303)
控制部16使用AI引擎163来判断动态图像是否符合缩放条件。这是进一步判断在步骤S302中判断为动态图像存在的1以上的缩放对象实际上是否是要放大显示的对象。
例如，AI引擎163计算通过矩形框来确定的各缩放对象的、根据每个以下条件的指数。抽出部162向生成部161输出已计算的指数。生成部161根据以下条件的优选顺序，根据每个缩放对象分配权重各指数且求和，依该求和值来判断每个缩放对象是否符合缩放条件。生成部161尤其是进行与被摄体的尺寸、被摄体的位置、被摄体中是否有脸以及被摄体的脸的表情相关的评价，根据每个缩放对象计算指数。
·被摄体的尺寸(规定的尺寸以上)
·被摄体有拍到的位置(图像整体的中心附近)
·被摄体中是否有脸(是否包含有脸)
·被摄体的脸的表情(是否笑脸)
·被摄体的动作
·被摄体的朝向
·被摄体的数量
·被摄体的亮度
·被摄体的构图
在动态图像符合缩放条件的情况下(步骤S303的是)，控制部16执行步骤S304的处理。在动态图像不符合缩放条件的情况下(步骤S303的否)，控制部16执行步骤S306的处理。
(步骤S304)
控制部16的生成部161从符合缩放条件的1以上的缩放对象选择实际的放大显示对象。生成部161也可以选择在步骤S303中计算的、各条件的指数的求和值较大的缩放对象。例如，如图5所示，生成部161在动态图像51中将实线的矩形框52中包含的被摄体作为放大显示对象选择。
然后，生成部161生成已选择的放大显示对象的缩放区域信息(生成步骤)，且向动态图像录像部12输出。动态图像录像部12从生成部161取得缩放区域信息，使该缩放区域信息作为缩放区域信息22存储于存储装置2。
(步骤S305)
控制部16判断是否要结束摄像。例如，控制部16判断在相机应用的画面中是否用户操作摄像结束的指示。
在要结束摄像的情况下(步骤S305的是)，控制部16使摄像应用结束，结束摄像处理。在不结束摄像的情况下(步骤S305的否)，控制部16返回到步骤S302的判断。
(步骤S306)
在动态图像中不存在缩放对象或在动态图像不符合缩放条件的情况下，生成部161向动态图像录像12输出表示不进行缩放的要旨的缩放区域信息。动态图像录像部12从生成部161取得缩放区域信息，使该缩放区域信息作为缩放区域信息22存储于存储装置2。
此外，即使不是上述的情况，也例如在用户一边使用摄像装置1，一边移动的情况下，摄像对象的动态图像不稳定，因此也可以设为控制部16不进行缩放。用户是否移动的判断是使用内置在摄像装置1的加速度传感器等来进行。
(显示控制装置3的处理)
图4是表示本实施方式所涉及的显示控制装置3的处理的流程图。图6以及图7是表示本实施方式所涉及的显示装置4的画面41的例子的图。以下，参照图4、图6以及图7说明显示控制装置3的处理。
显示控制装置3的处理例如用户启动安装在智能电话等的动态图像播放应用而被开始。动态图像播放应用被启动，则显示控制部31播放动态图像。也就是说，显示控制部31使不缩放存储在存储装置2的动态图像数据21按原样尺寸显示于显示装置4。
然后，显示控制部31在使显示动态图像的处理中，一边播放动态图像，一边根据用户的操作切换动态图像数据21的整体显示与动态图像数据21中包含的被摄体的放大显示。显示控制部31根据动态图像播放处理移动在放大显示动态图像数据21的被摄体的缩放模式，放大播放通过缩放区域信息22确定的区域。此外，显示控制装置3是装载有动态图像播放功能的设备。
(步骤S401)
选择部35判断动态图像播放处理是否缩放模式。如图6所示，显示控制装置3例如使显示装置4的画面41显示用户为了放大显示被摄体而操作的放大播放按钮42。然后，在用户触摸放大播放按钮42的情况下，显示控制装置3的动态图像播放处理移动在缩放模式。此外，在用户再次触摸放大播放按钮42的情况下或在放大播放在规定时间进行的情况下，缩放模式被解除。
在动态图像播放处理是缩放模式的情况下(步骤S401的是)，选择部35执行步骤S402的处理。在动态图像播放处理不是缩放模式的情况下(步骤S401的否)，选择部35执行步骤S403的处理。
(步骤S402)
显示控制装置3使用缩放区域信息进行放大播放。更详细而言，选择部35参照存储在存储装置2的缩放区域信息22，从动态图像数据21中包含的被摄体确定放大显示对象。然后，显示控制部31放大选择部35选择的放大显示对象被包含的区域，且使显示装置4显示动态图像数据21(显示控制步骤)。例如，显示控制部31切换到图7所示的画面41，所述图7所示的画面41包含放大图5的矩形框52内的区域的图像。
此外，在缩放区域信息22显示不进行缩放的要旨的情况下，显示控制部31可以使显示装置4显示用户指示的放大播放不能进行的要旨，也可以不使显示上述的要旨的状态下播放整体图像。
另外，显示控制装置3在放大显示对象的被摄体从动态图像移动且没有成为缩放对象的其他被摄体的情况下，返回到缩放的动态图像播放。
进一步，在动态图像数据41存在多个缩放对象的被摄体的情况下，也能够通过用户的操作参照缩放区域信息，将放大对象从当前的跟踪对象(放大对象)的被摄体切换到下一个优选度高(指数的求和值较大)的被摄体。
(步骤S403)
选择部35不从动态图像数据21中包含的被摄体中选择放大显示对象。因此，显示控制部31不放大且按原样尺寸来持续进行播放。
(实施方式一的效果)
在本实施方式所涉及的摄像显示系统100中，摄像装置1从被摄体取得的信息计算跟踪对象以及放大率，生成缩放区域信息(包围被摄体的缩放框的位置、被摄体ID等的缩放用的信息)。被摄体ID是指在缩放对象的被摄体有多个的情况下，也能够识别识别各被摄体的识别符。显示控制装置3参照上述缩放区域信息，一边从摄像且存储的动态图像数据21生成缩放跟踪对象的动态图像，一边播放。
根据上述，在摄像动态图像时决定跟踪对象，对该跟踪对象进行放大，因此用户不需自己找出跟踪对象且选择的操作。
〔实施方式二〕
以下说明本发明的实施方式二。此外，为了便于说明，对与在实施方式一中说明的构件具有相同功能的构件标注相同的附图标记，不重复其说明。
本实施方式所涉及的摄像显示系统100在摄像动态图像时生成缩放区域信息，进一步在动态图像播放时生成缩放区域信息，参照两方的缩放区域信息，进行动态图像的放大播放。
例如，摄像装置1使用进行构图判断的AI引擎1631，生成包含各被摄体的指数的缩放区域信息22a(未图示)。显示控制装置3使用进行物体识别的AI引擎1632以及进行个人识别的AI引擎1633来生成包含各被摄体的指数的缩放区域信息22b(未图示)。显示控制装置3的选择部35参照缩放区域信息22a以及22b，向显示控制部31指示，以使放大且显示指数最高的被摄体被包含的区域。
在此情况下，摄像装置1不决定动态图像的放大显示对象，显示控制装置3决定动态图像的放大显示对象，使放大该放大显示对象被包含的区域且显示于显示装置4。
此外，在摄像显示系统100是摄像装置1与显示控制装置3一体化的智能电话等的情况下，也可以设为根据该智能电话的表现，适当地切换摄像时以及播放时使用的AI引擎1631、1632以及1633。
(实施方式二的效果)
在本实施方式所涉及的摄像显示系统100中，AI引擎进行构图判断、物体识别以及个人识别，因此也有摄像装置1没有足够的功能的情况。在这种情况下，显示控制装置3的AI引擎分配执行一部分，因此能够确保选择缩放对象时的精度。
〔实施方式三〕
以下说明本发明的实施方式三。此外，为了便于说明，对与在实施方式一、二中说明的构件具有相同功能的构件标注相同的附图标记，不重复其说明。
图8是表示本实施方式所涉及的摄像显示装置200的功能构成的框图。摄像显示装置(电子设备)200包括摄像部11、控制部16、存储部20以及显示部40。控制部16包括动态图像录像部12、生成部161、抽出部162、AI引擎163、显示控制部31以及选择部35。存储部20包括与存储装置2相同的功能。显示部40包括与显示装置4相同的功能。控制部16的各部如在实施方式一、二所述。
摄像显示装置200是在通过智能电话、平板等单体来实现本发明的功能的情况下的构成。
〔基于软件的实现例〕
摄像装置1以及显示控制装置3的控制块(尤其是控制部16的各部)可以通过形成在集成电路(IC芯片)等的逻辑电路(硬件)实现，也可以通过软件实现。
在后一种情况下，摄像装置1以及显示控制装置3包括计算机，其用于实现各功能的软件即执行程序的命令。该计算机例如至少包括一个处理器(控制装置)，同时至少包括一个用于存储所述程序的、并且计算机可读取的记录介质。并且，上述计算机中，通过上述处理器从上述记录介质中读取上述程序并执行程序来实现本公开的目的。作为上述处理器，例如可使用CPU(Central Processing Unit)。作为上述记录介质，可使用“非暂时性有形介质”，例如ROM(Read Only Memory)等之外，还可以使用磁带、磁盘、卡、半导体存储器、可编程逻辑电路等。此外，还可以包括用于展开上述程序的RAM(Random Access Memory)等。此外，上述程序可以经由能够发送该程序的任意传输介质(通信网络，广播波等)提供给上述计算机。此外，本发明的一方式也可以以上述程序通过电子传输来具体化、并嵌入在载波中的数据信号的形式来实现。
〔总结〕
本发明的方式一所涉及的电子设备包括：摄像装置、显示装置以及控制装置，所述电子设备的特征在于，所述控制装置进行如下处理：从所述摄像装置摄像的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；参照与所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及使所述动态图像中放大所述放大显示对象被包含的区域且显示。
根据所述构成，用户无需操作能够放大显示被摄体。此外，也可以使摄像装置与显示控制装置一体化。
本发明的方式二所涉及的电子设备在上述方式一中，所述信息包括所述被摄体的尺寸、所述被摄体的位置、所述被摄体中是否有脸、所述被摄体的脸的表情、所述被摄体的动作、所述被摄体的朝向、所述被摄体的数量、所述被摄体的亮度以及所述被摄体的构图中至少一个。
本发明的方式三所涉及的电子设备在上述方式一或二中，在生成所述放大显示对象信息的处理中，参照与作为所述放大显示对象选择的被摄体相关的所述信息，决定该被摄体被包含的区域的放大率。
根据所述构成，能够使用已决定的放大率来使包含有被摄体的区域放大且示出。
本发明的方式四所涉及的电子设备在上述方式一至三中，在使显示所述动态图像的处理中，根据用户的操作切换所述动态图像的整体显示与所述动态图像中包含的被摄体的放大显示。
根据所述构成，用户能够容易切换动态图像的整体显示与被摄体的放大显示。
本发明的方式五所涉及的摄像显示控制装置控制摄像装置以及显示装置，所述摄像显示控制装置的特征在于，包括：抽出部，从所述摄像装置摄像的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；生成部，参照与在所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；选择部，参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及显示控制部，使所述动态图像中放大所述放大显示对象被包含的区域且显示。
本发明的方式六所涉及的摄像显示系统包括：摄像装置以及显示控制装置，所述摄像装置包括：摄像部，摄像动态图像；抽出部，从所述动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；以及生成部，参照与在所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；所述显示控制装置包括：选择部，参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及显示控制部，使所述动态图像中放大所述放大显示对象被包含的区域且显示。
本发明的方式七所涉及的摄像显示控制方法控制摄像装置以及显示装置，所述摄像显示控制方法的特征在于，包括：抽出步骤，从所述摄像装置摄像的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；生成步骤，参照与所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；选择步骤，参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及显示控制步骤，使所述动态图像中放大所述放大显示对象被包含的区域且显示。
本发明的各方式所涉及的摄像显示控制装置可以通过计算机实现，在此情况下，本发明的范围还包括用于摄像显示控制装置的控制程序以及记录有该控制程序的计算机可读取的记录介质，该控制程序使计算机作为上述摄像显示控制装置中具备的各部(软件要素)进行操作，从而计算机实现上述摄像显示控制装置。
本发明不限于上述的各实施方式，在权利要求所示的范围中能够进行各种变更，将分别公开在不同的实施方式中的技术部件适当组合而得到的实施方式也包含在本发明的技术范围中。而且，通过将各实施方式中分别公开的技术手段组合能够形成新的技术特征。

Claims (8)

1.一种电子设备，其包括：
摄像装置、显示装置以及控制装置，所述电子设备的特征在于，
所述控制装置进行如下处理：
从所述摄像装置摄像的动态图像抽出所述动态图像中包含的被摄体以及与所述被摄体的各个相关的信息；
参照与所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；
参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及
使所述动态图像中放大所述放大显示对象被包含的区域且显示。
2.根据权利要求1所述的电子设备，其特征在于，
所述信息包括所述被摄体的尺寸、所述被摄体的位置、所述被摄体中是否有脸、所述被摄体的脸的表情、所述被摄体的动作、所述被摄体的朝向、所述被摄体的数量、所述被摄体的亮度以及所述被摄体的构图中至少一个。
3.根据权利要求1或2所述的电子设备，其特征在于，
在生成所述放大显示对象信息的处理中，参照与作为所述放大显示对象选择的被摄体相关的所述信息，决定所述被摄体被包含的区域的放大率。
4.根据权利要求1所述的电子设备，其特征在于，
在使显示所述动态图像的处理中，根据用户的操作切换所述动态图像的整体显示与所述动态图像中包含的被摄体的放大显示。
5.一种摄像显示控制装置，其控制摄像装置以及显示装置，所述摄像显示控制装置的特征在于，包括：
抽出部，从所述摄像装置摄像的动态图像抽出所述动态图像中包含的被摄体以及与所述被摄体的各个相关的信息；
生成部，参照与在所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；
选择部，参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及
显示控制部，使所述动态图像中放大所述放大显示对象被包含的区域且显示。
6.一种摄像显示系统，其包括：
摄像装置以及显示控制装置，
所述摄像装置包括：
摄像部，摄像动态图像；
抽出部，从所述动态图像抽出所述动态图像中包含的被摄体以及与所述被摄体的各个相关的信息；以及
生成部，参照与在所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；
所述显示控制装置包括：
选择部，参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及
显示控制部，使所述动态图像中放大所述放大显示对象被包含的区域且显示。
7.一种摄像显示控制方法，其控制摄像装置以及显示装置，所述摄像显示控制方法的特征在于，包括：
抽出步骤，从所述摄像装置摄像的动态图像抽出所述动态图像中包含的被摄体以及与所述被摄体的各个相关的信息；
生成步骤，参照与所述动态图像中包含的被摄体的各个相关的信息，生成放大显示对象信息，所述放大显示对象信息是用于从所述动态图像中包含的被摄体选择放大显示对象的信息；
选择步骤，参照所述放大显示对象信息，从所述动态图像中包含的被摄体选择放大显示对象；以及
显示控制步骤，使所述动态图像中放大所述放大显示对象被包含的区域且显示。
8.一种计算机可读的记录介质，所述计算机可读的记录介质的特征在于，所述计算机可读的记录介质存储有控制程序，所述控制程序是作为权利要求5所述的摄像显示控制装置使计算机发挥功能的控制程序，
并且所述控制程序是作为所述抽出部、所述生成部、所述选择部以及所述显示控制部使计算机发挥功能的控制程序。
CN202110179085.4A 2020-02-12 2021-02-09 电子设备、摄像显示控制装置、摄像显示系统 Pending CN113256676A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020021808A JP7396919B2 (ja) 2020-02-12 2020-02-12 電子機器、撮像表示制御装置、撮像表示システム、撮像表示制御方法、および、プログラム
JP2020-021808 2020-02-12

Publications (1)

Publication Number Publication Date
CN113256676A true CN113256676A (zh) 2021-08-13

Family

ID=77178086

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110179085.4A Pending CN113256676A (zh) 2020-02-12 2021-02-09 电子设备、摄像显示控制装置、摄像显示系统

Country Status (3)

Country Link
US (1) US11463625B2 (zh)
JP (1) JP7396919B2 (zh)
CN (1) CN113256676A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005102175A (ja) * 2003-08-25 2005-04-14 Fuji Photo Film Co Ltd デジタルカメラ
JP2008311886A (ja) * 2007-06-14 2008-12-25 Sharp Corp 撮像装置および撮像方法
US20090190835A1 (en) * 2008-01-29 2009-07-30 Samsung Electronics Co., Ltd. Method for capturing image to add enlarged image of specific area to captured image, and imaging apparatus applying the same
US20100149383A1 (en) * 2008-12-17 2010-06-17 Hoya Corporation Imager for photographing a subject with a properly size
JP2014222817A (ja) * 2013-05-13 2014-11-27 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 画像表示装置、画像拡大表示方法およびプログラム
US20160054903A1 (en) * 2014-08-25 2016-02-25 Samsung Electronics Co., Ltd. Method and electronic device for image processing
JP2016036183A (ja) * 2015-12-02 2016-03-17 日立マクセル株式会社 撮像装置
CN105740757A (zh) * 2014-12-24 2016-07-06 佳能株式会社 变焦控制装置、摄像设备和变焦控制装置的控制方法
CN108268200A (zh) * 2018-01-22 2018-07-10 北京市商汤科技开发有限公司 图像处理方法和装置、电子设备、计算机程序和存储介质

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001057671A (ja) 1999-08-19 2001-02-27 Toshiba Corp 映像送信端末及び映像受信端末
CN100448267C (zh) * 2004-02-06 2008-12-31 株式会社尼康 数码相机
JP5173453B2 (ja) * 2008-01-22 2013-04-03 キヤノン株式会社 撮像装置及び該撮像装置の表示制御方法
JP5036612B2 (ja) * 2008-03-28 2012-09-26 三洋電機株式会社 撮像装置
JP5237721B2 (ja) * 2008-08-13 2013-07-17 ペンタックスリコーイメージング株式会社 撮像装置
US20100214445A1 (en) * 2009-02-20 2010-08-26 Sony Ericsson Mobile Communications Ab Image capturing method, image capturing apparatus, and computer program
WO2014155963A1 (ja) * 2013-03-26 2014-10-02 パナソニック株式会社 画像生成装置、撮影装置、画像生成方法及びプログラム
JP2014220724A (ja) 2013-05-10 2014-11-20 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
JP6460868B2 (ja) 2015-03-19 2019-01-30 キヤノン株式会社 表示制御装置およびその制御方法
JP6512961B2 (ja) * 2015-06-24 2019-05-15 キヤノン株式会社 撮像制御装置およびその制御方法、プログラム、並びに記憶媒体
DE202017007466U1 (de) * 2016-07-18 2021-11-22 Glide Talk, Ltd. System zur Bereitstellung eines objektorientieren Zooms in einer Multimedia-Nachrichtenübermittlung
US10212338B2 (en) * 2016-11-22 2019-02-19 Google Llc Camera operable using natural language commands
AU2019201192A1 (en) * 2019-02-20 2020-09-03 Canon Kabushiki Kaisha Method, system and apparatus for capturing an image
US10904446B1 (en) * 2020-03-30 2021-01-26 Logitech Europe S.A. Advanced video conferencing systems and methods

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005102175A (ja) * 2003-08-25 2005-04-14 Fuji Photo Film Co Ltd デジタルカメラ
JP2008311886A (ja) * 2007-06-14 2008-12-25 Sharp Corp 撮像装置および撮像方法
US20090190835A1 (en) * 2008-01-29 2009-07-30 Samsung Electronics Co., Ltd. Method for capturing image to add enlarged image of specific area to captured image, and imaging apparatus applying the same
US20100149383A1 (en) * 2008-12-17 2010-06-17 Hoya Corporation Imager for photographing a subject with a properly size
JP2014222817A (ja) * 2013-05-13 2014-11-27 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 画像表示装置、画像拡大表示方法およびプログラム
US20160054903A1 (en) * 2014-08-25 2016-02-25 Samsung Electronics Co., Ltd. Method and electronic device for image processing
CN105740757A (zh) * 2014-12-24 2016-07-06 佳能株式会社 变焦控制装置、摄像设备和变焦控制装置的控制方法
JP2016036183A (ja) * 2015-12-02 2016-03-17 日立マクセル株式会社 撮像装置
CN108268200A (zh) * 2018-01-22 2018-07-10 北京市商汤科技开发有限公司 图像处理方法和装置、电子设备、计算机程序和存储介质

Also Published As

Publication number Publication date
JP2021129179A (ja) 2021-09-02
JP7396919B2 (ja) 2023-12-12
US11463625B2 (en) 2022-10-04
US20210250511A1 (en) 2021-08-12

Similar Documents

Publication Publication Date Title
JP5781156B2 (ja) キービデオフレームを判定するための方法
EP2040246B1 (en) Image display control apparatus and image display control method
US20090251421A1 (en) Method and apparatus for tactile perception of digital images
JP2008123416A (ja) 被写体追跡プログラム、被写体追跡装置、およびカメラ
US20090141937A1 (en) Subject Extracting Method, Subject Tracking Method, Image Synthesizing Method, Computer Program for Extracting Subject, Computer Program for Tracking Subject, Computer Program for Synthesizing Images, Subject Extracting Device, Subject Tracking Device, and Image Synthesizing Device
JP6141829B2 (ja) 動画解析装置、動画解析方法、プログラム、及び集積回路
CN111357296B (zh) 影像分发装置、影像分发系统、影像分发方法及存储介质
JP2006129453A (ja) 画像再生装置、および画像再生プログラム
EP3291549A1 (en) Display control apparatus, display control method, and program
JP5837922B2 (ja) カメラ位置に基づくキービデオフレームのランク付け
US11211097B2 (en) Generating method and playing method of multimedia file, multimedia file generation apparatus and multimedia file playback apparatus
JP2004193933A (ja) 画像拡大表示方法・装置・メディア・プログラム
JP2011040993A (ja) 被写体追尾プログラム、およびカメラ
JP6203188B2 (ja) 類似画像検索装置
JP2012105205A (ja) キーフレーム抽出装置、キーフレーム抽出プログラム、キーフレーム抽出方法、撮像装置、およびサーバ装置
JP4724242B2 (ja) 電子機器および画像表示方法
CN113256676A (zh) 电子设备、摄像显示控制装置、摄像显示系统
JP5850188B2 (ja) 画像表示システム
CN115205921A (zh) 电子设备以及控制方法
CN113256675A (zh) 电子设备、显示控制装置、显示控制方法及记录介质
JP3993003B2 (ja) 表示指示装置、表示システム、表示指示プログラム、端末、及びプログラム
JP5665380B2 (ja) 画像処理装置、画像処理装置の制御方法、プログラム、及び記録媒体
JP2005135091A (ja) 画像処理装置及び画像処理方法
JP2015220606A (ja) 画像処理装置及び画像処理装置の制御方法
JP2004282435A (ja) 画像蓄積表示方法およびその装置、プログラム、記録媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination