CN114979496A - 电子设备 - Google Patents
电子设备 Download PDFInfo
- Publication number
- CN114979496A CN114979496A CN202210764845.2A CN202210764845A CN114979496A CN 114979496 A CN114979496 A CN 114979496A CN 202210764845 A CN202210764845 A CN 202210764845A CN 114979496 A CN114979496 A CN 114979496A
- Authority
- CN
- China
- Prior art keywords
- moving image
- important scene
- control device
- frame
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 claims abstract description 31
- 238000000034 method Methods 0.000 claims abstract description 29
- 238000003384 imaging method Methods 0.000 claims abstract description 12
- 238000013473 artificial intelligence Methods 0.000 description 50
- 239000000203 mixture Substances 0.000 description 20
- 230000006870 function Effects 0.000 description 10
- 239000000284 extract Substances 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 241001465754 Metazoa Species 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
- Image Analysis (AREA)
Abstract
本发明为包含摄像装置以及控制装置的电子设备，且控制装置执行：动态图像取得处理，其取得摄像装置所拍摄的第1动态图像；重要场景判定处理，其基于第1动态图像所包含的图像信息来判定第1动态图像所包含的每一帧是否为重要场景；以及场景信息生成处理，其生成重要场景信息，该重要场景信息包含帧各自是否为重要场景的判定结果，重要场景判定处理在动态图像的拍摄完成后执行。
Description
技术领域
本发明涉及一种电子设备、控制装置、记录介质以及控制方法。
背景技术
近年来，许多智能电话等搭载有动态图像的拍摄功能，从而使用户的动态图像的拍摄机会增加。为了有效地对被拍摄的许多动态图像进行视听及整理，对提取动态图像中的重要的场景并进行编辑或再生的处理的要求正在不断提高。
例如在专利文献1中提出了一种摄像装置，其基于拍摄中的缩放操作等在拍摄处理执行期间的输入信息来从拍摄数据中执行重要场景拍摄部分的选择处理。
现有技术文献
专利文献
[专利文献1]日本专利特开2007-134770号公报
发明内容
本发明所要解决的技术问题
然而，专利文献1中记载的摄像装置能基于拍摄中的输入信息来选择重要场景，却无法根据所拍摄的动态图像中的被摄体的状态等来选择重要场景。因此，存在如下问题：不管拍摄者非常感兴趣的被摄体的状态如何，被选择重要的场景。
为了解决这种问题，本发明的一实施方式的目的在于实现一种基于所拍摄的动态图像中的图像信息来判定重要场景的电子设备等。
解决问题的手段
为了解决上述的课题，本发明的一实施方式的电子设备为包含至少一个摄像装置以及至少一个控制装置的电子设备，且所述控制装置执行：动态图像取得处理，其取得所述摄像装置所拍摄的第1动态图像；重要场景判定处理，其基于所述第1动态图像所包含的图像信息来判定所述第1动态图像所包含的每一帧是否为重要场景；以及场景信息生成处理，其生成重要场景信息，该重要场景信息包含所述帧各自是否为所述重要场景的判定结果，所述重要场景判定处理在动态图像的拍摄完成后执行。
有益效果
根据本发明的一实施方式，能实现一种基于所拍摄的动态图像中的图像信息来判定重要场景的电子设备等。
附图说明
图1为示出本发明的一实施方式所涉及的智能电话的功能结构的框图。
图2为示出本发明的一实施方式所涉及的控制装置的构图识别处理的流程图。
图3为示出本发明的一实施方式所涉及的控制装置的被摄体识别处理的流程图。
具体实施方式
〔智能电话的结构〕
以下参照图1～图3来说明本发明的一实施方式。如图1所示，智能电话(电子设备)1包含至少一个照相机(摄像装置)10、至少一个显示装置20、至少一个AI(ArtificialIntelligence，人工智能)引擎控制装置30、以及至少一个控制装置40。另外，AI引擎控制装置30以及控制装置40均为权利要求书中记载的控制装置的一例。
<照相机>
照相机10为包含CCD(Charge Coupled Device，电荷耦合器件)或CMOS(Complementary Metal Oxide Semiconductor，互补金属氧化物半导体)等作为光接收元件，且至少能进行动态图像的拍摄的照相机。另外照相机10也可为除动态图像的拍摄以外也能进行静止图像的拍摄的照相机。智能电话1可除了动态图像拍摄用的照相机10以外还具备另一个静止图像拍摄用的照相机，照相机10也可为同时拍摄动态图像以及静止图像者。
<显示装置>
显示装置20配备于智能电话1的一面，以显示包含智能电话1所存储的静止图像以及动态图像等的各种信息。显示装置20可为例如液晶显示器或有机EL(ElectroLuminescence，电致发光)显示器等。
<AI引擎控制装置>
AI引擎控制装置30作为启动人工智能(AI:Artificial Intelligence)的AI引擎而发挥功能。作为该AI引擎的功能是通过AI引擎控制装置30所具备的CPU(CentralProcessing Unit，中央处理单元)、GPU(Graphics Processing Unit，图形处理单元)或DSP(Digital Signal Processor，数字信号处理器)来实现。此外AI引擎控制装置30也可具备存储有人工智能所习得的数据等的存储部(未图示)。
AI引擎控制装置30针对动态图像所包含的每一帧、或动态图像所包含的每个作为连续的多个帧的场景，基于该帧或该场景中的图像信息来算出得分(评价重要度)。在此，所谓图像信息是指各帧或场景的信息，例如可为被摄体、构图、或色调等中的至少1个。
该得分例如在基于动态图像所包含的被摄体来算出的情况下，是基于被摄体的种类(是否为人或动物等特定的物体)、大小、活动、位置、方向、数目或亮度等，通过人工智能预先习得的基准来算出。
作为具体例，AI引擎控制装置30也可在被摄体的种类为人的情况下算出比被摄体非人的情况高的得分。此外AI引擎控制装置30也可在该人的表情为笑脸的情况下算出更高的得分。另外，对什么样的被摄体算出高的得分也可由用户来设定。通过这种结构，用户可根据拍摄以人为拍摄对象的动态图像的情况和拍摄以动物等人以外的物体为拍摄对象的动态图像的情况来适当地设定不同的算分基准。
同样，在AI引擎控制装置30基于动态图像所包含的构图来算出得分的情况下，会按照人工智能预先习得的基准来算出得分。例如，也可为越接近遵循三分法的构图等一般为良好的构图，AI引擎控制装置30越会算出高的得分。
AI引擎控制装置30所算出的每一帧或每个场景的得分的信息被输出至下述的重要场景判定部42。
<控制装置>
控制装置40包含例如CPU，以总括性地控制智能电话1的动作。控制装置40包含动态图像取得部41、重要场景判定部42、以及场景信息生成部43。此外控制装置40也可还包含动态图像生成部44以及动态图像再生部45。
(动态图像取得部)
动态图像取得部41执行动态图像取得处理，其取得照相机10所拍摄的动态图像即拍摄视频(第1动态图像)。动态图像取得部41将取得的拍摄视频输出至AI引擎控制装置30。
(重要场景判定部)
重要场景判定部42根据AI引擎控制装置30所算出的、拍摄视频所包含的每一帧或每个场景的得分来判定该帧或该场景是否为重要场景。换言之，重要场景判定部42执行重要场景判定处理，其基于拍摄视频所包含的图像信息来判定拍摄视频所包含的每一帧是否为重要场景。此外，重要场景判定部42基于拍摄视频所包含的图像的被摄体、构图以及色调中的至少1个来判定每一帧或每个场景是否为重要场景。
重要场景判定部42通过所述的得分是否为规定的阈值以上来进行是否为重要场景的判定。规定的阈值由重要场景判定部42对应AI引擎的算分基准设定为适当的值。此外，用户也可将规定的阈值设定为任意的值。由此，用户能通过改变规定的阈值来调整被判定为重要场景的帧或场景的数目。
此外，重要场景判定部42在下述的剪辑视频(第2动态图像)的长度已预先规定的情况下，也可以如下的方式适当调整规定的阈值：将所有的重要场景加在一起的动态图像的长度与规定的剪辑视频的长度大致相同。由此，重要场景判定部42能以剪辑视频为规定长度的动态图像的方式从拍摄视频中提取重要场景。
另外，AI引擎控制装置30所具备的AI引擎的功能也可包含于重要场景判定部42。在该情况下，AI引擎会通过控制装置40所具备的CPU等来工作，重要场景判定部42对算出拍摄视频所包含的每一帧或每个场景的得分的处理以及是否为重要场景的判定处理这两个处理都予以执行。
如上所述，通过重要场景判定部42，能基于拍摄视频所包含的图像来判定拍摄视频中哪一部分分为重要场景。
(场景信息生成部)
场景信息生成部43执行场景信息生成处理，该处理基于重要场景判定部42的判定结果来生成重要场景信息，所述重要场景信息包含拍摄视频所含的帧或场景各自是否为重要场景的判定结果。重要场景信息可为将是否为重要场景的信息直接以标签形式附于拍摄视频中的各帧而成者。
此外场景信息生成部43也可独立于拍摄视频的数据而另行将用于特定出被判为重要场景的帧的信息作为重要场景信息来生成。通过这种结构，智能电话1能分开管理拍摄视频与重要场景信息。
作为特定出所述的帧的信息，拍摄视频中被判定为重要场景的帧可为在拍摄视频中存在的时刻的信息，也可为示出是拍摄视频中的第几帧的信息。另外，通过将拍摄视频中的帧存在的时刻作为特定出帧的信息这一结构，即使当拍摄视频的帧率在后来改变时，拍摄视频中被判定为重要场景的帧的存在位置也不会改变。因此，无需改变拍摄视频的重要场景信息。
(动态图像生成部)
动态图像生成部44生成从拍摄视频中剪辑重要场景而成的剪辑视频(第2动态图像)。换言之，动态图像生成部44基于场景信息生成部43所生成的重要场景信息，从拍摄视频中提取被判定为重要场景的帧作为连接用帧。然后，执行动态图像生成处理，其生成由单一的连接用帧构成的、或连接多个连接用帧彼此而成的第2动态图像。
通过这种结构，动态图像生成部44能生成比拍摄视频短的、仅包含重要场景的剪辑视频。因此用户能获得动态图像的长度以及数据的尺寸小的剪辑视频，所以能容易地管理保存于智能电话1的动态图像。
另外，控制装置40也可在生成剪辑视频后将拍摄视频以及剪辑视频中的两者都存储于智能电话1所具备的存储装置(未图示)。由此，用户即使在剪辑视频未包含自己认为重要的场景的情况下，也能通过改变所述的规定的阈值等重新从拍摄视频中生成剪辑视频。此外，控制装置40也可在生成剪辑视频后仅使剪辑视频存储于所述的存储装置，并清除拍摄视频。由此，能使所述的存储装置的容量省去拍摄视频的容量部分，所以用户能利用智能电话1存储许多动态图像。
此外，动态图像生成部44也可从被重要场景判定部42判定为重要场景的帧中提取还满足规定条件的帧作为连接用帧。在此，所谓规定的条件，可为例如仅应用于被判定为重要场景的帧连续了一定数目以上的情况的、这些帧的被摄体的表情、构图、活动的大小等条件。
具体而言，动态图像生成部44也可针对被判定为重要场景的一系列帧，相较于被摄体的表情非笑脸的情况，在被摄体的表情为笑脸的情况下会提取更多的帧作为连接用帧。通过这种结构，动态图像生成部44能根据规定的条件来改变被判定为重要场景的一系列连续的帧的数目。因此，动态图像生成部44能调节包含同一被摄体或构图等的场景的长度，所以能在短的时间内生成像包含各种场景那样的、对用户而言是更好内容的剪辑视频。
规定的条件并不限于上述的实例，也可为任何条件。关于该规定的条件，各种条件可在智能电话1中预先设定，用户也可任意设定规定的条件。此外，也可利用智能电话1所具备的通信功能依次增加或更新规定的条件的选项。
这样，通过从被判定为重要场景的帧中提取还满足规定的条件的帧作为连接用帧这一结构，控制装置40除与重要场景判定的得分有关的规定阈值以外还可设定用于生成剪辑视频的规定条件。因此，用户能详细地设定和改变剪辑视频的生成条件，所以控制装置40能生成更符合用户嗜好的剪辑视频。
另外控制装置40可在照相机10进行的拍摄视频的拍摄完成后执行动态图像取得部41、重要场景判定部42以及场景信息生成部43所执行的处理，也可与该拍摄大致平行地实时执行。这种实时的处理通过控制装置40将AI引擎用于重要场景的判定的至少一部分来实现。
通过控制装置40在拍摄视频的拍摄中实时执行这些处理这一结构，控制装置40能在照相机10进行的拍摄视频的拍摄完成后立即生成重要场景信息。因此，能有效地降低从照相机10进行的拍摄视频的拍摄完成后到动态图像生成部44进行的剪辑视频的生成的时间延迟。
(动态图像再生部)
动态图像再生部45执行在显示装置20显示再生剪辑视频的处理。动态图像再生部45也可对再生中的剪辑视频赋予逐渐消失等过渡效果。此外动态图像再生部45也可仅使剪辑视频中的特定的连接用帧再生一定时间。
此外动态图像再生部45可通过剪辑视频中的每一连接用帧依次从旁边滑动并交替下去的形态进行再生，也可通过以再生中的连接用帧缓慢地变小且紧接其后的连接用帧缓慢地变大的方式交替下去的形态来再生剪辑视频。
而且，动态图像再生部45也可在拍摄视频的拍摄中所拍摄的静止图像存在的情况下将该静止图像放入剪辑视频的规定的位置来进行再生。所谓该规定的位置，可为剪辑视频中与该静止图像对应的连接用帧出现的位置，可为剪辑视频的最初或最后，也可为其它任何位置。
动态图像再生部45也可通过其它任何形态来再生剪辑视频。此外，所述的过渡效果等也可在动态图像生成部44进行剪辑视频的生成时应用于剪辑视频。
此外，动态图像再生部45也可使拍摄视频而非剪辑视频显示再生于显示装置20。在该情况下，动态图像再生部45也可通过用户能识别被判定为重要场景的帧或场景的形态来再生拍摄视频。所谓上述的用户能识别的形态，是例如被判定为重要场景的帧或场景会在显示装置20显示小的红球那样的形态。
通过这种结构，用户能通过对拍摄视频进行视听来确认重要场景的位置。由此，例如用户能对上述的规定的阈值或上述的规定的条件进行改变等，以研究出用于生成更理想的剪辑视频的设定。
〔控制装置所执行的处理〕
以下参照图2及图3来说明控制装置40所执行的处理、即利用控制装置40的智能电话1的控制方法。另外，在图2中示出控制装置40基于拍摄视频中的构图来判定是否为重要场景的处理的一例，在图3中示出控制装置40基于拍摄视频中的被摄体来判定是否为重要场景的处理的一例。
<构图识别处理>
如图2所示，动态图像取得部41取得照相机10所拍摄的拍摄视频(动态图像取得步骤)，并将该拍摄视频输出至AI引擎控制装置30。AI引擎控制装置30接收拍摄视频的输入，并启动作为AI引擎之一的构图识别引擎(S1)。
接着，AI引擎控制装置30针对拍摄视频所包含的每一帧，基于图像的构图算出得分，并判定所算出的得分是否为规定的阈值以上(得分是否高)(S2、重要场景判定步骤)。当关于一个帧、该构图的得分不是规定的阈值以上时(在S2中为NO)，AI引擎控制装置30会针对下一帧执行S2的判定。
当关于一个帧、该构图的得分为规定的阈值以上时(在S2中为YES)，重要场景判定部42会判定该帧为重要场景。然后场景信息生成部43会通过将该帧视为重要场景并生成重要场景信息来进行标记(S3、场景信息生成步骤)。
接着，重要场景判定部42判定照相机10进行的拍摄视频的拍摄是否结束(S4)。当拍摄未结束时(在S4中为NO)，AI引擎控制装置30以及控制装置40会反复执行S2以及S3的处理直到拍摄结束为止。当拍摄已结束时(在S4中为YES)，AI引擎控制装置30会结束构图识别引擎的功能(S5)。
接着，动态图像生成部44从拍摄视频中提取被标记为重要场景的帧作为连接用帧，并连接该连接用帧以生成剪辑视频(S6、动态图像生成步骤)。
<被摄体识别处理>
此外如图3所示，动态图像取得部41取得照相机10所拍摄的拍摄视频(动态图像取得步骤)，并将该拍摄视频输出至AI引擎控制装置30。AI引擎控制装置30接收拍摄视频的输入，并启动作为AI引擎之一的被摄体识别引擎(S11)。
接着，AI引擎控制装置30针对拍摄视频所包含的每一帧、判定该帧的图像信息中是否包含人或动物等特定的被摄体(S12)。当一个帧未包含特定的被摄体时(在S12中为NO)，AI引擎控制装置30会针对下一帧执行S12的判定。
当一个帧包含特定的被摄体时(在S12中为YES)，AI引擎控制装置30还会基于该帧的周边的帧的图像信息来判定该特定的被摄体的活动是否大(S13)。当特定的被摄体的活动不大时(在S13中为NO)，AI引擎控制装置30会针对下一帧执行S12的判定。
当特定的被摄体的活动大时(在S13中为YES)，AI引擎控制装置30会针对该帧算出规定的阈值以上的得分，重要场景判定部42会判定该帧为重要场景(重要场景判定步骤)。然后场景信息生成部43会通过将该帧视为重要场景并生成重要场景信息来进行标记(S14、场景信息生成步骤)。
接着，重要场景判定部42判定照相机10进行的拍摄视频的拍摄是否结束(S15)。当拍摄未结束时(在S15中为NO)，AI引擎控制装置30以及控制装置40会反复执行S12～S14的处理直到拍摄结束为止。当拍摄已结束时(在S15中为YES)，AI引擎控制装置30会结束被摄体识别引擎的功能(S16)。
接着，动态图像生成部44从拍摄视频中提取被标记为重要场景的帧作为连接用帧，并连接连接用帧以生成剪辑视频(S17、动态图像生成步骤)。
另外，在此示出了被摄体识别引擎基于作为判定对象的帧的图像信息所包含的被摄体的种类(是否为特定的被摄体)以及被摄体的活动的大小来算出得分的实例。但被摄体识别引擎并不限于此，也可基于被摄体的任何特征来算出得分。
上述的、构图识别引擎的构图识别处理以及被摄体识别引擎的被摄体识别处理也可在判定拍摄视频所包含的每一帧是否为重要场景的处理中同时地执行。即、AI引擎控制装置30也可基于拍摄视频所包含的图像的被摄体、构图以及色调中的两个以上来判定每一帧是否为重要场景。
此外，AI引擎控制装置30所具备的AI引擎并不限于上述的构图识别引擎以及被摄体识别引擎，也可为能解析拍摄视频的任何AI引擎。
〔变形例〕
本发明的一实施方式的智能电话1的上述的各功能以及处理是以用户正在用照相机10拍摄动态图像的情况为前提来进行说明。但也可在用户正用照相机10拍摄静止图像的情况下，照相机10同时地在背景下拍摄动态图像，并且AI引擎控制装置30以及控制装置40将该动态图像作为拍摄视频来执行重要场景的判定等处理。换言之，拍摄视频也可在处于静止图像拍摄状态的情况下来拍摄。在此所谓静止图像拍摄状态，是照相机10能接受静止图像拍摄的触发器(快门等)的状态或包含静止图像拍摄中的至少任一个的状态。另外，在该情况下拍摄静止图像的也可为智能电话1所具备的照相机10以外的摄像装置。
例如，也可控制装置40在启动用户拍摄静止图像所使用的照相机应用程序的期间始终使照相机10在背景下拍摄动态图像，重要场景判定部42将该动态图像作为拍摄视频来判定重要场景的有无，动态图像生成部44提取该拍摄视频中被判定为重要场景的帧作为连接用帧，以生成剪辑视频。
通过这种结构，在用户拍摄静止图像时，该静止图像的周边的包含时刻的动态图像会自动地被智能电话1拍摄。因此，当用户从后回看静止图像时，能视听对应的剪辑视频。此外，在智能电话1为不存储在背景下拍摄的拍摄视频而仅存储剪辑视频的设定的情况下，每当照相机应用程序启动，即使动态图像被拍摄，存储于智能电话1的也只是包含重要场景的剪辑视频。因此，不会超出需要地使用智能电话1的存储容量。
〔软件的实现例〕
控制装置40的控制块(特别是动态图像取得部41、重要场景判定部42以及场景信息生成部43)可通过形成于集成电路(IC芯片)等的逻辑电路(硬件)来实现，也可通过软件来实现。
在后一种情况下，控制装置40包含用于执行实现各功能的软件即程序的命令的计算机。该计算机例如包含至少一个处理器(控制装置)，并且包含至少一个存储有所述程序的计算机可读记录介质。然后，在上述计算机中，通过上述处理器从上述记录介质中读取并执行上述程序来达到本发明的目的。作为上述处理器，可使用例如CPU(CentralProcessing Unit)。作为上述记录介质，可使用“非临时性的有形的介质”，例如ROM(ReadOnly Memory，只读存储器)等、以及带、盘、卡、半导体存储器、可编程的逻辑电路等。此外，也可还包含用于展开上述程序的RAM(Random Access Memory，随机存取存储器)等。此外，所述程序也可经由能传输该程序的任意的传输介质(通信网络或广播波等)供应到上述计算机。另外，本发明的一实施方式也能以通过电子传输将上述程序具体化后的嵌入载波的数据信号的形态实现。
〔总结〕
本发明的形态1的电子设备(智能电话1)为包含至少一个摄像装置(照相机10)以及至少一个控制装置(AI引擎控制装置30以及控制装置40)的电子设备，所述控制装置执行：动态图像取得处理，其取得所述摄像装置所拍摄的第1动态图像；重要场景判定处理，其基于所述第1动态图像所包含的图像信息来判定所述第1动态图像所包含的每一帧是否为重要场景；以及场景信息生成处理，其生成重要场景信息，该信息包含所述帧各自是否为所述重要场景的判定结果。
本发明的形态2的电子设备是根据所述形态1，其中所述控制装置还执行动态图像生成处理，其提取被判定为所述重要场景的所述帧作为连接用帧，并生成由单一的所述连接用帧构成的、或连接多个所述连接用帧彼此而成的第2动态图像。
本发明的形态3的电子设备是根据所述形态2，其中所述控制装置在所述动态图像生成处理中，从被判定为所述重要场景的所述帧中提取满足规定的条件的所述帧作为所述连接用帧。
本发明的形态4的电子设备是根据所述形态1至3，其中所述控制装置在所述重要场景判定处理中基于所述图像信息的被摄体、构图以及色调中的至少1个来判定每一所述帧是否为所述重要场景。
本发明的形态5的电子设备是根据所述形态4，其中所述控制装置在所述重要场景判定处理中基于所述图像信息的被摄体、构图以及色调中的至少1个来为每一所述帧评价重要度，并将所述重要度为规定的阈值以上的所述帧判定为所述重要场景。
本发明的形态6的电子设备是根据所述形态1至5，其中所述重要场景信息包含被判定为所述重要场景的所述帧在所述第1动态图像中存在的时刻的信息。
本发明的形态7的电子设备是根据所述形态1至6，其中所述第1动态图像也可在所述摄像装置为静止图像拍摄状态的情况下被拍摄。
本发明的形态8的控制装置(AI引擎控制装置30以及控制装置40)为用于控制包含至少一个摄像装置(照相机10)的电子设备(智能电话1)的控制装置，其包含：动态图像取得部(41)，其能执行取得所述摄像装置所拍摄的第1动态图像的处理；重要场景判定部(42)，其能执行基于所述第1动态图像所包含的图像信息来判定所述第1动态图像所包含的每一帧是否为重要场景的处理；以及场景信息生成部(43)，其能执行生成重要场景信息的处理，所述重要场景信息包含所述第1动态图像中的每一所述帧是否为所述重要场景的判定结果。
本发明的形态9的控制方法为用于控制包含至少一个摄像装置(照相机10)的电子设备(智能电话1)的控制方法，其包括：动态图像取得步骤，其取得所述摄像装置所拍摄的第1动态图像；重要场景判定步骤，其基于所述第1动态图像所包含的图像信息来判定所述第1动态图像所包含的每一帧是否为重要场景；以及场景信息生成步骤，其生成重要场景信息，该重要场景信息包含所述第1动态图像中的每一所述帧是否为所述重要场景的判定结果。
本发明的各形态的控制装置也可通过计算机来实现，在该情况下，通过使计算机作为所述控制装置所具备的各部(软件要素)来工作而利用计算机来实现所述控制装置的、控制装置的控制程序、以及记录有该控制程序的计算机可读记录介质也包含在本发明的范畴内。
〔附记事项〕
本发明不受上述的各实施方式限定,可在权利要求所示的范围内进行各种变更，将分别公开于不同实施方式的技术手段适当组合而得到的实施方式也包含在本发明的技术范围内。而且，通过将分别公开于各实施方式的技术手段组合能形成新的技术特征。
Claims (1)
1.一种电子设备，其为包含至少一个摄像装置以及至少一个控制装置的电子设备，其特征在于：
所述控制装置执行以下处理：
动态图像取得处理，其取得所述摄像装置所拍摄的第1动态图像；
重要场景判定处理，其基于所述第1动态图像所包含的图像信息来判定所述第1动态图像所包含的每一帧是否为重要场景；以及
场景信息生成处理，其生成重要场景信息，该重要场景信息包含所述帧各自是否为所述重要场景的判定结果，
所述重要场景判定处理在动态图像的拍摄完成后执行。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019-081267 | 2019-04-22 | ||
| JP2019081267A JP7281951B2 (ja) | 2019-04-22 | 2019-04-22 | 電子機器、制御装置、制御プログラムおよび制御方法 |
| CN202010270163.7A CN111835966B (zh) | 2019-04-22 | 2020-04-08 | 电子设备、控制装置、记录介质以及控制方法 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010270163.7A Division CN111835966B (zh) | 2019-04-22 | 2020-04-08 | 电子设备、控制装置、记录介质以及控制方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114979496A true CN114979496A (zh) | 2022-08-30 |
Family
ID=72832588
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010270163.7A Active CN111835966B (zh) | 2019-04-22 | 2020-04-08 | 电子设备、控制装置、记录介质以及控制方法 |
| CN202210764845.2A Pending CN114979496A (zh) | 2019-04-22 | 2020-04-08 | 电子设备 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010270163.7A Active CN111835966B (zh) | 2019-04-22 | 2020-04-08 | 电子设备、控制装置、记录介质以及控制方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US11288512B2 (zh) |
| JP (5) | JP7281951B2 (zh) |
| CN (2) | CN111835966B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7281951B2 (ja) * | 2019-04-22 | 2023-05-26 | シャープ株式会社 | 電子機器、制御装置、制御プログラムおよび制御方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010258768A (ja) * | 2009-04-24 | 2010-11-11 | Canon Inc | 画像表示装置及びその制御方法、並びにプログラム及び記憶媒体 |
| CN102217304A (zh) * | 2008-11-14 | 2011-10-12 | 松下电器产业株式会社 | 拍摄装置和摘要再生方法 |
| CN103838808A (zh) * | 2012-11-26 | 2014-06-04 | 索尼公司 | 信息处理装置、信息处理方法和程序 |
| JP2014233011A (ja) * | 2013-05-29 | 2014-12-11 | 株式会社ニコン | 撮影装置 |
| CN104821001A (zh) * | 2014-02-05 | 2015-08-05 | 富士胶片株式会社 | 内容管理系统、管理内容生成方法、管理内容再生方法、程序以及记录介质 |
| CN104822015A (zh) * | 2014-01-30 | 2015-08-05 | 卡西欧计算机株式会社 | 图像处理装置以及图像处理方法 |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006211311A (ja) * | 2005-01-28 | 2006-08-10 | Victor Co Of Japan Ltd | ダイジェスト映像生成装置 |
| JP4525558B2 (ja) | 2005-11-08 | 2010-08-18 | ソニー株式会社 | 情報処理装置、撮像装置、および情報処理方法、並びにコンピュータ・プログラム |
| JP4379409B2 (ja) | 2005-11-08 | 2009-12-09 | ソニー株式会社 | 撮像装置、および情報処理方法、並びにコンピュータ・プログラム |
| JP4835176B2 (ja) * | 2006-01-31 | 2011-12-14 | 株式会社ニコン | デジタルスチルカメラ |
| JP4737213B2 (ja) * | 2008-03-18 | 2011-07-27 | 日本電気株式会社 | 情報処理装置 |
| JP5457092B2 (ja) * | 2009-07-03 | 2014-04-02 | オリンパスイメージング株式会社 | デジタルカメラ及びデジタルカメラの合成画像表示方法 |
| JP5486232B2 (ja) | 2009-07-28 | 2014-05-07 | キヤノン株式会社 | 動画再生装置及びその処理方法 |
| JP2011124979A (ja) | 2009-11-13 | 2011-06-23 | Jvc Kenwood Holdings Inc | 映像処理装置、映像処理方法、および映像処理プログラム |
| JP2011244175A (ja) | 2010-05-18 | 2011-12-01 | Sony Corp | 電子機器、映像処理方法及びプログラム |
| TR201808595T4 (tr) * | 2011-08-04 | 2018-07-23 | Toray Industries | Kanser hastalıklarının tedavisi ve/veya profilaksisi için farmasötik bileşim. |
| JP6602361B2 (ja) * | 2017-10-16 | 2019-11-06 | キヤノン株式会社 | 電子機器及びその制御方法 |
| US11295139B2 (en) * | 2018-02-19 | 2022-04-05 | Intellivision Technologies Corp. | Human presence detection in edge devices |
| AU2018204004A1 (en) * | 2018-06-06 | 2020-01-02 | Canon Kabushiki Kaisha | Method, system and apparatus for selecting frames of a video sequence |
| JP7281951B2 (ja) * | 2019-04-22 | 2023-05-26 | シャープ株式会社 | 電子機器、制御装置、制御プログラムおよび制御方法 |
-
2019
- 2019-04-22 JP JP2019081267A patent/JP7281951B2/ja active Active
-
2020
- 2020-04-06 US US16/841,012 patent/US11288512B2/en active Active
- 2020-04-08 CN CN202010270163.7A patent/CN111835966B/zh active Active
- 2020-04-08 CN CN202210764845.2A patent/CN114979496A/zh active Pending
-
2023
- 2023-05-15 JP JP2023080055A patent/JP7308376B2/ja active Active
- 2023-05-15 JP JP2023080054A patent/JP7308375B2/ja active Active
- 2023-05-15 JP JP2023080053A patent/JP7308374B1/ja active Active
- 2023-07-03 JP JP2023109353A patent/JP7340720B1/ja active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102217304A (zh) * | 2008-11-14 | 2011-10-12 | 松下电器产业株式会社 | 拍摄装置和摘要再生方法 |
| JP2010258768A (ja) * | 2009-04-24 | 2010-11-11 | Canon Inc | 画像表示装置及びその制御方法、並びにプログラム及び記憶媒体 |
| CN103838808A (zh) * | 2012-11-26 | 2014-06-04 | 索尼公司 | 信息处理装置、信息处理方法和程序 |
| JP2014233011A (ja) * | 2013-05-29 | 2014-12-11 | 株式会社ニコン | 撮影装置 |
| CN104822015A (zh) * | 2014-01-30 | 2015-08-05 | 卡西欧计算机株式会社 | 图像处理装置以及图像处理方法 |
| CN104821001A (zh) * | 2014-02-05 | 2015-08-05 | 富士胶片株式会社 | 内容管理系统、管理内容生成方法、管理内容再生方法、程序以及记录介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7340720B1 (ja) | 2023-09-07 |
| JP7308376B2 (ja) | 2023-07-13 |
| JP7308375B2 (ja) | 2023-07-13 |
| CN111835966A (zh) | 2020-10-27 |
| JP7308374B1 (ja) | 2023-07-13 |
| JP2020178314A (ja) | 2020-10-29 |
| JP2023130431A (ja) | 2023-09-20 |
| US20200334464A1 (en) | 2020-10-22 |
| JP2023096006A (ja) | 2023-07-06 |
| JP2023102299A (ja) | 2023-07-24 |
| US11288512B2 (en) | 2022-03-29 |
| JP2023096007A (ja) | 2023-07-06 |
| JP7281951B2 (ja) | 2023-05-26 |
| CN111835966B (zh) | 2022-07-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6388673B2 (ja) | 携帯端末及びその撮像方法 | |
| US8139136B2 (en) | Image pickup apparatus, control method of image pickup apparatus and image pickup apparatus having function to detect specific subject | |
| US9088721B2 (en) | Imaging apparatus and display control method thereof | |
| CN106664366B (zh) | 图像处理装置、摄像装置以及图像处理方法 | |
| CN113630545B (zh) | 一种拍摄方法及设备 | |
| KR20140016401A (ko) | 이미지 촬상 방법 및 장치 | |
| CN102065224B (zh) | 摄像装置和摄像方法 | |
| CN110381247B (zh) | 摄像装置以及摄像装置的控制方法 | |
| CN108492266B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| US9601158B2 (en) | Moving image selection apparatus for selecting moving image to be combined, moving image selection method, and storage medium | |
| US20120075500A1 (en) | Imaging apparatus, imaging method, image processing apparatus, and image processing method | |
| JP7308374B1 (ja) | 電子機器 | |
| JP2010087599A (ja) | 撮像装置、方法およびプログラム | |
| US8384795B2 (en) | Digital image signal processing method and apparatus, and medium having recorded thereon the method | |
| JP2009272740A (ja) | 撮像装置、画像選択方法及び画像選択プログラム | |
| JP2017163191A (ja) | 画像処理装置、撮像装置、画像処理方法、およびプログラム | |
| CN109120856B (zh) | 一种摄像方法及装置 | |
| JP4742542B2 (ja) | 撮像装置 | |
| CN108495038B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| US20220327865A1 (en) | Electronic device and control method | |
| CN117714842B (zh) | 图像曝光控制方法、装置、系统、电子设备及介质 | |
| US11785346B2 (en) | Imaging device and imaging control method | |
| CN117560579A (zh) | 拍摄处理方法、装置、电子设备以及存储介质 | |
| JP2005117370A (ja) | デジタルカメラ | |
| JP2009141694A (ja) | 画像処理装置、方法及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |