CN112954220A - 图像预览方法及装置、电子设备、存储介质 - Google Patents

图像预览方法及装置、电子设备、存储介质 Download PDF

Info

Publication number
CN112954220A
CN112954220A CN202110236249.2A CN202110236249A CN112954220A CN 112954220 A CN112954220 A CN 112954220A CN 202110236249 A CN202110236249 A CN 202110236249A CN 112954220 A CN112954220 A CN 112954220A
Authority
CN
China
Prior art keywords
image
target object
head
preview
mounted device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110236249.2A
Other languages
English (en)
Inventor
苏韶华
董玉泉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Beehive Century Technology Co ltd
Original Assignee
Beijing Beehive Century Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Beehive Century Technology Co ltd filed Critical Beijing Beehive Century Technology Co ltd
Priority to CN202110236249.2A priority Critical patent/CN112954220A/zh
Publication of CN112954220A publication Critical patent/CN112954220A/zh
Priority to US17/377,171 priority patent/US11962891B2/en
Priority to EP21186993.8A priority patent/EP4053678A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Abstract

本公开提供一种图像预览方法及装置、电子设备、存储介质,该方法可以包括:确定所述摄像头采集到的第一图像中包含的目标对象,并截取包含目标对象的图像区域,进而将图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示,通过上述方法,可以在复杂的拍摄场景中快速确定目标对象,自动将目标对象所在的区域放大显示可以使用户通过预览界面更加清晰的观察到目标对象,同时也避免了由于放大后的图像区域的视场角过小导致用户难以通过移动头戴式设备找到目标对象的问题。

Description

图像预览方法及装置、电子设备、存储介质
技术领域
本公开涉及电子技术领域,特别是图像预览方法及装置、电子设备、存储介质。
背景技术
随着智能电子设备的发展,头戴式设备成为越来越多用户的选择。现阶段的头戴式设备上通常设置有拍摄功能,当用户进行拍摄时,由于头戴式设备佩戴于用户头部,相比于手机、摄像机等其它具有拍摄功能的其他手持设备,用户易受视觉、听觉、嗅觉等各类因素影响产生头部的转动或其他移动,从而造成镜头随之移动,难以将镜头对准想要拍摄的目标对象,若目标对象丢失,用户需要反复重新寻找想要拍摄的目标对象,降低用户的使用体验。
发明内容
有鉴于此,本公开提供图像预览方法及装置、电子设备、存储介质。
具体的,本公开通过如下技术方案实现:
根据本公开的第一方面,提出了一种图像预览方法,应用于头戴式设备,所述头戴式设备上设有摄像头,包括:
确定所述摄像头采集到的第一图像中包含的目标对象;
截取包含所述目标对象的图像区域;
将所述图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示。
根据本公开的第二方面,提出了一种图像预览装置,应用于头戴式设备,所述头戴式设备上设有摄像头,包括:
确定单元,用于确定所述摄像头采集到的第一图像中包含的目标对象;
截取单元,用于截取包含所述目标对象的图像区域;
预览单元,用于将所述图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示。
根据本公开的第三方面,提供一种电子设备,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器通过运行所述可执行指令以实现如上述第一方面的实施例中所述的方法。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机指令,该指令被处理器执行时实现如上述第一方面的实施例中所述方法的步骤。
由以上本公开提供的技术方案可见,本公开通过确定目标对象,进而截取目标对象所在的区域,以将包含目标对象的区域放大显示,可以在复杂的拍摄场景中快速确定目标对象,将目标对象所在的区域放大显示可以使用户通过预览界面更加清晰的观察到目标对象,进而在合适的时机进行拍摄;尤其针对动态的目标对象,不仅无需时刻随着目标对象的移动轨迹而转动头部,而且可以在预览界面中实时观察到目标对象的当前状态,进而抓拍到最满意的图像,避免了由于不当转动头部而导致丢失目标对象,或是由于无法准确观察到目标对象的实时状态而错失拍摄时机。相比于手动放大目标对象所在区域后再进行移动,节省了用户的操作步骤,也避免了由于放大后的图像区域视场角过小而导致的难以找到目标对象的问题。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据本公开一示例性实施例示出的一种图像预览方法的流程图;
图2是应用本公开实施例的头戴式设备的示意图;
图3是根据本公开一示例性实施例示出的一种图像预览方法的具体流程图;
图4是根据本公开一示例性实施例示出的第一种图像预览方法的示意图;
图5是根据本公开一示例性实施例示出的第二种图像预览方法的示意图;
图6是根据本公开一示例性实施例示出的第三种图像预览方法的示意图;
图7是根据本公开一示例性实施例示出的第四种图像预览方法的示意图;
图8是根据本公开一示例性实施例示出的第五种图像预览方法的示意图;
图9是根据本公开一示例性实施例示出的第六种图像预览方法的示意图;
图10是根据本公开一示例性实施例示出的第七种图像预览方法的示意图;
图11是根据本公开一示例性实施例示出的第八种图像预览方法的示意图;
图12是根据本公开一示例性实施例示出的一种图像预览电子设备示意图;
图13是根据本公开一示例性实施例示出的一种图像预览装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
接下来对本公开实施例进行详细说明。
图1为根据本公开一示例性实施例示出的一种图像预览方法的流程图,该方法应用于头戴式设备,所述头戴式设备上设有至少一个摄像头,并且,头戴式设备可以表现为眼镜、头盔、帽子等形式,本公开对头戴式设备的具体形式不作限制。结合图1,上述方法可以包括如下步骤:
步骤102:确定所述摄像头采集到的第一图像中包含的目标对象。
在一实施例中,可以通过检测到的用户触发操作,确定用户选取的目标对象。举例而言,头戴式设备可以向用户显示当前镜头所采集的预览图像,用户开启拍摄功能但是并未开始拍摄时,即用户处于拍摄预览功能下时,展示在用户眼前的界面可以称为拍摄预览界面,拍摄预览界面中展示当前摄像头采集的预览图像,上述预览图像称为第一图像,用户可以直接通过触控操作在预览图像中点击想要拍摄的目标对象;或者,将用户实施点击或者拖动操作选取的区域范围作为目标对象;或者,头戴式设备可以对用户进行眼球追踪,确定用户视线在预览图像上的聚焦点,当视线停留预设时长时,确定视线停留处的物体即为目标对象;或者,头戴式设备可以根据接收到的用户的口述内容确定目标对象,例如用户只需要口述“松树”,头戴式设备即可基于语义分析和图像内容分析将预览图像中的“松树”确定为目标对象;或者,还可以根据所述头戴式设备中预设的对象特征,确定与所述对象特征相匹配的目标对象。举例而言,头戴式设备中预先设置有对象特征,例如人体特征、建筑物特征、自然景物特征等,当头戴式设备处于拍摄预览功能下,镜头捕捉到与预设的对象特征相吻合的景物时,可以将其自动确定为目标对象,需要理解的是对于目标对象确认方法这里仅做示例性说明,本公开对此不作限制。
在一实施例中,目标对象包括位置可移动的动态对象、位置固定的静态对象、和/或用户在预览界面中选取的位置区域。值得说明的是,在拍摄预览时,头戴式设备可以连续不断的获取当前的预览图像,获取预览图像的频率由头戴式设备的性能确定,或者也可以根据工程经验值进行自定义,每获取一幅预览图像,就确定一次当前预览图像中包含的目标对象,通过上述方式,无论用户是否移动摄像头,或是目标对象是是否正在移动,均可以完成对目标对象的实时跟踪,进而在下述步骤中保持将目标对象所在区域放大显示。
在一实施例中,目标对象可以为一个也可以为多个,本公开对此不作限制。举例而言,头戴式设备预设有多个对象特征,在拍摄功能下镜头捕捉到多个与预设对象特征相吻合的景物,可以自动将多个景物均确定为目标对象,并分别对目标对象执行下述步骤。
在上述实施例中,本公开提供了多种确定目标对象的方式,用户可以选择最适合的方式确定目标对象,以满足不同用户的需求。
步骤104:截取包含所述目标对象的图像区域。
在一实施例中,可以截取目标对象所在的图像区域,以便于在后续步骤将此图像区域放大显示。上述图像区域的大小可以根据目标对象的大小调整,图像区域中需要包含目标对象,但是,当用户选取的目标对象就是拍摄预览界面中的一部分图像区域时,可以直接截取用户选取的图像区域或者截取包含用户选取的图像区域的更大范围的图像区域。
步骤106:将所述图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示。
在一实施例中,可以将上述步骤中截取的图像区域放大至预定义的尺寸,并展示于用户的拍摄预览界面中,上述预定义的尺寸可以灵活调整,例如,可以直接将截取的图像区域放大至用户预览界面的最大尺寸,即全屏显示上述图像区域。在上述实施例中,可以实时确定目标对象,并将目标对象放大显示,实现了自动实时追踪并放大展示目标对象,避免了用户手动将目标对象放大展示而导致视场角变小,从而提升追踪目标对象难度的问题。
在一实施例中,可以在展示所述图像区域的同时对所述第一图像进行展示,并且在所述第一图像中对所述目标对象进行标示,例如,可以采用“画中画”的形式同时展示图像区域与第一图像。其中,第一图像的显示区域可以是预先设置的固定区域,也可以是能够根据用户操作进行移动、缩放或者关闭的可变区域,第一图像的大小可以灵活调整或是直接采用默认大小。举例而言,头戴式设备可以在默认状态下同时显示第一图像与图像区域,当采用“画中画”的形式展示图像区域和第一图像时,可以将图像区域作为显示的主要图像,并将第一图像覆盖在预览界面的左上角,以形成“画中画”,当预览界面中展示的图像区域被第一图像遮挡住了部分内容时,如果用户期望观察被遮挡的部分,可以拖动第一图像的显示区域,将第一图像移动至预览界面的右下角或者其他位置进行显示。此外,可以在第一图像中对目标对象进行标示,例如,可以通过框选、箭头、更改目标对象着色的方式标示目标对象的位置。举例而言,头戴式设备在默认状态下同时显示第一图像与图像区域,将图像区域作为显示的主要图像,并将第一图像覆盖在预览界面的左上角,在左上角的第一图像中可以将目标对象标示出来,以表示目标对象在当前摄像头采集到的图像中所在的位置,在目标图像移动的情况下,便于用户根据目标对象的位置及时移动摄像头,保持摄像头可以持续不断的采集到目标对象。
在一实施例中,可以根据目标对象的移动信息确定目标对象是否即将移出所述第一图像,例如,在目标对象可以移动的情况下,当目标对象向任一方向移动,并且即将超出第一图像对应的取景范围时,此时可以生成第一提示消息,第一提示消息可以指示用户向任一方向移动头部,以使目标对象保持于第一图像对应的取景范围中,进而使头戴式设备可以在第一图像中的目标对象,进而将其进行放大显示。值得说明的是,上述第一提示消息可以为在预览界面中展示的可视化消息,例如表示移动方向的箭头、文字等,也可以是声音、振动等形式的提示消息,又或是上述任意几种提示方式的组合,下述步骤中的第二提示消息同理,本公开对提示消息的具体形式不作限制。此外,在判断目标对象是否即将超出第一图像时,可以通过目标对象是否接近第一图像的边缘判定,也可以通过目标对象处于第一图像内的面积是否小于目标对象整体面积的预设百分比进行确定,或者,还可以结合目标对象移动的速度、加速度等信息综合判定,例如,当目标对象处于第一图像内的面积小于80%时,判定目标对象即将出第一图像对应的取景范围。
在一实施例中,在所述目标对象移出所述第一图像的情况下生成第二提示消息,例如,可以通过目标对象处于第一图像中的百分比判断目标对象是否移出第一图像,例如,当目标对象处于第一图像内的面积小于目标对象整体面积的50%时,可以确定目标对象已经移出第一图像的取景范围,此时可以生成第二提示消息,以指示用户对所述头戴式设备进行移动,以使所述头戴式设备在移动后重新采集的第一图像包含所述目标对象。
可选的,可以获取所述头戴式设备携带的姿态传感器记录的设备移动信息,设备移动信息用于记录头戴式设备在目标对象从第一图像中移出时对应的设备历史移动方向;进而生成包含第一移动方向的第二提示消息,第一移动方向为设备历史移动方向的反方向。其中,姿态传感器可以包含三轴陀螺仪、三轴加速度计、三轴电子罗盘等运动传感器,可以记录头戴式设备的移动角度、移动方向、移动距离等信息,在用户佩戴头戴式设备进行拍摄的实际操作中,常常由于拍摄抖动、移动距离过长等各种因素,使目标对象被移出镜头的可拍摄范围,此时可以确定目标对象移出第一图像的取景范围时头戴式设备的历史移动方向,并提示用户向反方向移动头戴式设备,即将头戴式设备移回可以采集到目标对象的位置,以使用户移动头戴式设备重新获取包含目标对象的第一图像。
可选的,可以获取目标对象的对象移动信息,对象移动信息用于记录目标对象从第一图像中移出时对应的对象历史移动方向;进而生成包含第二移动方向的第二提示消息,第二移动方向为对象历史移动方向的同方向。当目标对象为可以移动的人或物时,可以根据目标对象的移动轨迹确定目标对象移出第一图像的取景范围时,目标对象的移动方向,并提示用户向与目标对象的移动方向相同的方向移动头戴式设备,即追随目标对象的移动轨迹移动头戴式设备,使摄像头可以重新采集到包含目标对象的第一图像。
可选的,可以在目标对象从第一图像中移出的情况下,获取包含目标对象的第二图像;其中,第二图像的视场角大于所述第一图像的视场角;根据第二图像生成第二提示消息。
在一实施例中,获取头戴式设备采集的包含所述目标对象的第二图像可以包括:获取所述头戴式设备当前使用的变焦摄像头在历史时刻以相对较大视场角拍摄到的第二图像;其中,第一图像为变焦摄像头以相对较小视场角采集的图像,并且,历史时刻与当前时刻之间的间隔时长小于预设时长阈值,或者在历史时刻与当前时刻之间目标对象和/或头戴式设备产生的移动距离或转动角度小于预设阈值,以确保获取到的第二图像具有足够的可参考性。头戴式设备在确定目标对象已经移出第一图像的情况下,可以根据第二图像生成提示消息,提醒用户按照提示消息移动可穿戴设备,使得用户移动可穿戴设备后采集的第一图像内包含目标对象。
在一实施例中,在头戴式设备上配备有多个摄像头时,假设每个摄像头的视场角不同,视场角越大取景范围越宽广,视场角越小取景范围越狭窄,如果当前的摄像头采集的图像称为第一图像,当目标对象移出当前摄像头的取景范围时,可以使用其它摄像头采集的、包含目标对象的第二图像,上述其它摄像头的视场角大于采集第一图像的摄像头使用的视场角,此时可以根据获取的第二图像中目标对象的位置指示用户移动头戴式设备,使当前摄像头重新采集的第一图像中包含目标对象,并且,上述第二图像可以是其它摄像头在历史时刻采集的,也可以是其它摄像头在当前时刻采集的,如果使用历史时刻采集的第二图像,上述历史时刻与当前时刻的间隔时长小于预设时长阈值,或者在历史时刻与当前时刻之间目标对象和/或头戴式设备产生的移动距离或转动角度小于预设阈值,以确保获取到的第二图像具有足够的可参考性。
值得说明的是,所述头戴式设备采集到的第二图像可以是单帧图片,也可以是视频,还可以是摄像头输出的实时预览图像。举例而言,所述头戴式设备携带的变焦摄像头在历史时刻以相对较大视场角拍摄单帧图片作为第二图像,在当前时刻以相对较小视场角采集的实时预览图像作为第一图像;或者,所述头戴式设备携带有视场角相对较小的第一摄像头和视场角相对较大的第二摄像头,第一摄像头与第二摄像头同时采集图像,将第一摄像头采集的预览图像作为第一图像,第二摄像头在历史时刻采集的视频图像作为第二图像。并且应当理解的是,上述实施例中的“获取第二图像”并不意味着“拍摄第二图像”,拍摄动作可以是之前已经完成的,也可以是在确定第一图像中未包含目标对象之后进行的,本公开并不限制采集第二图像的时间点。
在一实施例中,第二图像也可以为其它头戴式设备上配备的摄像头采集的图像,例如,不同的头戴式设备可以利用近距离无线通信技术进行数据互通,当目标对象移出任一用户使用的头戴式设备采集的第一图像时,可以实时搜索与此头戴式设备可以进行通信的其它头戴式设备并与其建立连接,或者直接使用已经建立成功的连接获取其它头戴式设备采集的第二图像,如果其它头戴式设备采集的第二图像中包含目标对象,可以根据上述第二图像确定目标对象的位置,进而生成第二提示信息,指示用户移动头戴式设备以重新获取包含目标对象的第一图像;或者,头戴式设备之间预先建立关联关系,当目标对象移出任一用户使用的头戴式设备采集的第一图像时,优先从已经建立关联关系的关联设备中获取包含目标对象的第二图像,当获取失败时,再从尚未建立关联关系的其它头戴式设备中获取第二图像,本公开对头戴式设备之间如何进行数据互通不进行具体限制。
值得说明的是,在预览界面中可以同时展示第一图像和放大后的图像区域,并且,上述第一提示信息和第二提示信息可以展示于图像区域中,也可以展示于第一图像中,由于放大后的图像区域视场角较小,因此在第一图像中展示提示消息可以达到更加准确的提示用户移动头戴式设备的效果。
由以上本公开提供的技术方案可见,本公开通过确定目标对象,进而截取目标对象所在的区域,以将包含目标对象的区域放大显示,可以在复杂的拍摄场景中快速确定目标对象,将目标对象所在的区域放大显示可以使用户通过预览界面更加清晰的观察到目标对象,进而在合适的时机进行拍摄;尤其针对动态的目标对象,不仅无需时刻随着目标对象的移动轨迹而转动头部,而且可以在预览界面中实时观察到目标对象的当前状态,进而抓拍到最满意的图像,避免了由于不当转动头部而导致丢失目标对象,或是由于无法准确观察到目标对象的实时状态而错失拍摄时机。相比于手动放大目标对象所在区域后再进行移动,节省了用户的操作步骤,也避免了由于放大后的图像区域视场角过小而导致的难以找到目标对象的问题。同时,在目标对象移出或者即将移出第一图像时,本公开可以通过目标对象的移动信息或头戴式设备的移动信息确定在当前时刻,如何通过移动头戴式设备进而重新采集到目标对象,最终生成的提示信息可以准确指示用户移动头戴式设备,进一步避免了由于无法准确判断移动方向而导致用户难以捕捉到目标对象的问题。
如图2所展示的智能眼镜类型的头戴式设备,其上配备有两个摄像头,分别为摄像头21、摄像头22,上述摄像头可以设置于如图所示头戴式设备的中部,也可以设置于头戴式设备的两侧,又或是头戴式设备的任意位置,不同摄像头可以集中设置于一处,也可以分散设置于头戴式设备的不同位置,本公开对头戴式设备上摄像头的安装位置和数量不作特殊限制;在其镜架上设置有触控区域23,用户可以通过在触控区域23内的触摸滑动操作触发、关闭、调整头戴式设备上设置的各种功能或参数,例如可以通过在触控区域内的点击、拖动操作选定目标对象或是目标对象所在的区域,利用头戴式设备摄像头采集到的图像用24表示。
图3为本公开一示例性实施例示出的一种图像预览方法的流程图,上述方法可以包括下述步骤,下面结合图2、图3对上述步骤进行详细描述:
步骤302,从第一图像中确定目标对象。
如图2所示,假设头戴式设备当前使用摄像头21进行拍摄预览,在摄像头21当前视场角对应的取景范围下,可以采集到如24所示的第一图像作为预览图像,为了更加直观,用图4中的图像40表示摄像头21采集到的当前图像。如40所示,其中包含对象41“鸟类”、对象42“树木”、对象43“太阳”、对象44“山峰”,假设用户期望将41作为目标对象,此时,用户可以通过在触控区域23内的触摸操作点击41,或是拖拽操作将41框选,以使头戴式设备确定目标对象为41;或者用户可以设置“鸟类”标签,当头戴式设备在第一图像中识别到对象41时,可以直接确定41为目标对象;又或者,用户可以口述“鸟类”,当头戴式设备采集到用户的声音信息时,将用户口述的内容与第一图像中的对象相匹配,进而将与“鸟类”匹配的41确定为目标对象。
步骤304,截取包含目标对象的图像区域。在此步骤中,可以截取第一图像中包含目标对象的图像区域,图像区域的大小可以使用默认值,也可以根据用户的拖拽灵活调整;如图4所示,假设用户确定的目标对象为41,虚线框45内包含了目标对象41,此时可以截取虚线框45内的图像区域,进而执行步骤306。
步骤306,放大图像区域并预览展示。在此步骤中,如图4中右侧的图像46所示,可以将步骤306中截取的图像区域45放大,例如,可以将图像区域45放大至头戴式设备的拍摄预览界面的尺寸得到图像46,并且将图像46展示于头戴式设备的拍摄预览界面中,使用户可以通过图像46更加清晰的观察到目标对象41。值得说明的是,可以在图像46中对第一图像40进行展示,并且在第一图像40中对所述目标对象进行标示。其中,第一图像40的显示区域可以是预先设置的固定区域,也可以是能够根据用户操作进行移动、缩放或者关闭的可变区域,第一图像40的大小可以灵活调整或是直接采用默认大小。如图5所示,头戴式设备可以在默认状态下同时显示第一图像与放大后的图像区域,将放大后的图像区域作为显示的主要图像,并将第一图像覆盖在预览界面的左上角,形成“画中画”的展现形式,当放大后的图像区域被第一图像遮挡住了部分内容时,如果用户期望观察被遮挡的部分,可以拖动第一图像的显示区域,将第一图像移动至预览界面的右下角或者其他位置进行显示。此外,可以在第一图像中对目标对象进行标示,如图5中的虚线框51所示,可以利用框选等任何方式标示目标对象的位置,以表示目标对象在摄像头21采集到的第一图像中所在的位置,在目标图像移动的情况下,便于用户根据目标对象的位置及时移动摄像头,保持摄像头可以持续不断的采集到目标对象。
步骤308,判断目标对象是否已经移出第一图像。
如果目标对象已经移出第一图像,如图6所示,假设目标对象41移出第一图像是由于目标图像41自身沿着图示虚线箭头方向移动,最终移出第一图像,可以进入步骤310a1,获取目标对象41的移动信息,上述移动信息用于记录了目标对象41从第一图像中移出时对应的历史移动方向,即图6中虚线箭头所示的方向;进而进入步骤312a,生成包含上述历史移动方向的第二提示消息,第二移动方向可以为上述与虚线箭头所指的方向相同的方向;并且,可以在放大后的图像区域上展示提示消息,如图7所示,可以通过图示箭头提示用户沿着箭头方向移动可穿戴设备,或者,也可以在界面中展示文字提醒消息,例如“请沿着箭头方向移动”,以进一步提醒用户移动可穿戴设备的方向,与此同时,也可以在与放大的图像区域同时展示的第一图像中展示提示信息,以进一步帮助用户更好的控制移动头戴式设备的角度、方向。
如果目标对象已经移出第一图像,如图8所示,假设目标对象41移出第一图像是由于佩戴可穿戴设备的用户移动了设备,使摄像头21采集的第一图像沿着图示箭头方向向左移动,最终导致摄像头21采集的第一图像中不包含目标对象,图示虚线为摄像头21在可穿戴设备移动前采集的第一图像,图示实线为摄像头21在可穿戴设备移动后采集的第一图像。可以进入步骤310a1,获取头戴式设备的移动信息,上述移动信息用于记录了头戴式设备的历史移动方向,即图8中箭头所示的方向;进而进入步骤312a,生成包含上述历史移动方向的第二提示消息,第二移动方向可以为与箭头所指的方向相反的方向;并且,可以在放大后的图像区域上展示提示消息,如图9所示,可以通过图示箭头提示用户沿着箭头方向移动可穿戴设备,或者,也可以在界面中展示文字提醒消息,例如“请沿着箭头方向移动”,以进一步提醒用户移动可穿戴设备的方向,与此同时,也可以在与放大的图像区域同时展示的第一图像中展示提示信息,以进一步帮助用户更好的控制移动头戴式设备的角度、方向。
值得说明的是,由于实际应用过程中,目标对象与头戴式设备可能存在同时移动的情况,在上述情况下,可以分别确定目标对象的移动方向和设备移动方向,进而将确定的两种方向进行综合计算得出一个最终确定的方向,进而提醒用户按照最终确定的方向移动可穿戴设备。
此外,如果目标对象已经移出第一图像,可以进入步骤310a2,如果摄像头22使用的视场角大于摄像头21的视场角,则摄像头22的取景范围将比摄像头21的取景范围更加宽阔,因此摄像头22可能会采集到包含目标对象的第二图像,此时可以使用摄像头22采集到的第二图像,当第二图像中包含目标对象时,可以根据第二图像生成第二提示消息,提醒用户按照第二提示消息移动,其中,第二图像可以是摄像头22在当前时刻采集的图像,也可以是在历史时刻采集的图像,如果为历史时刻采集,则历史时刻与当前时刻的间隔时长不大于预设阈值,或者历史时刻与当前时刻目标对象或头戴式设备的移动距离、转动角度小于预设阈值,以确保第二图像具备足够的参考价值。
如果目标对象尚未移出第一图像,此时可以进入步骤310b,判断目标对象是否即将移出第一图像,如图10所示,假设目标对象已经沿着虚线所示方向移动至第一图像的边缘,结合目标对象移动的方向、速度等信息,如果此时可以判断目标对象即将移出第一图像,则可以进入步骤312b,确定目标对象的移动信息,并根据移动信息生成第一提示消息并展示,即步骤314b~316b,例如,可以如图11所示,在第一图像和放大后的图像区域中均用箭头指示用户移动可穿戴设备。
值得说明的是,本公开并不限制不同步骤之间的先后顺序,例如,步骤310a1、310a2可以同时执行也可以按照预设顺序执行,上述实施例中的步骤仅是对本公开提供的图像预览方法对应的处理逻辑的一种示例,凡是不脱离本公开的精神与原则的修改均在本公开的保护范围之内。
与上述方法实施例相对应,本说明书还提供了一种装置的实施例。
图12是根据本公开一示例性实施例示出的一种图像预览电子设备的结构示意图。参考图12,在硬件层面,该电子设备包括处理器1202、内部总线1204、网络接口1206、内存1208以及非易失性存储器1210,当然还可能包括其他业务所需要的硬件。处理器1202从非易失性存储器1210中读取对应的计算机程序到内存1208中然后运行,在逻辑层面上形成图像预览装置。当然,除了软件实现方式之外,本公开并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
图13是根据本公开一示例性实施例示出的一种图像预览装置的框图。参照图13,该装置应用于头戴式设备,所述头戴式设备上设有摄像头,所述装置包括确定单元1302、截取单元1304和预览单元1306,其中:
确定单元1302,用于确定所述摄像头采集到的第一图像中包含的目标对象;
截取单元1304,用于截取包含所述目标对象的图像区域;
预览单元1306,用于将所述图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示。
可选的,所述将所述图像区域在所述摄像头拍摄的预览界面中预览展示,包括:在展示所述图像区域的同时对所述第一图像进行展示,并且在所述第一图像中对所述目标对象进行标示。
可选的,所述装置还包括第一提示单元1308,用于根据所述目标对象的移动信息确定所述目标对象是否即将移出所述第一图像;
在所述目标对象即将移出所述第一图像的情况下生成第一提示消息,所述第一提示消息用于指示对所述头戴式设备进行移动,以使所述目标对象保持于所述第一图像中。
可选的,所述装置还包括第二提示单元1310,用于在所述目标对象移出所述第一图像的情况下生成第二提示消息,所述第二提示消息用于指示对所述头戴式设备进行移动,以使所述头戴式设备在移动后重新采集的第一图像包含所述目标对象。
可选的,所述生成第二提示消息,包括:
获取所述头戴式设备携带的姿态传感器记录的设备移动信息,所述设备移动信息用于记录所述头戴式设备在所述目标对象从所述第一图像中移出时对应的设备历史移动方向;
生成包含第一移动方向的第二提示消息,所述第一移动方向为所述设备历史移动方向的反方向。
可选的,所述生成第二提示消息包括:
获取所述目标对象的对象移动信息,所述对象移动信息用于记录所述目标对象从所述第一图像中移出时对应的对象历史移动方向;
生成包含第二移动方向的第二提示消息,所述第二移动方向为所述对象历史移动方向的同方向。
可选的,所述生成第二提示消息包括:
在所述目标对象从所述第一图像中移出的情况下,获取包含所述目标对象的第二图像;其中,所述第二图像的视场角大于所述第一图像的视场角;
根据所述第二图像生成第二提示消息。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本公开方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器,上述指令可由图像预览装置的处理器执行以实现如上述实施例中任一所述的方法,比如该方法可以包括:
确定所述摄像头采集到的第一图像中包含的目标对象;截取包含所述目标对象的图像区域;将所述图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示。
其中,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等,本公开并不对此进行限制。
以上所述仅为本公开的较佳实施例而已,并不用以限制本公开,凡在本公开的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本公开保护的范围之内。

Claims (10)

1.一种图像预览方法,其特征在于,应用于头戴式设备,所述头戴式设备上设有摄像头,所述方法包括:
确定所述摄像头采集到的第一图像中包含的目标对象;
截取包含所述目标对象的图像区域;
将所述图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示。
2.根据权利要求1所述的方法,其特征在于,所述将所述图像区域在所述摄像头拍摄的预览界面中预览展示,包括:
在展示所述图像区域的同时对所述第一图像进行展示,并且在所述第一图像中对所述目标对象进行标示。
3.根据权利要求1所述的方法,其特征在于,还包括:
根据所述目标对象的移动信息确定所述目标对象是否即将移出所述第一图像;
在所述目标对象即将移出所述第一图像的情况下生成第一提示消息,所述第一提示消息用于指示对所述头戴式设备进行移动,以使所述目标对象保持于所述第一图像中。
4.根据权利要求1所述方法,其特征在于,还包括:
在所述目标对象移出所述第一图像的情况下生成第二提示消息,所述第二提示消息用于指示对所述头戴式设备进行移动,以使所述头戴式设备在移动后重新采集的第一图像包含所述目标对象。
5.根据权利要求4所述方法,其特征在于,所述生成第二提示消息,包括:
获取所述头戴式设备携带的姿态传感器记录的设备移动信息,所述设备移动信息用于记录所述头戴式设备在所述目标对象从所述第一图像中移出时对应的设备历史移动方向;
生成包含第一移动方向的第二提示消息,所述第一移动方向为所述设备历史移动方向的反方向。
6.根据权利要求4所述方法,其特征在于,所述生成第二提示消息,包括:
获取所述目标对象的对象移动信息,所述对象移动信息用于记录所述目标对象从所述第一图像中移出时对应的对象历史移动方向;
生成包含第二移动方向的第二提示消息,所述第二移动方向为所述对象历史移动方向的同方向。
7.根据权利要求4所述的方法,其特征在于,还包括:
在所述目标对象从所述第一图像中移出的情况下,获取包含所述目标对象的第二图像;其中,所述第二图像的视场角大于所述第一图像的视场角;
根据所述第二图像生成第二提示消息。
8.一种图像预览装置,其特征在于,应用于头戴式设备,所述头戴式设备上设有摄像头,所述装置包括:
确定单元,用于确定所述摄像头采集到的第一图像中包含的目标对象;
截取单元,用于截取包含所述目标对象的图像区域;
预览单元,用于将所述图像区域放大至预定义的预览尺寸,并且将放大后的图像区域在拍摄预览界面中进行预览展示。
9.一种电子设备,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器通过运行所述可执行指令以实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,该指令被处理器执行时实现如权利要求1-7中任一项所述方法的步骤。
CN202110236249.2A 2021-03-03 2021-03-03 图像预览方法及装置、电子设备、存储介质 Pending CN112954220A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202110236249.2A CN112954220A (zh) 2021-03-03 2021-03-03 图像预览方法及装置、电子设备、存储介质
US17/377,171 US11962891B2 (en) 2021-03-03 2021-07-15 Image preview method and apparatus, electronic device, and storage medium
EP21186993.8A EP4053678A1 (en) 2021-03-03 2021-07-21 Image preview method and apparatus, electronic device, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110236249.2A CN112954220A (zh) 2021-03-03 2021-03-03 图像预览方法及装置、电子设备、存储介质

Publications (1)

Publication Number Publication Date
CN112954220A true CN112954220A (zh) 2021-06-11

Family

ID=76247450

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110236249.2A Pending CN112954220A (zh) 2021-03-03 2021-03-03 图像预览方法及装置、电子设备、存储介质

Country Status (3)

Country Link
US (1) US11962891B2 (zh)
EP (1) EP4053678A1 (zh)
CN (1) CN112954220A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113473007A (zh) * 2021-06-24 2021-10-01 维沃移动通信(杭州)有限公司 拍摄方法及装置
CN113739927A (zh) * 2021-07-26 2021-12-03 武汉高德智感科技有限公司 一种红外图像的显示方法及系统
CN113923350A (zh) * 2021-09-03 2022-01-11 维沃移动通信(杭州)有限公司 视频拍摄方法、装置、电子设备和可读存储介质
CN116074620A (zh) * 2022-05-27 2023-05-05 荣耀终端有限公司 一种拍摄方法及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130242136A1 (en) * 2012-03-15 2013-09-19 Fih (Hong Kong) Limited Electronic device and guiding method for taking self portrait
CN106796344A (zh) * 2014-10-07 2017-05-31 艾尔比特系统有限公司 锁定在感兴趣对象上的放大图像的头戴式显示
CN109246360A (zh) * 2018-11-23 2019-01-18 维沃移动通信(杭州)有限公司 一种提示方法及移动终端
CN110602389A (zh) * 2019-08-30 2019-12-20 维沃移动通信有限公司 一种显示方法及电子设备
CN110913132A (zh) * 2019-11-25 2020-03-24 维沃移动通信有限公司 对象跟踪方法及电子设备
CN110908558A (zh) * 2019-10-30 2020-03-24 维沃移动通信(杭州)有限公司 一种图像显示方法及电子设备

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7424218B2 (en) * 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
KR101899877B1 (ko) * 2012-04-04 2018-09-19 삼성전자주식회사 확대된 영상의 화질을 개선하기 위한 장치 및 방법
JP6103526B2 (ja) 2013-03-15 2017-03-29 オリンパス株式会社 撮影機器,画像表示機器,及び画像表示機器の表示制御方法
US9213403B1 (en) * 2013-03-27 2015-12-15 Google Inc. Methods to pan, zoom, crop, and proportionally move on a head mountable display
WO2016016984A1 (ja) 2014-07-31 2016-02-04 日立マクセル株式会社 撮像装置およびその被写体追尾方法
EP3465684A1 (en) 2016-05-27 2019-04-10 IMINT Image Intelligence AB System and method for a zoom function
KR20180020734A (ko) * 2016-08-19 2018-02-28 엘지전자 주식회사 이동단말기 및 그 제어 방법
US10628019B2 (en) * 2016-08-22 2020-04-21 Samsung Electronics Co., Ltd. Electronic device and method for rendering 360-degree multimedia content
EP3291533A1 (en) 2016-09-06 2018-03-07 LG Electronics Inc. Terminal and controlling method thereof
CN112188074B (zh) * 2019-07-01 2022-08-05 北京小米移动软件有限公司 图像处理方法及装置、电子设备、可读存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130242136A1 (en) * 2012-03-15 2013-09-19 Fih (Hong Kong) Limited Electronic device and guiding method for taking self portrait
CN106796344A (zh) * 2014-10-07 2017-05-31 艾尔比特系统有限公司 锁定在感兴趣对象上的放大图像的头戴式显示
CN109246360A (zh) * 2018-11-23 2019-01-18 维沃移动通信(杭州)有限公司 一种提示方法及移动终端
CN110602389A (zh) * 2019-08-30 2019-12-20 维沃移动通信有限公司 一种显示方法及电子设备
CN110908558A (zh) * 2019-10-30 2020-03-24 维沃移动通信(杭州)有限公司 一种图像显示方法及电子设备
CN110913132A (zh) * 2019-11-25 2020-03-24 维沃移动通信有限公司 对象跟踪方法及电子设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113473007A (zh) * 2021-06-24 2021-10-01 维沃移动通信(杭州)有限公司 拍摄方法及装置
CN113739927A (zh) * 2021-07-26 2021-12-03 武汉高德智感科技有限公司 一种红外图像的显示方法及系统
CN113923350A (zh) * 2021-09-03 2022-01-11 维沃移动通信(杭州)有限公司 视频拍摄方法、装置、电子设备和可读存储介质
CN116074620A (zh) * 2022-05-27 2023-05-05 荣耀终端有限公司 一种拍摄方法及电子设备
CN116074620B (zh) * 2022-05-27 2023-11-07 荣耀终端有限公司 一种拍摄方法及电子设备

Also Published As

Publication number Publication date
US20220286623A1 (en) 2022-09-08
US11962891B2 (en) 2024-04-16
EP4053678A1 (en) 2022-09-07

Similar Documents

Publication Publication Date Title
CN112954220A (zh) 图像预览方法及装置、电子设备、存储介质
US10666856B1 (en) Gaze-directed photography via augmented reality feedback
EP3229459B1 (en) Information processing device, information processing method and program
CN107230187B (zh) 多媒体信息处理的方法和装置
US10127632B1 (en) Display and update of panoramic image montages
CN106375674B (zh) 寻找和使用与相邻静态图像相关的视频部分的方法和装置
CN104469152B (zh) 穿戴式设备的自动摄像方法及系统
CN112995507A (zh) 提示对象位置的方法及装置
KR20090031725A (ko) 디지털 이미지들 획득 관련 방법
CN113973190A (zh) 视频虚拟背景图像处理方法、装置及计算机设备
US20230040548A1 (en) Panorama video editing method,apparatus,device and storage medium
JP6091669B2 (ja) 撮像装置、撮像アシスト方法及び撮像アシストプログラムを記録した記録媒体
CN107479712B (zh) 基于头戴式显示设备的信息处理方法及装置
CN109791558B (zh) 微动图的自动选择
CN109948525A (zh) 拍照处理方法、装置、移动终端以及存储介质
CN109002248B (zh) Vr场景截图方法、设备及存储介质
CN111640165A (zh) Ar合影图像的获取方法、装置、计算机设备及存储介质
CN112905074A (zh) 交互界面展示方法、交互界面生成方法、装置及电子设备
US20130286249A1 (en) Automatically capturing images that include lightning
US20210383097A1 (en) Object scanning for subsequent object detection
CN104869283B (zh) 一种拍摄方法及电子设备
CN114641983A (zh) 用于获得智能全景图像的系统及方法
CN113010009B (zh) 对象共享方法及装置
CN114625468B (zh) 增强现实画面的展示方法、装置、计算机设备及存储介质
CN108140124B (zh) 提示信息确定方法、装置、电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210611

RJ01 Rejection of invention patent application after publication