CN111107259A - 图像获取方法、装置及电子设备 - Google Patents

图像获取方法、装置及电子设备 Download PDF

Info

Publication number
CN111107259A
CN111107259A CN201811251475.2A CN201811251475A CN111107259A CN 111107259 A CN111107259 A CN 111107259A CN 201811251475 A CN201811251475 A CN 201811251475A CN 111107259 A CN111107259 A CN 111107259A
Authority
CN
China
Prior art keywords
image
real
target
gesture
real object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811251475.2A
Other languages
English (en)
Other versions
CN111107259B (zh
Inventor
张绍儒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201811251475.2A priority Critical patent/CN111107259B/zh
Publication of CN111107259A publication Critical patent/CN111107259A/zh
Application granted granted Critical
Publication of CN111107259B publication Critical patent/CN111107259B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices

Abstract

本发明公开了一种图像获取方法、装置及电子设备。该方法包括:在取景图像中识别到用户实施的指向手势时,确定与指向手势对应的目标实物的实时图像;根据目标实物的实时图像,获取目标实物的实物关联信息;根据实物关联信息以及目标实物的实时图像,生成对应的目标图像进行展示。

Description

图像获取方法、装置及电子设备
技术领域
本发明涉及图像技术领域,更具体地,涉及一种图像获取方法、装置及电子设备。
背景技术
随着终端智能化的普及,摄像头等摄像装置已经是手机、平板电脑等移动智能终端的必要配件,人们日常已经习惯通过移动终端的摄像头拍摄、获取图像。
但是,目前人们在使用移动终端拍摄或获取图像时,通常是通过移动终端摄像头对焦具体的场景进行拍摄、获取图像,图像获取体验大同小异,较为单一,造成用户体验趋同。
发明内容
本发明的一个目的是提供一种用于图像获取的新技术方案。
根据本发明的第一方面,提供了一种图像获取方法,其中,通过摄像装置实施,包括:
在取景图像中识别到用户实施的指向手势时,确定与所述指向手势对应的目标实物的实时图像;
根据所述目标实物的实时图像,获取所述目标实物的实物关联信息;
根据所述实物关联信息以及所述目标实物的实时图像,生成对应的目标图像进行展示。。
可选地,所述在取景图像中识别到用户实施的指向手势时,确定与所述指向手势对应的目标实物的步骤包括:
根据预设的手势特征图像,对所述取景图像进行图像识别处理,当所述取景图像中存在与所述手势特征图像对应的部分图像时,确定在取景图像中识别到用户实施的指向手势;
在所述取景图像中确定所述指向手势的指向位置;
根据所述指向位置,在所述取景图像中获取所述目标实物的实时图像。
可选地,与所述手势特征图像对应的图像,是与所述手势特征图像的图像相似度大于预设的相似度阈值的部分图像;
和/或,
所述指向位置是取景图像中与所述手势特征图像对应的部分图像中显示的指向手势的手势端点位置。
可选地,所述根据所述指向位置,在所述取景图像中获取所述目标实物的实时图像的步骤包括:
以所述指向位置为中心,在所述取景图像中获取符合预设的图像尺寸的候选图像;
根据从所述候选图像中提取的图像特征,获取所述目标实物的实物信息;
其中,所述实物信息至少包括所述目标实物的类型、位置以及尺寸;
根据所述目标实物的实物信息,在所述候选图像中获取所述实时图像。
可选地,所述根据所述目标实物的实时图像,获取所述目标实物的实物关联信息的步骤包括:
根据所述实时图像,在预先构建的实物图像数据库中搜索确定与所述实时图像对应的目标实物图像;
其中,所述实物图像数据库中包括多张实物图像以及每张所述实物图像的图像关联信息;
从所述实物图像数据库中读取所述目标实物图像的图像关联信息,作为所述目标实物的实物关联信息。
可选地,所述根据所述实时图像,在预先构建的实物图像数据库中搜索确定与所述实时图像对应的目标实物图像的步骤包括:
提取所述实时图像的图像特征;
根据所述实时图像的图像特征,获取所述实时图像与所述实物图像数据库中包括的每张实物图像的图像相似度;
将所述图像相似度最大的实物图像确定为所述目标实物图像。
可选地,所述实物关联信息至少包括对所述目标实物的文字描述信息;
所述目标图像中包括所述目标实物的实时图像以及所述目标实物的文字描述信息。
可选地,所述实物关联信息至少包括实物显示参数;
所述根据所述目标实物的实时图像,获取所述目标实物的实物关联信息的步骤包括:
根据从所述目标实物的实时图像,确定所述目标实物的实物类型;
根据所述目标实物的实物类型,从预设的实物关联信息表中获取与所述目标实物的实物类型对应的实物显示参数;
其中,所述实物关联信息表中包括多种实物类型对应的实物显示参数;
所述根据所述实物关联信息以及所述目标实物的实时图像,生成对应的目标图像进行展示的步骤包括:
根据所述实物显示参数,对所述目标实物的实时图像进行处理,生成所述目标图像。
根据本发明的第二方面,提供一种拍摄装置,包括:
手势识别单元,用于在取景图像中识别到用户实施的指向手势时,确定与所述指向手势对应的目标实物的实时图像;
关联处理单元,用于根据所述目标实物的实时图像,获取所述目标实物的实物关联信息;
图像生成单元,用于根据所述实物关联信息以及所述目标实物的实时图像,生成对应的目标图像进行展示。
根据本发明的第三方面,提供一种电子设备,包括:
摄像装置;
显示装置;
存储器,用于存储可执行的指令;
处理器,用于根据可执行的指令的控制,运行所述电子设备执行如根据本发明第一方面中任意一项所述的图像获取方法。
根据本公开的一个实施例,通过摄像装置在取景图像中识别到用户实施的指向手势时,确定与指向手势对应的目标实物的实时图像,根据目标实物的实时图像获取目标实物的实物关联信息,根据目标实物关联信息和目标实物的实时图像,生成展示给用户的目标图像,使得用户只需要实施指向手势,就可以触发获取根据与指向手势对应的实物的关联信息得到的实物图像,提供用户一种“所指即所得”的新颖、独特的图像获取方式,丰富用户的图像获取体验。
通过以下参照附图对本发明的示例性实施例的详细描述,本发明的其它特征及其优点将会变得清楚。
附图说明
被结合在说明书中并构成说明书的一部分的附图示出了本发明的实施例,并且连同其说明一起用于解释本发明的原理。
图1是显示可用于实现本发明的实施例的计算系统的硬件配置的例子的框图。
图2示出了本发明实施例的图像获取方法的流程图。
图3示出了本发明实施例的在取景图像中识别到用户实施的指向手势时,确定与指向手势对应的目标实物的步骤的流程图。
图4示出了本发明实施例的一个图片的示意图。
图5示出了本发明实施例的摄像装置的示意性原理框图。
图6示出了本发明实施例的电子设备的示意性原理框图。
具体实施方式
现在将参照附图来详细描述本发明的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它例子可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
<硬件装置>
图1是示出可以实现本发明的实施例的电子设备1000的硬件配置的框图。
电子设备1000可以是便携式电脑、台式计算机、手机、平板电脑等。如图1所示,电子设备1000可以包括处理器1100、存储器1200、接口装置1300、通信装置1400、显示装置1500、输入装置1600、输出装置1700、摄像装置1800等等。其中,处理器1100可以是中央处理器CPU、微处理器MCU等。存储器1200例如包括ROM(只读存储器)、RAM(随机存取存储器)、诸如硬盘的非易失性存储器等。接口装置1300例如包括USB接口、耳机接口等。通信装置1400例如能够进行有线或无线通信,具体地可以包括Wifi通信、蓝牙通信、2G/3G/4G/5G通信等。显示装置1500例如是液晶显示屏、触摸显示屏等。输入装置1600例如可以包括触摸屏、键盘、体感输入、麦克风等等。输出装置1700例如包括扬声器等语音输出装置。摄像装置1800可以是摄像头等装置。
图1所示的电子设备仅仅是说明性的并且决不意味着对本发明、其应用或使用的任何限制。应用于本发明的实施例中,电子设备1000的所述存储器1200用于存储指令,所述指令用于控制所述处理器1100进行操作以执行本发明实施例提供的任意一项图像获取方法。本领域技术人员应当理解,尽管在图1中对电子设备1000示出了多个装置,但是,本发明可以仅涉及其中的部分装置,例如,电子设备1000只涉及处理器1100、存储装置1200、显示装置1500以及摄像装置1800。技术人员可以根据本发明所公开方案设计指令。指令如何控制处理器进行操作,这是本领域公知,故在此不再详细描述。
本发明实施例的总体构思,是提供一种新的图像获取方案,通过摄像装置在取景图像中识别到用户实施的指向手势时,确定与指向手势对应的目标实物的实时图像,根据目标实物的实时图像获取目标实物的实物关联信息,根据目标实物关联信息和目标实物的实时图像,生成展示给用户的目标图像,使得用户只需要实施指向手势,就可以触发获取根据与指向手势对应的实物的关联信息得到的实物图像,提供用户一种“所指即所得”的新颖、独特的图像获取方式,丰富用户的图像获取体验。
<方法>
图2为根据本发明实施例的图像获取方法的示意性流程图。
本实施例的图像获取方法由摄像装置实施,该摄像装置可以是任意提供图像预览以及图像拍摄功能的装置,例如,如图1所示的电子设备1000中包括的摄像装置1800。
如图2所示,本实施例的图像获取方法可以包括如下步骤S2100至步骤S2300:
步骤S2100,在取景图像中识别到用户实施的指向手势时,确定与指向手势对应的目标实物的实时图像。
取景图像可以是摄像装置中用于预览实时图像的取景框中获取到的全部图像。例如,摄像装置是电子设备的一个功能模块,摄像装置获取的取景图像就是在电子设备的显示屏幕中看到的整个图像为取景图像。
用户实施的指向手势可以是用户实施的任意具有指向点的手势。例如可以是用户伸手前指的手势。
目标实物的实时图像可以是与指向手势对应的取景图像中的图像。例如,当取景图像中显示有花的图像,且指向手势指向的是取景图像中的花,则目标实物的取景图像是花的图像。再例如,当取景图像中显示有鸟的图像,且指向手势指向的是取景图像中的鸟,则目标实物的取景图像是鸟的图像。
在本实施例中,可以通过在取景图像中识别到用户实施的指向手势时,确定与指向手势对应的目标实物的实时图像,以结合后续步骤利用目标实物的取景图像去获取到目标实物的实物关联信息,根据目标实物关联信息和目标实物的实时图像,生成展示给用户的目标图像,使得用户只需要实施指向手势,就可以触发获取根据与指向手势对应的实物的关联信息得到的实物图像,提供用户一种“所指即所得”的新颖、独特的图像获取方式,丰富用户的图像获取体验。
在一个例子中,该步骤S2100可以如图3所示,包括:步骤S2110-步骤S2130:
步骤S2110,根据预设的手势特征图像,对取景图像进行图像识别处理,当取景图像中存在与手势特征图像对应的部分图像时,确定在取景图像中识别到用户实施的指向手势。
手势特征图像是表征手势特征的图像,用于识别取景图像中是否存在对应的手势特征的指向手势。例如,手势特征图像可以是手指模型图像,该手指模型图片例如可以是用户的拇指图像、或者是用户的食指图像,当然还可以是用户的其他手指的图像,在此不做限定。
与手势特征图像对应的部分图像,是表征取景图像中存在具有该手势特征的指向特征的部分图像。例如,与手势特征图像对应的部分图像,可以是与手势特征图像的图像相似度大于预设的相似度阈值的部分图像。该预设的相似度阈值可以根据不同的应用需求预先设定为不同大小的值。
在本例中,根据预设的手势特征图像对取景图像进行图像识别处理之后,若取景图像中存在与手势特征图像的相似度大于预设的相似度阈值的部分图像时,可以确定在取景图像中识别到用户实施的指向手势,反之,若取景图像中不存在与手势特征图像的相似度大于预设的相似度阈值的部分图像时,则确定在取景图像中未识别到用户实施的指向手势。
例如,预设的手势特征图像可以是用户的拇指图像,此时,根据该拇指图像,对取景图像进行图像识别处理,当取景图像中存在与拇指图像的相似度大于预设的相似度阈值的部分图像时,则确定在取景图像中识别到用户实施的指向手势,此时,该指向手势可以为用户的拇指前指取景图像中的任意一点的手势。
步骤S2120,在取景图像中确定指向手势的指向位置。
指向位置是指向手势在取景图像中对应的指示位置。例如,指向位置是取景图像中与手势特征图像对应的部分图像中显示的指向手势的手势端点位置。例如,手势操作为用户伸手前指的操作,操作端点位置可以是手指末端位置,具体可以是手指甲落点位置。
例如,当取景图像中显示有花的图像,且指向手势指向的是取景图像中的花时,则手指甲落点位置为取景图像中花的位置上。当取景图像中显示有鸟的图像,且指向手势指向的是取景图像中的鸟时,则手指甲落点位置为取景图像中鸟的位置上。
步骤S2130,根据指向位置,在取景图像中获取目标实物的实时图像。
目标实物的实时图像,是在取景图像中显示目标实物的图像部分。
在本例中,步骤S2130可以包括如下步骤S2131-步骤S2133:
步骤S2131,以指向位置为中心,在取景图像中获取符合预设的图像尺寸的候选图像。
预设的图像尺寸可以根据具体的应用场景或者具体的应用需求设置,设置的尺寸值可以根据具体应用场景下的工程经验或者实验仿真结果选取效果较优的数值。例如,预设的图像尺寸可以是半径5厘米,以指向位置为中心,在取景图像中选取半径为5厘米的圆圈以内的图像作为候选图像,或者预设的图像尺寸是长5厘米以及宽3厘米,也可以是在取景图像中选取长度为5厘米、宽度为3厘米的方框以内的图像作为候选图像。例如,如图4所示的例子中,黑色细线方框内的图像部分为候选图像。
步骤S2132,根据从候选图像中提取的图像特征,获取目标实物的实物信息。
实物信息中至少包括目标实物的类型、位置以及尺寸。
在本例中,可以通过指向位置确定目标实物在取景图像中的实物位置,可以通过对候选图像进行兴趣点检测或者直方图提取等方式从候选图像中提取图像特征,并将提取到的图像特征进行广义霍夫变换方法等物体检测以及分类方法,以从预先构建的实物样本数据库中获取目标实物的实物类型以及实物尺寸。实物样本数据库中包括不同的实物的类型的多个实物样本图像,通过物体检测以及分类的方法,可以确定候选图像中的目标实物的实物类型以及实物尺寸。
步骤S2133,根据目标实物的实物信息,在候选图像中获取实时图像。
在该实施例中,可以根据目标实物的实物类型、实物位置以及实物尺寸,在候选图像中获取目标实物的实时图像。
以图4为例,目标实物是鸟,候选图像为黑色细线方框的图像部分,根据鸟的类型、鸟的位置以及鸟的尺寸,对方框内的候选图像进行裁剪以得到鸟的外接形状框,如黑色粗线方框的图像部分,该图像部分即为鸟的实时图像。
步骤S2200,根据目标实物的实时图像,获取目标实物的实物关联信息。
实物关联信息是与目标实物的属性相关的信息。例如,实物关联信息可以至少包括对目标实物的文字描述信息。该文字描述信息是用于描述目标实物的物体属性的信息,例如可以是目标实物的类型,例如,实物为鸟,则文字描述信息可以为鸟,实物为花,则文字描述信息可以为花。或者,实物关联信息可以包括实物显示参数,实物显示参数是显示实物所使用的参数,通过设置实物显示参数,可以使得实物具有预设的显示效果,该预设的显示效果例如包括颜色显示效果或者是动态显示效果等。在本例中,可以根据目标实物的实时图像来获取目标实物的实物关联信息,以结合后续步骤将目标实物的实时图像和目标实物的实物关联信息生成目标图像展示给用户,使得用户只需要实施指向手势,就可以触发获取根据与指向手势对应的实物的关联信息得到的实物图像,提供用户一种“所指即所得”的新颖、独特的图像获取方式,丰富用户的图像获取体验。在本例中,步骤S2200中根据目标实物的实时图像,获取目标实物的实物关联信息可以包括如下步骤S2210-步骤S2220:
步骤S2210,根据实时图像,在预先构建的实物图像数据库中搜索确定与实时图像对应的目标实物图像。
实物图像数据库中包括多张实物图像以及每张实物图像的图像关联信息。例如,实物图像数据库中可以包含鸟的实物图像以及对鸟的文字描述信息,实物图像数据库中还可以包含花的实物图像以及对花的文字描述信息。
该实施例中,可以根据目标实物的实时图像,从预先构建的实物图像数据库中搜索确定与目标实物的实时图像对应的目标实物图像,以结合后续步骤将目标实物图像的图像关联信息作为目标实物的实物关联信息。
步骤S2210中根据实时图像,在预先构建的实物图像数据库中搜索确定与实时图像对应的目标实物图像的步骤可以包括如下步骤S2211-步骤S2213:
步骤S2211,提取实时图像的图像特征。
可以通过兴趣点检测或者直方图提取等方式提取实时图像的图像特征,在此不再进一步赘述
步骤S2212,根据实时图像的图像特征,获取实时图像与实物图像数据库中包括的每张实物图像的图像相似度。
该实施例中,在得到实时图像的图像特征之后,可以通过计算特征距离等方式获取实时图像和实物图像数据库中的每张实物图像的图像相似度,并将得到的图像相似度从大到小进行降序排序,以方便后续步骤查找图像相似度最大的实物图像。
步骤S2213,将图像相似度最大的实物图像确定为目标实物图像。
在确定目标实物图像之后,进入:
步骤S2220,从实物图像数据库中读取目标实物图像的图像关联信息,作为所述目标实物的实物关联信息。
例如,目标实物的实时图像为鸟,则从实物图像数据库中读取目标实物图像为鸟的文字描述信息,并将该文字描述信息作为目标实物的实物关联信息。
在获取目标实物的实物关联信息之后,进入:
步骤S2300,根据实物关联信息以及目标实物的实时图像,生成对应的目标图像进行展示。
例如,实物关联信息至少包括对目标实物的文字描述信息,该文字描述信息是用于描述目标实物的物体属性的信息,生成的目标图像中包括目标实物的实时图像以及目标实物的文字描述信息,用户可以通过目标图像,直观了解目标实物的物体属性,丰富图像获取体验。例如,如图4所示,目标实物是鸟,在目标图像中显示文字描述信息“bird”。。
在另一个例子中,实物关联信息至少包括实物显示参数,实物显示参数是显示实物所使用的参数,通过设置实物显示参数,可以使得实物具有预设的显示效果,该预设的显示效果例如包括颜色显示效果或者是动态显示效果等。在这个例子中,步骤S2200中根据目标实物的实时图像,获取目标实物的实物关联信息还可以包括如下步骤S2240-步骤S2250:
步骤S2240,根据从目标实物的实时图像,确定目标实物的实物类型。
在本例中,目标实物的实时图像可以作为输入图像,通过兴趣点检测或者直方图提取等方式从实时图像中提取图像特征,并将提取到的图像特征通过广义霍夫变换以从预设构建的实物图像数据库中获取实物的实物类型。
步骤S2250,根据目标实物的实物类型,从预设的实物关联信息表中获取与目标实物的实物类型对应的实物显示参数。
在本例中,预设的实物关联信息表可以是根据具体应用场景和具体需求进行预先设置。
该预设的实物关联信息表中至少包括多种实物类型对应的实物显示参数。例如,实物类型为鸟,实物显示参数可以是设置在显示鸟时增加动态飞翔效果的相关显示参数;实物类型是人物,实物显示参数可以是设置在显示人物时增加例如猫耳朵等道具效果的相关显示参数;实物类型是植物,实物显示参数可以是设置在显示植物时增加例如光晕等道具效果的相关显示参数,等等,在此不一一列举。
该预设的实物关联信息表还可以根据接收的包括用户的显示需求的外部配置请求进行预先配置,以满足不同用户的个性化的实物显示需求。
,在本例中,在得到目标实物的实物类型之后,可以从预设的实物关联信息表中获取与目标实物的实物类型对应的实物显示参数。
例如,目标实物的实物类型为鸟,则从预设的实物关联信息表中获取到的实物显示参数为:为鸟的翅膀加一个飞翔的动作的参数信息;目标实物的实物类型为花,则从预设的实物关联信息表中获取到的实物显示参数为:将花的颜色设置为红色的参数信息;目标实物的实物类型为人,则从预设的实物关联信息表中获取到的实物显示参数为:为人加一个笑脸的参数信息。
例如,目标实物的实物类型为鸟,则从预设的实物关联信息表中获取到的实物显示参数是设置在显示鸟时增加动态飞翔效果的相关显示参数;目标实物的实物类型是人物,则从预设的实物关联信息表中获取到的实物显示参数是设置在显示人物时增加例如猫耳朵等道具效果的相关显示参数;目标实物的实物类型是植物,则从预设的实物关联信息表中获取到的实物显示参数是设置在显示植物时增加例如光晕等道具效果的相关显示参数,等等,在此不一一列举。
在这个例子中步骤S2300中根据实物关联信息以及目标实物的实时图像,生成对应的目标图像进行展示的步骤可以包括如下步骤S2310:
步骤S2310:根据实物显示参数,对目标实物的实时图像进行处理,生成目标图像。
例如,目标实物的实物类型为鸟,则从预设的实物关联信息表中获取到的实物显示参数是设置在显示鸟时增加动态飞翔效果的相关显示参数,则在目标图像中显示的目标实物是基于鸟的实时图像增加动态飞翔效果的最终图像;
再例如,目标实物的实物类型是人物,则从预设的实物关联信息表中获取到的实物显示参数是设置在显示人物时增加例如猫耳朵等道具效果的相关显示参数,则在目标图像中显示的目标实物是基于人物的实时图像增加猫耳朵等道具效果的最终图像;
又例如,目标实物的实物类型是植物,则从预设的实物关联信息表中获取到的实物显示参数是设置在显示植物时增加例如光晕等道具效果的相关显示参数,则在目标图像中显示的目标实物是基于植物的实时图像增加光晕等道具效果的最终图像。在本例中,通过从预设的实物关联信息表中获取与目标实物的实物类型的、包括实物显示参数的实物关联信息,实现根据实物显示参数基于目标实物的实时图像生成目标图像展示给用户,使得用户可以通过实施简单的指向手势,就能直观获取指向手势对应的目标实物符合自身显示需求的目标图像,提供用户“所指即所得”的独特、新颖的图像获取体验之外,还能满足用户个性化的图像显示需求。
<摄像装置>
在本实施例中,还提供一种摄像装置3000,该摄像装置3000可以是如图1中所示的摄像装置1800,如图5所示,摄像装置3000包括:手势识别单元3100、关联处理单元3200以及图像生成单元3300,用于实施本实施例中提供的任意一项图像获取方法,在此不再赘述。
手势识别单元3100,用于在取景图像中识别到用户实施的指向手势时,确定与所述指向手势对应的目标实物的实时图像。
关联处理单元3200,用于根据目标实物的实时图像,获取目标实物的实物关联信息。
图像生成单元3300用于根据实物关联信息以及目标实物的实时图像,生成对应的目标图像进行展示。
在一个例子中,该手势识别单元3100用于:
根据预设的手势特征图像,对取景图像进行图像识别处理,当取景图像中存在与手势特征图像对应的部分图像时,确定在取景图像中识别到用户实施的指向手势;
在取景图像中确定指向手势的指向位置;
根据指向位置,在取景图像中获取目标实物的实时图像。
在一个例子中,与手势特征图像对应的图像,是与手势特征图像的图像相似度大于预设的相似度阈值的部分图像;
和/或,
指向位置是取景图像中与手势特征图像对应的部分图像中显示的指向手势的手势端点位置。
在一个例子中,该手势识别单元3100用于:
以指向位置为中心,在取景图像中获取符合预设的图像尺寸的候选图像;
根据从候选图像中提取的图像特征,获取目标实物的实物信息;
其中,实物信息至少包括目标实物的类型、位置以及尺寸;
根据目标实物的实物信息,在候选图像中获取所述实时图像。
在一个例子中,该关联处理单元3200用于:
根据实时图像,在预先构建的实物图像数据库中搜索确定与实时图像对应的目标实物图像;
其中,实物图像数据库中包括多张实物图像以及每张实物图像的图像关联信息;
从实物图像数据库中读取目标实物图像的图像关联信息,作为目标实物的实物关联信息。
在一个例子中,该关联处理单元3200用于:
提取实时图像的图像特征;
根据实时图像的图像特征,获取实时图像与实物图像数据库中包括的每张实物图像的图像相似度;
将图像相似度最大的实物图像确定为目标实物图像。
在一个例子中,实物关联信息至少包括对目标实物的文字描述信息;
所述目标图像中包括目标实物的实时图像以及目标实物的文字描述信息。
在一个例子中,实物关联信息至少包括实物显示参数。
该关联处理单元3200用于:
根据从目标实物的实时图像,确定目标实物的实物类型;
根据目标实物的实物类型,从预设的实物关联信息表中获取与所述目标实物的实物类型对应的实物显示参数;
其中,实物关联信息表中包括多种实物类型对应的实物显示参数。
该图像生成单元3300用于根据实物显示参数,对目标实物的实时图像进行处理,生成目标图像。
本领域技术人员应当明白,可以通过各种方式来实现摄像装置3000。例如,可以通过指令配置处理器来实现摄像装置3000。例如,可以将指令存储在ROM中,并且当启动设备时,将指令从ROM读取到可编程器件中来实现摄像装置3000。例如,可以将摄像装置3000固化到专用器件(例如ASIC)中。可以将摄像装置3000分成相互独立的单元,或者可以将它们合并在一起实现。文章搜索装置3000可以通过上述各种实现方式中的一种来实现,或者可以通过上述各种实现方式中的两种或更多种方式的组合来实现。
在本实施例中,摄像装置3000可以具体各种实施形式,例如,摄像装置3000可以是任意提供摄像功能的产品,比如摄像头,或者,摄像装置3000可以设置与能实现拍摄功能的任意电子设备中,比如设置在客户端或者是服务器中,或者是部分功能单元设置在客户端、部分功能单元设置在服务器等等。
<电子设备>
在本实施例中,还提供一种电子设备4000,如图6所示,包括:
摄像装置4300,
存储器4100,用于存储可执行的指令;
处理器4200,用于根据可执行的指令的控制,运行电子设备执行根据本发明实施例提供的任意一项所述的图像获取方法。
在本实施例中,电子设备4000是任意可以实现搜索功能的电子设备,例如手机、平板电脑、掌上电脑、笔记本电脑或者台式计算机等,电子设备4000还可以包括其他硬件装置,例如,如图1所示的电子设备1000。
在本实施例中,摄像装置4300可以是如图1所示的摄像装置1800,还可以是如图5所示的摄像装置3000。
以上已经结合附图和例子说明本实施例中提供的图像获取方法、摄像装置及电子设备,根据本实施例,通过摄像装置在取景图像中识别到用户实施的指向手势时,确定与指向手势对应的目标实物的实时图像,根据目标实物的实时图像获取目标实物的实物关联信息,根据目标实物关联信息和目标实物的实时图像,生成展示给用户的目标图像,使得用户只需要实施指向手势,就可以触发获取根据与指向手势对应的实物的关联信息得到的实物图像,提供用户一种“所指即所得”的新颖、独特的图像获取方式,丰富用户的图像获取体验。本发明可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本发明的各个方面。
这里参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是,通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。本发明的范围由所附权利要求来限定。

Claims (10)

1.一种图像获取方法,其中,通过摄像装置实施,包括:
在取景图像中识别到用户实施的指向手势时,确定与所述指向手势对应的目标实物的实时图像;
根据所述目标实物的实时图像,获取所述目标实物的实物关联信息;
根据所述实物关联信息以及所述目标实物的实时图像,生成对应的目标图像进行展示。
2.根据权利要求1所述的方法,其中,所述在取景图像中识别到用户实施的指向手势时,确定与所述指向手势对应的目标实物的步骤包括:
根据预设的手势特征图像,对所述取景图像进行图像识别处理,当所述取景图像中存在与所述手势特征图像对应的部分图像时,确定在取景图像中识别到用户实施的指向手势;
在所述取景图像中确定所述指向手势的指向位置;
根据所述指向位置,在所述取景图像中获取所述目标实物的实时图像。
3.根据权利要求2所述的方法,其中,
与所述手势特征图像对应的图像,是与所述手势特征图像的图像相似度大于预设的相似度阈值的部分图像;
和/或,
所述指向位置是取景图像中与所述手势特征图像对应的部分图像中显示的指向手势的手势端点位置。
4.根据权利要求2所述的方法,其中,所述根据所述指向位置,在所述取景图像中获取所述目标实物的实时图像的步骤包括:
以所述指向位置为中心,在所述取景图像中获取符合预设的图像尺寸的候选图像;
根据从所述候选图像中提取的图像特征,获取所述目标实物的实物信息;
其中,所述实物信息至少包括所述目标实物的类型、位置以及尺寸;
根据所述目标实物的实物信息,在所述候选图像中获取所述实时图像。
5.根据权利要求1所述的方法,其中,所述根据所述目标实物的实时图像,获取所述目标实物的实物关联信息的步骤包括:
根据所述实时图像,在预先构建的实物图像数据库中搜索确定与所述实时图像对应的目标实物图像;
其中,所述实物图像数据库中包括多张实物图像以及每张所述实物图像的图像关联信息;
从所述实物图像数据库中读取所述目标实物图像的图像关联信息,作为所述目标实物的实物关联信息。
6.根据权利要求1所述的方法,其中,所述根据所述实时图像,在预先构建的实物图像数据库中搜索确定与所述实时图像对应的目标实物图像的步骤包括:
提取所述实时图像的图像特征;
根据所述实时图像的图像特征,获取所述实时图像与所述实物图像数据库中包括的每张实物图像的图像相似度;
将所述图像相似度最大的实物图像确定为所述目标实物图像。
7.根据权利要求1所述的方法,其中,
所述实物关联信息至少包括对所述目标实物的文字描述信息;
所述目标图像中包括所述目标实物的实时图像以及所述目标实物的文字描述信息。
8.根据权利要求1所述的方法,其中,
所述实物关联信息至少包括实物显示参数;
所述根据所述目标实物的实时图像,获取所述目标实物的实物关联信息的步骤包括:
根据从所述目标实物的实时图像,确定所述目标实物的实物类型;
根据所述目标实物的实物类型,从预设的实物关联信息表中获取与所述目标实物的实物类型对应的实物显示参数;
其中,所述实物关联信息表中包括多种实物类型对应的实物显示参数;
所述根据所述实物关联信息以及所述目标实物的实时图像,生成对应的目标图像进行展示的步骤包括:
根据所述实物显示参数,对所述目标实物的实时图像进行处理,生成所述目标图像。
9.一种摄像装置,其中,包括:
手势识别单元,用于在取景图像中识别到用户实施的指向手势时,确定与所述指向手势对应的目标实物的实时图像;
关联处理单元,用于根据所述目标实物的实时图像,获取所述目标实物的实物关联信息;
图像生成单元,用于根据所述实物关联信息以及所述目标实物的实时图像,生成对应的目标图像进行展示。
10.一种电子设备,其中,包括:
摄像装置;
显示装置;
存储器,用于存储可执行的指令;
处理器,用于根据可执行的指令的控制,运行所述电子设备执行如权利要求1-8任意一项所述的图像获取方法。
CN201811251475.2A 2018-10-25 2018-10-25 图像获取方法、装置及电子设备 Active CN111107259B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811251475.2A CN111107259B (zh) 2018-10-25 2018-10-25 图像获取方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811251475.2A CN111107259B (zh) 2018-10-25 2018-10-25 图像获取方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN111107259A true CN111107259A (zh) 2020-05-05
CN111107259B CN111107259B (zh) 2021-10-08

Family

ID=70418507

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811251475.2A Active CN111107259B (zh) 2018-10-25 2018-10-25 图像获取方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN111107259B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102142084A (zh) * 2011-05-06 2011-08-03 北京网尚数字电影院线有限公司 一种手势识别的方法
US20140361985A1 (en) * 2013-06-05 2014-12-11 Canon Kabushiki Kaisha Information processing apparatus capable of recognizing user operation and method for controlling the same
CN104238906A (zh) * 2013-06-18 2014-12-24 联想(北京)有限公司 一种信息处理方法以及电子设备
CN105205454A (zh) * 2015-08-27 2015-12-30 深圳市国华识别科技开发有限公司 自动捕捉目标物的系统和方法
CN105338241A (zh) * 2015-10-15 2016-02-17 广东欧珀移动通信有限公司 一种拍摄方法和装置
CN107993191A (zh) * 2017-11-30 2018-05-04 腾讯科技(深圳)有限公司 一种图像处理方法和装置
CN108205641A (zh) * 2016-12-16 2018-06-26 比亚迪股份有限公司 手势图像处理方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102142084A (zh) * 2011-05-06 2011-08-03 北京网尚数字电影院线有限公司 一种手势识别的方法
US20140361985A1 (en) * 2013-06-05 2014-12-11 Canon Kabushiki Kaisha Information processing apparatus capable of recognizing user operation and method for controlling the same
CN104238906A (zh) * 2013-06-18 2014-12-24 联想(北京)有限公司 一种信息处理方法以及电子设备
CN105205454A (zh) * 2015-08-27 2015-12-30 深圳市国华识别科技开发有限公司 自动捕捉目标物的系统和方法
CN105338241A (zh) * 2015-10-15 2016-02-17 广东欧珀移动通信有限公司 一种拍摄方法和装置
CN108205641A (zh) * 2016-12-16 2018-06-26 比亚迪股份有限公司 手势图像处理方法及装置
CN107993191A (zh) * 2017-11-30 2018-05-04 腾讯科技(深圳)有限公司 一种图像处理方法和装置

Also Published As

Publication number Publication date
CN111107259B (zh) 2021-10-08

Similar Documents

Publication Publication Date Title
CN109284729B (zh) 基于视频获取人脸识别模型训练数据的方法、装置和介质
WO2017185630A1 (zh) 基于情绪识别的信息推荐方法、装置和电子设备
CN108985176B (zh) 图像生成方法及装置
CN109034069B (zh) 用于生成信息的方法和装置
JP6986187B2 (ja) 人物識別方法、装置、電子デバイス、記憶媒体、及びプログラム
CN108228792B (zh) 图片检索方法、电子设备及存储介质
US20210281744A1 (en) Action recognition method and device for target object, and electronic apparatus
CN105335714A (zh) 照片处理方法、装置和设备
CN109101542B (zh) 图像识别结果输出方法及装置、电子设备和存储介质
KR20200099427A (ko) 인공지능을 이용한 문맥 파악 기반의 동영상 편집 방법 및 시스템
CN114332503A (zh) 对象重识别方法及装置、电子设备和存储介质
CN111259967A (zh) 图像分类及神经网络训练方法、装置、设备及存储介质
CN110633715B (zh) 图像处理方法、网络训练方法及装置、和电子设备
KR101715708B1 (ko) 이미지 분석기반의 자동화된 관계형 태그 생성 시스템과 이를 이용한 서비스 제공방법
CN111158924A (zh) 内容分享方法、装置、电子设备及可读存储介质
CN105426904A (zh) 照片处理方法、装置和设备
US11163822B2 (en) Emotional experience metadata on recorded images
CN111968176A (zh) 头戴设备的位姿确定方法、装置、设备及存储介质
WO2023197648A1 (zh) 截图处理方法及装置、电子设备和计算机可读介质
CN111107259B (zh) 图像获取方法、装置及电子设备
CN108255917B (zh) 图像管理方法、设备及电子设备
CN108280184B (zh) 一种基于智能笔的试题摘录方法、系统及智能笔
CN114302231B (zh) 视频处理方法及装置、电子设备和存储介质
CN106650727B (zh) 一种信息显示方法以及ar设备
CN110795178B (zh) 应用签到方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant