CN108021896A - 基于增强现实的拍摄方法、装置、设备及计算机可读介质 - Google Patents

基于增强现实的拍摄方法、装置、设备及计算机可读介质 Download PDF

Info

Publication number
CN108021896A
CN108021896A CN201711296090.3A CN201711296090A CN108021896A CN 108021896 A CN108021896 A CN 108021896A CN 201711296090 A CN201711296090 A CN 201711296090A CN 108021896 A CN108021896 A CN 108021896A
Authority
CN
China
Prior art keywords
thing
interactive
information
real world
matching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711296090.3A
Other languages
English (en)
Other versions
CN108021896B (zh
Inventor
王傲淇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201711296090.3A priority Critical patent/CN108021896B/zh
Publication of CN108021896A publication Critical patent/CN108021896A/zh
Application granted granted Critical
Publication of CN108021896B publication Critical patent/CN108021896B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures

Abstract

本发明提出一种基于增强现实的拍照方法,包括以下步骤:拍摄步骤:拍摄现实图像;信息获取步骤:根据所述现实图像获取识别物信息以及现实动作信息;匹配步骤:根据所述识别物信息从交互信息库中匹配交互物以及根据所述现实动作从所述交互信息库中匹配所述交互物的交互动作;图像生成步骤:融合所述现实图像、所述交互物和所述交互物的所述交互动作,生成基于增强现实的图像。本发明的技术方案可以满足用户希望与明星或其他人物、动物、物品进行合影或动作交互的需求。另外,本发明还提供了一种基于增强现实的拍照装置、拍照设备和计算机存储介质。

Description

基于增强现实的拍摄方法、装置、设备及计算机可读介质
技术领域
本发明涉及增强现实技术领域,尤其涉及一种基于增强现实的拍摄方法、装置、设备及计算机可读介质。
背景技术
增强现实(Augmented Reality,简称AR)是一种现实信息与虚拟信息相叠加的技术。首先,计算机系统处理现实信息,根据现实信息生成匹配且包含虚拟物体、声音或文字等形式的虚拟信息;然后,将虚拟信息叠加到显示现实信息的人机交互界面中,从而增强用户对现实世界的感知。AR技术可以模拟真实的现场景观,使用者不仅能够通过虚拟系统感受到在客观物理世界中所经历的“身临其境”的逼真性,而且能够突破空间、时间以及其它客观限制,感受到在真实世界中无法亲身经历的体验。
现有的拍摄系统通常只提供普通的拍摄功能,用户使用时只能将其本人拍摄下来,然后添加部分装饰或美化效果。而现有增强现实拍摄系统中提供给用户的虚拟场景的设置选项不多,一般只包含简单的虚拟背景替换功能,而且用户只能配合虚拟场景来决定自己的拍照姿势,系统灵活度欠佳,无法满足用户希望与明星或其他热门人物、动物、物品在特定地点进行合影、或与人物进行响应交互的需求。
发明内容
本发明实施例提供一种基于增强现实的拍摄方法、装置、设备及计算机可读介质,以至少解决现有技术中的以上技术问题。
第一方面,本发明实施例提供了一种基于增强现实的拍摄方法的方法,包括:
拍摄步骤:拍摄现实图像;
信息获取步骤:根据所述现实图像获取识别物信息以及现实动作信息;
匹配步骤:根据所述识别物信息从交互信息库中匹配交互物以及根据所述现实动作信息从所述交互信息库中匹配所述交互物的交互动作;
图像生成步骤:融合所述现实图像、所述交互物和所述交互物的所述交互动作,生成基于增强现实的图像。
结合第一方面,本发明在第一方面的第一种实现方式中,所述获取识别物信息的步骤包括:
从所述现实图像中获取所述识别物信息;
或通过GPS获取所述现实图像的拍摄位置信息,并从所述现实图像的所述拍摄位置信息中获取所述识别物信息。
结合第一方面或第一方面的第一种实现方式,本发明在第一方面的第二实现方式中,在所述图像生成步骤之前还包括指令获取匹配步骤,所述指令获取匹配步骤包括:
获取第一指令,并根据所述第一指令从所述交互信息库中匹配交互物;
获取第二指令,并根据所述第二指令从所述交互信息库中匹配所述交互物的交互动作。
结合第一方面,本发明在第一方面的第三种实现方式中,在所述匹配步骤之前还包括建立交互信息库的步骤,包括:
采集步骤:采集交互物;
标签信息设定步骤:根据所述交互物的类别设定标签信息;
定制步骤:为所述交互物定制交互动作。
结合本发明在第一方面的第三种实现方式,本发明在第一方面的第四种实现方式中,所述匹配步骤包括:
根据所述识别物信息从交互信息库中匹配所述交互信息库中的标签信息,然后获取所述标签信息下的所述交互物。
结合本发明在第一方面的第三种实现方式,本发明在第一方面的第五种实现方式中,在所述采集步骤之后还包括:
根据所述交互物的使用频率为所述交互物设定匹配优先级,使用频率越高的所述交互物具有越高的匹配优先级。
结合本发明在第一方面的第五种实现方式,本发明在第一方面的第六种实现方式中,所述匹配步骤包括:
根据所述识别物信息从所述交互信息库中匹配具有最高的所述匹配优先级的所述交互物。
第二方面,本发明实施例提供了一种基于增强现实的拍照的装置,包括:
拍摄模块:用于拍摄现实图像;
信息获取模块:用于获取识别物信息以及现实动作信息;
匹配模块:用于根据所述识别物信息从交互信息库中匹配交互物以及根据所述现实动作从所述交互信息库中匹配所述交互物的交互动作;
图像生成模块:用于融合所述现实图像、所述交互物和所述交互物的所述交互动作,生成基于增强现实的图像。
结合第二方面,本发明在第二方面的第一种实现方式中,所述信息获取模块包括识别物信息获取模块,所述识别物信息获取模块具体:
用于从所述现实图像中获取所述识别物信息;
或用于通过GPS获取所述现实图像的拍摄位置信息,并从所述现实图像的所述拍摄位置信息中获取所述识别物信息。
结合第二方面或第二方面的第一种实现方式,本发明在第二方面的第二实现方式中,所述拍照装置还包括指令获取匹配模块,所述指令获取匹配模块具体:
用于获取第一指令,并根据所述第一指令从所述交互信息库中匹配交互物;
用于获取第二指令,并根据所述第二指令从所述交互信息库中匹配所述交互物的交互动作。
结合第二方面,本发明在第二方面的第三种实现方式中,所述拍照装置还包括交互信息库建立模块,所述交互信息库建立模块包括:
采集单元:用于采集交互物;
标签信息设定单元:用于根据所述交互物的类别设定标签信息;
定制单元:用于为所述交互物定制交互动作。
结合第二方面的第三种实现方式,本发明在第二方面的第四种实现方式中,所述交互信息库建立模块还包括:
匹配优先级设定单元:用于根据所述交互物的使用频率为所述交互物设定匹配优先级,使用频率越高的所述交互物具有越高的匹配优先级。
所述功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块。
在一个可能的设计中,基于增强现实的拍照装置的结构中包括处理器、存储装置和摄像头,所述存储器用于存储支持拍照装置执行上述第一方面中基于增强现实的拍照方法的程序,所述处理器被配置为用于执行所述存储器中存储的程序,所述摄像头用于采集图像。所述拍照装置还可以包括通信接口,用于拍照装置与其他设备或通信网络通信。
第三方面,本发明实施例提供了一种计算机可读存储介质,用于存储基于增强现实的拍照装置所用的计算机软件指令,其包括用于执行上述第一方面中基于增强现实的拍照方法为拍照装置所涉及的程序。
上述技术方案中的一个技术方案具有如下优点或有益效果:可以满足用户希望与明星或其他人物、动物、物品进行合影或动作交互的需求。
上述技术方案中的另一个技术方案具有如下优点或有益效果:可以为用户提供多种交互选择,交互方式更灵活。
上述概述仅仅是为了说明书的目的,并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外,通过参考附图和以下的详细描述,本发明进一步的方面、实施方式和特征将会是容易明白的。
附图说明
在附图中,除非另外规定,否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解,这些附图仅描绘了根据本发明公开的一些实施方式,而不应将其视为是对本发明范围的限制。
图1为本发明实施例一的拍照方法的流程示意图。
图2为本发明实施例二的拍照方法中的交互信息库的建立步骤的流程示意图。
图3为本发明实施例三的拍照方法的流程示意图。
图4为本发明实施例五的拍照装置的连接框图。
图5为本发明实施例六的拍照装置的连接框图。
图6为本发明实施例七的拍照装置的连接框图。
图7为本发明实施例八的拍照设备的组成结构示意图。
具体实施方式
在下文中,仅简单地描述了某些示例性实施例。正如本领域技术人员可认识到的那样,在不脱离本发明的精神或范围的情况下,可通过各种不同方式修改所描述的实施例。因此,附图和描述被认为本质上是示例性的而非限制性的。
本发明实施例旨在解决现有技术中的拍摄系统拍照模式单一,只能将照片拍摄下来以后进行简单的虚拟背景替换,不能与虚拟物进行互动,以及灵活性不佳等问题。本发明实施例主要通过从拍摄的现实图像中获取识别物以及现实动作,并根据识别物和现实动作匹配交互物和交互动作,以及融合现实图像、交互物和交互动作,从而生成增强现实的图像,以满足用户希望与明星或其他热门人物、动物、物品在特定地点进行合影或与人物进行响应交互的需求。下面分实施例进行技术方案的展开描述。
实施例一
请参阅图1,本实施例提供了一种增强现实的拍照方法,所述方法包括:
S110:拍摄步骤,包括拍摄现实图像。
具体地,在本实施例中,由移动终端的摄像头拍摄现实图像,移动终端包括但不限定于手机、平板电脑、数码相机等配备有摄像头的设备,优选为智能手机。
S120:信息获取步骤,包括获取识别物信息以及现实动作信息。
具体地,识别物信息用于匹配交互物,因此识别物信息应具有与交互物相同的特征信息。识别物信息可以为场景信息,比如,足球场,“足球场”与足球明星“罗纳尔多”具有相同的特征信息“足球”,场景信息“足球场”作为识别物信息可以用来匹配交互物“罗纳尔多”;识别物信息可以为动作信息,比如游泳,“游泳”与游泳运动员“菲尔普斯”具有相同的特征信息“游泳”,动作信息“游泳”作为识别物信息可以用来匹配交互物“菲尔普斯”;识别物信息也可以为物品信息,比如话筒,“话筒”与歌星“王菲”具有相同的特征信息“话筒”,物品信息“话筒”作为识别物信息可以用来匹配交互物“王菲”。
本实施例中,获取识别物信息和现实动作信息的方式为从现实图像中获取识别物信息和现实动作信息。例如,现实图像显示男孩在篮球场中摆出了握手的动作,获取的识别物信息即为“篮球场”,获取的现实动作信息即为“握手”,而“男孩”即为现实中的现实物,图像中的“篮球场”即为场景。
S130:匹配步骤,包括根据识别物信息从交互信息库中匹配交互物以及根据现实动作从交互信息库中匹配交互物的交互动作。
按照信息获取步骤S120中的示例,在匹配步骤S130中,根据识别物信息“篮球场”从交互信息库中匹配交互物“姚明”,根据现实动作信息“握手”从交互信息库中匹配交互物“姚明”的交互动作“握手”。
具体地,匹配交互物的过程包括:首先,根据识别物信息从交互信息库中匹配标签信息;然后,获取该标签信息下的交互物。例如,首先,将识别物信息“篮球场”与交互信息库中的标签信息进行匹配,进而获得匹配的标签信息“篮球明星”;然后,获取该标签信息“篮球明星”下的交互物“姚明”、“乔丹”、“科比”、“詹姆斯”和“加内特”。需要说明的是,获取的交互物的内容和数量与交互信息库的建立有关,本发明实施例并不对交互信息库中交互物的内容和数量进行限定。
优选地,在匹配步骤S130中,可以根据识别物信息从交互信息库中匹配具有最高匹配优先级的交互物。例如,在“篮球明星”这个标签下,交互物“姚明”具有最高的匹配优先级,因此,最终匹配的交互物为“姚明”。
S140:图像生成步骤,包括融合现实图像、交互物和交互物的交互动作,生成基于增强现实的图像。
具体地,利用增强现实技术,将现实图像、交互物和交互物的交互动作进行融合,进而生成现实叠加虚拟交互物和虚拟交互动作的图像。例如,利用增强现实技术,融合现实物“男孩”、场景“篮球场”、交互物“姚明”和交互物“姚明”的交互动作“握手”,进而生成男孩与姚明在篮球场上握手的图像。
通过本发明实施例的技术方案,可以满足用户希望与明星或其他热门人物、动物、物品在特定地点进行合影或与人物进行响应交互的需求。
实施例二
本实施例提供了一种增强现实的拍照方法,其与实施例一的区别仅在于在匹配步骤S130之前还包括建立交互信息库的步骤。
请参阅图2,本实施例中,建立交互信息库的步骤包括:
S210:采集步骤,包括采集交互物。
具体地,在数据库中采集交互物的图片信息,然后根据交互物的图片信息提取2D信息,再根据2D信息构建3D交互物。数据库可来源于互联网或已下载于客户端的数据存储资源。
S220:标签信息设定步骤,包括根据交互物的所属类别设定标签信息。
例如交互物“姚明”属于运动员,也属于明星,更进一步地属于篮球明星,因此,其标签信息可以为“运动员”和/或“明星”和/或“篮球明星”。本发明实施例并不限定类别的划分标准,也不限定某一交互物的标签信息的数量。
S230:定制步骤,包括为交互物定制交互动作。
例如,为交互物“姚明”定制“飞吻”、“拥抱”、“比心”、“握手”等一个或多个交互动作。
优选地,在采集步骤S210之后,还包括根据交互物的使用频率为交互物设定匹配优先级,使用频率越高的交互物具有越高的匹配优先级。例如,“姚明”属于热门人物,在篮球明星中有较高的使用频率,因此在标签信息为“篮球明星”下,可以将交互物“姚明”设置为最高的匹配优先级。当根据识别物信息“篮球场”从交互信息库中匹配交互物时,可以匹配具有最高匹配优先级的交互物“姚明”。
实施例三
本实施例提供了一种增强现实的拍照方法,请参阅图3,其与实施例一的区别在于,在图像生成步骤S140之前还包括指令获取匹配步骤S150,指令获取匹配步骤S150包括:
获取第一指令,并根据第一指令从交互信息库中获取交互物;以及,
获取第二指令,并根据第二指令从交互信息库库中获取交互物的交互动作。
其中,所述第一指令和第二指令包括但不限定为语音指令或文字指令。例如,获取的第一指令为“乔丹”,第二指令为“握手”,可以根据第一指令“乔丹”从交互信息库中匹配交互物“乔丹”,根据第二指令“握手”从交互信息库中匹配交互物“乔丹”的交互动作“握手”。
需要说明的是,指令获取匹配步骤S150还可以应用于匹配步骤S130之后,即适用于根据信息获取步骤S120无法获得识别物信息和现实动作信息,或者根据匹配步骤S130从交互信息库中匹配交互物和交互动作失败的情况。
实施例四
本实施例提供一种增强现实的拍照方法,其与实施例一或实施例二的区别仅在于步骤S120中根据现实图像获取识别物信息的具体实现方式不同,在本实施例中,获取识别物信息的方式具体为:通过GPS获取现实图像的拍摄位置信息,并根据现实图像的拍摄位置信息获取识别物信息。例如,通过GPS获取现实图像的拍摄位置信息为“篮球场”,获取的识别物信息即为“篮球场”。
实施例五
本实施例提供了一种基于增强现实的拍照装置,对应于实施例一的拍照方法。
请参阅图4,本实施例的基于增强现实的拍照装置包括:拍摄模块110、信息获取模块120、匹配模块130以及图像生成模块140。
拍摄模块110用于拍摄现实图像,具体地,在本实施例中,由移动终端的摄像头拍摄现实图像。
信息获取模块120用于根据现实图像获取识别物信息以及现实动作信息,具体地,信息获取模块包括识别物信息获取模块121以及现实动作信息获取模块122。
识别物信息获取模块用于从现实图像中获取识别物信息;或用于通过GPS获取现实图像的拍摄位置信息,并根据现实图像的拍摄位置信息获取识别物信息。
现实动作信息获取模块122用于从现实图像中获取现实动作信息。
匹配模块130用于根据识别物信息从交互信息库中匹配交互物以及根据现实动作从交互信息库中匹配交互物的交互动作。
图像生成模块140用于融合现实图像、交互物和交互物的述交互动作,生成基于增强现实的图像。
本发明实施例所述装置的功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块或单元。
实施例六
本实施例提供了一种基于增强现实的拍照装置,对应于实施例二的拍照方法。请参阅图5,与实施例五相比,本实施例的拍照装置还包括交互信息库建立模块200,本实施例的交互信息库建立模块200包括采集单元210、标签信息设定单元220以及定制单元230。
采集单元210用于采集交互物;标签信息设定单元220用于根据交互物的类别设定标签信息;定制单元230用于为交互物定制交互动作。
进一步地,本实施例的交互信息库建立模块200还包括匹配优先级设定单元240,用于根据交互物的使用频率为交互物设定匹配优先级,使用频率越高的所述交互物具有越高的匹配优先级。根据识别物信息从交互信息库中匹配交互物时,可以匹配具有最高的匹配优先级的交互物。
本发明实施例所述装置的功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块或单元。
实施例七
本实施例提供了一种基于增强现实的拍照装置,对应于实施例三的拍照方法。请参阅图6,与实施例五相比,本实施例的拍照装置还包括指令获取匹配模块150,用于获取第一指令,并根据第一指令从交互信息库中获取交互物;以及获取第二指令,并根据第二指令从交互信息库库中获取交互物的交互动作。
实施例八
本发明实施例提供一种基于增强现实的拍照设备,如图7所示,该设备包括:存储装置31、处理器32和摄像头33,存储装置31内存储有可在处理器32上运行的计算机程序。处理器32执行所述计算机程序时实现上述实施例中的拍照方法。存储装置31和处理器32的数量可以为一个或多个。摄像头33用于采集图像。
该设备还包括:
通信接口34,用于与外界设备进行通信,进行数据交互传输。
存储装置31可能包含高速RAM存储装置,也可能还包括非易失性存储装置(non-volatile memory),例如至少一个磁盘存储装置。
如果存储装置31、处理器32、摄像头33和通信接口34独立实现,则存储装置31、处理器32、摄像头33和通信接口33可以通过总线相互连接并完成相互间的通信。所述总线可以是工业标准体系结构(ISA,Industry Standard Architecture)总线、外部设备互连(PCI,Peripheral Component)总线或扩展工业标准体系结构(EISA,Extended IndustryStandard Component)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图5中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
可选的,在具体实现上,如果存储装置31、处理器32及通信接口34集成在一块芯片上,则存储装置31、处理器32及通信接口34可以通过内部接口完成相互间的通信。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储装置(RAM),只读存储装置(ROM),可擦除可编辑只读存储装置(EPROM或闪速存储装置),光纤装置,以及便携式只读存储装置(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储装置中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储装置中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读存储介质中。所述存储介质可以是只读存储装置,磁盘或光盘等。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到其各种变化或替换,这些都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (14)

1.一种基于增强现实的拍照方法,其特征在于,包括:
拍摄步骤:拍摄现实图像;
信息获取步骤:根据所述现实图像获取识别物信息以及现实动作信息;
匹配步骤:根据所述识别物信息从交互信息库中匹配交互物以及根据所述现实动作信息从所述交互信息库中匹配所述交互物的交互动作;
图像生成步骤:融合所述现实图像、所述交互物和所述交互物的所述交互动作,生成基于增强现实的图像。
2.根据权利要求1所述的方法,其特征在于,所述获取识别物信息的步骤包括:
从所述现实图像中获取所述识别物信息;
或通过GPS获取所述现实图像的拍摄位置信息,并从所述现实图像的所述拍摄位置信息中获取所述识别物信息。
3.根据权利要求1或2所述的方法,其特征在于,在所述图像生成步骤之前还包括指令获取匹配步骤,所述指令获取匹配步骤包括:
获取第一指令,并根据所述第一指令从所述交互信息库中匹配交互物;
获取第二指令,并根据所述第二指令从所述交互信息库中匹配所述交互物的交互动作。
4.根据权利要求1所述的方法,其特征在于,在所述匹配步骤之前还包括建立交互信息库的步骤,所述建立交互信息库的步骤包括:
采集步骤:采集交互物;
标签信息设定步骤:根据所述交互物的类别设定标签信息;
定制步骤:为所述交互物定制交互动作。
5.根据权利要求4所述的方法,其特征在于,所述匹配步骤包括:
根据所述识别物信息从交互信息库中匹配所述交互信息库中的标签信息,然后获取所述标签信息下的所述交互物。
6.根据权利要求4所述的方法,其特征在于,在所述采集步骤之后还包括:
根据所述交互物的使用频率为所述交互物设定匹配优先级,使用频率越高的所述交互物具有越高的匹配优先级。
7.根据权利要求6所述的方法,其特征在于,所述匹配步骤包括:
根据所述识别物信息从所述交互信息库中匹配具有最高的所述匹配优先级的所述交互物。
8.一种基于增强现实的拍照装置,其特征在于,包括:
拍摄模块:用于拍摄现实图像;
信息获取模块:用于根据所述现实图像获取识别物信息以及现实动作信息;
匹配模块:用于根据所述识别物信息从交互信息库中匹配交互物以及根据所述现实动作从所述交互信息库中匹配所述交互物的交互动作;
图像生成模块:用于融合所述现实图像、所述交互物和所述交互物的所述交互动作,生成基于增强现实的图像。
9.根据权利要求8所述的拍照装置,其特征在于,所述信息获取模块包括识别物信息获取模块,所述识别物信息获取模块具体:
用于从所述现实图像中获取所述识别物信息;
或用于通过GPS获取所述现实图像的拍摄位置信息,并从所述现实图像的所述拍摄位置信息中获取所述识别物信息。
10.根据权利要求8或9所述的拍照装置,其特征在于,所述拍照装置还包括指令获取匹配模块,所述指令获取匹配模块具体:
用于获取第一指令,并根据所述第一指令从所述交互信息库中匹配交互物;
用于获取第二指令,并根据所述第二指令从所述交互信息库中匹配所述交互物的交互动作。
11.根据权利要求8所述的拍照装置,其特征在于,所述拍照装置还包括交互信息库建立模块,所述交互信息库建立模块包括:
采集单元:用于采集交互物;
标签信息设定单元:用于根据所述交互物的类别设定标签信息;
定制单元:用于为所述交互物定制交互动作。
12.根据权利要求11所述的拍照装置,其特征在于,所述交互信息库建立模块还包括:
匹配优先级设定单元:用于根据所述交互物的使用频率为所述交互物设定匹配优先级,使用频率越高的所述交互物具有越高的匹配优先级。
13.一种基于增强现实的拍照设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
摄像头,用于采集图像;
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
14.一种计算机可读存储介质,其存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN201711296090.3A 2017-12-08 2017-12-08 基于增强现实的拍摄方法、装置、设备及计算机可读介质 Active CN108021896B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711296090.3A CN108021896B (zh) 2017-12-08 2017-12-08 基于增强现实的拍摄方法、装置、设备及计算机可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711296090.3A CN108021896B (zh) 2017-12-08 2017-12-08 基于增强现实的拍摄方法、装置、设备及计算机可读介质

Publications (2)

Publication Number Publication Date
CN108021896A true CN108021896A (zh) 2018-05-11
CN108021896B CN108021896B (zh) 2019-05-10

Family

ID=62072883

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711296090.3A Active CN108021896B (zh) 2017-12-08 2017-12-08 基于增强现实的拍摄方法、装置、设备及计算机可读介质

Country Status (1)

Country Link
CN (1) CN108021896B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109298781A (zh) * 2018-08-28 2019-02-01 百度在线网络技术(北京)有限公司 基于ar的留言处理方法、装置、设备及计算机存储介质
CN109740425A (zh) * 2018-11-23 2019-05-10 上海扩博智能技术有限公司 基于增强现实的图像标注方法、系统、设备及存储介质
CN110176077A (zh) * 2019-05-23 2019-08-27 北京悉见科技有限公司 增强现实拍照的方法、装置及计算机存储介质
WO2020042786A1 (zh) * 2018-08-27 2020-03-05 阿里巴巴集团控股有限公司 基于增强现实的互动方法及装置
CN111064894A (zh) * 2019-12-26 2020-04-24 上海传英信息技术有限公司 图像处理方法、终端设备及计算机可读存储介质
CN111182387A (zh) * 2019-12-03 2020-05-19 广东小天才科技有限公司 一种学习互动方法及智能音箱
CN111309153A (zh) * 2020-03-25 2020-06-19 北京百度网讯科技有限公司 人机交互的控制方法和装置、电子设备和存储介质
CN111598824A (zh) * 2020-06-04 2020-08-28 上海商汤智能科技有限公司 场景图像处理方法、装置、ar设备以及存储介质
CN111640166A (zh) * 2020-06-08 2020-09-08 上海商汤智能科技有限公司 一种ar合影方法、装置、计算机设备及存储介质
CN111638798A (zh) * 2020-06-07 2020-09-08 上海商汤智能科技有限公司 一种ar合影方法、装置、计算机设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504671A (zh) * 2014-12-12 2015-04-08 浙江大学 一种用于立体显示的虚实融合图像生成方法
CN104683767A (zh) * 2015-02-10 2015-06-03 浙江宇视科技有限公司 透雾图像生成方法及装置
CN104834375A (zh) * 2015-05-05 2015-08-12 常州恐龙园股份有限公司 基于增强现实的游乐园指南系统
CN106157363A (zh) * 2016-06-28 2016-11-23 广东欧珀移动通信有限公司 一种基于增强现实的拍照方法、装置和移动终端
CN106203280A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种增强现实ar图像处理方法、装置及智能终端
CN106203279A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种增强现实中目标对象的识别方法、装置及移动终端
CN106775198A (zh) * 2016-11-15 2017-05-31 捷开通讯(深圳)有限公司 一种基于混合现实技术实现陪伴的方法及装置
US20170336872A1 (en) * 2014-07-22 2017-11-23 Osterhout Group, Inc. External user interface for head worn computing

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170336872A1 (en) * 2014-07-22 2017-11-23 Osterhout Group, Inc. External user interface for head worn computing
CN104504671A (zh) * 2014-12-12 2015-04-08 浙江大学 一种用于立体显示的虚实融合图像生成方法
CN104683767A (zh) * 2015-02-10 2015-06-03 浙江宇视科技有限公司 透雾图像生成方法及装置
CN104834375A (zh) * 2015-05-05 2015-08-12 常州恐龙园股份有限公司 基于增强现实的游乐园指南系统
CN106157363A (zh) * 2016-06-28 2016-11-23 广东欧珀移动通信有限公司 一种基于增强现实的拍照方法、装置和移动终端
CN106203280A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种增强现实ar图像处理方法、装置及智能终端
CN106203279A (zh) * 2016-06-28 2016-12-07 广东欧珀移动通信有限公司 一种增强现实中目标对象的识别方法、装置及移动终端
CN106775198A (zh) * 2016-11-15 2017-05-31 捷开通讯(深圳)有限公司 一种基于混合现实技术实现陪伴的方法及装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI721466B (zh) * 2018-08-27 2021-03-11 開曼群島商創新先進技術有限公司 基於擴增實境的互動方法及裝置
WO2020042786A1 (zh) * 2018-08-27 2020-03-05 阿里巴巴集团控股有限公司 基于增强现实的互动方法及装置
CN109298781A (zh) * 2018-08-28 2019-02-01 百度在线网络技术(北京)有限公司 基于ar的留言处理方法、装置、设备及计算机存储介质
CN109740425A (zh) * 2018-11-23 2019-05-10 上海扩博智能技术有限公司 基于增强现实的图像标注方法、系统、设备及存储介质
CN110176077A (zh) * 2019-05-23 2019-08-27 北京悉见科技有限公司 增强现实拍照的方法、装置及计算机存储介质
CN110176077B (zh) * 2019-05-23 2023-05-26 北京悉见科技有限公司 增强现实拍照的方法、装置及计算机存储介质
CN111182387A (zh) * 2019-12-03 2020-05-19 广东小天才科技有限公司 一种学习互动方法及智能音箱
CN111064894A (zh) * 2019-12-26 2020-04-24 上海传英信息技术有限公司 图像处理方法、终端设备及计算机可读存储介质
CN111309153A (zh) * 2020-03-25 2020-06-19 北京百度网讯科技有限公司 人机交互的控制方法和装置、电子设备和存储介质
CN111309153B (zh) * 2020-03-25 2024-04-09 北京百度网讯科技有限公司 人机交互的控制方法和装置、电子设备和存储介质
CN111598824A (zh) * 2020-06-04 2020-08-28 上海商汤智能科技有限公司 场景图像处理方法、装置、ar设备以及存储介质
CN111638798A (zh) * 2020-06-07 2020-09-08 上海商汤智能科技有限公司 一种ar合影方法、装置、计算机设备及存储介质
CN111640166A (zh) * 2020-06-08 2020-09-08 上海商汤智能科技有限公司 一种ar合影方法、装置、计算机设备及存储介质
CN111640166B (zh) * 2020-06-08 2024-03-26 上海商汤智能科技有限公司 一种ar合影方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN108021896B (zh) 2019-05-10

Similar Documents

Publication Publication Date Title
CN108021896B (zh) 基于增强现实的拍摄方法、装置、设备及计算机可读介质
CN106803057B (zh) 图像信息处理方法及装置
CN110147231A (zh) 组合特效生成方法、装置及存储介质
CN109241956B (zh) 合成图像的方法、装置、终端及存储介质
EP2624217A1 (en) Information presentation device, digital camera, head mount display, projector, information presentation method, and information presentation program
CN107395965A (zh) 一种图像处理方法及移动终端
CN111833458B (zh) 图像显示方法及装置、设备、计算机可读存储介质
JP2008510254A (ja) ポータブル拡張現実感デバイスおよびその方法
CN110139028A (zh) 一种图像处理的方法及头戴式显示设备
CN102201032A (zh) 个性化服装及饰品目录和显示
CN110298283A (zh) 图像素材的匹配方法、装置、设备以及存储介质
CN108416832A (zh) 媒体信息的显示方法、装置和存储介质
CN106157363A (zh) 一种基于增强现实的拍照方法、装置和移动终端
CN109743584B (zh) 全景视频合成方法、服务器、终端设备及存储介质
EP2071578A1 (en) Video interaction apparatus and method
JP2020086983A (ja) 画像処理装置、画像処理方法、及びプログラム
CN109448050B (zh) 一种目标点的位置的确定方法及终端
CN112653848B (zh) 增强现实场景下的展示方法、装置、电子设备及存储介质
CN105608934B (zh) Ar儿童故事早教舞台剧系统
CN104750933A (zh) 一种基于互联网的眼镜试戴方法及系统
CN110302524A (zh) 肢体训练方法、装置、设备和存储介质
CN106527724A (zh) 一种实现虚拟现实场景的方法及系统
CN107908278A (zh) 一种虚拟现实vr界面生成的方法和装置
CN109784134A (zh) 计算机可读存储介质、信息处理装置以及信息处理方法
CN114332374A (zh) 一种虚拟显示方法、设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant