CN106203279A - 一种增强现实中目标对象的识别方法、装置及移动终端 - Google Patents

一种增强现实中目标对象的识别方法、装置及移动终端 Download PDF

Info

Publication number
CN106203279A
CN106203279A CN201610503137.8A CN201610503137A CN106203279A CN 106203279 A CN106203279 A CN 106203279A CN 201610503137 A CN201610503137 A CN 201610503137A CN 106203279 A CN106203279 A CN 106203279A
Authority
CN
China
Prior art keywords
mobile terminal
information
destination object
scene
dark situation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610503137.8A
Other languages
English (en)
Other versions
CN106203279B (zh
Inventor
卓世杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201610503137.8A priority Critical patent/CN106203279B/zh
Publication of CN106203279A publication Critical patent/CN106203279A/zh
Application granted granted Critical
Publication of CN106203279B publication Critical patent/CN106203279B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种增强现实中目标对象的识别方法、装置及移动终端。该识别方法包括:确定移动终端所处当前环境是否属于设定的暗环境范围;如果所述当前环境属于所述暗环境范围,则基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象;对所述目标对象进行增强操作。利用该识别方法,能够在移动终端处于暗环境时快速确定摄像头所捕捉的实景图像,并在实景图像中识别待增强的目标对象,由此解决了现有的识别方法无法对暗环境下所拍摄实景图像进行目标对象识别的问题,从而提高了增强现实中目标对象识别的准确率,进而提高了增强现实拍摄的整体处理效率。

Description

一种增强现实中目标对象的识别方法、装置及移动终端
技术领域
本发明实施例涉及增强现实技术领域,尤其涉及一种增强现实中目标对象的识别方法、装置及移动终端。
背景技术
增强现实技术(Augmented Reality,简称AR),是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
随着电子技术的发展创新,越来越多的电子产品出现在人们的生活中,移动终端成为人们受欢迎的电子产品之一,随着移动终端的广泛应用,增强现实技术也逐渐融合进移动电子设备的很多功能应用中,如,应用于移动终端的拍照功能中,在用户拍照的过程中实时的对目标对象进行场景及效果的增强,由此可以避免后期对拍摄照片的处理;又如,应用于移动终端的娱乐游戏中,在用户进行游戏操作时基于增强现实来增强游戏场景的真实性。
对于移动终端的拍照功能而言,在融合增强现实技术后对目标拍摄对象实时进行效果增强之前,最关键的就是对目标对象的识别。如果对目标对象的拍摄在暗环境中进行,则基于现有的目标对象识别方法很难在暗环境中确定出要进行增强现实的目标对象,由此降低增强现实中对目标对象进行识别的准确性,进而影响暗环境中对目标拍摄对象进行增强操作的效果。
发明内容
本发明的目的是提出一种增强现实中目标对象的识别方法、装置及移动终端,以提高暗环境下对增强现实中目标对象进行识别时的准确度。
一方面,本发明实施例提供了一种增强现实中目标对象的识别方法,包括:
确定移动终端所处当前环境是否属于设定的暗环境范围;
如果所述当前环境属于所述暗环境范围,则基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象;
对所述目标对象进行增强操作。
另一方面,本发明实施例提供了一种增强现实中目标对象的识别装置,包括:
暗环境判定模块,用于确定移动终端所处当前环境是否属于设定的暗环境范围;
对象识别模块,用于当所述当前环境属于所述暗环境范围时,基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象;
目标增强模块,用于对所述目标对象进行增强操作。
又一方面,本发明实施例还提供了一种移动终端,该移动终端集成了本发明实施例提供的增强现实中目标对象的识别装置。
本发明实施例提供了一种增强现实中目标对象的识别方法、装置及移动终端,本发明的方法可以概括为:首先判断移动终端所处的当前环境是否属于暗环境范围,并在当前环境属于暗环境范围后,基于移动终端的地理位置和拍摄姿态识别待增强的目标对象,并基于增强现实对目标对象进行增强操作。利用该识别方法,能够在移动终端处于暗环境时快速确定摄像头所捕捉的实景图像,并在实景图像中识别待增强的目标对象,由此解决了现有的识别方法无法对暗环境下所拍摄实景图像进行目标对象识别的问题,从而提高了增强现实中目标对象识别的准确率,进而提高了增强现实拍摄的整体处理效率。
附图说明
图1为本发明实施例一提供的一种增强现实中目标对象的识别方法的流程示意图;
图2为本发明实施例二提供的一种增强现实中目标对象的识别方法的流程示意图;
图3a为本发明实施例三提供的一种增强现实中目标对象的识别方法的流程示意图;
图3b为暗环境下移动终端基于摄像头所捕捉的实景画面帧的示例图;
图3c为基于本发明实施例三提供的一种增强现实中目标对象的识别方法在实景画面帧中识别目标对象的示例图;
图4为本发明实施例一提供的一种增强现实中目标对象的识别装置的结构框图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种增强现实中目标对象的识别方法的流程示意图。该方法适用于暗环境下用户使用移动终端基于增强现实进行拍摄时,对增强现实中目标对象进行识别的情况,可以由增强现实中目标对象的识别装置执行,其中该装置可由软件和/或硬件实现,并一般集成于移动终端中。
如图1所示,本发明实施例一提供的一种移动终端的防沉迷方法,具体包括如下操作:
S101、确定移动终端所处当前环境是否属于设定的暗环境范围。
在本实施例中,所述移动终端具体可指手机、笔记本以及平板电脑等具有拍照功能的智能电子设备。所述暗环境具体可指所具有的光强度低于摄像头正常捕捉实景图像时所需光强度的环境。可以理解的是,在所述暗环境范围中,基于移动终端摄像头所获取的画面帧相较于正常环境下是模糊不清的。
在本实施例中,可以通过所获取的移动终端当前地理位置信息以及当前时间信息来判断移动终端所处当前环境是否属于设定的暗环境范围;也可以通过所量测的移动终端所处当前环境的光强度值大小来判断移动终端所处当前环境是否属于设定的暗环境范围。
S102、如果所述当前环境属于所述暗环境范围,则基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象。
在本实施例中,所述移动终端处于增强现实拍摄模式,具体可理解为:在所述移动终端的拍照功能应用中融合了增强现实技术,使得用户在基于移动终端的摄像头拍摄时,能够实时的对所拍摄的图像帧中的目标对象进行效果或场景增强。需要注意的是,对目标对象进行效果或场景增强的首要前提是能够识别出所述图像帧中的目标对象。
在本实施例中,如果所述当前环境属于所述暗环境范围,则可以认为移动终端的摄像头无法正常捕捉当前环境中的实景图像,此时,可认为在所述当前环境中无法对基于摄像头所获取的画面帧正常进行目标对象的识别。
在本实施例中,当移动终端所处的当前环境属于暗环境范围时,可以通过移动终端的地理位置以及拍摄姿态来识别待增强的目标对象。具体的,首先可以通过移动终端的地理位置来确定所述移动终端所处当前环境中存在的景物信息;然后,可以根据所确定的景物信息以及移动终端的拍摄姿态来确定当前所捕捉实景画面帧中包含的具体景物,由此可以将所确定出的具体景物作为待增强的目标对象。
S103、对所述目标对象进行增强操作。
在本实施例中,如果确定了待增强的目标对象,就可以基于增强现实技术对所述目标对象进行增强操作。示例性的,可以从增强现实库中选取与所述目标对象匹配的虚拟内容,并将所述虚拟内容叠加至包含所述目标对象的实景图像上,实现对目标对象效果或场景的增强。
本发明实施例一提供的一种增强现实中目标对象的识别方法,首先判断移动终端所处的当前环境是否属于暗环境范围,并在当前环境属于暗环境范围,后,基于移动终端的地理位置和拍摄姿态识别待增强的目标对象;并基于增强现实对目标对象进行增强操作。利用该识别方法,能够在移动终端处于暗环境时快速确定摄像头所捕捉的实景图像,并在实景图像中识别待增强的目标对象,由此解决了现有的识别方法无法对暗环境下所拍摄实景图像进行目标对象识别的问题,从而提高了增强现实中目标对象识别的准确率,进而提高了增强现实拍摄的整体处理效率。
实施例二
图2为本发明实施例二提供的一种增强现实中目标对象的识别方法的流程示意图。本发明实施例二以上述实施例为基础进行优化,在本实施例中,将步骤“确定移动终端所处当前环境是否属于设定的暗环境范围”具体优化为:获取所述移动终端所处当前环境的光强度值,其中,所述光强度值基于光敏传感器测得;根据所述光强度值确定所述移动终端所处当前环境是否属于所述暗环境范围。
进一步的,将步骤“基于所述移动终端的地理位置和拍摄姿态识别增强现实中的目标对象”具体优化为:获取所述移动终端的当前地理位置信息,并确定所述当前地理位置信息是否存在于预设的位置信息库中;如果所述当前地理位置信息存在于所述位置信息库中,则在所述位置信息库中获取所述当前地理位置信息对应的场景信息,所述场景信息包括:景物方位信息和景物特征点信息;确定所述移动终端的拍摄姿态,并基于所述拍摄姿态和所述场景信息识别待增强的目标对象。
进一步的,将步骤“对所述目标对象进行增强操作”具体优化为:如果增强现实库中存在与所述目标对象匹配的虚拟内容,则基于所述虚拟内容对所述目标对象进行增强操作。
如图2所示,本发明实施例二提供的一种增强现实中目标对象的识别方法,具体包括如下操作:
S201、获取所述移动终端所处当前环境的光强度值。
在本实施例中,可以获取到基于光敏传感器测得的所述移动终端所处当前环境的光强度值。
S202、根据所述光强度值确定所述移动终端所处当前环境是否属于所述暗环境范围。
在本实施例中,在获取到所述光强度值之后,可以将所述光强度值与设定的光强度基准值进行比较,如果所述光强度值低于所述光强度基准值,则可以认为所述移动终端所处当前环境属于暗环境范围,否则,可以认为所述移动终端所处当前环境属于暗环境范围。
S203、如果所述当前环境属于所述暗环境范围,则获取所述移动终端的当前地理位置信息,确定所述当前地理位置信息是否存在于预设的位置信息库中。
在本实施例中,可以基于GPS定位、基站定位以及WiFi定位等方式来确定所述移动终端的当前地理位置信息。所述当前地理信息具体可用于后续对当前环境周围景物信息的确定。
在本实施例中,如果确定移动终端所处当前环境属于暗环境范围,则可以确定所述当前地理位置信息是否存在于预设的位置信息库中。具体的,所述位置信息库包含了由地理位置和场景信息组成的二元信息组,其中,所述场景信息又包含了景物方位信息和景物特征点信息,基于所述景物方位信息可以确定景物所在的具体位置,基于所述景物特征点信息可以确定景物的具体轮廓。
在本实施例中,所述位置信息库一般存放于指定的服务器上,且所述位置信息库中的信息处于不断更新状态,具体的,可通过相关地图软件来获取当前地理位置及对应的周围景物信息,一般地,所述周围景物信息构成了当前地理位置的场景信息,由此形成二元信息组,所述二元信息组可更新至所述位置信息库中;此外,也可基于其他用户上传的与所述当前地理位置相关的周围景物信息来不断更新所述位置信息库中的二元信息组。
S204、如果所述当前地理位置信息存在于所述位置信息库中,则在所述位置信息库中获取所述当前地理位置信息对应的场景信息。
在本实施例中,当基于步骤S203确定出所述移动终端的当前地理位置信息存在于所述位置信息库中时,就可在所述位置信息库中获取与所述当前位置对应的场景信息。一般地,所述场景信息中包括了所述当前地理位置周围的至少一个景物的景物方位信息以及景物特征点信息。
S205、确定所述移动终端的拍摄姿态,并基于所述拍摄姿态和所述场景信息识别待增强的目标对象。
在本实施例中,当移动终端的摄像头捕捉实景画面时,移动终端会相应的存在一个拍摄姿态,所述拍摄姿态具体可理解为基于移动终端的摄像头拍摄时移动终端所呈现的姿态。一般地,可以基于移动终端后壳与水平面所呈的角度值来表示移动终端的拍摄姿态,其中,所述移动终端后壳与水平面所呈的角度值可以通过移动终端的重力感应器来确定。
在本实施例中,当确定出所述移动终端的拍摄姿态后,就可基于所述拍摄姿态和步骤S204中确定的场景信息进行目标对象识别。具体的,由于移动终端处于一定的拍摄姿态时就会对应存在一个相应的拍摄方位范围,由此可基于场景信息确定存在于所述拍摄方位范围中的景物,并最终将确定出的景物作为待识别的目标对象。
S206、如果增强现实库中存在与所述目标对象匹配的虚拟内容,则基于所述虚拟内容对所述目标对象进行增强操作。
在本实施例中,在确定所述待增强的目标对象之后,就可以对所述目标对象进行增强操作。一般地,基于增强现实技术进行效果或场景增强时,主要依据存储于增强现实库中的虚拟内容实现,具体的,只要确定所述增强现实库中存在于所述目标对象相匹配的虚拟内容,就可以基于所述虚拟内容对所述目标对象进行进行效果或场景的增强。
需要说明的是,所述增强现实库一般本地存储于所述移动终端的相应位置,所述增强现实库中的虚拟内容可以在联网状态下实时更新。
本发明实施例二提供的一种增强现实中目标对象的识别方法,具体化了当前环境的暗环境判定过程,即,可基于当前环境的光强度值来判定当前环境是否属于暗环境范围,同时还具体化了暗环境时增强现实中目标对象的确定过程,即,可以基于移动终端的当前地理位置对应的场景信息和移动终端的拍摄姿态识别待增强的目标对象,此外,还具体化了对目标对象进行增强操作的步骤,以使目标对象能够在增强现实库中存在对应的虚拟内容时进行增强操作。利用该方法,解决了现有的识别方法无法对暗环境下所拍摄实景图像进行目标对象识别的问题,从而提高了增强现实中目标对象识别的准确率,进而提高了增强现实拍摄的整体处理效率。
实施例三
图3a为本发明实施例三提供的一种增强现实中目标对象的识别方法的流程示意图。本发明实施例三以上述实施例为基础进行优化,在本实施例中,将步骤“确定移动终端所处当前环境是否属于设定的暗环境范围”具体优化为:获取移动终端所处当前环境的地理位置信息和当前时间信息;根据所述位置信息和当前时间信息,确定所述移动终端所处当前环境是否属于所述暗环境范围。
此外,本发明实施例三还将步骤“确定所述移动终端的拍摄姿态,并基于所述拍摄姿态和所述场景信息识别待增强的目标对象”进一步具体化为:获取所述移动终端的重力方向信息,并基于所述重力方向信息确定所述移动终端的拍摄姿态,所述拍摄姿态为所述移动终端后壳与水平面所成的角度;确定移动终端处于所述拍摄姿态时对应的拍摄方位范围;判断所述场景信息中是否存在包含于所述拍摄方位范围内的景物方位信息;如果存在符合条件的景物方位信息,则基于与所述景物方位信息对应的景物特征点信息确定实景画面帧中的景物轮廓,并将所述景物轮廓形成的图像确定为待增强的目标对象。
如图3a所示,本发明实施例三提供的一种增强现实中目标对象的识别方法,具体包括如下操作:
S301、获取移动终端所处当前环境的地理位置信息和当前时间信息。
在本实施例中,本发明实施例三给出了当前环境是否属于暗环境的另外一种判定方式。首先需要获取移动终端所处当前环境的地理位置信息和当前时间信息,所述地理位置信息基于GPS定位、基站定位或WiFi定位等方式获取,所述当前时间信息可以基于移动终端系统自带时钟获取。具体的,所获取的位置信息可以确定移动终端所在位置的经纬度坐标,所获取的当前时间信息可以确定移动终端当前的年月日信息还可以确定具体的时间点信息。
S302、根据所述位置信息和当前时间信息,确定所述移动终端所处当前环境是否属于所述暗环境范围。
在本实施例中,根据所述位置信息中包含的经纬度坐标可以确定移动终端当前所处环境具体的日出以及日落时间;然后根据所获取当前时间信息中的具体时间点可以确定移动终端当前环境是在日落之前还是在日落之后。一般地,可以将日落之前的阶段看作是白天,将日落之后的阶段看作是晚上,而在自然状态下,晚上的光线强度远远弱于白天的光线强度,由此可以将晚上确定为属于暗环境范围。
在本实施例中,当基于移动终端所处的位置信息和当前时间信息确定出移动终端所处当前环境为晚上时,则可认为移动终端所处当前环境属于暗环境范围。
S303、如果所述当前环境属于所述暗环境范围,则确定所述移动终端的当前地理位置信息是否存在于预设的位置信息库中。
S304、如果所述当前地理位置信息存在于所述位置信息库中,则在所述位置信息库中获取所述当前地理位置信息对应的场景信息。
步骤S303和S304在上述实施例二中已具体阐述,这里不再赘述。不同的是,由于需要基于当前地理位置信息确定移动终端所处当前环境是否属于暗环境范围,所以当前地理位置信息的获取操作已在步骤S301中进行。
S305、获取所述移动终端的重力方向信息,并基于所述重力方向信息确定所述移动终端的拍摄姿态。
在本实施例中,所述拍摄姿态为所述移动终端后壳与水平面所成的角度,一般地,移动终端与水平面所呈的角度可以基于移动终端的重力方向信息来确定,由此可以确定出所述移动终端的拍摄姿态。其中,所述移动终端的重力方向信息基于所述移动终端中配置的重力感应器量测获得。
S306、确定移动终端处于所述拍摄姿态时对应的拍摄方位范围。
在本实施例中,移动终端的摄像头都会存在一个相应的最大拍摄范围,所述最大拍摄范围具体可理解为能够在所捕捉的实景画面帧中显示的最大区域范围。所述最大拍摄范围可通过拍摄方位来表示,因此,所述最大拍摄范围也可理解为拍摄方位范围。
一般地,基于移动终端拍摄时所定位的方位不同,显示在所述实景画面帧中的拍摄方位范围就不同,因此,在移动终端处于不同拍摄姿态时就会对应的不同的拍摄方位范围,同时,可以确定移动终端处于所述拍摄姿态时对应的拍摄方位范围。
S307、判断所述场景信息中是否存在包含于所述拍摄方位范围内的景物方位信息。
在本实施例中,一个地理位置信息对应一个场景信息由此形成二元信息组存储于位置信息库中,在确定出移动终端的当前地理位置信息后,就可基于位置信息库中确定出相应的场景信息,所述场景信息中包含了当前地理位置周围景物的景物方位信息和景物特征点信息。
在本实施例中,在确定出移动终端拍摄姿态对应的拍摄方位信息后,就可判断场景信息中是否存在包含于所述拍摄方位范围内的景物方位信息。如果存在所述景物方位信息,则可认为景物方位信息对应的景物可以显示在移动终端所捕捉的实景画面帧中。
S308、如果存在符合条件的景物方位信息,则基于与所述景物方位信息对应的景物特征点信息确定实景画面帧中的景物轮廓,并将所述景物轮廓形成的图像确定为待增强的目标对象。
在本实施例中,如果场景信息中包含的景物方位信息存在于所述拍摄方位范围内,则可认为所述景物方位信息对应的景物能够显示在所述实景画面帧中。同时,基于所述所述景物方位信息可以在场景信息中确定与所述景物方位信息对应的景物特征点信息。一般地,对于一个景物而言,都会存在相应的特征点,基于这些特征点,就可以确定景物的大致轮廓,因此,在进行目标对象识别时,通常会基于确定的图像特征点来识别相应的图像。
因此,在本实施例中,可以基于与所述景物方位信息对应的景物特征点信息来确定所述实景画面帧中的景物轮廓。同时,可以将所述实景画面帧中的景物轮廓所形成的景物图像确定为待增强的目标对象。
S309、如果增强现实库中存在与所述目标对象匹配的虚拟内容,则基于所述虚拟内容对所述目标对象进行增强操作。
本发明实施例三提供的一种增强现实中目标对象的识别方法,具体化了暗环境判断的另外一种方式,即,基于移动终端的地理位置信息和当前时间信息判定移动终端所述当前环境是否属于暗环境范围;此外,还具体化了基于场景信息及移动终端拍摄姿态确定目标对象的过程。利用该识别方法,能够在移动终端处于暗环境时快速确定摄像头捕捉的实景图像,并在实景图像中识别待增强的目标对象,由此解决了现有的识别方法无法对暗环境下所拍摄实景图像进行目标对象识别的问题,从而提高了增强现实中目标对象识别的准确率,进而提高了增强现实拍摄的整体处理效率。
在上述实施例的基础上,本发明实施例三还提供了两幅示例图,以基于这两幅示例图来展示基于本发明实施例三所提供的识别方法进行目标对象识别的效果。具体的,图3b为暗环境下移动终端基于摄像头所捕捉的实景画面帧的示例图;图3c为基于本发明实施例三提供的一种增强现实中目标对象的识别方法在实景画面帧中识别目标对象的示例图。
具体的,如图3b所示,当移动终端所处当前环境属于暗环境范围时,移动终端基于摄像头所捕捉的实景画面帧中所显示的景物是无法辨认的,此时,基于现有的识别方法不能正确的识别实景画面帧中所包含的目标对象31;然而在基于本发明实施例三提供的一种增强现实中目标对象的识别方法对实景画面帧中所包含景物进行识别后,可以识别出实景画面帧中所包含的目标对象31,其中,所识别出的目标对象31如图3c所示。
实施例四
图4为本发明实施例四提供的一种增强现实中目标对象的识别装置的结构框图,该识别装置适用于暗环境下用户使用移动终端基于增强现实进行拍摄时,对增强现实中目标对象进行识别的情况。其中该装置可由软件和/或硬件实现,并一般集成于移动终端中。如图4所示,该识别装置包括:暗环境判定模块41、对象识别模块42以及对象增强模块43。
其中,暗环境判定模块41,用于确定移动终端所处当前环境是否属于设定的暗环境范围。
对象识别模块42,用于当所述当前环境属于所述暗环境范围时,基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象。
对象增强模块43,用于对所述目标对象进行增强操作。
在本实施例中,该识别装置首先通过暗环境判定模块41确定移动终端所处当前环境是否属于设定的暗环境范围;然后通过对象识别模块42当所述当前环境属于所述暗环境范围时,基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象;最终通过对象增强模块43对所述目标对象进行增强操作。
本发明实施例四提供的一种增强现实中目标对象的识别装置,能够在移动终端处于暗环境时快速确定摄像头捕捉的实景图像,并在实景图像中识别待增强的目标对象,由此解决了现有的识别方法无法对暗环境下所拍摄实景图像进行目标对象识别的问题,从而提高了增强现实中目标对象识别的准确率,进而提高了增强现实拍摄的整体处理效率。
进一步的,所述暗环境判定模块41,具体可用于:
获取所述移动终端所处当前环境的光强度值,其中,所述光强度值基于光敏传感器测得;根据所述光强度值确定所述移动终端所处当前环境是否属于所述暗环境范围。
进一步的,所述暗环境判定模块41,具体还可用于:
获取移动终端所处当前环境的地理位置信息和当前时间信息;根据所述位置信息和当前时间信息,确定所述移动终端所处当前环境是否属于所述暗环境范围。
进一步的,所述对象识别模块42,包括:
位置信息匹配单元,用于获取所述移动终端的当前地理位置信息,并在所述当前环境属于所述暗环境范围后,确定所述当前地理位置信息是否存在于预设的位置信息库中;
场景信息获取单元,用于当所述当前地理位置信息存在于所述位置信息库中时,在所述位置信息库中获取所述当前地理位置信息对应的场景信息,所述场景信息包括:景物方位信息和景物特征点信息;
目标对象识别单元,用于确定所述移动终端的拍摄姿态,并基于所述拍摄姿态和所述场景信息识别待增强的目标对象。
在上述实施例的基础上,所述目标对象识别单元,可用于:
获取所述移动终端的重力方向信息,并基于所述重力方向信息确定所述移动终端的拍摄姿态,所述拍摄姿态为所述移动终端后壳与水平面所成的角度;确定移动终端处于所述拍摄姿态时对应的拍摄方位范围;判断所述场景信息中是否存在包含于所述拍摄方位范围内的景物方位信息;如果存在符合条件的景物方位信息,则基于与所述景物方位信息对应的景物特征点信息确定实景画面帧中的景物轮廓,并将所述景物轮廓形成的图像确定为待增强的目标对象。
进一步的,所述所述对象增强模块43,具体用于:
当增强现实库中存在与所述目标对象匹配的虚拟内容时,基于所述虚拟内容对所述目标对象进行增强操作。
实施例五
本发明实施例五提供了一种移动终端,该移动终端集成了上述实施例提供的一种增强现实中目标对象的识别装置。可以通过执行增强现实中目标对象的识别方法进行增强现实中待增强的目标对象的识别。
示例性的,本实施例中的移动终端具体可以为手机、笔记本以及平板电脑等智能电子设备。当用户使用本实施例中的移动终端时,移动终端基于集成在其中的识别装置在确定移动终端所处当前环境属于设定的暗环境范围后,基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象;最终基于增强现实对所述目标对象进行了增强操作。
本实施例中的移动终端利用本发明提供的目标对象的识别装置,能够在移动终端处于暗环境时快速确定摄像头捕捉的实景图像,并在实景图像中识别待增强的目标对象,由此解决了移动终端中现有的识别装置无法对暗环境下所拍摄实景图像进行目标对象识别的问题,从而提高了增强现实中目标对象识别的准确率,进而提高了增强现实拍摄的整体处理效率,由此提升了用户体验。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (13)

1.一种增强现实中目标对象的识别方法,其特征在于,包括:
确定移动终端所处当前环境是否属于设定的暗环境范围;
如果所述当前环境属于所述暗环境范围,则基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象;
对所述目标对象进行增强操作。
2.根据权利要求1所述的方法,其特征在于,所述确定移动终端所处当前环境是否属于设定的暗环境范围,具体包括:
获取所述移动终端所处当前环境的光强度值,其中,所述光强度值基于光敏传感器测得;
根据所述光强度值确定所述移动终端所处当前环境是否属于所述暗环境范围。
3.根据权利要求1所述的方法,其特征在于,所述确定移动终端所处当前环境是否属于设定的暗环境范围,具体包括:
获取移动终端所处当前环境的地理位置信息和当前时间信息;
根据所述位置信息和当前时间信息,确定所述移动终端所处当前环境是否属于所述暗环境范围。
4.根据权利要求1所述的方法,其特征在于,所述基于所述移动终端的地理位置和拍摄姿态识别增强现实中的目标对象,具体包括:
获取所述移动终端的当前地理位置信息,并确定所述当前地理位置信息是否存在于预设的位置信息库中;
如果所述当前地理位置信息存在于所述位置信息库中,则在所述位置信息库中获取所述当前地理位置信息对应的场景信息,所述场景信息包括:景物方位信息和景物特征点信息;
确定所述移动终端的拍摄姿态,并基于所述拍摄姿态和所述场景信息识别待增强的目标对象。
5.根据权利要求4所述的方法,其特征在于,所述确定所述移动终端的拍摄姿态,并基于所述拍摄姿态和所述场景信息识别待增强的目标对象,包括:
获取所述移动终端的重力方向信息,并基于所述重力方向信息确定所述移动终端的拍摄姿态,所述拍摄姿态为所述移动终端后壳与水平面所成的角度;
确定移动终端处于所述拍摄姿态时对应的拍摄方位范围;
判断所述场景信息中是否存在包含于所述拍摄方位范围内的景物方位信息;
如果存在符合条件的景物方位信息,则基于与所述景物方位信息对应的景物特征点信息确定实景画面帧中的景物轮廓,并将所述景物轮廓形成的图像确定为待增强的目标对象。
6.根据权利要求1-5任一所述的方法,所述对所述目标对象进行增强操作,具体包括:
如果增强现实库中存在与所述目标对象匹配的虚拟内容,则基于所述虚拟内容对所述目标对象进行增强操作。
7.一种增强现实中目标对象的识别装置,其特征在于,包括:
暗环境判定模块,用于确定移动终端所处当前环境是否属于设定的暗环境范围;
对象识别模块,用于当所述当前环境属于所述暗环境范围时,基于所述移动终端的地理位置和拍摄姿态识别待增强的目标对象;
对象增强模块,用于对所述目标对象进行增强操作。
8.根据权利要求7所述的装置,其特征在于,所述暗环境判定模块,具体用于:
获取所述移动终端所处当前环境的光强度值,其中,所述光强度值基于光敏传感器测得;
根据所述光强度值确定所述移动终端所处当前环境是否属于所述暗环境范围。
9.根据权利要求7所述的装置,其特征在于,所述暗环境判定模块,具体用于:
获取移动终端所处当前环境的地理位置信息和当前时间信息;
根据所述位置信息和当前时间信息,确定所述移动终端所处当前环境是否属于所述暗环境范围。
10.根据权利要求7所述的装置,其特征在于,所述对象识别模块,包括:
位置信息匹配单元,用于获取所述移动终端的当前地理位置信息,并在所述当前环境属于所述暗环境范围后,确定所述当前地理位置信息是否存在于预设的位置信息库中;
场景信息获取单元,用于当所述当前地理位置信息存在于所述位置信息库中时,在所述位置信息库中获取所述当前地理位置信息对应的场景信息,所述场景信息包括:景物方位信息和景物特征点信息;
目标对象识别单元,用于确定所述移动终端的拍摄姿态,并基于所述拍摄姿态和所述场景信息识别待增强的目标对象。
11.根据权利要求10所述的装置,其特征在于,所述目标对象识别单元,用于:
获取所述移动终端的重力方向信息,并基于所述重力方向信息确定所述移动终端的拍摄姿态,所述拍摄姿态为所述移动终端后壳与水平面所成的角度;
确定移动终端处于所述拍摄姿态时对应的拍摄方位范围;
判断所述场景信息中是否存在包含于所述拍摄方位范围内的景物方位信息;
如果存在符合条件的景物方位信息,则基于与所述景物方位信息对应的景物特征点信息确定实景画面帧中的景物轮廓,并将所述景物轮廓形成的图像确定为待增强的目标对象。
12.根据权利要求7-11任一所述的装置,所述对象增强模块,具体用于:
当增强现实库中存在与所述目标对象匹配的虚拟内容时,基于所述虚拟内容对所述目标对象进行增强操作。
13.一种移动终端,其特征在于,在移动终端集成了权利要求7-12任一所述的增强现实中目标对象的识别装置。
CN201610503137.8A 2016-06-28 2016-06-28 一种增强现实中目标对象的识别方法、装置及移动终端 Active CN106203279B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610503137.8A CN106203279B (zh) 2016-06-28 2016-06-28 一种增强现实中目标对象的识别方法、装置及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610503137.8A CN106203279B (zh) 2016-06-28 2016-06-28 一种增强现实中目标对象的识别方法、装置及移动终端

Publications (2)

Publication Number Publication Date
CN106203279A true CN106203279A (zh) 2016-12-07
CN106203279B CN106203279B (zh) 2019-05-28

Family

ID=57462577

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610503137.8A Active CN106203279B (zh) 2016-06-28 2016-06-28 一种增强现实中目标对象的识别方法、装置及移动终端

Country Status (1)

Country Link
CN (1) CN106203279B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107657632A (zh) * 2017-08-09 2018-02-02 广东欧珀移动通信有限公司 场景显示方法及装置、终端设备
CN108021896A (zh) * 2017-12-08 2018-05-11 北京百度网讯科技有限公司 基于增强现实的拍摄方法、装置、设备及计算机可读介质
CN111131806A (zh) * 2019-12-30 2020-05-08 联想(北京)有限公司 用于展示虚拟物体的方法和装置、以及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101924992A (zh) * 2010-07-30 2010-12-22 中国电信股份有限公司 通过移动终端获取景物资讯的方法、系统和设备
CN103902040A (zh) * 2014-03-10 2014-07-02 宇龙计算机通信科技(深圳)有限公司 用于移动终端的处理装置、处理方法和电子设备
CN104584071A (zh) * 2012-08-23 2015-04-29 日本电气株式会社 物体识别装置、物体识别方法、以及程序
US20150294168A1 (en) * 2014-04-10 2015-10-15 Xerox Corporation Method and apparatus for an adaptive threshold based object detection

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101924992A (zh) * 2010-07-30 2010-12-22 中国电信股份有限公司 通过移动终端获取景物资讯的方法、系统和设备
CN104584071A (zh) * 2012-08-23 2015-04-29 日本电气株式会社 物体识别装置、物体识别方法、以及程序
CN103902040A (zh) * 2014-03-10 2014-07-02 宇龙计算机通信科技(深圳)有限公司 用于移动终端的处理装置、处理方法和电子设备
US20150294168A1 (en) * 2014-04-10 2015-10-15 Xerox Corporation Method and apparatus for an adaptive threshold based object detection

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107657632A (zh) * 2017-08-09 2018-02-02 广东欧珀移动通信有限公司 场景显示方法及装置、终端设备
CN108021896A (zh) * 2017-12-08 2018-05-11 北京百度网讯科技有限公司 基于增强现实的拍摄方法、装置、设备及计算机可读介质
CN108021896B (zh) * 2017-12-08 2019-05-10 北京百度网讯科技有限公司 基于增强现实的拍摄方法、装置、设备及计算机可读介质
CN111131806A (zh) * 2019-12-30 2020-05-08 联想(北京)有限公司 用于展示虚拟物体的方法和装置、以及电子设备

Also Published As

Publication number Publication date
CN106203279B (zh) 2019-05-28

Similar Documents

Publication Publication Date Title
US11892299B2 (en) Information prompt method and electronic device
US9317133B2 (en) Method and apparatus for generating augmented reality content
AU2013334573B2 (en) Augmented reality control systems
CN103442436B (zh) 一种室内定位终端、网络、系统及其方法
US9122707B2 (en) Method and apparatus for providing a localized virtual reality environment
US9071709B2 (en) Method and apparatus for providing collaboration between remote and on-site users of indirect augmented reality
CA2799444C (en) Method and apparatus for rendering a location-based user interface
US20110234631A1 (en) Augmented reality systems
CN110858414A (zh) 图像处理方法、装置、可读存储介质与增强现实系统
US20210335004A1 (en) Texture-based pose validation
CN109520500A (zh) 一种基于终端拍摄图像匹配的精确定位及街景库采集方法
CN110263611A (zh) 上下文感知定位、映射和跟踪
CN110210045B (zh) 目标区域的人数估算方法、装置及存储介质
WO2022088819A1 (zh) 视频处理方法、视频处理装置和存储介质
CN110361005A (zh) 定位方法、定位装置、可读存储介质及电子设备
US20240070976A1 (en) Object relighting using neural networks
CN106203279A (zh) 一种增强现实中目标对象的识别方法、装置及移动终端
JP2022030844A (ja) 情報処理プログラム、情報処理装置及び情報処理方法
KR20150077607A (ko) 증강현실을 이용한 공룡 유적지 체험 서비스 제공 시스템 및 그 방법
CN114466308A (zh) 一种定位方法和电子设备
Yan et al. Research and application of indoor guide based on mobile augmented reality system
CN115937722A (zh) 一种设备定位方法、设备及系统
CN116152075A (zh) 光照估计方法、装置以及系统
CN106200915A (zh) 一种增强现实中目标对象的识别方法、装置及移动终端
CN114827445B (zh) 图像处理方法及相关装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant