CN109285130B - 一种景物复现方法、装置、存储介质及终端 - Google Patents

一种景物复现方法、装置、存储介质及终端 Download PDF

Info

Publication number
CN109285130B
CN109285130B CN201811052125.3A CN201811052125A CN109285130B CN 109285130 B CN109285130 B CN 109285130B CN 201811052125 A CN201811052125 A CN 201811052125A CN 109285130 B CN109285130 B CN 109285130B
Authority
CN
China
Prior art keywords
image
scene
area
region
identifying
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811052125.3A
Other languages
English (en)
Other versions
CN109285130A (zh
Inventor
廖湖锋
董明珠
谭建明
王慧君
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201811052125.3A priority Critical patent/CN109285130B/zh
Publication of CN109285130A publication Critical patent/CN109285130A/zh
Application granted granted Critical
Publication of CN109285130B publication Critical patent/CN109285130B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/06Ray-tracing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供一种景物复现方法、装置、存储介质及终端,所述方法包括:在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像;获取包含当前景物的第二图像和第三图像,所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下拍摄的相同景物的图像;将第一图像与第二图像进行对比,确定第一图像中的当前景物在第二图像中对应的第一景物区域;在第三图像中确定与第一景物区域对应的第二景物区域,并显示确定的第二景物区域的图像。本发明方案在光线较差时通过夜视摄像设备拍摄景物,即可显示在光线较好时对应的图像,实现了虚拟复现有光环境下的景物,能够使得无光情况下的景物像有光情况下一样可视。

Description

一种景物复现方法、装置、存储介质及终端
技术领域
本发明涉及图像处理领域,尤其涉及一种景物复现方法、装置、存储介质及终端。
背景技术
在无光或光线特别差的情况下,人眼视觉存在局限性,例如在黑暗环境中,会看不清眼前的物体。当下增强现实技术(Augmented Reality,简称AR)日趋成熟,且可模拟实际场景,例如,现有的增强现实的一种方法是在穿戴设备上通过实时捕捉图像并通过算法来增强亮度,在光线较暗的情况下来补光生成增强图像,并与外界直接影像叠加显示。然而,这种方式的显示效果会受到补光程度的限制,因此,需要提出一种运用AR技术可以在黑夜中通过AR设备把白天场景复现出来的技术方案。
发明内容
本发明的主要目的在于克服上述现有技术的缺陷,提供一种景物复现方法、装置、存储介质及终端,以解决现有技术中无光或光线特别差的情况下人眼视觉的局限性的问题。
本发明一方面提供了一种景物复现方法,包括:在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像;获取包含所述当前景物的第二图像和第三图像,所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下,拍摄的相同景物的图像,其中,所述第二图像通过所述夜视摄像设备拍摄,所述第三图像通过不具有夜视功能的摄像设备拍摄;将所述第一图像与所述第二图像进行对比,确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域;在所述第三图像中确定与所述第一景物区域对应的第二景物区域,并显示确定的所述第二景物区域的图像。
可选地,所述第二图像和/或所述第三图像为拍摄后通过图像处理转换成的立体图像;和/或,所述夜视摄像设备,包括:红外夜视摄像设备。
可选地,还包括:所述第二图像与所述第三图像中的像素点一一对应。
可选地,所述第一预设光线条件,包括:环境光强度低于第一预设阈值;和/或,所述第二预设光线条件,包括:环境光强度高于第二预设阈值;其中,所述第一预设阈值小于等于所述第二预设阈值。
可选地,获取包含所述当前景物的第二图像和第三图像,包括:通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
可选地,还包括:识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;在所述第三图像中确定所述第一区域对应的第二区域;在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
可选地,将所述第二区域在所述第二景物区域的图像中标识出来,包括:将所述第二区域的轮廓标识出来;和/或,对所述第二区域进行预设处理以区别出所述第二区域。
本发明另一方面提供了一种景物复现装置,包括:拍摄单元,用于在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像;第一获取单元,用于获取包含所述当前景物的第二图像和第三图像,所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下,拍摄的相同景物的图像,其中,所述第二图像通过所述夜视摄像设备拍摄,所述第三图像通过不具有夜视功能的摄像设备拍摄;对比单元,用于将所述第一图像与所述第二图像进行对比,确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域;第一确定单元,用于在所述第三图像中确定与所述第一景物区域对应的第二景物区域;以及,显示单元,用于显示所述确定单元确定的所述第二景物区域的图像。
可选地,所述第二图像和/或所述第三图像为拍摄后通过图像处理转换成的立体图像;和/或,所述夜视摄像设备,包括:红外夜视摄像设备。
可选地,所述第二图像与所述第三图像中的像素点一一对应。
可选地,所述第一预设光线条件,包括:环境光强度低于第一预设阈值;和/或,所述第二预设光线条件,包括:环境光强度高于第二预设阈值;其中,所述第一预设阈值小于等于所述第二预设阈值。
可选地,所述获取单元,获取包含所述当前景物的第二图像和第三图像,包括:通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
可选地,还包括:识别单元,用于识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;第二获取单元,用于若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;第二确定单元,用于在所述第三图像中确定所述第一区域对应的第二区域;所述显示单元,进一步用于:在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
可选地,所述显示单元,将所述第二区域在所述第二景物区域的图像中标识出来,包括:将所述第二区域的轮廓标识出来;和/或,对所述第二区域进行预设处理以区别出所述第二区域。
本发明又一方面提供了一种存储介质,其上存储有计算机程序,所述程序被处理器执行时实现前述任一所述方法的步骤。
本发明再一方面提供了一种终端,包括处理器、存储器以及存储在存储器上可在处理器上运行的计算机程序,所述处理器执行所述程序时实现前述任一所述方法的步骤。
本发明再一方面提供了一种终端,包括前述任一所述的景物复现装置。
根据本发明的技术方案,能够在光线条件较差的情况下(例如黑夜),通过夜视摄像设备拍摄当前景物之后,即可显示当前景物在光线较好的情况下(例如白天)对应的图像,实现了虚拟复原有光环境下的当前景物,能够使得在无光情况下的景物也可以像有光情况下一样可视。并且可以区分出景物中发生过变化的局部区域,例如同一物体的位置发生的变化等。本发明解决了无光或光线特别差的情况下人眼视觉的局限性的问题,通过获取在有光情况下通过夜视摄像设备拍摄的景物图像和通过不具有夜视功能的普通摄像设备拍摄景物图像,能够在人眼无法识别的情况下采用增强现实的方式将景物在有光时的图像展示给用户,使黑夜如同白昼,突破生物限制,大大方便了用户的生活。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明提供的图像显示方法的一实施例的方法示意图;
图2是本发明提供的图像显示方法的另一实施例的方法示意图;
图3是本发明提供的景物复现装置的一实施例的结构示意图;
图4是本发明提供的景物复现装置的另一实施例的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
图1是本发明提供的图像显示方法的一实施例的方法示意图。所述方法可以通过终端实施,例如移动终端,包括手机、平板电脑等;或者可以通过可穿戴设备实施,例如AR眼镜。
如图1所示,根据本发明的一个实施例,所述图像显示方法至少包括步骤S110、步骤S120、步骤S130和步骤S140。
步骤S110,在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像。
所述第一预设光线条件具体可以为环境光强度低于第一预设阈值,例如,所述第一预设光线条件可以为夜晚的环境光强度或者在无光或光线较差时的环境光强度。此时,通过夜视摄像设备拍摄当前景物的第一图像。所述当前景物具体为当前出现在所述夜视摄像设备的拍摄景物范围内的景物,即,当前在所述夜视摄像设备的显示屏中出现的景物。所述夜视摄像设备具体可以红外夜视摄像设备,例如红外夜视摄像头。红外夜视摄像设备能够在无可见光或者微光的黑暗环境下,采用红外发射装置主动将红外光投射到物体上,红外光经物体反射后进入镜头进行成像。这时我们所看到的是由红外光反射所成的画面,而不是可见光反射所成的画面,这时便可拍摄到黑暗环境下肉眼看不到的画面。
步骤S120,获取包含所述当前景物的第二图像和第三图像。
具体而言,可以通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下拍摄的相同景物的图像,其中,所述第二图像通过所述夜视摄像设备拍摄,所述第三图像通过不具有夜视功能的摄像设备拍摄,也就是说,通过普通的摄像设备拍摄。所述第二预设光线条件具体可以为环境光强度高于第二预设阈值,例如,所述第二预设光线条件可以为白天的环境光强度或者在光线较强时的环境光强度。其中,所述第一预设阈值小于等于所述第二预设阈值。
在拍摄环境满足第二预设光线条件的情况下,可以对同一景物同时通过所述夜视摄像设备和不具有夜视功能的摄像设备进行拍摄得到所述第二图像和所述第三图像。也就是说,所述夜视摄像设备和所述不具有夜视功能的摄像设备拍摄的景物是完全相同的。优选地,所述第二图像和/或所述第三图像为拍摄后通过图像处理转换成的立体图像,例如,在通过所述夜视摄像设备和/或不具有夜视功能的摄像设备对同一景物进行拍摄后,通过图像拼接算法转化成立体图像。优选地,为节省内存空间,加快图像处理速度,可以将拍摄后的图像上传至云端通过图像拼接算法转换成立体图像,以得到所述第二图像和/或所述第三图像。
优选地,所述第二图像与所述第三图像中的像素点一一对应。由于通过夜视摄像设备拍摄的第二图像与通过不具有夜视功能的普通摄像设备拍摄第三图像的景物完全相同,可以将所述第二图像与所述第三图像中的像素点进行一一对应,从而能够实现在定位到了第二图像中的某个区域时,能够相应得到在第三图像中的相应区域。
步骤S130,将所述第一图像与所述第二图像进行对比,确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域。
例如,可以通过图像匹配算法将所述第一图像与所述第二图像进行对比,以确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域。
步骤S140,在所述第三图像中确定与所述第一景物区域对应的第二景物区域,并显示确定的所述第二景物区域的图像。
所述第二图像和所述第三图像是对同一景物分别通过所述夜视摄像设备和不具有夜视功能的摄像设备进行拍摄得到图像,因此,可以在所述第三图像中确定与所述第一景物区域对应的第二景物区域。具体而言,在上述步骤S130的一个具体实施方式中,所述第二图像与所述第三图像中的像素点一一对应,从而能够实现在定位到了第二图像中的某个区域时,能够相应得到在第三图像中的相应区域,因此,在所述第二图像中确定所述当前景物对应的第一景物区域之后,可以根据该第一景物区域在所述第二图像中对应像素点,确定所述第一景物区域在所述第三图像中对应的像素点,进而确定所述第一景物区域在所述第三图像中对应的第二景物区域。在所述第三图像中确定与所述第一景物区域对应的第二景物区域之后,则可以显示所述第二景物区域的图像。例如,在当前为无光或者光线特别差的情况下,利用夜视摄像设备拍摄当前景物之后(得到第一图像),即可显示当前景物在白天的图像(第二景物区域的图像)。
根据本发明上述实施例,在光线条件较差的情况下(例如黑夜),通过夜视摄像设备拍摄当前景物之后,即可显示当前景物在光线较好的情况下(例如白天)对应的图像,实现了虚拟复原有光环境下的当前景物,能够使得在无光情况下的景物也可以像有光情况下一样可视。通过获取在有光情况下通过夜视摄像设备拍摄的景物图像和通过不具有夜视功能的普通摄像设备拍摄景物图像,能够在人眼无法识别的情况下采用增强现实的方式将景物在有光时的图像展示给用户,使黑夜如同白昼,突破生物限制,大大方便了用户的生活。
图2是本发明提供的图像显示方法的另一实施例的方法示意图。
如图2所示,根据本发明的一个实施例,所述图像显示方法包括步骤S110、步骤S120、步骤S130和步骤S140,还包括步骤S150、步骤S160、步骤S170和步骤S180。
步骤S150,识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处。
步骤S160,若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域。
步骤S170,在所述第三图像中确定所述第一区域对应的第二区域。
步骤S180,在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
具体而言,可以通过图像匹配算法识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处,即,实时拍摄的当前景物的红外图像(第一图像)与预存的包含所述当前景物的红外图像(第二图像)是否存在局部不同,若存在局部不同,则获取不同之处在白天拍摄的红外图像中对应的区域(第一区域),并在白天拍摄的普通图像(不具有夜视功能的摄像设备拍摄的第三图像)中确定对应的区域(第二区域),在显示当前景物在白天的图像(第二景物区域的图像)时,将该区域标识出来。例如,在实时的拍摄中,可能存在部分物品被移动过,与预存的第二图像中的位置不同,则可以通过图像匹配的算法,把实时拍摄的红外图像(第一图像)与预存的红外图像(第二图像)进行匹配,确定其中不匹配的内容,例如,当匹配率达到一定程度,且匹配的部分是连贯的,就可以认定其中不匹配的部分就是预存的红外图像(第二图像)中的物品位置发生了变化。
其中,将所述第二区域在所述第二景物区域的图像中标识出来具体可以将所述第二区域的轮廓标识出来,例如用线条标示出位置发生了变化的物品的轮廓,例如,当所述不同之处为物品位置不同时,具体将所述物品原来对应的图像区域轮廓和/或所述物品当前对应的图像区域的轮廓标识出来;和/或,对所述第二区域进行预设处理以区别出所述第二区域。所述预设处理例如可以包括灰度化处理,例如在将所述第二区域的轮廓标识出来的同时将轮廓内的内容进行灰度化处理,以示区别。
本发明还提供一种景物像复现装置。所述装置可以通过终端实施,例如移动终端,包括手机、平板电脑等;或者可以通过可穿戴设备实施,例如AR眼镜。
图3是本发明提供的景物复现装置的一实施例的结构示意图。如图3所示,所述景物复现装置100包括:拍摄单元110、第一获取单元120、对比单元130、第一确定单元140和显示单元150。
拍摄单元110用于在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像;第一获取单元120用于获取包含所述当前景物的第二图像和第三图像,所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下,拍摄的相同景物的图像,其中,所述第二图像通过所述夜视摄像设备拍摄,所述第三图像通过不具有夜视功能的摄像设备拍摄;对比单元130用于将所述第一图像与所述第二图像进行对比,确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域;第一确定单元140用于在所述第三图像中确定与所述第一景物区域对应的第二景物区域;以及,显示单元150用于显示所述确定单元确定的所述第二景物区域的图像。
拍摄单元110在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像。所述第一预设光线条件具体可以为环境光强度低于第一预设阈值,例如,所述第一预设光线条件可以为夜晚的环境光强度或者在无光或光线较差时的环境光强度。此时,通过夜视摄像设备拍摄当前景物的第一图像。所述当前景物具体为当前出现在所述夜视摄像设备的拍摄景物范围内的景物,即,当前在所述夜视摄像设备的显示屏中出现的景物。所述夜视摄像设备具体可以红外夜视摄像设备,例如红外夜视摄像头。红外夜视摄像设备能够在无可见光或者微光的黑暗环境下,采用红外发射装置主动将红外光投射到物体上,红外光经物体反射后进入镜头进行成像。这时我们所看到的是由红外光反射所成的画面,而不是可见光反射所成的画面,这时便可拍摄到黑暗环境下肉眼看不到的画面。
第一获取单元120获取包含所述当前景物的第二图像和第三图像。具体而言,第一获取单元120可以通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下拍摄的相同景物的图像,其中,所述第二图像通过所述夜视摄像设备拍摄,所述第三图像通过不具有夜视功能的摄像设备拍摄,也就是说,通过普通的摄像设备拍摄。所述第二预设光线条件具体可以为环境光强度高于第二预设阈值,例如,所述第二预设光线条件可以为白天的环境光强度或者在光线较强时的环境光强度。其中,所述第一预设阈值小于等于所述第二预设阈值。
在拍摄环境满足第二预设光线条件的情况下,可以对同一景物同时通过所述夜视摄像设备和不具有夜视功能的摄像设备进行拍摄得到所述第二图像和所述第三图像。也就是说,所述夜视摄像设备和所述不具有夜视功能的摄像设备拍摄的景物是完全相同的。优选地,所述第二图像和/或所述第三图像为拍摄后通过图像处理转换成的立体图像,例如,在通过所述夜视摄像设备和/或不具有夜视功能的摄像设备对同一景物进行拍摄后,通过图像拼接算法转化成立体图像。优选地,为节省内存空间,加快图像处理速度,可以将拍摄后的图像上传至云端通过图像拼接算法转换成立体图像,以得到所述第二图像和/或所述第三图像。
优选地,所述第二图像与所述第三图像中的像素点一一对应。由于通过夜视摄像设备拍摄的第二图像与通过不具有夜视功能的普通摄像设备拍摄第三图像的景物完全相同,可以将所述第二图像与所述第三图像中的像素点进行一一对应,从而能够实现在定位到了第二图像中的某个区域时,能够相应得到在第三图像中的相应区域。
对比单元130将所述第一图像与所述第二图像进行对比,确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域。例如,可以通过图像匹配算法将所述第一图像与所述第二图像进行对比,以确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域。
第一确定单元140在所述第三图像中确定与所述第一景物区域对应的第二景物区域,并显示确定的所述第二景物区域的图像。所述第二图像和所述第三图像是对同一景物分别通过所述夜视摄像设备和不具有夜视功能的摄像设备进行拍摄得到图像,因此,可以在所述第三图像中确定与所述第一景物区域对应的第二景物区域。具体而言,在一个具体实施方式中,所述第二图像与所述第三图像中的像素点一一对应,从而能够实现在定位到了第二图像中的某个区域时,能够相应得到在第三图像中的相应区域,因此,在对比单元130通过将所述第一图像与所述第二图像进行对比,在所述第二图像中确定所述当前景物对应的第一景物区域之后,第一确定单元140可以根据该第一景物区域在所述第二图像中对应像素点,确定所述第一景物区域在所述第三图像中对应的像素点,进而确定所述第一景物区域在所述第三图像中对应的第二景物区域。在所述第三图像中确定与所述第一景物区域对应的第二景物区域之后,则显示单元150可以显示所述第二景物区域的图像。例如,在当前为无光或者光线特别差的情况下,利用夜视摄像设备拍摄当前景物之后(得到第一图像),即可显示当前景物在白天的图像(第二景物区域的图像)。
根据本发明上述实施例,在光线条件较差的情况下(例如黑夜),通过夜视摄像设备拍摄当前景物之后,即可显示当前景物在光线较好的情况下(例如白天)对应的图像,实现了虚拟复原有光环境下的当前景物,能够使得在无光情况下的景物也可以像有光情况下一样可视。
图4是本发明提供的景物复现装置的另一实施例的结构示意图。如图4所示,所述景物复现装置100包括:拍摄单元110、第一获取单元120、对比单元130、第一确定单元140和显示单元150,还包括识别单元160、第二获取单元170和第二确定单元180。
识别单元160用于识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;第二获取单元170用于若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;第二确定单元180用于在所述第三图像中确定所述第一区域对应的第二区域;所述显示单元190进一步用于:在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
具体而言,识别单元160可以通过图像匹配算法识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处,即,实时拍摄的当前景物的红外图像(第一图像)与预存的包含所述当前景物的红外图像(第二图像)是否存在局部不同,若存在局部不同,则第二获取单元170获取不同之处在白天拍摄的红外图像中对应的区域(第一区域),第二确定单元180在白天拍摄的普通图像(不具有夜视功能的摄像设备拍摄的第三图像)中确定对应的区域(第二区域),显示单元150在显示当前景物在白天的图像(第二景物区域的图像)时,将该区域标识出来。例如,在实时的拍摄中,可能存在部分物品被移动过,与预存的第二图像中的位置不同,则可以通过图像匹配的算法,把实时拍摄的红外图像(第一图像)与预存的红外图像(第二图像)进行匹配,确定其中不匹配的内容,例如,当匹配率达到一定程度,且匹配的部分是连贯的,就可以认定其中不匹配的部分就是预存的红外图像(第二图像)中的物品位置发生了变化。
其中,将所述第二区域在所述第二景物区域的图像中标识出来具体可以将所述第二区域的轮廓标识出来,例如用线条标示出位置发生了变化的物品的轮廓,例如,当所述不同之处为物品位置不同时,具体将所述物品原来对应的图像区域轮廓和/或所述物品当前对应的图像区域的轮廓标识出来;和/或,对所述第二区域进行预设处理以区别出所述第二区域。所述预设处理例如可以包括灰度化处理,例如在将所述第二区域的轮廓标识出来的同时将轮廓内的内容进行灰度化处理,以示区别。
本发明还提供对应于所述景物复现方法的一种存储介质,其上存储有计算机程序,所述程序被处理器执行时实现前述任一所述方法的步骤。
本发明还提供对应于所述景物复现方法的一种终端,包括处理器、存储器以及存储在存储器上可在处理器上运行的计算机程序,所述处理器执行所述程序时实现前述任一所述方法的步骤。
本发明还提供对应于所述景物复现装置的一种终端,包括前述任一所述的景物复现装置。
据此,本发明提供的方案,能够在光线条件较差的情况下(例如黑夜),通过夜视摄像设备拍摄当前景物之后,即可显示当前景物在光线较好的情况下(例如白天)对应的图像,实现了虚拟复原有光环境下的当前景物,能够使得在无光情况下的景物也可以像有光情况下一样可视。并且可以区分出景物中发生过变化的局部区域,例如同一物体的位置发生的变化等。本发明解决了无光或光线特别差的情况下人眼视觉的局限性的问题,通过获取在有光情况下通过夜视摄像设备拍摄的景物图像和通过不具有夜视功能的普通摄像设备拍摄景物图像,能够在人眼无法识别的情况下采用增强现实的方式将景物在有光时的图像展示给用户,使黑夜如同白昼,突破生物限制,大大方便了用户的生活。
本文中所描述的功能可在硬件、由处理器执行的软件、固件或其任何组合中实施。如果在由处理器执行的软件中实施,那么可将功能作为一或多个指令或代码存储于计算机可读媒体上或经由计算机可读媒体予以传输。其它实例及实施方案在本发明及所附权利要求书的范围及精神内。举例来说,归因于软件的性质,上文所描述的功能可使用由处理器、硬件、固件、硬连线或这些中的任何者的组合执行的软件实施。此外,各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为控制装置的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的权利要求范围之内。

Claims (31)

1.一种景物复现方法,其特征在于,包括:
在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像;
获取包含所述当前景物的第二图像和第三图像,所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下,拍摄的相同景物的图像,其中,所述第二图像通过所述夜视摄像设备拍摄,所述第三图像通过不具有夜视功能的摄像设备拍摄;
将所述第一图像与所述第二图像进行对比,确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域;
在所述第三图像中确定与所述第一景物区域对应的第二景物区域,并显示确定的所述第二景物区域的图像。
2.根据权利要求1所述的方法,其特征在于,
所述第二图像和/或所述第三图像为拍摄后通过图像处理转换成的立体图像;
和/或,
所述夜视摄像设备,包括:红外夜视摄像设备。
3.根据权利要求1或2所述的方法,其特征在于,还包括:所述第二图像与所述第三图像中的像素点一一对应。
4.根据权利要求1或2所述的方法,其特征在于,
所述第一预设光线条件,包括:环境光强度低于第一预设阈值;
和/或,
所述第二预设光线条件,包括:环境光强度高于第二预设阈值;
其中,所述第一预设阈值小于等于所述第二预设阈值。
5.根据权利要求3所述的方法,其特征在于,
所述第一预设光线条件,包括:环境光强度低于第一预设阈值;
和/或,
所述第二预设光线条件,包括:环境光强度高于第二预设阈值;
其中,所述第一预设阈值小于等于所述第二预设阈值。
6.根据权利要求1、2、5任一项所述的方法,其特征在于,获取包含所述当前景物的第二图像和第三图像,包括:
通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
7.根据权利要求3所述的方法,其特征在于,获取包含所述当前景物的第二图像和第三图像,包括:
通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
8.根据权利要求4所述的方法,其特征在于,获取包含所述当前景物的第二图像和第三图像,包括:
通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
9.根据权利要求1-2、5、7-8任一项所述的方法,其特征在于,还包括:
识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
在所述第三图像中确定所述第一区域对应的第二区域;
在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
10.根据权利要求3所述的方法,其特征在于,还包括:
识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
在所述第三图像中确定所述第一区域对应的第二区域;
在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
11.根据权利要求4所述的方法,其特征在于,还包括:
识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
在所述第三图像中确定所述第一区域对应的第二区域;
在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
12.根据权利要求6所述的方法,其特征在于,还包括:
识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
在所述第三图像中确定所述第一区域对应的第二区域;
在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
13.根据权利要求9所述的方法,其特征在于,将所述第二区域在所述第二景物区域的图像中标识出来,包括:
将所述第二区域的轮廓标识出来;和/或,
对所述第二区域进行预设处理以区别出所述第二区域。
14.根据权利要求10-12任一项所述的方法,其特征在于,将所述第二区域在所述第二景物区域的图像中标识出来,包括:
将所述第二区域的轮廓标识出来;和/或,
对所述第二区域进行预设处理以区别出所述第二区域。
15.一种景物复现装置,其特征在于,包括:
拍摄单元,用于在拍摄环境满足第一预设光线条件的情况下,通过夜视摄像设备拍摄当前景物的第一图像;
第一获取单元,用于获取包含所述当前景物的第二图像和第三图像,所述第二图像和所述第三图像是在拍摄环境满足第二预设光线条件的情况下,拍摄的相同景物的图像,其中,所述第二图像通过所述夜视摄像设备拍摄,所述第三图像通过不具有夜视功能的摄像设备拍摄;
对比单元,用于将所述第一图像与所述第二图像进行对比,确定所述第一图像中的所述当前景物在所述第二图像中对应的第一景物区域;
第一确定单元,用于在所述第三图像中确定与所述第一景物区域对应的第二景物区域;以及,
显示单元,用于显示所述确定单元确定的所述第二景物区域的图像。
16.根据权利要求15所述的装置,其特征在于,
所述第二图像和/或所述第三图像为拍摄后通过图像处理转换成的立体图像;
和/或,
所述夜视摄像设备,包括:红外夜视摄像设备。
17.根据权利要求15或16所述的装置,其特征在于,所述第二图像与所述第三图像中的像素点一一对应。
18.根据权利要求15或16所述的装置,其特征在于,
所述第一预设光线条件,包括:环境光强度低于第一预设阈值;
和/或,
所述第二预设光线条件,包括:环境光强度高于第二预设阈值;
其中,所述第一预设阈值小于等于所述第二预设阈值。
19.根据权利要求17所述的装置,其特征在于,
所述第一预设光线条件,包括:环境光强度低于第一预设阈值;
和/或,
所述第二预设光线条件,包括:环境光强度高于第二预设阈值;
其中,所述第一预设阈值小于等于所述第二预设阈值。
20.根据权利要求15、16、19任一项所述的装置,其特征在于,所述获取单元,获取包含所述当前景物的第二图像和第三图像,包括:
通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
21.根据权利要求17所述的装置,其特征在于,所述获取单元,获取包含所述当前景物的第二图像和第三图像,包括:
通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
22.根据权利要求18所述的装置,其特征在于,所述获取单元,获取包含所述当前景物的第二图像和第三图像,包括:
通过图像匹配算法在预存的图像数据库中匹配出包含当前景物的第二图像,并根据所述第二图像获取与所述第二图像对应的第三图像。
23.根据权利要求15-16、19、21-22任一项所述的装置,其特征在于,还包括:
识别单元,用于识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
第二获取单元,用于若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
第二确定单元,用于在所述第三图像中确定所述第一区域对应的第二区域;
所述显示单元,进一步用于:在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
24.根据权利要求17所述的装置,其特征在于,还包括:
识别单元,用于识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
第二获取单元,用于若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
第二确定单元,用于在所述第三图像中确定所述第一区域对应的第二区域;
所述显示单元,进一步用于:在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
25.根据权利要求18所述的装置,其特征在于,还包括:
识别单元,用于识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
第二获取单元,用于若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
第二确定单元,用于在所述第三图像中确定所述第一区域对应的第二区域;
所述显示单元,进一步用于:在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
26.根据权利要求20所述的装置,其特征在于,还包括:
识别单元,用于识别所述第一图像中的所述当前景物与所述第二图像中的所述当前景物是否存在不同之处;
第二获取单元,用于若识别出存在不同之处,则获取所述第二图像中的所述不同之处对应的第一区域;
第二确定单元,用于在所述第三图像中确定所述第一区域对应的第二区域;
所述显示单元,进一步用于:在显示所述第二景物区域的图像时,将所述第二区域在所述第二景物区域的图像中标识出来。
27.根据权利要求23所述的装置,其特征在于,所述显示单元,将所述第二区域在所述第二景物区域的图像中标识出来,包括:
将所述第二区域的轮廓标识出来;和/或,
对所述第二区域进行预设处理以区别出所述第二区域。
28.根据权利要求24-26任一项所述的装置,其特征在于,所述显示单元,将所述第二区域在所述第二景物区域的图像中标识出来,包括:
将所述第二区域的轮廓标识出来;和/或,
对所述第二区域进行预设处理以区别出所述第二区域。
29.一种存储介质,其特征在于,其上存储有计算机程序,所述程序被处理器执行时实现权利要求1-14任一所述方法的步骤。
30.一种终端,其特征在于,包括处理器、存储器以及存储在存储器上可在处理器上运行的计算机程序,所述处理器执行所述程序时实现权利要求1-14任一所述方法的步骤。
31.一种终端,其特征在于,包括如权利要求15-28任一所述的景物复现装置。
CN201811052125.3A 2018-09-10 2018-09-10 一种景物复现方法、装置、存储介质及终端 Active CN109285130B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811052125.3A CN109285130B (zh) 2018-09-10 2018-09-10 一种景物复现方法、装置、存储介质及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811052125.3A CN109285130B (zh) 2018-09-10 2018-09-10 一种景物复现方法、装置、存储介质及终端

Publications (2)

Publication Number Publication Date
CN109285130A CN109285130A (zh) 2019-01-29
CN109285130B true CN109285130B (zh) 2020-09-22

Family

ID=65180591

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811052125.3A Active CN109285130B (zh) 2018-09-10 2018-09-10 一种景物复现方法、装置、存储介质及终端

Country Status (1)

Country Link
CN (1) CN109285130B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104715479A (zh) * 2015-03-06 2015-06-17 上海交通大学 基于增强虚拟的场景复现检测方法
CN105263008A (zh) * 2014-06-19 2016-01-20 深圳中兴力维技术有限公司 低环境照度下的彩色图像质量提升方法及其装置
CN106383587A (zh) * 2016-10-26 2017-02-08 腾讯科技(深圳)有限公司 一种增强现实场景生成方法、装置及设备
CN108388637A (zh) * 2018-02-26 2018-08-10 腾讯科技(深圳)有限公司 一种用于提供增强现实服务的方法、装置以及相关设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009237878A (ja) * 2008-03-27 2009-10-15 Dainippon Printing Co Ltd 複合映像生成システム、重畳態様決定方法、映像処理装置及び映像処理プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105263008A (zh) * 2014-06-19 2016-01-20 深圳中兴力维技术有限公司 低环境照度下的彩色图像质量提升方法及其装置
CN104715479A (zh) * 2015-03-06 2015-06-17 上海交通大学 基于增强虚拟的场景复现检测方法
CN106383587A (zh) * 2016-10-26 2017-02-08 腾讯科技(深圳)有限公司 一种增强现实场景生成方法、装置及设备
CN108388637A (zh) * 2018-02-26 2018-08-10 腾讯科技(深圳)有限公司 一种用于提供增强现实服务的方法、装置以及相关设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于纹理传递的夜视图像处理;许真;《中国优秀硕士学位论文全文数据库信息科技辑》;20110715;第I138-627页 *

Also Published As

Publication number Publication date
CN109285130A (zh) 2019-01-29

Similar Documents

Publication Publication Date Title
CN106851124B (zh) 基于景深的图像处理方法、处理装置和电子装置
CN112165573B (zh) 拍摄处理方法和装置、设备、存储介质
JP6553624B2 (ja) 計測機器、及びシステム
US10212408B1 (en) Depth-map augmentation techniques
US20150156475A1 (en) Method and Device for Implementing Stereo Imaging
CN110533709B (zh) 深度图像获取方法、装置及系统、图像采集设备
CN108881730A (zh) 图像融合方法、装置、电子设备及计算机可读存储介质
CN112802081B (zh) 一种深度检测方法、装置、电子设备及存储介质
WO2021068795A1 (zh) 图像显示方法、图像识别方法、装置、介质、设备及系统
CN105791793A (zh) 图像处理方法及其电子装置
CN108093170B (zh) 用户拍照方法、装置及设备
CN113053324A (zh) 背光控制方法、装置、设备、系统及存储介质
CN107454335B (zh) 图像处理方法、装置、计算机可读存储介质和移动终端
KR102152072B1 (ko) 실영상카메라와 열영상카메라를 일체형으로 한 객체 감지 시스템
US10237530B1 (en) Depth-map augmentation techniques
CN107464225B (zh) 图像处理方法、装置、计算机可读存储介质和移动终端
JP6937603B2 (ja) 画像処理装置およびその制御方法、プログラム、並びに記憶媒体
CN109285130B (zh) 一种景物复现方法、装置、存储介质及终端
CN116055894B (zh) 基于神经网络的图像去频闪方法和装置
CN112309317A (zh) 屏幕色差补偿方法、装置、系统、电子设备及存储介质
CN109842791B (zh) 一种图像处理方法及装置
US11562496B2 (en) Depth image processing method, depth image processing apparatus and electronic device
KR101488647B1 (ko) 모바일 단말의 가상 조명 동작방법 및 장치
CN114529468A (zh) 夜视图像增强方法及相关装置
CN113240602A (zh) 图像去雾方法及装置、计算机可读介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant