CN109862286B - 图像显示方法、装置、设备和计算机存储介质 - Google Patents
图像显示方法、装置、设备和计算机存储介质 Download PDFInfo
- Publication number
- CN109862286B CN109862286B CN201910245987.6A CN201910245987A CN109862286B CN 109862286 B CN109862286 B CN 109862286B CN 201910245987 A CN201910245987 A CN 201910245987A CN 109862286 B CN109862286 B CN 109862286B
- Authority
- CN
- China
- Prior art keywords
- image
- terminal
- display mode
- mixed reality
- live
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明涉及图像处理领域,本发明公开了一种图像显示方法,包括以下步骤:通过终端中预设摄像装置拍摄实景图像;在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像;根据所述模拟图像处理所述实景图像,得到混合现实图像,将所述模拟图像和所述混合现实图像进行分屏显示。本发明还公开了一种图像显示装置、设备和计算机存储介质。本发明可以将混合现实应用到图像拍摄中,实现不同来源图像智能显示。
Description
技术领域
本发明涉及图像处理领域,尤其涉及图像显示方法、装置、设备和计算机存储介质。
背景技术
混合现实(Mix reality,简称MR)包括增强现实和增强虚拟,指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。
目前MR技术已经逐渐进入人们的生活中,在商业、军事、工业、医疗、历史文化、自媒行业和娱乐等领域均有不同程度的应用。随着MR技术的不断发展,MR技术被引入越来越广泛的领域。如何将混合现实应用到图像拍摄中,实现不同来源图像智能显示是现阶段亟待解决的技术问题。
发明内容
本发明的主要目的在于提供一种图像显示方法、装置、设备和计算机存储介质,旨在解决当前不能将混合现实应用到图像拍摄中,实现不同来源图像智能显示的技术问题。
为实现上述目的,本发明提供图像显示方法,所述图像显示方法包括以下步骤:
通过终端中预设摄像装置拍摄实景图像;
在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像;
根据所述模拟图像处理所述实景图像,得到混合现实图像;
将所述模拟图像和所述混合现实图像进行分屏显示。
可选地,所述在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像的步骤,包括:
在当前显示模式是传屏显示模式时,建立与预设终端之间的通信连接;
在与预设终端之间的通信连接建立完成时,向预设终端发送传屏指令,并接收所述预设终端基于所述传屏指令反馈的模拟图像。
可选地,所述根据所述模拟图像处理所述实景图像,得到混合现实图像的步骤,包括:
提取所述模拟图像的特征信息,根据所述特征信息确定所述模拟图像对应的模拟场景;
提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中目标对象;
将所述目标对象添加到所述模拟场景中,得到混合现实图像。
可选地,所述将所述模拟图像和所述混合现实图像进行分屏显示的步骤,包括:
在检测到混合现实图像生成完成时,根据所述模拟图像的属性,将所述终端的显示界面划分为第一显示区域和第二显示区域;
将所述模拟图像和所述混合现实图像进行自适应调整,并显示在所述第一显示区域和所述第二显示区域。
可选地,所述将所述模拟图像和所述混合现实图像进行分屏显示的步骤之后,包括:
在接收到图像比对请求时,分别提取所述模拟图像和所述混合现实图像的特征信息,得到模拟特征向量和实景特征向量;;
计算所述模拟特征向量和所述实景特征向量的余弦相似度,根据所述余弦相似度值和预设相似度阈值得到比对结果。
可选地,所述通过终端中预设摄像装置拍摄实景图像的步骤之后,包括:
在当前显示模式不是传屏显示模式时,判断当前显示模式是否为分屏显示模式;
在当前显示模式是分屏显示模式时,获取所述终端的当前显示图像,及所述当前显示图像的特征信息,并根据所述特征信息确定所述当前显示图像对应的模拟场景;
提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中目标对象;
将所述目标对象添加到所述模拟场景中,得到混合现实图像,将所述当前显示图像和所述混合现实图像分屏显示。
可选地,所述在当前显示模式不是传屏显示模式时,判断当前显示模式是否为分屏显示模式的步骤之后,包括:
在当前显示模式不是分屏显示模式时,根据所述预设摄像装置的拍摄模式选取模拟场景;
将所述实景图像中的目标对象添加到所述模拟场景,形成混合现实图像并输出。
此外,为实现上述目的,本发明还提供一种图像显示装置;
所述图像显示装置包括:
实景采集模块,用于通过终端中预设摄像装置拍摄实景图像;
传屏接收模块,用于在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像;
图像处理模块,用于根据所述模拟图像处理所述实景图像,得到混合现实图像;
图像输出模块,用于将所述模拟图像和所述混合现实图像进行分屏显示。
此外,为实现上述目的,本发明还提供一种图像显示设备;
所述图像显示设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其中:
所述计算机程序被所述处理器执行时实现如上所述的图像显示方法的步骤。
此外,为实现上述目的,本发明还提供计算机存储介质;
所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述的图像显示方法的步骤。
本发明实施例提出的一种图像显示方法、装置、设备和计算机存储介质,终端通过终端中预设摄像装置拍摄实景图像;在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像;根据所述模拟图像处理所述实景图像,得到混合现实图像,将所述模拟图像和所述混合现实图像进行分屏显示。本实施例中在终端当前显示模式是传屏显示模式时,终端将自身实时拍摄的实景图像与预设终端发送的模拟图像进行整理,生成混合现实图像,将混合现实应用到图像拍摄中,实现了不同来源模拟图像和实景图像的快速衔接;与此同时,通过分屏显示模拟图像和混合现实图像,以使得图像显示更加智能,方便用户查看比对。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的装置结构示意图;
图2为本发明图像显示方法第一实施例的流程示意图;
图3为本发明图像显示方法第二实施例的流程示意图;
图4为本发明图像显示装置一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的终端(又叫图像显示设备,其中,图像显示设备可以是由单独的图像显示装置构成,也可以是由其他装置与图像显示装置组合形成)结构示意图。
本发明实施例终端可以固定终端,也可以是移动终端,如,带联网功能的智能电视,智能空调、智能电灯、智能电源、智能音箱、PC(personal computer)个人计算机、智能手机、平板电脑、电子书阅读器、便携计算机等。
如图1所示,该终端可以安装双屏显示应用软件,即,该终端可以进行分屏显示;该终端可以包括:处理器1001,例如,中央处理器Central Processing Unit,CPU),网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真WIreless-FIdelity,WIFI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如,磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,终端还可以包括摄像头、RF(Radio Frequency,射频)电路,传感器、音频电路、WiFi模块;网络接口可选除无线接口中除WiFi外,蓝牙、探针等等。其中,传感器比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器;当然,移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,该计算机软件产品存储在一个存储介质(存储介质:又叫计算机存储介质、计算机介质、可读介质、可读存储介质、计算机可读存储介质或者直接叫介质等,存储介质可以是非易失性可读存储介质,如RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及计算机程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的计算机程序,并执行本发明以下实施例提供的图像显示方法中的步骤。
本实施例提供一种图像显示方法,应用在如图1所示的终端中。
参照图2,在本发明图像显示方法的第一实施例中,所述图像显示方法包括:
步骤S10,通过终端中预设摄像装置拍摄实景图像。
在本实施例中,在终端接收到拍摄请求时,终端启动预设摄像装置(预设摄像装置是指具有视频摄像/传播和静态图像捕捉等基本功能的装置,预设摄像装置通过镜头采集图像后,由摄像头内的感光组件电路及控制组件对图像进行处理并转换成电脑所能识别的数字信号;预设摄像装置可为前景摄像机或全景摄像机,摄像机的摄像头可为CCD(ChargecoupledDevice,电荷耦合元件)摄像头或CMOS(ComplementaryMetalOxideSemiconductor,互补金属氧化物半导体)摄像头),通过预设摄像装置采集实景图像。
可以理解的是本实施例中终端接收到的拍摄请求可以通过不同的方式触发,即,该拍摄请求可以是用户手动触发的,例如,用户通过遥控器,或者语音触发拍摄请求;拍摄请求还可以是终端自动触发的,例如,终端在预设时间段自动触发拍摄请求。
步骤S20,在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像。
在终端拍摄得到实景图像之后,终端根据当前显示模式进行图像处理,具体地,包括:
步骤a,在当前显示模式是传屏显示模式时,建立与预设终端之间的通信连接;
步骤b,在与预设终端之间的通信连接建立完成时,向预设终端发送传屏指令,并接收所述预设终端基于所述传屏指令反馈的模拟图像。
终端确定当前显示模式是传屏显示模式(传屏显示模式是指不同终端之间同屏传输显示的模式,即,终端A在传屏显示模式下,终端A可以接收终端B发送的模拟图像,并将模拟图像和自身拍摄的实景图像进行整理后分屏显示的模式)时,终端判断是否存在与其通信连接的预设终端,其中,预设终端可以是手机或者其他设备;在终端确定存在与其通信连接的预设终端时,终端发送传屏指令至预设终端(预设终端接收终端发送的传屏指令,并基于该传屏指令发送模拟图像至终端),终端接收预设终端基于传屏指令反馈的模拟图像;在终端确定不存在与其通信连接的预设终端时,终端建立其与预设终端之间的通信连接,在终端确定其与预设终端之间的通信连接建立完成时,终端向预设终端发送传屏指令,并接收预设终端基于传屏指令反馈的模拟图像。
步骤S30,根据所述模拟图像处理所述实景图像,得到混合现实图像。
终端将预设终端发送的模拟图像与自身拍摄的实景图像进行整理,生成混合现实图像,具体地,包括:
步骤S31,提取所述模拟图像的特征信息,根据所述特征信息确定所述模拟图像对应的模拟场景。
本实施例中终端中预设用于图像场景识别的图像识别模型,图像识别模型可以通过提取图像的特征信息确定图像对应的场景,终端通过图像识别模型获取模拟图像的特征信息,其中,特征信息包括但不限于颜色特征、纹理特征、形状特征和空间关系特征;在终端得到模拟图像的特征信息之后,终端获取特征信息对应的场景信息,作为模拟图像对应的模拟场景。
步骤S32,提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中目标对象。
在本实施例中,采集到实景图像后,确定采集的实景图像中的背景区域,即,终端先通过滤波处理的方法去除实景图像的噪点干扰,然后对处理后的实景图像进行区域阈值化,确定感兴趣区域。例如,终端去除图像的上下部分像素的天空和地面场景,从而得到包含人物的感兴趣区域;终端利用预设分类器,检测感兴趣区域,得到所述感兴趣区域中目标对象,目标对象可以是人物图像,也可以是景物图像等,其中,预设分类器可以包括Adaboost迭代算法分类器、SVM(SupportVectorMachine,支持向量机等。
步骤S33,将所述目标对象添加到所述模拟场景中,得到混合现实图像。
终端将目标对象添加到模拟场景中,得到混合现实图像,本实施例中将目标对象添加到模拟场景中,使用户无论在何种场景下,均可以快速有效地获取到信息,提高了用户的场景体验。
步骤S40,将所述模拟图像和所述混合现实图像进行分屏显示。
具体地,步骤S40包括:
步骤a,在检测到混合现实图像生成完成时,根据所述模拟图像的属性,将所述终端的显示界面划分为第一显示区域和第二显示区域。
步骤b,将所述模拟图像和所述混合现实图像进行自适应调整,并显示在所述第一显示区域和所述第二显示区域。
即,在终端检测到混合现实图像生成完成时,终端获取模拟图像的属性,其中,属性包括模拟图像的分辨率,图像的显示尺寸,图像的占用空间等等,终端根据模拟图像的属性,将终端的显示界面划分为划分第一显示区域和第二显示区域;例如,模拟图像的显示尺寸为3.5cm×4.5cm,终端显示界面的尺寸为92.86cm×52.47cm,终端确定模拟图像显示尺寸与显示界面的尺寸的比例,并将显示界面划分为划分第一显示区域和第二显示区域,终端将模拟图像和混合现实图像进行自适应调整,并显示在第一显示区域和第二显示区域,其中,自适应调整包括边框裁剪和等比例缩放。
本实施例中在终端当前显示模式是传屏显示模式时,终端将自身实时拍摄的实景图像与预设终端发送的模拟图像进行整理,生成混合现实图像,将混合现实应用到图像拍摄中,实现了不同来源模拟图像和实景图像的快速衔接;与此同时,通过分屏显示模拟图像和混合现实图像,以使得图像显示更加智能,方便用户查看比对。
进一步地,参照图3,在本发明第一实施例的基础上提出了本发明图像显示方法的第二实施例。
本实施例是第一实施例步骤S40之后的步骤,本实施例将模拟图像和实景图像同屏显示之后,终端计算模拟图像和混合现实图像的相似度,本实施例中图像显示方法,包括:
步骤S50,在接收到图像比对请求时,分别提取所述模拟图像和所述混合现实图像的特征信息,得到模拟特征向量和实景特征向量。
用户基于同屏显示的模拟图像和混合现实图像触发图像比对请求,在终端接收到图像比对请求时,终端将模拟图像分割得到模拟图像对应的各个感兴趣区域,终端确定模拟图像各个感兴趣区域的区域特征,终端将模拟图像各个感兴趣区域的区域特征组合得到模拟特征向量;终端将混合现实图像分割得到混合现实图像对应的各个感兴趣区域,终端确定混合现实图像各个感兴趣区域的区域特征,终端将混合现实图像各个感兴趣区域的区域特征组合得到实景特征向量。
步骤S60,计算所述模拟特征向量和所述实景特征向量的余弦相似度,根据所述余弦相似度值和预设相似度阈值得到比对结果。
终端对模拟特征向量和实景特征向量进行归一化处理,得到模拟归一化特征向量和实景归一化特征向量,终端计算模拟归一化特征向量和实景归一化特征向量的余弦相似度,终端将计算得到的余弦相似度和预设相似度阈值进行比对,确定比对结论,其中,预设相似度阈值是指预先设置的相似度阈值,预设相似度阈值可以根据具体场景灵活设置,例如将预设相似度阈值设置为0.8;具体地,在余弦相似度大于预设相似度阈值时,终端输出模拟图像和混合现实图像相似的结论;在余弦相似度小于或者等于预设相似度阈值时,终端输出模拟图像和混合现实图像不同的结论。
在本实施例中终端将模拟图像和混合现实图像转化为特征向量,并通过特征向量的计算确定模拟图像和混合现实图像的相似度,以快速准确地输出图像比对的结论,方便用户进行查看。
进一步地,在本发明上述实施例的基础上提出了本发明图像显示方法的第三实施例。
本实施例是第一实施例步骤S10之后的步骤,本实施例在当前显示模式不是传屏显示模式时,所述图像显示方法,包括:
步骤S70,在当前显示模式不是传屏显示模式时,判断当前显示模式是否为分屏显示模式。
在终端确定当前显示模式不是传屏显示模式时,终端判断当前显示模式是否为分屏显示模式,其中,分屏显示模式是指将终端划分为不同的显示区域,分别显示终端拍摄图像和终端当前显示图像。
步骤S80,在当前显示模式是分屏显示模式时,获取所述终端的当前显示图像,及所述当前显示图像的特征信息,根据所述特征信息确定所述当前显示图像对应的模拟场景。
在终端确定当前显示模式是分屏显示模式时,终端获取当前显示图像,及当前显示图像的特征信息,其中,特征信息包括但不限于颜色特征、纹理特征、形状特征和空间关系特征。在终端得到前显示图像的特征信息之后,终端根据特征信息确定当前显示图像对应的模拟场景。
步骤S90,提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中目标对象将所述目标对象添加到所述模拟场景中,得到混合现实图像,将所述当前显示图像和所述混合现实图像分屏显示。
终端提取实景图像中的感兴趣区域,利用预设分类器检测感兴趣区域,通过预先分类器(预先分类器与本发明第一实施例相同,本实施例不作赘述)提取感兴趣区域中的目标对象(目标对象可以是人脸图像,车牌号码等),终端将目标对象添加到模拟场景中,得到混合现实图像,终端将当前显示图像和混合现实图像分屏显示。本实施例中终端将拍摄的实景图像与当前显示图像进行混合,得到混合现实图像,实现了终端当前显示图像和实景图像的快速衔接;与此同时,本实施例中通过同步显示当前显示图像和混合现实图像,以使得图像显示更加智能,方便用户查看比对。
进一步地,在本实施例中步骤S70之后还包括:
步骤S100,在当前显示模式不是分屏显示模式时,根据所述预设摄像装置的拍摄模式选取模拟场景;将所述实景图像中的目标对象添加到所述模拟场景,形成混合现实图像并输出。
在终端当前显示模式不是分屏显示模式时,终端获取预设摄像装置的拍摄模式,其中,预设摄像装置的拍摄模式可以是人物拍摄模式,或者是景物拍摄模式,终端获取拍摄模式对应的选取模拟场景;终端将实景图像中的目标对象添加到模拟场景,形成混合现实图像并输出。本实施例中终端将拍摄的实景图像与拍摄模式对应的模拟场景进行混合,得到混合现实图像,以使得图像显示更加智能。
此外,参照图4,本发明实施例还提出一种图像显示装置,所述图像显示装置包括:
实景采集模块10,用于通过终端中预设摄像装置拍摄实景图像;
传屏接收模块20,用于在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像;
图像处理模块30,用于根据所述模拟图像处理所述实景图像,得到混合现实图像;
图像输出模块40,用于将所述模拟图像和所述混合现实图像进行分屏显示。
可选地,所述传屏接收模块20,包括:
连接建立单元,用于在当前显示模式是传屏显示模式时,建立与预设终端之间的通信连接;
图像发送单元,用于在与预设终端之间的通信连接建立完成时,向预设终端发送传屏指令,并接收所述预设终端基于所述传屏指令反馈的模拟图像。
可选地,所述图像处理模块30,包括:
场景确定单元,用于提取所述模拟图像的特征信息,根据所述特征信息确定所述模拟图像对应的模拟场景;
提取添加单元,用于提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中目标对象将所述目标对象添加到所述模拟场景中,得到混合现实图像;
可选地,所述图像输出模块40,包括:
区域划分单元,用于在检测到混合现实图像生成完成时,根据所述模拟图像的属性,将所述终端的显示界面划分为第一显示区域和第二显示区域;
图像显示单元,用于将所述模拟图像和所述混合现实图像进行自适应调整,并显示在所述第一显示区域和所述第二显示区域。
可选地,所述的图像显示装置,包括:
向量确定模块,用于在接收到图像比对请求时,分别提取所述模拟图像和所述混合现实图像的特征信息,得到模拟特征向量和实景特征向量;;
相似度计算模块,用于计算所述模拟特征向量和所述实景特征向量的余弦相似度,根据所述余弦相似度值和预设相似度阈值得到比对结果。
可选地,所述的图像显示装置,包括:
模式判断模块,用于在当前显示模式不是传屏显示模式时,判断当前显示模式是否为分屏显示模式;
获取确定模块,用于在当前显示模式是分屏显示模式时,获取所述终端的当前显示图像,及所述当前显示图像的特征信息,并根据所述特征信息确定所述当前显示图像对应的模拟场景;
图像显示模块,用于提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中目标对象将所述目标对象添加到所述模拟场景中,得到混合现实图像,将所述当前显示图像和所述混合现实图像分屏显示。
可选地,所述的图像显示装置,包括:
场景确定模块,用于在当前显示模式不是分屏显示模式时,根据所述预设摄像装置的拍摄模式选取模拟场景;
处理输出模块,用于将所述实景图像中的目标对象添加到所述模拟场景,形成混合现实图像并输出。
其中,图像显示装置的各个功能模块实现的步骤可参照本发明图像显示方法的各个实施例,此处不再赘述。
此外,本发明实施例还提出一种计算机存储介质。
所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述实施例提供的图像显示方法中的操作。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体/操作/对象与另一个实体/操作/对象区分开来,而不一定要求或者暗示这些实体/操作/对象之间存在任何这种实际的关系或者顺序;术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
对于装置实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的。可以根据实际的需要选择中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (8)
1.一种图像显示方法,其特征在于,所述图像显示方法包括以下步骤:
通过终端中预设摄像装置拍摄实景图像;
在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像;其中,传屏显示模式是指不同终端之间同屏传输显示的模式;
根据所述模拟图像处理所述实景图像,得到混合现实图像;
将所述模拟图像和所述混合现实图像进行分屏显示;
在接收到图像比对请求时,分别提取所述模拟图像和所述混合现实图像的特征信息,得到模拟特征向量和实景特征向量;
计算所述模拟特征向量和所述实景特征向量的余弦相似度,根据所述余弦相似度值和预设相似度阈值得到比对结果;
其中,根据所述模拟图像处理所述实景图像,得到混合现实图像的步骤,包括:
提取所述模拟图像的特征信息,根据所述特征信息确定所述模拟图像对应的模拟场景;
提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中的目标对象;
将所述目标对象添加到所述模拟场景中,得到混合现实图像。
2.如权利要求1所述的图像显示方法,其特征在于,所述在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像的步骤,包括:
在当前显示模式是传屏显示模式时,建立与预设终端之间的通信连接;
在与预设终端之间的通信连接建立完成时,向预设终端发送传屏指令,并接收所述预设终端基于所述传屏指令反馈的模拟图像。
3.如权利要求1所述的图像显示方法,其特征在于,所述将所述模拟图像和所述混合现实图像进行分屏显示的步骤,包括:
在检测到混合现实图像生成完成时,根据所述模拟图像的属性,将所述终端的显示界面划分为第一显示区域和第二显示区域;
将所述模拟图像和所述混合现实图像进行自适应调整,并显示在所述第一显示区域和所述第二显示区域。
4.如权利要求1至3任意一项所述的图像显示方法,其特征在于,所述通过终端中预设摄像装置拍摄实景图像的步骤之后,包括:
在当前显示模式不是传屏显示模式时,判断当前显示模式是否为分屏显示模式;
在当前显示模式是分屏显示模式时,获取所述终端的当前显示图像,及所述当前显示图像的特征信息,并根据所述特征信息确定所述当前显示图像对应的模拟场景;
提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中目标对象;
将所述目标对象添加到所述模拟场景中,得到混合现实图像,将所述当前显示图像和所述混合现实图像分屏显示。
5.如权利要求4所述的图像显示方法,其特征在于,所述在当前显示模式不是传屏显示模式时,判断当前显示模式是否为分屏显示模式的步骤之后,包括:
在当前显示模式不是分屏显示模式时,根据所述预设摄像装置的拍摄模式选取模拟场景;
将所述实景图像中的目标对象添加到所述模拟场景,形成混合现实图像并输出。
6.一种图像显示装置,其特征在于,所述图像显示装置包括:
实景采集模块,用于通过终端中预设摄像装置拍摄实景图像;
传屏接收模块,用于在当前显示模式是传屏显示模式时,接收预设终端发送的模拟图像;其中,传屏显示模式是指不同终端之间同屏传输显示的模式;
图像处理模块,用于根据所述模拟图像处理所述实景图像,得到混合现实图像;
图像输出模块,用于将所述模拟图像和所述混合现实图像进行分屏显示;
所述图像处理模块包括:
场景确定单元,用于提取所述模拟图像的特征信息,根据所述特征信息确定所述模拟图像对应的模拟场景;
提取添加单元,用于提取所述实景图像中的感兴趣区域,利用预设分类器检测所述感兴趣区域,得到所述感兴趣区域中的目标对象,将所述目标对象添加到所述模拟场景中,得到混合现实图像;
向量确定模块,用于在接收到图像比对请求时,分别提取所述模拟图像和所述混合现实图像的特征信息,得到模拟特征向量和实景特征向量;
相似度计算模块,用于计算所述模拟特征向量和所述实景特征向量的余弦相似度,根据所述余弦相似度值和预设相似度阈值得到比对结果。
7.一种图像显示设备,其特征在于,所述图像显示设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其中:
所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的图像显示方法的步骤。
8.一种计算机存储介质,其特征在于,所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的图像显示方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910245987.6A CN109862286B (zh) | 2019-03-28 | 2019-03-28 | 图像显示方法、装置、设备和计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910245987.6A CN109862286B (zh) | 2019-03-28 | 2019-03-28 | 图像显示方法、装置、设备和计算机存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109862286A CN109862286A (zh) | 2019-06-07 |
CN109862286B true CN109862286B (zh) | 2021-08-17 |
Family
ID=66902335
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910245987.6A Active CN109862286B (zh) | 2019-03-28 | 2019-03-28 | 图像显示方法、装置、设备和计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109862286B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104010138A (zh) * | 2013-02-23 | 2014-08-27 | 三星电子株式会社 | 在配备有双相机的便携式终端中合成图像的设备和方法 |
CN107688392A (zh) * | 2017-09-01 | 2018-02-13 | 广州励丰文化科技股份有限公司 | 一种控制mr头显设备显示虚拟景象的方法及系统 |
CN108377398A (zh) * | 2018-04-23 | 2018-08-07 | 太平洋未来科技(深圳)有限公司 | 基于红外的ar成像方法、系统及电子设备 |
CN109427093A (zh) * | 2017-08-28 | 2019-03-05 | 福建天晴数码有限公司 | 一种混合现实系统 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160163063A1 (en) * | 2014-12-04 | 2016-06-09 | Matthew Ashman | Mixed-reality visualization and method |
US10127290B1 (en) * | 2017-07-19 | 2018-11-13 | Facebook, Inc. | Systems and methods for distributing augmented-reality effects |
CN108762501B (zh) * | 2018-05-23 | 2021-02-26 | 歌尔光学科技有限公司 | Ar显示方法、智能终端、ar设备及系统 |
-
2019
- 2019-03-28 CN CN201910245987.6A patent/CN109862286B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104010138A (zh) * | 2013-02-23 | 2014-08-27 | 三星电子株式会社 | 在配备有双相机的便携式终端中合成图像的设备和方法 |
CN109427093A (zh) * | 2017-08-28 | 2019-03-05 | 福建天晴数码有限公司 | 一种混合现实系统 |
CN107688392A (zh) * | 2017-09-01 | 2018-02-13 | 广州励丰文化科技股份有限公司 | 一种控制mr头显设备显示虚拟景象的方法及系统 |
CN108377398A (zh) * | 2018-04-23 | 2018-08-07 | 太平洋未来科技(深圳)有限公司 | 基于红外的ar成像方法、系统及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109862286A (zh) | 2019-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110012209B (zh) | 全景图像生成方法、装置、存储介质及电子设备 | |
US9319632B2 (en) | Display apparatus and method for video calling thereof | |
CN112449120B (zh) | 高动态范围视频生成方法及装置 | |
CN107566749B (zh) | 拍摄方法及移动终端 | |
CN108495032B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN109120863B (zh) | 拍摄方法、装置、存储介质及移动终端 | |
CN105554372B (zh) | 一种拍摄方法以及装置 | |
CN107948505B (zh) | 一种全景拍摄方法及移动终端 | |
WO2019237745A1 (zh) | 人脸图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN114450969B (zh) | 视频截屏方法、终端及计算机可读存储介质 | |
CN110069974B (zh) | 高光图像处理方法、装置和电子设备 | |
KR20200117695A (ko) | 외부 전자 장치를 이용하여 카메라를 제어하는 전자 장치 및 방법 | |
US20230316529A1 (en) | Image processing method and apparatus, device and storage medium | |
CN113411498A (zh) | 图像拍摄方法、移动终端及存储介质 | |
CN114387445A (zh) | 对象关键点识别方法及装置、电子设备和存储介质 | |
CN110807769B (zh) | 图像显示控制方法及装置 | |
CN105574834B (zh) | 图像处理方法及装置 | |
CN110189348B (zh) | 头像处理方法、装置、计算机设备及存储介质 | |
CN113822798B (zh) | 生成对抗网络训练方法及装置、电子设备和存储介质 | |
CN109981989B (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
CN110996078A (zh) | 图像获取方法、终端及可读存储介质 | |
CN112437235B (zh) | 夜景图片生成方法、装置及移动终端 | |
CN113159229A (zh) | 图像融合方法、电子设备及相关产品 | |
CN111567034A (zh) | 曝光补偿的方法、装置及计算机可读存储介质 | |
CN109218620B (zh) | 基于环境亮度的拍照方法、装置、存储介质及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB03 | Change of inventor or designer information | ||
CB03 | Change of inventor or designer information |
Inventor after: Cui Xiyuan Inventor after: Liu Xitong Inventor after: Song Xiaobo Inventor before: Wang Jiamin |
|
GR01 | Patent grant | ||
GR01 | Patent grant |