CN108616719B - 监控视频展示的方法、装置及系统 - Google Patents

监控视频展示的方法、装置及系统 Download PDF

Info

Publication number
CN108616719B
CN108616719B CN201611243566.2A CN201611243566A CN108616719B CN 108616719 B CN108616719 B CN 108616719B CN 201611243566 A CN201611243566 A CN 201611243566A CN 108616719 B CN108616719 B CN 108616719B
Authority
CN
China
Prior art keywords
monitoring
terminal
dimensional
monitoring data
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611243566.2A
Other languages
English (en)
Other versions
CN108616719A (zh
Inventor
许江浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201611243566.2A priority Critical patent/CN108616719B/zh
Publication of CN108616719A publication Critical patent/CN108616719A/zh
Application granted granted Critical
Publication of CN108616719B publication Critical patent/CN108616719B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Abstract

本发明公开了一种监控视频展示的方法、装置及系统。本发明通过接收目标场景的多路二维监控数据;对多路二维监控数据进行三维图像合成,得到目标场景的三维监控数据;根据至少一个第二终端的监控模式,对多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;在第一终端基于三维监控数据展示目标场景的三维监控画面的同时,将至少一个第二终端的监控数据分别发送至至少一个第二终端,由至少一个第二终端进行同步展示。本发明使得监控效果更接近真实场景,且通过多种不同监控模式,在降低成本的同时,实现了更好、更全面的监控效果。

Description

监控视频展示的方法、装置及系统
技术领域
本发明涉及视频监控技术领域,特别涉及一种监控视频展示的方法、装置及系统。
背景技术
传统的视频监控系统包括监控点设备、传输线缆、视频监控平台以及视频监控显示端。其中,监控点设备可以具有摄像头等拍摄器件,用以进行图像采集,监控点设备可以通过传输线缆将采集到的图像数据发送至视频监控平台,并由视频监控平台通过视频监控显示端进行展示。视频监控以其直观、准确、及时和信息内容丰富而广泛应用于许多场合。
近年来,随着视频监控系统的规模越来越大,监控点设备的密集程度也随之越来越高,能够达到更加准确和全面的监控。然而,为了能够同时查看多个监控点所发送的图像数据,需要部署多个视频监控显示端来进行展示,不仅大大提高了监控成本,而且展示效果很差。
发明内容
为了在降低监控成本的同时提高展示效果,本发明实施例提供了一种监控视频展示的方法、装置及系统。所述技术方案如下:
本发明实施例提供了一种监控画面展示的方法,所述方法包括:
接收目标场景的多路二维监控数据;
对所述多路二维监控数据进行三维图像合成,得到所述目标场景的三维监控数据;
根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;
在第一终端基于所述三维监控数据展示所述目标场景的三维监控画面的同时,将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端,由所述至少一个第二终端进行同步展示。
在一种可能实现方式中,所述根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据包括:
如果任一第二终端的监控模式指示所述第二终端以三维形式显示所述目标场景的第一视角画面,从所述多路二维监控数据中确定与第一视角对应的至少两路第一监控数据,并基于所述至少两路第一监控数据进行三维图像合成,得到第一视角的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二视角画面,从所述多路二维监控数据中确定与第二视角对应的至少一路第二监控数据,并基于所述至少一路第二监控数据进行图像处理,得到所述第二视角的二维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以三维形式显示所述目标场景的第一区域画面,从所述多路二维监控数据中确定与第一区域对应的至少两路第三监控数据,并基于所述至少两路第三监控数据进行三维图像合成,得到所述第一区域的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二区域画面,从所述多路二维监控数据中确定与第二区域对应的至少一路第四监控数据,并基于所述至少一路第四监控数据进行图像处理,得到所述第二区域的二维监控数据。
在一种可能实现方式中,所述方法还包括:
当接收到对所述目标场景的三维监控画面的视角切换指令时,基于所述视角切换指令所指示的视角以及所述至少一个第二终端的监控模式,执行对所述多路二维监控数据进行处理以及发送过程,使得所述至少一个第二终端基于所述视角切换指令进行同步的视角切换。
在一种可能实现方式中,所述根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据之前,所述方法还包括:
接收对任一个第二终端的监控模式设置指令,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式;
将所述第二终端设置为所述监控模式设置指令所指示的监控模式。
在一种可能实现方式中,所述方法还包括:
在基于所述三维监控数据展示所述目标场景的三维监控画面的同时,在所述三维监控画面中与所述至少一个第二终端的监控模式对应的位置,展示所述至少一个第二终端的终端信息。
本发明实施例提供了一种监控画面展示的装置,应用于第一终端,所述装置包括:
接收模块,用于接收目标场景的多路二维监控数据;
视频处理模块,用于对所述多路二维监控数据进行三维图像合成,得到所述目标场景的三维监控数据;
所述视频处理模块,还用于根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;
展示模块,用于基于所述三维监控数据展示所述目标场景的三维监控画面;
发送模块,用于在所述展示模块基于所述三维监控数据展示所述目标场景的三维监控画面的同时,将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端,由所述至少一个第二终端进行同步展示。
在一种可能实现方式中,所述视频处理模块用于:
如果任一第二终端的监控模式指示所述第二终端以三维形式显示所述目标场景的第一视角画面,从所述多路二维监控数据中确定与第一视角对应的至少两路第一监控数据,并基于所述至少两路第一监控数据进行三维图像合成,得到第一视角的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二视角画面,从所述多路二维监控数据中确定与第二视角对应的至少一路第二监控数据,并基于所述至少一路第二监控数据进行图像处理,得到所述第二视角的二维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以三维形式显示所述目标场景的第一区域画面,从所述多路二维监控数据中确定与第一区域对应的至少两路第三监控数据,并基于所述至少两路第三监控数据进行三维图像合成,得到所述第一区域的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二区域画面,从所述多路二维监控数据中确定与第二区域对应的至少一路第四监控数据,并基于所述至少一路第四监控数据进行图像处理,得到所述第二区域的二维监控数据。
在一种可能实现方式中,所述装置还包括:指令同步模块;
当接收到对所述目标场景的三维监控画面的视角切换指令时,基于所述视角切换指令所指示的视角以及所述至少一个第二终端的监控模式,触发所述视频处理模块执行对所述多路二维监控数据进行处理以及发送过程,使得所述至少一个第二终端基于所述视角切换指令进行同步的视角切换。
在一种可能实现方式中,所述装置还包括:
接收模块,用于接收对任一个第二终端的监控模式设置指令,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式;
设置模块,用于将所述第二终端设置为所述监控模式设置指令所指示的监控模式。
在一种可能实现方式中,所述展示模块用于在基于所述三维监控数据展示所述目标场景的三维监控画面的同时,在所述三维监控画面中与所述至少一个第二终端的监控模式对应的位置,展示所述至少一个第二终端的终端信息。
本发明实施例提供了一种监控视频展示系统,包括第一终端和至少一个第二终端,所述第一终端,用于基于目标场景的三维监控数据,展示所述目标场景的三维监控画面;所述至少一个第二终端,用于采用不同监控模式,展示所述目标场景的不同监控画面,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项。
本发明实施例提供的方法、装置和系统,通过一个终端作为主控终端对目标场景的三维监控画面进行显示,并同时采用多个终端来展示不同视角或不同区域的监控画面,使得监控的实际效果更接近真实场景,且通过多种不同监控模式,实现了更好、更全面的监控效果。并且,这种监控方式可以采用多个已有终端实现,而无需增加更多的终端,大大降低了监控成本。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种实施环境的示意图;
图2是本发明实施例提供的一种监控画面展示的方法的流程图;
图3是本发明实施例提供的监控画面展示的一种显示示例图;
图4是本发明实施例提供的监控画面展示的一种显示示例图;
图5是本发明实施例提供的监控画面展示的一种显示示例图;
图6是本发明实施例提供的监控画面的视角切换同步的一种显示示例图;
图7是本发明实施例提供的一种监控画面展示的装置的结构示意图;
图8是根据本发明实施例示出的一种监控画面展示的装置800的框图;
图9为本发明实施例提供了一种监控视频展示系统的示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
图1是本发明实施例提供的一种实施环境的示意图。参见图1,该实施环境中包括:多个传感器101,服务器102以及多个终端103。
多个传感器101,可以是图像传感器,例如球机、深度传感器等,该多个传感器101可以部署于任一场所的各个不同位置上,以形成对该场所的全面监控。例如,在一个房间内,可以在房间的不同方位部署有传感器101,以达到对房间内部情况进行实时监控的目的。该传感器101可以与服务器102通过有线或无线的方式进行连接,从而使得传感器101可以通过该连接将拍摄得到的视频数据发送至服务器102。
服务器102,可以是视频监控系统的管理服务器或存储服务器等,该服务器102可以用于对各个传感器101所拍摄的视频数据进行初始化处理,例如,对数据进行压缩、过滤等等。
多个终端103,可以是任一种移动终端或固定终端,例如,该多个终端103可以是多个显示终端,各个显示终端的显示屏幕大小可以相同或有所不同,其具体的终端类型也可以相同或不同。例如,多个显示终端可以包括一个较大尺寸的主显示终端,和其他较小尺寸的从显示终端。例如,该多个显示终端可以是多个拼接在一起的显示器,其中位置在中间的显示器为第一终端,位置在旁边的显示器为第二终端。可选地,该多个终端可以包括VR(虚拟现实,Virtual Reality)终端或者普通显示终端等。
该多个终端103中可以包括一个用于控制其他终端103的主控终端,该主控终端可以负责监控数据处理,并在多个终端之间进行数据分发等。
可选地,对于任一目标场景来说,可以通过对多个传感器101的部署,来构成对目标场景的全面监控。在进行监控之前,可以建立目标场景的三维模型,并基于各个传感器的部署位置和部署角度等,将传感器与目标场景的三维模型匹配,从而使得在后续对视频数据进行合成处理时,可以基于各个传感器的视频数据得到目标场景的不同区域的纹理,从而将纹理按照上述匹配关系,映射至三维模型上,以得到目标场景的三维监控数据。当然,上述三维监控数据的合成过程,可以不限于上述提供的技术过程,还可以采用其他合成方式进行,本发明实施例对此不做具体限定。
图2是本发明实施例提供的一种监控画面展示的方法的流程图。参见图2,该方法包括:
201、接收目标场景的多路二维监控数据。
该目标场景是指待展示的场景,可以为空间或目标物。第一终端可以作为展示该目标场景的主控终端,可以作为多路二维监控数据的接收端和处理端,以实现三维监控数据的合成以及其他监控模式的监控数据的合成和分发。
在本发明实施例中,第一终端可以与服务器连接,由服务器转发多路二维监控数据。如果系统中未设置服务器,该第一终端还可以直接接收由多个传感器发送的多路二维监控数据。
在本申请的一个实施例中,该第一终端上可以事先存储有该目标场景的三维模型以及各个传感器与该三维模型不同区域的匹配关系,从而可以基于三维模型和多路二维监控数据进行后续合成过程。
作为主控终端,该第一终端可以分别对多个第二终端的监控模式进行设置。具体地,第一终端可以接收对任一个第二终端的监控模式设置指令,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式;将所述第二终端设置为所述监控模式设置指令所指示的监控模式。在本发明的一个实施例中,该设置过程可以通过安装于第一终端的监控应用实现,例如,在设置过程中,可以将至少一个第二终端的终端信息输入监控应用,使得监控应用能够通过网络与至少一个第二终端建立数据传输通道,并通过用户在第一终端上输入各个第二终端的监控模式,从而使得第二终端在接收到所设置的监控模式后,将自身设置为相应的监控模式。
202、对该多路二维监控数据进行三维图像合成,得到该目标场景的三维监控数据。
该接收过程可以是一个实时过程,也即是,该第一终端可以在监控过程中实时接收多路二维监控数据的数据流,从而实现实时的三维图像合成以及三维画面展示。当然,也不排除可以通过录播等手段对一些画面进行回放等,本发明实施例对此不做限定。
上述步骤201和202是由第一终端作为多路二维监控数据的接收端和处理端为例进行说明的,在另一实施例中,可以由服务器作为多路二维监控数据的处理端,多个传感器将拍摄得到的多路二维监控数据发送至服务器,由服务器对多路二维监控数据进行三维图像合成,以得到目标场景的三维监控数据,并向第一终端发送目标场景的三维监控数据,当第一终端接收到目标场景的三维监控数据时,可以基于该三维监控数据展示目标场景的三维监控画面。
203、根据至少一个第二终端的监控模式,对该多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,该监控模式包括画面展示模式,还包括监控视角和监控区域中任一项。
在本发明实施例中,监控模式是指第二终端用于展示监控画面的模式。其中,画面展示模式可以是指该第二终端所展示的是三维画面还是二维画面,监控视角是指该第二终端的监控视角,例如,以目标场景为一个空间内的某一个目标物为例,主控终端的监控视角可以是目标物的正面视角,而第二终端的监控视角可以为目标物的背面视角或者俯视角等。监控区域可以是指该目标场景的任一个局部区域。
在本发明实施例中,基于不同的监控模式,该第一终端可以对三维监控数据进行不同方式的处理,以得到符合每个第二终端的监控模式的监控数据。
在本发明的一个实施例中,如果任一第二终端的监控模式指示所述第二终端以三维形式显示所述目标场景的第一视角画面,从所述多路二维监控数据中确定与第一视角对应的至少两路第一监控数据,并基于所述至少两路第一监控数据进行三维图像合成,得到第一视角的三维监控数据。
发明人发现,对于目标场景来说,由于其是基于三维模型进行合成处理得到的,因此,可以具有多维视角,而为了达到对目标场景的全面监控,可以将第二终端作为与第一终端不同视角的展示端,来全面的展示目标场景的实际情况。
由于传感器与三维模型的各个区域之间具有匹配关系,因此,在确定第二终端对应的第一视角后,可以按照上述匹配关系以及第一视角,进行三维图像合成,从而得到第一视角的三维监控数据。例如,参见图3,该图3是本发明实施例提供的监控画面展示的一种显示示例图。在图3中,第一终端A为主控终端,用于展示三维监控数据,其视角可以为正面视角。而第二终端A1的视角为底视角、第二终端A2的视角为左视角、第二终端A3的视角为顶视角以及第二终端A4的视角为右视角。上述各个第二终端的三维监控数据均可以基于上述匹配关系等合成,在此不做赘述。
通过上述实现方式,可以由主控的第一终端展示三维全景图,多个第二终端展示不同视角的三维画面,可以实现从不同方向观察目标场景的目的,大大提升了展示效果。
在本发明的另一个实施例中,如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二视角画面,从所述多路二维监控数据中确定与第二视角对应的至少一路第二监控数据,并基于所述至少一路第二监控数据进行图像处理,得到所述第二视角的二维监控数据。
为了减少第一终端的数据处理压力,还可以仅在至少一个第二终端上展示某个视角的二维监控数据。由于各个传感器的部署位置和部署角度都已经预设好,因此,可以基于各个传感器的部署位置和部署角度以及第二终端的第二视角,来确定需要进行图像合成的二维监控数据,也即是,对于一个第二终端来说,确定究竟将哪几路二维监控数据进行图像合成,以得到该第二终端的二维监控数据。例如,根据传感器的部署位置和部署角度,确定第二终端的第二视角对应于传感器1和传感器2,则可以采用来自传感器1和传感器2的二维监控数据进行图像合成,得到第二视角的二维监控数据。
其中,对于一个第二终端来说,其所确定的二维监控数据可以为一路或一路以上,则对于一个第二终端对应于一路二维监控数据时,可以对该路二维监控数据进行清晰度处理等图像处理过程,以使得该路二维监控数据能够实现清晰准确的展示。对于一个第二终端对应于一路以上的二维监控数据时,可以对该一路以上的二维监控数据进行图像合成、清晰度处理等等图像处理过程,以使得该一路以上二维监控数据能够实现清晰准确的展示。对于一路以上的二维监控数据来说,可能由于其传感器的部署等使得画面有重叠区域等,在图像合成时,可以考虑重叠区域等进行合成,以提高显示效果。
在本发明的另一个实施例中,可以由主控的第一终端展示三维全景图,多个第二终端展示不同视角的二维画面,可以实现从不同方向观察目标场景的目的,在减少第一终端的数据处理压力的同时,大大提升了展示效果。
在本发明的再一个实施例中,如果任一第二终端的监控模式指示所述第二终端用于以三维形式显示所述目标场景的第一区域画面,从所述多路二维监控数据中确定与第一区域对应的至少两路第三监控数据,并基于所述至少两路第三监控数据进行三维图像合成,得到所述第一区域的三维监控数据。
发明人发现,对于目标场景来说,具有多个可观察区域,例如,有些需要着重监控的区域等,而为了达到对目标场景的全面监控以及重点监控,可以将第二终端作为与第一终端不同区域的展示端,来全面且更有重点的展示目标场景的实际情况。
由于传感器与三维模型的各个区域之间具有匹配关系,因此,在确定第二终端对应的第一区域后,可以按照上述匹配关系以及第一区域,进行三维图像合成,从而得到第一区域的三维监控数据。例如,参见图4,该图4是本发明实施例提供的监控画面展示的一种显示示例图。在图4中,第一终端A为主控终端,用于展示三维监控画面。而第二终端A1用于展示区域1的三维监控画面、第二终端A2用于展示区域2的三维监控画面。
通过上述实现方式,可以由主控的第一终端展示三维全景图,多个第二终端展示不同区域的三维画面,可以针对区域的重点监控,大大提升了展示效果。
在本发明的再一个实施例中,如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二区域画面,从所述多路二维监控数据中确定与第二区域对应的至少一路第四监控数据,并基于所述至少一路第四监控数据进行图像处理,得到所述第二区域的二维监控数据。
为了减少第一终端的数据处理压力,还可以仅在至少一个第二终端上展示某个区域的二维监控数据例如,有些需要着重监控的区域等,而为了达到对目标场景的全面监控以及重点监控,可以将第二终端作为与第一终端不同区域的展示端,来全面且更有重点的展示目标场景的实际情况。
由于各个传感器的部署位置和部署角度都已经预设好,因此,可以基于各个传感器的部署位置和部署角度以及第二终端的第二区域,来确定需要进行图像合成的二维监控数据,也即是,对于一个第二终端来说,确定究竟将哪几路二维监控数据进行图像合成,以得到该第二终端的二维监控数据。例如,根据传感器的部署位置和部署角度,确定第二终端的第二视角对应于传感器1和传感器2,则可以采用来自传感器1和传感器2的二维监控数据进行图像合成,得到第二区域的二维监控数据,其展示效果可以参见图5所示。
当然,如果所确定的区域仅对应于一个传感器,则无需进行图像合成,而直接将该传感器的二维监控数据发送至第二终端进行展示或者对该路二维监控数据进行一定图像处理,再进行发送步骤。也即是,对于一个第二终端来说,其所确定的二维监控数据可以为一路或一路以上。如果第二终端存在多个,那么,对多路二维监控数据进行处理,可以包括分别对每个第二终端对应的二维监控数据进行图像处理。
对于一个第二终端对应于一路二维监控数据时,可以对该路二维监控数据进行清晰度处理等图像处理过程,以使得该路二维监控数据能够实现清晰准确的展示。
对于一个第二终端对应于一路以上的二维监控数据时,可以对该一路以上的二维监控数据进行图像合成、清晰度处理等等图像处理过程,以使得该一路以上二维监控数据能够实现清晰准确的展示。对于一路以上的二维监控数据来说,可能由于其传感器的部署等使得画面有重叠区域等,在图像合成时,可以考虑重叠区域等进行合成,以提高显示效果。
通过上述实现方式,可以由主控的第一终端展示三维全景图,多个第二终端展示不同区域的二维画面,可以针对区域的重点监控,在减少第一终端的数据处理压力的同时,大大提升了展示效果。
204、在第一终端基于该三维监控数据展示该目标场景的三维监控画面的同时,将该至少一个第二终端的监控数据分别发送至该至少一个第二终端,由该至少一个第二终端进行同步展示。
在本发明实施例中,该第一终端在监控开始时可以与至少一个第二终端之间建立数据传输通道,从而在后续的监控过程中,可以通过与所述至少一个第二终端之间的数据传输通道,将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端。其中,该数据传输通道可以是基于蓝牙或者wifi等建立,本发明实施例对此不做限定。
需要说明的是,在传输过程中,为了使得多个终端的展示完全同步,可以考虑传输耗时,从而基于传输耗时将各个终端的显示进行延时等处理,使得各个终端所展示的画面达到真正同步。当然,该延时等处理应是不影响正常监控下的处理。
在通过多个终端进行视频监控时,为了提高监控效率,还可以为用户提供多个终端的同步控制方法,使得用户在某一个终端上进行例如视角切换等操作时,其他终端也可以对该操作进行同步,达到全方位监控的目的,具体包括下述步骤205:
205、当接收到对该目标场景的三维监控画面的视角切换指令时,在切换该目标场景的三维监控画面的视角的同时,将该视角切换指令发送至该至少一个第二终端,使得该至少一个第二终端基于该视角切换指令进行同步的视角切换。
该视角切换可以是基于新的视角、三维模型以及多路二维监控数据进行处理的过程,在此不做赘述。以第一终端为例,当第一终端接收到视角切换指令时,可以基于该视角切换指令以及各个第二终端的监控模式等进行合成,以向各个第二终端发送合成后的监控数据,使得各个第二终端能够展示与第一终端相同的视角切换效果,达到视角切换同步的目的。例如,参见图6,如果用户通过触屏操作,对第一终端中进行了视角切换操作,如逆时针旋转,则第一终端和多个第二终端会同步展示目标场景逆时针旋转的效果。这种同步方式,大大提升了监控画面和监控用户之间的互动性,具有很强的实际应用价值。
在上述的实施方式中,第一终端在基于所述三维监控数据展示所述目标场景的三维监控画面的同时,还可以在所述三维监控画面中与所述至少一个第二终端的监控模式对应的位置,展示所述至少一个第二终端的终端信息,具体显示方式可以参见图3和图4,当然,还可以采用其他显示方式,本发明实施例对此不做限定。
本发明实施例提供的方法,通过一个终端作为主控终端对目标场景的三维监控画面进行显示,并同时采用多个终端来展示不同视角或不同区域的监控画面,使得监控的实际效果更接近真实场景,且通过多种不同监控模式,实现了更好、更全面的监控效果,并且,这种监控方式可以采用多个已有终端实现,而无需增加更多的终端,大大降低了监控成本。
进一步地,该方法还可以在多个移动终端上实现,只需一个主控的第一终端作为数据的接收端和处理端,也降低了对其他用于展示监控画面的第二终端的要求,也变相降低了监控成本。
图7是本发明实施例提供的一种监控画面展示装置的结构示意图。参见图7,该装置包括:
接收模块701,用于接收目标场景的多路二维监控数据;
视频处理模块702,用于对所述多路二维监控数据进行三维图像合成,得到所述目标场景的三维监控数据;
所述视频处理模块702,还用于根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;
展示模块703,用于基于所述三维监控数据展示所述目标场景的三维监控画面;
发送模块704,用于在所述展示模块基于所述三维监控数据展示所述目标场景的三维监控画面的同时,将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端,由所述至少一个第二终端进行同步展示。
在一种可能实现方式中,所述视频处理模块用于:
如果任一第二终端的监控模式指示所述第二终端以三维形式显示所述目标场景的第一视角画面,从所述多路二维监控数据中确定与第一视角对应的至少两路第一监控数据,并基于所述至少两路第一监控数据进行三维图像合成,得到第一视角的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二视角画面,从所述多路二维监控数据中确定与第二视角对应的至少一路第二监控数据,并基于所述至少一路第二监控数据进行图像处理,得到所述第二视角的二维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以三维形式显示所述目标场景的第一区域画面,从所述多路二维监控数据中确定与第一区域对应的至少两路第三监控数据,并基于所述至少两路第三监控数据进行三维图像合成,得到所述第一区域的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二区域画面,从所述多路二维监控数据中确定与第二区域对应的至少一路第四监控数据,并基于所述至少一路第四监控数据进行图像处理,得到所述第二区域的二维监控数据。
在一种可能实现方式中,所述装置还包括:指令同步模块;
当接收到对所述目标场景的三维监控画面的视角切换指令时,基于所述视角切换指令所指示的视角以及所述至少一个第二终端的监控模式,触发所述视频处理模块执行对所述多路二维监控数据进行处理以及发送过程,使得所述至少一个第二终端基于所述视角切换指令进行同步的视角切换。
在一种可能实现方式中,所述装置还包括:
接收模块,用于接收对任一个第二终端的监控模式设置指令,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式;
设置模块,用于将所述第二终端设置为所述监控模式设置指令所指示的监控模式。
在一种可能实现方式中,所述展示模块用于在基于所述三维监控数据展示所述目标场景的三维监控画面的同时,在所述三维监控画面中与所述至少一个第二终端的监控模式对应的位置,展示所述至少一个第二终端的终端信息。
需要说明的是:上述实施例提供的监控画面展示装置在监控画面展示时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的监控画面展示装置与监控画面展示的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图8是根据本发明实施例示出的一种监控画面展示装置800的框图。例如,装置800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图8,装置800可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制装置800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为装置800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当装置800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为装置800提供各个方面的状态评估。例如,传感器组件814可以检测到设备800的打开/关闭状态,组件的相对定位,例如所述组件为装置800的显示器和小键盘,传感器组件814还可以检测装置800或装置800一个组件的位置改变,用户与装置800接触的存在或不存在,装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信部件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信部件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述监控画面展示方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由装置800的处理器820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在示例性实施例中,还提供了一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种监控画面展示方法。
本发明实施例还提供的一种监控画面展示装置。该装置可以包含显示组件、存储组件、处理组件以及收发组件,其中,该收发组件被配置为接收目标场景的多路二维监控数据,该处理组件被配置为对所述多路二维监控数据进行三维图像合成,得到所述目标场景的三维监控数据;根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;该显示组件被配置为基于所述三维监控数据展示所述目标场景的三维监控画面,该收发组件还被配置为将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端。当然,该各个组件还被配置为上述方法实施例其他的对应功能,在此不做赘述。
参见图9,该图9为本发明实施例提供了一种监控视频展示系统的示意图,该系统包括第一终端901和至少一个第二终端902,所述第一终端901,用于基于目标场景的三维监控数据,展示所述目标场景的三维监控画面;所述至少一个第二终端902,用于采用不同监控模式,展示所述目标场景的不同监控画面,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项。
其中,该第一终端901所展示的三维监控数据可以是由其他设备提供,该第一终端901还可以具有三维图像合成功能,以便在需要进行三维图像合成时,基于多路二维监控数据进行三维图像合成。另外,该第一终端901还可以具有根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据的功能,以便为至少一个第二终端提供监控数据。
上述监控视频展示系统所提供的监控效果更接近真实场景,且通过多种不同监控模式,在降低成本的同时,实现了更好、更全面的监控效果。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种监控画面展示的方法,其特征在于,应用于第一终端,所述方法包括:
当接收到对任一个第二终端的监控模式设置指令时,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式,将所述第二终端设置为所述监控模式设置指令所指示的监控模式;
接收目标场景的多路二维监控数据;
对所述多路二维监控数据进行三维图像合成,得到所述目标场景的三维监控数据;
根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;
在第一终端基于所述三维监控数据展示所述目标场景的三维监控画面的同时,将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端,由所述至少一个第二终端进行同步展示。
2.根据权利要求1所述的方法,其特征在于,所述根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据包括:
如果任一第二终端的监控模式指示所述第二终端以三维形式显示所述目标场景的第一视角画面,从所述多路二维监控数据中确定与第一视角对应的至少两路第一监控数据,并基于所述至少两路第一监控数据进行三维图像合成,得到第一视角的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二视角画面,从所述多路二维监控数据中确定与第二视角对应的至少一路第二监控数据,并基于所述至少一路第二监控数据进行图像处理,得到所述第二视角的二维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以三维形式显示所述目标场景的第一区域画面,从所述多路二维监控数据中确定与第一区域对应的至少两路第三监控数据,并基于所述至少两路第三监控数据进行三维图像合成,得到所述第一区域的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二区域画面,从所述多路二维监控数据中确定与第二区域对应的至少一路第四监控数据,并基于所述至少一路第四监控数据进行图像处理,得到所述第二区域的二维监控数据。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当接收到对所述目标场景的三维监控画面的视角切换指令时,基于所述视角切换指令所指示的视角以及所述至少一个第二终端的监控模式,执行对所述多路二维监控数据进行处理以及发送过程,使得所述至少一个第二终端基于所述视角切换指令进行同步的视角切换。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在基于所述三维监控数据展示所述目标场景的三维监控画面的同时,在所述三维监控画面中与所述至少一个第二终端的监控模式对应的位置,展示所述至少一个第二终端的终端信息。
5.一种监控画面展示的装置,其特征在于,应用于第一终端,所述装置包括:
指令同步模块,用于当接收到对任一个第二终端的监控模式设置指令时,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式,将所述第二终端设置为所述监控模式设置指令所指示的监控模式;
接收模块,用于接收目标场景的多路二维监控数据;
视频处理模块,用于对所述多路二维监控数据进行三维图像合成,得到所述目标场景的三维监控数据;
所述视频处理模块,还用于根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;
展示模块,用于基于所述三维监控数据展示所述目标场景的三维监控画面;
发送模块,用于在所述展示模块基于所述三维监控数据展示所述目标场景的三维监控画面的同时,将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端,由所述至少一个第二终端进行同步展示。
6.根据权利要求5所述的装置,其特征在于,所述视频处理模块用于:
如果任一第二终端的监控模式指示所述第二终端以三维形式显示所述目标场景的第一视角画面,从所述多路二维监控数据中确定与第一视角对应的至少两路第一监控数据,并基于所述至少两路第一监控数据进行三维图像合成,得到第一视角的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二视角画面,从所述多路二维监控数据中确定与第二视角对应的至少一路第二监控数据,并基于所述至少一路第二监控数据进行图像处理,得到所述第二视角的二维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以三维形式显示所述目标场景的第一区域画面,从所述多路二维监控数据中确定与第一区域对应的至少两路第三监控数据,并基于所述至少两路第三监控数据进行三维图像合成,得到所述第一区域的三维监控数据;或,
如果任一第二终端的监控模式指示所述第二终端用于以二维形式显示所述目标场景的第二区域画面,从所述多路二维监控数据中确定与第二区域对应的至少一路第四监控数据,并基于所述至少一路第四监控数据进行图像处理,得到所述第二区域的二维监控数据。
7.根据权利要求5所述的装置,其特征在于,所述装置还包括:
接收模块,用于接收对任一个第二终端的监控模式设置指令,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式;
设置模块,用于将所述第二终端设置为所述监控模式设置指令所指示的监控模式。
8.根据权利要求5所述的装置,其特征在于,所述展示模块用于在基于所述三维监控数据展示所述目标场景的三维监控画面的同时,在所述三维监控画面中与所述至少一个第二终端的监控模式对应的位置,展示所述至少一个第二终端的终端信息。
9.一种监控视频展示系统,其特征在于,包括第一终端和至少一个第二终端,
所述第一终端,用于当接收到对任一个第二终端的监控模式设置指令时,所述监控模式设置指令携带第一终端用户为所述第二终端设置的监控模式,将所述第二终端设置为所述监控模式设置指令所指示的监控模式;接收目标场景的多路二维监控数据;对所述多路二维监控数据进行三维图像合成,得到所述目标场景的三维监控数据;根据至少一个第二终端的监控模式,对所述多路二维监控数据进行处理,得到符合每个第二终端的监控模式的监控数据,所述监控模式包括画面展示模式,还包括监控视角和监控区域中任一项;在基于所述三维监控数据展示所述目标场景的三维监控画面的同时,将所述至少一个第二终端的监控数据分别发送至所述至少一个第二终端;
所述至少一个第二终端,用于采用不同监控模式,展示所述目标场景的不同监控画面。
CN201611243566.2A 2016-12-29 2016-12-29 监控视频展示的方法、装置及系统 Active CN108616719B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611243566.2A CN108616719B (zh) 2016-12-29 2016-12-29 监控视频展示的方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611243566.2A CN108616719B (zh) 2016-12-29 2016-12-29 监控视频展示的方法、装置及系统

Publications (2)

Publication Number Publication Date
CN108616719A CN108616719A (zh) 2018-10-02
CN108616719B true CN108616719B (zh) 2021-04-27

Family

ID=63658368

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611243566.2A Active CN108616719B (zh) 2016-12-29 2016-12-29 监控视频展示的方法、装置及系统

Country Status (1)

Country Link
CN (1) CN108616719B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109688381B (zh) * 2018-12-27 2021-06-08 合肥格易集成电路有限公司 Vr监控方法、装置、设备及存储介质
CN111325824B (zh) * 2019-07-03 2023-10-10 杭州海康威视系统技术有限公司 图像数据展示方法、装置、电子设备及存储介质
CN112737833B (zh) * 2020-12-25 2023-03-24 中国农业银行股份有限公司 一种监控处理方法、装置及系统
CN113110887B (zh) * 2021-03-31 2023-07-21 联想(北京)有限公司 一种信息处理方法、装置、电子设备和存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101014123A (zh) * 2007-02-05 2007-08-08 北京大学 一种多视点视频流的自由视点视频重建方法及系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006033570A (ja) * 2004-07-20 2006-02-02 Olympus Corp 画像生成装置
US20090040309A1 (en) * 2004-10-06 2009-02-12 Hirofumi Ishii Monitoring Device
JP5465334B2 (ja) * 2010-10-20 2014-04-09 三菱電機株式会社 3次元立体表示装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101014123A (zh) * 2007-02-05 2007-08-08 北京大学 一种多视点视频流的自由视点视频重建方法及系统

Also Published As

Publication number Publication date
CN108616719A (zh) 2018-10-02

Similar Documents

Publication Publication Date Title
EP3046309B1 (en) Method, device and system for projection on screen
US20220086509A1 (en) Method for processing live-streaming interaction video and server
US20170304735A1 (en) Method and Apparatus for Performing Live Broadcast on Game
EP3276976A1 (en) Method, apparatus, host terminal, server and system for processing live broadcasting information
EP3182716A1 (en) Method and device for video display
WO2017219347A1 (zh) 直播显示方法、装置及系统
RU2672173C2 (ru) Способ и устройство для обработки видеоинформации
CN105450736B (zh) 与虚拟现实连接的方法和装置
JP2020507136A (ja) Vrオブジェクトの合成方法、装置、プログラム及び記録媒体
CN109348247B (zh) 确定音视频播放时间戳的方法、装置及存储介质
EP2978234A1 (en) Method and apparatus for sharing video information
CN108616719B (zh) 监控视频展示的方法、装置及系统
US9652823B2 (en) Method and terminal device for controlling display of video image
US20220007074A1 (en) Method and apparatus for playing videos, and electronic device and storage medium thereof
US20180035170A1 (en) Method and device for controlling playing state
CN112019893A (zh) 终端的投屏方法和终端的投屏装置
CN106792024B (zh) 多媒体信息的分享方法及装置
CN107272896B (zh) Vr模式与非vr模式之间切换的方法及装置
US20220159336A1 (en) Method and system for displaying screen
CN112616053B (zh) 直播视频的转码方法、装置及电子设备
CN112243142A (zh) 一种处理音频数据的方法、装置及存储介质
EP3599763A2 (en) Method and apparatus for controlling image display
CN112770149B (zh) 视频处理方法、装置、终端及存储介质
CN113660513A (zh) 同步播放时间的方法、装置及存储介质
CN106598217B (zh) 显示方法、显示装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant