CN113489774B - 电池相机视频播放方法、唤醒方法、装置、设备及介质 - Google Patents
电池相机视频播放方法、唤醒方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN113489774B CN113489774B CN202110744284.5A CN202110744284A CN113489774B CN 113489774 B CN113489774 B CN 113489774B CN 202110744284 A CN202110744284 A CN 202110744284A CN 113489774 B CN113489774 B CN 113489774B
- Authority
- CN
- China
- Prior art keywords
- network
- battery camera
- wake
- image frame
- battery
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 93
- 230000004044 response Effects 0.000 claims abstract description 26
- 230000035515 penetration Effects 0.000 claims abstract description 20
- 238000012544 monitoring process Methods 0.000 claims description 26
- 230000005540 biological transmission Effects 0.000 claims description 24
- 238000004891 communication Methods 0.000 claims description 24
- 230000008569 process Effects 0.000 claims description 24
- 230000002618 waking effect Effects 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 6
- 230000000694 effects Effects 0.000 abstract description 26
- 238000012545 processing Methods 0.000 abstract description 15
- 230000004927 fusion Effects 0.000 description 11
- 230000007704 transition Effects 0.000 description 10
- 230000008859 change Effects 0.000 description 9
- 230000000474 nursing effect Effects 0.000 description 8
- 230000009471 action Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000003203 everyday effect Effects 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 230000001174 ascending effect Effects 0.000 description 2
- 238000007499 fusion processing Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002035 prolonged effect Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000002354 daily effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L61/00—Network arrangements, protocols or services for addressing or naming
- H04L61/09—Mapping addresses
- H04L61/25—Mapping addresses of the same type
- H04L61/2503—Translation of Internet protocol [IP] addresses
- H04L61/256—NAT traversal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
- H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
- H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Abstract
本发明属于视频数据处理技术领域,解决了现有技术通过电池相机进行实时视频需要较长等待时间,所导致用户体验效果不佳的技术问题,提供了一种电池相机视频播放方法、唤醒方法、装置、设备及介质。该方法包括:通过共享网络套接字,电池摄像头在休眠状态下,主动向辅助服务器上报网络地址;从而在接收到唤醒指令前完成P2P的网络穿透任务,在接收到用户发出的视频请求后,电池摄像头开始从休眠状态唤醒,然后完成P2P网络搭建剩余的网络应答任务,完成P2P网络搭建,节约用户视频请求的等待时间,提高用户体验效果。
Description
技术领域
本发明涉及视频数据处理技术领域,尤其涉及一种电池相机视频播放方法、唤醒方法、装置、设备及介质。
背景技术
随着视频技术的发展,市面上已有通过移动端实时查看摄像头终端采集的实时画面,从而掌握摄像头监控区域的目标对象的活动情况;这一技术在老人、婴幼儿看护中有着十分重要的意义,可以提高婴幼儿、老人看护的看护效率。
采用电池给视频终端设备供电,可以提高视频终端的应用场景,然而用户通过移动终端的App查看电池相机的实时视频时,需要先发出视频请求的报文,服务器将报文发送至电池相机,摄像机接受到该报文后才开始唤醒,然后进行初始化操作,在初始化操作过程中,通过网络将电池相机的网络位置发送给服务器,从而用户终端才能获取电池相机的网络位置;在电池相机唤醒并初始化完成后,电池相机与用户的移动终端建立P2P,在P2P建立后用户可以通过App查看电池相机发送的实时视频数据;该方式从用户发出视频请求到接收到电池相机发送的实时视频数据需要较长的等待时间,影响用户的体验效果,不利于电池相机的推广应用。
发明内容
有鉴于此,本发明实施例提供了一种电池相机视频播放方法、唤醒方法、装置、设备及介质,用以解决通过电池相机进行实时视频需要较长等待时间,所导致用户体验效果不佳的技术问题。
本发明采用的技术方案是:
本发明提供了一种电池相机唤醒方法,所述方法包括:
通过共享网络套接字,实时上传电池相机的网络地址;
在接收到电池相机唤醒指令之前,根据所述网络地址完成P2P网络连接的网络穿透任务;
在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务;
其中,在完成网络穿透任务和网络应答任务后,P2P网络通信链路建立完成。
优选地,所述通过共享网络套接字,实时上传电池相机的网络地址包括:
利用所述电池相机的wifi模块创建wifi对等网络,并在所述wifi对等网络中构建套接字服务端;
将所述电池相机的主控模块加入所述wifi模块创建的wifi对等网络,并在所述wifi对等网络中创建套接字客户端;
通过所述套接字服务端和所述套接字客户端提供的传输通道,所述wifi模块从所述主控芯片获取所述电池相机的网络地址,并将所述网络地址上传。
优选地,所述在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务包括:
根据所述唤醒指令唤醒电池相机,在电池相机唤醒后对所述电池相机进行系统初始化;
在电池相机唤醒后,通过P2P的辅助服务器查询用于建立P2P的IP网络位置;
根据所述IP网络位置建立连接,完成P2P网络连接的网络应答任务。
优选地,在电池相机唤醒后,还包括:电池相机对监控区域进行拍照,得到抓拍的图像帧,并上传抓拍的图像帧至辅助服务器进行存储。
优选地,对电池相机唤醒还包括:
获取视频请求指令;
根据所述视频请求指令生成电池相机唤醒的唤醒指令,同时获取所述视频请求指令对应的时间信息;
根据所述视频请求指令的时间信息,在移动端的App显示界面显示辅助服务器中与所述时间信息对应的历史图像帧。
优选地,所述根据所述视频请求指令的时间信息,在移动端的App显示界面显示辅助服务器中与所述时间信息对应的历史图像帧包括:
对电池相机唤醒时抓拍的图像帧按抓拍时间进行分类,得到与各抓拍时间对应的各历史图像帧组;
对各所述历史图像帧组中的各图像帧进行融合,得到与电池相机在各唤醒时间相对应的所述历史图像帧;
根据所述视频请求指令的时间信息,在移动端的App显示界面显示与所述时间信息对应的历史图像帧。
优选地,所述对各所述历史图像帧组中的各图像帧进行融合,得到与电池相机在各唤醒时间相对应的所述历史图像帧包括:
将各所述历史图像帧组中的各图像帧按抓拍时间存储在第一存储区;
分别对所述第一存储区间中各所述历史图像帧组的各抓拍图像帧进行融合,输出各所述历史图像帧至第二存储区存储。
本发明还提供了一种电池相机视频播放方法,所述方法包括:
获取视频请求指令和所述请求指令的时间信息;
根据所述请求指令对电池相机进行唤醒并创建P2P网络连接;
在所述P2P网络建立过程中,播放与所述时间信息对应的历史图像帧;
在所述P2P网络建立后,以第一编码码率通过所述P2P网络进行视频播放;
其中,所述第一编码码率为逐渐递增的动态码率。
本发明还提供了一种电池相机唤醒装置,包括:
网络地址上传模块:用于通过共享网络套接字,实时上传电池相机的网络地址;
第一网络搭建模块:用于在接收到电池相机唤醒指令之前,根据所述网络地址完成P2P网络连接的网络穿透任务;
第二网络搭建模块:用于在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务;
其中,在完成网络穿透任务和网络应答任务后,P2P网络通信链路建立完成。
本发明还提供了一种电子设备,包括:至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令,当所述计算机程序指令被所述处理器执行时实现上述任一项所述的方法。
本发明还提供了一种介质,其上存储有计算机程序指令,当所述计算机程序指令被处理器执行时实现上述任一项所述的方法。
综上所述,本发明的有益效果如下:
本发明提供的一种电池相机视频播放方法、唤醒方法、装置、设备及介质,通过共享网络套接字,电池摄像头在休眠状态下,主动向辅助服务器上报网络地址;从而在接收到唤醒指令前完成P2P的网络穿透任务,在接收到用户发出的视频请求后,电池摄像头开始从休眠状态唤醒,然后完成P2P网络搭建剩余的网络应答任务,完成P2P网络搭建,节约用户视频请求的等待时间,提高用户体验效果。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图,这些均在本发明的保护范围内。
图1为本发明实施例1中电池相机唤醒方法的流程示意图;
图2为本发明实施例1中上传电池相机网络地址的流程示意图;
图3为本发明实施例1中P2P应答任务的流程示意图;
图4为本发明实施例2中电池相机视频方法的流程示意图;
图5为本发明实施例2中建立历史图像帧数据库的流程示意图;
图6为本发明实施例2中获取各历史图像帧的流程示意图;
图7为本发明实施例3中电池相机视频数据传输方法的流程示意图;
图8为本发明实施例3中播放历史图像帧的流程示意图;
图9为本发明实施例3中获取第一视频数据的流程示意图;
图10为本发明实施例3中获取第二视频数据的流程示意图;
图11为本发明实施例4中电池相机唤醒装置的结构示意图;
图12为本发明实施例5中电池相机视频装置的结构框图;
图13为本发明实施例6中电池相机视频数据传输装置的结构示意图;
图14为本发明实施例7中的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。在本发明的描述中,需要理解的是,术语“中心”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本申请和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。如果不冲突,本发明施例以及实施例中的各个特征可以相互结合,均在本发明的保护范围之内。
本发明的电池相机视频播放方法,包括:用户通过App向辅助服务器发出视频请求,辅助服务器根据视频请求指令向电池相机发出唤醒指令,电池相机根据唤醒指令进行唤醒,然后与App建立P2P通信网络;用户通过App接收并播放通过P2P传输的电池相机采集的视频数据,其中,电池相机为采用蓄电池进行供电的摄像头。
本发明的电池相机视频播放方法,具体包括:
第一步,获取视频请求指令和所述视频请求指令的时间信息;
具体的,在接收到用户通过App发出的视频请求指令时,获取此时的时间信息,该时间信息可以是用户发出请求指令的发出时间,也可以是接收到视频请求指令的接收时间。
第二步,根据所述视频请求指令对电池相机进行唤醒并创建P2P网络连接;
具体的,P2P网络的建立包括网络穿透任务和网络应答任务,在没有视频请求指令前,电池相机端通过电池相机的wifi模块建立wifi对等网络,通过wifi对等网络wifi模块和主控芯片进行共享套接字,以便实时上传电池相机的网络地址,这样在用户通过App发出视频请求指令时,可以直接获取电池相机的网络地址,无需电池相机根据视频请求指令进行初始化后再将网络地址发送给用户,减少唤醒时间;在接收到唤醒指令后直接进行初始化、唤醒动作,然后进行应答,无需等待用户接收电池相机网络地址的时间,加快唤醒速度。
第三步,在所述P2P网络建立过程中,播放与所述时间信息对应的历史图像帧;
具体的,电池相机视频永远存在唤醒时间,在唤醒过程中,由于婴儿每天的作息时间和活动范围是非常规律的,所以在等待视频建立的过程中,用与当前时间对应的历史图像帧来模拟当前真实环境,给用户一个已经开始视频的假象,提高用户的体验效果;进一步的,该历史图像为清晰度低的图像,如经过高斯模糊处理。
第四步,在所述P2P网络建立后,以第一编码码率通过所述P2P网络进行视频播放;
其中,所述第一编码码率为逐渐递增的动态码率。
具体的,当P2P建立后,开始以低码率进行视频传输,不断提升视频码率,可以保证由历史图像到真实场景的视频画面自然过渡,大概在2到3个I帧的时长,视频数据包括I帧和P帧,I帧为关键帧,P帧为普通帧,编码时,一个I帧后面对应多个P帧,只有在I帧解码成功后P帧才会解码,在开始视频阶段,仅传输I帧,不传输P帧,可以缩短自然过渡时间。
实施方式一
实施例1
请参见图1,图1为本发明实施例1中电池相机唤醒方法的流程示意图;所述方法包括:
S10:通过共享网络套接字,实时上传电池相机的网络地址;
具体的,在具有相机的电池摄像头终端中,电池摄像头的通讯模块与主控模块建立对等网络,并在该对等网络中建立套接字服务端和套接字客户端,从而实现套接字共享;通过通讯模块将电池摄像头的网络地址上传至P2P(Peer to peer networking,对等网络)的辅助服务器,网络地址为该电池摄像头的IP地址,其中,通信模块和主控模块均可以作为套接字服务端和套接字客户端,通信模块为wifi芯片,主控模块为主控芯片。
在一实施例中,请参见图2,在电池相机休眠状态下,所述S10包括:
S101:利用所述电池相机的wifi模块创建wifi对等网络,并在所述wifi对等网络中构建套接字服务端;
具体的,电池相机包括主控模块和wifi模块,通过wifi模块创建wifi对等网络,并在该wifi对等网络中建立套接字服务端。
S102:将所述电池相机的主控模块加入所述wifi对等网络,并在所述wifi对等网络中创建套接字客户端;
具体的,电池相机在没有与任何通信设备进行视频数据传输时,主控模块加入wifi模块创建的wifi对等网络,并在该wifi对等网络中创建套接字客户端,从而在该wifi对等网络中存在由套接字服务端和套接字客户端构建的数据传输通道。
S103:通过所述套接字服务端和所述套接字客户端提供的传输通道,所述wifi模块从所述主控芯片实时获取所述电池相机的网络地址,并将所述网络地址上传。
具体的,通过所述套接字服务端和所述套接字客户端提供的传输通道,实现共享网络套接字,从而wifi模块可以获取记录在主控模块中电池相机的网络地址,即IP地址;然后将该IP地址上传至P2P的辅助服务器,辅助服务器为第一终端设备和第二终端设备建立P2P的服务器;此处P2P为电池相机和移动端App之间的点对点网络。
S11:在接收到电池相机唤醒指令之前,根据所述网络地址完成P2P网络连接的网络穿透任务;
具体的,在接收到电池相机唤醒指令之前,即电池相机处于休眠状态,主控芯片和wifi芯片均处于待机工作状态,电池相机的wifi芯片通过共享网络套接字方法,获取主控芯片中记录的电池相机的IP地址,并主动上报至P2P的辅助服务器,从而在未接收到唤醒指令时,电池相机的IP地址已经被辅助服务器获取,辅助服务器无需在接收到唤醒指令后去获取电池相机的IP地址,获取电池相机的IP地址的网络任务属于P2P网络连接中网络穿透的任务部分,该部分任务记为网络穿透任务。
S12:在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务;
其中,在完成网络穿透任务和网络应答任务后,P2P网络通信链路建立完成。
具体的,用户通过移动端的App发出视频查看请求指令,P2P的辅助服务器根据该视频查看请求指令,向电池摄像头发出唤醒指令,电池摄像头在接收到电池摄像头的唤醒指令之后,电池摄像头根据该唤醒指令进行系统初始化,在系统初始化后开始P2P网络连接的网络应答的部分任务,记为网络应答任务;从而完成P2P的建立,然后用户通过App与电池摄像头建立的P2P查看电池摄像头的监控区域内的实时画面。
在一实施例中,请参见图3,所述S12包括:
S121:根据所述唤醒指令唤醒电池相机,在电池相机唤醒后对所述电池相机进行系统初始化;
具体的,移动端的App向辅助服务器发出视频请求指令,辅助服务器以报文形式通过wifi芯片向电池相机发送唤醒指令,电池相机通过wifi对等网络的共享网络套接字,接收该唤醒指令,然后对电池相机进行唤醒,然后进行初始化操作。
S122:在电池相机唤醒后,通过P2P的辅助服务器查询用于建立P2P的IP网络位置;
具体的,电池相机唤醒后,通过辅助服务器查询需要与电池相机建立P2P的移动终端的IP网络位置,即App所在的移动端的IP地址和端口。
S123:根据所述IP网络位置建立连接,完成P2P网络连接的网络应答任务。
具体的,电池相机在唤醒后,尝试连接通过从辅助服务器查询的IP网络位置,当连接成功后,表示P2P的网络应该任务完成,至此电池相机和移动端的通信链路建立完成,用户可以通过移动端的App显示界面查看电池相机的视频数据。
在一实施例中,所述S122还包括,在电池相机唤醒后,电池相机对监控区域进行拍照,得到抓拍的图像帧,并上传抓拍的图像帧至辅助服务器进行存储。
在一实施例中,对电池相机唤醒还包括:
获取视频请求指令;
具体的,当用户需要远程查看电池相机的监控区域时,用户通过移动端的App发出视频请求指令至辅助服务器,该辅助服务器是用于电池相机与移动端建立P2P。
根据所述视频请求指令生成电池相机唤醒的唤醒指令,同时提取所述视频请求指令对应的时间信息;
具体的,辅助服务器在接收到用户通过App发出的视频请求指令后,向电池相机发出用于唤醒电池相机的报文,同时,获取该视频请求指令的时间信息,该时间信息可以是用户发出请求指令的发出时间,也可以是接收到视频请求指令的接收时间。
根据所述视频请求指令的时间信息,在移动端的App显示界面显示辅助服务器中与所述时间信息对应的历史图像帧。
具体的,辅助服务器根据时间信息,遍历历史图像帧数据库,将与该时间信息相同,日期不同的历史图像帧发送给用户移动端的App,在App界面上显示该时间信息对应的历史图像帧;如:本次视频请求指令对应的时间信息为14:00,则将历史图像帧中属于14:00的图像帧在App的显示界面显示,以便用户在发出视频请求后,电池相机在唤醒、P2P建立的等待时间内可以看到监控区域的虚拟画面;电池相机的监护对象为婴儿、老人等生活规律的目标对象;因为婴儿、老人每天各时间段的活动内容差异较小,采用展示与请求时间相同的历史图像帧,可以起到视频请求与视频数据传输同步的效果,提高用户体验效果。
在一实施例中,所述根据所述视频请求指令的时间信息,在移动端的App显示界面显示辅助服务器中与所述时间信息对应的历史图像帧包括:
对电池相机唤醒时抓拍的图像帧按抓拍时间进行分类,得到与各抓拍时间对应的各历史图像帧组;
具体的,电池相机每次被唤醒时,第一时间抓拍一张图像,作为此时监控区域的环境图像并上传至辅助服务器,辅助服务器对上传的各图像帧按抓拍时间进行分类,得到与抓拍时间对应的各图像帧组;如电池相机在14:00唤醒时的抓拍图像组、08:00唤醒时的抓拍图像图、08:45唤醒时的抓拍图像图、12:00唤醒时的抓拍图像图等。
需要说明的是:各历史图像帧组中各帧图像的抓拍时间存在一个范围,如抓拍时间差异设置为3分钟,则14:00对应的各帧图像的时间为每天14:00~14:03这3分钟内的抓拍图像。
对各所述历史图像帧组中的各图像帧进行融合,得到与电池相机在各唤醒时间相对应的所述历史图像帧;
具体的,在对抓拍的各帧图像按抓拍时间进行分类后,生成与各抓拍时间对应的各历史图像帧组,然后各历史图像帧组融合出对应的各历史图像帧,各历史图像帧用于用户通过App在对应时间发出视频请求时,选择与请求时间相对应的历史图像帧在App端显示。
根据所述视频请求指令的时间戳,在移动端的App显示界面显示与所述时间戳对应的历史图像帧。
在一实施例中,所述对各所述历史图像帧组中的各图像帧进行融合,得到与电池相机在各唤醒时间相对应的所述历史图像帧包括:
将各所述历史图像帧组中的各图像帧按抓拍时间存储在第一存储区;
具体的,各抓拍图像帧存储在第一存储区,且在各历史图像组中按抓拍时间对应的日期进行排序,以便电池相机监控区域变换时,可以及时由最新的抓拍图像帧更新历史图像帧,使得历史图像帧与当前监控画面相似度高,提高用户体验效果。
分别对所述第一存储区间中各所述历史图像帧组的各抓拍图像帧进行融合,输出各所述历史图像帧至第二存储区存储。
具体的,对各历史图像帧组,以预设规则分别对各组的抓拍的图像帧进行融合,得到对应历史图像帧组的各历史图像帧,其中,预设规则包括不限于:用于图像合成的抓拍图像帧数量、用于融合的各抓拍图像帧的相似度,以及用于融合的各抓拍图像帧的抓拍时刻。
采用本实施例的电池相机唤醒方法,通过共享网络套接字,电池摄像头在休眠状态下,主动向辅助服务器上报网络地址;从而在接收到唤醒指令前完成P2P的网络穿透任务,在接收到用户发出的视频请求后,电池摄像头开始从休眠状态唤醒,然后完成P2P网络搭建剩余的网络应答任务,完成P2P网络搭建,节约用户视频请求的等待时间,提高用户体验效果。
实施例2
请参见图4,图4为本发明实施例2电池相机视频方法的流程示意图,实施例2是基于实施例1利用电池相机对婴儿、老人进行看护的一具体实施方式,所述方法包括:
S20:获取电池相机的唤醒指令;
具体的,电池相机在进行婴儿、老人看护时,为了节约电量;通常对监控区域的视频数据进行边缘端存储,即不向远端传输视频数据,以延长电池相机的待机时间;当用户通过移动端的App进行电池相机的视频请求时,通过App向辅助服务器发送视频请求指令,远端服务器根据该视频请求指令向电池相机终端发出唤醒指令,在从电池相机根据该唤醒指令唤醒后,向服务器发送电池相机的网络位置(IP地址),辅助服务器将该网络位置转发给用户的App,从而用户端得到电池相机的网络地址,然后接收到电池相机关于该视频请求的应答信息,从而完成移动端与电池相机P2P建立,然后通过P2P网络通信链路进行视频数据传输。
S21:根据所述唤醒指令对应的时间信息遍历历史图像帧数据库,输出与所述唤醒指令的时间信息对应的历史图像帧至用户终端;
具体的,在移动端与电池相机P2P网络通信链路搭建过程中,服务器提取当前唤醒指令对应的时间信息,遍历历史图像帧数据库;将与本次请求时间相同的历史视频请求对应的历史图像帧传输至移动端,用户可以在App的视频观看界面看到该历史图像帧,因为在婴儿、老人的看护场景中,不同日期的同一时刻场景差异小,通过播放同一时刻的历史图像模拟真实监控视频给用户,使得用户在视觉上感受到已经进入视频观看过程,提高用户的体验效果。
S22:在所述用户终端对应的视频观看界面播放所述历史图像帧;
其中,所述历史图像帧数据库的各帧图像为对电池相机每次唤醒时抓拍的图像按抓拍时刻进行处理后的图像帧。
具体的,电池相机每次唤醒时,均会对监控区域进行一次抓拍,将抓拍的图像帧上传至辅助服务器,并存储在第一存储区;然后对第一存储区中抓拍的图像帧进行融合处理,包括不限于采用高斯模糊进行图像融合,得到低码率的历史图像帧,并将历史图像帧存储在第二存储区。
在一实施例中,请参见图5,所述S21包括:
S211:当每次电池相机唤醒后,控制电池相机进行抓拍,得到抓拍的各图像帧;
具体的,电池相机每次被唤醒后,均会对电池相机对应的监控区域进行一次抓拍,从而得到每天任一时间唤醒电池相机抓拍的多张历史图像。
S212:根据抓拍的各图像帧,建立所述历史图像帧数据库;
具体的,对抓拍的各图像帧进行分类、高斯模糊、融合等处理,得到与各唤醒时间相对应的各历史图像帧,从而得到由各历史图像帧组成的历史图像帧数据库。
S213:根据所述唤醒指令对应的时间信息遍历历史图像帧数据库,输出与所述唤醒指令的时间信息对应的历史图像帧至用户终端。
在一实施例中,所述S21包括:
获取与本次唤醒指令对应的第一历史图像帧和前一次唤醒指令对应的第二时间抓拍的第一抓拍图像;
对所述第一历史图像帧和所述第一抓拍图像中的特征图像进行相似度对比,根据对比结果矫正所述第一历史图像帧,得到与本次所述唤醒指令的时间信息对应的历史图像帧,输出所述历史图像帧至用户终端;
其中,所述特征图像为不包括婴儿的可移动物体,所述相似度对比包括可移动物件的类别和位置。具体的,根据本次唤醒指令的唤醒时间,确定在电池相机唤醒阶段(P2P建立阶段)辅助服务器发送至用户App进行显示的第一历史图像帧,同时,获取最近一次唤醒电池相机时,电池相机抓拍的第一图像;将第一历史图像和第一图像进行特征图像的相似度对比,特征图像为不包括婴儿的可移动物件,主要是:玩具、书本等小物件,具体为,对比特征图像的类别、位置信息;从而确定第一历史图像帧相较于第一图像在小物件上的差异,然后对第一历史图像帧进行校准,是的历史图像所模拟出来的场景更接近当前摄像头检测区域的环境,提高模拟效果。
在一实施例中,所述对所述第一历史图像帧和所述第一抓拍图像中的特征图像进行相似度对比,根据对比结果矫正所述第一历史图像帧,得到与本次所述唤醒指令的时间信息对应的历史图像帧,输出所述历史图像帧至用户终端包括:
根据对比结果,确定所述第一历史图像帧中需要调整的第一图像区域;
获取所述第一图像中与所述第一图像区域对应的各像素点的第一色彩信息;
利用所述第一色彩信息替换所述第一图像区域中各像素点的色彩信息,得到与本次所述唤醒指令的时间信息对应的历史图像帧,输出所述历史图像帧至用户终端;
其中,第一图像区域至少包括以下之一:需要替换物件图像、删除物件图像、删除物件图像后增补的背景图像。
具体的,当第一图像中存在物品A在第一历史图像帧中不存在,则将第一历史图像帧中与物品A对应的区域记为第一图像区域,获取物品A的所有像素点的位置信息和各像素点的色彩信息,利用各像素点的色彩信息去替换第一图像区域中对应的各像素点的色彩信息,从而将物品A的图案转移至第一图像区域,且亮度信息为第一图像区域的原始亮度信息;同理,当第一历史图像帧中存在的物品B在第一图像中不存在,则获取第一图像中与物品B对应的第一图像区域的各像素点的色彩信息,利用各像素点的色彩信息去替换第一图像区域中物品B对应的各像素点的色彩信息,婴儿每天生活很规律,由于婴儿的成长是对不同事物的不断认识,从而导致婴儿对玩具、书籍、卡片的喜好是不固定的,因此及时在相同的时间段内,婴儿附近的小物件也会不同,采用该方法可以提高环境模拟的真实性,提高用户视频体验。
在一实施例中,请参见图6,所述S212包括:
S2121:获取抓拍的各帧图像的抓拍时间;
具体的,电池相机每次被唤醒时,对当前监控区域进行抓拍,记录抓拍的图像帧的抓拍时间。
S2122:根据各所述抓拍时间对抓拍的各帧图像进行分类,得到各历史图像帧组;
具体的,按抓拍时间相同的图像帧进行分类,得到多组抓拍的图像;如抓拍时间为每天的0点3分、0点6分…8点、8点3分、8点6分…23点51分、23点57分和24点0分等,将抓拍图像的每天抓拍时间相同进行归类,得到抓拍时间相同的历史图像帧组;如电池相机在每天8点被唤醒的次数为20次,那么唤醒时间为8点的历史图像帧组包括20帧图像;如电池相机在每天12点被唤醒的次数为15次,那么共抓拍了15帧图像,则唤醒时间为12点的历史图像帧组包括15帧图像。
S2123:对各所述历史图像帧组的各图像帧通过模糊处理进行图像融合,得到与各所述历史图像帧组对应的各历史图像帧;
其中,各所述历史图像帧组成所述历史图像帧数据库。
具体的,在对抓拍的图像帧按抓拍时间分组后,对各历史图像帧组中的各图像帧利用模糊处理,从而将不同图像帧的各像素点的色彩信息进行融合,得到各组历史图像帧,该历史图像帧是一个模糊的、低码率图像,各组的历史图像帧组成历史图像帧数据库,当用户从App端发出视频请求时,根据请求时间从历史图像帧数据库选择该时间对应的历史图像帧发送给用户进行播放。
在一实施例中,所述根据各所述抓拍时间对抓拍的各帧图像进行分类,得到各历史图像帧组包括:
获取对时间进行分段的预设时长和抓拍的各帧图像的抓拍时间;
具体的,将唤醒时间相近的归为同一唤醒时间,设置同一唤醒时间的时间差对应的预设时长;如预设时长为3分钟,则电池相机在每天上午8点被唤醒包括:每天上午8点至上午8点3分之内电池相机的所有唤醒事件。
根据所述预设时长对时间分段,得到连续的各时间段;
具体的,按预设时长将每天24小时分成多个连续的时间段,如按预设时长为5分钟,则将每小时分为12个连续的时间段。
根据各所述抓拍时间所属的时间段,对抓拍的各帧图像归类,得到各所述历史图像帧组。
具体的,将每天24小时按预设时长划分后,根据各帧图像的抓拍时间,将各帧图像归入对应的时间段,将存在抓拍的图像帧的时间段记为对应的历史图像帧组。
在一实施例中,所述对各所述历史图像帧组的各图像帧通过模糊处理进行图像融合,得到与各所述历史图像帧组对应的各历史图像帧包括:
获取用于图像融合需要的图像帧数量的数量阈值;
具体的,历史图像帧数据库中的各历史图像帧是由一定数量的图像帧合成的,设置合成历史图像帧所需要的图像帧的数量阈值。
将当前抓拍的图像帧与对应所述历史图像帧组中前一次抓拍的图像帧进行相似度对比,输出第一对比结果;
根据所述第一对比结果,输出下一次在当前时间唤醒电池相机对应的历史图像帧。
具体的,电池相机每次唤醒后抓拍的图像帧上传至辅助服务器,并存储在第一存储区内,同时将本次抓拍的图像帧与前一次抓拍的图像帧进行相似度对比,根据对比结果确定是否需要更新对应的历史图像帧;如果需要更新,则更新历史图像帧,当下一次当前时间唤醒电池相机时,在用户App端显示更新后的历史图像帧;如无需更新,当下一次当前时间唤醒电池相机时,在用户App端依然显示之前的历史图像帧。
需要说明的是:相似度对比包括不限于目标场景对比、目标对象的活动状态对比;如婴儿、老人监控时:电池相机在同一空间下监控角度改变引起的场景背景变化、电池相机监控的空间变化引起的场景背景变化、婴儿和/或老人作息时间变化引起的动作状态变化,如季节变化导致婴儿、老人作息时间变化。
在一实施例中,若第一对比结果为,当前抓拍的图像帧与前一次抓拍的图像帧相似,则所述根据所述第一对比结果,输出下一次在当前时间唤醒电池相机对应的历史图像帧包括:
获取与当前抓拍的图像帧相似且连续的图像帧对应的连续图像帧数量;
具体的,若当前抓拍的图像帧与在这之前同时间抓拍的前一次图像帧相似,则将这两张图像帧记为相似且连续的两张图像帧,以此类推,获取连续且相似的图像帧数量。
将所述连续图像帧数量与所述数量阈值进行对比,输出第二对比结果;
根据所述第二对比结果,输出下一次在当前时间唤醒电池相机对应的历史图像帧。
具体的,将连续且相似的图像帧数量与数量阈值对比,将对比结果记为第二对比结果,如果满足要求则更新历史图像帧,否则,不对历史图像帧进行更新,依然保留在先的历史图像帧。
在一实施例中,所述根据所述第二对比结果,输出下一次在当前时间唤醒电池相机对应的历史图像帧包括:
若第二对比结果为所述连续图像帧数量大于等于所述数量阈值,则从所述连续图像帧数量选择与所述数量阈值相同的多张图像帧进行融合,得到新的历史图像帧;其中,新的历史图像帧为包括当前抓拍的图像帧的多张连续的图像帧通过模糊处理进行图像融合后的图像。
具体的,若相似且连续的图像帧大于或等于数量阈值,则从相似且连续的图像帧中选择与数量阈值相等的多张图像帧进行融合,得到新的历史图像帧;选取的多帧图像为包括本次抓拍的图像帧,以及与本次抓拍的图像帧连续的各帧图像。如数量阈值为3张图像,相似且连续的图像帧为5张,依次为第1张、第2张、第3张、第4张和第5张,本次抓拍的图像为第5张,则选择用于融合的3张图像为第3张、第4张和第5张,将这3张图像进行高斯模糊后融合,得到新的历史图像帧,在下一次这个时间唤醒电池相机时,将该新的历史图像帧在用户App端进行显示。
若第二对比结果为所述连续图像帧数量小于所述数量阈值,则将前一历史图像帧通继续作为该所述历史图像帧组的历史图像帧。
具体的,若相似且连续的图像帧小于数量阈值,则不更新当前历史图像帧;如数量阈值为3张图像,相似且连续的图像帧为2张,依次为第1张和第2张,当前历史图像帧记为图像帧A,则在下一次这个时间唤醒电池相机时,依然将图像帧A发送至用户App端进行播放。
在一实施例中,若第一对比结果为,当前抓拍的图像帧与前一次抓拍的图像帧不相似,则将前一历史图像帧通继续作为该所述历史图像帧组的历史图像帧。
具体的,若当前抓拍的图像帧与前一次抓拍的图像帧不相似,则不更新当前的历史图像帧,如将当前历史图像帧记为图像帧A,则在下一次这个时间唤醒电池相机时,依然将图像帧A发送至用户App端进行播放。
采用本实施例的电池相机视频方法,通过电池每次被唤醒时抓拍一张图像发送至服务器,在服务器建立历史图像帧数据库,当用户每次发出视频请求时,在电池相机与用户端建立P2P过程中,服务器将历史图像帧数据库中与本次唤醒时间对应的历史图像帧发送至用户端进行播放,可以减少用户视频请求的等待时间,同时,基于特定场景在某一特定时间监控区域的画面差异小,播放历史图像使得用户提前进入监控区域的模拟场景达到视频显示效果,提高用户体验效果。
实施例3
请参见图7,图7为本发明实施例3电池相机视频数据传输方法,实施例3是在实施例1和实施例2的基础上用户通过App远程与电池相机建立P2P进行视频的具体实施方式,所述方法包括:
S30:获取用户端发出的视频请求指令;
具体的,电池相机在进行婴儿、老人看护时,为了节约电量;通常对监控区域的视频数据进行边缘端存储,即不向远端传输视频数据,以延长电池相机的待机时间;当用户通过移动端的App进行电池相机的视频请求时,通过App向辅助服务器发送视频请求指令,远端服务器根据该视频请求指令向电池相机终端发出唤醒指令,从而获取电池相机的IP位置信息,建立移动端与电池相机P2P网络通信链路进行视频数据传输。
S31:根据所述视频请求指令,在电池相机唤醒前,输出历史图像帧至用户端;
具体的,在电池相机唤醒前,以及移动端与电池相机P2P网络通信链路搭建过程中,服务器提取当前视频请求指令中的时间信息,遍历历史图像帧数据库;将与本次视频请求时间相同的历史视频请求对应的历史图像帧传输至移动端,用户可以在App的视频观看界面看到该历史图像帧,因为在婴儿、老人的看护场景中,不同日期的同一时刻场景差异小,通过播放同一时刻的历史图像模拟真实监控视频给用户,使得用户在视觉上感受到已经进入视频观看过程,提高用户的体验效果。
在一实施例中,请参见图8,所述S31包括:
S311:根据所述视频请求指令,生成用于唤醒电池相机的唤醒指令;
S312:根据所述唤醒指令对电池相机进行唤醒;
S313:在电池相机唤醒过程中,根据视频请求指令的时间戳遍历历史图像帧数据库,输出与所述视频请求指令的时间戳对应的历史图像帧至用户端。
具体的,在移动端与电池相机P2P网络通信链路搭建过程中,服务器提取当前视频请求指令中的时间信息,遍历历史图像帧数据库;将与本次视频请求时间相同的历史视频请求对应的历史图像帧传输至移动端,用户可以在App的视频观看界面看到该历史图像帧,因为在婴儿、老人的看护场景中,不同日期的同一时刻场景差异小,通过播放同一时刻的历史图像模拟真实监控视频给用户,使得用户在视觉上感受到已经进入视频观看过程,提高用户的体验效果。
在一实施例中,在电池相机唤醒后还包括:
在所述电池相机唤醒后,对监控区域进行抓拍,得到抓拍的图像帧;
具体的,电池相机每次被唤醒后,均会对电池相机对应的监控区域进行一次抓拍,从而得到每天任一时间唤醒电池相机抓拍的多张历史图像。
将抓拍的图像帧上传至辅助服务器;
根据辅助服务器存储的各抓拍的图像帧建立所述历史图像帧数据库。
具体的,对抓拍的各图像帧进行分类、高斯模糊、融合等处理,得到与各唤醒时间相对应的各历史图像帧,从而得到由各历史图像帧组成的历史图像帧数据库。
S32:在电池相机唤醒后的第一时间段内,以第一编码码率对电池相机采集的视频数据进行编码,得到在用户端观看的第一视频数据;
具体的,电池相机唤醒,并且与用户端的App建立P2P后,将视频编码器设置为低码率的第一编码码率对电池相机采集的视频数据进行编码,将第一编码码率编码的视频数据记为第一视频数据,从而用户在App端看到的视频数据由历史图像帧逐步平滑的过渡到电池相机采集的实时视频数据,提高用户观看视频的视觉体验。
在一实施例中,第一编码码率为动态码率,所述动态码率随用户端与电池相机的P2P建立时间逐步递增。
具体的,第一编码码率为动态码率,且随用户端与电池相机的P2P建立时间逐步增加,在第一时间段结束后,编码码率达到正常码率对应的第二编码码率。
在一实施例中,请参见图9,所述S32包括:
S321:根据所述第一编码码率对第一时间段内的视频数据进行编码,得到与视频数据对应的第一I帧数据和第一P帧数据;
具体的,根据视频帧率,采用第一编码码率对视频数据进行编码,如视频帧率为20帧/秒,则编码一个I帧后再该I帧基础上编码19个P帧,重复上述操作,直至第一时间段结束。
S322:舍去所述第一P帧数据,得到仅包括连续的第一I帧数据的所述第一视频数据。
具体的,将采用第一编码码率编码的所有第一P帧数据舍去,仅保留第一I帧数据,也就是说,将第一I帧数据上传,第一P帧数据不上传,在用户端下载的视频数据为不包括P帧的连续I帧数据,从而保证前期过渡时间段内传输的数据量最小,提高视频数据传输效率。
在一实施例中,在进行所述第一视频数据播放前还包括:
获取所述第一视频数据的第一帧图像;
具体的,电池相机和用户端App之间P2P建立完成后,电池相机开始以第一编码码率对采集的视频数据进行编码,获取编码的第一帧图像,也就是第一个I帧图像。
将所述第一帧图像与所述历史图像帧进行对比,得到所述第一图像帧与所述历史图像帧的图像差异信息;
具体的,将第一帧图像与此时在App界面显示的历史图像帧进行对比,确定两张图像之间的图像差异信息,具体为,将图像按预设规则分为多个区域,如按9宫格方式分为9个子图像,按内外环形分为内中外三圈,每一圈包含多个子图像,又或者以固定尺寸的,随机将图像分为多个子图像,具体划分方式不仅限于上述几种;每个子图像分别进行对比,得到两张图像的图像差异信息,异常图像信息包括不限于各子图像之间图像类型差异、色彩差异、亮度差异、保护度差异等。
根据所述图像差异信息,对所述第一图像帧进行解码播放;
具体的,预存有多种关于第一张图像的解码方式,解码方式包括不限于:从图像中心向图像边缘扩展方式进行解码、从图像边缘向图像中心收缩方式进行解码、从上向下的方式进行解码、从下向上的方式进行解码、从左向右的方式进行解码、以螺旋形式进行解码等。
其中,所述图像差异至少包括以下之一:存在图像差异的图像位置信息、图形类别信息、存在图像差异的图像区域的色彩差值、亮度差值、饱和度差值。
在一实施例中,所述根据所述图像差异信息,对所述第一图像帧进行解码播放包括:
对所述历史图像帧的画面进行分区,得到多个子画面;
根据所述图像差异的色彩差值或亮度差值或饱和度差值的大小以降序或升序方式对各所述子画面进行排序,得到各所述子画面的预解码顺序;
具体的,在得到第一图像和历史图像帧中各子图像之间的色差、亮度、饱和度的差值后,对各子图像按对应差值的大小进行排序,然后以降序或升序的方式生成预解码顺序。
将所述预解码顺序与数据库中各解码方式的解码顺序一一对比,得到数据库中各解码方式的解码顺序与所述预解码顺序的重合度;
将符合要求的所述重合度对应的解码方式作为目标解码方式,以所述目标解码方式对所述第一图像帧进行解码播放。
具体的,将预解码顺序与数据库中各解码方式的解码顺序一一对比,确定预解码顺序与各解码方式中的解码顺序重合度,选择重合度符合要求的解码方式作为目标解码方式,例如,设置重合度为80%,即将与预解码顺序的重合度在80%的解码方式对第一图像帧进行解码,若存在多个符合要求的解码方式,优选数据处理量小,重合度高的作为目标解码方式;通过该方式可以优先将差异大的画面先解码,然后逐步解码差异小的画面,实现历史图像帧与第一图像自然过渡,提高用户体验效果。
S33:在电池相机唤醒后的第一时间段之后,以第二编码码率对电池相机采集的视频数据进行编码,得到在用户端观看的第二视频数据;
其中,所述第一视频数据的码率小于第二视频数据。
具体的,在视频编码器的码率逐步增加至第二编码码率后,开始以第二编码码率编码电池相机采集的实时视频数据,得到第二视频数据。
在一实施例中,请参见图10,所述S33包括:
S331:根据所述第二编码码率对第一时间段之后的视频数据进行编码,得到与视频帧率对应的第二I帧数据和第二P帧数据;
具体的,根据视频帧率,采用第二编码码率对视频数据进行编码,如视频帧率为20帧/秒,则编码一个I帧后再该I帧基础上编码19个P帧,重复上述操作,直至视频结束。
S332:根据所述帧率对所述第二I帧数据和第二P帧数据进行打包,得到所述第二视频数据。
具体的,根据视频帧率对视频编码器编码的I帧数据和P帧数据进行打包,得到完整的视频数据,然后进行上传,在用户端接收的视频数据为数据包。如视频帧率为20帧/秒,则编码一个I帧后再该I帧基础上编码19个P帧,然后这20帧图像组成一个数据包,得到一个GOP(一组图片),重复上述操作,直至视频结束。
在一实施例中,在电池相机唤醒前还包括:
利用所述电池相机的wifi模块创建wifi对等网络,并在wifi对等网络中构建套接字服务端;
具体的,电池相机包括主控模块和wifi模块,通过wifi模块创建wifi对等网络,并在该wifi对等网络中建立套接字服务端。
将所述电池相机的主控模块加入所述wifi模块创建的wifi对等网络,并在所述wifi对等网络中创建套接字客户端;
具体的,电池相机在休眠状态下,主控模块加入wifi模块创建的wifi对等网络,并在该wifi对等网络中创建套接字客户端,从而在该wifi对等网络中存在由套接字服务端和套接字客户端构建的数据传输通道。
通过所述套接字服务端和所述套接字客户端提供的传输通道,所述wifi模块从所述主控芯片获取所述电池相机的网络地址,并将所述网络地址上传。
具体的,通过所述套接字服务端和所述套接字客户端提供的传输通道,实现共享网络套接字,从而wifi模块可以获取记录在主控模块中电池相机的网络地址,即IP地址;然后将该IP地址上传至P2P的辅助服务器,辅助服务器为第一终端设备和第二终端设备建立P2P的服务器;此处P2P为电池相机和移动端App之间的点对点网络。
采用本实施例的电池相机视频数据传输方法,在接收到用户从用户端发出的视频请求指令时,将存储的由电池相机拍摄的历史图像帧发送至用户端进行播放,同时对电池相机进行唤醒,在电池相机唤醒后的过渡时间段内以低码率视频传输至用户端,在正常时间段内以正常码率进行视频;可以提高电池相机视频等待时间视频体验效果,以及通过设置低码率的过渡视频时间可以平滑过渡历史图像帧至正常视频的体验效果。
实施例4
本发明实施例4基于实施例1至实施例3的方法对应还提供了一种电池相机唤醒装置,请参见图11,包括:
网络地址上传模块:用于通过共享网络套接字,实时上传电池相机的网络地址;
第一网络搭建模块:用于在接收到电池相机唤醒指令之前,根据所述网络地址完成P2P网络连接的网络穿透任务;
第二网络搭建模块:用于在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务;
其中,在完成网络穿透任务和网络应答任务后,P2P网络通信链路建立完成。
采用本实施例的电池相机唤醒装置,通过共享网络套接字,电池摄像头在休眠状态下,主动向辅助服务器上报网络地址;从而在接收到唤醒指令前完成P2P的网络穿透任务,在接收到用户发出的视频请求后,电池摄像头开始从休眠状态唤醒,然后完成P2P网络搭建剩余的网络应答任务,完成P2P网络搭建,节约用户视频请求的等待时间,提高用户体验效果。
需要说明的是,该装置还包括实施例1至实施例3记载的其余技术方案,此处不再赘述。
实施例5
在实施例4的基础上对电池相机的具体应用,请参见图12,图12为一种电池相机视频装置,所述装置包括:
指令获取模块:用于电池相机的唤醒指令;
指令处理模块:用于根据所述唤醒指令对应的时间信息遍历历史图像帧数据库,输出与所述唤醒指令的时间信息对应的历史图像帧至用户终端;
视频播放模块:用于
在所述用户终端对应的视频观看界面播放所述历史图像帧;
其中,所述历史图像帧数据库的各帧图像为对电池相机每次唤醒时抓拍的图像按抓拍时刻进行处理后的图像帧。
采用本实施例的电池相机视频装置,通过电池每次被唤醒时抓拍一张图像发送至服务器,在服务器建立历史图像帧数据库,当用户每次发出视频请求时,在电池相机与用户端建立P2P过程中,服务器将历史图像帧数据库中与本次唤醒时间对应的历史图像帧发送至用户端进行播放,可以减少用户视频请求的等待时间,同时,基于特定场景在某一特定时间监控区域的画面差异小,播放历史图像使得用户提前进入监控区域的模拟场景达到视频观看效果,提高用户体验效果。
需要说明的是,该装置还包括实施例4记载的其余技术方案,此处不再赘述。
实施例6
在实施例4和实施例5的基础上对电池相机视频的进一步具体应用,请参见图13,图13为一种电池相机视频数据传输装置,所述装置包括:
指令获取模块:用于获取用户端发出的视频请求指令;
指令处理模块:用于根据所述视频请求指令,在电池相机唤醒前,输出历史图像帧至用户端;
第一编码模块:用于在电池相机唤醒后的第一时间段内,以第一编码码率对电池相机采集的视频数据进行编码,得到在用户端观看的第一视频数据;
第二编码模块:用于在电池相机唤醒后的第一时间段之后,以第二编码码率对电池相机采集的视频数据进行编码,得到在用户端观看的第二视频数据;
其中,所述第一视频数据的码率小于第二视频数据的码率。
采用本实施例的电池相机视频数据传输装置,在接收到用户从用户端发出的视频请求指令时,将存储的由电池相机拍摄的历史图像帧发送至用户端进行播放,同时对电池相机进行唤醒,在电池相机唤醒后的过渡时间段内以低码率视频传输至用户端,在正常时间段内以正常码率进行视频;可以提高电池相机视频等待时间视频体验效果,以及通过设置低码率的过渡视频时间可以平滑过渡历史图像帧至正常视频的体验效果。
需要说明的是,该装置还包括实施例4和/或实施例5记载的其余技术方案,此处不再赘述。
实施例7
本发明提供了一种电子设备和存储介质,如图14所示,包括至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令。
具体地,上述处理器可以包括中央处理器(CPU),或者特定集成电路(ApplicationSpecific Integrated Circuit,ASIC),或者可以被配置成实施本发明实施例的一个或多个集成电路,电子设备至少包括以下之一:摄像头、具有摄像头的移动设备、具有摄像头的穿戴设备。
存储器可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器可包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器可在数据处理装置的内部或外部。在特定实施例中,存储器是非易失性固态存储器。在特定实施例中,存储器包括只读存储器(ROM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。
处理器通过读取并执行存储器中存储的计算机程序指令,以实现上述实施例方式一中任意一种电池相机视频播放方法、唤醒方法、视频数据传输方法。
在一个示例中,电子设备还可包括通信接口和总线。其中,处理器、存储器、通信接口通过总线连接并完成相互间的通信。
通信接口,主要用于实现本发明实施例中各模块、装置、单元和/或设备之间的通信。
总线包括硬件、软件或两者,将电子设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(AGP)或其他图形总线、增强工业标准架构(EISA)总线、前端总线(FSB)、超传输(HT)互连、工业标准架构(ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线,但本发明考虑任何合适的总线或互连。
综上所述,本发明实施例提供了一种电池相机视频播放方法、唤醒方法、视频数据传输方法、装置、设备及存储介质。
需要明确的是,本发明并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本发明的方法过程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本发明的精神后,作出各种改变、修改和添加,或者改变步骤之间的顺序。
以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时,其可以例如是电子电路、专用集成电路(ASIC)、适当的固件、插件、功能卡等等。当以软件方式实现时,本发明的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中,或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、ROM、闪存、可擦除ROM(EROM)、软盘、CD-ROM、光盘、硬盘、光纤介质、射频(RF)链路,等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (10)
1.一种电池相机唤醒方法,其特征在于,所述方法包括:
在接收到电池相机唤醒指令之前,通过共享网络套接字,实时上传电池相机的网络地址,根据所述网络地址完成P2P网络连接的网络穿透任务;
在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务;
在完成网络穿透任务和网络应答任务后,P2P网络通信链路建立完成;
其中,所述通过共享网络套接字,实时上传电池相机的网络地址包括:
利用所述电池相机的wifi模块创建wifi对等网络,并在所述wifi对等网络中构建套接字服务端;
将所述电池相机的主控模块加入所述wifi对等网络,并在所述wifi对等网络中创建套接字客户端;
通过所述套接字服务端和所述套接字客户端提供的传输通道,所述wifi模块从所述主控模块实时获取所述电池相机的网络地址,并将所述网络地址上传。
2.根据权利要求1所述的电池相机唤醒方法,其特征在于,所述在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务包括:
根据所述唤醒指令唤醒电池相机,在电池相机唤醒后对所述电池相机进行系统初始化;
在电池相机唤醒后,通过P2P的辅助服务器查询用于建立P2P的IP网络位置;
根据所述IP网络位置建立连接,完成P2P网络连接的网络应答任务。
3.根据权利要求1至2任一项所述的电池相机唤醒方法,其特征在于,在电池相机唤醒后,还包括:电池相机对监控区域进行拍照,得到抓拍的图像帧,并上传抓拍的图像帧至辅助服务器进行存储。
4.根据权利要求3所述的电池相机唤醒方法,其特征在于,对电池相机唤醒还包括:
获取视频请求指令;
根据所述视频请求指令生成电池相机唤醒的唤醒指令,同时获取所述视频请求指令对应的时间信息;
根据所述视频请求指令的时间信息,在移动端的App显示界面显示辅助服务器中与所述时间信息对应的历史图像帧。
5.根据权利要求4所述的电池相机唤醒方法,其特征在于,所述根据所述视频请求指令的时间信息,在移动端的App显示界面显示辅助服务器中与所述时间信息对应的历史图像帧包括:
对电池相机唤醒时抓拍的图像帧按抓拍时间进行分类,得到与各抓拍时间对应的各历史图像帧组;
对各所述历史图像帧组中的各图像帧进行融合,得到与电池相机在各唤醒时间相对应的所述历史图像帧;
根据所述视频请求指令的时间信息,在移动端的App显示界面显示与所述时间信息对应的历史图像帧。
6.根据权利要求5所述的电池相机唤醒方法,其特征在于,所述对各所述历史图像帧组中的各图像帧进行融合,得到与电池相机在各唤醒时间相对应的所述历史图像帧包括:
将各所述历史图像帧组中的各图像帧按抓拍时间存储在第一存储区;
分别对所述第一存储区中各所述历史图像帧组的各抓拍图像帧进行融合,输出各所述历史图像帧至第二存储区存储。
7.一种电池相机唤醒装置,其特征在于,包括:
网络地址上传模块:用于通过共享网络套接字,实时上传电池相机的网络地址;
其中,所述通过共享网络套接字,实时上传电池相机的网络地址包括:
利用所述电池相机的wifi模块创建wifi对等网络,并在所述wifi对等网络中构建套接字服务端;
将所述电池相机的主控模块加入所述wifi对等网络,并在所述wifi对等网络中创建套接字客户端;
通过所述套接字服务端和所述套接字客户端提供的传输通道,所述wifi模块从所述主控模块实时获取所述电池相机的网络地址,并将所述网络地址上传;
第一网络搭建模块:用于在接收到电池相机唤醒指令之前,根据所述网络地址完成P2P网络连接的网络穿透任务;
第二网络搭建模块:用于在接收到电池相机唤醒指令之后,根据所述唤醒指令完成P2P网络连接的网络应答任务;
其中,在完成网络穿透任务和网络应答任务后,P2P网络通信链路建立完成。
8.一种电池相机视频播放方法,其特征在于,所述方法包括:
在接收到电池相机唤醒指令之前,通过共享网络套接字,实时上传电池相机的网络地址,根据所述网络地址完成P2P网络连接的网络穿透任务;
其中,所述通过共享网络套接字,实时上传电池相机的网络地址包括:
利用所述电池相机的wifi模块创建wifi对等网络,并在所述wifi对等网络中构建套接字服务端;
将所述电池相机的主控模块加入所述wifi对等网络,并在所述wifi对等网络中创建套接字客户端;
通过所述套接字服务端和所述套接字客户端提供的传输通道,所述wifi模块从所述主控模块实时获取所述电池相机的网络地址,并将所述网络地址上传;
获取视频请求指令和所述请求指令的时间信息;
根据所述请求指令对电池相机进行唤醒并创建P2P网络连接;
在所述P2P网络建立过程中,播放与所述时间信息对应的历史图像帧;
在所述P2P网络建立后,以第一编码码率通过所述P2P网络进行视频播放;
其中,所述第一编码码率为逐渐递增的动态码率。
9.一种电子设备,其特征在于,包括:至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令,当所述计算机程序指令被所述处理器执行时实现如权利要求1-6中任一项所述的方法。
10.一种介质,其上存储有计算机程序指令,其特征在于,当所述计算机程序指令被处理器执行时实现如权利要求1-6中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110744284.5A CN113489774B (zh) | 2021-06-30 | 2021-06-30 | 电池相机视频播放方法、唤醒方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110744284.5A CN113489774B (zh) | 2021-06-30 | 2021-06-30 | 电池相机视频播放方法、唤醒方法、装置、设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113489774A CN113489774A (zh) | 2021-10-08 |
CN113489774B true CN113489774B (zh) | 2024-03-12 |
Family
ID=77937471
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110744284.5A Active CN113489774B (zh) | 2021-06-30 | 2021-06-30 | 电池相机视频播放方法、唤醒方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113489774B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116055581A (zh) * | 2022-11-23 | 2023-05-02 | 广东博力威科技股份有限公司 | 数据传输控制方法、装置、设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104811595A (zh) * | 2015-04-08 | 2015-07-29 | 合肥君正科技有限公司 | 一种网络监控摄像机及其工作方法 |
CN107580198A (zh) * | 2017-08-23 | 2018-01-12 | 深圳市高斯贝尔家居智能电子有限公司 | 一种低功耗远程唤醒网络摄像机及视频监控系统 |
CN107659414A (zh) * | 2017-10-13 | 2018-02-02 | 深圳市尚云互联技术有限公司 | 基于p2p的远程唤醒系统及方法 |
CN107835360A (zh) * | 2017-10-27 | 2018-03-23 | 深圳市共进电子股份有限公司 | 一种休眠低功耗网络相机的快速启动方法及系统 |
WO2019153159A1 (zh) * | 2018-02-08 | 2019-08-15 | 杭州如道科技有限公司 | 一种无线充电装置及一种分体式高清网络摄像机 |
CN110297665A (zh) * | 2019-06-10 | 2019-10-01 | 青岛小鸟看看科技有限公司 | 一种设备工作模式的切换方法和相机 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2459216B (en) * | 2006-12-18 | 2011-06-22 | Ericsson Telefon Ab L M | Method and apparatus for establishing a session |
CN107968713B (zh) * | 2016-10-20 | 2021-11-19 | 北京华为数字技术有限公司 | 远程唤醒方法、装置及系统 |
CN106982354B (zh) * | 2017-04-02 | 2019-12-20 | 杭州如道科技有限公司 | 一种分体式高清网络摄像机 |
CN111385137A (zh) * | 2019-03-11 | 2020-07-07 | 深圳市鸿合创新信息技术有限责任公司 | 一种终端唤醒方法及服务器、电子设备 |
CN111049651A (zh) * | 2019-12-30 | 2020-04-21 | 上海博泰悦臻网络技术服务有限公司 | 一种车载智能计算装置、云端服务器以及唤醒方法 |
-
2021
- 2021-06-30 CN CN202110744284.5A patent/CN113489774B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104811595A (zh) * | 2015-04-08 | 2015-07-29 | 合肥君正科技有限公司 | 一种网络监控摄像机及其工作方法 |
CN107580198A (zh) * | 2017-08-23 | 2018-01-12 | 深圳市高斯贝尔家居智能电子有限公司 | 一种低功耗远程唤醒网络摄像机及视频监控系统 |
CN107659414A (zh) * | 2017-10-13 | 2018-02-02 | 深圳市尚云互联技术有限公司 | 基于p2p的远程唤醒系统及方法 |
CN107835360A (zh) * | 2017-10-27 | 2018-03-23 | 深圳市共进电子股份有限公司 | 一种休眠低功耗网络相机的快速启动方法及系统 |
WO2019153159A1 (zh) * | 2018-02-08 | 2019-08-15 | 杭州如道科技有限公司 | 一种无线充电装置及一种分体式高清网络摄像机 |
CN110297665A (zh) * | 2019-06-10 | 2019-10-01 | 青岛小鸟看看科技有限公司 | 一种设备工作模式的切换方法和相机 |
Non-Patent Citations (2)
Title |
---|
UDP穿透NAT技术实现数据唤醒车联网T-Box设备的方案;夏宝华;李佳;胡孟永;;电子技术与软件工程(05);全文 * |
无线终端设备低功耗唤醒方法的研究;田阳;《中国优秀硕士学位论文全文数据库·信息科技辑》;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN113489774A (zh) | 2021-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6460105B2 (ja) | 撮影方法、撮影システムおよび端末装置 | |
JP6820527B2 (ja) | 映像同期装置及び映像同期方法 | |
EP4261778A1 (en) | Posture estimation method related apparatus | |
WO2022141418A1 (zh) | 一种图像处理方法以及装置 | |
CN105812723A (zh) | 一种智能摄像头监控的方法及装置 | |
CN113489774B (zh) | 电池相机视频播放方法、唤醒方法、装置、设备及介质 | |
WO2021057689A1 (zh) | 视频解码方法及装置、视频编码方法及装置、存储介质和电子装置 | |
CN112165621B (zh) | 场景切换帧的检测方法及装置、存储介质、电子设备 | |
WO2022141445A1 (zh) | 一种图像处理方法以及装置 | |
US9706102B1 (en) | Enhanced images associated with display devices | |
WO2019202512A1 (en) | Object segmentation in a sequence of color image frames by background image and background depth correction | |
CN105306837A (zh) | 多图像拼接方法及装置 | |
CN112637476A (zh) | 一种视频录制方法、装置、终端以及计算机可读存储介质 | |
WO2022141333A1 (zh) | 一种图像处理方法以及装置 | |
CN111131817A (zh) | 屏幕共享方法、设备、存储介质及屏幕共享系统 | |
WO2021057477A1 (zh) | 视频编解码方法和相关装置 | |
CN111340857A (zh) | 一种摄像机跟踪控制方法及装置 | |
CN113489989B (zh) | 电池相机唤醒时的视频数据传输方法、装置、设备及介质 | |
CN108650458A (zh) | 图像处理方法及装置 | |
CN113486210A (zh) | 电池相机唤醒时的视频播放方法、装置、设备及介质 | |
CN115861121A (zh) | 模型训练方法、图像处理方法、装置、电子设备和介质 | |
CN110944159A (zh) | 一种信息处理方法、电子设备以及信息处理系统 | |
CN112399064A (zh) | 双光融合抓拍方法和相机 | |
CN112135190B (zh) | 视频处理方法、装置、系统、服务器及存储介质 | |
US11496685B2 (en) | Information processing system, information processing method, medium, and management device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |