CN111741355A - 用于推送信息的方法、装置和系统 - Google Patents

用于推送信息的方法、装置和系统 Download PDF

Info

Publication number
CN111741355A
CN111741355A CN202010530959.1A CN202010530959A CN111741355A CN 111741355 A CN111741355 A CN 111741355A CN 202010530959 A CN202010530959 A CN 202010530959A CN 111741355 A CN111741355 A CN 111741355A
Authority
CN
China
Prior art keywords
user terminal
information
reminding
monitoring
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010530959.1A
Other languages
English (en)
Other versions
CN111741355B (zh
Inventor
黄思远
吴迪
李飞霞
邓艳芳
李磊
邹烈
孙晔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN202010530959.1A priority Critical patent/CN111741355B/zh
Publication of CN111741355A publication Critical patent/CN111741355A/zh
Application granted granted Critical
Publication of CN111741355B publication Critical patent/CN111741355B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开的实施例公开了用于推送信息的方法、装置和系统。该方法应用于边缘设备,该方法的一具体实施方式包括:获取监控数据;确定监控数据指示的监控内容是否对应有提醒任务;响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;将提醒信息推送至用户终端。该实施方式实现了降低远端服务器的计算压力。

Description

用于推送信息的方法、装置和系统
技术领域
本公开的实施例涉及计算机技术领域,具体涉及用于推送信息的方法和装置。
背景技术
随着网络通信技术的快速发展,为人们提供了更加丰富和便捷的网络环境。例如,目前在互联网和互联网等应用驱动下,第五代移动通信技术5G、甚至第六代移动通信技术6G正在兴起,以为人们的生活提供更高效和舒适的网络环境。
根据许多研究机构的预计,接入网络的电子设备的数量会爆发式增长,随之也会产生海量的数据,这些数据中还包括大量的音视频数据。海量数据的产生会是对网络的处理能力、带宽、时延性等方面的一个挑战。如何处理每时每刻在产生的海量的数据,同时保证数据处理的速度、可靠性、安全性等是当前关注较多的一个研究方向。
发明内容
本公开的实施例提出了用于推送信息的方法、装置和系统。
第一方面,本公开的实施例提供了一种用于推送信息的方法,应用于边缘设备,该方法包括:获取监控数据;确定监控数据指示的监控内容是否对应有提醒任务;响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;将提醒信息推送至用户终端。
在一些实施例中,监控数据包括监控音频;以及生成提醒信息,包括:根据监控音频,生成第一提醒用字幕作为提醒信息。
在一些实施例中,在将提醒信息推送至用户终端之后,上述方法还包括:确定用户终端的音频播放状态,其中,音频播放状态用于指示用户终端中是否存在播放中的音频;响应于确定用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放监控音频;响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在用户终端展示第一提醒用字幕。
在一些实施例中,监控数据包括监控视频;以及生成提醒信息,包括:根据监控视频,生成第二提醒用字幕作为提醒信息。
在一些实施例中,在将提醒信息推送至用户终端之后,上述方法还包括:确定用户终端的视频播放状态,其中,视频播放状态用于指示用户终端中是否存在播放中的视频;响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在用户终端按照目标尺寸播放监控视频,以及突出显示第二提醒用字幕,其中,目标尺寸小于播放中的视频的播放尺寸。
在一些实施例中,确定监控数据指示的监控内容是否对应有提醒任务,包括:对监控视频进行场景识别,得到用于指示监控视频是否存在预设场景的识别结果;响应于确定识别结果指示监控视频存在预设场景,确定监控数据指示的监控内容对应有提醒任务;以及生成提醒信息,包括:获取预设场景对应的提醒信息。
在一些实施例中,生成提醒信息,包括:从监控视频中截取包含预设场景的视频内容作为提醒信息。
在一些实施例中,将提醒信息推送至用户终端,包括:获取用于表征用户终端的信息展示方式的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息;按照属性信息,对提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
在一些实施例中,将提醒信息推送至用户终端,包括:获取用户终端集和用户终端集中的各用户终端的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息、活动状态;根据属性信息,从用户终端集中选取用户终端,以及将提醒信息推送至选取的用户终端。
在一些实施例中,上述方法还包括:存储监控数据。
在一些实施例中,边缘设备位于基于边缘计算技术构建的网络中,其中,边缘计算技术包括以下至少一项:多接入边缘计算MEC技术、微云技术、雾计算技术。
在一些实施例中,边缘设备设置在智能家居设备中。
第二方面,本公开的实施例提供了一种用于推送信息的系统,该系统包括边缘设备、用户终端、数据采集设备;数据采集设备,用于采集监控数据,以及将采集的监控数据发送至边缘设备;边缘设备,用于确定监控数据指示的监控内容是否对应有提醒任务;响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;将提醒信息推送至用户终端。
在一些实施例中,监控数据包括监控音频;以及边缘设备进一步用于:根据监控音频,生成第一提醒用字幕作为提醒信息。
在一些实施例中,边缘设备进一步用于:确定用户终端的音频播放状态,其中,音频播放状态用于指示用户终端中是否存在播放中的音频;响应于确定用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放监控音频;响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在用户终端展示第一提醒用字幕。
在一些实施例中,监控数据包括监控视频;以及边缘设备进一步用于:根据监控视频,生成第二提醒用字幕作为提醒信息。
在一些实施例中,边缘设备进一步用于:确定用户终端的视频播放状态,其中,视频播放状态用于指示用户终端中是否存在播放中的视频;响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在用户终端按照目标尺寸播放监控视频,以及突出显示第二提醒用字幕,其中,目标尺寸小于播放中的视频的播放尺寸。
在一些实施例中,边缘设备进一步用于:对监控视频进行场景识别,得到用于指示监控视频是否存在预设场景的识别结果;响应于确定识别结果指示监控视频存在预设场景,确定监控数据指示的监控内容对应有提醒任务;获取预设场景对应的提醒信息。
在一些实施例中,边缘设备进一步用于:从监控视频中截取包含预设场景的视频内容作为提醒信息。
在一些实施例中,边缘设备进一步用于:获取用于表征用户终端的信息展示方式的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息;按照属性信息,对提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
在一些实施例中,边缘设备进一步用于:获取用户终端集和用户终端集中的各用户终端的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息、活动状态;根据属性信息,从用户终端集中选取用户终端,以及将提醒信息推送至选取的用户终端。
在一些实施例中,边缘设备进一步用于:存储监控数据。
在一些实施例中,边缘设备位于基于边缘计算技术构建的网络中,其中,边缘计算技术包括以下至少一项:多接入边缘计算MEC技术、微云技术、雾计算技术。
在一些实施例中,边缘设备设置在智能家居设备中。
第三方面,本公开的实施例提供了一种用于推送信息的装置,应用于边缘设备,该装置包括:获取单元,被配置成获取监控数据;确定单元,被配置成确定监控数据指示的监控内容是否对应有提醒任务;生成单元,被配置成响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;推送单元,被配置成将提醒信息推送至用户终端。
在一些实施例中,监控数据包括监控音频;以及生成单元进一步被配置成:根据监控音频,生成第一提醒用字幕作为提醒信息。
在一些实施例中,上述用于推送信息的装置还包括展示单元,被配置成:确定用户终端的音频播放状态,其中,音频播放状态用于指示用户终端中是否存在播放中的音频;响应于确定用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放监控音频;响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在用户终端展示第一提醒用字幕。
在一些实施例中,监控数据包括监控视频;以及上述生成单元进一步被配置成:根据监控视频,生成第二提醒用字幕作为提醒信息。
在一些实施例中,上述展示单元进一步被配置成:确定用户终端的视频播放状态,其中,视频播放状态用于指示用户终端中是否存在播放中的视频;响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在用户终端按照目标尺寸播放监控视频,以及突出显示第二提醒用字幕,其中,目标尺寸小于播放中的视频的播放尺寸。
在一些实施例中,上述确定单元进一步被配置成:对监控视频进行场景识别,得到用于指示监控视频是否存在预设场景的识别结果;响应于确定识别结果指示监控视频存在预设场景,确定监控数据指示的监控内容对应有提醒任务;以及上述生成单元进一步被配置成:获取预设场景对应的提醒信息。
在一些实施例中,上述生成单元进一步被配置成:从监控视频中截取包含预设场景的视频内容作为提醒信息。
在一些实施例中,上述推送单元进一步被配置成:获取用于表征用户终端的信息展示方式的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息;按照属性信息,对提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
在一些实施例中,上述推送单元进一步被配置成:获取用户终端集和用户终端集中的各用户终端的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息、活动状态;根据属性信息,从用户终端集中选取用户终端,以及将提醒信息推送至选取的用户终端。
在一些实施例中,上述装置还包括存储单元,被配置成存储监控数据。
在一些实施例中,边缘设备位于基于边缘计算技术构建的网络中,其中,边缘计算技术包括以下至少一项:多接入边缘计算MEC技术、微云技术、雾计算技术。
在一些实施例中,边缘设备设置在智能家居设备中。
第四方面,本公开的实施例提供了一种电子设备,该电子设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实现方式描述的方法。
第五方面,本公开的实施例提供了一种计算机可读介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如第一方面中任一实现方式描述的方法。
本公开的实施例提供的用于推送信息方法、装置和系统,通过利用边缘设备获取监控数据,并对监控数据进行分析以确定其指示的监控内容是否对应有提醒任务,在监控内容对应有提醒任务时,生成提醒信息并发送至用户终端,以及时对用户进行提醒。由此,对监控数据的处理过程都由边缘设备完成,从而实现对监控数据的本地处理,保证对监控数据的处理速度和提供的服务质量,同时可以降低远端服务器的计算压力和存储压力。另外,不仅可以利用边缘设备对多种可能存在提醒任务的场景进行监控,而且在通过提醒信息对用户进行提醒时,可以灵活地根据用户终端多方面的属性信息(如音视频播放状态、网络状态、支持的音视频格式、尺寸信息等等),调整提醒信息,以保证发送至用户终端的提醒信息在用户终端的适应性展示。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本公开的其它特征、目的和优点将会变得更明显:
图1是本公开的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本公开的用于推送信息的方法的一个实施例的流程图;
图3是根据本公开的用于推送信息的方法的又一个实施例的流程图;
图4是根据本公开的用于推送信息的方法的再一个实施例的流程图;
图5是根据本公开的用于推送信息的系统的一个实施例的时序图;
图6是根据本公开的用于推送信息的装置的一个实施例的结构示意图;
图7是适于用来实现本公开的实施例的电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
图1示出了可以应用本公开的用于推送信息的方法或用于推送信息的装置的实施例的示例性架构100。
如图1所示,系统架构100可以包括数据采集设备101、102、103,边缘设备104和用户终端105、106、107。数据采集设备101、102、103与边缘设备104,以及边缘设备104与用户终端105、106、107之间可以通过各种连接方式进行通信连接。例如有线、无线通信链路或者光纤电缆等等。
数据采集设备101、102、103可以是硬件,也可以是软件。当数据采集设备101、102、103为硬件时,可以是各种用于采集数据的设备。例如,数据采集设备可以为各种智能家居设备(如智能摄像头、服务机器人等等)。又例如,数据采集设备可以为各种传感器(如烟雾传感器、温湿度传感器等等)当数据采集设备101、102、103为软件时,可以安装在上述所列举的数据采集设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的多个软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
用户终端105、106、107可以是各种类型的供用户使用的终端设备。用户终端上可以安装有各种客户端应用。例如,浏览器类应用、购物类应用、信息流应用、智能家居类应用等等。
用户终端105、106、107可以是硬件,也可以是软件。当用户终端105、106、107为硬件时,可以是各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、膝上型便携计算机和台式计算机、智能电视、投影电视等等。当用户终端105、106、107为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的多个软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
边缘设备104可以是各种能够提供网络入口点的各种设备。例如,数据采集设备101、102、103、用户终端105、106、107都可以与边缘设备连接,以接入同一网络。边缘设备104还可以提供其它各种功能。例如,边缘设备104可以从数据采集设备101、102、103获取数据采集设备101、102、103采集的数据,然后对数据进行分析等处理。进一步地,边缘设备104还可以将处理结果发送至用户终端105、106、107以供用户查看。
需要说明的是,边缘设备104自身也可以具备数据采集功能,边缘设备104也可以直接提取自身采集的数据并进行处理。此时,可以不存在数据采集设备101、102、103。边缘设备104自身也可以具备信息展示功能,以供用户查看数据处理结果。此时,可以不存在用户终端105、106、107。
另外,需要指出的是,边缘设备104可以集成在用户终端105、106、107中,也可以集成在各种智能家居设备(如智能网关等)中。
需要说明的是,本公开的实施例所提供的用于推送信息的方法一般由边缘设备104执行,相应地,用于推送信息的装置一般设置于边缘设备104中。
需要说明的是,边缘设备104可以是硬件,也可以是软件。当边缘设备104为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器,还可以实现成多个和单个电子设备(如终端设备、智能家居设备等等)。当边缘设备104为软件时,可以实现成多个软件或软件模块(例如用来提供分布式服务),也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解,图1中的数据采集设备、边缘设备和用户终端的数目仅仅是示意性的。根据实现需要,可以具有任意数目的数据采集设备、边缘设备和用户终端。
继续参考图2,其示出了根据本公开的用于推送信息的方法的一个实施例的流程200。该用于推送信息的方法包括以下步骤:
步骤201,获取监控数据。
在本实施例中,监控数据可以指各种通过监测方式采集到的数据。一般地,监控数据可以是根据用户的需求对指定区域、指定环境、指定目标(如人或物等)所进行监测而采集到的数据。
应当可以理解,根据所使用的监测方式的不同,采集到的监控数据的类型可以不同。例如,监控数据可以包括监控音频、监控视频等。当然,监控数据也可以同时包括监控音频和监控视频。
用于推送信息的方法的执行主体(如图1所示的边缘设备103)可以通过有线或无线连接的方式从本地或其它设备(如图1所示的数据采集设备101、102等)获取监控数据。
需要说明的是,边缘设备自身也可以具备数据采集功能,并利用数据采集功能采集监控数据。此时,边缘设备可以从其本地直接获取监控数据。
可选地,预先可以利用各种智能家居设备采集监控数据,然后由智能家居设备将采集到的监控数据发送至边缘设备。其中,智能家居设备可以是各种类型的智能家居设备。例如,智能摄像头、智能空调、智能冰箱等等。
作为示例,可以利用智能摄像头对病人的房间进行监控,并录制监控视频,然后智能摄像头可以将录制的监控视频发送至边缘设备。作为又一示例,可以利用智能空调对客厅的温度和湿度进行监控,并实时地采集各个时刻客厅的温度和湿度,然后将采集到的温度和湿度发送至边缘设备。
步骤202,确定监控数据指示的监控内容是否对应有提醒任务。
在本实施例中,监控数据指示的监控内容可以指监测到的内容。例如,监控视频指示的监控内容够可以指视频内容。监控音频指示的监控内容可以指音频内容。提醒任务可以指对用户进行提醒的任务。
根据不同的应用需求和应用场景,可以灵活采用不同的方法确定监控数据指示的监控内容是否对应有提醒任务。例如,可以预先设置监控内容的关键字与提醒任务之间的对应关系。此时,可以对监控数据指示的监控内容进行分析以提取关键字,然后查找提取的关键字是否具有对应的提醒任务。若提取的关键字具有对应的提醒任务,则可以确定监控数据指示的监控内容对应有提醒任务。若提取的关键字不具有对应的提醒任务,则可以确定监控数据指示的监控内容不对应有提醒任务。
步骤203,响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息。
在本实施例中,提醒信息可以是各种形式的信息。例如,提醒信息可以是预先设置的特定信息。又例如,可以预先设置提醒任务与提醒信息之间的对应关系。此时,可以直接获取提醒任务对应的提醒信息作为提醒信息。
步骤204,将提醒信息推送至用户终端。
在本实施例中,边缘设备可以向用户终端推送提醒信息,以完成对用户的提醒。在将提醒信息推送至用户终端之后,还可以进一步在用户终端展示提醒信息,以直观且及时地对用户进行提醒。
在本实施例的一些可选的实现方式中,在监控数据包括监控音频时,可以根据监控音频,生成第一提醒用字幕作为提醒信息。其中,第一提醒用字幕可以是用于提醒用户的字幕。
根据实际的应用需求和不同的应用场景,可以采用各种不同的根据监控音频生成第一提醒用字幕的方法。例如,可以对监控音频进行语音识别,并将监控音频的语音识别结果作为第一提醒用字幕。
又例如,可以利用现有的各种音频分析方法(如基于音频的场景分析方法等)对监控音频进行分析,以确定监控音频是否存在预设场景。若监控音频存在预设场景,可以将监控音频中对应于预设场景的子音频的语音识别结果作为第一提醒用字幕。其中,预设场景由用户或技术人员根据实际的应用需求预先设置。例如,预设场景可以是各种危险场景或异常场景等。
由此,可以通过第一提醒用字幕作为提醒信息向用户进行提醒,以使用户及时了解监控内容对应的提醒任务。
在本实施例的一些可选的实现方式中,在监控数据包括监控音频,以及将提醒信息推送至用户终端之后,还可以通过如下步骤向用户展示提醒信息:
步骤一,确定用户终端的音频播放状态。
在本步骤中,用户终端的音频播放状态可以用于指示用户终端中当前是否存在正在播放中的音频。边缘设备可以通过检测用户终端的音频通道、检测用户终端当前运行的应用程序等各种方式确定用户终端的音频播放状态。
步骤二,响应于确定用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放监控音频。
在本步骤中,在用户终端中当前没有正在播放中的音频时,可以通过播放监控音频,以使用户了解监控内容完成对用户的提醒。
步骤三,响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在用户终端展示第一提醒用字幕。
在本步骤中,在用户终端中当前存在正在播放中的音频时,可以在用户终端展示根据监控音频生成的第一提醒用字幕,而避免直接播放监控音频。由此,可以通过监控音频对应的字幕对用户进行提醒,避免直接播放监控音频而对用户当前正在播放中的音频造成打断的情况,从而保证在对用户进行提醒的同时,降低对用户的打扰性。
可选地,响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在展示第一提醒用字幕的同时,可以丢弃监控音频,以及时清理不必要的信息,避免对用户终端的内存资源的占用。
在本实施例的一些可选的实现方式中,在监控数据包括监控视频时,可以通过如下步骤确定监控数据指示的监控内容是否对应有提醒任务:
步骤一,对监控视频进行场景识别,得到用于指示监控视频是否存在预设场景的识别结果。
在本步骤中,可以利用现有技术中各种针对视频的场景识别方法(如危险场景识别、人物识别等等)对监控视频进行场景识别,以得到识别结果。其中,预设场景可以由技术人员或用户根据实际的应用需求,针对需要提醒的场景进行设置。预设场景的数目可以为一个,也可以为多个。例如,监控视频可以是在老人的卧室和儿童的卧室录制的视频,此时,预设场景可以包括老人摔倒、儿童睡醒等。
步骤二,响应于确定识别结果指示监控视频存在预设场景,确定监控数据指示的监控内容对应有提醒任务。
另外,响应于确定识别结果指示监控视频不存在预设场景,则可以认为监控数据指示的监控内容并不具有对应的提醒任务。即当前不需要对用户进行提醒。
由此,可以根据监控视频及时监测用户关心的场景(如一些危险场景或异常场景),并及时对用户进行提醒,以便于用户对这些场景快速进行应对。
可选地,可以预先针对预设场景设置对应的提醒信息。此时,在确定监控视频存在预设场景时,可以直接获取预设场景对应的提醒信息并推送至用户,以对用户进行提醒。
例如,针对老人摔倒的场景可以预先设置对应的提醒信息“老人摔倒了!”。又例如,针对儿童睡醒的场景可以预先设置对应的提醒信息“宝宝已经睡醒了!”
在本实施例的一些可选的实现方式中,在监控数据包括监控视频时,可以根据监控视频,生成第二提醒用字幕作为提醒信息。其中,第二提醒用字幕可以是用于提醒用户的字幕。由此,可以利用第二提醒用字幕提醒用户监控视频的监控内容,以使用户了解当前的提醒任务。
根据实际的应用需求和不同的应用场景,可以采用各种不同的根据监控视频生成第二提醒用字幕的方法。例如,可以利用现有的一些端到端的神经网络模型对监控视频进行分析,以得到用于描述监控视频的监控内容的信息作为第二提醒用字幕。又例如,可以只选取对监控视频中包含预设场景的视频帧的描述信息作为第二提醒用字幕。
可选地,可以从监控视频中截取包含预设场景的视频内容作为提醒信息。例如,可以将监控视频中包含预设场景的若干视频帧作为提醒信息推送至用户终端,以避免向用户发送整个监控视频而占用网络资源和用户流量,同时也可以省去用户查找预设场景的时间。
在本实施例的一些可选的实现方式中,在监控数据包括监控视频,以及将提醒信息推送至用户终端之后,还可以进一步通过如下步骤在用户终端展示提醒信息:
步骤一,确定用户终端的视频播放状态。
在本步骤中,用户终端的视频播放状态可以用于指示用户终端中当前是否存在播放中的视频。边缘设备可以通过检测用户终端的视频通道、检测用户终端当前运行的应用程序等各种方式确定用户终端的视频播放状态。
步骤二,响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在用户终端按照目标尺寸播放监控视频,以及突出显示第二提醒用字幕。
在本步骤中,目标尺寸可以由技术人员或用户根据实际的应用需求进行设置。目标尺寸可以小于用户终端中当前正在播放的视频的播放尺寸。例如,可以在当前正在播放的视频窗口的右下角小窗口播放监控视频。
其中,第二提醒用字幕可以通过醒目的颜色、字体、显示位置等方式在用户终端突出显示,以保证提醒到用户。例如,可以在当前正在播放的视频窗口的中间滚动展示第二提醒用字幕,且使用大字号醒目字体颜色展示第二提醒用字幕。
另外,响应于确定用户终端的视频播放状态指示用户终端中当前不存在播放中的视频,可以根据需求灵活设置监控视频的播放位置和播放尺寸,并按照设置的播放位置和播放尺寸在用户终端播放监控视频,同时展示第二提醒用字幕。例如,可以以小窗方式播放监控视频,同时以明显显示地方式提示第二提醒用字幕。其中,小窗的尺寸和位置,以及第二提醒用字幕的格式可以灵活设置。
由此,可以根据用户终端的视频播放状态,调整监控视频的播放位置和播放尺寸等信息,同时突出显示监控视频对应的第二提醒用字幕,以在保证提醒到用户的同时,不影响用户观看其正在观看的视频,降低对用户的打扰。
可选地,在播放监控视频时,用户可以进一步根据需求调整监控视频的播放位置和播放尺寸,以提升监控视频播放方式的灵活性。
在本实施例的一些可选的实现方式中,边缘设备在获取到监控数据之后,还可以进一步存储监控数据。由此,可以降低远端服务器的存储压力。另外,将监控数据存储于边缘设备,还可以保证用户私有的监控数据的隐私性和安全性。
在本实施例的一些可选的实现方式中,边缘设备可以位于基于边缘计算技术构建的网络中。其中,边缘计算技术可以包括以下至少一项:多接入边缘计算MEC技术、微云技术、雾计算技术。
其中,多接入边缘计算(MEC,Multi-access Edge Computing)是将移动接入网与互联网业务深度融合的一种技术。MEC可利用无线接入网络就近提供用户所需服务和云端计算功能,而创造出一个具备高性能、低延迟与高带宽的服务环境,加速网络中各项内容、服务及应用的快速下载,让用户享有不间断的高质量网络体验。MEC可以改善用户体验,节省带宽资源,而且将计算能力下沉到移动边缘节点。
微云是开放边缘计算项目的研究成果,旨在将云部署到离用户更近的地方,可以视为一个轻量级的MEC。微云被部署在网络边缘,因此更靠近用户,能为移动设备提供丰富的计算资源,且为终端用户的计算任务提供低时延响应。
雾计算根据工作负载和设备能力,使得计算更加接近网络边缘。雾计算是将计算、通信、控制、存储资源和服务分配给用户或分布在靠近用户的设备与系统上,从而将云计算扩展到网络边缘,可以视为位于网络边缘的小型云,而且可以支持分布式应用之间的通信。
通过边缘计算技术将监控数据相关的处理过程等都放在靠近用户的边缘设备进行处理,可以减少通信距离,从而降低了数据传输成本,并缩短了延迟,提升服务质量,同时利用边缘设备的计算能力,降低远端服务器的处理压力。
在本实施例的一些可选的实现方式中,边缘设备可以设置在智能家居设备中。即边缘设备可以集成在智能家居设备(如智能网关等)中,提升智能家居设备的功能性,进一步提升数据处理速度和服务质量。
需要说明的是,在本公开中,为了便于描述不同的字幕,将两个字幕分别命名为第一提醒用字幕和第二提醒用字幕,本领域技术人员应当理解,其中的第一和第二并不构成对字幕的特殊限定。
现有技术中,通常采用远端中心云的结构进行数据处理,由于中心服务器的负荷能力有限,因此,如果出现海量数据,数据处理的实时性和拥塞性必然会受到影响。而且这种方式下,用户终端与远端服务器之间的传输距离也会导致必然存在的延迟。再来,许多情况下监控数据通常会涉及用户隐私,因此,将监控数据传输到中心服务器可能会存在隐私泄露的风险。现有技术中还存在将数据全部在终端进行处理的结构,但是由于终端性能通常有限、扩展性也较差,因此,在海量数据的场景下,全部在终端进行处理也无法保证数据处理的实时性和可靠性。
本公开的上述实施例提供的方法通过利用边缘设备完成对监控数据的分析和处理,并在具有提醒任务时生成对应的提醒信息,以及将提醒信息推送至用户终端,从而可以降低远端服务器的数据处理压力。同时,还可以降低使用远端服务器时传输距离所必然带来的延迟,以及避免远端服务器可能出现的拥塞而对实时性产生的影响,有助于提升针对监控数据的提醒信息的推送效率和可靠性。另外,通过避免将监控数据传送至远端服务器,也可以降低用户隐私泄露的风险,提升数据安全性,同时还可以降低实时监控的成本。
进一步参考图3,其示出了用于推送信息的方法的又一个实施例的流程300。该用于推送信息的方法的流程300,包括以下步骤:
步骤301,获取监控音频和监控视频。
步骤302,对监控视频和监控音频进行场景识别,得到用于指示监控视频是否存在预设场景的识别结果。
步骤303,响应于确定识别结果指示监控视频和监控音频存在预设场景,确定监控数据指示的监控内容对应有提醒任务。
步骤304,对监控音频进行语音识别,以及将得到的语音识别结果作为第一提醒用字幕,以及获取用于描述监控视频存在的预设场景的信息作为第二提醒用字幕。
步骤305,将监控视频、监控音频、第一提醒用字幕和第二提醒用字幕作为提醒信息推送至用户终端。
步骤306,确定用户终端中是否存在播放中的音频。
步骤307,确定用户终端中是否存在播放中的视频。
步骤308,响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在用户终端展示第一提醒用字幕。
步骤309,响应于确定用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放监控音频。
步骤310,响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在用户终端按照目标尺寸播放监控视频,以及突出显示第二提醒用字幕。
步骤311,响应于确定用户终端的视频播放状态指示用户终端中不存在播放中的视频,在用户终端播放监控视频,以及突出显示第二提醒用字幕。
上述步骤301-311的具体的执行过程可参考图2对应实施例中的相关说明,在此不再赘述。
下面是一个场景示例:用户可以在儿童所在的房间内设置摄像头,并利用摄像头拍摄房间内的情况,并将拍摄的内容实时地发送至边缘设备(如MEC服务器),然后由边缘设备对摄像头采集到的音频和视频进行分析,以确定是否存在以下场景“陌生人出现”、“儿童睡醒了”、“儿童摔倒了”。如果存在其中的一个或多个场景,获取存在的场景对应的提醒信息。以“陌生人出现”作为示例,则可以获取该场景对应的提醒信息“儿童房间有陌生人出现,请注意!!!”。同时,边缘设备还可以对音频进行语音识别,得到语音识别结果。然后,将音频、视频、提醒信息、音频的语音识别结果推送至用户终端。若用户终端当前正在全屏观看电影,则可以在用户终端的右下角播放视频,同时在用户终端的屏幕中间以大字号红色粗体格式滚动展示提醒信息,在用户终端的屏幕下方展示音频的语音识别结果。
下面是又一个场景示例:用户可以在厨房中部署摄像头来采集厨房内的情况。摄像头可以将拍摄的内容实时地发送至边缘设备(如MEC服务器),然后由边缘设备分析采集到的音频中是否出现“蜂鸣”、“异响”、“警报声”等危险场景。若出现“蜂鸣”、“异响”、“警报声”等场景,生成提醒信息“厨房有危险!!!”。同时,边缘设备还可以对摄像头采集的视频进行分析,并裁剪出其中的危险场景对应的图像区域。然后将音频、视频、提醒信息、图像区域推送至用户终端。若用户终端当前并没有浏览音视频,则可以在用户终端播放采集的音频和视频,同时以大字号红色粗体格式滚动展示提醒信息,并展示图像区域。
本公开的上述实施例体用的方法通过边缘设备对接收到的监控视频和监控音频进行分析和处理,并生成监控视频和监控音频分别对应的提醒用字幕,然后在检测到提醒任务时,将监控音频、监控视频,以及生成的提醒信用字幕推送至用户终端,并根据用户终端的当前的音视频播放状态,灵活有选择性地展示监控音频、监控视频以及提醒用字幕,以保证在不打扰用户正在观看的视频或正在听的音频的同时,通过视频或字幕等信息使用户了解监控内容,实现对用户的低打扰性。
进一步参考图4,其示出了用于推送信息的方法的再一个实施例的流程400。该用于推送信息的方法的流程400,包括以下步骤:
步骤401,获取监控数据。
步骤402,确定监控数据指示的监控内容是否对应有提醒任务。
步骤403,响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息。
上述步骤401、402、403的具体的执行过程可参考图2对应实施例中的步骤201、202、203的相关说明,在此不再赘述。
步骤404,获取用于表征用户终端的信息展示方式的属性信息。
在本实施例中,用于表征用户终端的信息展示方式的属性信息可以包括以下至少一项:尺寸信息、网络状态信息、编解码器信息。其中,尺寸信息可以指示用户终端的显示屏幕的尺寸。网络状态信息可以指示用户终端所连接的网络的各种属性信息(如网络类型、网络质量等等)。编解码器信息可以指示用户终端所支持的音频和视频格式等。
边缘设备可以通过各种方式灵活地获取用户终端的信息展示方式的属性信息。例如,边缘设备可以通过对用户终端的硬件或软件信息进行检测,以确定用户终端的信息展示方式的属性信息。又例如,边缘设备也可以接收用户发送的用户终端的信息展示方式的属性信息。
步骤405,按照属性信息,对提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
在本实施例中,在获取到用于表征用户终端的信息展示方式的属性信息之后,可以根据获取到的属性信息对待推送的提醒信息进行调整,以使调整后的提醒信息适配于用户终端的信息展示方式的属性信息,然后可以将调整后的提醒信息推送至用户终端。
根据不同的应用需求和应用场景,可以灵活确定针对提醒信息的调整方式。例如,根据用户终端的尺寸信息,可以调整提醒信息的展示窗口的尺寸和位置,以避免提醒信息的展示窗口过大或过小。又例如,根据用户终端的网络状态信息,可以调整提醒信息中的图像或视频的分辨率等,以平衡用户终端接收提醒信息的速度和耗费的流量等。再例如,根据用户终端的编解码器信息可以调整提醒信息的格式,以避免用户终端无法解析提醒信息,从而无法展示提醒信息的情况。
可选地,边缘设备可以先确定提醒信息是否与用于表征用户终端的信息展示方式的属性信息相匹配,响应于确定提醒信息是否与用于表征用户终端的信息展示方式的属性信息不匹配,对提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
在本实施例的一些可选的实现方式中,将提醒信息推送至用户终端,包括:获取用户终端集和用户终端集中的各用户终端的属性信息,根据获取的属性信息,从用户终端集中选取用户终端,以及将提醒信息推送至选取的用户终端。
其中,用户终端的属性信息可以包括以下至少一项:尺寸信息、网络状态信息、编解码器信息、活动状态。其中,尺寸信息可以指示用户终端的显示屏幕的尺寸。网络状态信息可以指示用户终端所连接的网络的各种属性信息(如网络类型、网络质量等等)。编解码器信息可以指示用户终端所支持的音频和视频格式等。活动状态可以指当前用户终端是否在线(如开机或关机等)。
边缘设备可以通过各种方式灵活地获取各用户终端的属性信息。例如,边缘设备可以通过对每个用户终端的硬件或软件信息进行检测,以确定该用户终端的信息展示方式的属性信息。又例如,边缘设备也可以接收用户发送的各用户终端的信息展示方式的属性信息。
在获取到各个用户终端的属性信息之后,可以按照预先设置的优先级排序方式对各用户终端进行排序,然后可以按照优先级从高到低的顺序选取一个或多个用户终端,并向选取的用户终端推送提醒信息。
例如,可以设置活动状态为开机的用户终端的优先级高于活动状态为关机的用户终端。又例如,可以设置使用无线网络的用户终端的优先级高于使用数据网络的用户终端。再例如,可以设置所连接的网络的质量高的用户终端的优先级高于所连接的网络的质量低的用户终端。应当可以理解,用户终端的优先级的设置方式可以由技术人员或用户根据实际的应用需求进行设置。
由此,可以使得用户可以较高质量的接收提醒信息,也可以减少出现用户无法及时接收到提醒信息的情况。
本公开的上述实施例提供的方法通过获取用户终端的属性信息,并根据终端的属性信息,对提醒信息进行调整,以使调整后的提醒信息适配于用户终端的属性信息。由此,可以保证提醒信息在用户终端的正确展示,避免出现如用户终端无法解析提醒信息、提醒信息的传输速率过低等情况,有助于提升提醒信息的传输过程和展示过程的可靠性和稳定性。
进一步参考图5,其示出了本申请实施例的用于推送信息的系统的一个实施例的时序图500。
本公开实施例中的用于推送信息的系统可以包括数据采集设备(如图1所示的数据采集设备101、102)、边缘设备(如图1所示的边缘设备103)和用户终端(如图1所示的用户终端104、105)。其中,数据采集设备用于采集监控数据,以及将采集的监控数据发送至边缘设备。边缘设备用于确定监控数据指示的监控内容是否对应有提醒任务;响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;将提醒信息推送至用户终端。
如图5所示,在步骤501中,边缘设备采集监控数据。
在步骤502中,边缘设备将采集到的监控数据发送至边缘设备。
在步骤503中,边缘设备确定监控数据指示的监控内容是否对应有提醒任务。
在步骤504中,边缘设备响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息。
在步骤505中,边缘设备将生成的提醒信息推送至用户终端。
在本实施例的一些可选的实现方式中,监控数据包括监控音频;以及边缘设备进一步用于:根据监控音频,生成第一提醒用字幕作为提醒信息。
在本实施例的一些可选的实现方式中,边缘设备进一步用于确定用户终端的音频播放状态,其中,音频播放状态用于指示用户终端中是否存在播放中的音频;响应于确定用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放监控音频;响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在用户终端展示第一提醒用字幕。
在本实施例的一些可选的实现方式中,监控数据包括监控视频;以及边缘设备进一步用于根据监控视频,生成第二提醒用字幕作为提醒信息。
在本实施例的一些可选的实现方式中,边缘设备进一步用于确定用户终端的视频播放状态,其中,视频播放状态用于指示用户终端中是否存在播放中的视频;响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在用户终端按照目标尺寸播放监控视频,以及突出显示第二提醒用字幕,其中,目标尺寸小于播放中的视频的播放尺寸。
在本实施例的一些可选的实现方式中,边缘设备进一步用于对监控视频进行场景识别,得到用于指示监控视频是否存在预设场景的识别结果;响应于确定识别结果指示监控视频存在预设场景,确定监控数据指示的监控内容对应有提醒任务;获取预设场景对应的提醒信息。
在本实施例的一些可选的实现方式中,边缘设备进一步用于从监控视频中截取包含预设场景的视频内容作为提醒信息。
在本实施例的一些可选的实现方式中,边缘设备进一步用于获取用于表征用户终端的信息展示方式的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息;按照属性信息,对提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
在本实施例的一些可选的实现方式中,边缘设备进一步用于获取用户终端集和用户终端集中的各用户终端的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息、活动状态;根据属性信息,从用户终端集中选取用户终端,以及将提醒信息推送至选取的用户终端。
在本实施例的一些可选的实现方式中,缘设备进一步用于存储监控数据。
在本实施例的一些可选的实现方式中,边缘设备位于基于边缘计算技术构建的网络中,其中,边缘计算技术包括以下至少一项:多接入边缘计算MEC技术、微云技术、雾计算技术。
在本实施例的一些可选的实现方式中,边缘设备设置在智能家居设备中。
上述步骤501-505的具体的执行过程可参考图2、图3、图4对应实施例中的相关说明,在此不再赘述。
本申请实施例提供的用于推送信息的系统,首先,通过数据采集设备采集监控数据,并将采集的监控数据发送至边缘设备。然后,边缘设备确定监控数据指示的监控内容是否对应有提醒任务,以及响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息,并将提醒信息推送至用户终端。由此,通过边缘设备负责对监控数据的所有处理过程,可以降低远端服务器的数据处理压力,而且还可以降低使用远端服务器时传输距离所必然带来的延迟,以及避免远端服务器可能出现的拥塞而对实时性产生的影响,有助于提升针对监控数据的提醒信息的推送效率和可靠性。另外,通过避免将监控数据传送至远端服务器,也可以降低用户隐私泄露的风险,提升数据安全性,同时还可以降低实时监控的成本。
进一步参考图6,作为对上述各图所示方法的实现,本公开提供了用于推送信息的装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种边缘设备中。
如图6所示,本实施例提供的用于推送信息的装置600包括获取单元601、确定单元602、生成单元603和推送单元604。其中,获取单元601被配置成获取监控数据;确定单元602被配置成确定监控数据指示的监控内容是否对应有提醒任务;生成单元603被配置成响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;推送单元604被配置成将提醒信息推送至用户终端。
在本实施例中,用于推送信息的装置600中:获取单元601、确定单元602、生成单元603和推送单元604的具体处理及其所带来的技术效果可分别参考图2对应实施例中的步骤201、步骤202、步骤203和步骤204的相关说明,在此不再赘述。
在本实施例的一些可选的实现方式中,监控数据包括监控音频;以及生成单元603进一步被配置成:根据监控音频,生成第一提醒用字幕作为提醒信息。
在本实施例的一些可选的实现方式中,上述用于推送信息的装置600还包括展示单元(图中未示出)被配置成:确定用户终端的音频播放状态,其中,音频播放状态用于指示用户终端中是否存在播放中的音频;响应于确定用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放监控音频;响应于确定用户终端的音频播放状态指示用户终端中存在播放中的音频,在用户终端展示第一提醒用字幕。
在本实施例的一些可选的实现方式中,监控数据包括监控视频;以及上述生成单元603进一步被配置成:根据监控视频,生成第二提醒用字幕作为提醒信息。
在本实施例的一些可选的实现方式中,上述展示单元进一步被配置成:确定用户终端的视频播放状态,其中,视频播放状态用于指示用户终端中是否存在播放中的视频;响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在用户终端按照目标尺寸播放监控视频,以及突出显示第二提醒用字幕,其中,目标尺寸小于播放中的视频的播放尺寸。
在本实施例的一些可选的实现方式中,上述确定单元602进一步被配置成:对监控视频进行场景识别,得到用于指示监控视频是否存在预设场景的识别结果;响应于确定识别结果指示监控视频存在预设场景,确定监控数据指示的监控内容对应有提醒任务;以及上述生成单元603进一步被配置成:获取预设场景对应的提醒信息。
在本实施例的一些可选的实现方式中,上述生成单元603进一步被配置成:从监控视频中截取包含预设场景的视频内容作为提醒信息。
在本实施例的一些可选的实现方式中,上述推送单元604进一步被配置成:获取用于表征用户终端的信息展示方式的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息;按照属性信息,对提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
在本实施例的一些可选的实现方式中,上述推送单元604进一步被配置成:获取用户终端集和用户终端集中的各用户终端的属性信息,其中,属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息、活动状态;根据属性信息,从用户终端集中选取用户终端,以及将提醒信息推送至选取的用户终端。
在本实施例的一些可选的实现方式中,上述用于推送信息的装置600还包括存储单元(图中未示出)被配置成存储监控数据。
在本实施例的一些可选的实现方式中,边缘设备位于基于边缘计算技术构建的网络中,其中,边缘计算技术包括以下至少一项:多接入边缘计算MEC技术、微云技术、雾计算技术。
在本实施例的一些可选的实现方式中,边缘设备设置在智能家居设备中。
本公开的上述实施例提供的装置,通过获取单元获取监控数据;确定单元确定监控数据指示的监控内容是否对应有提醒任务;生成单元响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;推送单元将提醒信息推送至用户终端。由此,可以降低远端服务器的数据处理压力。同时,还可以降低使用远端服务器时传输距离所必然带来的延迟,以及避免远端服务器可能出现的拥塞而对实时性产生的影响,有助于提升针对监控数据的提醒信息的推送效率和可靠性。另外,通过避免将监控数据传送至远端服务器,也可以降低用户隐私泄露的风险,提升数据安全性,同时还可以降低实时监控的成本。
下面参考图7,其示出了适于用来实现本公开的实施例的电子设备(例如图1中的边缘设备)700的结构示意图。图7示出的边缘设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图7所示,电子设备700可以包括处理装置(例如中央处理器、图形处理器等)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储装置708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中,还存储有电子设备700操作所需的各种程序和数据。处理装置701、ROM 702以及RAM703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
通常,以下装置可以连接至I/O接口705:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置706;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置707;包括例如磁带、硬盘等的存储装置708;以及通信装置709。通信装置709可以允许电子设备700与其他设备进行无线或有线通信以交换数据。虽然图7示出了具有各种装置的电子设备700,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图7中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置709从网络上被下载和安装,或者从存储装置708被安装,或者从ROM702被安装。在该计算机程序被处理装置701执行时,执行本公开的实施例的方法中限定的上述功能。
需要说明的是,本公开的实施例所述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述边缘设备中所包含的;也可以是单独存在,而未装配入该边缘设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该边缘设备执行时,使得该边缘设备:获取监控数据;确定监控数据指示的监控内容是否对应有提醒任务;响应于确定监控数据指示的监控内容对应有提醒任务,生成提醒信息;将提醒信息推送至用户终端。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的实施例的操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括获取单元、确定单元、生成单元和推送单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,获取单元还可以被描述为“获取监控数据的单元”。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (14)

1.一种用于推送信息的方法,应用于边缘设备,所述方法包括:
获取监控数据;
确定所述监控数据指示的监控内容是否对应有提醒任务;
响应于确定所述监控数据指示的监控内容对应有提醒任务,生成提醒信息;
将所述提醒信息推送至用户终端。
2.根据权利要求1所述的方法,其中,所述监控数据包括监控音频;以及
所述生成提醒信息,包括:
根据所述监控音频,生成第一提醒用字幕作为提醒信息。
3.根据权利要求2所述的方法,其中,在所述将所述提醒信息推送至用户终端之后,所述方法还包括:
确定所述用户终端的音频播放状态,其中,音频播放状态用于指示用户终端中是否存在播放中的音频;
响应于确定所述用户终端的音频播放状态指示用户终端中不存在播放中的音频,播放所述监控音频;
响应于确定所述用户终端的音频播放状态指示用户终端中存在播放中的音频,在所述用户终端展示所述第一提醒用字幕。
4.根据权利要求1所述的方法,其中,所述监控数据包括监控视频;以及
所述生成提醒信息,包括:
根据所述监控视频,生成第二提醒用字幕作为提醒信息。
5.根据权利要求4所述的方法,其中,在所述将所述提醒信息推送至用户终端之后,所述方法还包括:
确定所述用户终端的视频播放状态,其中,视频播放状态用于指示用户终端中是否存在播放中的视频;
响应于确定用户终端的视频播放状态指示用户终端中存在播放中的视频,在所述用户终端按照目标尺寸播放所述监控视频,以及突出显示所述第二提醒用字幕,其中,所述目标尺寸小于所述播放中的视频的播放尺寸。
6.根据权利要求4所述的方法,其中,所述确定所述监控数据指示的监控内容是否对应有提醒任务,包括:
对所述监控视频进行场景识别,得到用于指示所述监控视频是否存在预设场景的识别结果;
响应于确定所述识别结果指示所述监控视频存在预设场景,确定所述监控数据指示的监控内容对应有提醒任务;以及
所述生成提醒信息,包括:
获取所述预设场景对应的提醒信息。
7.根据权利要求6所述的方法,其中,所述生成提醒信息,包括:
从所述监控视频中截取包含所述预设场景的视频内容作为提醒信息。
8.根据权利要求1所述的方法,其中,所述将所述提醒信息推送至用户终端,包括:
获取用于表征所述用户终端的信息展示方式的属性信息,其中,所述属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息;
按照所述属性信息,对所述提醒信息进行调整,以及将调整后的提醒信息推送至用户终端。
9.根据权利要求1所述的方法,其中,所述将所述提醒信息推送至用户终端,包括:
获取用户终端集和所述用户终端集中的各用户终端的属性信息,其中,所述属性信息包括以下至少一项:尺寸信息、网络状态信息、编解码器信息、活动状态;
根据所述属性信息,从所述用户终端集中选取用户终端,以及将所述提醒信息推送至选取的用户终端。
10.根据权利要求1-9之一所述的方法,其中,所述方法还包括:
存储所述监控数据。
11.根据权利要求1-9之一所述的方法,其中,所述边缘设备位于基于边缘计算技术构建的网络中,其中,所述边缘计算技术包括以下至少一项:多接入边缘计算MEC技术、微云技术、雾计算技术。
12.根据权利要求1-9之一所述的方法,其中,所述边缘设备设置在智能家居设备中。
13.一种信息推送系统,包括边缘设备、用户终端、数据采集设备;所述数据采集设备,用于采集监控数据,以及将采集的监控数据发送至所述边缘设备;
所述边缘设备,用于确定所述监控数据指示的监控内容是否对应有提醒任务;响应于确定所述监控数据指示的监控内容对应有提醒任务,生成提醒信息;将所述提醒信息推送至所述用户终端。
14.一种用于推送信息的装置,其中,所述装置包括:
获取单元,被配置成获取监控数据;
确定单元,被配置成确定所述监控数据指示的监控内容是否对应有提醒任务;
生成单元,被配置成响应于确定所述监控数据指示的监控内容对应有提醒任务,生成提醒信息;
推送单元,被配置成将所述提醒信息推送至用户终端。
CN202010530959.1A 2020-06-11 2020-06-11 用于推送信息的方法、装置和系统 Active CN111741355B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010530959.1A CN111741355B (zh) 2020-06-11 2020-06-11 用于推送信息的方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010530959.1A CN111741355B (zh) 2020-06-11 2020-06-11 用于推送信息的方法、装置和系统

Publications (2)

Publication Number Publication Date
CN111741355A true CN111741355A (zh) 2020-10-02
CN111741355B CN111741355B (zh) 2023-01-10

Family

ID=72648893

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010530959.1A Active CN111741355B (zh) 2020-06-11 2020-06-11 用于推送信息的方法、装置和系统

Country Status (1)

Country Link
CN (1) CN111741355B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113987346A (zh) * 2021-10-28 2022-01-28 广西通信规划设计咨询有限公司 一种ai云计算分析处理系统

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105100711A (zh) * 2015-07-08 2015-11-25 小米科技有限责任公司 信息发送方法及装置
CN105788166A (zh) * 2016-01-29 2016-07-20 维沃移动通信有限公司 一种监控报警方法和装置
CN105933545A (zh) * 2016-06-30 2016-09-07 秦晓飞 一种实时流量及话费提醒装置与方法
CN106407089A (zh) * 2016-09-14 2017-02-15 三星电子(中国)研发中心 终端监控系统、方法和装置
US20170092089A1 (en) * 2015-09-30 2017-03-30 Tianjin Hualai Technology Co., Ltd. Security monitoring apparatus, camera having the same and security monitoring method
US20170155928A1 (en) * 2015-11-26 2017-06-01 Le Holdings (Beijing) Co., Ltd. Method, Device and System for Playing Live Video
CN107483544A (zh) * 2017-07-21 2017-12-15 湖南机友科技有限公司 一种移动智能监控系统及监控方法
CN108234940A (zh) * 2017-12-07 2018-06-29 广西师范大学 一种视频监控服务端、系统及方法
CN108538023A (zh) * 2018-04-16 2018-09-14 广州蓝豹智能科技有限公司 行为监视方法、装置及设备
CN108696723A (zh) * 2018-05-29 2018-10-23 深圳市零度智控科技有限公司 云监控方法、云服务器及计算机可读存储介质
CN108846922A (zh) * 2018-05-29 2018-11-20 深圳市零度智控科技有限公司 云监控方法、云服务器及计算机可读存储介质
CN110081983A (zh) * 2019-04-18 2019-08-02 珠海格力电器股份有限公司 一种监测方法、装置、电子设备及存储介质
CN110290415A (zh) * 2019-07-29 2019-09-27 四川长虹电器股份有限公司 一种实现多设备间媒体播放无缝协同的方法
CN110557419A (zh) * 2018-06-01 2019-12-10 杭州海康威视数字技术股份有限公司 一种任务处理方法、装置及云计算系统
CN110661659A (zh) * 2019-09-23 2020-01-07 上海艾融软件股份有限公司 一种告警方法、装置、系统及电子设备

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105100711A (zh) * 2015-07-08 2015-11-25 小米科技有限责任公司 信息发送方法及装置
US20170092089A1 (en) * 2015-09-30 2017-03-30 Tianjin Hualai Technology Co., Ltd. Security monitoring apparatus, camera having the same and security monitoring method
US20170155928A1 (en) * 2015-11-26 2017-06-01 Le Holdings (Beijing) Co., Ltd. Method, Device and System for Playing Live Video
CN105788166A (zh) * 2016-01-29 2016-07-20 维沃移动通信有限公司 一种监控报警方法和装置
CN105933545A (zh) * 2016-06-30 2016-09-07 秦晓飞 一种实时流量及话费提醒装置与方法
CN106407089A (zh) * 2016-09-14 2017-02-15 三星电子(中国)研发中心 终端监控系统、方法和装置
CN107483544A (zh) * 2017-07-21 2017-12-15 湖南机友科技有限公司 一种移动智能监控系统及监控方法
CN108234940A (zh) * 2017-12-07 2018-06-29 广西师范大学 一种视频监控服务端、系统及方法
CN108538023A (zh) * 2018-04-16 2018-09-14 广州蓝豹智能科技有限公司 行为监视方法、装置及设备
CN108696723A (zh) * 2018-05-29 2018-10-23 深圳市零度智控科技有限公司 云监控方法、云服务器及计算机可读存储介质
CN108846922A (zh) * 2018-05-29 2018-11-20 深圳市零度智控科技有限公司 云监控方法、云服务器及计算机可读存储介质
CN110557419A (zh) * 2018-06-01 2019-12-10 杭州海康威视数字技术股份有限公司 一种任务处理方法、装置及云计算系统
CN110081983A (zh) * 2019-04-18 2019-08-02 珠海格力电器股份有限公司 一种监测方法、装置、电子设备及存储介质
CN110290415A (zh) * 2019-07-29 2019-09-27 四川长虹电器股份有限公司 一种实现多设备间媒体播放无缝协同的方法
CN110661659A (zh) * 2019-09-23 2020-01-07 上海艾融软件股份有限公司 一种告警方法、装置、系统及电子设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113987346A (zh) * 2021-10-28 2022-01-28 广西通信规划设计咨询有限公司 一种ai云计算分析处理系统

Also Published As

Publication number Publication date
CN111741355B (zh) 2023-01-10

Similar Documents

Publication Publication Date Title
CN106548364B (zh) 信息发送方法及装置
CN110351572B (zh) 直播间信息的更新方法、装置、设备及存储介质
EP3051463A1 (en) Image processing method and electronic device for supporting the same
EP2688296A1 (en) Video monitoring system and method
JP2017112609A (ja) 視覚的または聴覚的効果の双方向伝達を利用した映像通話方法およびシステム
KR102591803B1 (ko) 동영상 인터랙션 방법, 장치, 전자 설비 및 저장 매체
US20200204643A1 (en) User profile generation method and terminal
KR102376700B1 (ko) 비디오 컨텐츠 생성 방법 및 그 장치
CN111414516A (zh) 一种直播间消息处理方法、装置、电子设备及存储介质
CN112995759A (zh) 互动业务处理方法、系统、装置、设备及存储介质
CN112488783B (zh) 图像采集方法、装置和电子设备
US10685642B2 (en) Information processing method
CN109447701A (zh) 应用程序反作弊方法、装置和服务端
CN112714329A (zh) 直播间的显示控制方法、装置、存储介质与电子设备
CN112969093A (zh) 互动业务处理方法、装置、设备及存储介质
CN111741355B (zh) 用于推送信息的方法、装置和系统
CN115278139A (zh) 一种视频处理方法、装置、电子设备及存储介质
TW201315234A (zh) 視頻監控系統及方法
CN112528052A (zh) 多媒体内容输出方法、装置、电子设备和存储介质
KR20210101920A (ko) 서버 장치 및 그의 제어 방법
WO2023005508A1 (zh) 一种问卷投放方法、系统、设备、介质及产品
CN113590063B (zh) 第三方控制多媒体呈现的方法
US10558697B2 (en) Segmenting a set of media data using a set of social networking data
CN113472779A (zh) 一种数据处理方法和装置
CN112866332A (zh) 基于云边融合实现突发事件识别预警的系统、方法、装置、处理器及其存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant