CN112584083A - 视频播放方法、系统、电子设备和存储介质 - Google Patents

视频播放方法、系统、电子设备和存储介质 Download PDF

Info

Publication number
CN112584083A
CN112584083A CN202011202335.3A CN202011202335A CN112584083A CN 112584083 A CN112584083 A CN 112584083A CN 202011202335 A CN202011202335 A CN 202011202335A CN 112584083 A CN112584083 A CN 112584083A
Authority
CN
China
Prior art keywords
picture
video picture
unmanned
data
original video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011202335.3A
Other languages
English (en)
Other versions
CN112584083B (zh
Inventor
吴文宪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Guangzhou Shirui Electronics Co Ltd
Original Assignee
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Guangzhou Shirui Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Shiyuan Electronics Thecnology Co Ltd, Guangzhou Shirui Electronics Co Ltd filed Critical Guangzhou Shiyuan Electronics Thecnology Co Ltd
Priority to CN202011202335.3A priority Critical patent/CN112584083B/zh
Priority to PCT/CN2020/138146 priority patent/WO2022088447A1/zh
Publication of CN112584083A publication Critical patent/CN112584083A/zh
Application granted granted Critical
Publication of CN112584083B publication Critical patent/CN112584083B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Abstract

本申请涉及一种视频播放方法、系统、电子设备和存储介质。所述方法包括:当播放第一原始视频画面时,采集本地传感数据;根据所述本地传感数据,确定第一设备是否无人;当确定所述第一设备无人,生成无人观看通知;发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;播放所述降质视频画面。采用本方法能够可以在第一设备侧无人观看时,在第二设备对后续播放的视频进行画面降质,减少需要进行传输的视频数据,从而在视频会议过程中较好地改善网络传输资源的占用情况,提高网络传输资源利用率。

Description

视频播放方法、系统、电子设备和存储介质
技术领域
本申请涉及视频处理技术领域,特别是涉及一种视频播放方法、系统、装置、电子设备和存储介质。
背景技术
视频会议可以满足人们随时随地进行沟通的需要,视频会议过程中通常需要传输大量的视频、图像等信息,而且通常需要在多方用户之间进行信息传输,随着视频会议业务的增多,特别是高清视频会议业务的增多,视频会议中视频会面播放过程需要占用较多的网络传输资源,容易引起网络拥堵,造成视频画面播放出现缓慢、卡顿等现象。
常见的改善措施是视频画面发送方对待发送的视频画面增加感兴趣区域检测,然后保持感兴趣区域画质,降低非感兴趣区域的画质,从而降低视频码率,以改善网络传输资源的占用情况。但是这种方案,对视频会议过程中网络传输资源的占用情况只能起到轻微的改善作用,无法较好地改善对网络传输资源的利用。
发明内容
基于此,有必要针对上述技术问题,提供一种视频播放方法、系统、装置、电子设备和存储介质。
第一方面,提供了一种视频播放方法,所述方法包括:
当播放第一原始视频画面时,采集本地传感数据;
根据所述本地传感数据,确定第一设备是否无人;
当确定所述第一设备无人,生成无人观看通知;
发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
播放所述降质视频画面。
第二方面,提供了一种视频播放方法,所述方法包括:
发送第一原始视频画面至第一设备;
当接收到所述第一设备发送的无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面;所述无人观看通知为所述第一设备在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据确定所述第一设备无人时,生成的通知;所述画面降质包括降低分辨率和/或降低帧率;
发送所述降质视频画面至所述第一设备。
第三方面,提供了一种视频播放系统,所述系统包括第一设备和第二设备;
所述第二设备,用于发送第一原始视频画面至所述第一设备;
所述第一设备,用于在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据,确定所述第一设备是否无人,当确定所述第一设备无人,生成无人观看通知,并发送所述无人观看通知至所述第二设备;
所述第二设备,还用于在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
所述第一设备,还用于播放所述降质视频画面。
第四方面,提供了一种视频播放装置,所述装置包括:
采集模块,用于当播放第一原始视频画面时,采集本地传感数据;
确定模块,用于根据所述本地传感数据,确定第一设备是否无人;
通知生成模块,用于当确定所述第一设备无人,生成无人观看通知;
通知发送模块,用于发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
播放模块,用于播放所述降质视频画面。
第五方面,提供了一种视频播放装置,所述装置包括:
第一发送模块,用于发送第一原始视频画面至第一设备;
画面降质模块,用于当接收到所述第一设备发送的无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面;所述无人观看通知为所述第一设备在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据确定所述第一设备无人时,生成的通知;所述画面降质包括降低分辨率和/或降低帧率;
第二发送模块,用于发送所述降质视频画面至所述第一设备。
第六方面,提供了一种电子设备,包括:存储器、一个或多个处理器;
所述存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如下操作:
当播放第一原始视频画面时,采集本地传感数据;
根据所述本地传感数据,确定第一设备是否无人;
当确定所述第一设备无人,生成无人观看通知;
发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
播放所述降质视频画面。
第七方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
当播放第一原始视频画面时,采集本地传感数据;
根据所述本地传感数据,确定第一设备是否无人;
当确定所述第一设备无人,生成无人观看通知;
发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
播放所述降质视频画面。
上述视频播放方法、系统、装置、电子设备和存储介质,通过当播放第一原始视频画面时,采集本地传感数据,根据本地传感数据确定第一设备是否无人,可以检测第一设备侧是否无人观看,当确定第一设备无人,生成无人观看通知,发送无人观看通知至第二设备,可以在第一设备侧无人观看时通知第二设备,第二设备在接收到通知时对第二原始视频画面进行画面降质,得到降质视频画面,并返回降质视频画面,第一设备播放降质视频画面,可以在第一设备侧无人观看时,在第二设备对后续播放的视频进行画面降质,减少需要进行传输的视频数据,从而在视频会议过程中较好地改善网络传输资源的占用情况,提高网络传输资源利用率。
进一步地,相比于现有技术中在第二设备视频画面中检测感兴趣区域和降低非感兴趣区域画质的方法,上述视频播放方法无需对视频画面进行太多的分析和处理,可以节约数据处理资源。
进一步地,上述视频播放方法可以在用户临时离开时进行画面降质,减少数据传输带宽,在检测到用户返回时恢复画质,从而减少用户对于画质的手动操作,提升用户体验,而且,可以在第一设备侧用户未察觉的情况下,减少数据传输带宽,提高网络传输资源利用率。
附图说明
图1是一种视频播放方法的应用环境的示意图;
图2是本申请实施例一提供的一种视频播放方法的流程图;
图3是本申请实施例一提供的视频播放方法的应用环境示意图;
图4是本申请实施例一的视频播放时用户离场的场景示意图;
图5是本申请实施例一的多用户视频播放的场景示意图;
图6是本申请实施例二提供的视频播放方法的应用环境示意图;
图7是本申请实施例三提供的一种视频播放方法的流程图;
图8是本申请实施例三的视频播放时用户返场的场景示意图;
图9是本申请实施例三的视频播放方法的时序图;
图10是本申请实施例三的服务器转发视频播放方法的时序图;
图11是本申请实施例三提供的一种视频播放方法的示意图;
图12是本申请实施例四提供的一种视频播放方法的流程图;
图13是本申请实施例六提供的一种视频播放装置的结构示意图;
图14是本申请实施例七提供的一种视频播放装置的结构示意图;
图15是本申请实施例八提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
图1是一种视频播放方法的应用环境的示意图。参考图1,在进行视频会议过程中,可以有至少一个本地设备102和至少一个异地设备104,其中,本地设备102和异地设备104可以但不限于是各种配置有摄像头的电脑、手机、平板或投影仪,本地设备102和异地设备104通过有线或无线网络相通信,可以直接相通信,也可以通过服务器相通信,本地设备102的显示屏上可以显示异地用户B和C的视频画面,异地设备104的显示屏上可以显示本地用户A的视频画面,本地设备102还可以显示异地设备104所共享的视频、图片和文档,异地设备104也可以显示本地设备102所共享的视频、图片和文档。
以下针对视频会议场景,以本地设备102对用户B的视频画面进行播放为例,对视频播放过程进行说明。本地设备102与用户B所使用的异地设备104建立通信连接后,异地设备104可以通过摄像头对用户B进行实时拍摄,获取到用户B的视频,并将用户B的视频按照设定的分辨率和帧率进行调整,生成固定分辨率和固定帧率的视频画面。为确保视频画面能够高效、可靠地传输至本地设备102,异地设备104可以使用视频编码器对视频画面进行编码,视频编码器按照预设码率对视频画面进行数据压缩,生成数据量相对较小的视频编码数据,异地设备104可以将视频编码数据传输至本地设备102。本地设备102在接收到视频编码数据后,可以通过视频解码器对其进行解码,还原视频画面,供本地设备102播放,本地设备102上可以实时显示用户B的视频画面。
需要说明的是,当异地设备104共享视频、图片或文档时,可以省略对用户B的视频拍摄过程,视频编码器可以直接对异地设备104上显示的画面进行编码,并将编码后的数据传输至本地设备102,本地设备102对其进行解码后,可以实时显示异地设备104所共享的视频、图片或文档。
异地设备104对用户A的视频画面进行播放,以及共享本地设备视频、图片或文档的过程,可以为上述过程的逆过程,在此不再赘述。
对于高清视频会议场景,为了播放高清视频画面,异地设备104可以生成分辨率和/或帧率较高的视频画面,传输至本地设备102进行播放。在视频编码码率不变的情况下,视频播放过程中需要传输的数据量较大,占用较多的网络传输资源。传统技术中通过在待发送的视频画面中检测感兴趣区域,保持感兴趣区域画质,降低非感兴趣区域画质来改善对网络传输资源的占用,但是这种方法仍然无法较好地改善对于网络传输资源的占用情况,难以提高网络传输资源利用率。
实施例一
图2是本申请实施例一提供的一种视频播放方法的流程图。
图3是一个实施例的一种视频播放方法的应用环境示意图。如图所示,用户通过至少一个第一设备302和至少一个第二设备304进行视频会议,其中,第一设备302可以为本地终端设备,第二设备304可以为异地终端设备。本实施例提供的视频播放方法可以由终端设备执行,该终端设备可以通过软件和/或硬件的方式实现,其中,软件的实现方式可以为在硬件上运行软件,该终端设备可以是两个或多个物理实体构成,也可以是一个物理实体构成。该终端设备可以是电脑、手机、平板或投影仪等。
具体的,参考图2,本申请实施例一的视频播放方法,以应用于图3中的第一设备302为例,具体包括:
步骤S210,当播放第一原始视频画面时,采集本地传感数据。
其中,原始视频画面可以为高显示质量的视频画面,第一原始视频画面可以为第二设备在当前时刻采集到的原始视频画面。
其中,本地传感数据可以为第一设备采集到的数据,其中,第一设备可以通过图像采集设备、音频采集设备和红外传感设备中的至少一种采集本地传感数据。
具体实现中,在进行视频会议过程中,第二设备可以采集异地用户的视频,得到高显示质量的原始视频画面,通过预设一定的采集周期,可以将当前时刻采集到的原始视频画面确定为第一原始视频画面,经过一定的采集周期到达下一时刻,可以将下一时刻采集到的原始视频画面确定为第二原始视频画面,依此类推。当前时刻,第二设备可以将高显示质量的第一原始视频画面发送至第一设备,第一设备在接收到第一原始视频画面后,播放第一原始视频画面,将第一原始视频画面显示在屏幕上。第一设备可以配置有图像采集设备、音频采集设备和红外传感设备中的至少一种,当播放第一原始视频画面时,第一设备可以通过图像采集设备采集本地的图像帧数据,将图像帧数据作为本地传感数据,还可以通过音频采集设备来采集第一设备周围的音频数据,将采集到的音频数据作为本地传感数据,还可以通过红外传感器来采集第一设备周围的红外数据,将采集到的红外数据作为本地传感数据。
例如,第一设备可以配置有前置摄像头,在播放第一原始视频画面时,可以通过前置摄像头拍摄第一设备显示屏前方一定范围内的视频,得到图像帧数据。
需要说明的是,上述原始视频画面可以不限于是采集到的异地用户的视频画面,原始视频画面还可以为第二设备所共享的视频、图片和文档的画面。
步骤S220,根据本地传感数据,确定第一设备是否无人。
步骤S230,当确定第一设备无人,则生成无人观看通知。
具体实现中,第一设备可以根据本地传感数据确定第一设备有人或无人的情况,并在无人时生成无人观看通知。
在一种具体实施方式中,第一设备可以通过图像采集设备采集本地视频,从本地视频中截取一帧图像或连续多帧图像,作为图像帧数据,第一设备还可以通过图像采集设备直接采集本地的图像帧数据。在采集到图像帧数据后,第一设备可以检测图像帧数据中是否有人脸,若检测到人脸,则可以确定第一设备有人,若未检测到人脸,则可以确定第一设备无人,并在第一设备生成无人观看通知。例如,在播放第一原始视频画面时,可以在本地视频中截取连续的N帧图像,若在任意一帧中检测到人脸,则可以确定第一设备有人,若在N帧图像中均未检测到人脸,则可以确定第一设备无人,并生成无人观看通知。
在另一种具体实施方式中,若本地传感数据为音频数据,第一设备可以统计音频数据中持续无人说话的时间长度,将时间长度与预设的时长阈值相比较,若未超过时长阈值,则可以确定第一设备有人,若超过时长阈值,则可以确定第一设备无人,并在第一设备生成无人观看通知。其中,第一设备可以将采集到的音频与预设的音频范围相比较,若不在预设的音频范围内,则可以判定无人说话。例如,在播放第一原始视频画面时,可以开始以1秒为间隔采集第一设备周围的音频,并识别音频中是否有人声,若无人声则开始计时,并统计无人声的持续时长,若持续时长未超过预设阈值10秒,则可以确定第一设备有人,否则,若持续时长超过10秒,则可以确定第一设备无人,并生成无人观看通知。还可以在第一设备设置音频范围500-2000Hz(赫兹),将采集到的音频数据与其相比较,若音频数据为400Hz,不在上述音频范围内,则可以判定无人说话。
在另一种具体实施方式中,若本地传感数据为红外数据,第一设备可以将红外数据与预设的红外数据区间相比较,若红外数据在该红外数据区间以内,则可以确定第一设备有人,若红外数据在红外数据区间以外,则可以确定第一设备无人,并在第一设备生成无人观看通知。例如,在播放第一原始视频画面时,可以通过红外测温仪测量第一设备周围的温度,若测量到的温度在人体温度区间内,则可以确定第一设备有人,否则,若测量到的温度在不在人体温度区间内,则可以确定第一设备无人,并生成无人观看通知。
步骤S240,发送无人观看通知至第二设备,以供第二设备在接收到无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回降质视频画面;画面降质包括降低分辨率和/或降低帧率。
步骤S250,播放降质视频画面。
其中,画面降质可以为降低画面显示质量的操作,包括降低分辨率和/或降低帧率。降质视频画面可以为画面显示质量降低的视频画面。
其中,第二原始视频画面可以为第二设备在下一时刻采集到的原始视频画面。
其中,第二设备可以为终端设备,还可以为服务器设备。
具体实现中,第一设备可以将无人观看通知发送至第二设备,第二设备在接收到无人观看通知时,可以在下一时刻对采集到的第二原始视频画面进行画面降质,得到降质视频画面,第二设备可以将降质视频画面发送至第一设备,第一设备在接收到第二设备发送的降质视频画面时,可以播放降质视频画面,将降质视频画面显示在屏幕上。
例如,第二设备可以在接收到无人观看通知时,将下一时刻采集到的高质量视频画面降低分辨率,生成分辨率较低的降质视频画面,发送给第一设备进行播放;第二设备还可以将下一时刻采集到的高质量视频画面降低帧率,生成帧率较低的降质视频画面,发送给第一设备进行播放。
其中,若第二设备的画面降质是将帧率降低至0,则可以不向第一设备传输视频画面,此种情况下第一设备显示静止的视频画面。
需要说明的是,若第一设备检测到第一原始视频画面有人观看,则无需发送通知,第二设备可以在下一时刻直接将采集到的第二原始视频画面发送至第一设备,第一设备可以对第二原始视频画面进行播放。若第一设备检测到第一原始视频画面由无人观看转为有人观看,还可以向第二设备发送有人观看通知,第二设备在接收到有人观看通知时,可以在下一时刻停止画面降质,直接将采集到的第二原始视频画面发送至第一设备,供第一设备播放。
图4是本申请实施例一的视频播放时用户离场的场景示意图。可以设定第一设备302当前时刻播放的原始视频画面分辨率为4000像素,帧率为25FPS(Frame Per Second,帧每秒),播放过程中可以实时检测第一设备302是否存在人体信息,例如,可以采集本地视频,通过检测本地视频中是否有人体移动、人体形状、人脸图像来判断第一设备302是否存在人体信息,还可以通过在第一设备302周围一定范围内是否能检测到人体红外数据或人声来判断第一设备302是否存在人体信息。若未检测到人体信息,则可以判定当前时刻第一设备302无人,原始视频画面无人观看,若检测到人体信息,则可以判定第一设备302有人,原始视频画面有人观看;第一设备302还可以配置有触摸屏,通过设置一个时间阈值,当触摸屏未接收到用户的触屏操作、且持续时间超过该时间阈值时,可以判定当前时刻的原始视频画面无人观看,否则可以判定为有人观看。如图所示,当本地用户A离开、第一设备302检测到当前时刻的原始视频画面无人观看时,可以通知第二设备304,第二设备304在接收到通知时可以在显示屏上显示本地用户A已离开,并对下一时刻的原始视频画面进行画面降质,例如,可以将分辨率降低至2000像素、或将帧率降低至15FPS,并将降质视频画面发送至第一设备302进行显示,例如,第一设备302可以显示低分辨率的异地用户B图像,第二设备304还可以将帧率降至0,不向第一设备302传输视频画面,此种情况下第一设备302显示静止的视频画面。
图5是本申请实施例一的多用户视频播放的场景示意图。如图所示,该场景下包括第一设备302和至少两个第二设备304,第一设备302有本地用户A,第二设备304有异地用户B和C,当本地用户A离开时,第一设备302可以发送无人观看通知给所有第二设备304,第二设备304在接收到无人观看通知时,可以在显示屏上显示本地用户A已离开,并正常显示未离开的用户B和C,第二设备304还可以根据不同的分辨率/帧率对各自的原始视频画面进行画面降质,生成降质视频画面,并将降质视频画面分别发送给第一设备302,在第一设备302上显示异地用户B和C的降质视频画面。
本申请实施例的技术方案,通过当播放第一原始视频画面时,采集本地传感数据,根据本地传感数据确定第一设备是否无人,可以检测第一设备侧是否无人观看,当确定第一设备无人,生成无人观看通知,发送无人观看通知至第二设备,可以在第一设备侧无人观看时通知第二设备,第二设备在接收到通知时对第二原始视频画面进行画面降质,得到降质视频画面,并返回降质视频画面,第一设备播放降质视频画面,可以在第一设备侧无人观看时,在第二设备对后续播放的视频进行画面降质,减少需要进行传输的视频数据,从而在视频会议过程中较好地改善网络传输资源的占用情况,提高网络传输资源利用率。
进一步地,相比于现有技术中在第二设备视频画面中检测感兴趣区域和降低非感兴趣区域画质的方法,上述视频播放方法无需对视频画面进行太多的分析和处理,可以节约数据处理资源。
进一步地,上述视频播放方法可以在用户临时离开时进行画面降质,减少数据传输带宽,在检测到用户返回时恢复画质,从而减少用户对于画质的手动操作,提升用户体验,而且,可以在第一设备侧用户未察觉的情况下,减少数据传输带宽,提高网络传输资源利用率。
可选的,所述本地传感数据包括第一设备的图像采集设备采集的图像帧数据。
其中,图像采集设备可以为采集第一设备周围视频或图像的设备,包括但不限于是各种摄像头和摄像机。
具体实现中,第一设备可以配置有图像采集设备,当播放第一原始视频画面时,第一设备可以通过图像采集设备采集本地视频,从本地视频中截取一帧图像或连续多帧图像,作为图像帧数据,第一设备还可以通过图像采集设备直接采集本地的图像帧数据。例如,第一设备可以配置有前置摄像头,在播放第一原始视频画面时,通过前置摄像头拍摄第一设备显示屏前方一定范围内的视频,通过截取视频中的图像帧得到图像帧数据,还可以通过前置摄像头拍摄第一设备显示屏前方一定范围内的图像,直接得到图像帧数据。
根据本申请实施例的技术方案,本地传感数据包括第一设备的图像采集设备采集的图像帧数据,可以便于检测本地无人情况。
可选的,所述步骤S220,包括:
依次获取图像帧数据,并对图像帧数据进行人脸检测;当在图像帧数据中检测到人脸,确定第一设备有人;当确认连续预设次数在获取的所述图像帧数据中未检测到人脸,确定第一设备无人。
其中,人脸检测可以为检测图像中是否有人脸。
具体实现中,第一设备可以从本地视频中依次获取图像帧数据,并检测图像帧数据中是否有人脸,若检测到人脸,则可以确定第一设备有人,若未检测到人脸,则可以确定第一设备无人。
例如,在播放第一原始视频画面时,可以在本地视频中截取连续的N帧图像,若在任意一帧中检测到人脸,则可以确定第一设备处有人,若在N帧图像中均未检测到人脸,则可以确定第一设备处无人。为提高检测准确性,还可以在N帧图像中的至少M(M≤N)帧中检测到人脸时,确定第一设备有人,若在小于M帧中检测到人脸,则可以确定第一设备无人。
需要说明的是,人脸检测还可以为检测图像中的人脸是否为指定的人脸,例如,可以检测图像帧数据中的人脸是否与本地用户A的人脸相匹配,若匹配,则可以确定第一设备有人,若不匹配,则确定第一设备无人。
根据本申请实施例的技术方案,通过依次获取图像帧数据,并对图像帧数据进行人脸检测,可以检测到图像帧数据中是否有人脸图像,当在图像帧数据中检测到人脸,确定第一设备有人,当确认连续预设次数在获取的所述图像帧数据中未检测到人脸,确定第一设备无人,可以根据人脸检测的结果确定第一设备处是否无人,以便在无人时降低显示画面质量,减少需要进行传输的视频数据,从而在视频会议过程中较好地改善网络传输资源的占用情况,提高网络传输资源利用率。
可选的,所述本地传感数据还包括第一设备的音频采集设备采集的音频数据,所述步骤S220,还包括:
统计音频数据中的静默时长;静默时长为音频数据中未检测到有人发声的时长;将静默时长与预设的时长阈值相比较;当静默时长未超过时长阈值,确定第一设备有人;当静默时长超过时长阈值,确定第一设备无人。
其中,音频采集设备可以为采集第一设备周围音频的设备,包括但不限于是各种传声器。
其中,音频数据可以为在第一设备周围采集到的声音。
其中,静默时长可以为音频数据中无人说话的时间长度。
具体实现中,第一设备可以配置有音频采集设备,当播放第一原始视频画面时,第一设备通过音频采集设备采集本地的音频数据,将音频数据作为本地传感数据。第一设备还可以将音频数据与人声的音频范围相比较,若本地音频不在人声的音频范围内,则可以确定无人说话,第一设备可以统计音频数据中持续无人说话的时间长度,得到静默时长,将静默时长与预设的时长阈值相比较,若静默时长未超过时长阈值,则可以确定第一设备有人,若静默时长超过时长阈值,则可以确定第一设备无人。
例如,第一设备可以配置有麦克风,在播放第一原始视频画面时,通过麦克风采集第一设备周围一定范围内的声音,还可以设置音频范围500-2000Hz,将采集到的声音与音频范围相比较,若声音的音频为400Hz,不在上述音频范围内,则可以判定为静默。在播放第一原始视频画面时,可以开始以1秒为间隔采集第一设备周围的声音,并识别声音是否为静默,若为静默则开始计时,并统计静默时长,若静默时长未超过预设阈值10秒,则可以确定第一设备有人,否则,若静默时长超过10秒,则可以确定第一设备无人。
需要说明的是,还可以检测音频数据是否为指定用户的音频,例如,可以检测音频数据是否与本地用户A的音频相匹配,若匹配,则可以确定本地用户A未静默,若不匹配,则可以确定本地用户A静默,并通过统计本地用户A的静默时长来确定第一设备是否无人。
根据本申请实施例的技术方案,通过统计音频数据中的静默时长,将静默时长与预设的时长阈值相比较,当静默时长未超过时长阈值,确定第一设备有人,当静默时长超过时长阈值,确定第一设备无人,可以根据静默时长的统计结果确定第一设备处是否无人,以便在无人时降低显示画面质量,减少需要进行传输的视频数据,从而在视频会议过程中较好地改善网络传输资源的占用情况,提高网络传输资源利用率。
可选的,所述本地传感数据还包括第一设备的红外传感设备采集的红外数据,所述步骤S220,还包括:
判断红外数据是否处于预设的红外数据区间内;当红外数据处于红外数据区间内,确定第一设备有人;当红外数据未处于红外数据区间内,确定第一设备无人。
其中,红外传感设备可以为采集第一设备周围红外数据的设备,包括但不限于是各种红外测温仪和红外成像仪。
其中,红外数据可以为在第一设备周围采集到的红外数据。
具体实现中,第一设备可以配置有红外传感设备,当播放第一原始视频画面时,第一设备通过红外传感设备采集本地的红外数据。第一设备还可以将采集到的红外数据与预设的红外数据区间相比较,若红外数据在红外数据区间以内,则可以确定第一设备有人,若红外数据在红外数据区间以外,则可以确定第一设备无人。
例如,第一设备可以配置有红外测温仪,在播放第一原始视频画面时,通过红外测温仪测量第一设备周围一定范围内的温度,作为红外数据,若测量到的温度在人体温度区间内,则可以确定第一设备有人,否则,若测量到的温度不在人体温度区间内,则可以确定第一设备无人。
根据本申请实施例的技术方案,通过判断红外数据是否处于预设的红外数据区间内,当红外数据处于红外数据区间内,确定第一设备有人,当红外数据未处于红外数据区间内,确定第一设备无人,可以根据红外数据所处的区间确定第一设备处是否无人,以便在无人时降低显示画面质量,减少需要进行传输的视频数据,从而在视频会议过程中较好地改善网络传输资源的占用情况,提高网络传输资源利用率。
实施例二
图6是另一个实施例的一种视频播放方法的应用环境示意图。如图所示,用户通过第一设备302、第二设备304和第三设备304进行视频会议,其中,第一设备302可以为本地终端设备,第二设备304可以为服务器,第三设备306可以为异地终端设备。其中,服务器可以是为视频播放提供临时存储和转发的服务器,可以用独立的服务器或者是多个服务器组成的服务器集群来实现,还可以为云服务器。
具体的,参考图6,本申请实施例二的视频播放方法,具体包括:
第二设备为终端或服务器;当第二设备为终端,第二原始视频画面为第二设备采集到的视频画面;当第二设备为服务器,第二原始视频画面为第三设备采集、并发送至第二设备的视频画面。
具体实现中,当第二设备为终端时,如图3-5所示,第二设备304可以为异地终端,通过采集异地用户视频,得到高显示质量的原始视频画面,其中包括第二原始视频画面。当第二设备为服务器时,如图6所示,第三设备306可以为异地终端,在采集异地用户视频,得到高显示质量的原始视频画面后,第三设备306可以将原始视频画面发送至第二设备304,第二设备304对原始视频画面进行存储,并转发给第一设备302,其中,原始视频画面可以包括第二原始视频画面。
当第二设备为服务器时,参考图6,异地终端可以将采集到的原始视频画面发送至服务器,服务器对原始视频画面进行存储,并转发给本地终端。异地终端可以在当前时刻将第一原始视频画面发送给服务器,在下一时刻将第二原始视频画面发送给服务器。当前时刻,服务器可以将高显示质量的第一原始视频画面发送至本地终端,本地终端在接收到第一原始视频画面后,对第一原始视频画面进行播放,并通过采集本地传感数据来检测第一原始视频画面是否有人观看,若检测到无人观看,则可以向服务器发送无人观看通知,服务器在接收到无人观看通知时,可以在下一时刻将存储的第二原始视频画面降低分辨率和/或降质帧率,得到降质视频画面,服务器可以将降质视频画面发送给本地终端进行播放。
其中,本地终端可以有本地用户A,异地终端可以有异地用户B和C,本地终端可以从服务器获取异地终端的视频画面,当本地用户A离开时,本地终端可以通知服务器,服务器在接收到通知时可以发送信息给异地终端,异地终端可以在显示屏上显示本地用户A已离开,并正常显示未离开的用户B和C,服务器还可以对服务器中存储的异地用户B和C的视频画面进行画面降质,并将降质视频画面发送给本地终端,本地终端上可以显示异地用户B和C的降质视频画面。
根据本申请实施例的技术方案,第二设备为终端或服务器,当第二设备为终端,第二原始视频画面为第二设备采集到的视频画面,当第二设备为服务器,第二原始视频画面为第三设备采集、并发送至第二设备的视频画面,可以由服务器执行对原始视频画面的画面降质,便于服务器进行集中式管理,提高视频处理速度,降低视频播放延时。
实施例三
图7是本申请实施例三提供的一种视频播放方法的流程图。具体的,以应用于图3-6中的第一设备302为例,本申请实施例三的视频播放方法,具体包括:
步骤S710,当播放第一原始视频画面时,采集本地传感数据;
步骤S720,根据本地传感数据,确定第一设备是否无人;
步骤S730,当确定第一设备无人,生成无人观看通知;
步骤S740,发送无人观看通知至第二设备,以供第二设备在接收到无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回降质视频画面;画面降质包括降低分辨率和/或降低帧率;
步骤S750,播放降质视频画面;
步骤S770,当播放降质视频画面时,若根据本地传感数据,确定第一设备有人,则生成有人观看通知;
具体实现中,第一设备在播放降质视频画面时,可以通过图像采集设备、音频采集设备和红外传感设备中的至少一种来采集本地传感数据,通过检测本地传感数据中是否存在包括人脸、人声和人体红外数据在内的人体信息,可以确定第一设备周围一定范围内是否有人,第一设备可以在有人时生成有人观看通知。由于根据本地传感数据确定第一设备有人的过程在前述实施例中已有详细说明,在此不再赘述。
步骤S770,发送有人观看通知至第二设备,以供第二设备在接收到有人观看通知时,停止对原始视频画面进行画面降质,并返回原始视频画面;
具体实现中,第一设备可以将有人观看通知发送至第二设备,第二设备在接收到有人观看通知时,可以停止对原始视频画面进行降低分辨率和/或降低帧率,并将原始视频画面发送给第一设备。
例如,异地终端可以在t+1时刻向本地终端发送分辨率2000像素、帧率15FPS的降质视频画面,若接收到本地终端反馈的有人观看通知,则可以在t+2时刻,将采集到的视频画面恢复至分辨率4000像素、帧率25FPS的高清视频画面,发送给本地终端。
步骤S780,播放原始视频画面。
具体实现中,第一设备在接收到第二设备发送的原始视频画面时,可以播放原始视频画面,显示在屏幕上。
图8是本申请实施例三的视频播放时用户返场的场景示意图。如图所示,当第一设备302播放降质视频画面、且本地用户A返回时,第一设备302可以检测到有人观看,并发送有人观看通知给第二设备304,第二设备304若接收到有人观看通知,则可以确认用户A已经返回,并停止对原始视频画面进行降质,向第一设备302发送高显示质量的原始视频画面,第二设备304还可以将用户A的返场信息显示在显示屏上。
根据本申请实施例的技术方案,当播放降质视频画面时,若根据本地传感数据,确定第一设备有人,则生成有人观看通知,发送有人观看通知至第二设备,并播放原始视频画面,可以在第一设备侧用户返回时,及时恢复视频画面质量,且无需用户手动操作,提升用户体验。
为了更清晰阐明本申请实施例提供的技术方案,以下将结合图9和10对该方案进行说明,图9是本申请实施例三的视频播放方法的时序图,该方法的具体流程如下:
步骤S901,第二设备采集第一原始视频画面;
步骤S902,第二设备将第一原始视频画面发送至第一设备;
步骤S903,第一设备播放第一原始视频画面;
步骤S904,第一设备采集本地传感数据,通过检测本地传感数据中是否存在包括人脸、人声和人体红外数据在内的人体信息,来判断第一设备是否无人,并在第一设备无人时,确定第一设备无人观看;
步骤S905,第一设备生成无人观看通知,将无人观看通知发送给第二设备;
步骤S906,第二设备采集第二原始视频画面;
步骤S907,若第二设备接收到无人观看通知,则对第二原始视频画面进行画面降质,得到降质视频画面;
步骤S908,第二设备发送降质视频画面至第一设备;
步骤S909,第一设备播放降质视频画面。
图10是本申请实施例三的服务器转发视频播放方法的时序图,该方法的具体流程如下:
步骤S1001,第三设备采集第一原始视频画面;
步骤S1002,第三设备将第一原始视频画面发送至第二设备;
步骤S1003,第二设备存储第一原始视频画面,并将第一原始视频画面转发至第一设备;
步骤S1004,第一设备播放第一原始视频画面;
步骤S1005,第一设备采集本地传感数据,通过检测本地传感数据中是否存在包括人脸、人声和人体红外数据在内的人体信息,来判断第一设备是否无人,并在第一设备无人时,确定第一设备无人观看;
步骤S1006,第一设备生成无人观看通知,将无人观看通知发送给第二设备;
步骤S1007,第三设备采集第二原始视频画面;
步骤S1008,第三设备将第二原始视频画面发送至第二设备;
步骤S1009,第二设备在接收到第二原始视频画面后对其进行存储,若第二设备接收到无人观看通知,则对存储的第二原始视频画面进行画面降质,得到降质视频画面;
步骤S1010,第二设备发送降质视频画面至第一设备;
步骤S1011,第一设备播放降质视频画面。
为了便于本领域技术人员深入理解本申请实施例,以下将结合一个具体示例进行说明。
图11是本申请实施例三提供的一种视频播放方法的示意图。如图11所示,位置1可以为第一设备所在位置,位置2可以为第二设备所在位置,为第二设备的视频画面设定感兴趣画面条件和非感兴趣画面条件,例如,可以将感兴趣画面条件设置为本地有人,将非感兴趣画面条件设置为本地无人,相应地,可以设置对于第二设备待传输视频画面的处理策略,例如,可以将第二设备非感兴趣画面的处理策略设置为降低分辨率或丢弃帧画面。第一设备可以采集本地的视频或图像,通过分析第一设备视频或图像,确定第二设备视频画面符合感兴趣画面条件或非感兴趣画面条件,例如,若本地有人,则可以判定当前第二设备视频画面为感兴趣画面,若本地无人,则可以判定当前第二设备视频画面为非感兴趣画面,第一设备可以将有人或无人的视频分析结果输入视频处理单元。第二设备在采集到异地视频后,可以将异地视频输入视频处理单元,并根据第一设备的视频分析结果确定相应的处理策略,例如,若本地有人,当前异地视频画面为感兴趣画面,则可以不对异地视频进行画面降质,保持视频清晰度不变,确保第一设备可以显示优质的视频画面,若本地无人,当前异地视频画面为非感兴趣画面,则可以降低异地视频的分辨率或丢弃异地视频的帧画面,减少对网络传输资源的占用,此时视频清晰度下降。
具体地,可以使用移动侦测算法,当在本地视频帧画面中未检测到人体移动时,将异地视频画面确定为非感兴趣画面;还可以使用人形检测算法,当在本地视频帧画面中未检测到人体形状时,将异地视频画面确定为非感兴趣画面;还可以使用人脸识别算法,当在本地视频帧画面中未识别到人脸时,将异地视频画面确定为非感兴趣画面;还可以使用声音同步输入,当在本地未检测到人声时,将异地视频画面确定为非感兴趣画面;还可以进行时间设定,当超过预设的时段或播放时长时,将异地视频画面确定为非感兴趣画面。
实施例四
图12是本申请实施例四提供的一种视频播放方法的流程图。具体的,以应用于图3-6中的第二设备304为例,本申请实施例四的视频播放方法,具体包括:
步骤S1210,发送第一原始视频画面至第一设备;
步骤S1220,当接收到第一设备发送的无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面;无人观看通知为第一设备在播放第一原始视频画面时,采集本地传感数据,根据本地传感数据确定第一设备无人时,生成的通知;画面降质包括降低分辨率和/或降低帧率;
步骤S1230,发送降质视频画面至第一设备。
可选的,所述视频播放方法,还包括:
采集第二原始视频画面;或,接收第三设备所采集的第二原始视频画面。
可选的,所述视频播放方法,还包括:
当接收到第一设备发送的有人观看通知时,停止对原始视频画面进行画面降质;有人观看通知为第一设备在播放降质视频画面时,根据本地传感数据确定第一设备有人时,生成的通知;发送原始视频画面至第一设备。
由于第二设备304的处理过程在前述实施例中已有详细说明,在此不再赘述。
根据本申请实施例的技术方案,通过发送第一原始视频画面至第一设备,当接收到第一设备发送的无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,根据本地传感数据确定第一设备无人时,生成的通知,发送降质视频画面至第一设备,可以在第一设备侧无人观看时,在第二设备对后续播放的视频进行画面降质,减少需要进行传输的视频数据,从而在视频会议过程中较好地改善网络传输资源的占用情况,提高网络传输资源利用率。
进一步地,相比于现有技术中在第二设备视频画面中检测感兴趣区域和降低非感兴趣区域画质的方法,上述视频播放方法无需对视频画面进行太多的分析和处理,可以节约数据处理资源。
进一步地,上述视频播放方法可以在用户临时离开时进行画面降质,减少数据传输带宽,在检测到用户返回时恢复画质,从而减少用户对于画质的手动操作,提升用户体验,而且,可以在第一设备侧用户未察觉的情况下,减少数据传输带宽,提高网络传输资源利用率。
应该理解的是,虽然图2、图7和图12的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2、图7和图12中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
实施例五
本申请实施例五提供了一种视频播放系统,具体包括:第一设备和第二设备;
所述第二设备,用于发送第一原始视频画面至所述第一设备;
所述第一设备,用于在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据,确定所述第一设备是否无人,当确定所述第一设备无人,生成无人观看通知,并发送所述无人观看通知至所述第二设备;
所述第二设备,还用于在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
所述第一设备,还用于播放所述降质视频画面。
可选的,所述第一设备,还用于当播放所述降质视频画面时,若根据所述本地传感数据,确定所述第一设备有人,则生成有人观看通知,并发送所述有人观看通知至所述第二设备;
所述第二设备,还用于在接收到所述有人观看通知时,停止对原始视频画面进行画面降质,并发送所述原始视频画面至所述第一设备;
所述第一设备,还用于播放所述原始视频画面。
实施例六
图13是本申请实施例六提供的一种视频播放装置的结构示意图。参考图13,本实施例提供的视频播放装置1300具体包括:采集模块1301、确定模块1302、通知生成模块1303、通知发送模块1304和播放模块1305;其中:
采集模块1301,用于当播放第一原始视频画面时,采集本地传感数据;所述第一原始视频画面由第二设备在当前时刻采集得到;
确定模块1302,用于根据所述本地传感数据,确定第一设备是否无人;
通知生成模块1303,用于若所述第一设备无人,则生成无人观看通知;
通知发送模块1304,用于发送所述无人观看通知至所述第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并发送所述降质视频画面至所述第一设备;所述第二原始视频画面由所述第二设备在下一时刻采集得到;所述画面降质包括降低分辨率和/或降低帧率;
播放模块1305,用于播放所述降质视频画面。
在上述实施例的基础上,所述本地传感数据包括所述第一设备的图像采集设备采集的图像帧数据。
在另一个实施例中,所述确定模块1302,具体还用于:依次获取图像帧数据,并对所述图像帧数据进行人脸检测;当在所述图像帧数据中检测到人脸,确定所述第一设备有人;当确认连续预设次数在获取的所述图像帧数据中未检测到人脸,确定所述第一设备无人。
在另一个实施例中,所述确定模块1302,具体还用于:统计所述音频数据中的静默时长;所述静默时长为所述音频数据中未检测到有人发声的时长;将所述静默时长与预设的时长阈值相比较;当所述静默时长未超过所述时长阈值,确定所述第一设备有人;当所述静默时长超过所述时长阈值,确定所述第一设备无人。
在另一个实施例中,所述确定模块1302,具体还用于:判断所述红外数据是否处于预设的红外数据区间内;当所述红外数据处于所述红外数据区间内,确定所述第一设备有人;当所述红外数据未处于所述红外数据区间内,确定所述第一设备无人。
在上述实施例的基础上,所述第二设备为终端或服务器;当所述第二设备为所述终端,所述第二原始视频画面为所述第二设备采集到的视频画面;当所述第二设备为所述服务器,所述第二原始视频画面为第三设备采集、并发送至所述第二设备的视频画面。
在上述实施例的基础上,还包括:第二通知生成模块,用于当播放所述降质视频画面时,若根据所述本地传感数据,确定所述第一设备有人,则生成有人观看通知;第二通知发送模块,用于发送所述有人观看通知至所述第二设备,以供所述第二设备在接收到所述有人观看通知时,停止对原始视频画面进行画面降质,并返回所述原始视频画面;第二播放模块,用于播放所述原始视频画面。
实施例七
图14是本申请实施例七提供的一种视频播放装置的结构示意图。参考图14,本实施例提供的视频播放装置1400具体包括:第一发送模块1401、画面降质模块1402和第二发送模块1403;其中:
第一发送模块1401,用于发送第一原始视频画面至第一设备;
画面降质模块1402,用于当接收到所述第一设备发送的无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面;所述无人观看通知为所述第一设备在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据确定所述第一设备无人时,生成的通知;所述画面降质包括降低分辨率和/或降低帧率;
第二发送模块1403,用于发送所述降质视频画面至所述第一设备。
在上述实施例的基础上,还包括:第二原始视频画面获取模块,用于采集所述第二原始视频画面;或,接收第三设备所采集的所述第二原始视频画面。
在上述实施例的基础上,还包括:画面降质停止模块,用于当接收到所述第一设备发送的有人观看通知时,停止对原始视频画面进行画面降质;所述有人观看通知为所述第一设备在播放所述降质视频画面时,根据所述本地传感数据确定所述第一设备有人时,生成的通知;第三发送模块,用于发送所述原始视频画面至所述第一设备。
上述提供的视频播放系统、视频播放装置可用于执行上述任意实施例提供的视频播放方法,具备相应的功能和有益效果。
关于视频播放系统、视频播放装置的具体限定可以参见上文中对于视频播放方法的限定,在此不再赘述。上述视频播放系统、视频播放装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
实施例八
图15是本申请实施例八提供的一种电子设备的结构示意图。如图中所示,该电子设备包括:处理器40、存储器41、具有触摸功能的显示屏42、输入装置43、输出装置44以及通信装置45。该电子设备中处理器40的数量可以是一个或者多个,图中以一个处理器40为例。该电子设备中存储器41的数量可以是一个或者多个,图中以一个存储器41为例。该电子设备的处理器40、存储器41、显示屏42、输入装置43、输出装置44以及通信装置45可以通过总线或者其他方式连接,图中以通过总线连接为例。实施例中,电子设备可以是电脑,手机,平板,投影仪或交互智能平板等。实施例中,以电子设备为交互智能平板为例,进行描述。
存储器41作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请任意实施例所述的基于多导联多结构聚合网络的心电信号识别方法对应的程序指令/模块。存储器41可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据设备的使用所创建的数据等。此外,存储器41可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器41可进一步包括相对于处理器40远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
显示屏42为具有触摸功能的显示屏42,其可以是电容屏、电磁屏或者红外屏。一般而言,显示屏42用于根据处理器40的指示显示数据,还用于接收作用于显示屏42的触摸操作,并将相应的信号发送至处理器40或其他装置。可选的,当显示屏42为红外屏时,其还包括红外触摸框,该红外触摸框设置在显示屏42的四周,其还可以用于接收红外信号,并将该红外信号发送至处理器40或者其他设备。
通信装置45,用于与其他设备建立通信连接,其可以是有线通信装置和/或无线通信装置。
输入装置43可用于接收输入的数字或者字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入,还可以是用于获取图像的摄像头以及获取音频数据的拾音设备。输出装置44可以包括扬声器等音频设备。需要说明的是,输入装置43和输出装置44的具体组成可以根据实际情况设定。
处理器40通过运行存储在存储器41中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的基于多导联多结构聚合网络的心电信号识别方法。
具体的,实施例中,处理器40执行存储器41中存储的一个或多个程序时,具体实现如下操作:当播放第一原始视频画面时,采集本地传感数据;根据所述本地传感数据,确定第一设备是否无人;当确定所述第一设备无人,生成无人观看通知;发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;播放所述降质视频画面。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:所述本地传感数据包括所述第一设备的图像采集设备采集的图像帧数据。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:依次获取图像帧数据,并对所述图像帧数据进行人脸检测;当在所述图像帧数据中检测到人脸,确定所述第一设备有人;当确认连续预设次数在获取的所述图像帧数据中未检测到人脸,确定所述第一设备无人。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:统计所述音频数据中的静默时长;所述静默时长为所述音频数据中未检测到有人发声的时长;将所述静默时长与预设的时长阈值相比较;当所述静默时长未超过所述时长阈值,确定所述第一设备有人;当所述静默时长超过所述时长阈值,确定所述第一设备无人。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:判断所述红外数据是否处于预设的红外数据区间内;当所述红外数据处于所述红外数据区间内,确定所述第一设备有人;当所述红外数据未处于所述红外数据区间内,确定所述第一设备无人。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:所述第二设备为终端或服务器;当所述第二设备为所述终端,所述第二原始视频画面为所述第二设备采集到的视频画面;当所述第二设备为所述服务器,所述第二原始视频画面为第三设备采集、并发送至所述第二设备的视频画面。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:当播放所述降质视频画面时,若根据所述本地传感数据,确定所述第一设备有人,则生成有人观看通知;发送所述有人观看通知至所述第二设备,以供所述第二设备在接收到所述有人观看通知时,停止对原始视频画面进行画面降质,并返回所述原始视频画面;播放所述原始视频画面。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:发送第一原始视频画面至第一设备;当接收到所述第一设备发送的无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面;所述无人观看通知为所述第一设备在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据确定所述第一设备无人时,生成的通知;所述画面降质包括降低分辨率和/或降低帧率;发送所述降质视频画面至所述第一设备。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:采集所述第二原始视频画面;或,接收第三设备所采集的所述第二原始视频画面。
在上述实施例的基础上,一个或多个处理器40还实现如下操作:当接收到所述第一设备发送的有人观看通知时,停止对原始视频画面进行画面降质;所述有人观看通知为所述第一设备在播放所述降质视频画面时,根据所述本地传感数据确定所述第一设备有人时,生成的通知;发送所述原始视频画面至所述第一设备。
实施例九
本申请实施例九还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种视频播放方法,包括:当播放第一原始视频画面时,采集本地传感数据;根据所述本地传感数据,确定第一设备是否无人;当确定所述第一设备无人,生成无人观看通知;发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;播放所述降质视频画面。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的视频播放方法的操作,还可以执行本申请任意实施例所提供的视频播放方法中的相关操作,且具备相应的功能和有益效果。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (14)

1.一种视频播放方法,其特征在于,所述方法包括:
当播放第一原始视频画面时,采集本地传感数据;
根据所述本地传感数据,确定第一设备是否无人;
当确定所述第一设备无人,生成无人观看通知;
发送所述无人观看通知至第二设备,以供所述第二设备在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
播放所述降质视频画面。
2.根据权利要求1所述的方法,其特征在于,所述本地传感数据包括所述第一设备的图像采集设备采集的图像帧数据。
3.根据权利要求2所述的方法,其特征在于,所述根据所述本地传感数据,确定第一设备是否无人,包括:
依次获取图像帧数据,并对所述图像帧数据进行人脸检测;
当在所述图像帧数据中检测到人脸,确定所述第一设备有人;
当确认连续预设次数在获取的所述图像帧数据中未检测到人脸,确定所述第一设备无人。
4.根据权利要求1所述的方法,其特征在于,所述本地传感数据还包括所述第一设备的音频采集设备采集的音频数据;所述根据所述本地传感数据,确定第一设备是否无人,还包括:
统计所述音频数据中的静默时长;所述静默时长为所述音频数据中未检测到有人发声的时长;
将所述静默时长与预设的时长阈值相比较;
当所述静默时长未超过所述时长阈值,确定所述第一设备有人;
当所述静默时长超过所述时长阈值,确定所述第一设备无人。
5.根据权利要求1所述的方法,其特征在于,所述本地传感数据还包括所述第一设备的红外传感设备采集的红外数据;所述根据所述本地传感数据,确定第一设备是否无人,还包括:
判断所述红外数据是否处于预设的红外数据区间内;
当所述红外数据处于所述红外数据区间内,确定所述第一设备有人;
当所述红外数据未处于所述红外数据区间内,确定所述第一设备无人。
6.根据权利要求1所述的视频播放方法,其特征在于,所述第二设备为终端或服务器;当所述第二设备为所述终端,所述第二原始视频画面为所述第二设备采集到的视频画面;当所述第二设备为所述服务器,所述第二原始视频画面为第三设备采集、并发送至所述第二设备的视频画面。
7.根据权利要求1所述的视频播放方法,其特征在于,所述方法还包括:
当播放所述降质视频画面时,若根据所述本地传感数据,确定所述第一设备有人,则生成有人观看通知;
发送所述有人观看通知至所述第二设备,以供所述第二设备在接收到所述有人观看通知时,停止对原始视频画面进行画面降质,并返回所述原始视频画面;
播放所述原始视频画面。
8.一种视频播放方法,其特征在于,所述方法包括:
发送第一原始视频画面至第一设备;
当接收到所述第一设备发送的无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面;所述无人观看通知为所述第一设备在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据确定所述第一设备无人时,生成的通知;所述画面降质包括降低分辨率和/或降低帧率;
发送所述降质视频画面至所述第一设备。
9.根据权利要求8所述的视频播放方法,其特征在于,所述方法还包括:
采集所述第二原始视频画面;
或,
接收第三设备所采集的所述第二原始视频画面。
10.根据权利要求8所述的视频播放方法,其特征在于,所述方法还包括:
当接收到所述第一设备发送的有人观看通知时,停止对原始视频画面进行画面降质;所述有人观看通知为所述第一设备在播放所述降质视频画面时,根据所述本地传感数据确定所述第一设备有人时,生成的通知;
发送所述原始视频画面至所述第一设备。
11.一种视频播放系统,其特征在于,所述系统包括第一设备和第二设备;
所述第二设备,用于发送第一原始视频画面至所述第一设备;
所述第一设备,用于在播放所述第一原始视频画面时,采集本地传感数据,根据所述本地传感数据,确定所述第一设备是否无人,当确定所述第一设备无人,生成无人观看通知,并发送所述无人观看通知至所述第二设备;
所述第二设备,还用于在接收到所述无人观看通知时,对第二原始视频画面进行画面降质,得到降质视频画面,并返回所述降质视频画面;所述画面降质包括降低分辨率和/或降低帧率;
所述第一设备,还用于播放所述降质视频画面。
12.根据权利要求11所述的视频播放系统,其特征在于,所述第一设备,还用于当播放所述降质视频画面时,若根据所述本地传感数据,确定所述第一设备有人,则生成有人观看通知,并发送所述有人观看通知至所述第二设备;
所述第二设备,还用于在接收到所述有人观看通知时,停止对原始视频画面进行画面降质,并发送所述原始视频画面至所述第一设备;
所述第一设备,还用于播放所述原始视频画面。
13.一种电子设备,其特征在于,包括:存储器、一个或多个处理器;
所述存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器执行如权利要求1-10中任一所述的视频播放方法。
14.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-10中任一所述的视频播放方法。
CN202011202335.3A 2020-11-02 2020-11-02 视频播放方法、系统、电子设备和存储介质 Active CN112584083B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011202335.3A CN112584083B (zh) 2020-11-02 2020-11-02 视频播放方法、系统、电子设备和存储介质
PCT/CN2020/138146 WO2022088447A1 (zh) 2020-11-02 2020-12-21 视频播放方法、系统、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011202335.3A CN112584083B (zh) 2020-11-02 2020-11-02 视频播放方法、系统、电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN112584083A true CN112584083A (zh) 2021-03-30
CN112584083B CN112584083B (zh) 2022-05-27

Family

ID=75119981

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011202335.3A Active CN112584083B (zh) 2020-11-02 2020-11-02 视频播放方法、系统、电子设备和存储介质

Country Status (2)

Country Link
CN (1) CN112584083B (zh)
WO (1) WO2022088447A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113347461A (zh) * 2021-07-05 2021-09-03 湖南快乐阳光互动娱乐传媒有限公司 一种媒资内容提升方法及装置
CN114827664A (zh) * 2022-04-27 2022-07-29 咪咕文化科技有限公司 多路直播混流方法、服务器、终端设备、系统及存储介质
CN117440209A (zh) * 2023-12-15 2024-01-23 牡丹江师范学院 一种基于演唱场景的实现方法及系统

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160275354A1 (en) * 2015-03-17 2016-09-22 Samsung Eletrônica da Amazônia Ltda. System and method for video context-based composition and compression from normalized spatial resolution objects
CN106686257A (zh) * 2017-03-10 2017-05-17 广东欧珀移动通信有限公司 一种移动终端的控制方法、装置及移动终端
CN107317992A (zh) * 2017-07-19 2017-11-03 苏州三星电子电脑有限公司 视频通信控制装置与控制方法
CN107404670A (zh) * 2016-05-18 2017-11-28 中国移动通信集团北京有限公司 一种视频播放控制方法及装置
CN108377358A (zh) * 2018-03-31 2018-08-07 丁超 视频通信处理方法、装置及计算机存储介质
CN108495116A (zh) * 2018-03-29 2018-09-04 京东方科技集团股份有限公司 3d显示装置及其控制方法、计算机设备
CN108881781A (zh) * 2018-07-17 2018-11-23 广东小天才科技有限公司 视频通话过程中分辨率的确定方法及装置
CN108966010A (zh) * 2018-07-10 2018-12-07 南阳师范学院 在线视频分辨率的调节方法、装置、存储介质及终端
CN110557597A (zh) * 2019-09-12 2019-12-10 视联动力信息技术股份有限公司 一种视频会议签到方法、服务器、电子设备及存储介质
CN110572607A (zh) * 2019-08-20 2019-12-13 视联动力信息技术股份有限公司 一种视频会议方法、系统及装置和存储介质
CN111510785A (zh) * 2020-04-16 2020-08-07 Oppo广东移动通信有限公司 视频播放的控制方法、装置、终端和计算机可读存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013012104A1 (ko) * 2011-07-18 2013-01-24 엘지전자 주식회사 전자기기 및 전자기기의 동작 방법
CN103347165A (zh) * 2013-07-25 2013-10-09 广东威创视讯科技股份有限公司 一种视频数据处理方法及终端

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160275354A1 (en) * 2015-03-17 2016-09-22 Samsung Eletrônica da Amazônia Ltda. System and method for video context-based composition and compression from normalized spatial resolution objects
CN107404670A (zh) * 2016-05-18 2017-11-28 中国移动通信集团北京有限公司 一种视频播放控制方法及装置
CN106686257A (zh) * 2017-03-10 2017-05-17 广东欧珀移动通信有限公司 一种移动终端的控制方法、装置及移动终端
CN107317992A (zh) * 2017-07-19 2017-11-03 苏州三星电子电脑有限公司 视频通信控制装置与控制方法
CN108495116A (zh) * 2018-03-29 2018-09-04 京东方科技集团股份有限公司 3d显示装置及其控制方法、计算机设备
CN108377358A (zh) * 2018-03-31 2018-08-07 丁超 视频通信处理方法、装置及计算机存储介质
CN108966010A (zh) * 2018-07-10 2018-12-07 南阳师范学院 在线视频分辨率的调节方法、装置、存储介质及终端
CN108881781A (zh) * 2018-07-17 2018-11-23 广东小天才科技有限公司 视频通话过程中分辨率的确定方法及装置
CN110572607A (zh) * 2019-08-20 2019-12-13 视联动力信息技术股份有限公司 一种视频会议方法、系统及装置和存储介质
CN110557597A (zh) * 2019-09-12 2019-12-10 视联动力信息技术股份有限公司 一种视频会议签到方法、服务器、电子设备及存储介质
CN111510785A (zh) * 2020-04-16 2020-08-07 Oppo广东移动通信有限公司 视频播放的控制方法、装置、终端和计算机可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
高翔等: "智能会议系统中的人脸识别", 《工业控制计算机》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113347461A (zh) * 2021-07-05 2021-09-03 湖南快乐阳光互动娱乐传媒有限公司 一种媒资内容提升方法及装置
CN113347461B (zh) * 2021-07-05 2022-11-11 湖南快乐阳光互动娱乐传媒有限公司 一种媒资内容提升方法及装置
CN114827664A (zh) * 2022-04-27 2022-07-29 咪咕文化科技有限公司 多路直播混流方法、服务器、终端设备、系统及存储介质
CN114827664B (zh) * 2022-04-27 2023-10-20 咪咕文化科技有限公司 多路直播混流方法、服务器、终端设备、系统及存储介质
CN117440209A (zh) * 2023-12-15 2024-01-23 牡丹江师范学院 一种基于演唱场景的实现方法及系统
CN117440209B (zh) * 2023-12-15 2024-03-01 牡丹江师范学院 一种基于演唱场景的实现方法及系统

Also Published As

Publication number Publication date
WO2022088447A1 (zh) 2022-05-05
CN112584083B (zh) 2022-05-27

Similar Documents

Publication Publication Date Title
CN112584083B (zh) 视频播放方法、系统、电子设备和存储介质
US10123051B2 (en) Video analytics with pre-processing at the source end
CN109089131B (zh) 一种基于ios系统的录屏直播方法、装置、设备及存储介质
US20230144483A1 (en) Method for encoding video data, device, and storage medium
US20220191574A1 (en) Method for uploading video and client
US20130003846A1 (en) Frame encoding selection based on frame similarities and visual quality and interests
JP2008042695A (ja) 監視カメラ装置、監視カメラシステム、監視カメラ画像記録方法
CN112044055A (zh) 图像数据采集方法、系统、装置、电子设备及存储介质
CN113992883B (zh) 视频会议处理方法、处理设备、会议系统以及存储介质
CN112203126B (zh) 投屏方法、投屏装置及存储介质
CN112235600B (zh) 视频数据及视频业务请求的处理方法、装置及系统
KR101494537B1 (ko) 영상 감시 시스템에서 모니터링 채널 결정 방법 및 장치
CN111953980A (zh) 视频处理方法及装置
EP3629577B1 (en) Data transmission method, camera and electronic device
US10762913B2 (en) Image-based techniques for audio content
JP2002133558A (ja) 監視用信号の通信方法、及び監視用信号通信装置
US10846810B2 (en) Leveraging audio/video recording and communication devices to enhance public safety
CN112948627B (zh) 一种报警视频生成方法、显示方法和装置
CN112565763A (zh) 异常图像样本生成方法及装置、图像检测方法及装置
CN112351282A (zh) 图像数据的传输方法及装置、非易失性存储介质及处理器
US9830946B2 (en) Source data adaptation and rendering
US20230276081A1 (en) System and method of altering real time audio and video streams
CN111246244A (zh) 集群内快速分析处理音视频的方法、装置及电子设备
CN114125465A (zh) 录像的存储方法、装置、系统、存储介质以及计算机设备
CN113591549A (zh) 一种视频事件检测方法、计算机设备以及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant