CN112307323B - 信息推送方法和装置 - Google Patents
信息推送方法和装置 Download PDFInfo
- Publication number
- CN112307323B CN112307323B CN202010134092.8A CN202010134092A CN112307323B CN 112307323 B CN112307323 B CN 112307323B CN 202010134092 A CN202010134092 A CN 202010134092A CN 112307323 B CN112307323 B CN 112307323B
- Authority
- CN
- China
- Prior art keywords
- user
- information
- preset
- target object
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开的实施例提供了一种信息推送方法和装置,首先获取包含用户的面部信息以及目标对象的图像信息,该目标对象包括预先指定的观看对象,然后对图像信息进行内容解析,确定出用户的视角方位信息和所述目标对象的位置信息,最后响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,能够监督用户的当前状态,实现了自动监督用户当前状态的功能,使得用户能够根据提示信息调整自身状态,保持高效的工作或学习状态,提高用户效率。
Description
技术领域
本公开的实施例涉及计算机技术领域,具体涉及信息推送方法和装置。
背景技术
随着科学技术的发展,人们需要不断地学习新知识来充实自己,因此,在工作或学习过程中,人们会出现疲惫状态、不认真学习或工作的状态,然而人们只能自行监督自身的状态,从而会导致工作效率或学习效率较低。
发明内容
本公开的实施例提出了一种信息推送方法和装置。
第一方面,本公开的实施例提供了一种信息推送方法,该方法包括:获取包含用户的面部信息以及目标对象的图像信息,其中,目标对象包括预先指定的观看对象;对图像信息进行内容解析,以确定用户的视角方位信息和目标对象的位置信息;响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息。
在一些实施例中,预设条件包括:用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围;响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,包括:响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围,确定用户未观看目标对象,并推送预设提示信息。
在一些实施例中,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,还包括:响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,确定用户当前观看的对象,并获取用户当前观看的对象的内容;响应于确定用户当前观看的对象的内容不是预设内容,推送预设提示信息。
在一些实施例中,获取包含用户的面部信息以及目标对象的图像信息,包括:获取包含用户的面部信息以及目标对象的多帧图像信息;以及响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,还包括:响应于确定用户当前观看的对象的内容是预设内容,根据视频信息确定用户观看预设内容的时间是否超过预设的时间长度;响应于确定用户观看预设内容的时间超过预设的时间长度,推送预设提示信息。
在一些实施例中,获取包含用户的面部信息以及目标对象的图像信息,包括:获取包含用户的面部信息以及目标对象的多帧图像信息;以及响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,还包括:响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,根据视频信息确定用户的视角方位信息未发生变化的时间是否超过预设的时间长度;响应于确定用户的视角方位信息未发生变化的时间超过预设的时间长度,推送预设提示信息。
在一些实施例中,方法还包括:对图像信息进行解析,提取用户的手部动作;响应于确定用户的手部动作是与目标对象无关的动作,推送预设提示信息。
第二方面,本公开的实施例提供了一种信息推送装置,该装置包括:获取单元,被配置成获取包含用户的面部信息以及目标对象的图像信息,其中,目标对象包括预先指定的观看对象;第一解析单元,被配置成对图像信息进行内容解析,以确定用户的视角方位信息和目标对象的位置信息;第一推送单元,被配置成响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息。
在一些实施例中,预设条件包括:用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围;以及推送单元,进一步被配置成响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围,确定用户未观看目标对象,并推送预设提示信息。
在一些实施例中,推送单元,进一步被配置成:响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,确定用户当前观看的对象,并获取用户当前观看的对象的内容;响应于确定用户当前观看的对象的内容不是预设内容,推送预设提示信息。
在一些实施例中,获取单元进一步被配置成:获取包含用户的面部信息以及目标对象的多帧图像信息;以及推送单元,进一步被配置成:响应于确定用户当前观看的对象的内容是预设内容,根据视频信息确定用户观看预设内容的时间是否超过预设的时间长度;响应于确定用户观看预设内容的时间超过预设的时间长度,推送预设提示信息。
在一些实施例中,获取单元进一步被配置成:获取包含用户的面部信息以及目标对象的多帧图像信息;以及推送单元,进一步被配置成:响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,根据视频信息确定用户的视角方位信息未发生变化的时间是否超过预设的时间长度;响应于确定用户的视角方位信息未发生变化的时间超过预设的时间长度,推送预设提示信息。
在一些实施例中,装置还包括:第二解析单元,被配置成对图像信息进行解析,提取用户的手部动作;第二推送单元,被配置成响应于确定用户的手部动作是与目标对象无关的动作,推送预设提示信息。
第三方面,本公开的实施例提供了一种电子设备,该电子设备包括:一个或多个处理器;存储装置,其上存储有一个或多个程序;当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实施例描述的信息推送方法。
第四方面,本公开的实施例提供了一种计算机可读介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如第一方面中任一实施例描述的信息推送方法。
本公开的实施例提供的信息推送方法和装置,首先获取包含用户的面部信息以及目标对象的图像信息,该目标对象包括预先指定的观看对象,然后对图像信息进行内容解析,确定出用户的视角方位信息和目标对象的位置信息,最后响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,能够自动监督用户的当前状态,并根据用户的当前状态发送提示信息,使得用户能够根据提示信息及时调整自身状态,保持高效的工作状态或学习状态,提高用户的学习效率。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本公开的其它特征、目的和优点将会变得更明显:
图1是本公开的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本公开的实施例的用于信息推送方法的一个实施例的流程图;
图3是根据本公开的实施例的信息推送方法的一个应用场景的示意图;
图4是根据本公开的实施例的推送预设提示信息的一种示例性流程图;
图5是根据本公开的实施例的推送预设提示信息的另一种示例性流程图;
图6是根据本公开的实施例的推送预设提示信息的又一种示例性流程图;
图7是根据本公开的实施例的信息推送装置的一个实施例的结构示意图;
图8是适于用来实现本公开的实施例的电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关公开,而非对该公开的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关公开相关的部分。
需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
图1示出了可以应用本公开的实施例的信息推送方法和信息推送装置的示例性系统架构100。
如图1所示,系统架构100可以包括终端设备104、105,网络106,服务器101、102、103。网络106用以在终端设备104、105与服务器101、102、103之间提供通信链路的介质。网络106可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以通过终端设备104、105通过网络106与服务器101、102、103交互,以接收或发送信息等。终端设备104、105上可以安装有各种应用,例如阅读类应用、数据分析应用、在线学习应用、即时通信工具、社交平台软件、搜索类应用、购物类应用、数据处理应用等。
终端设备104、105可以是硬件,也可以是软件。当终端设备为硬件时,可以是具有显示屏并且支持与服务器通信的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。当终端设备为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块,也可以实现成单个软件或软件模块。在此不做具体限定。
终端设备104、105可以是具有图像采集功能、语音/画面提示功能的终端(如具有屏幕以及语音互动的语音设备,或者带有屏幕、摄像功能的智能台灯、智能学习桌等等),采集的图像可以在终端设备104、105进行本地处理,也可发送至服务器进行处理,或者终端设备104、105还可以从安装在与用户的学习位置对应的图像采集设备获取图像,然后在本地处理并发出提示信息,或者通过服务器处理采集的图像,终端设备104、105根据处理结果发出提示信息。
服务器101、102、103可以是提供各种服务的服务器,例如对与其建立通信连接的终端设备发送的请求进行接收的后台服务器。后台服务器可以对终端设备发送的请求进行接收和分析等处理,并生成处理结果。
需要说明的是,服务器可以是硬件,也可以是软件。当服务器为硬件时,可以是为终端设备提供各种服务的各种电子设备。当服务器为软件时,可以实现成为为终端设备提供各种服务的多个软件或软件模块,也可以实现成为为终端设备提供各种服务的单个软件或软件模块。在此不做具体限定。
需要说明的是,本公开的实施例所提供的信息推送方法可以由终端设备104、105或服务器101、102、103执行。相应地,信息推送装置设置于终端设备104、105或服务器101、102、103中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本公开的信息推送方法的一个实施例的流程200。该信息推送方法包括如下步骤:
步骤210,获取包含用户的面部信息以及目标对象的图像信息。
在本步骤中,信息推送方法运行于其上的执行主体可以通过实时拍摄或内存读取等方式获取图像信息,该图像信息可以包括用户的面部信息以及目标对象。其中,用户的面部信息可以包括用户的眼部特征信息等,目标对象可以包括预先指定观看的对象,例如,目标对象可以是预先指定的学习或工作资料、教室黑板、投影屏幕、终端屏幕等。在一个示例性的场景中,用户在书桌上学习,书桌上设置有智能台灯,智能台灯上可以设置有摄像头,上述执行主体接收到用户开启智能台灯的指令,通过摄像头开始拍摄用户在书桌学习的图像信息,该图像信息记录有用户学习过程中的面部信息以及学习的目标对象。
步骤220,对图像信息进行内容解析,以确定用户的视角方位信息和目标对象的位置信息。
在本步骤中,上述执行主体可以在获取到包含用户的面部信息以及目标对象的图像信息后,通过对该图像信息进行内容解析,从用户的面部信息中提取用户的眼部特征信息,然后基于该眼部特征信息确定用户的视角方位信息,其中,用户的视角方位信息可以用于表示用户的当前视线范围,该视线范围可以通过定位眼眶内侧位置,根据不同视线方向眼球中心距眼眶内侧距离的规律,计算眼球中心到眼眶内侧的距离来获取用户的当前视线范围,还可以通过将图像导入基于视频图像处理的人眼视线检测原型系统来获取用户的当前视线范围,该系统能够对图像进行图像预处理,检测人脸,检测人眼及视线定位。
上述执行主体还可以通过对该图像信息进行内容解析确定目标对象,从图像信息中提取出目标对象的位置信息,其中,目标对象的位置信息可以通过目标对象的位置坐标来表示。作为示例,上述执行主体可以在图像信息中确定出目标对象,获取目标对象的当前位置,以当前画面为依据,确定出目标对象在当前画面中覆盖的全部坐标或目标对象的边缘线坐标。
步骤230,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息。
在本步骤中,上述执行主体可以通过将用户的视角方位信息与目标对象的位置信息进行比较,来获取用户的视角方位信息与目标对象的位置信息之间的偏差。例如,可以根据目标对象的位置信息确定目标对象的中心点的坐标,根据中心点的坐标计算其与表征用户的视角方位的直线之间的距离,作为用户的视角方位信息与目标对象的位置信息之间的偏差。或者,作为示例,上述执行主体可以根据视角范围信息确定图像内属于用户视线范围的区域,确定该区域的边界坐标,根据该区域的边界坐标与目标对象边界的坐标计算得到目标对象在用户的视线范围区域内所占的比例,从而根据该比例确定出用户的视角方位信息与目标对象的位置信息之间的偏差。
然后上述执行主体判断该偏差是否满足预设条件,其中,预设条件是用于判定用户没有观看目标对象的条件,可以根据实际需要进行相应的调整,可以为目标对象的中心点的坐标与用户的视角方位的直线之间的距离大与预设距离,也可以为目标对象在用户的视线范围区域内所占的比例小于预设比例,等等。当确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件时,可以通过语音播放、视频播放、文字呈现等方式向用户推送预设提示信息,该预设提示信息用于提示用户认真观看目标对象。
在一个示例性的场景中,用户在书桌上观看学习资料,上述执行主体根据图像信息确定用户的当前视角方位信息,此时用户视角方位信息表示书桌以外的位置,例如,地面等,然后将用户的当前视角方位信息与学习资料的位置信息进行比较,确定用户的当前视角方位信息与学习资料的位置信息之间的偏差过大,满足预设条件,判定用户当前观看的地方是别处,未观看学习资料,则向用户推送该预设提示信息,例如,该预设提示信息可以为:“请认真学习”或“请认真观看学习资料”。
继续参考图3,图3是根据本实施例的信息推送方法的一个应用场景的示意图。在图3的应用场景中,用户正在设有智能台灯310的书桌上学习,摄像头320拍摄用户学习的图像信息,该图像信息中包含用户的面部信息以及课本330。然后智能台灯310对拍摄的图像信息进行内容解析,来确定用户的视角方位信息以及课本330的位置信息。之后智能台灯310将确定的用户的视角方位信息以及课本330的位置信息进行比较,确定出用户的视角方位信息与课本330的位置信息之间的偏差。最后智能台灯310确定出用户的视角方位信息与课本330的位置信息之间的偏差满足预设条件,可以确定出用户的视线方向指向的是旁边的花草,而不是课本330,因此确定用户没有认真学习,向用户播放预设提示信息“请认真看书”,提示用户认真观看课本330,认真学习。
本公开的实施例提供的信息推送方法,通过获取包含用户的面部信息以及目标对象的图像信息,该目标对象包括预先指定的观看对象,然后对图像信息进行内容解析,确定出用户的视角方位信息和目标对象的位置信息,最后响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,能够对用户的学习过程或工作过程进行实时监督,避免了用户在学习过程或工作过程中出现走神等不认真的现象,能够自动监督用户的当前学习状态或工作状态,以及通过向用户推送预设提示信息,使得用户能够根据提示信息及时调整自身状态,保持高效的学习状态或工作状态,从而提高用户效率。
在本实施例的一些可选的实现方式中,请参考图4,预设条件可以包括:用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围,其中,该预设的偏差范围可以根据实际情况预先设定,例如,预设的偏差范围可以为目标对象在用户的视线范围区域内所占的比例大小,也可以为目标对象的中心点的坐标与用户的视角方位的直线之间的距离大小,本申请对此不作具体限定。
在上述方法流程200中,上述步骤230,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,可以按照如下流程执行:
步骤410,判断用户的视角方位信息与目标对象的位置信息之间的偏差是否大于预设的偏差范围。
在本步骤中,上述执行主体可以通过将用户的视线范围内的坐标与目标对象的坐标进行比较,来获得用户的视角方位信息与目标对象的位置信息之间的偏差。然后上述执行主体判断用户的视线范围内的坐标与目标对象的坐标之间的偏差是否大于预先设定的用户视线范围内坐标与目标对象的坐标的差异范围。
当步骤410的判断结果为用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围时,执行步骤420,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围,确定用户未观看目标对象,并推送预设提示信息。
在本步骤中,上述执行主体通过判断确定用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围,即用户的当前视线范围内不包括目标对象,或在用户的当前视线范围内目标对象所占的比例较小,确定用户未观看目标对象。然后上述执行主体根据该判断结果,推送预设提示信息,例如,该提示信息可以是“请您认真观看当前对象”,还可以是“请您认真工作”或“请您认真学习”等等。
在本实现方式中,上述执行主体通过判断用户的视角方位信息与目标对象的位置信息之间的偏差,来确定用户是否正在观看目标对象,进一步限定了判断条件,使得对用户是否观看目标对象的判断更加准确,提高了对用户当前状态的判断的准确性。
在本实施例的一些可选的实现方式中,请继续参考图4,上述步骤230,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,还可以按照如下流程执行:
当步骤410的判断结果为用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围时,执行步骤430,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,确定用户当前观看的对象,并获取用户当前观看的对象的内容。
在本步骤中,上述执行主体通过判断确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,即用户的当前视线范围内包括目标对象,或在用户的当前视线范围内目标对象所占的比例较大,确定用户正在观看目标对象。然后上述执行主体从视频信息中进一步提取出用户当前观看的对象,并通过图像识别的方法识别出用户当前观看的对象的内容。
继续执行步骤440,响应于确定用户当前观看的对象的内容不是预设内容,推送预设提示信息。
在本步骤中,上述执行主体获取到用户当前观看的对象的内容后,将用户当前观看的对象的内容与预设内容相比较,判断用户当前观看的对象的内容是否为预设内容,其中,预设内容可以是预先设定的观看内容,可以是与目标对象对应的内容,例如,预设内容可以是课本上指定的某一章节的内容、指定的工作资料对应的内容等。然后上述执行主体通过比较确定用户当前观看的对象的内容不是预设内容,则确定用户当前观看的内容与预设内容无关,向用户推送预设提示信息,以提示用户认真观看目标对象。
在本实现方式中,上述执行主体通过进一步判断用户的观看内容,提高了判断的准确性,并实现了对用户状态判断的多样性,从而能够根据不同的情况来推送对应的提示信息,以达到提示用户认真学习或工作的目的。
在本实施例的一些可选的实现方式中,上述方法流程200中,步骤210,获取包含用户的面部信息以及目标对象的图像信息,可以包括:获取包含用户的面部信息以及目标对象的多帧图像信息。上述执行主体可以获取多帧图像信息,每帧图像信息都对应一个具体时刻,每帧图像信息中均包括用户的面部信息以及目标对象。在这里,多帧图像信息可以是视频中连续的多个图像帧对应的图像信息。在实际场景中,可以采集一段时间内的包括用户的面部信息及目标对象的视频信息,从该视频信息中提取多个连续或不连续的图像帧作为上述包含用户的面部信息以及目标对象的多帧图像信息。
进一步参考图5,上述方法流程200中,步骤230,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,还可以按照如下流程执行:
步骤510,响应于确定用户当前观看的对象的内容是预设内容,根据多帧图像信息确定用户观看预设内容的时间是否超过预设的时间长度。
在本步骤中,上述执行主体在确定用户当前观看的对象的内容后,通过与预设内容进行比较,确定用户当前观看的对象的内容是预设内容。然后上述执行主体进一步对多帧图像信息进行分析,从多帧图像信息中确定用户观看预设内容的时间,并统计用户观看预设内容的连续时间。之后上述执行主体将统计的连续时间与预设的时间长度进行比较,判断用户观看预设内容的连续时间是否超过预设的时间长度,其中,预设的时间长度可以是预先设定的一个时长,可以根据实际需要进行设定。作为示例,上述执行主体确定用户正在观看学习资料,并获取用户观看的学习资料的当前页,然后上述执行主体根据每帧图像信息分别对应的具体时刻,确定用户观看当前页的连续时长,并将该连续时长与预设的时间长度进行比较,判断该连续时长是否超过预设的时间长度。
步骤520,响应于确定用户观看预设内容的时间超过预设的时间长度,推送预设提示信息。
在本步骤中,上述执行主体通过判断确定用户观看预设内容的时间超过预设的时间长度,则确定用户长时间内观看同一内容,即确定用户未认真观看当前内容。然后上述执行主体根据该判断结果向用户推送预设提示信息,以提示用户认真观看当前内容。
当上述执行主体通过判断确定用户观看预设内容的时间未超过预设的时间长度时,则确定用户在这段时间内认真观看预设内容。
在本实现方式中,上述执行主体能够在确定用户正在观看预设内容的基础上,进一步通过判断用户观看预设内容的时间,来确定用户是否持续观看预设内容的时间过长。在实际场景中,如果用户长时间观看相同的内容,则用户可能处于“走神”的状态,通过上述实现方式可以进一步在用户“走神”的状态下提醒用户认真观看当前预设内容,进一步提高了判断的准确性,并实现了对用户状态判断的多样性,从而使得对用户状态的判断更准确。
在本实施例的一些可选的实现方式中,上述方法流程200中,步骤210,获取包含用户的面部信息以及目标对象的图像信息,可以包括:获取包含用户的面部信息以及目标对象的多帧图像信息。上述执行主体可以获取多帧图像信息,每帧图像信息都对应一个具体时刻,每帧图像信息中均包括用户的面部信息以及目标对象。在这里,多帧图像信息可以是视频中连续的多个图像帧对应的图像信息。在实际场景中,可以采集一段时间内的包括用户的面部信息及目标对象的视频信息,从该视频信息中提取多个连续或不连续的图像帧作为上述包含用户的面部信息以及目标对象的多帧图像信息。
进一步参考图6,上述方法流程200中,步骤230,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,还可以按照如下流程执行:
步骤610,响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,根据多帧图像信息确定用户的视角方位信息未发生变化的时间是否超过预设的时间长度。
在本步骤中,上述执行主体通过判断确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,即用户的当前视线范围内包括目标对象,或在用户的当前视线范围内目标对象所占的比例较大,确定用户正在观看目标对象。然后上述执行主体从多帧图像信息中进一步确定用户保持当前视角方位信息不变的时间,并将该时间与预设的时间长度进行比较,判断用户的当前视角方位信息保持不变的时间是否超过预设的时间长度。其中,该预设的时间长度可以根据实际需要进行设定,本申请对此不做具体限定。
作为示例,上述执行主体可以先确定用户的当前视角方位信息以及当前视角方位信息对应的当前时刻,然后从多帧图像信息中以当前时刻为基准,获取当前时刻前后多个时刻对应的视角方位信息。上述执行主体可以将获取到的多个视角方位信息分别进行比较,判断这些视角方位信息是否相同。之后当上述执行主体确定这些视角方位信息均相同时,则确定在当前时刻前后一段时间内用户的视角方位信息未发生变化,上述执行主体进一步判断用户的视角方位信息未发生变化的这段时间是否超过预设的时间长度。
或者,上述执行主体可以先确定用户的当前视角方位信息以及当前视角方位信息对应的当前时刻,然后从多帧图像信息中以当前视角方位信息为基准,获取与当前视角方位信息相同的多个视角方位信息对应的时刻。上述执行主体可以判断获取到的多个视角方位信息对应的时刻是否连续。确定这些时刻连续后,上述执行主体计算这些时刻对应的时间长度,进一步判断计算得到的时间长度是否超过预设的时间长度,即判断用户的视角方位信息未发生变化的这段时间是否超过预设的时间长度。
步骤620,响应于确定用户的视角方位信息未发生变化的时间超过预设的时间长度,推送预设提示信息。
在本步骤中,上述执行主体通过判断确定用户的视角方位信息未发生变化的时间超过预设的时间长度,确定用户长时间观看同一地方或角度,判定用户未认真观看目标对象,向用户推送预设提示信息。
当上述执行主体通过判断用户的视角方位信息未发生变化的时间未超过预设的时间长度时,确定用户正在认真观看目标对象。
在本实现方式中,上述执行主体通过判断用户的视角方位信息是否发生变化来确定用户是否持续观看同一角度的时间过长。在实际场景中,如果用户的视线方位长时间未发生变化,则用户可能处于“走神”的状态,通过上述实现方式可以进一步在用户“走神”的状态下提醒用户认真观看目标对象,增加了对用户状态的判断依据,提高了判断用户状态的准确性和多样性。
在本实施例的一些可选的实现方式中,本公开提供的信息推送方法还可以包括以下步骤:
对图像信息进行解析,提取用户的手部动作;响应于确定用户的手部动作是与目标对象无关的动作,推送预设提示信息。
在本实现方式中,上述执行主体获取到的图像信息中还包括用户的手部特征信息,上述执行主体可以对该图像信息进行解析,从图像信息中提取用户的手部动作。然后上述执行主体可以通过判断用户手中是否有预设物品来判断提取的手部动作是否与目标对象有关,其中,预设物品可以包括与目标对象无关的物品,例如,手机、玩具等。当上述执行主体判断用户手中有预设物品时,确定用户的手部动作是与目标对象无关的动作,上述执行主体向用户推送预设提示信息,以提示用户停止当前手部动作,认真观看目标对象。
在本实现方式中,上述执行主体通过判断用户的手部动作来判断用户状态,丰富了判断用户是否专注于指定对象的判断方式,提高了判断的多样性。
进一步参考图7,作为对上述各图所示方法的实现,本公开提供了一种信息推送装置的一个实施例。该装置实施例与图2所示的方法实施例相对应。
如图7所示,本实施例的信息推送装置700可以包括:获取单元710,被配置成获取包含用户的面部信息以及目标对象的图像信息,其中,目标对象包括预先指定的观看对象;第一解析单元720,被配置成对图像信息进行内容解析,以确定用户的视角方位信息和目标对象的位置信息;第一推送单元730,被配置成响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息。
在本实施的一些可选的实现方式中,预设条件包括:用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围;第一推送单元730,进一步被配置成响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差大于预设的偏差范围,确定用户未观看目标对象,并推送预设提示信息。
在本实施的一些可选的实现方式中,第一推送单元730,进一步被配置成:响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,确定用户当前观看的对象,并获取用户当前观看的对象的内容;响应于确定用户当前观看的对象的内容不是预设内容,推送预设提示信息。
在本实施的一些可选的实现方式中,获取单元进一步被配置成:获取包含用户的面部信息以及目标对象的多帧图像信息;以及第一推送单元730,进一步被配置成:响应于确定用户当前观看的对象的内容是预设内容,根据视频信息确定用户观看预设内容的时间是否超过预设的时间长度;响应于确定用户观看预设内容的时间超过预设的时间长度,推送预设提示信息。
在本实施的一些可选的实现方式中,获取单元进一步被配置成:获取包含用户的面部信息以及目标对象的多帧图像信息;以及第一推送单元730,进一步被配置成:响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差未超过预设的偏差范围,根据视频信息确定用户观看目标对象的时间是否超过预设的时间长度;响应于确定用户观看目标对象的时间超过预设的时间长度,推送预设提示信息。
在本实施的一些可选的实现方式中,该装置还包括:第二解析单元,被配置成对图像信息进行解析,提取用户的手部动作;第二推送单元,被配置成响应于确定用户的手部动作是与目标对象无关的动作,推送预设提示信息。
本公开的上述实施例提供的装置,通过获取包含用户的面部信息以及目标对象的图像信息,该目标对象包括预先指定的观看对象,然后对图像信息进行内容解析,确定出用户的视角方位信息和目标对象的位置信息,最后响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息,能够对用户的学习过程或工作过程进行实时监督,避免了用户在学习过程或工作过程中出现走神等不认真的现象,能够自动监督用户的当前学习状态或工作状态,以及通过向用户推送预设提示信息,使得用户能够根据提示信息及时调整自身状态,保持高效的学习状态或工作状态,从而提高用户效率。
下面参考图8,其示出了适于用来实现本公开的实施例的电子设备800的结构示意图。图8示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图8所示,电子设备800可以包括处理装置(例如中央处理器、图形处理器等)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储装置808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有电子设备800操作所需的各种程序和数据。处理装置801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
通常,以下装置可以连接至I/O接口805:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置806;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置807;包括例如磁带、硬盘等的存储装置808;以及通信装置809。通信装置809可以允许电子设备800与其他设备进行无线或有线通信以交换数据。虽然图8示出了具有各种装置的电子设备800,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图8中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置809从网络上被下载和安装,或者从存储装置808被安装,或者从ROM 802被安装。在该计算机程序被处理装置801执行时,执行本公开的实施例的方法中限定的上述功能。
需要说明的是,本公开的实施例的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:获取包含用户的面部信息以及目标对象的图像信息,其中,目标对象包括预先指定的观看对象;对图像信息进行内容解析,以确定用户的视角方位信息和目标对象的位置信息;响应于确定用户的视角方位信息与目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看目标对象的预设提示信息。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的实施例的操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络包括局域网(LAN)或广域网(WAN)连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括获取单元、第一解析单元和第一推送单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,获取单元还可以被描述为“获取包含用户的面部信息以及目标对象的图像信息的单元”。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (10)
1.一种信息推送方法,包括:
获取包含用户的面部信息以及目标对象的图像信息,其中,所述目标对象包括预先指定的观看对象;
对所述图像信息进行内容解析,以确定所述用户的视角方位信息和所述目标对象的位置信息;
响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看所述目标对象的预设提示信息;
其中,所述预设条件包括:所述用户的视角方位信息与所述目标对象的位置信息之间的偏差大于预设的偏差范围;
所述响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看所述目标对象的预设提示信息,包括:
响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差大于所述预设的偏差范围,确定所述用户未观看所述目标对象,并推送所述预设提示信息;
还包括:
响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差未超过预设的偏差范围,确定所述用户当前观看的对象,并获取所述用户当前观看的对象的内容;
响应于确定所述用户当前观看的对象的内容不是预设内容,推送所述预设提示信息。
2.根据权利要求1所述的方法,其中,所述获取包含用户的面部信息以及目标对象的图像信息,包括:
获取包含用户的面部信息以及目标对象的多帧图像信息;以及
所述响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看所述目标对象的预设提示信息,还包括:
响应于确定所述用户当前观看的对象的内容是预设内容,根据所述多帧图像信息确定所述用户观看所述预设内容的时间是否超过预设的时间长度;
响应于确定所述用户观看所述预设内容的时间超过预设的时间长度,推送所述预设提示信息。
3.根据权利要求1所述的方法,其中,所述获取包含用户的面部信息以及目标对象的图像信息,包括:
获取包含用户的面部信息以及目标对象的多帧图像信息;以及
所述响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看所述目标对象的预设提示信息,还包括:
响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差未超过预设的偏差范围,根据所述多帧图像信息确定所述用户的视角方位信息未发生变化的时间是否超过预设的时间长度;
响应于确定所述用户的视角方位信息未发生变化的时间超过预设的时间长度,推送所述预设提示信息。
4.根据权利要求1-3任一所述的方法,其中,所述方法还包括:
对所述图像信息进行解析,提取所述用户的手部动作;
响应于确定所述用户的手部动作是与所述目标对象无关的动作,推送所述预设提示信息。
5.一种信息推送装置,包括:
获取单元,被配置成获取包含用户的面部信息以及目标对象的图像信息,其中,所述目标对象包括预先指定的观看对象;
第一解析单元,被配置成对所述图像信息进行内容解析,以确定所述用户的视角方位信息和所述目标对象的位置信息;
第一推送单元,被配置成响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差满足预设条件,推送用于提示用户认真观看所述目标对象的预设提示信息;
其中,所述预设条件包括:所述用户的视角方位信息与所述目标对象的位置信息之间的偏差大于预设的偏差范围;以及所述第一推送单元,进一步被配置成响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差大于所述预设的偏差范围,确定所述用户未观看所述目标对象,并推送所述预设提示信息;
所述第一推送单元,进一步被配置成:
响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差未超过预设的偏差范围,确定所述用户当前观看的对象,并获取所述用户当前观看的对象的内容;
响应于确定所述用户当前观看的对象的内容不是预设内容,推送所述预设提示信息。
6.根据权利要求5所述的装置,其中,所述获取单元进一步被配置成:获取包含用户的面部信息以及目标对象的多帧图像信息;以及所述第一推送单元,进一步被配置成:
响应于确定所述用户当前观看的对象的内容是预设内容,根据所述多帧图像信息确定所述用户观看所述预设内容的时间是否超过预设的时间长度;
响应于确定所述用户观看所述预设内容的时间超过预设的时间长度,推送所述预设提示信息。
7.根据权利要求5所述的装置,其中,所述获取单元进一步被配置成:获取包含用户的面部信息以及目标对象的多帧图像信息;以及所述第一推送单元,进一步被配置成:
响应于确定所述用户的视角方位信息与所述目标对象的位置信息之间的偏差未超过预设的偏差范围,根据所述多帧图像信息确定所述用户的视角方位信息未发生变化的时间是否超过预设的时间长度;
响应于确定所述用户的视角方位信息未发生变化的时间超过预设的时间长度,推送所述预设提示信息。
8.根据权利要求5-7任一所述的装置,其中,所述装置还包括:
第二解析单元,被配置成对所述图像信息进行解析,提取所述用户的手部动作;
第二推送单元,被配置成响应于确定所述用户的手部动作是与所述目标对象无关的动作,推送所述预设提示信息。
9.一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1-4中任一项所述的方法。
10.一种计算机可读介质,其上存储计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1-4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010134092.8A CN112307323B (zh) | 2020-03-02 | 2020-03-02 | 信息推送方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010134092.8A CN112307323B (zh) | 2020-03-02 | 2020-03-02 | 信息推送方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112307323A CN112307323A (zh) | 2021-02-02 |
CN112307323B true CN112307323B (zh) | 2023-05-02 |
Family
ID=74336627
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010134092.8A Active CN112307323B (zh) | 2020-03-02 | 2020-03-02 | 信息推送方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112307323B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113064485A (zh) * | 2021-03-17 | 2021-07-02 | 广东电网有限责任公司 | 一种用于培训考核的监督方法及系统 |
TWI821037B (zh) * | 2022-11-22 | 2023-11-01 | 南開科技大學 | 辨識使用者所見相識者並傳送招呼訊息之系統及方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6205767B2 (ja) * | 2013-03-13 | 2017-10-04 | カシオ計算機株式会社 | 学習支援装置、学習支援方法、学習支援プログラム、学習支援システム、およびサーバ装置 |
CN106228982B (zh) * | 2016-07-27 | 2019-11-15 | 华南理工大学 | 一种基于教育服务机器人的交互式学习系统与交互方法 |
CN107374652B (zh) * | 2017-07-20 | 2020-05-15 | 京东方科技集团股份有限公司 | 基于电子产品学习的质量监测方法、装置和系统 |
-
2020
- 2020-03-02 CN CN202010134092.8A patent/CN112307323B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN112307323A (zh) | 2021-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9992429B2 (en) | Video pinning | |
US11436863B2 (en) | Method and apparatus for outputting data | |
US9100540B1 (en) | Multi-person video conference with focus detection | |
CN109308469B (zh) | 用于生成信息的方法和装置 | |
US9041766B1 (en) | Automated attention detection | |
WO2017209978A1 (en) | Shared experience with contextual augmentation | |
CN107622252B (zh) | 信息生成方法和装置 | |
CN113395542B (zh) | 基于人工智能的视频生成方法、装置、计算机设备及介质 | |
CN110059623B (zh) | 用于生成信息的方法和装置 | |
CN112307323B (zh) | 信息推送方法和装置 | |
CN110059624B (zh) | 用于检测活体的方法和装置 | |
CN113910224B (zh) | 机器人跟随的方法、装置及电子设备 | |
US11205290B2 (en) | Method and device for inserting an image into a determined region of a target eye image | |
CN108470131B (zh) | 用于生成提示信息的方法和装置 | |
CN110673717A (zh) | 用于控制输出设备的方法和装置 | |
CN111445499B (zh) | 用于识别目标信息的方法及装置 | |
CN111833459B (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
CN111310595B (zh) | 用于生成信息的方法和装置 | |
CN109840059B (zh) | 用于显示图像的方法和装置 | |
CN111710046A (zh) | 交互方法、装置和电子设备 | |
US11810336B2 (en) | Object display method and apparatus, electronic device, and computer readable storage medium | |
CN111586295B (zh) | 图像生成方法、装置和电子设备 | |
CN110263743B (zh) | 用于识别图像的方法和装置 | |
CN113784217A (zh) | 视频播放方法、装置、设备和存储介质 | |
CN112070903A (zh) | 虚拟对象的展示方法、装置、电子设备及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |