CN113992992B - 基于人脸识别的碎片化观影处理方法、装置、智能电视 - Google Patents
基于人脸识别的碎片化观影处理方法、装置、智能电视 Download PDFInfo
- Publication number
- CN113992992B CN113992992B CN202111240986.6A CN202111240986A CN113992992B CN 113992992 B CN113992992 B CN 113992992B CN 202111240986 A CN202111240986 A CN 202111240986A CN 113992992 B CN113992992 B CN 113992992B
- Authority
- CN
- China
- Prior art keywords
- video
- user
- playing
- demand
- watching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 18
- 238000013467 fragmentation Methods 0.000 title description 3
- 238000006062 fragmentation reaction Methods 0.000 title description 3
- 238000000034 method Methods 0.000 claims abstract description 66
- 230000008569 process Effects 0.000 claims abstract description 42
- 239000012634 fragment Substances 0.000 claims description 25
- 238000012545 processing Methods 0.000 claims description 18
- 230000000295 complement effect Effects 0.000 claims description 10
- 230000009471 action Effects 0.000 claims description 4
- 230000006399 behavior Effects 0.000 claims description 4
- 238000001514 detection method Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 4
- 238000012552 review Methods 0.000 description 3
- 238000013523 data management Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47214—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/454—Content or additional data filtering, e.g. blocking advertisements
- H04N21/4545—Input to filtering algorithms, e.g. filtering a region of the image
- H04N21/45457—Input to filtering algorithms, e.g. filtering a region of the image applied to a time segment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本发明公开了一种基于人脸识别的碎片化观影处理方法、装置、智能电视及存储介质，所述方法包括：检测播放点播视频，调用摄像头识别获取当前观看用户信息；记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放。本发明自动记录用户漏看的视频片段，并在之后同一用户打开相同视频时可自动播放用户漏看的视频片段，方便用户中途离开并回来后继续观看连贯剧情。
Description
技术领域
本发明涉及智能电视技术领域，尤其涉及基于人脸识别的碎片化观影处理方法、装置、智能电视。
背景技术
随着科技的快速发展和人们生活水平的不断提高，各种智能电视的使用越来越普及，智能电视已经成为人们生活中不可缺少的休闲娱乐工具。
现有技术的智能电视不具有观看记录功能，有时不方便用户继续观看连贯剧情。例如，有时几个人一起在家里客厅用电视看剧，其中自己途因为有事情离开电视机前几次错过了不少片段，导致剧情连贯不到一起，后续只能繁琐地通过快进快退方法来补看视频片段，操作不方便。
因此，现有技术还有待改进和提高。
发明内容
本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种基于人脸识别的碎片化观影处理方法、装置、智能电视及存储介质，旨在解决现有技术的智能电视不具有观看记录功能，有时不方便用户继续观看连贯剧情的问题。
为了实现上述目的，本发明第一方面提供一种基于人脸识别的碎片化观影处理方法，其中，所述方法包括：
检测播放点播视频，调用摄像头识别获取当前观看用户信息；
记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；
基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放。
可选的，上述检测播放点播视频，调用摄像头识别获取当前观看用户信息的步骤包括：
智能电视接收操作指令开始播放所述点播视频；
视频播放应用每隔预定时间同步观看进度给播放历史应用；
播放历史应用调用摄像头识别智能电视当前观看用户信息。
可选的，上述视频播放应用每隔预定时间同步观看进度给播放历史应用的步骤包括：
视频播放应用每隔预定时间同步一次观看进度给播放历史应用。
可选的，上述记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表包括：
点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点；
当检测到智能电视结束播放所述点播视频，基于记录的观看用户中途离开错过观看片段的开始时间和结束时间点，生成点播视频播放中对应用户未观看片段时间表。
可选的，上述点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点的步骤包括：
当点播视频播放过程中，检测智能电视前当前观看用户是否有用户离开，并且判断用户离开时间是否超过指定时间；
当点播视频播放过程中，检测智能电视前当前观看用户有用户离开，并且判断出用户离开时间超过指定时间，则控制记录观看用户中途离开错过观看片段的开始时间和结束时间点。
可选的，上述基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放的步骤包括：
检测播放历史应用是否打开；
当检测到播放历史应用打开，调用摄像头识别获取智能电视前当前用户信息；
基于生成视频播放中对应用户未观看片段时间表，控制显示智能电视前当前用户的视频观看记录；
基于智能电视前当前用户的视频观看记录，获取用户操作的补看点播视频指令；
根据所述补看点播视频指令，打开对应视频应用获取点播视频指令对应视频的对应用户未观看片段时间表；
基于所述对应用户未观看片段时间表，控制视频应用从未观看片段开始时间开始播放点播视频。
可选的，上述记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表的步骤包括：
将记录的所述点播视频播放过程中有观看用户中途离开错过观看片段的开始时间和结束时间点，以及将生成的点播视频播放中对应用户未观看片段时间表，存储在用户对应的个人播放历史数据库；
所述个人播放历史数据库还存储有用户人脸信息、视频信息及视频观看信息。
本发明第二方面提供一种基于人脸识别的碎片化观影处理装置，其中，所述装置包括：
检测识别模块，用于检测播放点播视频，调用摄像头识别获取当前观看用户信息；
记录生成模块，用于记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；
未观看片段处理模块，用于基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放。
本发明第三方面提供一种智能电视，其中，所述智能电视包括存储器、处理器及存储在所述存储器中并可在所述处理器上运行的基于人脸识别的碎片化观影处理程序，所述处理器执行所述基于人脸识别的碎片化观影处理程序时，实现任一项所述的基于人脸识别的碎片化观影处理方法的步骤。
本发明第四方面提供一种计算机可读存储介质，其中，所述计算机可读存储介质上存储有基于人脸识别的碎片化观影处理程序，所述基于人脸识别的碎片化观影处理程序被处理器执行时，实现任一项所述的基于人脸识别的碎片化观影处理方法的步骤。
有益效果：与现有技术相比，本发明提供了一种基于人脸识别的碎片化观影处理方法，本发明基于人脸识别技术，检测用户在使用智能电视安装的视频应用观看点播视频时，播放历史应用调用电视摄像头识别当前电视机前的用户，并记录用户因中途离开错过观看片段的开始时间点和结束时间点，最后生成这个视频未观看片段时间表。当用户需要补看这个剧的漏看片段时，视频应用按未观看片段时间表进行播放。本发明使移动终端增加了新功能具有观看记录功能，方便用户中途离开并回来后继续观看连贯剧情。
附图说明
图1是本发明实施例提供的基于人脸识别的碎片化观影处理方法的流程示意图。
图2是本发明实施图1中步骤S100的具体流程示意图。
图3是本发明实施图1中步骤S200的具体流程示意图。
图4是本发明实施图1中步骤S300的具体流程示意图。
图5是本发明实施例提供的基于人脸识别的碎片化观影处理方法实现的个人播放历史数据生成过程的具体流程示意图。
图6是本发明实施例提供的基于人脸识别的碎片化观影处理方法实现的用户进行补看漏看片段的具体实施流程图。
图7是本发明实施例提供的基于人脸识别的碎片化观影处理装置的原理框图。
图8是本发明实施例提供的智能电视的内部结构原理框图。
具体实施方式
为使本发明的目的、技术方案及效果更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
在当今社会下，智能电视已成为每家每户的必备居家智能设备，相比于以往的电视而言，现在的智能电视除了能够播放数字频道的直播视频外，还可通过与互联网连接观看任意资源影片，大屏高画质的显示效果也十分受到沉浸式观影体验爱好者的青睐。但在多数的观影过程中，常常会因为各种琐事而打断用户的观影连续性，若是用户一人使用电视则可以通过暂停等手段停止影片播放，等事情结束后再返回并继续播放影片，但该种方法也较为繁琐，需要频繁的向智能电视发送暂停和播放指令；而当观影用户超过一人时，当其中某一观影用户因琐事需要暂时离开，一般此时是不会暂停视频的播放的，该种情况下用户仅能后期通过自己调节进度条找到自己尚未观看的片段进行补看，体验不佳。
为了解决上述问题，本发明实施例提供一种基于人脸识别的碎片化影片处理方法，根据本实施例的基于人脸识别的碎片化观影处理方法可以自动记录各用户观影过程中因离开而漏看的部分影片片段，并在用户下次打开该影片时自动向用户播放漏看的部分影片片段，简化用户操作，提高用户观影体验。具体实施时，本发明基于人脸识别技术，检测用户在使用智能电视安装的视频应用观看点播视频时，播放历史应用调用电视摄像头识别当前电视机前的用户，并记录用户因中途离开错过观看片段的开始时间点和结束时间点，最后生成这个视频未观看片段时间表。当用户需要补看这个剧的漏看片段时，视频应用按未观看片段时间表进行播放。本发明使移动终端增加了新功能具有观看记录功能，方便用户中途离开并回来后继续观看连贯剧情。
示例性方法
如图1所示，本发明实施例提供一种基于人脸识别的碎片化影片处理方法，具体的，上述方法包括如下步骤：
步骤S100、检测播放点播视频，调用摄像头识别获取当前观看用户信息；
在本实施例中，智能电视检测到用户通过语音或遥控器等方法发送的播放点播视频的控制指令，在打开点播视频时，同时调用摄像头对智能电视前用户的用户信息进行识别获取，所述用户信息包括用户的人脸数据。进一步考虑到智能电视为较大的居家设备，使用者的数量会受到限制，且亲朋好友来拜访时也无需登记他们的观影情况，故所述用户信息除了人脸数据外还可包括其他外观数据或行为动作数据，降低智能电视在通过摄像头识别获取用户信息时的运算量和无需搭载成本、精度过高的摄像头，以及当用户不是正脸朝向电视时也能根据获取的用户信息辨别用户身份。通过本步骤使得当前观影数据与各用户一一对应，便于用户观影数据管理。
步骤S200、记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；
在本实施例中，智能电视同时记录视频播放数据以及用户是否离开的数据，并将上述数据结合得到点播视频播放中对应用户未观看片段时间表。例如当点播视频播放到某时间点A时用户离开摄像头拍摄区域，则所智能电视通过摄像头获得用户在上述时间点A时刻离开，即观看用户中途离开错过观看片段的开始时间点，等到所述点播视频播放到某时间点B时，所述用户回到摄像头拍摄区域，则所述智能电视得到所述用户中途离开错过观影判断的结束时间点B。通过本步骤可详细记录每次用户离开的开始时刻以及结束时刻，得到用户所有未观看的点播视频片段。
步骤S300、基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放。
在本实施例中，所述智能电视基于生成的所述未观看判断时间表，当识别到记录过的用户再次打开同一点播视频进行播放时，自动控制将该用户尚未观看的片段进行顺序播放；还可设置当用户打开同一点播视频软件时，自动弹出对应用户尚未观看完毕的所有点播视频供用户进行选择。通过本步骤，实现当用户打开某未完整看完的同一点播视频时，自动播放用户尚未观看片段，便于用户使用的目的。
由上可见，本发明实施例提供的一种基于人脸识别的碎片化观影处理方法，基于人脸识别技术，检测用户在使用智能电视安装的视频应用观看点播视频时，播放历史应用调用电视摄像头识别当前电视机前的用户，并记录用户因中途离开错过观看片段的开始时间点和结束时间点，最后生成这个视频未观看片段时间表。当用户需要补看这个剧的漏看片段时，视频应用按未观看片段时间表进行播放。本发明使移动终端增加了新功能具有观看记录功能，方便用户中途离开并回来后继续观看连贯剧情。
具体的，本实施例中以用户常用的智能电视作为电视端，当上述电视端为其他设备时，可参照本实施例中的具体方案。
在一种应用场景中，所述智能电视检测到用户发送播放点播视频的操作指令，并调用摄像头识别获取当前观看用户的用户信息。
具体的，如图2所示，上述步骤S100包括：
步骤S101、智能电视接收操作指令开始播放所述点播视频；
步骤S102、视频播放应用每隔预定时间同步观看进度给播放历史应用；
步骤S103、播放历史应用调用摄像头识别智能电视当前观看用户信息。
其中，所述视频播放应用每隔预定时间同步观看进度给播放历史应用的步骤包括：
视频播放应用每隔预定时间同步一次观看进度给播放历史应用。
举例说明，某用户A通过语音功能向智能电视发送播放点播视频《美食》的视频，则所述智能电视检测到用户的点播操作指令，通过视频播放应用控制打开对应的《美食》的视频。同时，视频播放应用每隔预定时间同步一次观看进度给播放历史应用，所述预定时间例如一分钟、五分钟等，所述观看进度包括“《美食》：32％”的视频播放数据。
进一步的，所述播放历史应用还控制调用摄像头拍摄智能电视前观影用户的图像，并通过图像识别技术对图像中用户的人脸进行识别，当识别出当前观影用户为常用用户A时，则控制将当前点播视频《美食》的观看进度更新到用户A对应的观影数据中。用户可通过预先在智能电视通过人脸识别登记的方式将自己设为常用用户，并建立属于自己的观影数据；也可通过在某时间段内多次使用智能电视，例如一星期内三次使用智能电视播放点播视频，而得到智能电视自动分配的与人脸数据绑定的常用用户以及对应观影数据；而当用户A的朋友仅是时隔半个月或一个月去一次用户A家中观看视频，则对于所述用户A的朋友并不需要分配对应的常用用户以及观影数据，控制冗余数据的数据量，降低智能电视运行负担。同时通过本实施步骤，实现将播放视频的观看进度与对应用户进行关联，便于对各用户所观看过的点播视频以及其观看进度进行管理。
在一种应用场景中，所述智能电视记录所述点播视频播放过程中，离开的观看用户所对应的点播视频片段的开始时间点以及结束时间点，并生成各用户的为观看片段时间表。
具体的，如图3所示，上述步骤S200包括：
步骤S201、点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点；
步骤S202、当检测到智能电视结束播放所述点播视频，基于记录的观看用户中途离开错过观看片段的开始时间和结束时间点，生成点播视频播放中对应用户未观看片段时间表。
其中，所述点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点的步骤包括：
当点播视频播放过程中，检测智能电视前当前观看用户是否有用户离开，并且判断用户离开时间是否超过指定时间；
当点播视频播放过程中，检测智能电视前当前观看用户有用户离开，并且判断出用户离开时间超过指定时间，则控制记录观看用户中途离开错过观看片段的开始时间和结束时间点。
进一步的，所述记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表的步骤还包括：
将记录的所述点播视频播放过程中有观看用户中途离开错过观看片段的开始时间和结束时间点，以及将生成的点播视频播放中对应用户未观看片段时间表，存储在用户对应的个人播放历史数据库；
所述个人播放历史数据库还存储有用户人脸信息、视频信息及视频观看信息。
举例说明，所述智能电视控制在点播视频播放的过程中，记录用户A中途因离开而错过的《美食》视频片段的开始时间点和结束时间点。例如用户A在《美食》播放第15分钟离开，则所述智能电视通过摄像头检测到用户A离开观影区域，将《美食》第15分钟记为某错过观看片段的开始时间点，而后在最近一次通过摄像头检测到用户A回到观影区域为25分钟，则将该时间点记为该错过观影片段的结束时间点，则该段错过观影片段即为《美食》视频的第15分钟到第25分钟。
其中，具体判断所述用户A是否离开的方式包括，所述智能电视通过摄像头在指定时间内持续未能识别到用户A则认为所述用户A当前离开观影区域，所述指定时间包括三十秒、一分钟等，用户可根据个人可接受的错过视频片段的时长进行设置，若用户A觉得错过一分钟内的视频片段完全不会对观影造成任何影响，则所述指定时间设定为一分钟或两分钟即可。而若是用户超过指定时间尚未返回则以最初检测到用户离开时的时间点记为所述开始时间点，例如所述智能电视检测到用户在《美食》视频播放的第13分钟离开且在第十四分钟也并未返回，则将第十三分钟记为该错过观影片段的开始时间点。
当智能电视检测到《美食》播放完成后将所有用户A中途离开错过观看片段的开始时间和结束时间点进行整合，生成点播视频《美食》播放中用户A未观看片段时间表。实现记录对应用户所有错过片段的目的，使用户在后续再次打开影片时可自动查找到前次观看时漏看的所有片段，便于用户使用。
进一步的，所述智能电视控制将上述用户A观看《美食》对应生成的《美食》的未观看片段时间表存储在用户A对应的个人播放历史数据库中，所述个人播放历史数据库即上文中提到的各用户的观影数据，用于存储对应的用户看了哪个视频、当前视频播放进度、视频中何处为未观看片段等信息，具体包括用户人脸信息、视频信息及视频观看信息。
在一种实施方法中，智能电视基于生成视频播放中对应用户为观看片段时间表，识别到对应用户再次打开相同的点播视频进行播放，则控制自动将未观看片段进行顺序播放。
具体的，如图4所示，上述步骤S300包括：
步骤S301、检测播放历史应用是否打开；
步骤S302、当检测到播放历史应用打开，调用摄像头识别获取智能电视前当前用户信息；
步骤S303、基于生成视频播放中对应用户未观看片段时间表，控制显示智能电视前当前用户的视频观看记录；
步骤S304、基于智能电视前当前用户的视频观看记录，获取用户操作的补看点播视频指令；
步骤S305、根据所述补看点播视频指令，打开对应视频应用获取点播视频指令对应视频的对应用户未观看片段时间表；
步骤S306、基于所述对应用户未观看片段时间表，控制视频应用从未观看片段开始时间开始播放点播视频。
举例说明，所述智能电视检测用户A是否打开播放历史应用，当检测到播放历史应用被打开时，控制调用摄像头对智能电视前的图像进行拍照，并对所述图像中的人脸进行人脸识别，获取当前用户信息。例如获取到当前用户为用户A则控制获取当前用户A的信息，基于存储的用户A的未观看片段时间表，控制显示用户A的视频观看记录，例如最近一次观看的视频《美食》，以及再之前看过的《美食1》、《美食2》以及《美食3》等历史数据。用户通过遥控器可选择上述历史观看的点播视频进行补看，同时所述智能电视获取到用户A通过遥控器发送的补看点播视频《美食》的指令，则进一步根据该点播视频《美食》对应的用户A的未观看片段时间表，控制视频应用从第一个未观看片段的开始时间点播放点播视频，并在所述第一个未观看片段的结束时间点直接跳过到第二个未观看片段的开始时间点，并按照该顺序进行顺序播放，直到所有未观看片段观看完毕。通过本实施步骤，实现当用户打开前次观看的点播视频时，自动播放前次观看该视频时所有错过的未观看片段，提高用户的使用体验。
本发明实施例中，还基于一种基于人脸识别的碎片化观影处理方法进行具体说明，图5是本发明实施例提供的基于人脸识别的碎片化观影处理方法实现的个人播放历史数据生成过程的具体流程示意图，其步骤包括：
步骤S10、开始，进入步骤S11；
步骤S11、电视开始播放点播视频，进入步骤S12；
步骤S12、视频应用每隔一分钟同步一次观看进度给播放历史应用，进入步骤S13；
步骤S13、播放历史应用调用摄像头识别当前电视机前的用户，进入步骤S14；
步骤S14、视频播放过程中，记录用户因中途离开错过观看片段的开始时间点和结束时间点，进入步骤S15；
步骤S15、电视结束播放点播视频，进入步骤S16；
步骤S16、电视生成视频未观看片段时间表，进入步骤S20；
步骤S20、结束。
由上可见，在本发明具体应用实施例中，当用户选择点播视频进行播放后，电视开始播放点播视频，并且控制视频应用每隔一分钟同步一次观看进度给播放历史应用，所述播放历史应用同时调用摄像头识别当前观看电视的用户。在所述点播视频播放的过程中，所述电视控制记录用户因中途离开而错过观看的所有点播视频片段的开始时间点以及结束时间点。所述电视结束播放点播视频，所述电视基于上述错过观看的所有点播视频片段的开始时间点以及结束时间点生成对应用户的未观看片段时间表。
进一步的，图6是本发明实施例提供的基于人脸识别的碎片化观影处理方法实现的用户进行补看漏看片段的具体实施流程图，其步骤包括：
步骤S30、开始，进入步骤S31；
步骤S31、用户打开播放历史应用，进入步骤S32；
步骤S32、播放历史应用调用摄像头识别获取当前电视机前的用户，进入步骤S33；
步骤S33、电视控制展示当前电视机前用户的视频观看记录，进入步骤S34；
步骤S34、用户点击要补看的视频海报，进入步骤S35；
步骤S35、拉起视频应用并传递该视频的未观看片段时间表，进入步骤S36；
步骤S36、视频应用按照未观看片段时间表进行播放，进入步骤S40；
步骤S40、结束。
由上可见，在本发明具体应用实施例中，当用户想要补看之前观看点播视频的漏看部分时，控制打开电视的播放历史应用，所述播放历史应用调用摄像头识别当前电视机前用户是否有点播视频播放历史。当有，则控制展示该用户的点播视频观看记录，用户可根据播放历史应用所展示的视频海报即视频封面，点击选中自己想要补看的点播视频。当所述播放历史应用接收到用户选中某点播视频后，控制打开视频应用并将用户想要观看的点播视频对应的未观看片段时间表发送给视频应用，所述视频应用根据所述未观看片段时间表进行播放，自动帮助用户进行点播视频的补看。
示例性装置
如图7中所示，对应于上述基于人脸识别的碎片化观影处理方法，本发明实施例还提供一种基于人脸识别的碎片化观影处理装置，上述基于人脸识别的碎片化观影处理包括：
检测识别模块710，用于检测播放点播视频，调用摄像头识别获取当前观看用户信息；
在本实施例中，智能电视检测到用户通过语音或遥控器等方法发送的播放点播视频的控制指令，在打开点播视频时，同时调用摄像头对智能电视前用户的用户信息进行识别获取，所述用户信息包括用户的人脸数据。进一步考虑到智能电视为较大的居家设备，使用者的数量会受到限制，且亲朋好友来拜访时也无需登记他们的观影情况，故所述用户信息除了人脸数据外还可包括其他外观数据或行为动作数据，降低智能电视在通过摄像头识别获取用户信息时的运算量和无需搭载成本、精度过高的摄像头，以及当用户不是正脸朝向电视时也能根据获取的用户信息辨别用户身份。通过本步骤使得当前观影数据与各用户一一对应，便于用户观影数据管理。
记录生成模块720，用于记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；
在本实施例中，智能电视同时记录视频播放数据以及用户是否离开的数据，并将上述数据结合得到点播视频播放中对应用户未观看片段时间表。例如当点播视频播放到某时间点A时用户离开摄像头拍摄区域，则所智能电视通过摄像头获得用户在上述时间点A时刻离开，即观看用户中途离开错过观看片段的开始时间点，等到所述点播视频播放到某时间点B时，所述用户回到摄像头拍摄区域，则所述智能电视得到所述用户中途离开错过观影判断的结束时间点B。通过本步骤可详细记录每次用户离开的开始时刻以及结束时刻，得到用户所有未观看的点播视频片段。
未观看片段处理模块730，用于基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放。
在本实施例中，所述智能电视基于生成的所述未观看判断时间表，当识别到记录过的用户再次打开同一点播视频进行播放时，自动控制将该用户尚未观看的片段进行顺序播放；还可设置当用户打开同一点播视频软件时，自动弹出对应用户尚未观看完毕的所有点播视频供用户进行选择。通过本步骤，实现当用户打开某未完整看完的同一点播视频时，自动播放用户尚未观看片段，便于用户使用的目的。
由上可见，本发明实施例提供的一种基于人脸识别的碎片化观影处理方法，通过检测识别模块710，检测播放点播视频，调用摄像头识别获取当前观看用户信息；通过记录生成模块720，记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；通过未观看片段处理模块730，基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放，当用户需要补看这个剧的漏看片段时，视频应用按未观看片段时间表进行播放。本发明使移动终端增加了新功能具有观看记录功能，方便用户中途离开并回来后继续观看连贯剧情。
具体的，在本实施例中，上述基于人脸识别的碎片化观影处理装置的各模块的具体功能可参照上述基于人脸识别的碎片化观影处理方法中的对应描述，在此不再赘述。
基于上述实施例，本发明还提供了一种智能电视，其原理框图可以如图8所示。该智能电视包括通过系统总线连接的处理器、存储器、网络接口、显示屏、温度传感器。其中，该智能电视的处理器用于提供计算和控制能力。该智能电视的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该智能电视的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种基于人脸识别的碎片化观影处理方法。该智能电视的显示屏可以是液晶显示屏或者电子墨水显示屏，该智能电视的温度传感器是预先在智能电视内部设置，用于检测内部设备的运行温度。
本领域技术人员可以理解，图8中示出的原理框图，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的智能电视的限定，具体的智能电视以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种智能电视，智能电视包括存储器、处理器及存储在存储器中并可在处理器上运行的基于人脸识别的碎片化观影处理程序，处理器执行基于人脸识别的碎片化观影处理程序时，实现如下操作指令：
检测播放点播视频，调用摄像头识别获取当前观看用户信息；
记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；
基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本发明所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
综上，本发明公开了一种基于人脸识别的碎片化观影处理方法、装置、智能电视及存储介质，所述方法包括：检测播放点播视频，调用摄像头识别获取当前观看用户信息；记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表；基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放。本发明自动记录用户漏看的视频片段，并在之后同一用户打开相同视频时可自动播放用户漏看的视频片段，方便用户中途离开并回来后继续观看连贯剧情。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (5)
1.一种基于人脸识别的碎片化观影处理方法，其特征在于，所述方法包括：
检测播放点播视频，调用摄像头识别获取当前观看用户信息；
所述检测播放点播视频，调用摄像头识别获取当前观看用户信息的步骤包括：
智能电视接收操作指令开始播放所述点播视频；
视频播放应用每隔预定时间同步观看进度给播放历史应用；
播放历史应用调用摄像头识别所述当前观看用户信息，所述当前观看用户信息除了人脸数据外还包括其他外观数据或行为动作数据，所述智能电视自动分配所述人脸数据的常用用户以及对应的观影数据；
记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表，所述生成点播视频播放中对应用户未观看片段时间表包括：当检测到智能电视结束播放所述点播视频，基于记录的所述观看用户中途离开错过所述观看片段的所述开始时间和结束时间点，生成所述点播视频播放中所述对应用户未观看片段时间表；
所述记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表包括：
点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点；
所述点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点的步骤包括：
当点播视频播放过程中，检测智能电视前当前观看用户是否有用户离开，并且判断用户离开时间是否超过指定时间；
当点播视频播放过程中，所述智能电视通过摄像头在指定时间内未能识别用户在观影区域判断用户离开，并且判断出用户离开时间超过指定时间，则控制记录观看用户中途离开错过观看片段的开始时间和结束时间点；
所述记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表的步骤包括：
将记录的所述点播视频播放过程中有观看用户中途离开错过观看片段的开始时间和结束时间点，以及将生成的点播视频播放中对应用户未观看片段时间表，存储在用户对应的个人播放历史数据库；
所述个人播放历史数据库还存储有用户人脸信息、视频信息及视频观看信息；
基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放；
所述基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放的步骤包括：
检测播放历史应用是否打开；
当检测到播放历史应用打开，调用摄像头识别获取智能电视前当前用户信息；
基于生成视频播放中对应用户未观看片段时间表，控制显示智能电视前当前用户的视频观看记录；
基于智能电视前当前用户的视频观看记录，获取用户操作的补看点播视频指令；
根据所述补看点播视频指令，打开对应视频应用获取点播视频指令对应视频的对应用户未观看片段时间表；
基于所述对应用户未观看片段时间表，控制视频应用从未观看片段开始时间开始播放点播视频，根据所述对应用户未观看片段时间表，得到第一个未观看片段的结束时间点和第二个未观看片段的开始时间点，当播放到第一个未观看片段的结束时间点时，直接播放第二个未观看片段的开始时间点，并依次进行顺序播放。
2.根据权利要求1所述的基于人脸识别的碎片化观影处理方法，其特征在于，所述视频播放应用每隔预定时间同步观看进度给播放历史应用的步骤包括：
视频播放应用每隔预定时间同步一次观看进度给播放历史应用。
3.一种基于人脸识别的碎片化观影处理装置，其特征在于，所述装置包括：
检测识别模块，用于检测播放点播视频，调用摄像头识别获取当前观看用户信息；所述检测播放点播视频，调用摄像头识别获取当前观看用户信息的步骤包括：
智能电视接收操作指令开始播放所述点播视频；
视频播放应用每隔预定时间同步观看进度给播放历史应用；
播放历史应用调用摄像头识别所述当前观看用户信息，所述当前观看用户信息除了人脸数据外还包括其他外观数据或行为动作数据，所述智能电视自动分配所述人脸数据的常用用户以及对应的观影数据；
记录生成模块，用于记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表，所述生成点播视频播放中对应用户未观看片段时间表包括：当检测到智能电视结束播放所述点播视频，基于记录的所述观看用户中途离开错过所述观看片段的所述开始时间和结束时间点，生成所述点播视频播放中所述对应用户未观看片段时间表；
所述记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表包括：
点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点
所述点播视频播放过程中，记录观看用户中途离开错过观看片段的开始时间和结束时间点的步骤包括：
当点播视频播放过程中，检测智能电视前当前观看用户是否有用户离开，并且判断用户离开时间是否超过指定时间；
当点播视频播放过程中，所述智能电视通过摄像头在指定时间内未能识别用户在观影区域判断用户离开，并且判断出用户离开时间超过指定时间，则控制记录观看用户中途离开错过观看片段的开始时间和结束时间点；
所述记录所述点播视频播放过程中，有观看用户中途离开错过观看片段的开始时间和结束时间点，并生成点播视频播放中对应用户未观看片段时间表的步骤包括：
将记录的所述点播视频播放过程中有观看用户中途离开错过观看片段的开始时间和结束时间点，以及将生成的点播视频播放中对应用户未观看片段时间表，存储在用户对应的个人播放历史数据库；
所述个人播放历史数据库还存储有用户人脸信息、视频信息及视频观看信息；
未观看片段处理模块，用于基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放；
所述基于生成视频播放中对应用户未观看片段时间表，识别到对应用户下次打开所述点播视频播放，自动控制从未观看片段开始时间开始播放的步骤包括：
检测播放历史应用是否打开；
当检测到播放历史应用打开，调用摄像头识别获取智能电视前当前用户信息；
基于生成视频播放中对应用户未观看片段时间表，控制显示智能电视前当前用户的视频观看记录；
基于智能电视前当前用户的视频观看记录，获取用户操作的补看点播视频指令；
根据所述补看点播视频指令，打开对应视频应用获取点播视频指令对应视频的对应用户未观看片段时间表；
基于所述对应用户未观看片段时间表，控制视频应用从未观看片段开始时间开始播放点播视频，根据所述对应用户未观看片段时间表，得到第一个未观看片段的结束时间点和第二个未观看片段的开始时间点，当播放到第一个未观看片段的结束时间点时，直接播放第二个未观看片段的开始时间点，并依次进行顺序播放。
4.一种智能电视，其特征在于，所述智能电视包括存储器、处理器及存储在所述存储器中并可在所述处理器上运行的基于人脸识别的碎片化观影处理程序，所述处理器执行所述基于人脸识别的碎片化观影处理程序时，实现如权利要求1-2任一项所述的基于人脸识别的碎片化观影处理方法的步骤。
5.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有基于人脸识别的碎片化观影处理程序，所述基于人脸识别的碎片化观影处理程序被处理器执行时，实现如权利要求1-2任一项所述的基于人脸识别的碎片化观影处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111240986.6A CN113992992B (zh) | 2021-10-25 | 2021-10-25 | 基于人脸识别的碎片化观影处理方法、装置、智能电视 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111240986.6A CN113992992B (zh) | 2021-10-25 | 2021-10-25 | 基于人脸识别的碎片化观影处理方法、装置、智能电视 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113992992A CN113992992A (zh) | 2022-01-28 |
| CN113992992B true CN113992992B (zh) | 2024-04-19 |
Family
ID=79741000
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111240986.6A Active CN113992992B (zh) | 2021-10-25 | 2021-10-25 | 基于人脸识别的碎片化观影处理方法、装置、智能电视 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113992992B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114401425B (zh) * | 2022-02-08 | 2024-08-06 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种视频播放方法及装置 |
| CN115580754B (zh) * | 2022-12-06 | 2023-05-02 | 成都智元汇信息技术股份有限公司 | 一种地铁公共空间内容点播方法及系统 |
| CN117998146A (zh) * | 2024-04-03 | 2024-05-07 | 深圳市博锐高科科技有限公司 | 数字电视的数据处理方法、装置和数字电视 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2701393A1 (en) * | 2012-08-23 | 2014-02-26 | Alticast Corporation | Method and apparatus for providing live program replay service |
| CN105828192A (zh) * | 2016-03-22 | 2016-08-03 | 乐视网信息技术（北京）股份有限公司 | 一种多终端视频续播方法和装置 |
| CN107911745A (zh) * | 2017-11-17 | 2018-04-13 | 武汉康慧然信息技术咨询有限公司 | 电视回放控制方法 |
| CN111615003A (zh) * | 2020-05-29 | 2020-09-01 | 腾讯科技（深圳）有限公司 | 一种视频播放控制方法、装置、设备及存储介质 |
| CN112752153A (zh) * | 2020-04-30 | 2021-05-04 | 腾讯科技（深圳）有限公司 | 一种对视频的播放处理方法及智能设备、存储介质 |
-
2021
- 2021-10-25 CN CN202111240986.6A patent/CN113992992B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2701393A1 (en) * | 2012-08-23 | 2014-02-26 | Alticast Corporation | Method and apparatus for providing live program replay service |
| CN105828192A (zh) * | 2016-03-22 | 2016-08-03 | 乐视网信息技术（北京）股份有限公司 | 一种多终端视频续播方法和装置 |
| CN107911745A (zh) * | 2017-11-17 | 2018-04-13 | 武汉康慧然信息技术咨询有限公司 | 电视回放控制方法 |
| CN112752153A (zh) * | 2020-04-30 | 2021-05-04 | 腾讯科技（深圳）有限公司 | 一种对视频的播放处理方法及智能设备、存储介质 |
| CN111615003A (zh) * | 2020-05-29 | 2020-09-01 | 腾讯科技（深圳）有限公司 | 一种视频播放控制方法、装置、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113992992A (zh) | 2022-01-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113992992B (zh) | 基于人脸识别的碎片化观影处理方法、装置、智能电视 | |
| US10080043B2 (en) | Modifying media asset metadata to include identification of key moment | |
| WO2019134293A1 (zh) | 一种直播方法、装置、服务器及介质 | |
| US20150341698A1 (en) | Method and device for providing selection of video | |
| CN111343477B (zh) | 数据传输方法、装置、电子设备及存储介质 | |
| CN111405369A (zh) | 智能电视及其控制方法、计算机可读存储介质 | |
| US11405667B2 (en) | Method for serving interactive digital advertising content within a streaming platform | |
| KR20140092814A (ko) | 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템 | |
| CN110719530A (zh) | 一种视频播放方法、装置、电子设备及存储介质 | |
| US20230262291A1 (en) | Systems and methods for providing media recommendations | |
| CN104080006A (zh) | 一种视频处理装置及方法 | |
| CN108616769B (zh) | 一种视频点播的方法和装置 | |
| JP4886279B2 (ja) | 記録されたコンテンツと共に補足コンテンツを提示する方法、装置、およびコンピュータ読取可能な記録媒体 | |
| CN105959805B (zh) | 电视节目的播放方法及播放装置 | |
| CN105763900A (zh) | 一种设置直播节目权限的方法及装置 | |
| US20170249971A1 (en) | Method for generating image in which sound source is inserted and apparatus therefor | |
| CN111698261B (zh) | 基于流媒体的视频播放方法、装置、设备及存储介质 | |
| CN111726694B (zh) | 互动视频的恢复播放方法、装置、电子设备及存储介质 | |
| CN108965998A (zh) | 一种频道切换方法、系统、智能电视及存储介质 | |
| CN110392213A (zh) | 一种信息处理方法及电子设备 | |
| CN112148113A (zh) | 眼部运动多媒体信息播放的方法、装置及显示终端 | |
| CN108881984B (zh) | 数字电视设备截图存储方法及系统 | |
| CN115119051B (zh) | 一种视频播放控制方法及显示设备 | |
| CN111901676B (zh) | 一种关机时间的确定方法、智能电视及可读存储介质 | |
| JP2004282212A (ja) | 映像嗜好推測方法および映像配信システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |