WO2017113740A1 - 一种基于人脸识别的视频推荐方法和装置 - Google Patents

一种基于人脸识别的视频推荐方法和装置 Download PDF

Info

Publication number
WO2017113740A1
WO2017113740A1 PCT/CN2016/089580 CN2016089580W WO2017113740A1 WO 2017113740 A1 WO2017113740 A1 WO 2017113740A1 CN 2016089580 W CN2016089580 W CN 2016089580W WO 2017113740 A1 WO2017113740 A1 WO 2017113740A1
Authority
WO
WIPO (PCT)
Prior art keywords
video file
user
length
face
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/CN2016/089580
Other languages
English (en)
French (fr)
Inventor
潘峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Le Holdings Beijing Co Ltd
Leshi Zhixin Electronic Technology Tianjin Co Ltd
Original Assignee
Le Holdings Beijing Co Ltd
Leshi Zhixin Electronic Technology Tianjin Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Le Holdings Beijing Co Ltd, Leshi Zhixin Electronic Technology Tianjin Co Ltd filed Critical Le Holdings Beijing Co Ltd
Priority to US15/240,195 priority Critical patent/US20170188103A1/en
Publication of WO2017113740A1 publication Critical patent/WO2017113740A1/zh
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/735—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions

Definitions

  • the invention relates to the field of media communication technology, in particular to a video recommendation method and device based on face recognition.
  • smart TV is an intelligent multimedia terminal that conforms to the trend of “high definition”, “networking” and “intelligence” of TV sets. It has the content of programs obtained from various channels such as the Internet, video equipment and computers.
  • the easy-to-use, integrated operator interface delivers the features that consumers want most clearly on a large screen.
  • some embodiments of the present invention aim to provide a video recommendation method and apparatus based on face recognition, which solves the problem that all family members cannot recommend to each family member when using an account to watch video on a smart TV. The problem with the video of interest.
  • the acquired identity information is uploaded to the server, and a video file recommended according to the user's viewing history is received from the server.
  • the viewing record of the user is obtained by the following steps:
  • determining whether the played video file is an advertisement video file in the process of playing the video file, determining whether the played video file is an advertisement video file
  • the length of time for monitoring the playback of the video file is not performed; if it is not the advertisement video file, the length of time for monitoring the playback of the video file is performed.
  • the monitoring the length of time that the video file is played, if the length of time for monitoring is monitored reaches a preset threshold
  • the length of the play is subtracted from the play time of the advertisement video file, and it is determined whether the subtracted time length reaches a preset threshold, and if so, the video file is marked as valid for viewing. Record, otherwise continue to monitor the length of time the video file is played;
  • the video file is marked as a valid watch record.
  • an instruction of the user to log in to the smart TV account is obtained, or a trigger instruction of the video file is clicked after the user logs in to the smart TV account.
  • some embodiments of the present invention further provide a video recommendation device based on face recognition, including:
  • a face data acquiring unit configured to start a face detection process and acquire face data
  • An identity information obtaining unit configured to acquire identity information of the user in a preset face user table according to the face data; wherein, the face data of each user is stored in the face user table Correspondence with identity information;
  • the video file recommendation unit is configured to upload the acquired identity information to the server, and receive a video file recommended according to the user's viewing record from the server.
  • a viewing record uploading unit is further included for:
  • the viewing record uploading unit is further configured to:
  • the length of time for monitoring the playback of the video file is not performed; if it is not the advertisement video file, the length of time for monitoring the playback of the video file is performed.
  • the viewing record uploading unit is further configured to:
  • the length of time during which the video file is played is monitored, if the length of the monitored play reaches a preset threshold
  • the length of the play is subtracted from the play time of the advertisement video file, and it is determined whether the subtracted time length reaches a preset threshold, and if so, the video file is marked as valid for viewing. Record, otherwise continue to monitor the length of time the video file is played;
  • the video file is marked as a valid watch record.
  • the user before the face data acquisition unit starts the face detection process, the user obtains an instruction for the user to log in to the smart TV account, or clicks the user after logging in to the smart TV account.
  • the trigger instruction of the frequency file before the face data acquisition unit starts the face detection process, the user obtains an instruction for the user to log in to the smart TV account, or clicks the user after logging in to the smart TV account.
  • the video recognition method and apparatus based on face recognition provided by some embodiments of the present invention realize personalized and accurate video recommendation for each viewing user in a home account, and optimize The quality of smart TV video services.
  • FIG. 1 is a schematic flowchart of a video recommendation method based on face recognition according to an embodiment of the present invention
  • FIG. 2 is a schematic flowchart of a video recommendation method based on face recognition according to an embodiment of the present invention
  • FIG. 3 is a schematic structural diagram of a video recommendation device based on face recognition according to some embodiments of the present invention.
  • FIG. 4 is a schematic structural diagram of a video recommendation device based on face recognition according to an embodiment of the present invention.
  • each family member can only be recommended to video files of interest to all family members after logging in to the account, and can not be recommended to view video files only for the family members.
  • some embodiments of the present invention from the perspective of the user, realize that the user wishes to be able to recommend a video file that is only of interest to him. Therefore, the idea of some embodiments of the present invention is to establish interconnection between face recognition, video files, and personalized recommendations on a smart TV.
  • FIG. 1 is a schematic flowchart of a video recommendation method based on face recognition according to an embodiment of the present invention, where the video recommendation method based on face recognition includes:
  • Step 101 Start a face detection process to acquire face data.
  • the face detection process may be initiated.
  • the user may click the trigger command of the video file after logging in to the smart TV account, and then start the face detection process.
  • the login smart TV account means that the smart TV sets the account of the family unit.
  • the user can first log in to the account through the verification of the home account, and then identify the different users who log in to the home account by initiating the face detection process.
  • it is possible to share a home Multiple users of the court account are identified.
  • the face detection process is set to the resident system, and the default is the background process that is always running.
  • Step 102 Acquire, according to the face data, identity information of the user in a preset face user table.
  • the face user table stores a correspondence relationship between the face data and the identity information of each user.
  • the identity information may include a user name, a password, a gender, an age, and the like.
  • the identity information of the user is obtained in the preset face user table, whether the identity information of the user exists in the preset face user table may be determined according to the face data. If yes, the identity information is obtained, otherwise the user identity information corresponding to the face data is established in the face user table. For example, the floating layer may be popped up to allow the user to set the identity information, and the set identity information is associated with the face data and stored in the face user table. Preferably, the updated face user table is uploaded to the server.
  • each home account corresponds to a face user table in which the correspondence between the face data and the identity information of each user after logging in through the home account is stored.
  • the corresponding relationship between the face data and the identity information of all users is stored in the face user table, and the correspondence between the face data and the identity information of the user who performs face detection after logging in through the same home account is included.
  • the relationship also includes the correspondence between the face data and the identity information of the user who performs face detection after logging in through different home accounts.
  • the home account identifier may be further stored in the face user table. That is to say, a home account identifier is also set in the correspondence between the face data and the identity information of each user, and the home account identifiers of multiple users who share a single home account are the same.
  • the face user table may be stored locally or not locally. However, whether or not it is stored locally, the face user table described above is stored on the server side. Preferably, if the face user table is not stored locally, the current local MAC address may be used as a parameter, and a request is sent to the server through the network to obtain a face user table currently stored on the server.
  • Step 103 Upload the acquired identity information to the server.
  • an identity letter corresponding to the obtained facial data in the face user table may be used. Interest, upload to the server.
  • Step 104 Receive a video file recommended according to the user's viewing record from the server.
  • the user's viewing record monitors the length of time during which the video file is played during the process of playing the video file. If the length of the playback time is reached to a preset threshold, the video file is marked as valid. Watch History.
  • the preset threshold is three quarters of the total length of the video.
  • the length of the playing period refers to the total time of the played portion of the video file.
  • the length of the playback time of the video file does not reach the total length of the video, which may be caused by the user changing the console or shutting down.
  • the face detection process to get the face data.
  • the identity information of the user is obtained in a preset face user table.
  • the acquired identity information and the valid viewing record are uploaded to the server.
  • the played video file is an advertisement video file. If it is an advertisement video file, the length of time for monitoring the playback of the video file is not performed, otherwise the length of time for monitoring the playback of the video file is performed.
  • the advertisement video file can be excluded before monitoring the length of time the video file is played, so that the effective viewing record can be accurately marked while maximizing the monitoring efficiency.
  • the length of the play when it is detected that the length of the play reaches a preset threshold, it is determined whether there is playback of the advertisement video file within the length of the play. If there is playback of the advertisement video file, the length of time of the playback needs to be subtracted from the length of the playback time of the advertisement video file. Then, it is judged whether the length of the subtracted time reaches a preset threshold, and if so, the video file is marked as a valid viewing record, otherwise the length of time during which the video file is played is continuously monitored. If there is no play of the ad video file, the video file is marked as a valid watch record.
  • some embodiments of the present invention are capable of marking a video file that only the user actually views, and it is necessary to subtract some playback content that is not the video file in the monitoring time length. , for example, an ad video file during video file playback.
  • the video recognition method based on face recognition may specifically adopt the following steps:
  • Step 201 Acquire an instruction for the user to log in to the smart TV account, or receive a trigger instruction of the video file after the user logs in to the smart TV account.
  • Step 202 Start a face detection process to acquire face data.
  • Step 203 Determine, according to the face data, whether identity information corresponding to the face data exists in a preset face user table. If yes, proceed to step 205, otherwise proceed to step 204.
  • Step 204 Establish identity information of the user according to the face data, and then return to step 201.
  • Step 205 Obtain identity information of the user in a preset face user table, and then proceed to step 206.
  • Step 206 Upload the acquired identity information to the server.
  • Step 207 Receive a video file recommended according to the user's viewing record from the server.
  • Step 1 During the process of playing the video file, determine whether the played video file is an advertisement video file. If yes, perform step two, otherwise proceed to step 3.
  • Step 2 Do not monitor the length of time that the video file is played, and exit the process.
  • Step 3 Perform the monitoring of the length of time the video file is played, and proceed to step 4.
  • Step 4 If it is detected that the length of the play reaches the preset threshold, it is determined whether there is playback of the advertisement video file within the length of the play, if yes, step 5 is performed, otherwise step 7 is performed.
  • Step 5 Subtract the length of the play from the play time of the advertisement video file, and perform step 6.
  • Step 6 Determine whether the length of time after subtraction reaches a preset threshold. If yes, proceed to step seven, otherwise return to step 3.
  • Step 7 The video file is marked as a valid viewing record, and step 8 is performed.
  • Step 8 Start the face detection process to obtain face data.
  • Step 9 According to the face data, obtain the identity information of the user in a preset face user table.
  • Step 10 Upload the obtained identity information and the valid viewing record to the server.
  • a video recommendation device based on face recognition includes a face data acquiring unit 301 and identity information connected in sequence.
  • the obtaining unit 302 and the video file recommending unit 303 are configured to start a face detection process and acquire face data.
  • the identity information obtaining unit 302 is configured to acquire identity information of the user in a preset face user table according to the face data. The corresponding relationship between the face data and the identity information of each user is stored in the face user table.
  • the video file recommending unit 303 is configured to upload the acquired identity information to the server, and receive a video file recommended according to the user's viewing record from the server.
  • the face data acquisition unit 301 acquires an instruction for the user to log in to the smart TV account, or receives a trigger instruction of the video file after the user logs in to the smart TV account.
  • each home account corresponds to a face user table in which the correspondence between the face data and the identity information of each user after logging in through the home account is stored.
  • the corresponding relationship between the face data and the identity information of all users is stored in the face user table, and the correspondence between the face data and the identity information of the user who performs face detection after logging in through the same home account is included.
  • the relationship also includes the correspondence between the face data and the identity information of the user who performs face detection after logging in through different home accounts.
  • the face user table may be stored locally or not locally. However, whether or not it is stored locally, the face user table described above is stored on the server side. Preferably, if the face user table is not stored locally, the current local MAC address may be used as a parameter, and a request is sent to the server through the network to obtain a face user table currently stored on the server.
  • a viewing history uploading unit 304 connected to the video file recommending unit 303 is further included.
  • the viewing record uploading unit 304 monitors the length of time during which the video file is played during the process of playing the video file. If the length of the played video is detected to reach a preset threshold, the video file is marked as a valid viewing record.
  • the preset threshold is three quarters of the total length of the video.
  • the face detection process to get the face data.
  • the identity information of the user is obtained in a preset face user table.
  • the acquired identity information and the valid viewing record are uploaded to the server.
  • the viewing record uploading unit 304 needs to determine whether the played video file is an advertisement video file during the process of playing the video file. If it is an advertisement video file, the length of time for monitoring the playback of the video file is not performed, otherwise the length of time for monitoring the playback of the video file is performed. Thus, the advertisement video text can be discharged before monitoring the length of time the video file is played. It enables accurate marking of effective viewing records while maximizing monitoring efficiency.
  • the viewing history uploading unit 304 determines whether there is playback of the advertisement video file within the length of the playback. If there is playback of the advertisement video file, the length of time of the playback needs to be subtracted from the length of the playback time of the advertisement video file. Then, it is judged whether the length of the subtracted time reaches a preset threshold, and if so, the video file is marked as a valid viewing record, otherwise the length of time during which the video file is played is continuously monitored. If there is no play of the ad video file, the video file is marked as a valid watch record.
  • the video recommendation method and apparatus based on face recognition provided by some embodiments of the present invention creatively solves the singularity of the smart TV video recommendation service, realizes the diversity of recommendation services, and can watch each video.
  • the user-based unit recommends video of interest; finally, the entire face recognition-based video recommendation method and apparatus are compact and easy to implement.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种基于人脸识别的视频推荐方法和装置，启动人脸检测进程，获取人脸数据（101，202）；根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息（102，205）；其中，在所述的人脸用户表中存储有每个用户的脸部数据和身份信息的对应关系；将获取的身份信息上传至服务器（103，206），并从所述服务器接收根据该用户的观看记录推荐的视频文件（104，207）。因此，所述基于人脸识别的视频推荐方法和装置解决了所有家庭成员使用一个账号在智能电视上进行视频观看时，无法对每个家庭成员推荐感兴趣视频的问题。

Description

一种基于人脸识别的视频推荐方法和装置
本申请要求在2015年12月29日提交中国专利局、申请号为201511014705.X、发明名称为“一种基于人脸识别的视频推荐方法和装置”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。
技术领域
本发明涉及媒体传播技术领域，特别是指一种基于人脸识别的视频推荐方法和装置。
背景技术
目前，智能电视是顺应电视机“高清化”、“网络化”、“智能化”的趋势而出现的一种智能多媒体终端，具备从因特网、视频设备、计算机等多种渠道获得节目内容，通过简单易用的整合式操作界面将消费者最需要的内容在大屏幕上清晰地展现的功能。
各种视频播放网站和应用可以根据用户的观看习惯推荐用户感兴趣的视频，减少了用户搜索的时间，增加了用户体验。电视作为一个全家的观看视频的入口，往往在收看视频时只需要一个会员账号就可以提供全家的观看，不需要家庭成员每个人都要有会员账号和缴纳会员费，基于其特殊性当前的推荐算法没有办法做到为家庭成员每个人推荐感兴趣的视频。
发明内容
有鉴于此，本发明部分实施例的目的在于提出一种基于人脸识别的视频推荐方法和装置，解决了所有家庭成员使用一个账号在智能电视上进行视频观看时，无法对每个家庭成员推荐感兴趣视频的问题。
基于上述目的本发明部分实施例提供的基于人脸识别的视频推荐方法，包括步骤：
启动人脸检测进程，获取人脸数据；
根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信 息；其中，在所述的人脸用户表中存储有每个用户的脸部数据和身份信息的对应关系；
将获取的身份信息上传至服务器，并从所述服务器接收根据该用户的观看记录推荐的视频文件。
在一个实施例中，所述该用户的观看记录通过如下步骤得到：
在进行视频文件播放的过程中，监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值，则将该视频文件标记为有效观看记录；
启动人脸检测进程，获取人脸数据；
根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息；
将获取的身份信息和该有效观看记录上传至服务器。
在一个实施例中，所述在进行视频文件播放的过程中，判断播放的视频文件是否为广告视频文件；
根据判断结果，若是广告视频文件，则不进行监测视频文件播放的时间长度；若不是广告视频文件，则进行监测视频文件播放的时间长度。
在一个实施例中，所述监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值；
判断在该播放的时间长度内是否存在广告视频文件的播放；
如果存在广告视频文件的播放，则将该播放的时间长度减去该广告视频文件的播放时间长度，判断减去后的时间长度是否达到预设的阈值，若是则将该视频文件标记为有效观看记录，否则继续监测视频文件播放的时间长度；
如果不存在广告视频文件的播放，则将该视频文件标记为有效观看记录。
在一个实施例中，所述启动人脸检测进程之前，获取用户登录智能电视账户的指令，或者收到用户登录智能电视账户后点击视频文件的触发指令。
在另一方面，本发明部分实施例还提供了一种基于人脸识别的视频推荐装置，包括：
人脸数据获取单元，用于启动人脸检测进程，获取人脸数据；
身份信息获取单元，用于根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息；其中，在所述的人脸用户表中存储有每个用户的脸部数据和身份信息的对应关系；
视频文件推荐单元，用于将获取的身份信息上传至服务器，并从所述服务器接收根据该用户的观看记录推荐的视频文件。
在一个实施例中，还包括观看记录上传单元，用于：
在进行视频文件播放的过程中，监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值，则将该视频文件标记为有效观看记录；
启动人脸检测进程，获取人脸数据；
根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息；
将获取的身份信息和该有效观看记录上传至服务器。
在一个实施例中，所述观看记录上传单元还用于：
在进行视频文件播放的过程中，判断播放的视频文件是否为广告视频文件；
根据判断结果，若是广告视频文件，则不进行监测视频文件播放的时间长度；若不是广告视频文件，则进行监测视频文件播放的时间长度。
在一个实施例中，所述观看记录上传单元还用于：
监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值；
判断在该播放的时间长度内是否存在广告视频文件的播放；
如果存在广告视频文件的播放，则将该播放的时间长度减去该广告视频文件的播放时间长度，判断减去后的时间长度是否达到预设的阈值，若是则将该视频文件标记为有效观看记录，否则继续监测视频文件播放的时间长度；
如果不存在广告视频文件的播放，则将该视频文件标记为有效观看记录。
在一个实施例中，所述人脸数据获取单元启动人脸检测进程之前，获取用户登录智能电视账户的指令，或者收到用户登录智能电视账户后点击视 频文件的触发指令。
从上面所述可以看出，本发明部分实施例提供的基于人脸识别的视频推荐方法和装置，从而实现了对于一个家庭账号中的每个观看用户进行个性化、精准化的视频推荐，优化了智能电视视频服务的质量。
附图说明
图1为本发明实施例中基于人脸识别的视频推荐方法的流程示意图；
图2为本发明可参考实施例中基于人脸识别的视频推荐方法的流程示意图；
图3为本发明部分实施例基于人脸识别的视频推荐装置的结构示意图；
图4为本发明可参考实施例中基于人脸识别的视频推荐装置的结构示意图。
具体实施方式
为使本发明部分实施例的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明部分实施例进一步详细说明。
根据智能电视的使用现状，每个家庭成员登录账户后只能被推荐所有家庭成员感兴趣的视频文件，并进行观看，无法被推荐只针对该家庭成员观看特点的视频文件。为了解决这一问题，本发明部分实施例从用户角度，体会到用户希望能够被推荐只针对自己感兴趣的视频文件。因此，本发明部分实施例的思路是在智能电视上，建立人脸识别、视频文件以及个性化推荐之间的互联互通。
参阅图1所示，为本发明实施例中基于人脸识别的视频推荐方法的流程示意图，所述基于人脸识别的视频推荐方法包括：
步骤101，启动人脸检测进程，获取人脸数据。
在本实施例中，当获取用户登录智能电视账户的指令之后，可以启动人脸检测进程。或者，也可以当收到用户登录智能电视账户后点击视频文件的触发指令，再启动人脸检测进程。
其中，登录智能电视账户是指，智能电视设置了家庭为单位的账户。用户首先可以通过家庭账户的验证登录到该账户中，然后再通过启动人脸检测进程，对登录该家庭账户上的不同用户进行识别。从而，可以对共用一个家 庭账户的多个用户进行识别。
在本实施例中，将人脸检测进程设置为常驻系统，默认为一直运行的后台进程。
步骤102，根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息。
在实施例中，所述的人脸用户表中存储有每个用户的脸部数据和身份信息的对应关系。其中，所述的身份信息可以包括用户名、密码、性别、年龄等等内容。
需要说明的是，在预先设置的人脸用户表中获取该用户的身份信息之前，可以根据所述人脸数据，判断在预先设置的人脸用户表中是否存在该用户的身份信息。如果存在则获取该身份信息，否则在人脸用户表中建立该人脸数据对应的用户身份信息。例如，可以弹出浮层让用户自行设置身份信息，将设置的身份信息与所述的人脸数据进行对应并存储到所述的人脸用户表中。较佳地，将更新后的人脸用户表上传至服务器。
在本实施例中，每个家庭账户对应一个人脸用户表，在该人脸用户表中存储有通过该家庭账户登录后的每个用户的脸部数据和身份信息的对应关系。或者，在所述的人脸用户表中存储有所有用户的脸部数据和身份信息的对应关系，其中包括通过同一个家庭账户登录后进行人脸检测的用户的脸部数据和身份信息的对应关系，也包括通过不同家庭账户登录后进行人脸检测的用户的脸部数据和身份信息的对应关系。
在本实施例中，当所述的人脸用户表中存储有所有用户的脸部数据和身份信息的对应关系时，可以在所述人脸用户表中还存储有家庭账户标识。也就是说，在每个用户的脸部数据和身份信息的对应关系中还设置了一个家庭账户标识，共用一个家庭账户登录的多个用户的家庭账户标识相同。
与此同时，所述的人脸用户表可以在本地进行存储，也可以不在本地存储。但无论是否在本地存储，在服务器端都要存储有所述的人脸用户表。较佳地，如果在本地没有存储所述人脸用户表，则可以以当前本地的MAC地址为参数，通过网络向服务器发送请求，获得当前存储在服务器上的人脸用户表。
步骤103，将获取的身份信息上传至服务器。
作为实施例，可以将人脸用户表中与获得的脸部数据相对应的身份信 息，上传至服务器。
步骤104，从所述服务器接收根据该用户的观看记录推荐的视频文件。
在本实施例中，该用户的观看记录通过在进行视频文件播放的过程中，监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值，则将该视频文件标记为有效观看记录。优选地，预设的阈值为视频总时间长度的四分之三。其中，所述播放的时间长度是指视频文件已播放部分的总时间。另外，该视频文件的播放时间长度没有达到视频总时间长度的原因，可能是用户换台或关机等等情况。
然后启动人脸检测进程，获取人脸数据。根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息。最后，将获取的身份信息和该有效观看记录上传至服务器。
在本实施例中，在进行视频文件播放的过程中，需要判断播放的视频文件是否为广告视频文件。如果是广告视频文件，则不进行监测视频文件播放的时间长度，否则进行监测视频文件播放的时间长度。从而，在监测视频文件播放的时间长度之前，便可以排除广告视频文件，使得能够精准的标记有效观看记录，同时最大程度地提高监测效率。
在本实施例中，当监测到播放的时间长度达到预设的阈值时，判断在该播放的时间长度内是否存在广告视频文件的播放。如果存在广告视频文件的播放，则需要将该播放的时间长度减去该广告视频文件的播放时间长度。然后，判断减去后的时间长度是否达到预设的阈值，若是则将该视频文件标记为有效观看记录，否则继续监测视频文件播放的时间长度。如果不存在广告视频文件的播放，则将该视频文件标记为有效观看记录。从该实施例中可以看出，本发明部分实施例为了能够切实做到只有用户真正观看了的视频文件才能进行标记的效果，在监测的时间长度上需要减去一些不是该视频文件的播放内容，例如视频文件播放过程中的广告视频文件。
作为一个可参考的实施例，参阅图2所示，所述基于人脸识别的视频推荐方法具体可采用如下步骤：
步骤201，获取用户登录智能电视账户的指令，或者收到用户登录智能电视账户后点击视频文件的触发指令。
步骤202，启动人脸检测进程，获取人脸数据。
步骤203，根据所述人脸数据，判断在预先设置的人脸用户表中是否存在与该人脸数据相对应的身份信息。若存在则进行步骤205，否则进行步骤204。
步骤204，根据该人脸数据，建立该用户的身份信息，然后返回步骤201。
步骤205，在预先设置的人脸用户表中获取该用户的身份信息，然后进行步骤206。
步骤206，将获取的身份信息上传至服务器。
步骤207，从所述服务器接收根据该用户的观看记录推荐的视频文件。
还值得说明的是，用户的观看记录可以通过如下可参考的实施过程获得，包括：
步骤一：在进行视频文件播放的过程中，判断播放的视频文件是否为广告视频文件，若是则执行步骤二，否则进行步骤三。
步骤二：不进行监测视频文件播放的时间长度，并退出该流程。
步骤三：进行监测视频文件播放的时间长度，并进行步骤四。
步骤四：如果监测到播放的时间长度达到预设的阈值，判断在该播放的时间长度内是否存在广告视频文件的播放，若存在则执行步骤五，否则进行步骤七。
步骤五：将该播放的时间长度减去该广告视频文件的播放时间长度，执行步骤六。
步骤六：判断减去后的时间长度是否达到预设的阈值，若是则进行步骤七，否则返回步骤三。
步骤七：该视频文件标记为有效观看记录，进行步骤八。
步骤八：启动人脸检测进程，获取人脸数据。
步骤九：根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息。
步骤十：将获取的身份信息和该有效观看记录上传至服务器。
在本发明部分实施例还提供了一种基于人脸识别的视频推荐装置，如图3所示，所述的基于人脸识别的视频推荐装置包括依次连接的人脸数据获取单元301、身份信息获取单元302以及视频文件推荐单元303。其中，人脸数 据获取单元301用于启动人脸检测进程，获取人脸数据。身份信息获取单元302用于根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息。其中，在所述的人脸用户表中存储有每个用户的脸部数据和身份信息的对应关系。视频文件推荐单元303用于将获取的身份信息上传至服务器，并从所述服务器接收根据该用户的观看记录推荐的视频文件。
在本实施例中，所述人脸数据获取单元301启动人脸检测进程之前，获取用户登录智能电视账户的指令，或者收到用户登录智能电视账户后点击视频文件的触发指令。
在本实施例中，每个家庭账户对应一个人脸用户表，在该人脸用户表中存储有通过该家庭账户登录后的每个用户的脸部数据和身份信息的对应关系。或者，在所述的人脸用户表中存储有所有用户的脸部数据和身份信息的对应关系，其中包括通过同一个家庭账户登录后进行人脸检测的用户的脸部数据和身份信息的对应关系，也包括通过不同家庭账户登录后进行人脸检测的用户的脸部数据和身份信息的对应关系。
与此同时，所述的人脸用户表可以在本地进行存储，也可以不在本地存储。但无论是否在本地存储，在服务器端都要存储有所述的人脸用户表。较佳地，如果在本地没有存储所述人脸用户表，则可以以当前本地的MAC地址为参数，通过网络向服务器发送请求，获得当前存储在服务器上的人脸用户表。
作为本发明中基于人脸识别的视频推荐装置一个可参考的实施例，如图4所示，还包括与视频文件推荐单元303连接的观看记录上传单元304。观看记录上传单元304在进行视频文件播放的过程中，监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值，则将该视频文件标记为有效观看记录。优选地，预设的阈值为视频总时间长度的四分之三。
然后启动人脸检测进程，获取人脸数据。根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息。最后，将获取的身份信息和该有效观看记录上传至服务器。
在本实施例中，观看记录上传单元304在进行视频文件播放的过程中，需要判断播放的视频文件是否为广告视频文件。如果是广告视频文件，则不进行监测视频文件播放的时间长度，否则进行监测视频文件播放的时间长度。从而，在监测视频文件播放的时间长度之前，便可以排出广告视频文 件，使得能够精准的标记有效观看记录，同时最大程度地提高监测效率。
在本实施例中，观看记录上传单元304当监测到播放的时间长度达到预设的阈值时，判断在该播放的时间长度内是否存在广告视频文件的播放。如果存在广告视频文件的播放，则需要将该播放的时间长度减去该广告视频文件的播放时间长度。然后，判断减去后的时间长度是否达到预设的阈值，若是则将该视频文件标记为有效观看记录，否则继续监测视频文件播放的时间长度。如果不存在广告视频文件的播放，则将该视频文件标记为有效观看记录。
需要说明的是，在本发明部分实施例所述的基于人脸识别的视频推荐装置的具体实施内容，在上面所述的基于人脸识别的视频推荐的方法中已经详细说明了，故在此重复内容不再说明。
综上所述，本发明部分实施例提供的基于人脸识别的视频推荐方法、装置，创造性地解决了智能电视视频推荐服务的单一性，实现了推荐服务的多样性；能够以每个观看视频的用户为基础单位，推荐感兴趣的视频；最后，整个所述的基于人脸识别的视频推荐方法和装置紧凑，易于实现。
所属领域的普通技术人员应当理解：以上所述仅为本发明的具体实施例而已，并不用于限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

  1. 一种基于人脸识别的视频推荐方法，包括步骤：
    启动人脸检测进程，获取人脸数据；
    根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息；其中，在所述的人脸用户表中存储有每个用户的脸部数据和身份信息的对应关系；
    将获取的身份信息上传至服务器，并从所述服务器接收根据该用户的观看记录推荐的视频文件。
  2. 根据权利要求1所述的方法，其中，所述该用户的观看记录通过如下步骤得到：
    在进行视频文件播放的过程中，监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值，则将该视频文件标记为有效观看记录；
    启动人脸检测进程，获取人脸数据；
    根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息；
    将获取的身份信息和该有效观看记录上传至服务器。
  3. 根据权利要求2所述的方法，其中，所述在进行视频文件播放的过程中，判断播放的视频文件是否为广告视频文件；
    根据判断结果，若是广告视频文件，则不进行监测视频文件播放的时间长度；若不是广告视频文件，则进行监测视频文件播放的时间长度。
  4. 根据权利要求2或3所述的方法，其中，所述监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值；
    判断在该播放的时间长度内是否存在广告视频文件的播放；
    如果存在广告视频文件的播放，则将该播放的时间长度减去该广告视频文件的播放时间长度，判断减去后的时间长度是否达到预设的阈值，若是则将该视频文件标记为有效观看记录，否则继续监测视频文件播放的时间长度；
    如果不存在广告视频文件的播放，则将该视频文件标记为有效观看记录。
  5. 根据权利要求1至4任一项所述的方法，其中，所述启动人脸检测进程之前，获取用户登录智能电视账户的指令，或者收到用户登录智能电视账户后点击视频文件的触发指令。
  6. 一种基于人脸识别的视频推荐装置，包括：
    人脸数据获取单元，用于启动人脸检测进程，获取人脸数据；
    身份信息获取单元，用于根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息；其中，在所述的人脸用户表中存储有每个用户的脸部数据和身份信息的对应关系；
    视频文件推荐单元，用于将获取的身份信息上传至服务器，并从所述服务器接收根据该用户的观看记录推荐的视频文件。
  7. 根据权利要求6所述的装置，其中，还包括观看记录上传单元，用于：
    在进行视频文件播放的过程中，监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值，则将该视频文件标记为有效观看记录；
    启动人脸检测进程，获取人脸数据；
    根据所述人脸数据，在预先设置的人脸用户表中获取该用户的身份信息；
    将获取的身份信息和该有效观看记录上传至服务器。
  8. 根据权利要求7所述的装置，其中，所述观看记录上传单元还用于：
    在进行视频文件播放的过程中，判断播放的视频文件是否为广告视频文件；
    根据判断结果，若是广告视频文件，则不进行监测视频文件播放的时间长度；若不是广告视频文件，则进行监测视频文件播放的时间长度。
  9. 根据权利要求7或8所述的装置，其中，所述观看记录上传单元还用于：
    监测视频文件播放的时间长度，如果监测到播放的时间长度达到预设的阈值；
    判断在该播放的时间长度内是否存在广告视频文件的播放；
    如果存在广告视频文件的播放，则将该播放的时间长度减去该广告视频文件的播放时间长度，判断减去后的时间长度是否达到预设的阈值，若是则 将该视频文件标记为有效观看记录，否则继续监测视频文件播放的时间长度；
    如果不存在广告视频文件的播放，则将该视频文件标记为有效观看记录。
  10. 根据权利要求6至9任一项所述的装置，其中，所述人脸数据获取单元启动人脸检测进程之前，获取用户登录智能电视账户的指令，或者收到用户登录智能电视账户后点击视频文件的触发指令。
PCT/CN2016/089580 2015-12-29 2016-07-10 一种基于人脸识别的视频推荐方法和装置 Ceased WO2017113740A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/240,195 US20170188103A1 (en) 2015-12-29 2016-08-18 Method and device for video recommendation based on face recognition

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201511014705.XA CN105868259A (zh) 2015-12-29 2015-12-29 一种基于人脸识别的视频推荐方法和装置
CN201511014705.X 2015-12-29

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/240,195 Continuation US20170188103A1 (en) 2015-12-29 2016-08-18 Method and device for video recommendation based on face recognition

Publications (1)

Publication Number Publication Date
WO2017113740A1 true WO2017113740A1 (zh) 2017-07-06

Family

ID=56624537

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/089580 Ceased WO2017113740A1 (zh) 2015-12-29 2016-07-10 一种基于人脸识别的视频推荐方法和装置

Country Status (2)

Country Link
CN (1) CN105868259A (zh)
WO (1) WO2017113740A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109274983A (zh) * 2018-12-06 2019-01-25 广州酷狗计算机科技有限公司 进行直播的方法和装置
CN110264299A (zh) * 2019-05-07 2019-09-20 平安科技（深圳）有限公司 基于人脸识别的服装推荐方法、装置及计算机设备
CN111615003A (zh) * 2020-05-29 2020-09-01 腾讯科技（深圳）有限公司 一种视频播放控制方法、装置、设备及存储介质
CN111722537A (zh) * 2020-06-22 2020-09-29 合肥优恩物联网科技有限公司 一种基于自主人脸识别的智慧交互系统及方法
CN112565871A (zh) * 2020-11-06 2021-03-26 深圳市易平方网络科技有限公司 一种视频预加载方法、智能终端及存储介质
CN114401425A (zh) * 2022-02-08 2022-04-26 湖南快乐阳光互动娱乐传媒有限公司 一种视频播放方法及装置
CN114501075A (zh) * 2020-11-11 2022-05-13 深圳Tcl新技术有限公司 一种节目推荐方法、智能电视及计算机可读存储介质

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106339469A (zh) * 2016-08-29 2017-01-18 乐视控股（北京）有限公司 数据推荐方法及装置
CN108347651A (zh) * 2017-01-24 2018-07-31 北京康得新创科技股份有限公司 推送信息的播放方法、装置及系统
CN109754653B (zh) * 2017-11-06 2021-11-09 北京小红果文化科技有限公司 一种个性化教学的方法及系统
CN107948700A (zh) * 2017-11-23 2018-04-20 深圳Tcl数字技术有限公司 节目推荐方法、系统及计算机可读存储介质
CN108271069A (zh) * 2017-12-11 2018-07-10 北京奇艺世纪科技有限公司 一种视频节目的片段过滤方法和装置
CN108197995A (zh) * 2018-01-10 2018-06-22 北京掌阔移动传媒科技有限公司 一种基于人脸识别的精准广告投放方法
CN108833949A (zh) * 2018-06-25 2018-11-16 深圳市华慧品牌管理有限公司 用于儿童陪伴机器人的视频推荐方法和装置
CN109063143A (zh) * 2018-08-07 2018-12-21 北京奇艺世纪科技有限公司 一种信息推荐方法及装置
CN109271897B (zh) * 2018-08-31 2023-10-24 平安科技（深圳）有限公司 人脸动作单元检测方法、装置、计算机设备及存储介质
CN109121007B (zh) * 2018-09-18 2020-11-03 深圳市酷开网络科技有限公司 基于多人脸识别的影视内容推荐方法、智能电视及系统
CN109756562B (zh) * 2018-12-17 2022-05-10 泰康保险集团股份有限公司 用户界面推送方法、装置、电子设备及存储介质
CN110472077A (zh) * 2019-07-12 2019-11-19 浙江执御信息技术有限公司 人像识别前置校验方法、系统、介质及电子设备
CN113127681A (zh) * 2019-12-30 2021-07-16 深圳Tcl数字技术有限公司 一种基于人脸识别的视频推荐方法及装置、电视
CN111460434A (zh) * 2020-03-24 2020-07-28 北京大米未来科技有限公司 一种登录认证方法、装置、存储介质及电子设备
CN112752153B (zh) * 2020-04-30 2024-09-10 深圳市雅阅科技有限公司 一种对视频的播放处理方法及智能设备、存储介质
CN112399208A (zh) * 2020-11-06 2021-02-23 深圳创维－Rgb电子有限公司 显示设备的控制方法、显示设备及存储介质
CN114513686B (zh) * 2020-11-17 2024-04-16 北京达佳互联信息技术有限公司 视频信息的确定方法、装置以及存储介质
CN112822550A (zh) * 2021-01-12 2021-05-18 深圳创维－Rgb电子有限公司 一种电视终端调节方法、装置及电视终端

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103226774A (zh) * 2013-04-25 2013-07-31 中国科学技术大学 一种信息交互系统
CN103618918A (zh) * 2013-11-27 2014-03-05 青岛海信电器股份有限公司 一种智能电视的显示控制方法及装置
WO2014152088A2 (en) * 2013-03-15 2014-09-25 Microsoft Corporation Simplified collaborative searching through pattern recognition
CN104363474A (zh) * 2014-11-14 2015-02-18 四川长虹电器股份有限公司 一种基于多用户的智能电视节目推荐系统及方法
CN104408210A (zh) * 2014-12-31 2015-03-11 合一网络技术(北京)有限公司 基于意见领袖的视频推荐方法
CN105263052A (zh) * 2015-10-13 2016-01-20 微鲸科技有限公司 基于人脸识别技术的音视频推送方法及系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110145040A1 (en) * 2009-12-16 2011-06-16 Microsoft Corporation Content recommendation
CN102263999B (zh) * 2011-08-03 2014-07-16 Tcl集团股份有限公司 基于人脸识别对电视节目自动分类的方法及其系统
CN102340686B (zh) * 2011-10-11 2013-10-09 杨海 一种检测在线视频观看者专注度的方法及装置
CN103546778A (zh) * 2013-07-17 2014-01-29 Tcl集团股份有限公司 一种电视节目推荐方法、系统及其实现方法
CN104836783B (zh) * 2014-06-04 2018-10-30 腾讯科技（北京）有限公司 数据传输的方法、装置及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014152088A2 (en) * 2013-03-15 2014-09-25 Microsoft Corporation Simplified collaborative searching through pattern recognition
CN103226774A (zh) * 2013-04-25 2013-07-31 中国科学技术大学 一种信息交互系统
CN103618918A (zh) * 2013-11-27 2014-03-05 青岛海信电器股份有限公司 一种智能电视的显示控制方法及装置
CN104363474A (zh) * 2014-11-14 2015-02-18 四川长虹电器股份有限公司 一种基于多用户的智能电视节目推荐系统及方法
CN104408210A (zh) * 2014-12-31 2015-03-11 合一网络技术(北京)有限公司 基于意见领袖的视频推荐方法
CN105263052A (zh) * 2015-10-13 2016-01-20 微鲸科技有限公司 基于人脸识别技术的音视频推送方法及系统

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109274983A (zh) * 2018-12-06 2019-01-25 广州酷狗计算机科技有限公司 进行直播的方法和装置
CN110264299A (zh) * 2019-05-07 2019-09-20 平安科技（深圳）有限公司 基于人脸识别的服装推荐方法、装置及计算机设备
CN111615003A (zh) * 2020-05-29 2020-09-01 腾讯科技（深圳）有限公司 一种视频播放控制方法、装置、设备及存储介质
CN111615003B (zh) * 2020-05-29 2023-11-03 腾讯科技（深圳）有限公司 一种视频播放控制方法、装置、设备及存储介质
CN111722537A (zh) * 2020-06-22 2020-09-29 合肥优恩物联网科技有限公司 一种基于自主人脸识别的智慧交互系统及方法
CN111722537B (zh) * 2020-06-22 2023-08-22 合肥优恩物联网科技有限公司 一种基于自主人脸识别的智慧交互系统及方法
CN112565871A (zh) * 2020-11-06 2021-03-26 深圳市易平方网络科技有限公司 一种视频预加载方法、智能终端及存储介质
CN114501075A (zh) * 2020-11-11 2022-05-13 深圳Tcl新技术有限公司 一种节目推荐方法、智能电视及计算机可读存储介质
CN114401425A (zh) * 2022-02-08 2022-04-26 湖南快乐阳光互动娱乐传媒有限公司 一种视频播放方法及装置

Also Published As

Publication number Publication date
CN105868259A (zh) 2016-08-17

Similar Documents

Publication Publication Date Title
WO2017113740A1 (zh) 一种基于人脸识别的视频推荐方法和装置
US20170188103A1 (en) Method and device for video recommendation based on face recognition
WO2017113741A1 (zh) 一种基于人脸识别的广告推荐方法和装置
US11252479B2 (en) Methods, systems, and media for recommending media content based on attribute grouped viewing sessions
US12284409B2 (en) Systems and methods for seamlessly connecting devices based on relationships between the users of the respective devices
US20180152736A1 (en) Live video recording, streaming, viewing, and storing mobile application, and systems and methods of use thereof
US20170186043A1 (en) Advertisement recommendation method and based on face recogntion and recognition and electronic device
US10412434B1 (en) Systems and methods for seamlessly connecting to a user's device to share and display a relevant media asset
US20130346867A1 (en) Systems and methods for automatically generating a media asset segment based on verbal input
US11449136B2 (en) Methods, and devices for generating a user experience based on the stored user information
US20130332521A1 (en) Systems and methods for compiling media information based on privacy and reliability metrics
US10405044B1 (en) Content notification system and method
US12307936B2 (en) Methods, systems, and media for detecting a presentation of media content on a display device
CN106303699A (zh) 用于播放电视节目的方法和装置
WO2017161744A1 (zh) 一种视频推荐方法及装置
CN105979363A (zh) 一种身份识别法和装置
US20240388771A1 (en) Systems and methods for discovery of, identification of, and ongoing monitoring of viral media assets
US11212579B2 (en) Presence and authentication for media measurement
US9396192B2 (en) Systems and methods for associating tags with media assets based on verbal input
TW201540062A (zh) 用於社群使用者量化之方法、裝置及使用者介面
CN105164721A (zh) 用于识别社交媒体影响力的系统和方法
CN105743848A (zh) 一种多媒体内容选择性传送方法、装置及遥控设备
KR20150085868A (ko) 사용자 연령 인지를 통한 인터넷 서비스 제공 방법 및 이를 이용한 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16880538

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16880538

Country of ref document: EP

Kind code of ref document: A1