CN114157914A - 多媒体播放方法、装置、存储介质及电子设备 - Google Patents

多媒体播放方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN114157914A
CN114157914A CN202111445716.9A CN202111445716A CN114157914A CN 114157914 A CN114157914 A CN 114157914A CN 202111445716 A CN202111445716 A CN 202111445716A CN 114157914 A CN114157914 A CN 114157914A
Authority
CN
China
Prior art keywords
target
multimedia content
playing
behavior
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111445716.9A
Other languages
English (en)
Inventor
刘晓忠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TCL Digital Technology Co Ltd
Original Assignee
Shenzhen TCL Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TCL Digital Technology Co Ltd filed Critical Shenzhen TCL Digital Technology Co Ltd
Priority to CN202111445716.9A priority Critical patent/CN114157914A/zh
Publication of CN114157914A publication Critical patent/CN114157914A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Biomedical Technology (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种多媒体播放方法、装置、存储介质及电子设备，涉及互联网技术领域，该方法包括：采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征数据生成对象标识；在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；当所述对象行为符合目标条件时，确定所述多媒体内容的目标播放时刻；将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。本申请可以有效提升多媒体内容的播放效果。

Description

多媒体播放方法、装置、存储介质及电子设备
技术领域
本申请涉及互联网技术领域，具体涉及一种多媒体播放方法、装置、存储介质及电子设备。
背景技术
随着技术的发展，视频等多媒体的播放体验要求越来越高，以智能电视中播放视频节目为例，不同的对象操作电视播放视频节目时，往往会产生不同的播放记录，通常对象会具有根据播放记录进行视频节目回放的需求。
但是，目前多媒体的播放记录往往和观看的对象不能有效关联，且更不能够进行高播放体验的关联，导致多媒体的播放效果较差，用户播放体验较差。
发明内容
本申请实施例提供一种方案，可以有效提升多媒体的播放效果。
本申请实施例提供以下技术方案：
根据本申请的一个实施例，一种多媒体播放方法，其包括：采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻；将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
在本申请的一些实施例中，所述对象特征信息包括对象声音信息；所述采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识，包括：采集观看多媒体内容的目标对象的对象声音信息；基于所述对象声音信息进行声纹采集处理，得到所述对象声音信息对应的声纹数据；基于所述声纹数据进行识别处理，得到声纹识别结果，并基于声纹识别结果生成所述对象标识。
在本申请的一些实施例中，所述对象行为包括是否脱离观看所述多媒体内容；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：在所述多媒体内容的播放过程中，检测所述目标对象的是否观看所述多媒体内容；所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：当所述目标对象脱离观看所述多媒体内容预定时长时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述对象行为包括对象情绪；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪；所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：当所述对象情绪符合特定情绪状态时，确定所述多媒体内容的播放时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述对象行为包括是否脱离观看所述多媒体内容以及对象情绪；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪，并检测所述目标对象的是否观看所述多媒体内容；所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：当所述目标对象脱离观看所述多媒体内容预定时长，且脱离观看所述多媒体内容时的对象情绪符合特定情绪状态时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述将所述目标播放时刻及所述对象标识联合记录至目标记录中，包括：查询所述对象标识及所述多媒体内容的媒体标识对应的目标记录；当查询到所述目标记录时，将所述目标播放时刻更新至所述目标记录中；当没有查询到所述目标记录时，根据所述目标播放时刻、所述对象标识及所述媒体标识生成所述目标记录。
在本申请的一些实施例中，所述根据所述目标记录针对所述目标对象回放所述多媒体内容，包括：对目标播放场景下采集到的所述对象特征信息进行信息提取处理，得到对象特征数据；基于所述对象特征数据确定对象标识，并根据确定的所述对象标识查询到所述目标记录；根据所述目标记录中的所述目标播放时刻回放所述多媒体内容。
根据本申请的一个实施例，一种多媒体播放装置，所述装置包括：采集模块，用于采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；检测模块，用于在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；确定模块，用于当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻；记录模块，用于将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
根据本申请的另一实施例，一种存储介质，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行本申请实施例所述的方法。
根据本申请的另一实施例，一种电子设备可以包括：存储器，存储有计算机程序；处理器，读取存储器存储的计算机程序，以执行本申请实施例所述的方法。
本申请实施例中，采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻；将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
以这种方式，目标记录通过对象标识与目标对象有效关联，且目标记录中记录对象行为符合目标条件时根据对象行为确定的目标播放时刻，使得目标记录与目标对象可以进行高播放体验的关联，根据目标记录针对目标对象可以高播放体验地回放多媒体内容，进而有效提升多媒体的播放效果，提升用户播放体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了可以应用本申请实施例的系统的示意图。
图2示出了根据本申请的一个实施例的多媒体播放方法的流程图。
图3示出了根据本申请的一个实施例的多媒体播放装置的框图。
图4示出了根据本申请的一个实施例的电子设备的框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
在以下的说明中，本申请的具体实施例将参考由一部或多部计算机所执行的步骤及符号来说明，除非另有述明。因此，这些步骤及操作将有数次提到由计算机执行，本文所指的计算机执行包括了由代表了以一结构化型式中的数据的电子信号的计算机处理单元的操作。此操作转换该数据或将其维持在该计算机的内存系统中的位置处，其可重新配置或另外以本领域技术人员所熟知的方式来改变该计算机的运作。该数据所维持的数据结构为该内存的实体位置，其具有由该数据格式所定义的特定特性。但是，本申请原理以上述文字来说明，其并不代表为一种限制，本领域技术人员将可了解到以下所述的多种步骤及操作亦可实施在硬件当中。
图1示出了可以一种可以应用本申请实施例的系统100的示意图。如图1所示，系统100可以包括云端服务器101和/或本地终端102。本地终端102可以是任意的计算机设备，例如电脑、手机、智能手表以及家电设备(如智能电视)等。云端服务器101可以是提供云服务的服务器。
本示例的一种实施方式中，本地终端102可以：采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；当所述对象行为符合目标条件时，确定所述多媒体内容的目标播放时刻；将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
进一步的，一些实施例中，本地终端102可以将目标记录上传至云端服务器101中进行保存，在本地终端102或者其他终端上可以基于目标记录，根据采集到的该目标对象的对象特征信息确定其对象标识，根据对象标识从目标记录中查找所述多媒体内容的目标播放时刻进行回放。
图2示意性示出了根据本申请的一个实施例的多媒体播放方法的流程图。该多媒体播放方法的执行主体可以是任意的设备，例如图1所示的本地终端102。
如图2所示，该多媒体播放方法可以包括步骤S210至步骤S240。
步骤S210，采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；步骤S220，在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；步骤S230，当所述对象行为符合目标条件时，确定所述多媒体内容的目标播放时刻；步骤S240，将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
多媒体内容例如电视节目或者文章内容等。对象特征信息例如声音信息或脸部图像信息等对象的特征信息。通过摄像头或录音设备等采集单元可以在目标对象观看多媒体内容时(如启动播放时或播放后特定时长时等)，通过约定的合法协议主动采集(即默认模式下自动采集)或被动采集(即对象自己触发采集进程后采集)目标对象的对象特征信息。
对象标识即可以唯一标识目标对象的标识，对象特征信息是可以唯一表征目标对象的信息，进而可以基于对象特征信息生成目标对象的唯一对象标识。
在目标对象观看的多媒体内容的播放过程中，可以在约定的合法协议模式下通过语音识别或脸部识别等检测目标对象的对象行为，对象行为如是否脱离观看多媒体内容以及对象情绪等行为。
在检测到对象行为符合目标条件时，根据对象行为确定多媒体内容的目标播放时刻，进而该目标播放时刻与对象行为高度关联。
最后，将目标播放时刻及对象标识联合记录至目标记录中，便可以在目标对象需要回放多媒体内容的时候，根据目标记录针对目标对象回放多媒体内容。
以这种方式，基于步骤S210至步骤S240，目标记录通过对象标识与目标对象有效关联，且目标记录中记录对象行为符合目标条件时根据对象行为确定的目标播放时刻，使得目标记录与目标对象可以进行高播放体验的关联，根据目标记录针对目标对象可以高播放体验地回放多媒体内容，进而有效提升多媒体的播放效果，提升用户播放体验。
下面描述进行多媒体播放时，所进行的各步骤的具体过程。
步骤S210中，采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识。
多媒体内容例如电视节目或者文章内容等。对象特征信息例如声音信息或脸部图像信息等对象的特征信息。通过摄像头或录音设备等采集单元可以在目标对象观看多媒体内容时(如启动播放时或播放后特定时长时等)，通过约定的合法协议主动采集(即默认模式下自动采集)或被动采集(即对象自己触发采集进程后采集)目标对象的对象特征信息。
对象标识即可以唯一标识目标对象的标识，对象特征信息是可以唯一表征目标对象的信息，进而可以基于对象特征信息生成目标对象的唯一对象标识。
一种实施例中，所述对象特征信息包括对象声音信息；步骤S210中，采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识，包括：采集观看多媒体内容的目标对象的对象声音信息；基于所述对象声音信息进行声纹采集处理，得到所述对象声音信息对应的声纹数据；基于所述声纹数据进行识别处理，得到声纹识别结果，并基于声纹识别结果生成所述对象标识。
采集到目标对象的声纹数据后，基于声纹数据可以进行声纹识别处理可以得到声纹识别结果，如通过将声纹数据与声纹库中的预设声纹数据进行相似度匹配处理进行声纹识别，得到声纹识别结果。
声纹识别结果可以包括目标对象的身份信息等唯一标识信息，如声纹数据匹配的预设声纹数据对应的唯一标识信息，此时，基于声纹识别结果生成对象标识时，可以将该唯一标识信息作为对象标识。
声纹识别结果可以包括未识别，如声纹库中没有采集的声纹数据匹配的预设声纹数据，此时，基于声纹识别结果生成对象标识时，可以构建唯一标识信息，如启动信息注册处理来收集目标对象的身份信息等作为唯一标识信息或者按照特定策略生成一个唯一标识信息，可以将该声纹数据与构建的唯一标识信息关联保存在声纹库中，以及可以将该构建的唯一标识信息作为对象标识。
以这种采集对象声音信息获取对象标识的方式，可以使得目标对象基于语音控制播放多媒体内容的回放，通过语音采集声纹数据，利用声纹库进行声纹识别确定对象标识后匹配目标记录来进行回放。
一种实施例中，所述对象特征信息包括对象脸部信息；步骤S210中，采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识，包括：采集观看多媒体内容的目标对象的对象脸部信息；基于所述对象脸部信息进行脸部特征采集处理，得到所对象脸部信息对应的脸部特征数据；基于所述脸部特征数据进行识别处理，得到脸部识别结果，并基于脸部识别结果生成所述对象标识。
采集到目标对象的脸部特征数据后，基于脸部特征数据可以进行脸部识别处理可以得到脸部识别结果，如通过将脸部特征数据与脸部识别库中的预设脸部特征数据进行相似度匹配处理进行脸部识别，得到脸部识别结果。
脸部识别结果可以包括目标对象的身份信息等唯一标识信息，如脸部数据匹配的预设脸部数据对应的唯一标识信息，此时，基于脸部识别结果生成对象标识时，可以将该唯一标识信息作为对象标识。
脸部识别结果可以包括未识别，如脸部识别库中没有采集的脸部数据匹配的预设脸部数据，此时，基于脸部识别结果生成对象标识时，可以构建唯一标识信息，如启动信息注册处理来收集目标对象的身份信息等作为唯一标识信息或者按照特定策略生成一个唯一标识信息，可以将该脸部数据与构建的唯一标识信息关联保存在脸部识别库中，以及可以将该构建的唯一标识信息作为对象标识。
以这种采集对象脸部信息获取对象标识的方式，目标对象控制播放多媒体内容时，可以利用脸部识别库进行脸部识别确定对象标识后匹配目标记录来进行回放。
步骤S220中，在所述多媒体内容的播放过程中，检测所述目标对象的对象行为。
在目标对象观看的多媒体内容的播放过程中，可以在约定的合法协议模式下通过语音识别或脸部识别等检测目标对象的对象行为，对象行为如是否脱离观看多媒体内容以及对象情绪等行为。
例如，可以基于脸部识别来基于目标对象的实时微表情等特征检测目标对象的实时情绪，或者通过语音识别提取关键词，基于关键词进行情绪确定等。例如，通过实时对象脸部识别检测目标对象是否脱离观看多媒体的播放。
步骤S230中，当所述对象行为符合目标条件时，确定所述多媒体内容的目标播放时刻。
在检测到对象行为符合目标条件时，根据对象行为确定多媒体内容的目标播放时刻，进而该目标播放时刻与对象行为高度关联。
一种实施例中，所述对象行为包括是否脱离观看所述多媒体内容；步骤S220，在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：
在所述多媒体内容的播放过程中，检测所述目标对象的是否观看所述多媒体内容；步骤S230，当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：当所述目标对象脱离观看所述多媒体内容预定时长时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
以这种方式可以在目标对象脱离观看多媒体内容预定时长时，将脱离观看多媒体内容的时刻点作为目标播放时刻，将该目标播放时刻记录时，可以根据回放需求在目标播放时刻进行回放，实现断点续看。
一种实施例中，所述对象行为包括对象情绪；步骤S220，在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪；步骤S230，当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：当所述对象情绪符合特定情绪状态时，确定所述多媒体内容的播放时刻点作为所述目标播放时刻。
以这种方式，可以在对象情绪符合特定情绪状态(如高兴等级为第一等级或悲伤等级为第一等级等)时，确定符合特定情绪状态时的多媒体内容的播放时刻点作为目标播放时刻，将该目标播放时刻记录时，根据回放需求可以在目标播放时刻可以进行回放，可以实现高光情绪时刻的回味播放。
一种实施例中，所述对象行为包括是否脱离观看所述多媒体内容以及对象情绪；步骤S220，在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪，并检测所述目标对象的是否观看所述多媒体内容；步骤S230，当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：当所述目标对象脱离观看所述多媒体内容预定时长，且脱离观看所述多媒体内容时的对象情绪符合特定情绪状态时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
以这种方式，可以在目标对象脱离观看多媒体内容预定时长，且脱离观看时的对象情绪符合特定情绪状态(如高兴等级为第一等级或悲伤等级为第一等级等)时，脱离观看所述多媒体内容的时刻点作为目标播放时刻，将该目标播放时刻记录时，根据回放需求可以在目标播放时刻可以进行回放，可以实现高光情绪时刻的断点续看。
步骤S240中，将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
将目标播放时刻及对象标识联合记录至目标记录中，便可以在目标对象需要回放多媒体内容的时候，根据目标记录针对目标对象回放多媒体内容。
一种实施例中，步骤S240中，将所述目标播放时刻及所述对象标识联合记录至目标记录中，包括：查询所述对象标识及所述多媒体内容的媒体标识对应的目标记录；当查询到所述目标记录时，将所述目标播放时刻更新至所述目标记录中；当没有查询到所述目标记录时，根据所述目标播放时刻、所述对象标识及所述媒体标识生成所述目标记录。以这种方式可以准确实时更新目标记录。
一种实施例中，步骤S240中，根据所述目标记录针对所述目标对象回放所述多媒体内容，包括：对目标播放场景下采集到的所述对象特征信息进行信息提取处理，得到对象特征数据；基于所述对象特征数据确定对象标识，并根据确定的所述对象标识查询到所述目标记录；根据所述目标记录中的所述目标播放时刻回放所述多媒体内容。
目标播放场景例如用户触发多媒体内容的回放场景或者本地终端重启的场景等；对象特征信息如脸部图像信息或声音信息等，对象特征数据如脸部特征数据或声纹数据等。利用预设的声纹库或脸部识别库等可以对象特征数据进行识别，即基于对象特征数据确定对象标识。进而，可以准确地针对目标对象确定对应的目标记录，根据目标记录中的目标播放时刻回放多媒体内容。
为便于更好的实施本申请实施例提供的多媒体播放方法，本申请实施例还提供一种基于上述多媒体播放方法的多媒体播放装置。其中名词的含义与上述多媒体播放方法中相同，具体实现细节可以参考方法实施例中的说明。图3示出了根据本申请的一个实施例的多媒体播放装置的框图。
如图3所示，多媒体播放装置300中可以包括采集模块310、检测模块320、确定模块330以及记录模块340。
采集模块310可以用于采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；检测模块320可以用于在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；确定模块330可以用于当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻；记录模块340可以用于将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
在本申请的一些实施例中，所述采集模块310，包括：声音采集单元，用于采集观看多媒体内容的目标对象的对象声音信息；声纹提取单元，用于基于所述对象声音信息进行声纹采集处理，得到所述对象声音信息对应的声纹数据；识别处理单元，用于基于所述声纹数据进行识别处理，得到声纹识别结果，并基于声纹识别结果生成所述对象标识。
在本申请的一些实施例中，所述对象行为包括是否脱离观看所述多媒体内容；所述检测模块320，包括：第一检测单元，用于在所述多媒体内容的播放过程中，检测所述目标对象的是否观看所述多媒体内容；所述确定模块330，包括：第一确定单元，用于当所述目标对象脱离观看所述多媒体内容预定时长时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述对象行为包括对象情绪；所述检测模块320，包括：第二检测单元，用于在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪；所述确定模块330，包括：第二确定单元，用于当所述对象情绪符合特定情绪状态时，确定所述多媒体内容的播放时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述对象行为包括是否脱离观看所述多媒体内容以及对象情绪；所述检测模块320，包括：第三检测单元，用于在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪，并检测所述目标对象的是否观看所述多媒体内容；所述确定模块330，包括：第三确定单元，用于当所述目标对象脱离观看所述多媒体内容预定时长，且脱离观看所述多媒体内容时的对象情绪符合特定情绪状态时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述记录模块340，包括：查询单元，用于查询所述对象标识及所述多媒体内容的媒体标识对应的目标记录；更新单元，用于单元，用于当查询到所述目标记录时，将所述目标播放时刻更新至所述目标记录中；生成单元，用于当没有查询到所述目标记录时，根据所述目标播放时刻、所述对象标识及所述媒体标识生成所述目标记录。
在本申请的一些实施例中，所述记录模块340，包括：息提取处理单元，用于对目标播放场景下采集到的所述对象特征信息进行信息提取处理，得到对象特征数据；查询确定单元，用于基于所述对象特征数据确定对象标识，并根据确定的所述对象标识查询到所述目标记录；回放单元，用于根据所述目标记录中的所述目标播放时刻回放所述多媒体内容。
以这种方式，基于多媒体播放装置300，目标记录通过对象标识与目标对象有效关联，且目标记录中记录对象行为符合目标条件时根据对象行为确定的目标播放时刻，使得目标记录与目标对象可以进行高播放体验的关联，根据目标记录针对目标对象可以高播放体验地回放多媒体内容，进而有效提升多媒体的播放效果，提升用户播放体验。
应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本申请的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
此外，本申请实施例还提供一种电子设备，该电子设备可以为终端或者服务器，如图4所示，其示出了本申请实施例所涉及的电子设备的结构示意图，具体来讲：
该电子设备可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403和输入单元404等部件。本领域技术人员可以理解，图4中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
处理器401是该电子设备的控制中心，利用各种接口和线路连接整个计算机设备的各个部分，通过运行或执行存储在存储器402内的软件程序和/或模块，以及调用存储在存储器402内的数据，执行计算机设备的各种功能和处理数据，从而对电子设备进行整体监控。可选的，处理器401可包括一个或多个处理核心；优选的，处理器401可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户页面和应用程序等，调制解调处理器主要处理无线通讯。可以理解的是，上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及模块，处理器401通过运行存储在存储器402的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据计算机设备的使用所创建的数据等。此外，存储器402可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器402还可以包括存储器控制器，以提供处理器401对存储器402的访问。
电子设备还包括给各个部件供电的电源403，优选的，电源403可以通过电源管理系统与处理器401逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该电子设备还可包括输入单元404，该输入单元404可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出，电子设备还可以包括显示单元等，在此不再赘述。具体在本实施例中，电子设备中的处理器401会按照如下的指令，将一个或一个以上的计算机程序的进程对应的可执行文件加载到存储器402中，并由处理器401来运行存储在存储器402中的计算机程序，从而实现各种功能，如处理器401可以执行下述步骤：
采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻；将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
在本申请的一些实施例中，所述对象特征信息包括对象声音信息；所述采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识时，处理器401可以执行：采集观看多媒体内容的目标对象的对象声音信息；基于所述对象声音信息进行声纹采集处理，得到所述对象声音信息对应的声纹数据；基于所述声纹数据进行识别处理，得到声纹识别结果，并基于声纹识别结果生成所述对象标识。
在本申请的一些实施例中，所述对象行为包括是否脱离观看所述多媒体内容；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为时，处理器401可以执行：在所述多媒体内容的播放过程中，检测所述目标对象的是否观看所述多媒体内容；所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻时，处理器401可以执行：当所述目标对象脱离观看所述多媒体内容预定时长时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述对象行为包括对象情绪；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为时，处理器401可以执行：在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪；所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻时，处理器401可以执行：当所述对象情绪符合特定情绪状态时，确定所述多媒体内容的播放时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述对象行为包括是否脱离观看所述多媒体内容以及对象情绪；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为时，处理器401可以执行：在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪，并检测所述目标对象的是否观看所述多媒体内容；所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻时，处理器401可以执行：当所述目标对象脱离观看所述多媒体内容预定时长，且脱离观看所述多媒体内容时的对象情绪符合特定情绪状态时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
在本申请的一些实施例中，所述将所述目标播放时刻及所述对象标识联合记录至目标记录中时，处理器401可以执行：查询所述对象标识及所述多媒体内容的媒体标识对应的目标记录；当查询到所述目标记录时，将所述目标播放时刻更新至所述目标记录中；当没有查询到所述目标记录时，根据所述目标播放时刻、所述对象标识及所述媒体标识生成所述目标记录。
在本申请的一些实施例中，所述根据所述目标记录针对所述目标对象回放所述多媒体内容时，处理器401可以执行：对目标播放场景下采集到的所述对象特征信息进行信息提取处理，得到对象特征数据；基于所述对象特征数据确定对象标识，并根据确定的所述对象标识查询到所述目标记录；根据所述目标记录中的所述目标播放时刻回放所述多媒体内容。
本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过计算机程序来完成，或通过计算机程序控制相关的硬件来完成，该计算机程序可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。
为此，本申请实施例还提供一种存储介质，其中存储有计算机程序，该计算机程序能够被处理器进行加载，以执行本申请实施例所提供的任一种方法中的步骤。
其中，该存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的计算机程序，可以执行本申请实施例所提供的任一种方法中的步骤，因此，可以实现本申请实施例所提供的方法所能实现的有益效果，详见前面的实施例，在此不再赘述。
本领域技术人员在考虑说明书及实践这里公开的实施方式后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。
应当理解的是，本申请并不局限于上面已经描述并在附图中示出的实施例，而可以在不脱离其范围的情况下进行各种修改和改变。

Claims (10)

1.一种多媒体播放方法，其特征在于，包括：
采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；
在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；
当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻；
将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
2.根据权利要求1所述的方法，其特征在于，所述对象特征信息包括对象声音信息；
所述采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识，包括：
采集观看多媒体内容的目标对象的对象声音信息；
基于所述对象声音信息进行声纹采集处理，得到所述对象声音信息对应的声纹数据；
基于所述声纹数据进行识别处理，得到声纹识别结果，并基于声纹识别结果生成所述对象标识。
3.根据权利要求1所述的方法，其特征在于，所述对象行为包括是否脱离观看所述多媒体内容；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：
在所述多媒体内容的播放过程中，检测所述目标对象的是否观看所述多媒体内容；
所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：
当所述目标对象脱离观看所述多媒体内容预定时长时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
4.根据权利要求1所述的方法，其特征在于，所述对象行为包括对象情绪；所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：
在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪；
所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：
当所述对象情绪符合特定情绪状态时，确定所述多媒体内容的播放时刻点作为所述目标播放时刻。
5.根据权利要求1所述的方法，其特征在于，所述对象行为包括是否脱离观看所述多媒体内容以及对象情绪；
所述在所述多媒体内容的播放过程中，检测所述目标对象的对象行为，包括：
在所述多媒体内容的播放过程中，通过脸部实时检测确定所述目标对象的对象情绪，并检测所述目标对象的是否观看所述多媒体内容；
所述当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻，包括：
当所述目标对象脱离观看所述多媒体内容预定时长，且脱离观看所述多媒体内容时的对象情绪符合特定情绪状态时，确定目标对象脱离观看所述多媒体内容的时刻点作为所述目标播放时刻。
6.根据权利要求1所述的方法，其特征在于，所述将所述目标播放时刻及所述对象标识联合记录至目标记录中，包括：
查询所述对象标识及所述多媒体内容的媒体标识对应的目标记录；
当查询到所述目标记录时，将所述目标播放时刻更新至所述目标记录中；
当没有查询到所述目标记录时，根据所述目标播放时刻、所述对象标识及所述媒体标识生成所述目标记录。
7.根据权利要求1所述的方法，其特征在于，所述根据所述目标记录针对所述目标对象回放所述多媒体内容，包括：
对目标播放场景下采集到的所述对象特征信息进行信息提取处理，得到对象特征数据；
基于所述对象特征数据确定对象标识，并根据确定的所述对象标识查询到所述目标记录；
根据所述目标记录中的所述目标播放时刻回放所述多媒体内容。
8.一种多媒体播放装置，其特征在于，包括：
采集模块，用于采集观看多媒体内容的目标对象的对象特征信息，并基于所述对象特征信息生成对象标识；
检测模块，用于在所述多媒体内容的播放过程中，检测所述目标对象的对象行为；
确定模块，用于当所述对象行为符合目标条件时，根据所述对象行为确定所述多媒体内容的目标播放时刻；
记录模块，用于将所述目标播放时刻及所述对象标识联合记录至目标记录中，以根据所述目标记录针对所述目标对象回放所述多媒体内容。
9.一种存储介质，其特征在于，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行权利要求1至7任一项所述的方法。
10.一种电子设备，其特征在于，包括：存储器，存储有计算机程序；处理器，读取存储器存储的计算机程序，以执行权利要求1至7任一项所述的方法。
CN202111445716.9A 2021-11-30 2021-11-30 多媒体播放方法、装置、存储介质及电子设备 Pending CN114157914A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111445716.9A CN114157914A (zh) 2021-11-30 2021-11-30 多媒体播放方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111445716.9A CN114157914A (zh) 2021-11-30 2021-11-30 多媒体播放方法、装置、存储介质及电子设备

Publications (1)

Publication Number Publication Date
CN114157914A true CN114157914A (zh) 2022-03-08

Family

ID=80455259

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111445716.9A Pending CN114157914A (zh) 2021-11-30 2021-11-30 多媒体播放方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN114157914A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103873923A (zh) * 2012-12-12 2014-06-18 联想(北京)有限公司 一种视频处理方法及系统
CN105872619A (zh) * 2015-12-15 2016-08-17 乐视网信息技术（北京）股份有限公司 一种视频播放记录的匹配方法及匹配装置
CN107454359A (zh) * 2017-07-28 2017-12-08 北京小米移动软件有限公司 播放视频的方法及装置
US20180124141A1 (en) * 2016-10-31 2018-05-03 Google Inc. Anchors for live streams
CN113207028A (zh) * 2021-03-30 2021-08-03 当趣网络科技(杭州)有限公司 历史记录管理方法
CN113359980A (zh) * 2021-05-31 2021-09-07 上海商汤智能科技有限公司 多媒体设备的控制方法及装置、电子设备和存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103873923A (zh) * 2012-12-12 2014-06-18 联想(北京)有限公司 一种视频处理方法及系统
CN105872619A (zh) * 2015-12-15 2016-08-17 乐视网信息技术（北京）股份有限公司 一种视频播放记录的匹配方法及匹配装置
US20180124141A1 (en) * 2016-10-31 2018-05-03 Google Inc. Anchors for live streams
CN107454359A (zh) * 2017-07-28 2017-12-08 北京小米移动软件有限公司 播放视频的方法及装置
CN113207028A (zh) * 2021-03-30 2021-08-03 当趣网络科技(杭州)有限公司 历史记录管理方法
CN113359980A (zh) * 2021-05-31 2021-09-07 上海商汤智能科技有限公司 多媒体设备的控制方法及装置、电子设备和存储介质

Similar Documents

Publication Publication Date Title
CN110047515B (zh) 一种音频识别方法、装置、设备及存储介质
CN110675433A (zh) 视频处理方法、装置、电子设备及存储介质
GB2463378A (en) Registering faces and identification features from images received via a network
US11315366B2 (en) Conference recording method and data processing device employing the same
CN111209437B (zh) 一种标签处理方法、装置、存储介质和电子设备
CN109743589B (zh) 文章生成方法及装置
US11531839B2 (en) Label assigning device, label assigning method, and computer program product
CN114902687A (zh) 一种游戏录屏方法、装置及计算机可读存储介质
CN112004117A (zh) 视频播放方法及装置
CN108256071B (zh) 录屏文件的生成方法、装置、终端及存储介质
CN113741814A (zh) 数据处理方法、装置、计算机可读存储介质和计算机设备
CN114095782A (zh) 一种视频处理方法、装置、计算机设备及存储介质
CN114157914A (zh) 多媒体播放方法、装置、存储介质及电子设备
CN110070891B (zh) 一种歌曲识别方法、装置以及存储介质
CN113965806B (zh) 视频推荐方法、装置和计算机可读存储介质
EP2435928A1 (en) Method and computer program product for enabling organization of media objects
CN114205632A (zh) 视频预览方法、装置、电子设备及计算机可读存储介质
CN111489757B (zh) 音频处理方法、装置、电子设备及可读存储介质
CN114302235A (zh) 多媒体播放方法、装置、存储介质及电子设备
CN110163043B (zh) 面部检测方法、装置、存储介质及电子装置
CN111274449A (zh) 视频播放方法、装置、电子设备和存储介质
CN113873317A (zh) 内容播放方法、装置、电子设备和计算机可读存储介质
CN113056784A (zh) 语音信息的处理方法、装置、存储介质及电子设备
CN104396262A (zh) 同步电影概要
CN113810737B (zh) 一种视频处理方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination