CN113709566A - 多媒体内容的播放方法、装置、设备以及计算机存储介质 - Google Patents
多媒体内容的播放方法、装置、设备以及计算机存储介质 Download PDFInfo
- Publication number
- CN113709566A CN113709566A CN202110921365.8A CN202110921365A CN113709566A CN 113709566 A CN113709566 A CN 113709566A CN 202110921365 A CN202110921365 A CN 202110921365A CN 113709566 A CN113709566 A CN 113709566A
- Authority
- CN
- China
- Prior art keywords
- user
- playing
- progress bar
- determining
- concentration degree
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000003860 storage Methods 0.000 title claims abstract description 12
- 230000006399 behavior Effects 0.000 claims description 37
- 230000008859 change Effects 0.000 claims description 26
- 238000000605 extraction Methods 0.000 claims description 22
- 238000004891 communication Methods 0.000 claims description 15
- 210000005252 bulbus oculi Anatomy 0.000 claims description 8
- 238000001514 detection method Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 10
- 238000004590 computer program Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000008447 perception Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000016776 visual perception Effects 0.000 description 2
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 210000001508 eye Anatomy 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例涉及终端播放技术领域,公开了一种多媒体内容的播放方法、装置、设备以及计算机存储介质,该方法包括:检测用户在多媒体内容的播放时间内的用户行为信息;根据用户行为信息确定用户在播放时间内的用户专注度;根据播放时间将用户专注度与多媒体内容的内容进度条进行关联,得到专注度关联信息;根据专注度关联信息对内容进度条进行调整。通过上述方式,本发明实施例提高了多媒体内容播放的用户体验。
Description
技术领域
本发明实施例涉及终端播放技术领域,具体涉及一种多媒体内容的播放方法、装置、设备以及计算机存储介质。
背景技术
在进行观看视频、阅读电子书或者听书时,为了减少用户的操作,为用户提供沉浸式体验,用户可以选择自动播放模式。而在自动播放模式下,用户因一些自身或外部因素的影响,可能会出现注意力转移或者下降的情况,此时用户就会错过和遗漏一些部分的多媒体内容。
本发明的发明人在实施本发明的过程中发现:现有技术中采取的用户人工确定需回看信息并且手动进行调整内容进度条至该需回看信息处的效率和准确率都较低,从而导致用户的多媒体播放体验不佳。
发明内容
鉴于上述问题,本发明实施例提供了一种多媒体内容的播放方法、装置、设备以及计算机存储介质,用于解决现有技术中存在的用户的多媒体播放体验不佳的问题。
根据本发明实施例的一个方面,提供了一种多媒体内容的播放方法,所述方法包括:
检测用户在多媒体内容的播放时间内的用户行为信息;
根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度;
根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息;
根据所述专注度关联信息对所述内容进度条进行调整。
在一种可选的方式中,所述用户行为信息包括用户使用状态信息、设备运动状态信息和针对所述内容进度条的进度条操作信息中的至少一项;所述方法还包括:
当存在所述用户使用状态信息时,将所述用户使用状态信息与使用状态阈值进行比较,确定所述用户状态使用信息对应的第一档位;
当存在所述设备运动状态信息时,根据所述设备运动状态信息确定状态变化幅度;
将所述状态变化幅度与幅度阈值进行比较,确定所述状态变化幅度对应的第二档位;
当存在所述进度条操作信息时,根据所述进度条操作信息确定第三档位;
根据所述第一档位、所述第二档位和/或所述第三档位确定目标档位;
将所述目标档位与多个可选档位进行匹配,将匹配到的所述可选档位对应的可选专注度确定为所述用户专注度;其中,每一个所述可选专注度与一个所述可选档位相对应。
在一种可选的方式中,所述用户使用状态信息包括用户与播放所述多媒体内容的目标设备之间的目标距离、所述用户的眼球单位时间内对所述目标设备的偏离频率、所述目标设备对应的播放模式和环境声音频率中的至少一项;所述方法还包括:
当存在所述目标距离时,将所述目标距离与距离阈值进行比较,确定所述目标距离对应的第四档位;
当存在所述偏离频率时,将所述偏离频率与第一频率阈值进行比较,确定所述偏离频率对应的第五档位;
当存在所述声音频率时,将所述声音频率与第二频率阈值进行比较,确定所述声音频率对应的第六档位;其中,所述第二频率阈值根据所述播放模式确定;
根据所述第四档位、所述第五档位和/或所述第六档位确定所述第一档位。
在一种可选的方式中,所述内容进度条包括所述播放时间对应的多个内容播放节点;所述专注度关联信息包括各个所述内容播放节点对应的所述用户专注度;所述方法还包括:
当检测到所述用户专注度大于第一专注度阈值时,将小于所述第一专注度阈值的用户专注度对应的内容播放节点确定为目标播放节点;
将所述目标播放节点所在的内容进度条确定为目标进度条段;
将所述目标进度条段关联的所述用户专注度中的最小值确定为最差专注度;
获取所述最差专注度对应的播放调整策略;
根据所述播放调整策略对所述目标进度条段进行调整。
在一种可选的方式中,所述播放调整策略包括播放起始位置、播放启动类型以及进度条展示类型;所述方法还包括:
根据所述进度条展示类型对目标进度条段进行调整;
当确定所述最差专注度大于第二专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的起始位置确定为所述播放起始位置;其中,所述第二专注度阈值小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置开始自动播放或者暂停于所述播放起始位置。
在一种可选的方式中,所述播放调整策略还包括播放信息抽取类型以及播放窗口展示类型;所述方法还包括:
当确定所述最差专注度大于第三专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的停止位置确定为所述播放起始位置;其中,所述第三专注度阈值大于所述第二专注度阈值并且小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置自动播放;
将所述目标进度条段对应的所述多媒体内容确定为待回看内容;
根据所述播放信息抽取类型对所述待回看内容进行抽取,得到播放片段信息;
根据所述播放窗口展示类型生成所述播放片段信息对应的播放窗口;
根据所述播放窗口对应的时间轴信息,将所述播放窗口展示在所述目标进度条段上。
在一种可选的方式中,所述方法还包括:
响应于所述目标进度条段的第一方向上的第一控制操作;
根据所述第一控制操作对所述进度条展示类型进行切换;
响应于切换后的所述目标进度条段的第二方向上的第二控制操作;其中,所述第二方向与所述第一方向不同;
根据所述第二控制操作从所述播放窗口中确定目标窗口进行播放。
根据本发明实施例的另一方面,提供了一种多媒体内容的播放装置,包括:
检测模块,用于检测用户在多媒体内容的播放时间内的用户行为信息;
确定模块,用于根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度;
关联模块,用于根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息;
调整模块,用于根据所述专注度关联信息对所述内容进度条进行调整。
根据本发明实施例的另一方面,提供了一种多媒体内容的播放设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如所述多媒体内容的播放方法的操作。
根据本发明实施例的又一方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一可执行指令,所述可执行指令使多媒体内容的播放设备执行所述多媒体内容的播放方法的操作。
本发明实施例通过检测用户在多媒体内容的播放时间的用户行为信息;根据用户行为信息确定用户在播放时间内的用户专注度;然后根据播放时间将用户专注度与多媒体内容的内容进度条进行关联,得到专注度关联信息;其中,专注度关联信息用于表征所述用户对于所述内容进度条中的各个内容播放节点的专注度水平;最后,根据专注度关联信息对内容进度条进行调整。
从而区别于现有技术采用的用户手动对内容进度条进行调整所存在的用户体验不佳的问题,本发明实施例通过根据用户在播放多媒体内容时的用户行为信息,确定出用户专注度,并将根据播放时间将用户专注度与内容进度条进行关联,得到专注度关联信息,最后根据专注度关联信息对内容进度条自动进行调整,从而能够提高多媒体内容播放的用户体验。
上述说明仅是本发明实施例技术方案的概述,为了能够更清楚了解本发明实施例的技术手段,而可依照说明书的内容予以实施,并且为了让本发明实施例的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
附图仅用于示出实施方式,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了本发明实施例提供的多媒体内容播放方法的流程示意图;
图2示出了本发明实施例提供的关联后的内容进度条的内容示意图;
图3示出了本发明实施例提供的调整后的内容进度条的内容示意图;
图4a和4b示出了本发明实施例提供的内容进度条的操作示意图;
图5示出了本发明实施例提供的多媒体内容播放装置的结构示意图;
图6示出了本发明实施例提供的多媒体内容播放设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例,然而应当理解,可以以各种形式实现本发明而不应被这里阐述的实施例所限制。
图1示出了本发明实施例提供的多媒体内容播放方法的流程图,该方法由计算机处理设备执行。该计算机处理设备可以包括手机、笔记本电脑以及智能电视等。如图1所示,该方法包括以下步骤:
步骤101:检测用户在多媒体内容的播放时间内的用户行为信息。
在本发明的一个实施例中,多媒体内容可以包括视频、音频以及电子书中的任一种。用户行为信息用于表征用户在多媒体内容播放时的行为。播放时间包括多媒体内容播放的时间轴区间,如第一集0-10分钟这一区间。
在本发明的再一个实施例中,随着多媒体内容的类型不同,其所要求的用户注意力的感知方面也不同,如在多媒体内容的类型为视觉感知型,如电子书时,考虑到用户一般的观看习惯,用户行为信息可以包括用户与播放多媒体内容的目标设备之间的距离、用户的眼球在单位时间内偏离目标设备的频率等。
而在多媒体内容的类型为听觉感知型时,如音频时,考虑到用户的收听习惯,用户行为信息可以包括用户或者设备在一定时长内发出的声音频率等。
而在多媒体内容的类型为混合感知型,如既包括声音又包括画面的视频时,用户行为信息可以包括前述视觉感知型和听觉感知型的多媒体内容所对应的用户行为信息中的任意一或多项。
步骤102:根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度。
在本发明的一个实施例中,根据用户行为信息确定用户在播放时间内的针对多媒体内容的内容接收概率,从而对应确定出用户专注度。内容接收概率越大,则用户专注度越高。
其中,内容接收概率可以用如用户与播放多媒体内容的目标设备之间的距离、用户在单位时间内偏离目标设备的频率等来确定,如用户与目标设备之间的距离越大,用户的内容接收概率就越小,从而认定用户专注度越小。而用户在单位时间内发出的声音频率越高,说明用户在说话或聊天而未专心观看视频,因此认定用户专注度越小。
在本发明的再一个实施例中,所述用户行为信息包括用户使用状态信息、设备运动状态信息和针对所述内容进度条的进度条操作信息中的至少一项;步骤102还包括:
步骤1021:当存在所述用户使用状态信息时,将所述用户使用状态信息与使用状态阈值进行比较,确定所述用户状态使用信息对应的第一档位。
用户使用状态信息用于表征用户使用目标设备时的状态信息,如发声状态、运动状态以及眼睛的注视状态等。
在本发明的再一个实施例中,所述用户使用状态信息包括用户与播放所述多媒体内容的目标设备之间的目标距离、所述用户的眼球单位时间内对所述目标设备的偏离频率、所述目标设备对应的播放模式和环境声音频率中的至少一项。
其中,在播放的多媒体内容为电子书时,用户使用状态信息可以包括用户与播放所述多媒体内容的目标设备之间的目标距离、所述用户的眼球单位时间内对所述目标设备的偏离频率中的至少一项。
在播放的多媒体内容为音频,如听书、听广播剧等时,区别于电子书播放场景下的需要用户保持在一定的可视距离内,用户使用状态信息可以只包括与声音相关的信息,如可以是所述目标设备对应的播放模式以及环境声音频率等。
在本发明的再一个实施例中,目标距离、偏离频率以及环境声音频率可以分别通过目标设备中的距离传感器、眼动传感器和摄像传感器以及声音传感器获取。
步骤1021还包括:步骤211:当存在所述目标距离时,将所述目标距离与距离阈值进行比较,确定所述目标距离对应的第四档位。
在本发明的一个实施例中,距离阈值可以是多个可选距离区间,其中每一个可选距离区间与步骤1026中的一个所述可选专注度相对应。
举例说明,在预设4个可选专注度时,即专注度分别为1、2、3以及4,当目标设备为手机时,可选距离区间可以分别为0-40cm,40-70cm,70-150cm,150cm以上。其中,可选距离区间0-40cm对应的可选专注度为1,其他的以此类推。则当目标距离为50cm时,第四档位为2。
需要说明的是,针对不同类型的目标设备,如手机或者智能电视,距离阈值可以根据该种设备对应的最大可视距离和最佳观看距离等参数进行适应性调整。
步骤212:当存在所述偏离频率时,将所述偏离频率与第一频率阈值进行比较,确定所述偏离频率对应的第五档位。
类似于步骤211中的距离阈值,第一频率阈值也可以包括多个可选第一频率阈值区间,其中,每个可选第一频率阈值区间分别对应于一个可选专注度。
步骤213:当存在所述声音频率时,将所述声音频率与第二频率阈值进行比较,确定所述声音频率对应的第六档位;其中,所述第二频率阈值根据所述播放模式确定。
类似于步骤211中的距离阈值,第二频率阈值也可以包括多个可选第一频率阈值区间,其中,每个可选第二频率阈值区间分别对应于一个可选专注度。在本发明的再一个实施例中,播放模式可以包括公开播放与非公开播放,其通过检测多媒体内容是否通过耳机等便携式音频播放设备播放,若是,则播放模式为非公开播放,若否,则播放模式为公开设备。
在公开播放模式下,声音频率主要为目标设备所在的环境的环境声音频率,而在非公开播放模式下,声音频率主要是用户的发声频率。而这两种不同模式下的频率分布规律是不同的,因此根据播放模式确定第二频率阈值。
步骤214:根据所述第四档位、所述第五档位和/或所述第六档位确定所述第一档位。
在本发明的一个实施例中,可以将第四档位、第五档位以及第六档位中的任意一个确定为第一档位。
在本发明的再一个实施例中。为了提高第一档位的准确性,还可以根据预设的权重值对第四档位、第五档位以及第六档位中的至少两项进行加权求和。举例说明,当第四档位、第五档位以及第六档位都存在,并且分别为1、2、2时,第一档位可以为1*0.4+2*0.2+2*0.2=1.2。
需要说明的是,当加权求和得到的值为非整数时,可以采取向下取整的方式,如计算得到的1.2时,则取1作为第一档位,由此避免第一档位的值比用户实际情况偏高所导致的根据用户专注度对内容进度条进行调节的不准确的问题。
步骤1022:当存在所述设备运动状态信息时,根据所述设备运动状态信息确定状态变化幅度。
在本发明的一个实施例中,设备运动状态信息可以通过目标设备中预设的加速传感器和位置传感器获取。其中,设备运动状态信息可以包括目标设备的位移信息以及速度信息。状态变化幅度可以是单位时间内目标设备的速度变化率。
步骤1023:将所述状态变化幅度与幅度阈值进行比较,确定所述状态变化幅度对应的第二档位。
类似于步骤211中的距离阈值,幅度阈值也可以包括多个可选第一频率阈值区间,其中,每个可选第二频率阈值区间分别对应于一个可选专注度。
步骤1024:当存在所述进度条操作信息时,根据所述进度条操作信息确定第三档位。
在本发明的一个实施例中,当用户主动对进度条进行操作时,如拖动进度条或者暂停进度条等,说明用户的注意力集中在多媒体内容上,因此可以将第三档位确定为对应的可选专注度较高的档位,如将第三档位确定为4。
步骤1025:根据所述第一档位、所述第二档位和/或所述第三档位确定目标档位。
类似于步骤214中根据第四档位、第五档位以及第六档位确定第一档位的过程,目标档位可以取第一档位、所述第二档位和/或所述第三档位中的任意一个。在本发明的再一个实施例中,当第一档位、第二档位以及第三档位都存在时,可以采取根据预设的权重对第一档位、第二档位以及第三档位进行加权求和的方法确定目标档位。同样的,当加权求和的值为非整数时,可以采取向下取整的方式得到目标档位。
考虑到在其他影响因素相同的情况下,在目标设备较为不平稳时,用户对于多媒体内容的接收概率会受到影响,因此,在本发明的再一个实施例中,目标档位的确定过程还可以包括:
步骤251:根据所述设备运动状态信息确定所述目标设备的状态变化速度。
在本发明的一个实施例中,设备运动状态信息还包括目标设备的加速度信息,根据加速度信息确定单位时间内目标设备的加速度变化速度作为状态变化速度。
步骤252:将所述状态变化速度与速度阈值进行比较,确定所述状态变化速度对应的第七档位。
第七档位的确定类似于前述步骤211中的第四档位的确定,即速度阈值可以包括多个可选速度区间,其中,每一个可选速度区间对应于一个可选专注度。
步骤253:根据所述第七档位对所述目标档位进行调整。
将状态变化速度作为目标设备的平稳度的表现,因此可以根据第七档位对目标档位进行加权求和处理。举例说明,在目标档位为3时,而第七档位为1时,调整后的目标档位可以是3*0.5+1*0.5=2。
步骤1026:将所述目标档位与多个可选档位进行匹配,将匹配到的所述可选档位对应的可选专注度确定为所述用户专注度;其中,每一个所述可选专注度与一个所述可选档位相对应。
在本发明的一个实施例中,可以是当目标档位与可选档位相同时,确定两者匹配。
步骤103:根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息。
在本发明的一个实施例中,专注度关联信息用于表征用户在内容进度条上的每一个内容播放节点上的专注度水平,其中,内容进度条中包括播放时间对应的多个内容播放节点;每一个内容播放节点可以在进度条时间轴上每隔预设时长抽取得到的,如每隔2s抽取一次,内容进度条中包括各个内容播放节点对应的播放时间轴信息、播放内容信息。具体地,专注度关联信息包括各个所述内容播放节点对应的所述用户专注度。
根据播放时间将用户专注度关联到内容进度条上对应的时间轴位置上,由此完成对内容进度条的用户专注度标注,即得到专注度关联信息。如某内容进度条的总长度为30分钟,若每隔30s抽取一次,则对应于60个内容播放节点,检测到在多媒体内容播放到第10分钟,即第20个内容播放节点时的用户专注度为2,因此,将内容进度条上的第20个内容播放节点即第10分钟对应的用户专注度标记为2。
图2示出了本发明一个实施例中关联后的内容进度条的内容示意图。
举例说明,参考图2,播放的多媒体内容包括3集,每一集时长为45分钟。根据前述步骤101-103确定出第一集:0~30分钟,专注度为1级;30~45分钟,用户专注度为2。第二集:0~15分钟,用户专注度为3级;15~45分钟,用户专注度为4级。第三集:0~15分钟,用户专注度为4级;15~45分钟,用户专注度为1。
步骤104:根据所述专注度关联信息对所述内容进度条进行调整。
在本发明的一个实施例中,可以是以一定的采样频率如前述步骤103中的内容播放节点的抽取频率实时获取用户专注度,当检测到用户专注度小于预设阈值时,即触发根据用户专注度对所述多媒体内容的内容进度条进行调整的动作。
在本发明的再一个实施例中,在实时获取用户专注度的基础上,还可以是当检测到用户专注度回升到一定水平时,触发根据用户专注度对所述多媒体内容的内容进度条进行调整的动作,如此在用户重新回归到多媒体内容的播放场景中时,目标设备上所展示的是调整后的内容进度条,使得用户能够迅速了解到自己遗漏的内容情况,从而提高用户的观看或收听体验。
在本发明的一个实施例中,步骤104还包括:
步骤1041:当检测到所述用户专注度大于第一专注度阈值时,将小于所述第一专注度阈值的用户专注度对应的内容播放节点确定为目标播放节点。
在本发明的一个实施例中,第一专注度阈值用于表征用户的专注度水平较高,因此,当检测到用户专注度大于第一专注度阈值,可视作用户的专注度水平回升到正常地观看多媒体的水平,此时即可以开始进度条的调整,以便调整后进行展示。
步骤1042:将所述目标播放节点所在的内容进度条确定为目标进度条段。
在本发明的一个实施例中,将时间轴上距离最远的目标播放节点之间的内容进度条确定为目标进度条段。参考图2,图2中从第一集的第30分钟开始时至第三集的第15分钟结束时之间的进度条段即为目标进度条段。
步骤1043:将所述目标进度条段关联的所述用户专注度中的最小值确定为最差专注度。
当用户点击进度条的专注度为3的进度条时,则将设备回退至第二集的第0分钟处开始播放。当用户点击进度条的专注度为4的进度条时,则将设备回退至第二集的第15分钟处开始播放。
步骤1044:获取所述最差专注度对应的播放调整策略。
在本发明的一个实施例中,每一种可选专注度对应于一种播放调整策略。播放调整策略中包括如当前播放画面在内容进度条上的位置,播放启动方式是否为立即播放还是暂停,是否新建播放窗口播放,播放窗口播放的内容如何确定等信息。
步骤1045:根据所述播放调整策略对所述目标进度条段进行调整。
在本发明的一个实施例中,所述播放调整策略包括播放起始位置、播放启动类型以及进度条展示类型;步骤1045还包括:
步骤451:根据所述进度条展示类型对目标进度条段进行调整。
在本发明的一个实施例中,进度条展示类型可以包括进度条信息维度,其中进度条信息维度包括时间轴、用户专注度和/或播放片段这三种信息对应的维度。在不同维度下,进度条展示的内容不同。
当最差专注度为4,即表征用户的专注程度最低时,考虑到用户可能是直接离开或者睡着了,即基本没有关注多媒体内容,因此进度条上可以只展示时间轴这一维度,或者展示时间轴和用户专注度这两个维度,由用户回归后自己根据进度条上的用户专注度进行操作。
而当最差专注度为1、2或3时,即表征用户的专注程度相对较高时,对多媒体内容存在一定程度的关注,因此进度条上还可以播放片段,由用户回归后自己根据进度条上的播放片段,并且结合自己的历史观看和收听的记忆进行操作。
步骤452:当确定所述最差专注度大于第二专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的起始位置确定为所述播放起始位置;其中,所述第二专注度阈值小于所述第一专注度阈值。
在本发明的一个实施例中,专注度的值越大表征用户的专注度水平越高。
在本发明的再一个实施例中,第一专注度阈值与第二专注度阈值之间的关系不一定是本实施例中限定的,即两者满足第一专注度阈值所表征的用户专注力水平大于第二专注度阈值所表征的用户专注力水平大即可。即在本发明的再一个实施例中,可以如图2中所示的,专注度的值越小,其对应的用户专注力越大,也可是专注度的值越大,其对应的用户专注力水平越大。
步骤453:将所述播放启动类型确定为从所述播放起始位置开始自动播放或者暂停于所述播放起始位置。
即在最差专注度为4时,在判定用户回归后自动定位至用户专注度变为最差专注度的位置开始自动播放或者暂停于该处。结合图2,播放起始位置则为第2集的第15分钟。
在不同的进度条维度下,需要确定出与用户专注度匹配的内容,以方便用户在回归时能够较快地回到多媒体内容中。因此,在本发明的再一个实施例中,所述播放调整策略还包括播放信息抽取类型以及播放窗口展示类型;步骤1045还可以包括:
步骤455:当确定所述最差专注度大于第三专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的停止位置确定为所述播放起始位置;其中,所述第三专注度阈值大于所述第二专注度阈值并且小于所述第一专注度阈值。
类似于步骤452中的第二专注度阈值与第一专注度阈值之间的大小关系的确定,第三专注度阈值与第一专注度阈值以及第二专注度阈值之间的关系不一定是本实施例中限定的,两者满足第一专注度阈值、第三专注度阈值以及第二专注度阈值所表征的用户专注力水平依次降低即可。
步骤456:将所述播放启动类型确定为从所述播放起始位置自动播放。
步骤457:将所述目标进度条段对应的所述多媒体内容确定为待回看内容。
步骤458:根据所述播放信息抽取类型对所述待回看内容进行抽取,得到播放片段信息。
在本发明的一个实施例中,播放信息抽取类型可以是等时抽取,从待回看内容的起始位置开始,即每隔预设抽取时长进行抽取。如,在待会看内容的时长为L,抽取时长为N时,得到L/N组播放片段信息。L、N为正整数。
在本发明的再一个实施例中,播放信息抽取类型还可以是按照热度进行抽取,获取待回看内容对应的热度特征信息,其中,热度特征信息可以包括全网历史观看次数、弹幕数、内容热度分析等。根据热度特征信息确定待回看内容中包括的热度值较高的高热度片段,作为所述播放片段。
在本发明的再一个实施例中,为了避免等时抽取中的固定的抽取时长设置得不能与各种不同时长的多媒体内容进行适配,还可以在等时抽取的基础上,结合热点内容将相邻并且热度值相同的播放片段进行合并处理。
步骤459:根据所述播放窗口展示类型生成所述播放片段信息对应的播放窗口。
在本发明的一个实施例中,播放窗口展示类型用户用于表征播放窗口的展示位置、窗口内容形式以及触发方式等。
其中,播放窗口可在进度条区域内播放,触发播放方式可以是点击播放,长按等其他触发方式。播放窗口还可以可脱离进度条区域开始播放:触发方式为对单视频片段进行双指放大至某数值;或单指按压移动脱离进度条,等更多触发方式;在播放窗口脱离进度条播放时,内容进度条隐藏等展示方式。
步骤460:根据所述播放窗口对应的时间轴信息,将所述播放窗口展示在所述目标进度条段上。
在本发明的一个实施例中,除了根据播放调整策略中的窗口展示类型来确定播放窗口的尺寸和位置,还可以根据播放的多媒体内容对播放窗口进行适应性调整。
调整的方法可以包括:根据多媒体内容的画面大小决定台词弹幕是否脱离画面区域:如画面宽度小于宽度阈值,台词会脱离但播放窗口视频播放画面;如高度小于高度阈值,弹幕会在画面外显示。
在本发明的再一个实施例中,台词或弹幕也可根据剧情画面的复杂度以及其他多媒体内容的标签数据来决定是否跳出画面;比如主角人数大于3人、播放窗口为高热度剧情、他人专注度高的剧情等,可将台词弹幕显示在视频框外以便聚焦剧情本身。播放窗口若继续放大,当放大到某一数值后,播放窗口视频可判断为用户主要关注画面,主视频声音可静音,或变轻,或暂停播放或同时虚化画面;播放窗口视频声音正常播放。
在本发明的再一个实施例中,视频播放播放窗口通过监听各种手势,点击,放大,缩小等手势,可以实现视频的暂停,播放,进度等控制,也可以实现对播放窗口的大小控制。还可以通过在播放播放窗口的上部与下部添加弹幕窗口,获取视频的弹幕信息,并进行弹幕的显示。或者,当播放窗口放大到一定的大小,将原始播放视频进行暂停,静音,将播放窗口播放设置为主要窗口进行播放。
在本发明的再一个实施例中,在步骤460之后还可以包括:
步骤461:响应于所述目标进度条段的第一方向上的第一控制操作。
考虑到用户操作习惯规范,第一方向可以是与进度条的夹角大于第一角角度阈值的方向,其中,第一角度阈值可以为如75度。
步骤462:根据所述第一控制操作对所述进度条展示类型进行切换。
根据第一控制操作的确定目标进度条类型,进行切换。
举例说明,在本发明的一个实施例中,可以通过在目标进度条段上监听点击手势操作,通过识别用户点击进度条的位置,定位用户点击专注度的区域。如果点击专注度不高的区域,则将进度条换成带图片和播放按钮的集合视图。其中,集合视图中显示的图片是通过原始视频在对应的时间点进行视频取帧获取。
进一步地,当用户点击某一个集合元素,可以进行该集合元素的放大效果,集合视图也提供了不同大小的集合元素的显示的方法。在集合元素上获取到用户点击播放按钮的操作时,可以通过预设的视频解码软件在步骤447中生成的播放窗口中实现。
步骤463:响应于切换后的所述目标进度条段的第二方向上的第二控制操作;其中,所述第二方向与所述第一方向不同。
第二方向可以是与进度条之间的夹角小于第二角度阈值的方向。其中,第二角度阈值可以为如30度。
步骤464:根据所述第二控制操作从所述播放窗口中确定目标窗口进行播放。
下面结合图3与图4a和4b结合一个具体的实施例进行步骤104的说明,其中,图3示出了本发明实施例提供的调整后的内容进度条的内容示意图;图4a和4b示出了本发明实施例提供的内容进度条的操作示意图。
若判断最差专注度为3,则如图3所示,用户在回归后继续播放可利用播放窗口展现最差专注度不高的片段,并且支持进入播放窗口快速播放、关闭等操作。若最差专注度为2,则自动回退至当前回归时间点前预设时长前播放。
若最差专注度为1,则根据用户在进度条上选择的内容进行播放窗口直接播放,或进入全屏播放,如图4a向右拖动进度条进入图4b所示的前一个内容的进度条,点击B点处或者在B点自动浮窗视频内容,可直接播放窗口直接播放,或进入全屏播放。
区别于现有技术采用的用户手动对内容进度条进行调整所存在的用户体验不佳的问题,本发明实施例的多媒体内容播放方法通过根据用户在播放多媒体内容时的用户行为信息,确定出用户专注度,并将根据用户专注度对与用户专注度关联之后的内容进度条自动进行调整,从而能够提高多媒体内容播放的用户体验。
图5示出了本发明实施例提供的多媒体内容的播放装置的结构示意图。如图5所示,该装置200包括:检测模块201、确定模块202、关联模块203以及调整模块204。
其中,检测模块201,用于检测用户在多媒体内容的播放时间内的用户行为信息;
确定模块202,用于根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度;
关联模块203,用于根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息;
调整模块204,用于根据所述专注度关联信息对所述内容进度条进行调整。
在一种可选的方式中,所述用户行为信息包括用户使用状态信息、设备运动状态信息和针对所述内容进度条的进度条操作信息中的至少一项;确定模块202还用于:
当存在所述用户使用状态信息时,将所述用户使用状态信息与使用状态阈值进行比较,确定所述用户状态使用信息对应的第一档位;
当存在所述设备运动状态信息时,根据所述设备运动状态信息确定状态变化幅度;
将所述状态变化幅度与幅度阈值进行比较,确定所述状态变化幅度对应的第二档位;
当存在所述进度条操作信息时,根据所述进度条操作信息确定第三档位;
根据所述第一档位、所述第二档位和/或所述第三档位确定目标档位;
将所述目标档位与多个可选档位进行匹配,将匹配到的所述可选档位对应的可选专注度确定为所述用户专注度;其中,每一个所述可选专注度与一个所述可选档位相对应。
在一种可选的方式中,所述用户使用状态信息包括用户与播放所述多媒体内容的目标设备之间的目标距离、所述用户的眼球单位时间内对所述目标设备的偏离频率、所述目标设备对应的播放模式和环境声音频率中的至少一项;确定模块202还用于:
当存在所述目标距离时,将所述目标距离与距离阈值进行比较,确定所述目标距离对应的第四档位;
当存在所述偏离频率时,将所述偏离频率与第一频率阈值进行比较,确定所述偏离频率对应的第五档位;
当存在所述声音频率时,将所述声音频率与第二频率阈值进行比较,确定所述声音频率对应的第六档位;其中,所述第二频率阈值根据所述播放模式确定;
根据所述第四档位、所述第五档位和/或所述第六档位确定所述第一档位。
在一种可选的方式中,所述内容进度条包括所述播放时间对应的多个内容播放节点;所述专注度关联信息包括各个所述内容播放节点对应的所述用户专注度;调整模块204还用于:
当检测到所述用户专注度大于第一专注度阈值时,将小于所述第一专注度阈值的所述用户专注度对应的内容播放节点确定为目标播放节点;
将所述目标播放节点所在的内容进度条确定为目标进度条段;
将所述目标进度条段关联的所述用户专注度中的最小值确定为最差专注度;
获取所述最差专注度对应的播放调整策略;
根据所述播放调整策略对所述目标进度条段进行调整。
在一种可选的方式中,所述播放调整策略包括播放起始位置、播放启动类型以及进度条展示类型;调整模块204还用于:
根据所述进度条展示类型对目标进度条段进行调整;
当确定所述最差专注度大于第二专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的起始位置确定为所述播放起始位置;其中,所述第二专注度阈值小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置开始自动播放或者暂停于所述播放起始位置。
在一种可选的方式中,所述播放调整策略还包括播放信息抽取类型以及播放窗口展示类型;调整模块204还用于:
当确定所述最差专注度大于第三专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的停止位置确定为所述播放起始位置;其中,所述第三专注度阈值大于所述第二专注度阈值并且小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置自动播放;
将所述目标进度条段对应的所述多媒体内容确定为待回看内容;
根据所述播放信息抽取类型对所述待回看内容进行抽取,得到播放片段信息;
根据所述播放窗口展示类型生成所述播放片段信息对应的播放窗口;
根据所述播放窗口对应的时间轴信息,将所述播放窗口展示在所述目标进度条段上。
在一种可选的方式中,调整模块204还用于:
响应于所述目标进度条段的第一方向上的第一控制操作;
根据所述第一控制操作对所述进度条展示类型进行切换;
响应于切换后的所述目标进度条段的第二方向上的第二控制操作;其中,所述第二方向与所述第一方向不同;
根据所述第二控制操作从所述播放窗口中确定目标窗口进行播放。
区别于现有技术采用的用户手动对内容进度条进行调整所存在的用户体验不佳的问题,本发明实施例的多媒体内容播放装置通过根据用户在播放多媒体内容时的用户行为信息,确定出用户专注度,并将根据用户专注度对与用户专注度关联之后的内容进度条自动进行调整,从而能够提高多媒体内容播放的用户体验。
图6示出了本发明实施例提供的多媒体内容的播放设备的结构示意图,本发明具体实施例并不对多媒体内容的播放设备的具体实现做限定。
如图6所示,该多媒体内容的播放设备可以包括:处理器(processor)302、通信接口(Communications Interface)304、存储器(memory)306、以及通信总线308。
其中:处理器302、通信接口304、以及存储器306通过通信总线308完成相互间的通信。通信接口304,用于与其它设备比如客户端或其它服务器等的网元通信。处理器302,用于执行程序310,具体可以执行上述用于多媒体内容的播放方法实施例中的相关步骤。
具体地,程序310可以包括程序代码,该程序代码包括计算机可执行指令。
处理器302可能是中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路。多媒体内容的播放设备包括的一个或多个处理器,可以是同一类型的处理器,如一个或多个CPU;也可以是不同类型的处理器,如一个或多个CPU以及一个或多个ASIC。
存储器306,用于存放程序310。存储器306可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。
程序310具体可以被处理器302调用使多媒体内容的播放设备执行以下操作:
检测用户在多媒体内容的播放时间内的用户行为信息;
根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度;
根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息;
根据所述专注度关联信息对所述内容进度条进行调整。
在一种可选的方式中,所述用户行为信息包括用户使用状态信息、设备运动状态信息和针对所述内容进度条的进度条操作信息中的至少一项;所述程序310被处理器302调用使多媒体内容的播放设备执行以下操作:
当存在所述用户使用状态信息时,将所述用户使用状态信息与使用状态阈值进行比较,确定所述用户状态使用信息对应的第一档位;
当存在所述设备运动状态信息时,根据所述设备运动状态信息确定状态变化幅度;
将所述状态变化幅度与幅度阈值进行比较,确定所述状态变化幅度对应的第二档位;
当存在所述进度条操作信息时,根据所述进度条操作信息确定第三档位;
根据所述第一档位、所述第二档位和/或所述第三档位确定目标档位;
将所述目标档位与多个可选档位进行匹配,将匹配到的所述可选档位对应的可选专注度确定为所述用户专注度;其中,每一个所述可选专注度与一个所述可选档位相对应。
在一种可选的方式中,所述用户使用状态信息包括用户与播放所述多媒体内容的目标设备之间的目标距离、所述用户的眼球单位时间内对所述目标设备的偏离频率、所述目标设备对应的播放模式和环境声音频率中的至少一项;所述程序310被处理器302调用使多媒体内容的播放设备执行以下操作:
当存在所述目标距离时,将所述目标距离与距离阈值进行比较,确定所述目标距离对应的第四档位;
当存在所述偏离频率时,将所述偏离频率与第一频率阈值进行比较,确定所述偏离频率对应的第五档位;
当存在所述声音频率时,将所述声音频率与第二频率阈值进行比较,确定所述声音频率对应的第六档位;其中,所述第二频率阈值根据所述播放模式确定;
根据所述第四档位、所述第五档位和/或所述第六档位确定所述第一档位。
在一种可选的方式中,所述内容进度条包括所述播放时间对应的多个内容播放节点;所述专注度关联信息包括各个所述内容播放节点对应的所述用户专注度;所述程序310被处理器302调用使多媒体内容的播放设备执行以下操作:
当检测到所述用户专注度大于第一专注度阈值时,将小于所述第一专注度阈值的用户专注度对应的内容播放节点确定为目标播放节点;
将所述目标播放节点所在的内容进度条确定为目标进度条段;
将所述目标进度条段关联的所述用户专注度中的最小值确定为最差专注度;
获取所述最差专注度对应的播放调整策略;
根据所述播放调整策略对所述目标进度条段进行调整。
在一种可选的方式中,所述播放调整策略包括播放起始位置、播放启动类型以及进度条展示类型;所述程序310被处理器302调用使多媒体内容的播放设备执行以下操作:
根据所述进度条展示类型对目标进度条段进行调整;
当确定所述最差专注度大于第二专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的起始位置确定为所述播放起始位置;其中,所述第二专注度阈值小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置开始自动播放或者暂停于所述播放起始位置。
在一种可选的方式中,所述播放调整策略还包括播放信息抽取类型以及播放窗口展示类型;所述程序310被处理器302调用使多媒体内容的播放设备执行以下操作:
当确定所述最差专注度大于第三专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的停止位置确定为所述播放起始位置;其中,所述第三专注度阈值大于所述第二专注度阈值并且小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置自动播放;
将所述目标进度条段对应的所述多媒体内容确定为待回看内容;
根据所述播放信息抽取类型对所述待回看内容进行抽取,得到播放片段信息;
根据所述播放窗口展示类型生成所述播放片段信息对应的播放窗口;
根据所述播放窗口对应的时间轴信息,将所述播放窗口展示在所述目标进度条段上。
在一种可选的方式中,所述程序310被处理器302调用使多媒体内容的播放设备执行以下操作:
响应于所述目标进度条段的第一方向上的第一控制操作;
根据所述第一控制操作对所述进度条展示类型进行切换;
响应于切换后的所述目标进度条段的第二方向上的第二控制操作;其中,所述第二方向与所述第一方向不同;
根据所述第二控制操作从所述播放窗口中确定目标窗口进行播放。
区别于现有技术采用的用户手动对内容进度条进行调整所存在的用户体验不佳的问题,本发明实施例的多媒体内容播放设备通过根据用户在播放多媒体内容时的用户行为信息,确定出用户专注度,并将根据用户专注度对与用户专注度关联之后的内容进度条自动进行调整,从而能够提高多媒体内容播放的用户体验。
本发明实施例提供了一种计算机可读存储介质,所述存储介质存储有至少一可执行指令,该可执行指令在多媒体内容的播放设备上运行时,使得所述多媒体内容的播放设备执行上述任意方法实施例中的多媒体内容的播放方法。
可执行指令具体可以用于使得多媒体内容的播放设备执行以下操作:
检测用户在多媒体内容的播放时间内的用户行为信息;
根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度;
根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息;
根据所述专注度关联信息对所述内容进度条进行调整。
在一种可选的方式中,所述用户行为信息包括用户使用状态信息、设备运动状态信息和针对所述内容进度条的进度条操作信息中的至少一项;可执行指令具体可以用于使得多媒体内容的播放设备执行以下操作:
当存在所述用户使用状态信息时,将所述用户使用状态信息与使用状态阈值进行比较,确定所述用户状态使用信息对应的第一档位;
当存在所述设备运动状态信息时,根据所述设备运动状态信息确定状态变化幅度;
将所述状态变化幅度与幅度阈值进行比较,确定所述状态变化幅度对应的第二档位;
当存在所述进度条操作信息时,根据所述进度条操作信息确定第三档位;
根据所述第一档位、所述第二档位和/或所述第三档位确定目标档位;
将所述目标档位与多个可选档位进行匹配,将匹配到的所述可选档位对应的可选专注度确定为所述用户专注度;其中,每一个所述可选专注度与一个所述可选档位相对应。
在一种可选的方式中,所述用户使用状态信息包括用户与播放所述多媒体内容的目标设备之间的目标距离、所述用户的眼球单位时间内对所述目标设备的偏离频率、所述目标设备对应的播放模式和环境声音频率中的至少一项;所述可执行指令使所述多媒体内容的播放设备执行以下操作:
当存在所述目标距离时,将所述目标距离与距离阈值进行比较,确定所述目标距离对应的第四档位;
当存在所述偏离频率时,将所述偏离频率与第一频率阈值进行比较,确定所述偏离频率对应的第五档位;
当存在所述声音频率时,将所述声音频率与第二频率阈值进行比较,确定所述声音频率对应的第六档位;其中,所述第二频率阈值根据所述播放模式确定;
根据所述第四档位、所述第五档位和/或所述第六档位确定所述第一档位。
在一种可选的方式中,所述内容进度条包括所述播放时间对应的多个内容播放节点;所述专注度关联信息包括各个所述内容播放节点对应的所述用户专注度;所述可执行指令使所述多媒体内容的播放设备执行以下操作:
当检测到所述用户专注度大于第一专注度阈值时,将小于所述第一专注度阈值的用户专注度对应的内容播放节点确定为目标播放节点;
将所述目标播放节点所在的内容进度条确定为目标进度条段;
将所述目标进度条段关联的所述用户专注度中的最小值确定为最差专注度;
获取所述最差专注度对应的播放调整策略;
根据所述播放调整策略对所述目标进度条段进行调整。
在一种可选的方式中,所述播放调整策略包括播放起始位置、播放启动类型以及进度条展示类型;所述可执行指令使所述多媒体内容的播放设备执行以下操作:
根据所述进度条展示类型对目标进度条段进行调整;
当确定所述最差专注度大于第二专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的起始位置确定为所述播放起始位置;其中,所述第二专注度阈值小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置开始自动播放或者暂停于所述播放起始位置。
在一种可选的方式中,所述播放调整策略还包括播放信息抽取类型以及播放窗口展示类型;所述可执行指令使所述多媒体内容的播放设备执行以下操作:
当确定所述最差专注度大于第三专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的停止位置确定为所述播放起始位置;其中,所述第三专注度阈值大于所述第二专注度阈值并且小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置自动播放;
将所述目标进度条段对应的所述多媒体内容确定为待回看内容;
根据所述播放信息抽取类型对所述待回看内容进行抽取,得到播放片段信息;
根据所述播放窗口展示类型生成所述播放片段信息对应的播放窗口;
根据所述播放窗口对应的时间轴信息,将所述播放窗口展示在所述目标进度条段上。
在一种可选的方式中,所述可执行指令使所述多媒体内容的播放设备执行以下操作:
响应于所述目标进度条段的第一方向上的第一控制操作;
根据所述第一控制操作对所述进度条展示类型进行切换;
响应于切换后的所述目标进度条段的第二方向上的第二控制操作;其中,所述第二方向与所述第一方向不同;
根据所述第二控制操作从所述播放窗口中确定目标窗口进行播放。
区别于现有技术采用的用户手动对内容进度条进行调整所存在的用户体验不佳的问题,本发明实施例的计算机可读存储介质通过根据用户在播放多媒体内容时的用户行为信息,确定出用户专注度,并将根据用户专注度对与用户专注度关联之后的内容进度条自动进行调整,从而能够提高多媒体内容播放的用户体验。
本发明实施例提供一种多媒体内容的播放装置,用于执行上述多媒体内容的播放方法。本发明实施例提供了一种计算机程序,所述计算机程序可被处理器调用使多媒体内容的播放设备执行上述任意方法实施例中的多媒体内容的播放方法。本发明实施例提供了一种计算机程序产品,计算机程序产品包括存储在计算机可读存储介质上的计算机程序,计算机程序包括程序指令,当程序指令在计算机上运行时,使得所述计算机执行上述任意方法实施例中的多媒体内容的播放方法。
在此提供的算法或显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明实施例也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本发明并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明实施例的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。
本领域技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。上述实施例中的步骤,除有特殊说明外,不应理解为对执行顺序的限定。
Claims (10)
1.一种多媒体内容的播放方法,其特征在于,所述方法包括:
检测用户在多媒体内容的播放时间内的用户行为信息;
根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度;
根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息;
根据所述专注度关联信息对所述内容进度条进行调整。
2.根据权利要求1所述的方法,其特征在于,所述用户行为信息包括用户使用状态信息、设备运动状态信息和针对所述内容进度条的进度条操作信息中的至少一项;所述根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度,进一步包括:
当存在所述用户使用状态信息时,将所述用户使用状态信息与使用状态阈值进行比较,确定所述用户状态使用信息对应的第一档位;
当存在所述设备运动状态信息时,根据所述设备运动状态信息确定状态变化幅度;
将所述状态变化幅度与幅度阈值进行比较,确定所述状态变化幅度对应的第二档位;
当存在所述进度条操作信息时,根据所述进度条操作信息确定第三档位;
根据所述第一档位、所述第二档位和/或所述第三档位确定目标档位;
将所述目标档位与多个可选档位进行匹配,将匹配到的所述可选档位对应的可选专注度确定为所述用户专注度;其中,每一个所述可选专注度与一个所述可选档位相对应。
3.根据权利要求2所述的方法,其特征在于,所述用户使用状态信息包括用户与播放所述多媒体内容的目标设备之间的目标距离、所述用户的眼球单位时间内对所述目标设备的偏离频率、所述目标设备对应的播放模式和环境声音频率中的至少一项;所述将所述用户使用状态信息与使用状态阈值进行比较,确定所述用户状态使用信息对应的第一档位,进一步包括:
当存在所述目标距离时,将所述目标距离与距离阈值进行比较,确定所述目标距离对应的第四档位;
当存在所述偏离频率时,将所述偏离频率与第一频率阈值进行比较,确定所述偏离频率对应的第五档位;
当存在所述声音频率时,将所述声音频率与第二频率阈值进行比较,确定所述声音频率对应的第六档位;其中,所述第二频率阈值根据所述播放模式确定;
根据所述第四档位、所述第五档位和/或所述第六档位确定所述第一档位。
4.根据权利要求1所述的方法,其特征在于,所述内容进度条包括所述播放时间对应的多个内容播放节点;所述专注度关联信息包括各个所述内容播放节点对应的所述用户专注度;所述根据所述专注度关联信息对所述内容进度条进行调整,进一步包括:
当检测到所述用户专注度大于第一专注度阈值时,将小于所述第一专注度阈值的用户专注度对应的内容播放节点确定为目标播放节点;
将所述目标播放节点所在的内容进度条确定为目标进度条段;
将所述目标进度条段关联的所述用户专注度中的最小值确定为最差专注度;
获取所述最差专注度对应的播放调整策略;
根据所述播放调整策略对所述目标进度条段进行调整。
5.根据权利要求4所述的方法,其特征在于,所述播放调整策略包括播放起始位置、播放启动类型以及进度条展示类型;所述根据所述播放调整策略对所述目标进度条段进行调整,进一步包括:
根据所述进度条展示类型对所述目标进度条段进行调整;
当确定所述最差专注度大于第二专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的起始位置确定为所述播放起始位置;其中,所述第二专注度阈值小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置开始自动播放或者暂停于所述播放起始位置。
6.根据权利要求5所述的方法,其特征在于,所述播放调整策略还包括播放信息抽取类型以及播放窗口展示类型;所述根据所述播放调整策略对所述内容进度条进行调整,进一步包括:
当确定所述最差专注度大于第三专注度阈值且小于所述第一专注度阈值且小于所述第一专注度阈值时,将所述目标进度条段的停止位置确定为所述播放起始位置;其中,所述第三专注度阈值大于所述第二专注度阈值并且小于所述第一专注度阈值;
将所述播放启动类型确定为从所述播放起始位置自动播放;
将所述目标进度条段对应的所述多媒体内容确定为待回看内容;
根据所述播放信息抽取类型对所述待回看内容进行抽取,得到播放片段信息;
根据所述播放窗口展示类型生成所述播放片段信息对应的播放窗口;
根据所述播放窗口对应的时间轴信息,将所述播放窗口展示在所述目标进度条段上。
7.根据权利要求6所述的方法,其特征在于,所述根据所述进度条展示类型对所述目标时间轴段对应的进度条进行调整之后,进一步包括:
响应于所述目标进度条段的第一方向上的第一控制操作;
根据所述第一控制操作对所述进度条展示类型进行切换;
响应于切换后的所述目标进度条段的第二方向上的第二控制操作;其中,所述第二方向与所述第一方向不同;
根据所述第二控制操作从所述播放窗口中确定目标窗口进行播放。
8.一种多媒体内容的播放装置,其特征在于,所述装置包括:
检测模块,用于检测用户在多媒体内容的播放时间内的用户行为信息;
确定模块,用于根据所述用户行为信息确定所述用户在所述播放时间内的用户专注度;
关联模块,用于根据所述播放时间将所述用户专注度与所述多媒体内容的内容进度条进行关联,得到专注度关联信息;
调整模块,用于根据所述专注度关联信息对所述内容进度条进行调整。
9.一种多媒体内容的播放设备,其特征在于,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如权利要求1-7任意一项所述的多媒体内容的播放方法的操作。
10.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一可执行指令,所述可执行指令在多媒体内容的播放设备上运行时,使得多媒体内容的播放设备执行如权利要求1-7任意一项所述的多媒体内容的播放方法的操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110921365.8A CN113709566B (zh) | 2021-08-11 | 2021-08-11 | 多媒体内容的播放方法、装置、设备以及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110921365.8A CN113709566B (zh) | 2021-08-11 | 2021-08-11 | 多媒体内容的播放方法、装置、设备以及计算机存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113709566A true CN113709566A (zh) | 2021-11-26 |
CN113709566B CN113709566B (zh) | 2024-03-22 |
Family
ID=78652303
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110921365.8A Active CN113709566B (zh) | 2021-08-11 | 2021-08-11 | 多媒体内容的播放方法、装置、设备以及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113709566B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023045912A1 (en) * | 2021-09-21 | 2023-03-30 | International Business Machines Corporation | Selective content transfer for streaming content |
WO2024036979A1 (zh) * | 2022-08-19 | 2024-02-22 | 腾讯科技(深圳)有限公司 | 一种多媒体资源播放方法及相关装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150135068A1 (en) * | 2013-11-11 | 2015-05-14 | Htc Corporation | Method for performing multimedia management utilizing tags, and associated apparatus and associated computer program product |
CN105812889A (zh) * | 2016-03-31 | 2016-07-27 | 北京奇艺世纪科技有限公司 | 一种播放进度条的显示方法及系统 |
CN110337032A (zh) * | 2019-06-11 | 2019-10-15 | 福建天泉教育科技有限公司 | 基于关注度的视频播放方法、存储介质 |
CN110809188A (zh) * | 2019-12-03 | 2020-02-18 | 珠海格力电器股份有限公司 | 视频内容的识别方法、装置、存储介质及电子设备 |
CN111918139A (zh) * | 2020-07-20 | 2020-11-10 | 维沃移动通信有限公司 | 视频播放方法、装置、设备和存储介质 |
CN112492370A (zh) * | 2019-09-12 | 2021-03-12 | 上海哔哩哔哩科技有限公司 | 进度条的展示方法、装置、计算机设备及可读存储介质 |
CN112954486A (zh) * | 2021-04-02 | 2021-06-11 | 成都艾体验科技有限公司 | 基于视线注意力的车载视频留痕处理方法 |
-
2021
- 2021-08-11 CN CN202110921365.8A patent/CN113709566B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150135068A1 (en) * | 2013-11-11 | 2015-05-14 | Htc Corporation | Method for performing multimedia management utilizing tags, and associated apparatus and associated computer program product |
CN105812889A (zh) * | 2016-03-31 | 2016-07-27 | 北京奇艺世纪科技有限公司 | 一种播放进度条的显示方法及系统 |
CN110337032A (zh) * | 2019-06-11 | 2019-10-15 | 福建天泉教育科技有限公司 | 基于关注度的视频播放方法、存储介质 |
CN112492370A (zh) * | 2019-09-12 | 2021-03-12 | 上海哔哩哔哩科技有限公司 | 进度条的展示方法、装置、计算机设备及可读存储介质 |
CN110809188A (zh) * | 2019-12-03 | 2020-02-18 | 珠海格力电器股份有限公司 | 视频内容的识别方法、装置、存储介质及电子设备 |
CN111918139A (zh) * | 2020-07-20 | 2020-11-10 | 维沃移动通信有限公司 | 视频播放方法、装置、设备和存储介质 |
CN112954486A (zh) * | 2021-04-02 | 2021-06-11 | 成都艾体验科技有限公司 | 基于视线注意力的车载视频留痕处理方法 |
Non-Patent Citations (3)
Title |
---|
YANFENG ZHANG, YI WEI, LIANG MA: "Research and application of security video labeling platform", 《2018 INTERNATIONAL CONFERENCE ON SECURITY, PATTERN ANALYSIS, AND CYBERNETICS (SPAC)》, pages 337 - 342 * |
王东 , 林宏 , 左欣: "基于在线视频学习的用户观看行为抽取方法", 《四川理工学院学报(自然科学版)》, vol. 28, no. 6, pages 20 - 24 * |
王林: "交互式视频中进度条上不同类型线索点对学习的影响", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023045912A1 (en) * | 2021-09-21 | 2023-03-30 | International Business Machines Corporation | Selective content transfer for streaming content |
US11641511B2 (en) | 2021-09-21 | 2023-05-02 | International Business Machines Corporation | Selective content transfer for streaming content |
WO2024036979A1 (zh) * | 2022-08-19 | 2024-02-22 | 腾讯科技(深圳)有限公司 | 一种多媒体资源播放方法及相关装置 |
Also Published As
Publication number | Publication date |
---|---|
CN113709566B (zh) | 2024-03-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10242379B2 (en) | Tracking visual gaze information for controlling content display | |
US11030987B2 (en) | Method for selecting background music and capturing video, device, terminal apparatus, and medium | |
US11081137B2 (en) | Method and device for processing multimedia information | |
RU2597232C1 (ru) | Способ предоставления видео в режиме реального времени и устройство для его осуществления, а также сервер и терминальное устройство | |
CN108632658B (zh) | 一种弹幕显示方法、终端 | |
CN107613400B (zh) | 一种语音弹幕的实现方法和装置 | |
US9344760B2 (en) | Information processing apparatus, information processing method, and program | |
WO2018017836A1 (en) | Live video streaming services with machine-learning based highlight replays | |
CN108076386B (zh) | 视频卡顿检测方法及装置、存储介质 | |
CN113709566B (zh) | 多媒体内容的播放方法、装置、设备以及计算机存储介质 | |
CN106921883B (zh) | 一种视频播放处理的方法及装置 | |
KR20210042952A (ko) | 이미지 처리 방법 및 장치, 전자 기기 및 저장 매체 | |
CN111753135B (zh) | 视频展示方法、装置、终端、服务器、系统及存储介质 | |
US20150331598A1 (en) | Display device and operating method thereof | |
CN106254807B (zh) | 提取静止图像的电子设备和方法 | |
US9491401B2 (en) | Video call method and electronic device supporting the method | |
TW202044065A (zh) | 影片處理方法及裝置、電子設備和儲存介質 | |
US20230269459A1 (en) | Photographing processing method and apparatus, electronic device, and readable storage medium | |
CN110740373B (zh) | 一种音/视频文件的缓冲方法及相关装置 | |
CN112153396A (zh) | 页面展示方法、装置、系统和存储介质 | |
CN106921802B (zh) | 音频数据的播放方法及装置 | |
CN111064930B (zh) | 分屏显示方法、显示终端及存储装置 | |
CN114257824B (zh) | 直播显示方法、装置、存储介质及计算机设备 | |
CN112188221B (zh) | 播放控制方法、装置、计算机设备及存储介质 | |
CN113591515B (zh) | 专注度处理方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |