CN107870999A - 多媒体播放方法、装置、存储介质及电子设备 - Google Patents

多媒体播放方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN107870999A
CN107870999A CN201711085747.1A CN201711085747A CN107870999A CN 107870999 A CN107870999 A CN 107870999A CN 201711085747 A CN201711085747 A CN 201711085747A CN 107870999 A CN107870999 A CN 107870999A
Authority
CN
China
Prior art keywords
file
storehouse
read
intermediate images
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711085747.1A
Other languages
English (en)
Other versions
CN107870999B (zh
Inventor
王君龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201711085747.1A priority Critical patent/CN107870999B/zh
Publication of CN107870999A publication Critical patent/CN107870999A/zh
Application granted granted Critical
Publication of CN107870999B publication Critical patent/CN107870999B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/489Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using time information
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/062Combinations of audio and printed presentations, e.g. magnetically striped cards, talking books, magnetic tapes with printed texts thereon
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems

Abstract

本申请公开了一种多媒体播放方法、装置、存储介质以及电子设备,该多媒体播放方法应用于电子设备,包括:获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数;根据该点读次数从已点读文件中选出目标文件;根据该目标文件和预设图像库建立临时图像库;基于该临时图像库确定目标多媒体文件进行播放,从而无需依赖特定的点读笔和教材即可实现点读,成本低廉,灵活性高。

Description

多媒体播放方法、装置、存储介质及电子设备
技术领域
本申请涉及计算机技术领域,尤其涉及一种多媒体播放方法、装置、存储介质及电子设备。
背景技术
点读设备是运用光电识别技术,结合先进的数码语音技术开发而成的一种阅读和学习工具。
现有的点读设备通常为摄像式点读,其包括读音装置、信号发射笔、配套的课本、以及与课本相对设置的摄像装置,该课本需要经过特殊工艺处理,每一页面设置有页面标识,每一页面内容设置有“经纬位置”。当用户通过信号发射笔点击课本的页面内容时,信号发射笔会向摄像装置发射启动信号以触发其对课本进行图像采集,而采集的图像则直接提供给读音装置处理,以分析出所点击页面的页面标识和具体的经纬坐标,并根据页面标识和经纬坐标调用对应的语音数据进行播放,从而实现课本的点读功能,使阅读变得生动有趣。
但是,这种点读功能的实现需依赖特定的点读笔和点读教材,成本较高,局限性大。
发明内容
本申请实施例提供一种多媒体播放方法、装置、存储介质以及电子设备,能低成本的实现点读功能,灵活性高。
本申请实施例提供了一种多媒体播放方法,应用于电子设备,包括:
获取历史时段内用户的点读信息,所述点读信息包括已点读文件、以及每一已点读文件的点读次数;
根据所述点读次数从已点读文件中选出目标文件;
根据所述目标文件和预设图像库建立临时图像库;
基于所述临时图像库确定目标多媒体文件进行播放。
本申请实施例还提供了一种多媒体播放装置,应用于电子设备,包括:
获取模块,用于获取历史时段内用户的点读信息,所述点读信息包括已点读文件、以及每一已点读文件的点读次数;
选择模块,用于根据所述点读次数从已点读文件中选出目标文件;
建立模块,用于根据所述目标文件和预设图像库建立临时图像库;
播放模块,用于基于所述临时图像库确定目标多媒体文件进行播放。
进一步地,所述选择模块具体用于:
获取点读次数超过预设阈值的已点读文件作为目标文件,或者,
统计所述已点读文件的总数量,并按照所述点读次数从大到小的顺序对所述已点读文件进行排序;
根据所述总数量和预设比例确定筛选数量;
将排位最靠前的所述筛选数量个已点读文件作为目标文件。
进一步地,所述建立模块具体包括:
确定子模块,用于根据所述目标文件从预设多媒体文件库中确定关联文件;
第一获取子模块,用于从预设图像库中获取与所述关联文件对应的预设图像,作为临时图像;
建立子模块,用于根据所述临时图像建立临时图像库。
进一步地,所述确定子模块具体用于:
确定所述目标文件在预设多媒体文件库中的存储位置;
从所述预设多媒体文件库中获取与所述存储位置相邻的前一多媒体文件和后一多媒体文件;
将所述前一多媒体文件、后一多媒体文件和所述目标文件作为关联文件。
进一步地,所述点读信息还包括已点读文件的点读时间,所述建立子模块具体用于:
确定所述目标文件的点读时间所属的时间段;
建立所述时间段与对应临时图像的关联关系;
将所述关联关系存储在临时图像库中,以建立所述临时图像库。
进一步地,所述播放模块具体包括:
第二获取子模块,用于获取点读指令;根据所述点读指令进行图像拍摄,并获取拍摄图像、以及拍摄时间;
匹配子模块,用于根据所述拍摄时间将所述拍摄图像与临时图像库进行匹配;
播放子模块,用于若匹配成功,则从所述预设多媒体文件库中获取所述匹配成功的临时图像对应的预设多媒体文件,作为目标多媒体文件;播放所述目标多媒体文件。
进一步地,所述匹配子模块具体用于:
确定所述拍摄时间所属的时间段,作为目标时间段;
根据所述关联关系,从所述临时图像库中获取所述目标时间段对应的临时图像,作为目标图像;
将所述拍摄图像与目标图像进行匹配。
本申请实施例还提供了一种存储介质,所述存储介质中存储有多条指令,所述指令适于由处理器加载以执行上述任一项多媒体播放方法。
本申请实施例还提供了一种电子设备,包括处理器和存储器,所述处理器与所述存储器电性连接,所述存储器用于存储指令和数据,所述处理器用于上述任一项所述的多媒体播放方法中的步骤。
本申请提供的多媒体播放方法、装置、存储介质以及电子设备,应用于电子设备,通过获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数,并根据该点读次数从已点读文件中选出目标文件,之后根据该目标文件和预设图像库建立临时图像库,并基于该临时图像库确定目标多媒体文件进行播放,从而无需依赖特定的点读笔和教材即可实现点读,成本低廉,灵活性高,并且由于是基于用户以往的点读习惯进行图像匹配,能提高点读效率,方法简单。
附图说明
下面结合附图,通过对本申请的具体实施方式详细描述,将使本申请的技术方案及其它有益效果显而易见。
图1为本申请实施例提供的电子设备点读流程的场景示意图。
图2为本申请实施例提供的多媒体播放方法的流程示意图。
图3为本申请实施例提供的多媒体播放方法的另一流程示意图。
图4为本申请实施例提供的临时图像库的示意图。
图5为本申请实施例提供的多媒体播放装置的结构示意图。
图6为本申请实施例提供的播放模块的结构示意图。
图7为本申请实施例提供的多媒体播放装置的另一结构示意图。
图8为本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供一种多媒体播放方法、装置、存储介质以及电子设备。
一种多媒体播放方法,应用于电子设备,包括:获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数;根据该点读次数从已点读文件中选出目标文件;根据该目标文件和预设图像库建立临时图像库;基于该临时图像库确定目标多媒体文件进行播放。
其中,该历史时段可以是人为设定的,比如过去一个月。该多媒体文件(已点读文件)可以是音频文件或视频文件,其可以是厂家根据点读课本的内容提前录制好的,并且在录制过程中,对于每次录制的课本内容,厂家都可以对其进行拍照,拍摄的照片可以作为预设图像建立该预设图像库,之后将该照片和对应录制的多媒体文件关联存储,这样,后续用户就可以利用带摄像头的电子设备实现该多媒体文件的点读了。
具体的,请参见图1,电子设备可以获取过去一个月内用户点读过的多媒体文件(也即已点读文件)、以及在这个月内每个多媒体文件的点读次数,然后根据点读次数从已点读文件中选择全部或部分文件作为目标文件,并根据目标文件从预设图像库中挑选出一小部分组建临时图像库,后续用户在点读过程中,比如用户点读包含A1-An这n个文字的某个句子时,可以先通过该电子设备中内置的摄像头对课本的相应位置进行拍照,得到的照片可以先与临时图像库进行匹配,若匹配不成功,再与预设图像库进行匹配,之后根据匹配成功的目标图像在多媒体文件库中查找对应的多媒体文件,作为目标多媒体文件进行播放,从而实现点读功能。
如图2所示,图2是本申请实施例提供的多媒体播放方法的流程示意图。该多媒体播放方法应用于电子设备,其具体流程可以如下:
101、获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数。
本实施例中,该历史时段可以是人为设定的,比如最近一个月或两个月。该已点读文件可以是音频、视频等多媒体文件。当用户每次点读完时,电子设备都会对这次的点读信息进行记录,比如点读的内容、点读时间等等。
102、根据该点读次数从已点读文件中选出目标文件。
例如,上述步骤102具体可以包括:
获取点读次数超过预设阈值的已点读文件作为目标文件,或者,
统计该已点读文件的总数量,并按照该点读次数从大到小的顺序对该已点读文件进行排序;
根据该总数量和预设比例确定筛选数量;
将排位最靠前的该筛选数量个已点读文件作为目标文件。
本实施例中,该预设阈值可以根据用户的点读频率而定,通常点读频率越高,该预设阈值可以设置的越大,比如可以是10。该预设比例主要用于限定后期点读过程中,图像匹配所涉及的需匹配图像的数量(也即临时图像库的大小),其可以是人为设定的,比如0.6。
需要解释的是,由于通过点读方式进行学习的过程一般是循序渐进、规律性的,用户在学习完当前内容时,通常会继续获取接下来的下一内容进行学习,也即连续两次的播放文件应该是有关联的,并且对于疑点难点的内容,用户会进行多次点读,针对这种现象,我们可以提取出用户近期点读次数比较多的文件作为目标文件,以便可以根据目标文件预测下一次用户可能点读的文件。
103、根据该目标文件和预设图像库建立临时图像库。
例如,上述步骤103具体可以包括:
(1)根据该目标文件从预设多媒体文件库中确定关联文件。
例如,上述步骤(1)具体可以包括:
确定该目标文件在预设多媒体文件库中的存储位置;
从该预设多媒体文件库中获取与该存储位置相邻的前一多媒体文件和后一多媒体文件;
将该前一多媒体文件、后一多媒体文件和该目标文件作为关联文件。
本实施例中,该预设多媒体文件库应该是提前设置好的,比如厂家可以提前针对点读课本中的每个句子、段落或者课文进行音频或视频的录制,之后将录制好的音频或视频作为预设多媒体文件,按照一定的存储方式存储在该预设多媒体库中,相邻存储位置的多媒体文件一般是上下文关系,具有强相关性。
需要说明的是,该存储方式可以是直接存储,也可以采用文件夹的方式分组存储,比如对于同一页的点读内容(段落、文字或句子)可以存储在同一文件夹中,不同点读方式(比如单词点读、句子点读、段落点读、文章点读等)的点读内容可以采用不同的文件夹。
当采用文件夹的方式分组存储时,该存储位置指目标文件在文件夹中的位置,上述步骤“从该预设多媒体文件库中获取与该存储位置相邻的前一多媒体文件和后一多媒体文件”具体可以包括:
当该存储位置为首位时,从该预设多媒体文件库中获取与该目标文件夹相邻的前一文件夹;将该前一文件夹中存储位置位于末位的多媒体文件作为前一多媒体文件,将该目标文件所在的文件夹中与目标文件相邻的多媒体文件作为后一多媒体文件;
当该存储位置为末位时,从该预设多媒体文件库中获取与该目标文件夹相邻的后一文件夹;将该后一文件夹中存储位置位于首位的多媒体文件作为后一多媒体文件,将该目标文件所在的文件夹中与目标文件相邻的多媒体文件作为前一多媒体文件;
当该存储位置为中间位时,将该目标文件所在的文件夹中与目标文件相邻的两个多媒体文件作为前一多媒体文件和后一多媒体文件。
(2)从预设图像库中获取与该关联文件对应的预设图像,作为临时图像。
本实施例中,该关联文件包括近期用户点读的文件、以及根据用户近期的点读行为预测的下一点读文件。该预设图像库应该是提前设置好的,比如厂家可以提前对点读课本中的每个句子、段落或者课文进行拍照,并将照片就作为预设图像存储在该预设图像库中,之后可以将照片和录制好的对应多媒体文件进行关联存储,从而后续可以根据照片找到对应的多媒体文件,实现多媒体文件的点读功能。
(3)根据该临时图像建立临时图像库。
本实施例中,可以直接将临时图像存储在临时图像库中,也可以结合时间因素进行存储,当结合时间因素进行存储时这主要是考虑到用户在不同的时段具有不同的点读需求和习惯,比如早上习惯点读整篇文章,晚上习惯点读单个文字或句子等,若结合时间因素进行存储,可以提高后续图像匹配速度。
例如,当结合时间因素存储时,该点读信息还可以包括已点读文件的点读时间,此时,上述步骤(3)具体可以包括:
确定该目标文件的点读时间所属的时间段;
建立该时间段与对应临时图像的关联关系;
将该关联关系存储在临时图像库中,以建立该临时图像库。
本实施例中,该点读时间主要指一天中的时间,比如X时X分。该时间段可以是提前设置好的,比如可以每两个小时为一个时间段,这样,一天就可以被分为12个时间段。由于每一目标文件都有对应的关联文件,故在图像存储过程中,每一目标文件对应一个图像组,每一图像组与该目标文件的时间段进行关联。
104、基于该临时图像库确定目标多媒体文件进行播放。
例如,上述步骤104具体可以包括:
获取点读指令;
根据该点读指令进行图像拍摄,并获取拍摄图像、以及拍摄时间;
根据该拍摄时间将该拍摄图像与临时图像库进行匹配;
若匹配成功,则从该预设多媒体文件库中获取该匹配成功的临时图像对应的预设多媒体文件,作为目标多媒体文件;
播放该目标多媒体文件。
本实施例中,该点读指令可以是用户触发生成的,该触发动作可以是点击、语音控制或者其他方式。当电子设备获取到该点读指令时,可以启动内置摄像头对点读内容进行拍摄,得到的照片用来匹配临时图像库,通常,由于临时图像库中的图像和用户近期的点读行为密切相关,故很大概率会匹配成功,从而无需在数量庞大的预设图像库进行匹配操作,极大降低了匹配量,提高了点读效率。当然,若临时图像库匹配不成功,则需要进一步在预设图像库中进行匹配。
进一步地,上述步骤“根据该拍摄时间将该拍摄图像与临时图像库进行匹配”具体可以包括:
确定该拍摄时间所属的时间段,作为目标时间段;
根据该关联关系,从该临时图像库中获取该目标时间段对应的临时图像,作为目标图像;
将该拍摄图像与目标图像进行匹配。
本实施例中,由于临时图像库中的图像是根据时间段存储的,每一时间段的图像都是根据过去用户在这段时间的点读操作分析得到的,很大程度反映了用户在这个时段的点读习惯,后续通过时间查找匹配图像时,有利于可匹配效率。
由上述可知,本实施例提供的多媒体播放方法,应用于电子设备,通过获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数,并根据该点读次数从已点读文件中选出目标文件,之后根据该目标文件和预设图像库建立临时图像库,并基于该临时图像库确定目标多媒体文件进行播放,从而无需依赖特定的点读笔和教材即可实现点读,成本低廉,灵活性高,并且由于是基于用户以往的点读习惯进行图像匹配,能提高点读效率,方法简单。
在本实施例中,将以该多媒体播放装置具体集成在电子设备中为例进行详细说明。
请参见图3,一种多媒体播放方法,具体流程可以如下:
201、电子设备获取历史时段内用户的点读信息,该点读信息包括已点读文件、每一已点读文件的点读次数以及点读时间。
202、电子设备统计该已点读文件的总数量,并按照该点读次数从大到小的顺序对该已点读文件进行排序。
譬如,该历史时间段可以是过去一个月,也即电子设备可以获取最近一个月内用户每次点读操作的点读内容和点读时间,并统计每一点读内容的总点读次数。
203、电子设备根据该总数量和预设比例确定筛选数量,并将排位最靠前的该筛选数量个已点读文件作为目标文件。
譬如,该预设比例可以是人为设定的0.6,也即若历史时段内用户点读过M个文件,则选取的目标文件的数量为0.6M,且选取的目标文件是所有文件中点读率最高的。
204、电子设备确定该目标文件在预设多媒体文件库中的存储位置,并从该预设多媒体文件库中获取与该存储位置相邻的前一多媒体文件和后一多媒体文件。
205、电子设备将该前一多媒体文件、后一多媒体文件和该目标文件作为关联文件,并从预设图像库中获取该关联文件对应的预设图像,作为临时图像。
譬如,该预设多媒体文件库中的多媒体文件可以是厂家提前针对点读课本中的每个句子、段落或者课文录制的音频或视频,其可以采用文件夹的方式存储,比如同一页点读内容(段落、文字或句子)的多媒体文件位于同一文件夹,不同点读方式(比如单词点读、句子点读、段落点读、文章点读等)的点读内容可以采用不同的文件夹来存储各自的多媒体文件。
206、电子设备确定该目标文件的点读时间所属的时间段,并建立该时间段与对应临时图像的关联关系,之后将该关联关系存储在临时图像库中,以建立该临时图像库。
譬如,请参见图4,可以将每天分为n个时间段(TI、T2...Tn),比如n为12,也即每两个小时为一个时间段,其可以是整点时段,比如12:00-14:00,也可以是非整点的,比如12:30-14:30,而对于任意一个时间段Ti,i∈(1,n),电子设备都可以根据用户以往的点读操作预测出会在这个时段点读的多媒体文件(也即关联文件),并将这些多媒体文件对应的照片(临时图像)Pi与该时间段关联存储在临时图像库中。当然,由于每个人的使用习惯、使用时间均不同,不同用户的临时图像库中的临时图像通常也不同,并且有些时间段对应的临时图像可能为0。
207、电子设备获取点读指令,并根据该点读指令进行图像拍摄,并获取拍摄图像、以及拍摄时间。
譬如,用户可以通过点击点读界面上的“点读”按钮来生成该点读指令,当电子设备获取到该点读指令时,可以启动内置摄像头对点读内容进行拍摄,得到的照片和拍摄时间用来匹配临时图像库。
208、电子设备确定该拍摄时间所属的时间段,作为目标时间段,并根据该关联关系,从该临时图像库中获取该目标时间段对应的临时图像,作为目标图像。
209、电子设备将该拍摄图像与目标图像进行匹配,并从该预设多媒体文件库中获取该匹配成功的临时图像对应的预设多媒体文件,作为目标多媒体文件,并播放该目标多媒体文件。
譬如,若拍摄时间t所属的时间段为Tj,j∈(1,n),比如拍摄时间20:08所属的时间段可以是20:00-22:00,则电子设备可以从临时图像库中获取Tj对应的临时图像Pj作为匹配模板,将该匹配模板Pj与拍摄图像进行匹配,若成功,则直接获取Pj对应的预设多媒体文件播放。
由上述可知,本实施例提供的多媒体播放方法,应用于电子设备,其中电子设备可以获取历史时段内用户的点读信息,该点读信息包括已点读文件、每一已点读文件的点读次数以及点读时间,接着,统计该已点读文件的总数量,并按照该点读次数从大到小的顺序对该已点读文件进行排序,接着,根据该总数量和预设比例确定筛选数量,并将排位最靠前的该筛选数量个已点读文件作为目标文件,之后,确定该目标文件在预设多媒体文件库中的存储位置,并从该预设多媒体文件库中获取与该存储位置相邻的前一多媒体文件和后一多媒体文件,接着,将该前一多媒体文件、后一多媒体文件和该目标文件作为关联文件,并从预设图像库中获取该关联文件对应的预设图像,作为临时图像,接着,确定该目标文件的点读时间所属的时间段,并建立该时间段与对应临时图像的关联关系,之后将该关联关系存储在临时图像库中,以建立该临时图像库,从而能根据用户以往的点读习惯灵活设置图像匹配库,尽可能减少匹配数量,节约匹配时间,之后,电子设备可以获取点读指令,并根据该点读指令进行图像拍摄,并获取拍摄图像、以及拍摄时间,接着,确定该拍摄时间所属的时间段,作为目标时间段,并根据该关联关系,从该临时图像库中获取该目标时间段对应的临时图像,作为目标图像,接着,将该拍摄图像与目标图像进行匹配,并从该预设多媒体文件库中获取该匹配成功的临时图像对应的预设多媒体文件,作为目标多媒体文件,并播放该目标多媒体文件,从而无需依赖特定的点读笔和教材即可实现点读,成本低廉,灵活性高,并且由于是基于用户以往的点读习惯进行图像匹配,能提高点读效率,方法简单。
根据上述实施例所描述的方法,本实施例将从多媒体播放装置的角度进一步进行描述,该多媒体播放装置具体可以作为独立的实体来实现,也可以集成在电子设备,比如终端中来实现,该终端可以包括手机、平板电脑以及个人计算机等。
请参阅图5,图5具体描述了本申请实施例提供的多媒体播放装置,应用于电子设备,该多媒体播放装置可以包括:获取模块10、选择模块20、建立模块30和播放模块40,其中:
(1)获取模块10
获取模块10,用于获取点读指令获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数。
本实施例中,该历史时段可以是人为设定的,比如最近一个月或两个月。该已点读文件可以是音频、视频等多媒体文件。当用户每次点读完时,电子设备都会对这次的点读信息进行记录,比如点读的内容、点读时间等等。
(2)选择模块20
选择模块20,用于根据该点读次数从已点读文件中选出目标文件。
例如,该选择模块20具体可以用于:
获取点读次数超过预设阈值的已点读文件作为目标文件,或者,
统计该已点读文件的总数量,并按照该点读次数从大到小的顺序对该已点读文件进行排序;
根据该总数量和预设比例确定筛选数量;
将排位最靠前的该筛选数量个已点读文件作为目标文件。
本实施例中,该预设阈值可以根据用户的点读频率而定,通常点读频率越高,该预设阈值可以设置的越大,比如可以是10。该预设比例主要用于限定后期点读过程中,图像匹配所涉及的需匹配图像的数量(也即临时图像库的大小),其可以是人为设定的,比如0.6。
需要解释的是,由于通过点读方式进行学习的过程一般是循序渐进、规律性的,用户在学习完当前内容时,通常会继续获取接下来的下一内容进行学习,也即连续两次的播放文件应该是有关联的,并且对于疑点难点的内容,用户会进行多次点读,针对这种现象,我们可以提取出用户近期点读次数比较多的文件作为目标文件,以便可以根据目标文件预测下一次用户可能点读的文件。
(3)建立模块30
建立模块30,用于根据该目标文件和预设图像库建立临时图像库。
例如,请参见图6,该建立模块30具体可以包括确定子模块31、第一获取子模块32和建立子模块33,其中:
确定子模块31,用于根据该目标文件从预设多媒体文件库中确定关联文件。
例如,该确定子模块31具体可以用于:
确定该目标文件在预设多媒体文件库中的存储位置;
从该预设多媒体文件库中获取与该存储位置相邻的前一多媒体文件和后一多媒体文件;
将该前一多媒体文件、后一多媒体文件和该目标文件作为关联文件。
本实施例中,该预设多媒体文件库应该是提前设置好的,比如厂家可以提前针对点读课本中的每个句子、段落或者课文进行音频或视频的录制,之后将录制好的音频或视频作为预设多媒体文件,按照一定的存储方式存储在该预设多媒体库中,相邻存储位置的多媒体文件一般是上下文关系,具有强相关性。
需要说明的是,该存储方式可以是直接存储,也可以采用文件夹的方式分组存储,比如对于同一页的点读内容(段落、文字或句子)可以存储在同一文件夹中,不同点读方式(比如单词点读、句子点读、段落点读、文章点读等)的点读内容可以采用不同的文件夹。
当采用文件夹的方式分组存储时,该存储位置指目标文件在文件夹中的位置,此时,该确定子模块31进一步可以用于:
当该存储位置为首位时,从该预设多媒体文件库中获取与该目标文件夹相邻的前一文件夹;将该前一文件夹中存储位置位于末位的多媒体文件作为前一多媒体文件,将该目标文件所在的文件夹中与目标文件相邻的多媒体文件作为后一多媒体文件;
当该存储位置为末位时,从该预设多媒体文件库中获取与该目标文件夹相邻的后一文件夹;将该后一文件夹中存储位置位于首位的多媒体文件作为后一多媒体文件,将该目标文件所在的文件夹中与目标文件相邻的多媒体文件作为前一多媒体文件;
当该存储位置为中间位时,将该目标文件所在的文件夹中与目标文件相邻的两个多媒体文件作为前一多媒体文件和后一多媒体文件。
第一获取子模块32,用于从预设图像库中获取与该关联文件对应的预设图像,作为临时图像。
本实施例中,该关联文件包括近期用户点读的文件、以及根据用户近期的点读行为预测的下一点读文件。该预设图像库应该是提前设置好的,比如厂家可以提前对点读课本中的每个句子、段落或者课文进行拍照,并将照片就作为预设图像存储在该预设图像库中,之后可以将照片和录制好的对应多媒体文件进行关联存储,从而后续可以根据照片找到对应的多媒体文件,实现多媒体文件的点读功能。
建立子模块33,用于根据该临时图像建立临时图像库。
本实施例中,建立子模块33可以直接将临时图像存储在临时图像库中,也可以结合时间因素进行存储,当结合时间因素进行存储时这主要是考虑到用户在不同的时段具有不同的点读需求和习惯,比如早上习惯点读整篇文章,晚上习惯点读单个文字或句子等,若结合时间因素进行存储,可以提高后续图像匹配速度。
例如,当结合时间因素存储时,该点读信息还可以包括已点读文件的点读时间,此时,该建立子模块33具体可以用于:
确定该目标文件的点读时间所属的时间段;
建立该时间段与对应临时图像的关联关系;
将该关联关系存储在临时图像库中,以建立该临时图像库。
本实施例中,该点读时间主要指一天中的时间,比如X时X分。该时间段可以是提前设置好的,比如可以每两个小时为一个时间段,这样,一天就可以被分为12个时间段。由于每一目标文件都有对应的关联文件,故在图像存储过程中,每一目标文件对应一个图像组,每一图像组与该目标文件的时间段进行关联。
(4)播放模块40
播放模块40,用于基于该临时图像库确定目标多媒体文件进行播放。
例如,请参见图7,该播放模块40具体可以包括第二获取子模块41、匹配子模块42和播放子模块43,其中:
第二获取子模块41,用于获取点读指令;根据该点读指令进行图像拍摄,并获取拍摄图像、以及拍摄时间。
本实施例中,该点读指令可以是用户触发生成的,该触发动作可以是点击、语音控制或者其他方式,比如用户可以通过点击点读界面上的“点读”按钮来生成该点读指令,当第二获取子模块41获取到该点读指令时,可以启动内置摄像头对点读内容进行拍摄。
匹配子模块42,用于根据该拍摄时间将该拍摄图像与临时图像库进行匹配。
例如,该匹配子模块42具体可以用于:
确定该拍摄时间所属的时间段,作为目标时间段;
根据该关联关系,从该临时图像库中获取该目标时间段对应的临时图像,作为目标图像;
将该拍摄图像与目标图像进行匹配。
本实施例中,匹配子模块42可以将拍摄得到的照片用来匹配临时图像库,通常,由于临时图像库中的图像和用户近期的点读行为密切相关,故很大概率会匹配成功,从而匹配子模块42无需在数量庞大的预设图像库进行匹配操作,极大降低了匹配量,提高了点读效率。当然,若临时图像库匹配不成功,匹配子模块42需要进一步在预设图像库中进行匹配。
播放子模块43,用于若匹配成功,则从该预设多媒体文件库中获取该匹配成功的临时图像对应的预设多媒体文件,作为目标多媒体文件;播放该目标多媒体文件。
本实施例中,由于临时图像库中的图像是根据时间段存储的,每一时间段的图像都是根据过去用户在这段时间的点读操作分析得到的,很大程度反映了用户在这个时段的点读习惯,后续通过时间查找匹配图像时,有利于可匹配效率。
具体实施时,以上各个单元可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个单元的具体实施可参见前面的方法实施例,在此不再赘述。
由上述可知,本实施例提供的多媒体播放装置,应用于电子设备,通过获取模块10获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数,选择模块20根据该点读次数从已点读文件中选出目标文件,之后建立模块30根据该目标文件和预设图像库建立临时图像库,播放模块40基于该临时图像库确定目标多媒体文件进行播放,从而无需依赖特定的点读笔和教材即可实现点读,成本低廉,灵活性高,并且由于是基于用户以往的点读习惯进行图像匹配,能提高点读效率,方法简单。
另外,本申请实施例还提供了一种电子设备,该电子设备可以是智能手机、平板电脑等设备。图8所示,电子设备900包括处理器901、存储器902、显示屏903以及控制电路904。其中,处理器901分别与存储器902、显示屏903、控制电路904电性连接。
处理器901是电子设备900的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或加载存储在存储器902内的应用程序,以及调用存储在存储器902内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
在本实施例中,电子设备900中的处理器901会按照如下的步骤,将一个或一个以上的应用程序的进程对应的指令加载到存储器902中,并由处理器901来运行存储在存储器902中的应用程序,从而实现各种功能:
获取历史时段内用户的点读信息,该点读信息包括已点读文件、以及每一已点读文件的点读次数;
根据该点读次数从已点读文件中选出目标文件;
根据该目标文件和预设图像库建立临时图像库;
基于该临时图像库确定目标多媒体文件进行播放。
存储器902可用于存储应用程序和数据。存储器902存储的应用程序中包含有可在处理器中执行的指令。应用程序可以组成各种功能模块。处理器901通过运行存储在存储器902的应用程序,从而执行各种功能应用以及数据处理。
显示屏903可用于显示由用户输入的信息或提供给用户的信息以及终端的各种图形用户接口,这些图形用户接口可以由图像、文本、图标、视频和其任意组合来构成。
控制电路904与显示屏903电性连接,用于控制显示屏903显示信息。
在一些实施例中,如图8所示,电子设备900还包括:射频电路905、输入单元906、音频电路907、传感器908以及电源909。其中,处理器901分别与射频电路905、输入单元906、音频电路907、传感器908以及电源909电性连接。
射频电路905用于收发射频信号,以通过无线通信与网络设备或其他电子设备建立无线通讯,与网络设备或其他电子设备之间收发信号。
输入单元906可用于接收输入的数字、字符信息或用户特征信息(例如指纹),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。其中,输入单元906可以包括指纹识别模组。
音频电路907可通过扬声器、传声器提供用户与终端之间的音频接口。
电子设备900还可以包括至少一种传感器908,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板的亮度,接近传感器可在终端移动到耳边时,关闭显示面板和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于终端还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
电源909用于给电子设备900的各个部件供电。在一些实施例中,电源909可以通过电源管理系统与处理器901逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图8中未示出,电子设备900还可以包括摄像头、蓝牙模块等,在此不再赘述。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。为此,本发明实施例提供一种存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本发明实施例所提供的任一种多媒体播放方法中的步骤。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本发明实施例所提供的任一种多媒体播放方法中的步骤,因此,可以实现本发明实施例所提供的任一种多媒体播放方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
综上该,虽然本申请已以优选实施例揭露如上,但上述优选实施例并非用以限制本申请,本领域的普通技术人员,在不脱离本申请的精神和范围内,均可作各种更动与润饰,因此本申请的保护范围以权利要求界定的范围为准。

Claims (10)

1.一种多媒体播放方法,应用于电子设备,其特征在于,包括:
获取历史时段内用户的点读信息,所述点读信息包括已点读文件、以及每一已点读文件的点读次数;
根据所述点读次数从已点读文件中选出目标文件;
根据所述目标文件和预设图像库建立临时图像库;
基于所述临时图像库确定目标多媒体文件进行播放。
2.根据权利要求1所述的多媒体播放方法,其特征在于,所述根据所述点读次数从已点读文件中选出目标文件,包括;
获取点读次数超过预设阈值的已点读文件作为目标文件,或者,
统计所述已点读文件的总数量,并按照所述点读次数从大到小的顺序对所述已点读文件进行排序;
根据所述总数量和预设比例确定筛选数量;
将排位最靠前的所述筛选数量个已点读文件作为目标文件。
3.根据权利要求1所述的多媒体播放方法,其特征在于,所述根据所述目标文件和预设图像库建立临时图像库,包括:
根据所述目标文件从预设多媒体文件库中确定关联文件;
从预设图像库中获取与所述关联文件对应的预设图像,作为临时图像;
根据所述临时图像建立临时图像库。
4.根据权利要求3所述的多媒体播放方法,其特征在于,所述根据所述目标文件从预设多媒体文件库中确定关联文件,包括:
确定所述目标文件在预设多媒体文件库中的存储位置;
从所述预设多媒体文件库中获取与所述存储位置相邻的前一多媒体文件和后一多媒体文件;
将所述前一多媒体文件、后一多媒体文件和所述目标文件作为关联文件。
5.根据权利要求3所述的多媒体播放方法,其特征在于,所述点读信息还包括已点读文件的点读时间,所述根据所述临时图像建立临时图像库,包括:
确定所述目标文件的点读时间所属的时间段;
建立所述时间段与对应临时图像的关联关系;
将所述关联关系存储在临时图像库中,以建立所述临时图像库。
6.根据权利要求5所述的多媒体播放方法,其特征在于,所述基于所述临时图像库确定目标多媒体文件进行播放,包括:
获取点读指令;
根据所述点读指令进行图像拍摄,并获取拍摄图像、以及拍摄时间;
根据所述拍摄时间将所述拍摄图像与临时图像库进行匹配;
若匹配成功,则从所述预设多媒体文件库中获取所述匹配成功的临时图像对应的预设多媒体文件,作为目标多媒体文件;
播放所述目标多媒体文件。
7.根据权利要求6所述的多媒体播放方法,其特征在于,所述根据所述拍摄时间将所述拍摄图像与临时图像库进行匹配,包括:
确定所述拍摄时间所属的时间段,作为目标时间段;
根据所述关联关系,从所述临时图像库中获取所述目标时间段对应的临时图像,作为目标图像;
将所述拍摄图像与目标图像进行匹配。
8.一种多媒体播放装置,应用于电子设备,其特征在于,包括:
获取模块,用于获取历史时段内用户的点读信息,所述点读信息包括已点读文件、以及每一已点读文件的点读次数;
选择模块,用于根据所述点读次数从已点读文件中选出目标文件;
建立模块,用于根据所述目标文件和预设图像库建立临时图像库;
播放模块,用于基于所述临时图像库确定目标多媒体文件进行播放。
9.一种存储介质,其特征在于,所述存储介质中存储有多条指令,所述指令适于由处理器加载以执行权利要求1至7中任一项所述的多媒体播放方法。
10.一种电子设备,其特征在于,包括处理器和存储器,所述处理器与所述存储器电性连接,所述存储器用于存储指令和数据,所述处理器用于执行权利要求1至7中任一项所述的多媒体播放方法中的步骤。
CN201711085747.1A 2017-11-07 2017-11-07 多媒体播放方法、装置、存储介质及电子设备 Expired - Fee Related CN107870999B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711085747.1A CN107870999B (zh) 2017-11-07 2017-11-07 多媒体播放方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711085747.1A CN107870999B (zh) 2017-11-07 2017-11-07 多媒体播放方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN107870999A true CN107870999A (zh) 2018-04-03
CN107870999B CN107870999B (zh) 2020-09-08

Family

ID=61753716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711085747.1A Expired - Fee Related CN107870999B (zh) 2017-11-07 2017-11-07 多媒体播放方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN107870999B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109360454A (zh) * 2018-09-30 2019-02-19 与德科技有限公司 一种点读方法
CN109523846A (zh) * 2018-11-15 2019-03-26 武汉百行科技股份有限公司 一种播放方法及播放设备
CN109543671A (zh) * 2018-09-30 2019-03-29 与德科技有限公司 点读方法、点读笔、服务器数据处理方法及点读系统
CN111077991A (zh) * 2019-06-09 2020-04-28 广东小天才科技有限公司 一种点读控制方法及终端设备
CN111968424A (zh) * 2020-08-27 2020-11-20 北京大米科技有限公司 交互式学习方法、装置、系统及计算机存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050838A (zh) * 2014-07-15 2014-09-17 北京网梯科技发展有限公司 一种能够识别与点读普通印刷物的点读系统、设备及方法
KR20140115713A (ko) * 2013-03-22 2014-10-01 이규휘 토킹펜을 이용한 유아 학습방법
CN104253904A (zh) * 2014-09-04 2014-12-31 广东小天才科技有限公司 一种实现点读学习的方法及智能手机
CN105956174A (zh) * 2016-05-24 2016-09-21 甘肃百合物联科技信息有限公司 一种构建记忆链条及将其用于加强记忆的方法
CN106446816A (zh) * 2016-09-14 2017-02-22 北京旷视科技有限公司 人脸识别方法及装置
CN106599028A (zh) * 2016-11-02 2017-04-26 华南理工大学 一种基于视频图像处理的书本内容搜索匹配方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140115713A (ko) * 2013-03-22 2014-10-01 이규휘 토킹펜을 이용한 유아 학습방법
CN104050838A (zh) * 2014-07-15 2014-09-17 北京网梯科技发展有限公司 一种能够识别与点读普通印刷物的点读系统、设备及方法
CN104253904A (zh) * 2014-09-04 2014-12-31 广东小天才科技有限公司 一种实现点读学习的方法及智能手机
CN105956174A (zh) * 2016-05-24 2016-09-21 甘肃百合物联科技信息有限公司 一种构建记忆链条及将其用于加强记忆的方法
CN106446816A (zh) * 2016-09-14 2017-02-22 北京旷视科技有限公司 人脸识别方法及装置
CN106599028A (zh) * 2016-11-02 2017-04-26 华南理工大学 一种基于视频图像处理的书本内容搜索匹配方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109360454A (zh) * 2018-09-30 2019-02-19 与德科技有限公司 一种点读方法
CN109543671A (zh) * 2018-09-30 2019-03-29 与德科技有限公司 点读方法、点读笔、服务器数据处理方法及点读系统
CN109543671B (zh) * 2018-09-30 2021-03-02 阿里巴巴(中国)有限公司 点读方法、点读笔、服务器数据处理方法及点读系统
CN109523846A (zh) * 2018-11-15 2019-03-26 武汉百行科技股份有限公司 一种播放方法及播放设备
CN111077991A (zh) * 2019-06-09 2020-04-28 广东小天才科技有限公司 一种点读控制方法及终端设备
CN111077991B (zh) * 2019-06-09 2023-09-22 广东小天才科技有限公司 一种点读控制方法及终端设备
CN111968424A (zh) * 2020-08-27 2020-11-20 北京大米科技有限公司 交互式学习方法、装置、系统及计算机存储介质

Also Published As

Publication number Publication date
CN107870999B (zh) 2020-09-08

Similar Documents

Publication Publication Date Title
CN107870999A (zh) 多媒体播放方法、装置、存储介质及电子设备
CN108108114B (zh) 一种缩略图显示控制方法及移动终端
CN108089788B (zh) 一种缩略图显示控制方法及移动终端
CN101674409B (zh) 具有全景摄影功能的移动终端及控制其操作的方法
CN107835366A (zh) 多媒体播放方法、装置、存储介质及电子设备
WO2019137167A1 (zh) 相册管理方法、装置、存储介质及电子设备
CN104902185B (zh) 拍摄方法及装置
CN108062404A (zh) 人脸图像的处理方法、装置、可读存储介质及终端
CN107731020A (zh) 多媒体播放方法、装置、存储介质及电子设备
CN107871000B (zh) 音频播放方法、装置、存储介质及电子设备
CN108229574B (zh) 一种图片筛选的方法、装置和移动终端
CN109407936A (zh) 截图方法及相关装置
CN107707828A (zh) 一种视频处理方法及移动终端
CN105657254A (zh) 一种图像合成方法及装置
CN111629247B (zh) 一种信息显示方法、装置及电子设备
CN108198162A (zh) 照片处理方法、移动终端、服务器、系统、存储介质
CN108062760A (zh) 视频编辑方法、装置及智能移动终端
CN107943842A (zh) 一种照片标签生成方法、移动终端
CN109257649A (zh) 一种多媒体文件生成方法及终端设备
CN106843642A (zh) 一种移动终端的交互方法和移动终端
CN108984143A (zh) 一种显示控制方法及终端设备
CN108924439B (zh) 图像处理方法及相关产品
CN107766517A (zh) 一种图像数据的获取方法、装置及移动终端
CN108174109A (zh) 一种拍照方法及移动终端
CN108093137A (zh) 一种拨号方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200908

CF01 Termination of patent right due to non-payment of annual fee