CN104427350A - 关联内容处理方法及系统 - Google Patents

关联内容处理方法及系统 Download PDF

Info

Publication number
CN104427350A
CN104427350A CN201310385183.9A CN201310385183A CN104427350A CN 104427350 A CN104427350 A CN 104427350A CN 201310385183 A CN201310385183 A CN 201310385183A CN 104427350 A CN104427350 A CN 104427350A
Authority
CN
China
Prior art keywords
data
buffer
request
keywords
multimedia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310385183.9A
Other languages
English (en)
Inventor
姚立哲
陈军
尚国强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201310385183.9A priority Critical patent/CN104427350A/zh
Priority to PCT/CN2013/083815 priority patent/WO2014169571A1/zh
Priority to JP2016537075A priority patent/JP2016532969A/ja
Priority to EP13882558.3A priority patent/EP3040877A4/en
Priority to US14/915,407 priority patent/US20160203144A1/en
Publication of CN104427350A publication Critical patent/CN104427350A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/433—Query formulation using audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/686—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title or artist information, time, location or usage information, user ratings
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00—Packet switching elements
    • H04L49/90—Buffering arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了关联内容处理方法及系统，该方法包括：在播放多媒体时，缓存该多媒体中的部分或者全部数据；接收到请求，其中，该请求用于请求获取与缓存的数据相关联的内容；根据该缓存的数据获取关键字；根据该关键字检索得到该相关联的内容，并发送该相关联的内容。通过本发明解决了相关技术中无法生成用户感兴趣的关联内容的问题，实现了根据用户的请求来生成关联内容，提高了用户体验。

Description

关联内容处理方法及系统
技术领域
本发明涉及通信领域，具体而言，涉及关联内容处理方法及系统。
背景技术
发明人发现，人们在观看多媒体文件时，例如，电视或者视频时，如果对其中的某些内容感兴趣，则需要用户自己进行搜索相关的信息和内容。随着技术的发展，目前在一些视频中已经预先关联了一些相关的内容供用户观看时进行选择，但是，这些关联的内容是预先设置好的，依然无法根据用户的需要动态的生成用户感兴趣的关联内容。
针对相关技术中无法生成用户感兴趣的关联内容的问题，至今没有提出任何解决方案。
发明内容
本发明提供了关联内容处理方法及系统，以至少解决相关技术中无法生成用户感兴趣的关联内容的问题。
根据本发明的一个方面，提供了一种关联内容处理方法，包括：在播放多媒体时，缓存所述多媒体中的部分或者全部数据；接收到请求，其中，所述请求用于请求获取与缓存的数据相关联的内容；根据所述缓存的数据获取关键字；根据所述关键字检索得到所述相关联的内容。
优选地，缓存所述多媒体中的部分或者全部数据包括：在缓存所述部分或全部数据的装置上设置至少两个缓冲区，其中，所述至少两个缓冲区中的每个缓冲区用于缓冲预定时长的数据；在所述至少两个缓冲区上存储所述部分或者全部数据。
优选地，在所述至少两个缓冲区上存储所述部分或者全部数据包括：所述至少两个缓冲区的第一缓冲区数据存满之后，在所述第二缓冲区缓存数据，直到第n缓冲区数据存满，在第n缓冲区数据存储之后，将所述第一缓冲区数据删除，并重新在所述第一缓存区缓存数据，其中，所述n为缓冲区的数量。
优选地，缓存所述多媒体中的部分或者全部数据包括：在播放所述多媒体的设备缓存所述部分或者全部数据；和/或，在服务器侧缓存所述部分或者全部数据。
优选地，根据所述缓存的数据获取所述关键字包括：将从所述缓存的数据中解析出关键字作为所述关键字；或者，从所述缓存的数据中解析出一个或多个关键字，将所述一个或多个关键字发送给所述请求的发送方，将所述发送方确认的关键字作为所述关键字。
优选地，从所述缓存的数据中解析出关键字包括：在所述缓存的数据包括音频数据的情况下，将所述音频数据中的部分或全部内容识别为关键字；和/或，在所述缓存的数据包括视频数据的情况下，将获取所述视频数据的图像所对应的关键字。
优选地，播放所述多媒体的设备和发送所述请求的设备是不同的设备，播放所述多媒体的设备和发送所述请求的设备相连接。
根据本发明的另一个方面，还提供了一种关联内容处理系统，包括：缓存模块，用于在播放多媒体时，缓存所述多媒体中的部分或者全部数据；接收模块，用于接收到请求，其中，所述请求用于请求获取与缓存的数据相关联的内容；获取模块，用于根据所述缓存的数据获取关键字；检索模块，用于根据所述关键字检索得到所述相关联的内容。
优选地，所述缓存模块，用于在至少两个缓冲区上存储所述部分或者全部数据，其中，所述至少两缓冲区是在缓存所述部分或全部数据的装置上设置的，所述至少两个缓冲区中的每个缓冲区用于缓冲预定时长的数据。
优选地，所述缓存模块，用于在所述至少两个缓冲区的第一缓冲区数据存满之后，在所述第二缓冲区缓存数据，直到第n缓冲区数据存满，在第n缓冲区数据存储之后，将所述第一缓冲区数据删除，并重新在所述第一缓存区缓存数据，其中，所述n为缓冲区的数量。
优选地，所述缓存模块位于播放所述多媒体的设备中；和/或，位于提供所述多媒体的服务器中。
优选地，所述获取模块，用于将从所述缓存的数据中解析出关键字作为所述关键字；或者，所述获取模块，用于从所述缓存的数据中解析出一个或多个关键字，将所述一个或多个关键字发送给所述请求的发送方，将所述发送方确认的关键字作为所述关键字。
优选地，所述获取模块，用于在所述缓存的数据包括音频数据的情况下，将所述音频数据中的部分或全部内容识别为关键字；和/或，所述获取模块，用于在所述缓存的数据包括视频数据的情况下，将获取所述视频数据的图像所对应的关键字。
优选地，播放所述多媒体的设备和发送所述请求的设备是不同的设备，播放所述多媒体的设备和发送所述请求的设备相连接。
通过本发明，采用在播放多媒体时，缓存所述多媒体中的部分或者全部数据；接收到请求，其中，所述请求用于请求获取与缓存的数据相关联的内容；根据所述缓存的数据获取关键字；根据所述关键字检索得到所述相关联的内容，并发送所述相关联的内容。解决了相关技术中无法生成用户感兴趣的关联内容的问题，实现了根据用户的请求来生成关联内容，提高了用户体验。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据本发明实施例的关联内容处理方法的流程图；
图2是根据本发明实施例的关联内容处理系统的结构框图；
图3是根据本发明实施例的关联内容处理系统的优选结构框图一；
图4是根据本发明实施例的关联内容处理系统的优选结构框图二；
图5是根据本发明实施例的关联内容处理系统的优选结构框图三；
图6是根据本发明实施例的关联内容处理系统的优选结构框图四。
具体实施方式
需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
在本实施例中，提供了一种关联内容处理方法，图1是根据本发明实施例的关联内容处理方法的流程图，如图1所示，该流程包括如下步骤：
步骤S102，在播放多媒体时，缓存该多媒体中的部分或者全部数据；
步骤S104，接收到请求，其中，该请求用于请求获取与缓存的数据相关联的内容；
步骤S106，根据该缓存的数据获取关键字；
步骤S108，根据该关键字检索得到该相关联的内容。
通过上述步骤，关联内容是在接收到请求之后，从缓存中获取的关键字来得到的，这种获取关联内容的处理与缓存的数据相关，并不是预先设置的与该多媒体关联的内容，因此，通过上述步骤解决了相关技术中无法生成用户感兴趣的关联内容的问题，实现了根据用户的请求来生成关联内容，提高了用户体验。
优选地，在缓存该部分或全部数据的装置上设置至少两个缓冲区，其中，该至少两个缓冲区中的每个缓冲区用于缓冲预定时长的数据；在该至少两个缓冲区上存储该部分或者全部数据。例如，可以在播放多媒体的设备上设置缓存区，也可以在服务器上设置缓存区，设置至少两个缓存区可以缓存更多的数据，并且，由于缓存区是缓存预定时长的数据，因此，可以根据缓存区中的内容按照时间顺序将缓存的数据进行正确的拼接。
在至少两个缓冲区上缓冲数据有多种方式，例如，作为一种优选的方式，可以在该至少两个缓冲区的第一缓冲区数据存满之后，在该第二缓冲区缓存数据，直到第n缓冲区数据存满，在第n缓冲区数据存储之后，将该第一缓冲区数据删除，并重新在该第一缓存区缓存数据，其中，该n为缓冲区的数量。
根据缓存的数据获取到的关键字可能是一个或者多个，此时，可以将该获取到的关键字直接作为关键字，也可以发送给请求方进行确认，即，根据该缓存的数据获取该关键字包括：将从该缓存的数据中解析出关键字作为该关键字；或者，从该缓存的数据中解析出一个或多个关键字，将该一个或多个关键字发送给该请求的发送方，将该发送方确认的关键字作为该关键字。经过请求方确认的关键字更加准确，但是，增加了操作步骤，因此，可以将这两个方式结合使用，例如，正在仅仅获取到一个关键字的情况下不再需要确认，如果获取到多个关键字则发送给请求方进行确认。
缓存的数据类型可能是音频数据，音频数据可以使用音频识别技术，缓存的数据也可能是视频数据，对于视频数据可以采用图像识别技术，将图像与预先设置的图像库进行比较来得到关键字。例如，在该缓存的数据包括音频数据的情况下，将该音频数据中的部分或全部内容识别为关键字；和/或，在该缓存的数据包括视频数据的情况下，将获取该视频数据的图像所对应的关键字。音频视频技术和视频识别技术在相关技术中有很多种识别方法，只要能够识别出关键字均可以使用，在此不再一一列巨额。
优选地，播放该多媒体的设备和发送该请求的设备是不同的设备，播放该多媒体的设备和发送该请求的设备相连接。
在本实施例中，还提供了一种关联内容处理系统，该系统用于实现上述的方法，在上述实施例及优选实施方式中已经进行过说明的，在此不再赘述。需要说明的是，下述系统中的模块的名称并不构成对该模块的实际限定，例如，缓存模块可以表述为“用于在至少两个缓冲区上存储该部分或者全部数据的模块”，以下的模块均可以在处理器中实现，例如，缓存模块可以表述为“一种处理器，用于在至少两个缓冲区上存储该部分或者全部数据”，或者，“一种处理器，包括缓存模块”。图2是根据本发明实施例的关联内容处理系统的结构框图，如图2所示，该结构包括：缓存模块22、接收模块24、获取模块26和检索模块28。这些模块可以在一个服务器或者服务器组上实现，也可以作为不同的服务器来实现，例如，接收模块24和缓存模块22可以在视频服务器上实现，当然，缓存模块22也可以在播放视频的终端上；获取模块26块可以在识别服务器上实现，例如可以是语音识别服务器；检索模块可以在关联内容生成服务器上实现。下面对该系统进行详细的说明。
缓存模块22，用于在播放多媒体时，缓存该多媒体中的部分或者全部数据；接收模块24，用于接收到请求，其中，该请求用于请求获取与缓存的数据相关联的内容；获取模块26，用于根据该缓存的数据获取关键字；检索模块28，用于根据该关键字检索得到该相关联的内容。
优选地，该缓存模块22，用于在至少两个缓冲区上存储该部分或者全部数据，其中，该至少两缓冲区是在缓存该部分或全部数据的装置上设置的，该至少两个缓冲区中的每个缓冲区用于缓冲预定时长的数据。
优选地，该缓存模块22，用于在该至少两个缓冲区的第一缓冲区数据存满之后，在该第二缓冲区缓存数据，直到第n缓冲区数据存满，在第n缓冲区数据存储之后，将该第一缓冲区数据删除，并重新在该第一缓存区缓存数据，其中，该n为缓冲区的数量。
优选地，该缓存模块22位于播放该多媒体的设备中；和/或，位于提供该多媒体的服务器中。
优选地，该获取模块26，用于将从该缓存的数据中解析出关键字作为该关键字；或者，该获取模块26，用于从该缓存的数据中解析出一个或多个关键字，将该一个或多个关键字发送给该请求的发送方，将该发送方确认的关键字作为该关键字。
优选地，该获取模块26，用于在该缓存的数据包括音频数据的情况下，将该音频数据中的部分或全部内容识别为关键字；和/或，该获取模块26，用于在该缓存的数据包括视频数据的情况下，将获取该视频数据的图像所对应的关键字。
优选地，播放该多媒体的设备和发送该请求的设备是不同的设备，播放该多媒体的设备和发送该请求的设备相连接。
以下结合优选实施例进行说明。
在以下优选实施例中，解决了当用户在观看视频时，如何根据用户听到的某个感兴趣的内容动态的生成关联内容的问题。另外，在以下实施例中还解决了如何在不影响用户当前观看视频的体验的情况下，展示上述动态生成的关联内容的问题。在以下实施例中提供了四个优选的实现方案，下面对此进行分别说明。
方案一
图3是根据本发明实施例的关联内容处理系统的优选结构框图一，如图3所示，用户拥有设备1和设备2，它们之间通过蓝牙等短距离通信技术进行交互，设备1用于观看视频，设备2用于获取和展示关联内容。
为了获取正在观看视频的音频信息，设备1设置有两个缓冲区，用于存储最近一段时间的音频，具体如下：
缓冲区b1，能够存储时长为t1的音频，缓冲区b2，能够存储时长为t2的音频。当用户观看视频时，b1从用户观看的起始位置开始缓存该视频的音频信息，当b1存满后，b2开始继续缓存该视频的音频信息，当b2存满后，b1开始继续缓存该视频的音频信息，原来缓存在b1中的信息则被清除，如此循环，直到该视频被暂停、停止、快进、快退为止。如此则b1、b2中始终缓存着该视频最近一段时间内的音频信息。
根据音频信息生成关联内容的方法如下：
当用户听到感兴趣的内容时，通过设备2向设备1发送获取关联内容的请求；
设备1收到该请求后，将当前b1、b2中缓存的音频信息按时间顺序合并成为一个音频；
并将该音频发送至语音识别服务器，请求语音识别服务器进行识别；
语音识别服务器接收到该请求后，对该音频进行识别；
并将识别后的关键字发送给关联内容生成服务器；
关联内容生成服务器收到识别后的关键字后，根据关键字进行搜索并生成相应的关联内容；
并将生成的关联内容返回给设备2；
设备2接收到该关联内容后将其展示给用户。
上述步骤1中，设备2与设备1间通过蓝牙、WIFI等短距离通信技术进行链接并进行交互。上述步骤2中，因为b1，b2两个缓冲区是交替循环进行存储音频信息的，所以判断上述按时间顺序的方法可以通过将当前正在缓存音频的缓冲区中的数据作为后段，已经存满的另一个缓冲区中的数据作为前段的方法来实现。
方案二
图4是根据本发明实施例的关联内容处理系统的优选结构框图二，如图4所示，用户拥有设备1和设备2，设备1用于观看视频，设备2用于获取和展示关联内容。
为了获取正在观看视频的音频信息，视频服务器设置有两个缓冲区，用于存储最近一段时间的音频，具体如下：
缓冲区b1，能够存储时长为t1的音频，缓冲区b2，能够存储时长为t2的音频。当用户观看视频时，b1从用户观看的起始位置开始缓存该视频的音频信息，当b1存满后，b2开始继续缓存该视频的音频信息，当b2存满后，b1开始继续缓存该视频的音频信息，原来缓存在b1中的信息则被清除，如此循环，直到该视频被暂停、停止、快进、快退为止。如此则b1、b2中始终缓存着该视频最近一段时间内的音频信息。
根据音频信息生成关联内容的方法如下：
当用户听到感兴趣的内容时，通过设备2向视频服务器发送获取关联内容的请求；
视频服务器收到该请求后，将当前b1、b2中缓存的音频信息按时间顺序合并成为一个音频；
并将该音频发送至语音识别服务器，请求语音识别服务器进行识别；
语音识别服务器接收到该请求后，对该音频进行识别；
并将识别后的关键字发送给关联内容生成服务器；
关联内容生成服务器收到识别后的关键字后，根据关键字进行搜索并生成相应的关联内容；
并将生成的关联内容返回给设备2；
设备2接收到该关联内容后将其展示给用户。
上述步骤1中，设备2与设备1间通过蓝牙、WIFI等短距离通信技术进行链接并进行交互。上述步骤2中，因为b1，b2两个缓冲区是交替循环进行存储音频信息的，所以判断上述按时间顺序的方法可以通过将当前正在缓存音频的缓冲区中的数据作为后段，已经存满的另一个缓冲区中的数据作为前段的方法来实现。
方案三
图5是根据本发明实施例的关联内容处理系统的优选结构框图三，如图5所示，用户拥有设备1和设备2，它们之间通过蓝牙等短距离通信技术进行交互，设备1用于观看视频，设备2用于获取和展示关联内容。
为了获取正在观看视频的音频信息，设备1设置有两个缓冲区，用于存储最近一段时间的音频，具体如下：
缓冲区b1，能够存储时长为t1的音频，缓冲区b2，能够存储时长为t2的音频。当用户观看视频时，b1从用户观看的起始位置开始缓存该视频的音频信息，当b1存满后，b2开始继续缓存该视频的音频信息，当b2存满后，b1开始继续缓存该视频的音频信息，原来缓存在b1中的信息则被清除，如此循环，直到该视频被暂停、停止、快进、快退为止。如此则b1、b2中始终缓存着该视频最近一段时间内的音频信息。
根据音频信息生成关联内容的方法如下：
当用户听到感兴趣的内容时，通过设备2向设备1发送获取关联内容的请求；
设备1收到该请求后，将当前b1、b2中缓存的音频信息按时间顺序合并成为一个音频；
并将该音频发送至语音识别服务器，请求语音识别服务器进行识别；
语音识别服务器接收到该请求后，对该音频进行识别；
当识别出的关键字不止一个时，语音识别服务器将识别出的全部关键字发送至设备2；
设备2将接收到来自语音识别服务器的多个关键字展示给用户，并由用户选择感兴趣的关键字；
设备2将用户选定的关键字（可能有多个）发送给关联内容生成服务器；
关联内容生成服务器收到识别后的关键字后，根据关键字进行搜索并生成相应的关联内容；
并将生成的关联内容返回给设备2；
设备2接收到该关联内容后将其展示给用户。
上述步骤1中，设备2与设备1间通过蓝牙、WIFI等短距离通信技术进行链接并进行交互。上述步骤2中，因为b1，b2两个缓冲区是交替循环进行存储音频信息的，所以判断上述按时间顺序的方法可以通过将当前正在缓存音频的缓冲区中的数据作为后段，已经存满的另一个缓冲区中的数据作为前段的方法来实现。
方案四
图6是根据本发明实施例的关联内容处理系统的优选结构框图四，如图6所示，用户拥有设备1和设备2，设备1用于观看视频，设备2用于获取和展示关联内容。
为了获取正在观看视频的音频信息，视频服务器设置有两个缓冲区，用于存储最近一段时间的音频，具体如下：
缓冲区b1，能够存储时长为t1的音频，缓冲区b2，能够存储时长为t2的音频。当用户观看视频时，b1从用户观看的起始位置开始缓存该视频的音频信息，当b1存满后，b2开始继续缓存该视频的音频信息，当b2存满后，b1开始继续缓存该视频的音频信息，原来缓存在b1中的信息则被清除，如此循环，直到该视频被暂停、停止、快进、快退为止。如此则b1、b2中始终缓存着该视频最近一段时间内的音频信息。
根据音频信息生成关联内容的方法如下：
当用户听到感兴趣的内容时，通过设备2向视频服务器发送获取关联内容的请求；
视频服务器收到该请求后，将当前b1、b2中缓存的音频信息按时间顺序合并成为一个音频；
并将该音频发送至语音识别服务器，请求语音识别服务器进行识别；
语音识别服务器接收到该请求后，对该音频进行识别；
当识别出的关键字不止一个时，语音识别服务器将识别出的全部关键字发送至设备2；
设备2将接收到来自语音识别服务器的多个关键字展示给用户，并由用户选择感兴趣的关键字；
设备2将用户选定的关键字（可能有多个）发送给关联内容生成服务器；
关联内容生成服务器收到识别后的关键字后，根据关键字进行搜索并生成相应的关联内容；
并将生成的关联内容返回给设备2；
设备2接收到该关联内容后将其展示给用户。
上述步骤1中，设备2与设备1间通过蓝牙、WIFI等短距离通信技术进行链接并进行交互。上述步骤2中，因为b1，b2两个缓冲区是交替循环进行存储音频信息的，所以判断上述按时间顺序的方法可以通过将当前正在缓存音频的缓冲区中的数据作为后段，已经存满的另一个缓冲区中的数据作为前段的方法来实现。
上述各个方案中缓冲区b1、b2的大小可以根据以下方法来进行设置：
设置固定的存储空间，例如b1=b2=512KB
存储空间大小可变，但是存储的音频的时长为固定值，例如，存储的音频时长为10秒，根据当时音频的编码情况b1、b2动态调整存储空间的大小。
下面结合两个优选场景来进行说明。
场景一
结合图3，用户拥有设备1和设备2，其中设备1为电视，设备2为手机，它们之间通过蓝牙等短距离通信技术进行交互，电视用于观看视频，手机用于获取和展示关联内容。
为了获取正在观看视频的音频信息，电视设置有两个缓冲区，用于存储最近一段时间的音频，具体如下：
缓冲区b1，能够存储时长为5秒的音频，缓冲区b2，能够存储时长为5秒的音频。当用户观看视频时，b1从用户观看的起始位置开始缓存该视频的音频信息，当b1存满后，b2开始继续缓存该视频的音频信息，当b2存满后，b1开始继续缓存该视频的音频信息，原来缓存在b1中的信息则被清除，如此循环，直到该视频被暂停、停止、快进、快退为止。如此则b1、b2中始终缓存着该视频最近一段时间内的音频信息。
用户通过电视观看新闻，当用户听到“神舟十号”时，希望获取更多相关的内容，用户通过摇晃手机向电视发送获取关联内容的请求，此后的处理流程如下：
电视收到该请求后，将当前b1、b2中缓存的音频信息按时间顺序合并成为一个音频（本实施例中合成后的音频时长为7秒，其中包含“神舟十号”的语音信息）；
并将该音频发送至语音识别服务器，请求语音识别服务器进行识别；
语音识别服务器接收到该请求后，对该音频进行识别，识别出关键字“神舟十号”；
并将识别后的关键字发送给关联内容生成服务器；
关联内容生成服务器收到识别后的关键字后，根据关键字进行搜索并生成相应的关于“神舟十号”的关联内容；
并将生成的关联内容返回给手机；
手机接收到该关联内容后将其展示给用户，用户可以通过手机进一步了解“神舟十号”的相关内容。
场景二
结合图4，用户拥有设备1和设备2，其中设备1为电视，设备2为手机，电视用于观看视频，手机用于获取和展示关联内容。
为了获取正在观看视频的音频信息，视频服务器设置有两个缓冲区，用于存储最近一段时间的音频，具体如下：
缓冲区b1，能够存储时长为5秒的音频，缓冲区b2，能够存储时长为5秒的音频。当用户观看视频时，b1从用户观看的起始位置开始缓存该视频的音频信息，当b1存满后，b2开始继续缓存该视频的音频信息，当b2存满后，b1开始继续缓存该视频的音频信息，原来缓存在b1中的信息则被清除，如此循环，直到该视频被暂停、停止、快进、快退为止。如此则b1、b2中始终缓存着该视频最近一段时间内的音频信息。
用户通过电视观看新闻，当用户听到“神舟十号”时，希望获取更多相关的内容，用户通过摇晃手机向视频服务器发送获取关联内容的请求，此后的处理流程如下：
视频服务器收到该请求后，将当前b1、b2中缓存的音频信息按时间顺序合并成为一个音频（本实施例中合成后的音频时长为7秒，其中包含“神舟十号”的语音信息）；
并将该音频发送至语音识别服务器，请求语音识别服务器进行识别；
语音识别服务器接收到该请求后，对该音频进行识别，识别出关键字“神舟十号”；
并将识别后的关键字发送给关联内容生成服务器；
关联内容生成服务器收到识别后的关键字后，根据关键字进行搜索并生成相应的关于“神舟十号”的关联内容；
并将生成的关联内容返回给手机；
手机接收到该关联内容后将其展示给用户，用户可以通过手机进一步了解“神舟十号”的相关内容。
上述两个优选场景中，也可以将关键字经过手机的确认，然后再进行检索。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种关联内容处理方法，其特征在于，包括：
在播放多媒体时，缓存所述多媒体中的部分或者全部数据；
接收到请求，其中，所述请求用于请求获取与缓存的数据相关联的内容；
根据所述缓存的数据获取关键字；
根据所述关键字检索得到所述相关联的内容。
2.根据权利要求1所述的方法，其特征在于，缓存所述多媒体中的部分或者全部数据包括：
在缓存所述部分或全部数据的装置上设置至少两个缓冲区，其中，所述至少两个缓冲区中的每个缓冲区用于缓冲预定时长的数据；
在所述至少两个缓冲区上存储所述部分或者全部数据。
3.根据权利要求2所述的方法，其特征在于，在所述至少两个缓冲区上存储所述部分或者全部数据包括：
所述至少两个缓冲区的第一缓冲区数据存满之后，在所述第二缓冲区缓存数据，直到第n缓冲区数据存满，在第n缓冲区数据存储之后，将所述第一缓冲区数据删除，并重新在所述第一缓存区缓存数据，其中，所述n为缓冲区的数量。
4.根据权利要求1至3中任一项所述的方法，其特征在于，缓存所述多媒体中的部分或者全部数据包括：
在播放所述多媒体的设备缓存所述部分或者全部数据；和/或，
在服务器侧缓存所述部分或者全部数据。
5.根据权利要求1所述的方法，其特征在于，根据所述缓存的数据获取所述关键字包括：
将从所述缓存的数据中解析出关键字作为所述关键字；或者，
从所述缓存的数据中解析出一个或多个关键字，将所述一个或多个关键字发送给所述请求的发送方，将所述发送方确认的关键字作为所述关键字。
6.根据权利要求1或5所述的方法，其特征在于，从所述缓存的数据获取关键字包括：
在所述缓存的数据包括音频数据的情况下，将所述音频数据中的部分或全部内容识别为关键字；和/或，
在所述缓存的数据包括视频数据的情况下，将获取所述视频数据的图像所对应的关键字。
7.根据权利要求1至6中任一项所述的方法，其特征在于，播放所述多媒体的设备和发送所述请求的设备是不同的设备，播放所述多媒体的设备和发送所述请求的设备相连接。
8.一种关联内容处理系统，其特征在于包括：
缓存模块，用于在播放多媒体时，缓存所述多媒体中的部分或者全部数据；
接收模块，用于接收到请求，其中，所述请求用于请求获取与缓存的数据相关联的内容；
获取模块，用于根据所述缓存的数据获取关键字；
检索模块，用于根据所述关键字检索得到所述相关联的内容。
9.根据权利要求8所述的系统，其特征在于，
所述缓存模块，用于在至少两个缓冲区上存储所述部分或者全部数据，其中，所述至少两缓冲区是在缓存所述部分或全部数据的装置上设置的，所述至少两个缓冲区中的每个缓冲区用于缓冲预定时长的数据。
10.根据权利要求9所述的系统，其特征在于，所述缓存模块，用于在所述至少两个缓冲区的第一缓冲区数据存满之后，在所述第二缓冲区缓存数据，直到第n缓冲区数据存满，在第n缓冲区数据存储之后，将所述第一缓冲区数据删除，并重新在所述第一缓存区缓存数据，其中，所述n为缓冲区的数量。
11.根据权利要求8至10中任一项所述的系统，其特征在于，
所述缓存模块位于播放所述多媒体的设备中；和/或，位于提供所述多媒体的服务器中。
12.根据权利要求8所述的系统，其特征在于，
所述获取模块，用于将从所述缓存的数据中解析出关键字作为所述关键字；或者，
所述获取模块，用于从所述缓存的数据中解析出一个或多个关键字，将所述一个或多个关键字发送给所述请求的发送方，将所述发送方确认的关键字作为所述关键字。
13.根据权利要求8或12所述的系统，其特征在于，
所述获取模块，用于在所述缓存的数据包括音频数据的情况下，将所述音频数据中的部分或全部内容识别为关键字；和/或，
所述获取模块，用于在所述缓存的数据包括视频数据的情况下，将获取所述视频数据的图像所对应的关键字。
14.根据权利要求8至13中任一项所述的系统，其特征在于，播放所述多媒体的设备和发送所述请求的设备是不同的设备，播放所述多媒体的设备和发送所述请求的设备相连接。
CN201310385183.9A 2013-08-29 2013-08-29 关联内容处理方法及系统 Pending CN104427350A (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201310385183.9A CN104427350A (zh) 2013-08-29 2013-08-29 关联内容处理方法及系统
PCT/CN2013/083815 WO2014169571A1 (zh) 2013-08-29 2013-09-18 关联内容处理方法及系统
JP2016537075A JP2016532969A (ja) 2013-08-29 2013-09-18 関連コンテンツの処理方法及びシステム
EP13882558.3A EP3040877A4 (en) 2013-08-29 2013-09-18 METHOD AND SYSTEM FOR PROCESSING ASSOCIATED CONTENT
US14/915,407 US20160203144A1 (en) 2013-08-29 2013-09-18 Method and System for Processing Associated Content

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310385183.9A CN104427350A (zh) 2013-08-29 2013-08-29 关联内容处理方法及系统

Publications (1)

Publication Number Publication Date
CN104427350A true CN104427350A (zh) 2015-03-18

Family

ID=51730730

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310385183.9A Pending CN104427350A (zh) 2013-08-29 2013-08-29 关联内容处理方法及系统

Country Status (5)

Country Link
US (1) US20160203144A1 (zh)
EP (1) EP3040877A4 (zh)
JP (1) JP2016532969A (zh)
CN (1) CN104427350A (zh)
WO (1) WO2014169571A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105721538A (zh) * 2015-12-30 2016-06-29 东莞市青麦田数码科技有限公司 数据访问的方法和装置
CN107659842A (zh) * 2017-08-21 2018-02-02 武汉斗鱼网络科技有限公司 一种视频交友中举报方法及系统

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11170555B2 (en) * 2019-11-27 2021-11-09 Arm Limited Graphics processing systems
US11210821B2 (en) 2019-11-27 2021-12-28 Arm Limited Graphics processing systems
US11210847B2 (en) 2019-11-27 2021-12-28 Arm Limited Graphics processing systems
US11216993B2 (en) 2019-11-27 2022-01-04 Arm Limited Graphics processing systems

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101634987A (zh) * 2008-07-21 2010-01-27 上海天统电子科技有限公司 多媒体播放器
CN102130946A (zh) * 2011-01-19 2011-07-20 四川长虹电器股份有限公司 避免缓存跳帧的方法
US20110247042A1 (en) * 2010-04-01 2011-10-06 Sony Computer Entertainment Inc. Media fingerprinting for content determination and retrieval
WO2013115235A1 (ja) * 2012-02-03 2013-08-08 シャープ株式会社 出力システム、出力システムの制御方法、制御プログラム、および記録媒体

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5603058A (en) * 1994-09-08 1997-02-11 International Business Machines Corporation Video optimized media streamer having communication nodes received digital data from storage node and transmitted said data to adapters for generating isochronous digital data streams
JP2003235063A (ja) * 2002-02-13 2003-08-22 Hitachi Ltd 携帯端末用データ配信システム
JP2005250738A (ja) * 2004-03-03 2005-09-15 Mitsubishi Electric Corp デジタル放送記録再生装置およびその記録再生方法
US8170478B2 (en) * 2005-09-26 2012-05-01 Nec Corporation Cell phone terminal, method for starting data processing, method for transferring data
JP2008129884A (ja) * 2006-11-22 2008-06-05 Nec Corp 情報検索システム及びその方法並びにそれに用いる放送受信機
JP5115089B2 (ja) * 2007-08-10 2013-01-09 富士通株式会社 キーワード抽出方法
JP5096128B2 (ja) * 2007-12-25 2012-12-12 エイディシーテクノロジー株式会社 通信装置及びプログラム
US8510317B2 (en) * 2008-12-04 2013-08-13 At&T Intellectual Property I, L.P. Providing search results based on keyword detection in media content
JP5189481B2 (ja) * 2008-12-26 2013-04-24 Ｋｄｄｉ株式会社 映像関連情報提示装置、映像関連情報提示システムおよび映像関連情報提示装置の制御プログラム
JP5344937B2 (ja) * 2009-01-20 2013-11-20 ヤフー株式会社 テレビ番組のメタ情報に基づく検索方法、検索システム、及び検索ターム生成装置
CN101930446A (zh) * 2009-06-26 2010-12-29 鸿富锦精密工业（深圳）有限公司 电子装置及在嵌入式电子装置中播放音乐的方法
JP5817196B2 (ja) * 2010-09-29 2015-11-18 ブラザー工業株式会社 携帯装置のプログラムおよび携帯装置の制御方法
JP5637930B2 (ja) * 2011-05-12 2014-12-10 日本放送協会 興味区間検出装置、視聴者興味情報提示装置、および興味区間検出プログラム
US10698584B2 (en) * 2011-09-12 2020-06-30 Intel Corporation Use of real-time metadata to capture and display discovery content
CN102622401A (zh) * 2012-01-09 2012-08-01 广东步步高电子工业有限公司 一种在音频文件播放过程中扩展显示相关信息的方法、系统及移动手持装置
US10770075B2 (en) * 2014-04-21 2020-09-08 Qualcomm Incorporated Method and apparatus for activating application by speech input

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101634987A (zh) * 2008-07-21 2010-01-27 上海天统电子科技有限公司 多媒体播放器
US20110247042A1 (en) * 2010-04-01 2011-10-06 Sony Computer Entertainment Inc. Media fingerprinting for content determination and retrieval
CN102130946A (zh) * 2011-01-19 2011-07-20 四川长虹电器股份有限公司 避免缓存跳帧的方法
WO2013115235A1 (ja) * 2012-02-03 2013-08-08 シャープ株式会社 出力システム、出力システムの制御方法、制御プログラム、および記録媒体

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105721538A (zh) * 2015-12-30 2016-06-29 东莞市青麦田数码科技有限公司 数据访问的方法和装置
CN107659842A (zh) * 2017-08-21 2018-02-02 武汉斗鱼网络科技有限公司 一种视频交友中举报方法及系统
CN107659842B (zh) * 2017-08-21 2020-02-07 武汉斗鱼网络科技有限公司 一种视频交友中举报方法及系统

Also Published As

Publication number Publication date
EP3040877A4 (en) 2016-09-07
US20160203144A1 (en) 2016-07-14
JP2016532969A (ja) 2016-10-20
WO2014169571A1 (zh) 2014-10-23
EP3040877A1 (en) 2016-07-06

Similar Documents

Publication Publication Date Title
US9948965B2 (en) Manifest re-assembler for a streaming video channel
US9344517B2 (en) Downloading and adaptive streaming of multimedia content to a device with cache assist
US8819035B2 (en) Providing search results based on keyword detection in media content
US10824670B2 (en) Real-time audio stream search and presentation system
CN100505630C (zh) 一种在网络直播环境中轮播缓冲广告的方法及系统
CN104427350A (zh) 关联内容处理方法及系统
JP6062608B2 (ja) ウェブページアクセス方法、装置、サーバ、端末、プログラム、及び記録媒体
US8041716B2 (en) Apparatus, methods and computer products for selection of content based on transcript searches
CN112995759A (zh) 互动业务处理方法、系统、装置、设备及存储介质
CN113141524B (zh) 资源传输方法、装置、终端及存储介质
WO2015196749A1 (zh) 基于场景识别的信息推荐方法及装置
CN108733666B (zh) 服务器信息推送方法、终端信息发送方法及装置、系统
CN109635131B (zh) 多媒体内容榜单显示方法、推送方法，装置及存储介质
US20130173749A1 (en) Methods and devices for providing digital content
CN112565907A (zh) 视频获取方法、电子设备及存储介质
US10743085B2 (en) Automatic annotation of audio-video sequences
WO2021018186A1 (zh) 视频更新的推送方法及终端
US20150143435A1 (en) System and method for managing mashup service based on the content of media content
CN111182331A (zh) 媒体数据切片方法、系统及存储介质
CN108777802B (zh) 一种缓存vr视频的方法和装置
US8756630B2 (en) Imaging distribution apparatus and imaging distribution method
US8032590B2 (en) Information distribution system and information distribution method
CN106610884B (zh) 信息处理方法及装置
CN117528173A (zh) 一种流媒体播放方法、装置、设备和存储介质
CN113886681A (zh) 虚拟空间的搜索方法、虚拟空间的显示方法、装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150318