CN114817706A - 用于个性化即时查询建议的媒体消费场境 - Google Patents
用于个性化即时查询建议的媒体消费场境 Download PDFInfo
- Publication number
- CN114817706A CN114817706A CN202210318219.0A CN202210318219A CN114817706A CN 114817706 A CN114817706 A CN 114817706A CN 202210318219 A CN202210318219 A CN 202210318219A CN 114817706 A CN114817706 A CN 114817706A
- Authority
- CN
- China
- Prior art keywords
- audio data
- user
- request
- media content
- entity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 claims abstract description 31
- 230000004044 response Effects 0.000 claims abstract description 20
- 238000004590 computer program Methods 0.000 claims abstract description 17
- 230000015654 memory Effects 0.000 description 37
- 238000004891 communication Methods 0.000 description 20
- 230000008569 process Effects 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 5
- 208000016604 Lyme disease Diseases 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 230000000644 propagated effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 208000024891 symptom Diseases 0.000 description 2
- 206010025323 Lymphomas Diseases 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/43—Querying
- G06F16/435—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9532—Query formulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9538—Presentation of query results
Abstract
本发明涉及用于个性化即时查询建议的媒体消费场境。提供了用于生成建议搜索查询的方法、系统和装置,包括在计算机存储介质上编码的计算机程序。一种方法包括在搜索会话期间接收针对建议搜索查询的请求;响应于接收到针对建议搜索查询的请求,识别与媒体内容项相关联的实体;基于所识别的实体生成建议搜索查询;以及提供使得所生成的建议搜索查询在用户界面中呈现的数据。
Description
分案说明
本申请属于申请日为2016年9月19日的中国发明专利申请201680041221.0的分案申请。
技术领域
该说明书涉及搜索引擎。
背景技术
通常,用户能够通过向搜索引擎输入查询来请求信息。搜索引擎能够对查询进行处理并且能够响应于所述查询而提供信息以便输出给用户。
发明内容
一种系统能够识别用户所消费的内容,以及与所消费内容相关联的实体,例如演员、作者、音乐家、导演、电视网络或者其它制作公司。响应于在搜索会话期间接收到针对建议搜索查询的请求,所述系统能够基于识别与用户所消费的内容相关联的一个或多个实体来生成建议搜索查询。
该说明书中所描述主题的创新方面可以以方法来体现,所述方法包括动作:在搜索会话期间接收针对建议搜索查询的请求;响应于接收到针对建议搜索查询的请求,识别与媒体内容项相关联的实体;基于所识别的实体生成建议搜索查询;以及提供使得所生成的建议搜索查询在用户界面中呈现的数据。
该方面的其它实施例包括相对应的计算机系统、装置,以及记录在一个或多个计算机存储设备上的计算机程序,它们均被配置为执行所述方法的动作。一个或多个计算机的系统能够被配置为通过使得在操作中导致系统执行所述动作的软件、固件、硬件或它们的组合被安装在所述系统上来执行特定操作或动作。一个或多个计算机程序能够被配置为通过包括指令来执行特定操作或动作,所述指令在被数据处理装置执行时使得所述装置执行所述动作。
以上和其它实施例均能够可选地单独或以组合形式包括以下特征中的一个或多个。
在一些实施方式中,所述方法包括响应于接收到针对建议搜索查询的请求而识别包括触发词项的候选建议搜索查询;以及响应于识别出包括触发词项的候选建议搜索查询而识别与所述媒体内容项相关联的实体。
在一些实施方式中,所述触发词项与所述搜索会话期间的时间窗口相关联。在其它实施方式中,所述媒体内容项已经在所述时间窗口期间被消费。
在一些情况下,所述媒体内容项被存储在识别已经被指示为被用户所消费的一个或多个项的媒体消费数据库中。在其它情况下,所述媒体内容项被指示为当前正在被用户所消费。
在一些实施方式中,所述针对建议搜索查询的请求包括音频数据的片段。在另外的实施方式中,所述音频数据的片段是表示用户的当前背景音频的音频数据。
在一些情况下,所述针对建议搜索查询的请求包括部分搜索查询,所述部分搜索查询包含用户所输入的一个或多个字符。在其它情况下,所述针对建议搜索查询的请求并不包括用户所输入的任何字符。
该说明书中所描述主题的一个或多个实施例的细节在附图和以下描述中被给出。该主题的其它特征、方面和优势将由于该描述和附图以及权利要求而变得显而易见。
附图说明
图1A-1C描绘了用于提供个性化的建议搜索查询的示例系统。
图2描绘了用于提供个性化的建议搜索查询的示例过程的流程图。
图3是示出可以被用来实现本文所描述的系统和方法的系统的示例的示图。
各附图中相同的附图标记指示相同的要素。
具体实施方式
该说明书描述了用于在搜索会话期间使用与用户的媒体消费有关的信息来偏转或外推针对能够从所述信息所得出的实体的潜在建议搜索查询的评分的系统,所述实体例如歌手、演员、音乐家、作者、导演、电视网络或者其它制作公司。系统能够接收针对建议搜索查询的请求,并且响应于所述请求而识别与有关用户的媒体消费的信息中所包括的媒体内容的高分项相关联的一个或多个实体。所述系统能够基于所识别的实体生成一个或多个建议搜索查询。
通过提供建议搜索查询,本文所描述的方法和系统能够减少录入搜索查询所需的用户-设备交互。这减少了用户界面组件以及相关联操作的负载。此外,通过利用有关用户的媒体消费的信息以便生成搜索查询,所生成的搜索查询更可能是准确的,因此提高了用户能够选择建议查询之一而无需继续手工录入他们的查询的可能性。系统越快生成正确的建议搜索查询,所述系统就能越快停止由于用户继续手工输入他们的查询而消耗生成并提供建议搜索查询所需的计算资源(例如,处理、带宽等)。
与用户的媒体消费有关的信息可以包括识别当前在用户的设备的物理周边正在播放的媒体内容。此外或替选地,所述信息可以包括用户的媒体消费历史。在一些示例中,用户的媒体消费历史可以至少部分基于之前在用户的设备的物理周边播放的媒体内容。在一些实施方式中,当前或者之前在用户的设备的物理周边播放的媒体内容可以基于随针对建议搜索查询的请求所包括或者被包括在针对建议搜索查询的之前请求中的音频数据的片段来确定。
图1A-1C描绘了用于提供个性化的建议搜索查询的示例系统100。特别地,系统100从事于其中在搜索会话期间接收到针对建议搜索查询——即,搜索查询的自动完成——的请求,以及响应于所述请求提供一个或多个个性化的建议搜索查询的实施方式,其中所述一个或多个个性化的建议搜索查询基于已经或者当前正在由用户所消费的媒体内容而生成。
简言之,系统100能够接收针对诸如用户所输入的部分搜索查询的建议搜索查询的请求。系统100能够识别与一个或多个媒体内容项相关联的一个或多个实体,并且能够基于识别出一个或多个实体而生成建议搜索查询。能够响应于所接收到的请求而提供建议搜索查询的列表,例如通过在搜索查询输入域中提供建议搜索查询的列表而作为针对用户的输出。系统100包括客户端设备102、查询引擎前端110、音乐识别器112、实体数据库113、媒体消费数据库116和自动完成生成器120。系统100的组件均能够通过一个或多个网络进行通信,所述网络诸如一个或多个LAN或WAN,或者能够通过一个或多个其它有线或无线连接进行通信。
如图1A中所描绘的,在操作(A)期间,即在搜索会话期间,查询引擎前端110能够接收针对建议搜索查询的请求,例如自动完成请求。例如,用户能够在客户端设备102开始搜索查询,例如通过在搜索查询输入域中点击“|”,并且对查询请求进行编码的数据能够被查询引擎前端110所接收。在一些实施方式中,查询引擎前端110能够通过一个或多个网络或者通过一个或多个其它无线或有线连接来接收编码新查询请求的数据。
客户端设备102可以是移动计算设备,诸如移动电话、智能电话、个人数字助理(PDA)、音乐播放器、电子书阅读器、平板计算机、可穿戴计算设备、膝上计算机、台式计算机,或者其它便携式或静态计算设备。客户端设备102能够充当麦克风、键盘、触摸屏,或者使得用户能够在所述设备输入查询的其它界面。在一些实施方式中,用户能够在从客户端设备102所呈现或者能够从客户端设备102访问的界面提供查询。例如,用户能够在能够在客户端设备102进行访问的搜索引擎处录入查询,能够在能够在客户端设备102处进行访问的数据库录入查询,或者能够在特色在于搜索能力的任意其它界面——例如在社交网络界面处——提供查询。
用户能够在客户端设备102处提供自然语言查询,诸如通过讲出一个或多个查询词项,键入一个或多个查询词项,例如从可用词项的菜单选择一个或多个搜索查询词项,例如从可用查询的菜单选择包括一个或多个词项的查询,或者通过使用任意其它方法来提供查询。在其它实施方式中,用户能够使用另一种方法来提供查询,例如通过选择或提交用户想要搜索的图像,通过提供用户想要搜索的内容的音频或视频样本,或者以其它方式在客户端设备102处输入查询。
针对建议搜索查询的请求可以包括从客户端设备的周边所取得的背景音频数据的片段。例如,客户端设备102的用户在客户端设备处输入搜索查询的同时可能正在收听包括歌词“oh baby hold my hand”的音乐108。在其它示例中,客户端设备的用户可能正在收听音频图书或者观看电影或电视节目。背景音频数据的片段可以包括与客户端设备的周边的数字表示相对应的多个数据帧的序列。
包括用户所输入的查询以及识别背景音频数据的片段的数据能够被查询音频前端110在单个数据分组或多个数据分组中所接收。与用户所输入的查询相关联的数据可以进一步被同时接收,或者能够在不同时间被单独接收。
在接收到对用户所输入的查询进行编码的数据之后,查询引擎前端110能够将与用户所输入查询相关联的数据传送至音乐识别器112。例如,基于接收到包括用户所输入搜索查询的开头“|”以及音频数据的片段的数据,查询引擎前端110能够提取音频数据的片段并且能够将与搜索查询相关联的音频数据的片段传送至音乐识别器112。
音乐识别器112能够接收与搜索查询相关联的音频数据的片段并且识别与所述音频数据的片段相关联的信息。例如,音乐识别器能够识别与包括歌曲名称或一段音乐的音频数据的片段相关联的信息,与音频数据相关联的一个或多个艺术家,或者该歌曲或这段音乐所制作的年份。音乐识别器112能够将与音频数据的片段的识别相关联的数据传送至查询引擎前端110。
在操作(B)期间,查询引擎前端110能够将与搜索查询相关联的数据以及音频数据的片段传送至媒体消费数据库116。媒体消费数据库116存储识别用户所消费的内容的数据118以及与用户的内容消费和内容自身相关联的信息,与用户的内容消费相关联的信息例如用户在何时以及何处消费了该内容,与内容自身相关联的信息则例如与该内容相关联的一个或多个实体。例如,查询引擎前端110能够识别与用户被识别为已经收听过或购买过的歌曲相关联的歌手,并且媒体消费数据库能够存储识别该歌曲、用户、该用户已经收听过该歌曲的时间和地点的信息,以及识别演唱该歌曲的乐队中的歌手的信息。
如该说明书中所使用的,内容可以基于用户可能已经查看过该内容,收听过该内容,阅读过该内容或者以其它方式接触到该内容或该内容的一部分而被识别为由该用户所消费。因此,将内容项归类为用户所消费的内容通常包括访问与该用户相关联的识别所述用户合理地可能已经消费的内容的数据,以及将所识别的内容归类为已经被用户所消费的内容。内容可以包括内容项,诸如一个或多个电影、电视节目、歌曲、专辑、演唱会、喜剧、录制采访、视频、图书、杂志、报纸、网站,或者其它基于web的音频、视频、文本或混合媒体内容。此外,一个或多个实体可以与内容项相关联,例如一个或多个演员、导演、作者、歌手、音乐家、艺术家、摄影师、编辑、乐队、唱片公司、制作公司、电视网络、无线电网络或站、公司、产品、歌曲、声轨等。在一些实例中,内容项可以被称作实体,例如电影、电视节目、歌曲等,或者与内容项相关联的实体可以独立地作为内容项,例如音轨可以构成内容项。
用户消费的内容可以由一个或多个源所识别,所述源包括能够接收指示特定内容已经被用户所消费的信息的任意源,或者可以包括能够确定内容已经被用户所消费的源。例如,内容消费源可以包括能够接收或访问识别用户所消费的内容的任意应用、服务器或其它系统,诸如社交网络、提供内容项的购买证据的金融信息或源、与用户相关联的web历史、与用户所执行的动作相关联的源,或者用户针对特定媒体内容项所输入的请求,或者客户端设备上的任意其它第一方应用或第三方应用。
如图1A所示,媒体消费数据库包括与被识别为由客户端设备102的用户所消费的音乐相关的信息。例如,媒体消费数据库包括已经被识别为由用户所消费的三首歌曲的名称,每首歌曲所属的专辑,演唱每首歌曲的乐队,所述歌曲何时被用户所购买,用户何时最后收听所述歌曲,以及每首歌曲的相关分值。相关分值可以指示用户被认为喜欢特定内容项或对其感兴趣的程度。例如,对于所述歌曲已经使用音频数据的片段而被识别为当前正在播放歌曲“Hold my hand(握我的手)”而言,相关分值比用户昨天最后播放的歌曲“Waiting 4urSMS(等你的消息)”更高。
在操作(C)器件,自动完成生成器120能够接收对建议搜索查询请求“|”编码的数据以及对音频数据的片段编码的数据。自动完成生成器120能够访问存储在媒体消费数据库116中的信息,以及由音乐识别器112和实体数据库114所存储的信息,以便识别与媒体内容项相关联的实体以及基于所识别的实体生成一个或多个建议搜索查询。在一些实施方式中,自动完成生成器120可以在识别与媒体内容项相关联的实体之前使用对搜索查询请求编码的数据来识别包括一个或多个触发词项的一个或多个候选建议搜索查询。识别包括一个或多个触发词项的候选建议搜索查询在下文参考图1B和1C进行描述。
在操作(D)期间,自动完成生成器120能够将编码一个或多个建议搜索查询124的数据提供至客户端设备102以便在用户界面122中进行呈现。例如,如图1A所示,基于接收到用户已经通过在客户端设备的搜索查询域中键入“|”而开始了新的搜索查询的指示,实体“Chicago(芝加哥)”和“News(新闻)”已经被识别为是相关的,并且自动完成生成器120已经提供了搜索查询“Weather in Chicago(芝加哥的天气)”和“News today(今日新闻)”。图1A所示的示例图示了,在诸如接收用户已经开始了搜索查询的指示的一些实施方式中,自动完成生成器可以生成并不包括与随针对建议搜索查询的请求一起接收的音频数据的片段相关联的词项的建议搜索查询。
如图1B中所描绘的,在操作(E)期间,查询引擎前端110能够接收针对建议搜索查询的请求。例如,如图1B所示,用户可以在客户端设备102提交例如“Ly|”的部分搜索查询,即包括一个或多个字符的搜索查询,并且对该部分搜索查询编码的数据能够被查询引擎前端110所接收。针对建议搜索查询的请求可以包括从客户端设备的周围所取得的背景音频数据的片段,例如包括具有歌词“Oh baby hold my hand(哦宝贝握我的手)”的音乐的音频数据的片段。在一些实施方式中,查询引擎前端110能够通过一个或多个网络或者通过一个或多个其它无线或有线连接来接收对该部分搜索查询编码的数据以及音频数据的片段。
在接收到对用户所输入的部分搜索查询编码的数据以及音频数据的片段之后,查询引擎前端110能够将与用户输入的查询相关联的数据传送至音乐识别器112。例如,基于接收到包括用户所输入的搜索查询的开头“Ly|”的数据以及音频数据的片段,查询引擎前端110能够提取音频数据的片段并且将与部分搜索查询相关联的音频数据的片段传送至音乐识别器112。
音乐识别器112能够接收与部分搜索查询相关联的音频数据的片段并且识别与该音频数据的片段相关联的信息。例如,音乐识别器112可以将音频数据的片段识别为从乐队“Boyband(男子乐队)”在专辑“Boyband is back(男子乐队回来了)”中演唱的歌曲“Holdmy hand”所取得的音频数据的片段。音乐识别器112能够将与该音频数据的片段的识别相关联的信息传送至查询引擎前端110。
查询引擎前端110可以将与部分搜索查询相关联的数据以及与音频数据的片段的识别相关联的信息传送至媒体消费数据库116。媒体消费数据库116可以处理并存储与部分搜索查询相关的信息以及音频数据的片段。例如,媒体消费数据库116可以更新与所识别的歌曲“Hold my hand”上一次在何时被播放相关的信息并且更新相对应的相关度分值。
在操作(F)期间,查询引擎前端110能够将对部分搜索查询“Ly|”编码的数据以及音频数据的片段传送至自动完成生成器120。自动完成生成器120能够访问存储在媒体消费数据库116中的信息,以及音乐识别器112和实体数据库114所存储的信息,以便识别与媒体内容项相关联的实体并且基于所识别的实体生成一个或多个建议搜索查询。
在一些实施方式中,自动完成生成器120可以在识别与媒体内容项相关联的实体之前使用对搜索查询请求编码的数据来识别包括一个或多个触发词项的候选建议搜索查询。例如,基于部分搜素查询“Ly|”,自动完成生成器可以识别一个或多个候选建议搜索查询,诸如包括触发词项“lyrics(歌词)”的“Lyrics in popsong(流行歌曲歌词)”,包括触发词项“lyrics”的“Lyrics in girlband song(女子乐队歌词)”,包括触发词项“disease(疾病)”的“Lymes disease(莱姆病)”,或者包括触发词项“symptoms(症状)”的“Lymphomasymptoms(淋巴瘤的症状)”。在一些实施方式中,所述触发词项可以与搜索会话期间的时间窗口相关联。
自动完成生成器120可以响应于识别包括一个或多个触发词项的一个或多个候选建议搜索查询而使用媒体消费数据库116来识别与媒体内容项相关联的一个或多个实体。例如,自动完成生成器可以识别包括触发词项“lyrics”的候选建议搜索查询“Lyrics inpopsong”和“Lyrics in girlband song”。使用媒体消费数据库116,自动完成生成器120可以使用触发词项“lyrics”来识别与媒体内容项相关联的一个或多个实体,例如具有高的相关度分值的实体“Boyband”。自动完成生成器120可以基于一个或多个所识别的实体而生成一个或多个建议搜索查询。
在操作(G)期间,自动完成生成器120能够将对一个或多个建议搜索查询124编码的数据提供至客户端设备102以便在用户界面122中呈现。例如,如图1B所示,基于接收部分搜索查询“Ly”,实体“Boyband”和“Lymes disease”可以已经使用媒体消费数据库116而被识别为是相关的,并且自动完成生成器120已经提供了建议搜索查询“Lyrics Hold myhand”和“Lymes disease”。图1B所示的示例图示了,在诸如接收部分搜索查询的一些实施方式中,自动完成生成器可以生成包括并不与音频数据的片段内相关联的词项的建议搜索查询,以及包括与随针对建议搜索查询的请求所接收的音频数据的片段相关联的词项的搜索查询。
如图1C所示,在操作(H)期间,查询引擎前端110能够接收针对建议搜索查询的请求。例如,如图1C所示,用户可以在客户端设备102提交例如“Lyrics|”的部分搜索查询,即包括一个或多个字符的搜索查询,并且对部分搜索查询编码的数据能够被查询引擎前端110所接收。针对建议搜索查询的请求可以包括从客户端设备的周边所取得的背景音频数据的片段,例如包括具有歌词“Oh baby hold my hand”的音乐的音频数据的片段。在一些实施方式中,查询引擎前端110能够通过一个或多个网络或者通过一个或多个其它无线或有线连接接收对部分搜索查询编码的数据以及音频数据的片段。
在接收到对用户所输入的部分搜索查询编码的数据以及音频数据的片段之后,查询引擎前端110能够将与用户所输入查询相关联的数据传送至音乐识别器112。例如,基于接收到包括用户所输入搜索查询“Lyrics|”的开头的数据以及音频数据的片段,查询引擎前端110能够提取所述音频数据的片段并且能够将与部分搜索查询相关联的音频数据的片段传送至音乐识别器112。
音乐识别器112能够接收与部分搜索查询相关联的音频数据的片段并且识别与音频数据的片段相关联的信息。例如,音乐识别器112可以将音频数据的片段识别为从乐队“Boyband”在专辑“Boyband is back”中演唱的歌曲“Hold my hand”所取得的音频数据的片段。音乐识别器112能够将与该音频数据的片段的识别相关联的信息传送至查询引擎前端110。
查询引擎前端110可以将与部分搜索查询相关联的数据以及与音频数据的片段的识别相关联的信息传送至媒体消费数据库116。媒体消费数据库116可以处理并存储与部分搜索查询相关的信息以及音频数据的片段。例如,媒体消费数据库116可以更新与所识别的歌曲“Hold my hand”上一次在何时被播放相关的信息并且更新相对应的相关度分值。
在操作(I)期间,查询引擎前端110能够将对部分搜索查询“Lyrics|”编码的数据以及音频数据的片段传送至自动完成生成器120。自动完成生成器120能够访问存储在媒体消费数据库116中的信息,以及音乐识别器112和实体数据库114所存储的信息,以便识别与媒体内容项相关联的实体并且基于所识别的实体生成一个或多个建议搜索查询。
在一些实施方式中,自动完成生成器120可以在识别与媒体内容项相关联的实体之前使用对搜索查询请求编码的数据来识别包括一个或多个触发词项的候选建议搜索查询。例如,基于部分搜素查询“Lyrics|”,自动完成生成器可以识别一个或多个候选建议搜索查询,诸如包括触发词项“lyrics”的“Lyrics in popsong”,同样包括触发词项“lyrics”的“Lyrics in girlband song”。在一些实施方式中,所述触发词项可以与搜索会话期间的时间窗口相关联。
自动完成生成器120可以响应于识别包括一个或多个触发词项的一个或多个候选建议搜索查询而使用媒体消费数据库116来识别与媒体内容项相关联的一个或多个实体。例如,自动完成生成器可以识别包括触发词项“lyrics”的候选建议搜索查询“Lyrics inpopsong”和“Lyrics in girlband song”。使用媒体消费数据库116,自动完成生成器120可以使用触发词项“lyrics”来识别与媒体内容项相关联的一个或多个实体,例如具有高的相关度分值的实体“Boyband”。自动完成生成器120可以基于一个或多个所识别的实体而生成一个或多个建议搜索查询。
在操作(J)期间,自动完成生成器120能够将对一个或多个建议搜索查询120编码的数据提供至客户端设备120以便在用户界面122中呈现。例如,如图1C所示,基于部分搜索查询“Lyrics”,实体“Boyband”可以已经被媒体消费数据库识别为是高度相关的,并且自动完成生成器120已经提供了建议搜索查询“Lyrics Hold my hand(歌词握我的手)”和“Lyrics Do you like me?(歌词你喜欢我吗?)”。图1C所示的示例图示了,在诸如接收部分搜索查询的一些实施方式中,自动完成生成器可以生成包括与随针对建议搜索查询的请求所接收的音频数据的片段相关联的词项的所建议的一个或多个搜索查询。下文参考图2更为详细地对基于识别出与媒体内容项相关联的实体而生成建议搜索查询进行描述。
图2给出了用于提供个性化的建议搜索查询的示例过程200。例如,过程200能够由系统100响应于接收到针对建议搜索查询的请求来执行。
在步骤202,接收到针对建议搜索查询的请求。所述请求在搜索会话期间被接收。在一些实施方式中,针对建议搜索查询的请求包括部分搜索查询,所述部分搜索查询进而包括用户所输入的一个或多个字符。例如,针对建议搜索查询的请求可以包括词项“weather in|”。在其它实施方式中,针对建议搜索查询的请求可以不包括用户所输入的任何字符。例如,针对建议搜索查询的请求可以包括用户在其输入一个或多个字符之前已经通过在搜索查询录入框中进行点击而已经开始新的搜索查询的指示。
针对建议搜索查询的请求可以包括音频数据的片段。例如,建议搜索查询可以包括与诸如歌曲、电影、电视节目或音频图书之类的媒体内容项相关联的音频数据的片段。在一些实施方式中,音频数据的片段是表示用户的当前背景音频的音频数据。例如,在搜索会话期间,用户可能正在收听歌曲或音频图书。针对建议搜索查询的请求因此可以包括表示正在播放的当前歌曲或者当前在背景中被阅读的图书的音频数据的片段。在另一个示例中,在搜索会话期间,用户可能正在看电影。针对建议搜索查询的请求因此可以包括表示当前正在背景中播放的电影的音频数据的片段。
在步骤204,响应于接收到针对建议搜索查询的请求,识别包括触发词项的候选建议搜索查询。例如,触发词项可以是能够随某些类型而被识别的词项。作为示例,触发词项“lyrics”可以随歌曲、音乐艺术家或歌曲作者而被识别。作为另一个示例,触发词项“演员”可以随电影或电视节目而被识别。触发词项可以包括部分触发词项,所述部分触发词项进而包括用户所输入的一个或多个字符。例如,触发词项可以包括字符“lyri|”。
在步骤206,识别与媒体内容项相关联的实体。例如,可以从与用户相关联的媒体消费数据库中提取实体的集合,所述媒体消费数据库存储于已经被用户所消费的媒体项相关的信息。所述实体集合中的每个实体可以被指派相应的相关度分值,例如指示与所述实体相关联的媒体项的近期消费。所述实体集合可以被存储在缓存器中,并且与媒体内容项相关联的实体可以从存储在缓冲器中的实体集合中进行识别。
在一些实施方式中,与媒体内容项相关联的实体可以响应于接收到针对建议搜索查询的请求而被识别。在一些情况下,媒体内容项可以被存储在媒体消费数据库中,所述媒体消费数据库识别一个或多个已经被指示为被用户所消费的项。例如,媒体内容项可以是用户之前购买过的音乐专辑,或者是用户之前观看过的电影。在其它情况下,媒体内容项可以被指示为当前正在被用户所消费。例如,用户在搜索会话期间可能正在收听特定音乐专辑,或者正在观看特定的电影。
在其它实施方式中,如以上参考步骤204所描述的,与媒体内容项相关联的实体可以响应于识别包括触发词项的候选建议搜索查询而被识别。例如,响应于识别包括触发词项“lyrics”的候选建议搜索查询“lyrics in popsong”,可以识别涉及到与媒体内容项相关联的歌曲、音乐艺术家或歌曲作者的实体。作为另一个示例,响应于识别包括触发词项“actors(演员)”的候选建议搜索查询“actors in actionfilm(动作片中的演员)”,可以识别涉及于媒体内容项相关联的电影、电视节目、男/女演员或电影导演的实体。
在一些实施方式中,触发词项是与搜索会话期间的时间窗口相关联的词项。在另外的实施方式中,媒体内容项将已经在与所识别触发词项相关联的时间窗口期间被用户所消费。例如,触发词项“lyrics”可以与包括接收到针对建议搜索查询的请求之前两个小时的时间窗口相关联,用户在其间收听特定音乐专辑。在另一个示例中,触发词项“actors”可以与包括接收到针对建议搜索查询的请求之前的最后二十四小时的时间窗口相关联,用户在期间观看了特定的电影。
在步骤208,生成基于所识别的实体的建议搜索查询。
在步骤210,提供使得所生成的建议搜索查询在用户界面中呈现的数据。例如用户界面122的提供个性化的建议搜索查询的用户界面的呈现在上文参考图1A-1C有所描述。
图3示出了能够被用来实现上文所描述的技术的计算设备300和移动计算设备350的示例。计算设备300意在表示各种形式的数字计算机,诸如膝上计算机、台式机、工作站、个人数字助理、服务器、刀锋服务器、大型机和其它适当计算机。移动计算设备350意在表示各种形式的移动设备,诸如个人数字助理、蜂窝电话、智能电话和其它类似的计算设备。这里所示出的组件、其连接和关系以及其功能仅意在是示例性的,而并非意在作为限制。
计算设备300包括处理器302、存储器304、存储设备306、连接到存储器304和高速扩展端口310的高速接口308,以及连接到低速总线314和存储设备306的低速接口312。处理器302、存储器304、存储设备306、高速接口308、高速扩展端口310和低速接口312中的每一个使用各种总线进行互连,并且可以安装在共用主板上,或者以其它适宜方式进行安装。处理器302能够处理指令以便在计算设备300内执行以在诸如耦合到高速接口308的显示器316的外部输入/输出设备上显示用于GUI的图形信息,所述指令包括存储在存储器304中或者存储设备306中的指令。在其它实施方式中,可以在适当情况下使用多个处理器和/或多个总线,以及多个存储器和存储器类型。而且,可以连接多个计算设备,其中每个设备提供必要操作的一部分(例如,作为服务器组、刀锋服务器群组或多处理器系统)。
存储器304将信息存储计算设备300内。在一些实施方式中,存储器304是一个或多个易失性存储单元。在另一实施方式中,存储器304是一个或多个非易失性存储单元。存储器304还可以是其它形式的计算机可读介质,诸如磁盘或光盘。
存储设备306能够为计算设备300提供大型存储。在一种实施方式中,存储设备306可以是或者可包含计算机可读介质,诸如软盘设备、硬盘设备、光盘设备或磁带设备,闪存或其它类似固态存储设备,或者设备阵列,包括存储域网络或其它配置中的设备。指令能够被存储在信息载体中。所述指令在被一个或多个处理设备(例如,处理器302)所执行时,执行诸如以上所描述的那些的一种或多种方法。指令还能够被一个或多个存储设备所存储,诸如计算机或机器可读介质(例如,存储器304、存储设备306,或者处理器302上的存储器)。
高速接口308管理用于计算设备300的带宽密集操作,而低速接口312管理较低带宽密集的操作。这样的功能分配仅是示例性的。在一些实施方式中,高速接口308耦合到存储器304、显示器316(例如,通过图形处理器或加速器),并且耦合到可接受各种扩展卡(未示出)的高速扩展端口310。在该实施方式中,低速接口312耦合到存储设备306和低速扩展端口314。可以包括各种通信端口(例如,USB、蓝牙、以太网、无线以太网)的低速控制端口314可耦合到一个或多个输入/输出设备,诸如键盘、指针设备、扫描仪,或者例如通过网络适配器耦合到诸如交换机和路由器之类的联网设备。
如图所示,计算设备300能够以多种不同形式来实现。例如,其可以实现为标准服务器320,或者在这种服务器分组中多次实现。此外,其还可以在诸如膝上计算机322的个人计算机中实现。其还可以被实现为机架式服务器系统324的一部分。替选地,来自计算设备300的组件可以与诸如移动计算设备350的移动设备(未示出)中的其它组件相组合。每个这样的设备可包含一个或多个计算设备300和移动计算设备350,并且整个系统可由多个彼此通信的计算设备所构成。
除其它组件之外,计算设备350包括处理器352、存储器364、诸如显示器354的输入/输出设备、通信接口366和收发器368。设备350还可被提供以诸如微驱动器或其它设备的存储设备以提供附加存储。处理器352、存储器364、显示器354、通信接口366和收发器368中的每一个使用各种总线进行互连,并且若干组件可安装在共用主板上或者以其它适宜方式进行安装。
处理器352能够执行移动计算设备350内的指令,包括存储在存储器364中的指令。处理器352可以被实现为包括分离且多个的模拟和数字处理器的芯片的芯片集。例如,处理器352可提供移动计算设备350的其它组件的协同,诸如控制用户接口、移动计算设备350所运行的应用以及移动计算设备350所进行的无线通信。
处理器352可以通过耦合到显示器354的控制接口358和显示接口356与用户进行通信。显示器354例如可以是TFT(薄膜晶体管液晶显示器)显示器或OLED(有机发光二极管)显示器,或者其它适当的显示技术。显示接口356可以包括用于驱动显示器354以向用户呈现图形和其它信息的适当电路。控制接口358可以接收来自用户的命令并且将它们进行转换以便提交至处理器352。此外,外部接口362可以提供与处理器352的通信,从而使得移动计算设备350能够与其它设备进行近域通信。例如,外部接口362在一些实施方式中可提供有线通信,或者在其它实施方式中提供无线通信,并且也可使用多个接口。
存储器364存储移动计算设备350内的信息。存储器364可以被实现为一个或多个计算机可读介质或介质、一个或多个易失性存储器单元或者一个或多个非易失性存储器单元。扩展存储器374也可以被提供并通过扩展接口372连接到移动计算设备350,所述扩展接口372例如可以包括SIMM(单列存储组模)卡接口。扩展存储器374可为移动计算设备350提供额外的存储空间,或者还可以存储用于移动计算设备350的应用或其它信息。特别地,扩展存储器374可以包括指令以执行或补充以上所描述的过程,并且还可以包括安全信息。例如,扩展存储器374由此可被提供作为移动计算设备350的安全模块,并且可以利用允许对移动计算设备350进行安全使用的指令来编程。此外,可以经由SIMM卡提供安全应用以及附加信息,诸如以不可破坏的方式在SIMM卡上设置识别信息。
例如,如以下所讨论的,存储器可以包括闪存和/或NVRAM存储器(非易失性随机访问存储器)。在一些实施方式中,指令被存储在信息载体中。所述指令在被一个或多个处理设备(例如,处理器352)所执行时执行诸如以上所描述那些的一种或多种方法。所述指令也可以被一个或多个存储设备所存储,诸如一个或多个计算机或机器可读介质(例如,存储器364、扩展存储器374,或者处理器352上的存储器)。在一些实施方式中,可以例如通过收发器368或外部接口362而在传播信号中接收指令。
移动计算设备350可以通过通信接口366进行无线通信,在必要情况下所述通信接口366包括数字信号处理电路。通信接口366可以在各种模式或协议下提供通信,除其它之外,所述模式或协议诸如GSM语音呼叫(全球移动通信系统)、SMS(短消息服务)、EMS(增强消息服务)或MMS消息发送(多媒体消息服务)、CDMA(码分多址)、TDMA(时分多址)、PDC(个人数字蜂窝)、WCDMA(宽带码分多址)、CDMA2000或GPRS(通用分组无线电服务)。例如,这样通信可使用射频而通过收发器368来进行。此外,诸如可以使用蓝牙、WiFi或其它这样的收发器(未示出)进行短范围通信。此外,GPS(全球定位系统)接收器模块370可为移动计算设备350提供附加的导航和位置相关的无线数据,所述数据可以被在移动计算设备350上运行的应用适当使用。
移动计算设备350还使用音频编解码器360进行可听通信,所述音频编解码器360接收来自用户的话音信息并且将其转换为可用的数字信息。音频编解码器360相同可以诸如通过扬声器例如在移动计算设备350的听筒中为用户生成可听声音。这样的声音可以包括来自语音电话呼叫的声音,可以包括录制的声音(例如,语音消息、音乐文件等),并且还可以包括移动计算设备350上运行的应用所生成的声音。
如图所示,计算设备350可以以多种不同方式来实现。例如,其可以实现为蜂窝电话380。其还可以实现为智能电话382、个人数字助理或其它类似移动设备的一部分。
已经详细描述了多种实施方式。然而,将要理解的是,可以进行各种修改而并不背离本发明的精神和范围。例如,可以使用以上所示出的流程的各种形式,而其中步骤被重新排序、被添加或移除。因此,其它实施方式处于以下权利要求的范围之内。
对于其中本文所讨论的系统和/或方法可以收集关于用户的个人信息或者对个人信息加以利用的情况下,用户可以被提供以控制程序或特征是否收集用户信息或者控制所述系统和/或方法是否和/或如何能够执行与用户更为相关的操作的机会,所述用户信息例如有关用户的社交网络、社交动作或活动、职业、偏好或的当前位置的信息。此外,某些数据在其被存储或使用之前能够以一种或多种方式进行处理,而使得个人可识别信息得以被去除。例如,用户的身份可被处理,使得无法针对用户确定个人可识别信息,或者可以在获得位置信息的情况下对用户的地理位置进行泛化(诸如处理为城市、邮政编码或州级别),而使得无法确定用户的特定位置。因此,用户能够对信息如何关于他或她被收集以及如何被使用加以控制。
该说明书中所描述的实施例和所有功能操作能够以数字电子电路来实现,或者以计算机软件、固件或硬件来实现,该硬件包括该说明书中所公开的结构及其结构等同物,或者以它们中一个或多个的组合来实现。实施例可以被实现为一个或多个计算机程序产品,即在计算机可读介质上进行编码以便由数据处理装置执行或者控制其操作的计算机程序指令的一个或多个模块。计算机可读介质可以是机器可读存储介质、计算机可读存储基底、存储器设备、影响机器可读传播信号的物质组合,或者它们中一个或多个的组合。词项“数据处理装置”包含用于处理数据的所有类型的装置、设备和机器,例如包括可编程处理器、计算机,或者多个处理器或计算机。除了硬件之外,该装置还可以包括为所讨论的计算机程序创建执行环境的代码,例如构成处理器固件、协议栈、数据库管理系统、操作系统,或者它们中的一个或多个的组合的代码。传播信号是认为是人工生成的信号,例如机器生成的电、光学、电磁信号,所述信号被生成以对信息进行编码以便传输至适当的接收器装置。
计算机程序(也被称作程序、软件、软件应用、脚本或代码)能够以任意形式的编程语言进行编写,包括编译或解释语言,并且其可以以任意形式进行部署,包括作为独立程序或者作为适于在计算环境中使用的模块、组件、子例程、对象或其它单元。计算机程序并非必然对应于文件系统中的文件。程序可以存储在保存其它程序或数据(例如,标记语言文档中所存储的一个或多个脚本)的文件的一部分之中,存储在专用于所讨论程序的单个文件中,或者存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。计算机程序能够被部署为在一台计算机上执行或者在位于一个地点或跨多个地点分布并且通过通信网络进行互连的多台计算机上执行。
该说明书中所描述的过程和逻辑流程可以由一个或多个可编程处理器来实现,所述可编程处理器执行一个或多个计算机程序以通过对输入数据进行操作并生成输出来执行功能。所述过程和逻辑流程还能够由例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)的专用逻辑电路所执行,并且装置也能够被实现为所述专用逻辑电路。
作为示例,适于执行计算机程序的处理器包括通用和专用微处理器,以及任意类型的数字计算机的任意一个或多个处理器。通常,处理器将从只读存储器或随机访问存储器或者其二者接收指令和数据。
计算机的实质性元件是用于执行指令的处理器以及用于存储指令和数据的一个或多个存储器设备。通常,计算机还将包括一个或多个用于存储数据的大型存储设备或者操作耦合到所述大型存储设备或者其二者,所述大型存储设备例如磁、磁光盘或光盘。然而,计算机无需具有这样的设备。此外,计算机可以嵌入另一个设备之中,仅举出几个示例,所述设备例如平板计算机、移动电话、个人数字助理(PDA)、移动音频播放器、全球定位系统(GPS)接收器。适于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储器设备,例如包括示例的半导体存储器设备,例如EPROM、EEPROM和闪存设备;磁盘,例如内部硬盘和可移除盘;磁性光盘;以及CD ROM和DVD-ROM盘。处理器和存储器可以以专用逻辑电路作为补充或者被整合在专用逻辑电路中。
为了提供与用户的交互,实施例可以在计算机上实现,所述计算机具有例如CRT(阴极射线管)或LCD(液晶显示器)监视器的用于向用户显示信息的显示设备以及用户能够通过其向计算机提供输入的键盘和例如鼠标或轨迹球的指针设备。也能够使用其它类型的设备来提供与用户的交互;例如,提供给用户的反馈可以是任意形式的感官反馈,例如视觉反馈、听觉反馈或触觉反馈;并且来自用户的输入能够以任意形式被接收,包括声音、语音或触觉输入。
实施例能够在计算系统中实现,所述计算系统包括例如作为数据服务器的后端组件,或者包括例如应用服务器的中间件组件,或者包括例如客户端计算机的前端组件,或者一个或多个这样的后端、中间件或前端组件的任意组合,上述客户端计算机具有用户能够通过其而与该说明书所描述主题的实施方式进行交互的图形用户界面或Web浏览器。所述系统的组件能够通过例如通信网络之类的任意形式或介质的数字数据通信进行互连。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”),例如互联网。
计算系统能够包括客户端和服务器。客户端和服务器通常互相远离并且典型地通过通信网络进行交互。客户端和服务器的关系源自于在相应计算机上运行并且互相具有客户端-服务器关系的计算机程序。
虽然该说明书包含许多具体实现细节,但是这些并不应当被理解为对任何发明以及所要求保护的内容的范围进行限制,而是作为特定于特定发明的特定实施例的特征的描述。该说明书中以单独实施例为场境进行描述的某些特征也能够在单个实施例中以组合形式来实现。相反,以单个实施例为场境进行描述的各种特征也能够单独或以任意适当子组合在多个实施例中实现。此外,虽然特征在上文中可以被描述为以某种组合进行工作并且甚至最初要求如此,但是来自所要求保护组合的一个或多个特征在一些情况下可以脱离该组合,并且所要求保护的组合可以针对子组合或子组合的变化。
类似地,虽然操作在图中以特定顺序进行描绘,但是这并不应当被理解为要求这样的操作以所示出的特定顺序或以连续顺序来执行,或者所有所图示的操作都要被执行以实现所期望的结果。在某些情况下,多任务和并行处理可能是有利的。此外,以上所描述实施例中的各种系统组件的分离并不应当被理解为在所有实施例中都要求这样的分离,并且应当理解的是,所描述的程序组件和系统通常在单个软件产品中集成在一起或者被封装到多个软件产品中。
在其中提到HTML文件的每个实例中,可以替代以其它的文件类型或格式。例如,HTML文件可以被XML、JSON、纯文本或者其它类型的文件所替换。此外,在提到表格或散列表的地方,可以使用其它数据结构(例如,电子表单、关系数据库或结构文件)。
因此,已经对特定实施例进行了描述。其它实施例处于以下权利要求的范围之内。例如,权利要求中所引用的动作可以以不同顺序来执行并且仍然实现所期望的结果。
Claims (20)
1.一种计算机实现的方法,包括:
由数字助理设备接收包括一个或多个词项的话音请求,所述话音请求由所述数字助理设备的用户讲出;以及
响应于确定所述一个或多个词项的自动完成包括触发词项:
获得由所述数字助理设备的麦克风在所述话音请求之前的时间窗口期间捕获的背景音频数据,所述背景音频数据捕获在所述时间窗口期间媒体内容的回放;
将所述背景音频数据和所述触发词项提供给实体搜索系统,所述实体搜索系统基于所述背景音频数据来搜索实体数据库以识别与媒体内容的项目相关联的实体;
至少基于(i)所述一个或多个词项的所述自动完成和(ii)由所述实体搜索系统识别的所述实体来生成提示;以及
由所述数字助理设备提供所述提示的合成音频表示以供输出。
2.根据权利要求1所述的方法,其中,所述话音请求包括所讲出的非完整搜索请求或其它部分语音命令。
3.根据权利要求1所述的方法,其中,所述提示包括所讲出的非完整搜索请求的自动完成部分。
4.根据权利要求1所述的方法,其中,所述媒体内容的项目包括在所述时间窗口期间由不同设备播放的歌曲。
5.根据权利要求1所述的方法,其中,所述背景音频数据是来自由不同设备播放的歌曲的、由所述数字助理设备的所述麦克风在所述时间窗口期间捕获的音频的片段。
6.根据权利要求1所述的方法,其中,所述话音请求被提供给自动话音识别器,并且所述实体搜索系统是自动音乐识别器。
7.根据权利要求1所述的方法,其中,所述提示合并所述媒体内容的项目的名称。
8.根据权利要求1所述的方法,其中,所述提示包括基于包括所述一个或多个词项的所述话音请求的至少两个建议搜索查询,所述至少两个建议搜索查询中的每一个基于与所述媒体内容的项目相关联的一个或多个实体。
9.一种系统,包括:
处理器,所述处理器被配置为执行计算机程序指令;以及
编码有所述计算机程序指令的计算机存储介质,所述计算机程序指令在被所述处理器执行时使得所述系统执行操作,所述操作包括:
由数字助理设备接收包括一个或多个词项的话音请求,所述话音请求由所述数字助理设备的用户讲出;以及
响应于确定所述一个或多个词项的自动完成包括触发词项:
获得由所述数字助理设备的麦克风在所述话音请求之前的时间窗口期间捕获的背景音频数据,所述背景音频数据捕获在所述时间窗口期间媒体内容的回放;
将所述背景音频数据和所述触发词项提供给实体搜索系统,所述实体搜索系统基于所述背景音频数据来搜索实体数据库以识别与媒体内容的项目相关联的实体;
至少基于(i)所述一个或多个词项的所述自动完成和(ii)由所述实体搜索系统识别的所述实体来生成提示;以及
由所述数字助理设备提供所述提示的合成音频表示以供输出。
10.根据权利要求9所述的系统,其中,所述话音请求包括所讲出的非完整搜索请求或其它部分语音命令。
11.根据权利要求9所述的系统,其中,所述提示包括所讲出的非完整搜索请求的自动完成部分。
12.根据权利要求9所述的系统,其中,所述媒体内容的项目包括在所述时间窗口期间由不同设备播放的歌曲。
13.根据权利要求9所述的系统,其中,所述背景音频数据是来自由不同设备播放的歌曲的、由所述数字助理设备的所述麦克风在所述时间窗口期间捕获的音频的片段。
14.根据权利要求9所述的系统,其中,所述话音请求被提供给自动话音识别器,并且所述实体搜索系统是自动音乐识别器。
15.根据权利要求9所述的系统,其中,所述提示合并所述媒体内容的项目的名称。
16.根据权利要求9所述的系统,其中,所述提示包括基于包括所述一个或多个词项的所述话音请求的至少两个建议搜索查询,所述至少两个建议搜索查询中的每一个基于与所述媒体内容的项目相关联的一个或多个实体。
17.一种编码有计算机程序的非暂时性计算机可读存储介质,所述计算机程序包括指令,所述指令在被一个或多个计算机执行时使得所述一个或多个计算机执行操作,所述操作包括:
由数字助理设备接收包括一个或多个词项的话音请求,所述话音请求由所述数字助理设备的用户讲出;以及
响应于确定所述一个或多个词项的自动完成包括触发词项:
获得由所述数字助理设备的麦克风在所述话音请求之前的时间窗口期间捕获的背景音频数据,所述背景音频数据捕获在所述时间窗口期间媒体内容的回放;
将所述背景音频数据和所述触发词项提供给实体搜索系统,所述实体搜索系统基于所述背景音频数据来搜索实体数据库以识别与媒体内容的项目相关联的实体;
至少基于(i)所述一个或多个词项的所述自动完成和(ii)由所述实体搜索系统识别的所述实体来生成提示;以及
由所述数字助理设备提供所述提示的合成音频表示以供输出。
18.根据权利要求17所述的非暂时性计算机可读存储介质,其中,所述话音请求包括所讲出的非完整搜索请求或其它部分语音命令。
19.根据权利要求17所述的非暂时性计算机可读存储介质,其中,所述提示包括所讲出的非完整搜索请求的自动完成部分。
20.根据权利要求17所述的非暂时性计算机可读存储介质,其中,所述媒体内容的项目包括在所述时间窗口期间由不同设备播放的歌曲。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/875,855 US9984075B2 (en) | 2015-10-06 | 2015-10-06 | Media consumption context for personalized instant query suggest |
US14/875,855 | 2015-10-06 | ||
CN201680041221.0A CN108604233B (zh) | 2015-10-06 | 2016-09-19 | 用于个性化即时查询建议的媒体消费场境 |
PCT/US2016/052459 WO2017062170A1 (en) | 2015-10-06 | 2016-09-19 | Media consumption context for personalized instant query suggest |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680041221.0A Division CN108604233B (zh) | 2015-10-06 | 2016-09-19 | 用于个性化即时查询建议的媒体消费场境 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114817706A true CN114817706A (zh) | 2022-07-29 |
Family
ID=57018199
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210318219.0A Pending CN114817706A (zh) | 2015-10-06 | 2016-09-19 | 用于个性化即时查询建议的媒体消费场境 |
CN201680041221.0A Active CN108604233B (zh) | 2015-10-06 | 2016-09-19 | 用于个性化即时查询建议的媒体消费场境 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680041221.0A Active CN108604233B (zh) | 2015-10-06 | 2016-09-19 | 用于个性化即时查询建议的媒体消费场境 |
Country Status (4)
Country | Link |
---|---|
US (3) | US9984075B2 (zh) |
EP (1) | EP3304354A1 (zh) |
CN (2) | CN114817706A (zh) |
WO (1) | WO2017062170A1 (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9984075B2 (en) | 2015-10-06 | 2018-05-29 | Google Llc | Media consumption context for personalized instant query suggest |
US20170169007A1 (en) * | 2015-12-15 | 2017-06-15 | Quixey, Inc. | Graphical User Interface for Generating Structured Search Queries |
US10904168B2 (en) * | 2016-06-03 | 2021-01-26 | Spotify Ab | System and method for providing digital media content with a conversational messaging environment |
US10417492B2 (en) * | 2016-12-22 | 2019-09-17 | Microsoft Technology Licensing, Llc | Conversion of static images into interactive maps |
US11200241B2 (en) * | 2017-11-22 | 2021-12-14 | International Business Machines Corporation | Search query enhancement with context analysis |
US10860642B2 (en) | 2018-06-21 | 2020-12-08 | Google Llc | Predicting topics of potential relevance based on retrieved/created digital media files |
CN110147494B (zh) * | 2019-04-24 | 2020-05-08 | 北京三快在线科技有限公司 | 信息搜索方法、装置,存储介质及电子设备 |
US11556707B2 (en) * | 2020-06-18 | 2023-01-17 | Google Llc | Fulfillment of actionable requests ahead of a user selecting a particular autocomplete suggestion for completing a current user input |
US20230244717A1 (en) * | 2022-01-31 | 2023-08-03 | Rovi Guides, Inc. | Methods and apparatuses for preventing spoilers in autocompleted search queries |
CN117422526A (zh) * | 2023-11-15 | 2024-01-19 | 哈尔滨工业大学 | 一种基于提示的用户跨域冷启动方法 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6564213B1 (en) | 2000-04-18 | 2003-05-13 | Amazon.Com, Inc. | Search query autocompletion |
US8200688B2 (en) | 2006-03-07 | 2012-06-12 | Samsung Electronics Co., Ltd. | Method and system for facilitating information searching on electronic devices |
US8694483B2 (en) * | 2007-10-19 | 2014-04-08 | Xerox Corporation | Real-time query suggestion in a troubleshooting context |
US8725756B1 (en) * | 2007-11-12 | 2014-05-13 | Google Inc. | Session-based query suggestions |
US7949647B2 (en) | 2008-11-26 | 2011-05-24 | Yahoo! Inc. | Navigation assistance for search engines |
US9015043B2 (en) * | 2010-10-01 | 2015-04-21 | Google Inc. | Choosing recognized text from a background environment |
US20120117051A1 (en) * | 2010-11-05 | 2012-05-10 | Microsoft Corporation | Multi-modal approach to search query input |
US20120269116A1 (en) | 2011-04-25 | 2012-10-25 | Bo Xing | Context-aware mobile search based on user activities |
US8977641B1 (en) | 2011-09-30 | 2015-03-10 | Google Inc. | Suggesting participation in an online social group |
FR2983870B1 (fr) | 2011-12-08 | 2015-07-17 | Roquette Freres | Composition en methionine destinee a l'alimentation animale |
US9123338B1 (en) * | 2012-06-01 | 2015-09-01 | Google Inc. | Background audio identification for speech disambiguation |
US9483565B2 (en) * | 2013-06-27 | 2016-11-01 | Google Inc. | Associating a task with a user based on user selection of a query suggestion |
KR20150017156A (ko) | 2013-08-06 | 2015-02-16 | 삼성전자주식회사 | 휴대단말기에서 추천어를 제공하는 방법 및 장치 |
CN104714981B (zh) * | 2013-12-17 | 2020-01-10 | 腾讯科技(深圳)有限公司 | 语音消息搜索方法、装置及系统 |
US9620105B2 (en) | 2014-05-15 | 2017-04-11 | Apple Inc. | Analyzing audio input for efficient speech and music recognition |
US10176219B2 (en) * | 2015-03-13 | 2019-01-08 | Microsoft Technology Licensing, Llc | Interactive reformulation of speech queries |
US9984075B2 (en) | 2015-10-06 | 2018-05-29 | Google Llc | Media consumption context for personalized instant query suggest |
-
2015
- 2015-10-06 US US14/875,855 patent/US9984075B2/en active Active
-
2016
- 2016-09-19 EP EP16774592.6A patent/EP3304354A1/en active Pending
- 2016-09-19 CN CN202210318219.0A patent/CN114817706A/zh active Pending
- 2016-09-19 CN CN201680041221.0A patent/CN108604233B/zh active Active
- 2016-09-19 WO PCT/US2016/052459 patent/WO2017062170A1/en active Application Filing
-
2018
- 2018-05-03 US US15/970,230 patent/US20180260395A1/en not_active Abandoned
-
2021
- 2021-08-23 US US17/409,549 patent/US11966432B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN108604233A (zh) | 2018-09-28 |
US20170097932A1 (en) | 2017-04-06 |
US20180260395A1 (en) | 2018-09-13 |
WO2017062170A1 (en) | 2017-04-13 |
CN108604233B (zh) | 2022-04-19 |
US9984075B2 (en) | 2018-05-29 |
US11966432B2 (en) | 2024-04-23 |
EP3304354A1 (en) | 2018-04-11 |
US20210382930A1 (en) | 2021-12-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11966432B2 (en) | Media consumption context for personalized instant query suggest | |
US11960526B2 (en) | Query response using media consumption history | |
US11734287B2 (en) | Mapping images to search queries | |
US11720577B2 (en) | Contextualizing knowledge panels | |
US10275485B2 (en) | Retrieving context from previous sessions | |
US20130198268A1 (en) | Generation of a music playlist based on text content accessed by a user | |
US20140012859A1 (en) | Personalized dynamic content delivery system | |
US9934283B2 (en) | Social annotations for enhanced search results | |
KR20140027285A (ko) | 키워드의 현지화 번역 | |
US20170068683A1 (en) | Context based instant search suggestions | |
US11797590B2 (en) | Generating structured data for rich experiences from unstructured data streams | |
US11151129B1 (en) | Modifying query in discourse context |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |