JP6957485B2 - 情報処理装置、情報処理方法、プログラム、および情報処理システム - Google Patents

情報処理装置、情報処理方法、プログラム、および情報処理システム Download PDF

Info

Publication number
JP6957485B2
JP6957485B2 JP2018540977A JP2018540977A JP6957485B2 JP 6957485 B2 JP6957485 B2 JP 6957485B2 JP 2018540977 A JP2018540977 A JP 2018540977A JP 2018540977 A JP2018540977 A JP 2018540977A JP 6957485 B2 JP6957485 B2 JP 6957485B2
Authority
JP
Japan
Prior art keywords
program
character string
search
search result
recording reservation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018540977A
Other languages
English (en)
Other versions
JPWO2018056105A1 (ja
Inventor
和也 香月
裕之 三ツ堀
慎平 亀岡
卓雄 渡邉
悠之 久保田
俊彦 伏見
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2018056105A1 publication Critical patent/JPWO2018056105A1/ja
Priority to JP2021164563A priority Critical patent/JP7280328B2/ja
Application granted granted Critical
Publication of JP6957485B2 publication Critical patent/JP6957485B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4828—End-user interface for program selection for searching program descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H04N21/6543—Transmission by server directed to the client for forcing some client operations, e.g. recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus

Description

本技術は、情報処理装置、情報処理方法、プログラム、および情報処理システムに関し、特に、検索結果として挙げられた番組の録画予約を容易に設定することができるようにした情報処理装置、情報処理方法、プログラム、および情報処理システムに関する。
近年、音声認識の精度が向上してきている。例えばテレビジョン受像機の中には、ユーザがリモートコントローラなどに設けられたマイクに向かって話すことで番組の検索を行うことができるものもある。
ユーザは、検索結果に挙がった番組の中から所定の番組を選択することによって、その番組の録画予約を設定したり、録画済みの番組の再生を開始させたりすることができる。
特開２０１１−１１８７７５号公報
番組の検索のためにユーザが発話した内容に、検索によって見つかった番組をユーザがどうしようとしているのかを特定することができる情報が含まれていることがある。例えばユーザが「来週の〇〇〇〇のドラマを録画」と発話した場合、「〇〇〇〇」に関連するドラマの番組を録画しようとしていると推定することができる。
本技術はこのような状況に鑑みてなされたものであり、検索結果として挙げられた番組の録画予約を容易に設定することができるようにするものである。
本技術の一側面の情報処理装置は、ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第１の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果を取得し、前記第１の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果を取得する番組検索部と、前記第１の検索結果の表示画面または前記第２の検索結果の表示画面を表示させる表示制御部と、前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する設定部とを備える。
本技術の一側面においては、ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第１の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果が取得され、前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約が設定される。また、ユーザの発話の内容を表す前記文字列に、前記第１の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果が取得され、前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約が設定される。
また、本技術の他の側面の情報処理システムは、サーバと情報処理装置とを備える。そのうちの前記サーバは、ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第１の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行う検索部と、前記設定対象となる番組が特定された場合、特定された番組の識別情報と録画予約を設定することを指示する第１のコマンドとを情報処理装置に送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を前記情報処理装置に送信する通信部とを含む。また、前記情報処理装置は、前記発話の音声データを前記サーバに送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、前記識別情報と前記第１のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記識別情報により識別される番組の録画予約を設定する設定部とを含む。
本技術によれば、検索結果として挙げられた番組の録画予約を容易に設定することができる。
なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術の一実施形態に係る情報処理システムの構成例を示す図である。 TVのアプリケーション構造の例を示す図である。 検索結果画面の例を示す図である。 検索結果画面の他の例を示す図である。 構文解析の例を示す図である。 TVのハードウェア構成例を示すブロック図である。 TVの機能構成例を示すブロック図である。 連携サーバのハードウェア構成例を示すブロック図である。 連携サーバの機能構成例を示すブロック図である。 情報処理システムの動作について説明するシーケンス図である。 ユーザの意図の特定の例を示す図である。 ユーザの意図の特定の他の例を示す図である。 画面表示の流れの例を示す図である。 情報処理システムの他の動作について説明するシーケンス図である。 検索結果画面の例を示す図である。 検索結果画面の他の表示例を示す図である。 画面表示の流れの例を示す図である。 画面表示の流れの他の例を示す図である。 情報処理システムのさらに他の動作について説明するシーケンス図である。
以下、本技術を実施するための形態について説明する。説明は以下の順序で行う。
１．情報処理システムの構成例
２．検索結果の表示例
３．第１の検索例（粒度の異なる文字列を用いて検索を行う例）
４．第２の検索例（発話の内容に応じて検索範囲の絞り込みを行う例）
５．第３の検索例（サーバ側で番組を特定できた場合の例）
６．変形例
＜＜１．情報処理システムの構成例＞＞
図１は、本技術の一実施形態に係る情報処理システムの構成例を示す図である。
図１の情報処理システムは、テレビジョン受像機１（以下、適宜、TV１という）と連携サーバ２が、インターネットなどのネットワーク３を介して接続されることによって構成される。
TV１と連携サーバ２の間では、ネットワーク３を介した通信が行われる。ネットワーク３は、有線のネットワーク、無線のネットワーク、および有線と無線を組み合わせたネットワークのいずれの形態のものであってもよい。
TV１は、地上デジタル放送、衛星放送、ケーブル放送などのテレビジョン放送を受信する。TV１は、放送された番組の映像をディスプレイに表示するとともに、番組の音声をスピーカから出力する。番組の提供がネットワーク３を介して行われるようにしてもよい。
また、TV１は、受信した番組を内蔵または外付けの記録媒体に録画（記録）する機能、および、録画済み番組を再生する機能をも有する。番組の録画が、TV１に接続された録画機器により行われるようにしてもよい。
図２は、TV１のアプリケーション構造の例を示す図である。
TV１にはTV用OS(Operating System)が搭載される。検索アプリケーション、番組再生アプリケーション、番組録画アプリケーション、番組表アプリケーションなどの各種のアプリケーションが、TV用OS上で、TV用OSと連携して動作する。
図２の検索アプリケーションは、例えばWeb上のコンテンツの検索を行うアプリケーションである。コンテンツには、動画、静止画、音楽、ゲーム、電子書籍、アプリケーション、およびそれらの２つ以上の組み合わせからなる、ユーザが利用可能な各種のデジタルデータが含まれる。
番組再生アプリケーションは、例えば、放送中の番組、録画済み番組の再生を行うアプリケーションである。番組録画アプリケーションは、番組の録画を行うアプリケーションである。番組表アプリケーションは、EPG(Electronic Program Guide)の表示、番組の録画予約の管理などを行うアプリケーションである。
TV１には、検索アプリケーションと連携する番組検索モジュールなどの各種のモジュールも用意される。番組検索モジュールは、例えば、EPGに掲載されている番組を対象とした番組の検索、録画済み番組を対象とした番組の検索などを行う。検索アプリケーションがネットワーク３を介して提供される外部のコンテンツであるWebコンテンツの検索を行うものであるのに対して、番組検索モジュールは、TV１の内部のコンテンツの検索を行うものであるということができる。
例えば、検索アプリケーションはTV用OSを提供する企業により用意されるソフトウェアである。一方、番組検索モジュールは、TV用OSや検索アプリケーション等のソフトウェアの提供を受けて、TV１の製造、販売等を行う企業により用意されるソフトウェアである。
番組の受信、番組の録画、録画済み番組の再生、番組の検索などの各種の機能が、これらのプログラムが実行されることによって実現される。
このような各種の機能を有するTV１の操作は、リモートコントローラ４を用いて行われる。リモートコントローラ４は、ユーザによる操作の内容を表す情報をTV１に送信する。
リモートコントローラ４には、各種の操作に用いられるボタンの他にマイクロフォンが設けられる。リモートコントローラ４は、マイクボタンが押された場合、マイクロフォンによりユーザの音声を集音し、音声データをTV１に送信する。
後述するように、TV１においては、番組を含む各種のコンテンツの検索を、音声を用いて行うことが可能とされる。当然、リモートコントローラ４に設けられるボタンを用いて手入力によって入力された文字列を用いてコンテンツの検索を行うことも可能とされる。以下、コンテンツの検索を、音声を用いて行う場合について主に説明する。
連携サーバ２は、TV用OSを提供する企業が管理するサーバである。連携サーバ２は、Webコンテンツの検索機能、TV１から送信されてきた音声の認識機能などの各種の機能を、TV１を含む、TV用OSを搭載する各機器に提供する。
＜＜２．検索結果の表示例＞＞
図３は、検索結果画面の例を示す図である。
例えば、ユーザがリモートコントローラ４を操作して検索機能を実行し、検索のキーとする言葉を発した場合、図３に示すような検索結果画面がTV１のディスプレイに表示される。
検索結果画面の上方には、コンテンツの検索のキーとなる文字列の表示欄である文字列表示欄１１が形成される。図３の例においては、「ＸＸＸが出ている番組」の文字列が表示されている。TV１においては、このような、ユーザが日常的に使う自然言語を用いてコンテンツの検索を行うことが可能とされる。
ユーザがリモートコントローラ４のマイクボタンを押して言葉を発した場合、リモートコントローラ４からTV１に対して音声データが送信される。TV１に送信された音声データは、連携サーバ２に送信され、連携サーバ２において音声認識が行われる。文字列表示欄１１の表示は、連携サーバ２から送信されてきた音声認識の結果に基づいて表示されることになる。
文字列表示欄１１の下には、上から順に、Web動画領域２１、番組領域２２、および映画領域２３が形成される。各領域には、検索結果として挙げられたコンテンツを表すカード状の画像が横に並べて表示される。以下、適宜、コンテンツを表すカード状の画像を、単に、カード画像という。
Web動画領域２１は、Web上の動画を表すカード画像の行の表示領域である。例えば、連携サーバ２は、様々なユーザから投稿された動画を配信するサービスを提供する。Web動画領域２１に表示されるカード画像は、連携サーバ２が、動画配信サービスによって配信する動画を対象として検索された動画を表す画像である。
番組領域２２は、番組を表すカード画像の行の表示領域である。左端のカード画像の上には、「地上Ｄ 予約」の文字が表示されている。図３の番組領域２２に表示されているカード画像は、現在放送中の番組と放送予定の番組、すなわち現在以降に放送される番組の中から検索された、録画予約を設定可能な番組を表す画像である。
番組を表す１つのカード画像は上下２段に分けて構成される。カード画像の上段には番組のサムネイル画像が表示され、下段には番組名や放送日時などの番組情報が表示される。
映画領域２３は、Web上の映画コンテンツを表すカード画像の行の表示領域である。例えば、連携サーバ２は、映画コンテンツをダウンロードまたはストリーミングによって販売するサービスをも提供する。映画領域２３に表示されるカード画像は、連携サーバ２が販売する映画コンテンツを対象として検索された映画コンテンツを表す画像である。
なお、Web動画領域２１、番組領域２２、および映画領域２３を示す破線は、画面に実際に表示されるものではない。図３の検索結果画面には表示されていないが、映画領域２３の下には、他のカテゴリのコンテンツの検索結果の表示領域が配置される。ユーザは、表示範囲をスクロールすることによって、表示されていない他のカテゴリのコンテンツの検索結果を見ることができる。
詳細については後述するが、Web動画領域２１と映画領域２３に表示される検索結果は、ユーザが発話した内容を表す文字列、すなわち、文字列表示欄１１に表示されている文字列全体をまとめてキーとして用いて検索を行うことによって得られた結果である。
一方、番組領域２２に表示される検索結果は、ユーザが発話した内容を表す文字列の構文解析結果として得られた分解文字列を用いて検索を行うことによって得られた結果である。
１つの検索結果画面に、ユーザによって入力された文字列全体に基づいて検索を行うことによって得られた結果と、文字列を構成する分解文字列に基づいて検索を行うことによって得られた結果とが表示されることになる。
図４は、検索結果画面の他の例を示す図である。
番組領域２２には、録画予約を設定可能な番組を表すカード画像の行と、録画済み番組を表すカード画像の行が表示されることがある。図４の番組領域２２に表示されているカード画像の２行のうちの下の行は、録画済み番組を表すカード画像の行である。録画済み番組を表す左端のカード画像の上には「地上Ｄ 録画済み」の文字が表示されている。
番組領域２２には、録画予約を設定可能な番組を表すカード画像の行が表示されずに、録画済み番組を表すカード画像の行のみが表示されることがある。
ユーザは、このような検索結果画面が表示された場合、リモートコントローラ４を操作して所定のコンテンツを選択し、Web動画の視聴、番組の録画予約、録画済み番組の再生、映画コンテンツのダウンロードなどを行うことができる。選択中のコンテンツを表すカード画像は、図３，４の左上端のWeb動画に示すようにポップアップした状態で強調表示される。
＜＜３．第１の検索例＞＞
ここで、ユーザによって入力された文字列全体に基づいて検索を行うとともに、文字列を構成する分解文字列に基づいて検索を行う例について説明する。
図５は、構文解析の例を示す図である。
図５の上段に示すように例えばユーザが「来週の〇〇〇〇のドラマ」の言葉を発した場合、連携サーバ２により音声認識が行われ、「来週の〇〇〇〇のドラマ」の文字列が生成される。
「〇〇〇〇」は固有名詞であり、俳優の名前などの人名であるものとする。この例においては、ユーザが、来週放送される、「〇〇〇〇」が出演するドラマについて調べようと意図していることになる。「来週の〇〇〇〇のドラマ」の文字列は、連携サーバ２からTV１に対して送信される。
連携サーバ２から送信されてきた「来週の〇〇〇〇のドラマ」の文字列を受信したTV１の検索アプリケーションは、さらに、Webコンテンツの検索結果を取得する。TV１に対しては、ユーザの発話の内容を表す文字列に続けて、Webコンテンツの検索結果が連携サーバ２から送信されてくる。
連携サーバ２においては、「来週の〇〇〇〇のドラマ」の文字列全体をひとまとまりとして用いて、Web動画と映画コンテンツの検索が行われ、TV１に対して検索結果が送信される。
TV１は、検索結果として得られたWeb動画を表すカード画像を検索結果画面のWeb動画領域２１に表示させ、映画コンテンツを表すカード画像を検索結果画面の映画領域２３に表示させる。
また、TV１は、図５の矢印の先に示すように、「来週の〇〇〇〇のドラマ」の文字列の構文解析を行う。構文解析により、ユーザが発話した自然言語が意味を持つ最小の単位である形態素に分けられ、それぞれの形態素の品詞などが判別される。また、各形態素を組み合わせるなどして、番組の検索に用いるのに適した属性の分解文字列が生成される。
図５の例においては、「来週の〇〇〇〇のドラマ」の文字列に基づいて、「時制」の属性の「来週」、「人名」の属性の「〇〇〇〇」、および、「ジャンル」の属性の「ドラマ」の分解文字列が生成されている。
TV１は、構文解析の結果として得られた「来週」、「〇〇〇〇」、「ドラマ」に基づいて検索条件を設定し、番組の検索を行う。例えば、今日を基準として「来週」に放送される「ドラマ」のジャンルの番組を検索するように検索条件が設定される。TV１は、検索結果として得られた番組を表すカード画像を、検索結果画面の番組領域２２に追加して表示させる。
これにより、図３，４を参照して説明したような、ユーザの発話の内容を表す文字列全体に基づく検索結果と、その文字列を構成する分解文字列に基づく検索結果を含む検索結果画面が表示されることになる。
＜３−１．各装置の構成例＞
＜３−１−１．TV１の構成＞
図６は、TV１のハードウェア構成例を示すブロック図である。
放送受信部１０１は、図示せぬアンテナから供給された放送波信号を受信し、A/D変換、復調などの各種の処理を施して、番組データをデコーダ１０２に出力する。
デコーダ１０２は、番組データを構成するビデオストリームをデコードし、番組の映像をLCD(Liquid Crystal Display)や有機ELディスプレイなどよりなるディスプレイ１０３に表示させる。また、デコーダ１０２は、番組データを構成するオーディオストリームをデコードし、映像に同期させて、番組の音声をスピーカ１０４から出力させる。
CPU(Central Processing Unit)１０６、ROM(Read Only Memory)１０７、RAM(Random Access Memory)１０８は、バス１０５により相互に接続される。CPU１０６は、ROM１０７や記録部１０９に記録されているプログラムをRAM１０８を用いて実行し、TV１の全体を制御する。
記録部１０９は、HDD(Hard Disk Drive)やSSD(Solid State Drive)などの記録媒体により構成される。記録部１０９は、番組などのコンテンツ、EPGデータ、プログラムなどの各種のデータを記録する。
通信部１１０は、ネットワーク３のインタフェースである。通信部１１０は、連携サーバ２との間で通信を行う。
操作I/F部１１１は、リモートコントローラ４から送信されてきたデータを受信し、バス１０５を介してCPU１０６に出力する。
図７は、TV１の機能構成例を示すブロック図である。
図７に示す機能部のうちの少なくとも一部は、図６のCPU１０６により、図２の各プログラムが実行されることによって実現される。
録画制御部１２１は、番組情報記録部１２５に記録されている情報を参照し、録画予約が設定されている番組の放送が開始された場合、放送受信部１０１を制御して、録画対象の番組のデータを取得する。番組情報記録部１２５には、番組の録画予約に関する情報が記録されている。録画制御部１２１は、取得した番組のデータを録画番組記録部１２２に出力し、記録させる。
例えば、録画制御部１２１は、番組録画アプリケーションが実行されることによって実現される。
録画番組記録部１２２は、記録部１０９において実現される。録画番組記録部１２２は、録画制御部１２１から供給された番組のデータを記録し、録画済み番組として管理する。
再生制御部１２３は、録画番組記録部１２２に記録されている録画済み番組の中から、再生が指示された番組のデータを読み出し、デコーダ１０２に出力して再生させる。
放送波受信制御部１２４は、放送受信部１０１による放送波の受信を制御する。また、放送波受信制御部１２４は、放送受信部１０１において受信された放送波信号からEPGデータを抽出し、番組情報記録部１２５に記録させる。
例えば、再生制御部１２３と放送波受信制御部１２４は、番組再生アプリケーションが実行されることによって実現される。
番組情報記録部１２５は、記録部１０９において実現される。番組情報記録部１２５は、放送波受信制御部１２４から供給されたEPGデータと、録画予約管理部１２６から供給された録画予約に関する情報を記録する。
録画予約管理部１２６は、ユーザの操作に従って、所定の番組の録画予約を設定し、その内容を表す情報を番組情報記録部１２５に記録させる。
例えば、録画予約管理部１２６は、番組表アプリケーションが実行されることによって実現される。
番組検索部１２７は、文字列取得部１２９から供給された文字列を構文解析部１３１に出力し、構文解析を行わせる。番組検索部１２７は、構文解析の結果として構文解析部１３１から供給された分解文字列を検索のキーとして用いて、番組の検索を行う。
具体的には、番組検索部１２７は、番組情報記録部１２５に記録されているEPGデータを参照し、放送中／放送予定の番組を対象として番組の検索を行う。また、番組検索部１２７は、録画番組記録部１２２に記録されている録画済み番組の検索を行う。番組検索部１２７は、検索結果の番組に関する情報を表示制御部１３２に出力する。
例えば、番組検索部１２７は、番組検索モジュールが実行されることによって実現される。
音声データ受信部１２８は、リモートコントローラ４から送信された、ユーザの発話の内容を表す音声データを操作I/F部１１１を制御して受信する。音声データ受信部１２８は、受信した音声データを文字列取得部１２９に出力する。
文字列取得部１２９は、通信部１１０を制御し、受信した音声データを連携サーバ２に送信する。また、文字列取得部１２９は、音声データを送信することに応じて連携サーバ２から送信されてきた文字列を取得する。文字列取得部１２９は、取得した文字列を番組検索部１２７とWebコンテンツ検索部１３０に出力する。
なお、検索のキーとする文字列が手入力によってユーザにより入力された場合、リモートコントローラ４から送信されてきた文字列も操作I/F部１１１において受信され、文字列取得部１２９により取得される。
Webコンテンツ検索部１３０は、通信部１１０を制御し、連携サーバ２から送信されてきたWebコンテンツの検索結果を取得する。Webコンテンツ検索部１３０は、Webコンテンツの検索結果を表示制御部１３２に出力する。
TV１から連携サーバ２に対して文字列が送信され、それに応じて、連携サーバ２においてWebコンテンツの検索が行われ、連携サーバ２からTV１に対して検索結果が送信されるようにしてもよい。この場合、Webコンテンツ検索部１３０は、文字列取得部１２９から供給された文字列を連携サーバ２に送信し、Webコンテンツの検索結果を取得する。
構文解析部１３１は、番組検索部１２７から供給された文字列の構文解析を行い、分解文字列を番組検索部１２７に出力する。構文解析部１３１は、自然言語処理に用いる情報を有している。
表示制御部１３２は、番組検索部１２７から供給された検索結果とWebコンテンツ検索部１３０から供給された検索結果に基づいて、検索結果画面をディスプレイ１０３に表示させる。
例えば、破線Ｌ１で囲んで示す、音声データ受信部１２８、文字列取得部１２９、Webコンテンツ検索部１３０、および表示制御部１３２が、検索アプリケーションが実行されることによって実現される。
＜３−１−２．連携サーバ２の構成＞
図８は、連携サーバ２のハードウェア構成例を示すブロック図である。
CPU２０１、ROM２０２、RAM２０３は、バス２０４により相互に接続される。バス２０４には、さらに、入出力インタフェース２０５が接続される。
入出力インタフェース２０５には、キーボード、マウスなどよりなる入力部２０６、ディスプレイ、スピーカなどよりなる出力部２０７が接続される。また、入出力インタフェース２０５には、ハードディスクや不揮発性のメモリなどよりなる記録部２０８、ネットワークインタフェースなどよりなり、TV１との間で通信を行う通信部２０９、リムーバブルメディア２１１を駆動するドライブ２１０が接続される。
図９は、連携サーバ２の機能構成例を示すブロック図である。
図９に示す機能部のうちの少なくとも一部は、図８のCPU２０１により、所定のプログラムが実行されることによって実現される。連携サーバ２においては、音声データ取得部２２１、音声認識部２２２、および検索部２２３が実現される。
音声データ取得部２２１は、通信部２０９を制御し、TV１から送信されてきた音声データを取得する。音声データ取得部２２１は、取得した音声データを音声認識部２２２に出力する。
音声認識部２２２は、音声データ取得部２２１から供給された音声データの音声認識を行う。音声認識部２２２は、通信部２０９を制御し、ユーザの発話の内容を表す文字列をTV１に送信する。また、音声認識部２２２は、ユーザの発話の内容を表す文字列を検索部２２３に出力する。
検索部２２３は、音声認識部２２２から供給された文字列、または、適宜、TV１から送信されてきた文字列に基づいて、Webコンテンツの検索を行う。記録部２０８には、連携サーバ２が提供する動画配信サービスによって配信されるWeb動画のデータ、連携サーバ２が提供するコンテンツ販売サービスによって送信される映画コンテンツなどの、各種のコンテンツのデータが記録されている。検索部２２３は、通信部２０９を制御し、検索結果をTV１に送信する。
この例においては、連携サーバ２の機能が１台のコンピュータによって実現されるものとしているが、連携サーバ２の機能が複数のコンピュータによって分散して実現されることもある。連携サーバ２の機能が複数のコンピュータによって分散して実現される場合、図９に示す各構成は複数のコンピュータ上で実現され、それぞれ連携して処理が行われることになる。
＜３−２．情報処理システムの動作の例＞
ここで、図１０のシーケンス図を参照して、以上のような構成を有するTV１と連携サーバ２の動作について説明する。
例えば「来週の〇〇〇〇のドラマ」といったようなユーザの音声をマイクロフォンにより集音した場合、ステップＳ１において、リモートコントローラ４は、集音して得られた音声データをTV１に送信する。
ステップＳ１１において、TV１の音声データ受信部１２８は、リモートコントローラ４から送信されてきた音声データを受信する。受信された音声データは文字列取得部１２９に供給される。
ステップＳ１２において、文字列取得部１２９は、音声データを連携サーバ２に送信する。
ステップＳ５１において、連携サーバ２の音声データ取得部２２１は、TV１から送信されてきた音声データを受信する。受信された音声データは音声認識部２２２に供給される。
ステップＳ５２において、音声認識部２２２は、音声データに基づいて音声認識を行い、ユーザの発話の内容を表す文字列を生成する。音声認識によって得られた文字列は検索部２２３に供給される。
ステップＳ５３において、音声認識部２２２は、音声認識によって得られた文字列をTV１に送信する。
ステップＳ５４において、検索部２２３は、音声認識によって得られた文字列全体に基づいてWebコンテンツの検索を行い、ステップＳ５５において検索結果をTV１に送信する。
ステップＳ５３において連携サーバ２から送信された文字列は、ステップＳ１３においてTV１の文字列取得部１２９により受信される。また、ステップＳ５５において連携サーバ２から送信された検索結果はステップＳ１４においてTV１のWebコンテンツ検索部１３０により受信される。Webコンテンツ検索部１３０により受信された検索結果は表示制御部１３２に供給される。
ステップＳ１５において、文字列取得部１２９は、連携サーバ２から送信されてきた文字列を番組検索部１２７に出力する。
ステップＳ１６において、表示制御部１３２は、Webコンテンツ検索部１３０から供給された検索結果に基づいて、検索結果のWebコンテンツを表すカード画像が並ぶ検索結果画面をディスプレイ１０３に表示させる。このとき、検索されたWeb動画を表すカード画像がWeb動画領域２１に表示され、映画コンテンツを表すカード画像が映画領域２３に表示される。
一方、ステップＳ３１において、番組検索部１２７は、文字列取得部１２９から供給された文字列を受信し、ステップＳ３２において構文解析部１３１に出力する。
ステップＳ４１において、構文解析部１３１は、番組検索部１２７から供給された文字列を受信し、ステップＳ４２において構文解析を行う。
ステップＳ４３において、構文解析部１３１は、構文解析の結果として取得された分解文字列を、各分解文字列の属性の情報とともに番組検索部１２７に出力する。
ステップＳ３３において、番組検索部１２７は、構文解析部１３１から供給された情報を受信し、ステップＳ３４において、放送中／放送予定の番組と録画済み番組を対象とした検索を分解文字列に基づいて行う。例えば、分解文字列により検索条件が設定され、番組の検索が行われる。
ステップＳ３５において、番組検索部１２７は、検索結果の番組に関する情報を、各番組が選択されたときに起動するアプリケーションを特定する情報とともに表示制御部１３２に出力する。例えば、検索された放送中／放送予定の番組については、それが選択されたときに起動させるアプリケーションとして番組表アプリケーションを表す情報が出力される。また、検索された録画済み番組については、それが選択されたときに起動させるアプリケーションとして番組再生アプリケーションを表す情報が出力される。
ステップＳ１７において、表示制御部１３２は、番組検索部１２７から供給された情報を受信し、ステップＳ１８において、検索された番組のカード画像を検索結果画面に追加して表示させる。
これにより、Web動画領域２１と映画領域２３の表示に加えて、放送中／放送予定の番組を表すカード画像の行と録画済み番組を表すカード画像の行のうちの一方、又は両方が番組領域２２に表示される。その後、検索結果画面を表示するための一連の処理が終了となる。
番組領域２２に表示された放送中／放送予定の番組のカード画像がユーザにより選択された場合、番組表アプリケーションが起動し、番組の詳細情報の表示などが行われた後、選択された番組の録画予約が録画予約管理部１２６により設定される。
また、番組領域２２に表示された録画済み番組のカード画像がユーザにより選択された場合、番組再生アプリケーションが起動し、選択された録画済み番組のデータが録画番組記録部１２２から読み出される。読み出されたデータは再生制御部１２３に供給され、録画済み番組の再生が開始される。
以上の一連の処理により、１つの検索結果画面に、ユーザによって入力された文字列全体に基づいて検索されたWebコンテンツの情報と、文字列を構成する分解文字列に基づいて検索された番組の情報が表示される。
検索の対象となる番組の中には、文字列全体を用いて検索した場合には見つからないが、分解文字列を用いて検索した場合には見つかる番組もある。また、仮に、文字列全体を用いて番組の検索を行った場合、ユーザが探そうとしている例えば「〇〇〇〇」とは関係のない番組が、「〇〇〇〇」以外の文字列に基づいて検索されてしまうこともある。
分解文字列を用いて検索を行うことにより、番組については、ユーザの意図に沿った、精度の高い検索を実現することが可能になる。
分解文字列を用いた検索が、番組を対象として行われるものとしたが、Webコンテンツを対象としても行われるようにしてもよい。
なお、図１０を参照して説明した各ステップの処理は、適宜、他のステップの処理と並行して、または他のステップの処理と前後して行われる。後述するシーケンス図の処理についても同様である。
＜＜４．第２の検索例＞＞
ユーザの発話の内容によっては、ユーザが、放送中／放送予定の番組の中から番組を見つけてその録画予約を設定しようとしているのか、録画済み番組の中から番組を見つけてそれを視聴しようとしているのかを特定できることがある。
ユーザの意図を特定できた場合に、検索結果の提示の仕方や画面表示の流れをユーザの意図に応じて切り替えるようにしてもよい。
図１１および図１２は、ユーザの意図の特定の例を示す図である。
図１１の上段に示すように、「録画した」の言葉に続けて特定の属性の言葉をユーザが発した場合、ユーザが、「録画した」の言葉の後に発した言葉に関連のある録画済み番組を視聴しようとしているとして特定される。この例においては、「録画した」の言葉に続けて、「時制」、「人名」、「番組名」、「ジャンル」、「放送局名」のうちの少なくともいずれかの属性の言葉をユーザが発した場合にそのようなユーザの意図が特定される。
ユーザの発話の内容を表す文字列の構文解析を行うことによって、「録画した」の言葉に続けて特定の属性の言葉を発したことが検出された場合、矢印の先に示すように、録画リスト表示コマンドが構文解析部１３１から番組検索部１２７に出力される。録画リスト表示コマンドは、録画済み番組の検索結果を表示することを指示するコマンドである。
録画リスト表示コマンドを受信した番組検索部１２７は、録画済み番組のみを対象として番組の検索を行う。検索結果画面には、「録画した」に続く分解文字列に基づいて検索された録画済み番組が検索結果として表示され、放送中／放送予定の番組は表示されない。
例えば、図１１の下段に示すように、「録画した△△△△が見たい」をユーザが発した場合、その文字列の構文解析が構文解析部１３１において行われ、「番組名」の属性の「△△△△」とともに、録画リスト表示コマンドが番組検索部１２７に供給される。ここでは、「△△△△」は番組名を表す固有名詞であるものとする。
番組検索部１２７は、録画済み番組のみを対象として、「△△△△」に基づいて番組の検索を行う。番組検索画面には、「番組名」として「△△△△」を含む録画済み番組の検索結果が表示される。
一方、図１２の上段に示すように、特定の属性の言葉に続けて、「を予約」、「を録画」、および「を録画予約」のうちのいずれかの言葉をユーザが発した場合、ユーザが、「を予約」等の言葉の前に発した言葉に関連のある放送中／放送予定の番組の録画予約を設定しようとしているとして特定される。この例においても、「時制」、「人名」、「番組名」、「ジャンル」、「放送局名」のうちの少なくともいずれかの属性の言葉に続けて、「を予約」等の言葉をユーザが発した場合にそのようなユーザの意図が特定される。
なお、「を予約して」の言葉をユーザが発した場合も、「を予約」の言葉をユーザが発した場合と同様の処理が行われる。また、「を録画して」の言葉をユーザが発した場合も、「を録画」の言葉をユーザが発した場合と同様の処理が行われる。
ユーザの発話の内容を表す文字列の構文解析を行うことによって、特定の属性の言葉に続けて「を予約」等の言葉を発したことが検出された場合、矢印の先に示すように、録画予約設定コマンドが構文解析部１３１から番組検索部１２７に出力される。録画予約設定コマンドは、録画予約を設定可能な、放送中／放送予定の番組の検索結果を表示することを指示するコマンドである。
録画予約設定コマンドを受信した番組検索部１２７は、放送中／放送予定の番組のみを対象として番組の検索を行う。検索結果画面には、「を予約」等の前の分解文字列に基づいて検索された放送中／放送予定の番組が検索結果として表示され、録画済み番組は表示されない。
例えば、図１２の下段に示すように、「来週の〇〇〇〇のドラマを録画」をユーザが発した場合、その文字列の構文解析が構文解析部１３１において行われる。また、構文解析の結果として、「時制」の属性の「来週」、「人名」の属性の「〇〇〇〇」、および、「ジャンル」の属性の「ドラマ」の分解文字列とともに、録画予約設定コマンドが番組検索部１２７に供給される。
番組検索部１２７は、「来週」に放送される「ドラマ」の番組のみを対象として、「〇〇〇〇」に基づいて番組の検索を行う。番組検索画面には、「〇〇〇〇」が出演する番組の検索結果が表示される。
このように、TV１は、発話の内容からユーザの意図を特定し、検索結果の提示の仕方を変えることができる。
すなわち、ユーザが、放送中／放送予定の番組の中から番組を見つけてその録画予約を設定しようとしている場合には、検索範囲の絞り込みが行われ、放送中／放送予定の番組の検索結果が表示される。また、ユーザが、録画済み番組の中から番組を見つけてそれを視聴しようとしている場合には、検索範囲の絞り込みが行われ、録画済み番組の検索結果が表示される。
このように検索結果の提示の仕方を変えることにより、ユーザにとって直感的でわかりやすい検索結果画面を表示することが可能になる。
＜４−１．画面遷移の例＞
図１３は、画面表示の流れの例を示す図である。
図１３の左端に示す画面＃１は視聴中の番組の画面である。例えばこの状態でユーザがリモートコントローラ４のマイクボタンを押した場合、矢印Ａ１の先に示すように、TV１は、ユーザによる音声入力を待つ状態になる。ディスプレイ１０３の表示は、音声待ち受け画面である画面＃２に切り替わる。
リモートコントローラ４から送信されてきた音声データは連携サーバ２に送信され、ユーザの発話の内容を表す文字列が取得される。また、連携サーバ２から送信されてきた文字列の構文解析がTV１において行われ、分解文字列が取得される。分解文字列の内容に応じて、適宜、構文解析部１３１から番組検索部１２７に対して、録画リスト表示コマンドまたは録画予約設定コマンドが出力される。
構文解析部１３１から出力された構文解析の結果に録画リスト表示コマンドまたは録画予約設定コマンドが含まれない場合、矢印Ａ２の先に示すように、ディスプレイ１０３の表示は、番組の検索範囲の絞り込みが行われていない検索結果画面＃３に切り替わる。検索結果画面＃３は、放送中／放送予定の番組と録画済み番組の検索結果を含む、図４を参照して説明した画面と同様の画面である。
検索結果画面＃３において、放送中／放送予定の所定の番組が選択された場合、矢印Ａ３の先に示すように、ディスプレイ１０３の表示は番組詳細画面＃４に切り替わる。番組詳細画面＃４は、ユーザにより選択された番組の内容、放送日時などの詳細情報を含む画面である。番組詳細画面＃４は例えば番組情報記録部１２５に記録されているEPGに基づいて表示される。
番組詳細画面＃４には、詳細情報を表示中の番組の録画予約を設定するときに操作される録画予約ボタン、視聴予約を設定するときに操作される視聴予約ボタン、検索結果画面＃３に戻るときに操作される戻るボタンなどが表示される。
例えば録画予約ボタンが操作された場合、矢印Ａ４の先に示すように、ディスプレイ１０３の表示は予約内容確認画面＃５に切り替わる。予約内容確認画面＃５には、予約内容の他に、予約を確定するときに操作される確定ボタンなどが表示される。
確定ボタンが操作された場合、矢印Ａ５の先に示すように、番組の録画予約が完了し、その内容を表す情報が番組情報記録部１２５に記録される。ディスプレイ１０３の表示は、矢印Ａ６に示すように番組詳細画面＃４に切り替わる。番組詳細画面＃４において戻るボタンが操作された場合、矢印Ａ７に示すように、ディスプレイ１０３の表示は検索結果画面＃３に戻る。
検索結果画面＃３において、録画済みの所定の番組が選択された場合、矢印Ａ８の先に示すように、ディスプレイ１０３の表示は番組再生画面＃６に切り替わる。録画済み番組のデータが録画番組記録部１２２から読み出され、再生制御部１２３により再生される。
矢印Ａ９の先に示すように番組の再生が終了した場合、矢印Ａ１０の先に示すように、ディスプレイ１０３の表示は検索結果画面＃３に戻る。
構文解析部１３１から出力された構文解析の結果に録画リスト表示コマンドまたは録画予約設定コマンドが含まれない場合、録画予約設定時のディスプレイ１０３の表示は破線Ｌ１１で囲むようにして切り替えられる。
一方、構文解析部１３１から出力された構文解析の結果に録画リスト表示コマンドまたは録画予約設定コマンドが含まれる場合、矢印Ａ１１の先に示すように、ディスプレイ１０３の表示は、番組の検索範囲の絞り込みが行われた検索結果画面＃７に切り替わる。
検索結果画面＃７は、録画リスト表示コマンドが出力された場合には録画済み番組の検索結果を含む画面となり、録画予約設定コマンドが出力された場合には放送中／放送予定の番組の検索結果を含む画面となる。
構文解析部１３１から出力されたコマンドが録画予約設定コマンドであり、検索結果画面＃７において、放送中／放送予定の所定の番組が選択された場合、矢印Ａ１２の先に示すように、番組の録画予約が完了し、その内容を表す情報が番組情報記録部１２５に記録される。すなわち、この場合、ユーザが番組の録画予約を設定しようとしていることが特定されているから、番組詳細画面＃４などは表示されない。
矢印Ａ１３に示すように、番組の予約が行われている間も、ディスプレイ１０３には検索結果画面＃７が表示され続ける。ユーザは、検索結果画面＃７に検索結果として挙げられた放送中／放送予定の番組を選択するだけで、複数の番組の録画予約の設定を次々と行うことができる。
構文解析部１３１から出力されたコマンドが録画リスト表示コマンドであり、検索結果画面＃７において、録画済みの所定の番組が選択された場合、矢印Ａ１４の先に示すように、ディスプレイ１０３の表示は番組再生画面＃６に切り替わる。録画済み番組のデータが録画番組記録部１２２から読み出され、再生制御部１２３により再生される。
番組の再生が終了した場合、矢印Ａ１５の先に示すように、ディスプレイ１０３の表示は検索結果画面＃７に戻る。
このように、構文解析部１３１から出力された構文解析の結果に録画予約設定コマンドが含まれる場合、録画予約設定時のディスプレイ１０３の表示は破線Ｌ１２で囲むようにして切り替えられる。
特に、録画予約を設定するまでの画面表示が、発話の内容から特定したユーザの意図に応じて以上のようにして切り替えられることにより、ユーザは、検索結果として挙げられた番組の録画予約を容易に設定することが可能になる。
＜４−２．情報処理システムの動作の例＞
ここで、図１４のシーケンス図を参照して、図１３に示す画面表示を実現するTV１と連携サーバ２の動作について説明する。
図１４の処理は、リモートコントローラ４から送信された音声データをTV１が受信したときに開始される。なお、図１４に示すTV１のステップＳ１０１乃至Ｓ１０５，Ｓ１２１乃至Ｓ１２３，Ｓ１４１乃至１４３の処理は、それぞれ、図１０のステップＳ１２乃至Ｓ１６，Ｓ３１乃至Ｓ３３，Ｓ４１乃至４３の処理と同様の処理である。また、図１４に示す連携サーバ２のステップＳ１５１乃至Ｓ１５５の処理は、それぞれ、図１０のステップＳ５１乃至Ｓ５５の処理と同様の処理である。重複する説明については適宜省略する。
ステップＳ１０１において、TV１の文字列取得部１２９は、リモートコントローラ４から送信され、音声データ受信部１２８により受信された音声データを連携サーバ２に送信する。
ステップＳ１５１において、連携サーバ２の音声データ取得部２２１は、TV１から送信されてきた音声データを受信する。
ステップＳ１５２において、音声認識部２２２は、音声認識を行い、ユーザの発話の内容を表す文字列を生成する。
ステップＳ１５３において、音声認識部２２２は、音声認識によって得られた文字列をTV１に送信する。
ステップＳ１５４において、検索部２２３は、音声認識によって得られた文字列全体に基づいてWebコンテンツの検索を行い、ステップＳ１５５において検索結果をTV１に送信する。
ステップＳ１５３において連携サーバ２から送信された文字列は、ステップＳ１０２においてTV１の文字列取得部１２９により受信される。また、ステップＳ１５５において連携サーバ２から送信された検索結果はステップＳ１０３においてTV１のWebコンテンツ検索部１３０により受信される。
ステップＳ１０４において、文字列取得部１２９は、連携サーバ２から送信されてきた文字列を番組検索部１２７に出力する。
ステップＳ１０５において、表示制御部１３２は、Webコンテンツ検索部１３０から供給された検索結果に基づいて、Webコンテンツを表すカード画像が並ぶ検索結果画面をディスプレイ１０３に表示させる。
一方、ステップＳ１２１において、番組検索部１２７は、文字列取得部１２９から供給された文字列を受信し、ステップＳ１２２において構文解析部１３１に出力する。
ステップＳ１４１において、構文解析部１３１は、番組検索部１２７から供給された文字列を受信し、ステップＳ１４２において構文解析を行う。構文解析部１３１は、構文解析の結果に基づいて、ユーザが、「録画した」の言葉に続けて特定の属性の言葉を発しているか、または、特定の属性の言葉に続けて「を予約」等の言葉を発しているかを検出する。
ステップＳ１４３において、構文解析部１３１は、構文解析の結果として取得された分解文字列を、各分解文字列の属性の情報とともに番組検索部１２７に出力する。ここで送信される構文解析結果には、「録画した」の言葉に続けて特定の属性の言葉を発していることが検出された場合には録画リスト表示コマンドが含まれる。また、特定の属性の言葉に続けて「を予約」等の言葉を発していることが検出された場合には録画予約設定コマンドが含まれる。
ステップＳ１２３において、番組検索部１２７は、構文解析部１３１から供給された情報を受信する。
受信した情報に録画リスト表示コマンドまたは録画予約設定コマンドが含まれていない場合、ステップＳ１２４において、番組検索部１２７は、放送中／放送予定の番組と録画済み番組を対象とした検索を分解文字列に基づいて行う。
ステップＳ１２５において、番組検索部１２７は、検索結果の番組に関する情報を、各番組が選択されたときに起動するアプリケーションを特定する情報とともに表示制御部１３２に出力する。
一方、受信した情報に録画リスト表示コマンドまたは録画予約設定コマンドが含まれる場合、ステップＳ１２６において、番組検索部１２７は、番組の検索範囲をコマンドの種類に応じて設定する。構文解析部１３１から供給されたコマンドが録画リスト表示コマンドである場合、録画済み番組が検索範囲として設定され、録画予約設定コマンドである場合、放送中／放送予定の番組が検索範囲として設定される。
ステップＳ１２７において、番組検索部１２７は、設定した検索範囲の番組を対象として、番組の検索を分解文字列に基づいて行う。
ステップＳ１２８において、番組検索部１２７は、検索結果の番組に関する情報を、各番組が選択されたときに起動するアプリケーションを特定する情報とともに表示制御部１３２に出力する。
ステップＳ１２５において出力された検索結果はステップＳ１０６において表示制御部１３２により受信され、ステップＳ１２８において出力された検索結果はステップＳ１０７において表示制御部１３２により受信される。
ステップＳ１０８において、表示制御部１３２は、検索された番組のカード画像を検索結果画面に追加して表示させる。例えば、録画リスト表示コマンドが構文解析部１３１から出力された場合には、録画済み番組の行が番組領域２２に追加して表示され、録画予約設定コマンドが構文解析部１３１から出力された場合には、放送中／放送予定の番組の行が番組領域２２に追加して表示される。その後の画面表示の切り替えは、図１３を参照して説明したようにして行われる。
以上のように、録画済み番組を視聴しようとして音声による検索を行った場合、録画済み番組だけが検索結果として表示されるため、ユーザは、視聴しようとする番組を容易に選択することができる。
また、放送中／放送予定の番組の録画予約を設定しようとして音声による検索を行った場合、放送中／放送予定の番組だけが検索結果として表示されるため、ユーザは、録画したい番組を容易に選択することができる。録画したい番組を選択した場合には、詳細画面などが表示されずに録画予約が直接設定されるため、ユーザは、番組の録画予約を容易に設定することができる。
＜４−３．他の表示例＞
録画予約を設定しようとして選択した番組と放送時間帯が重複する他の番組に録画予約が既に設定されている場合、図１５に示すように、そのことを通知するダイアログボックス３０１が検索結果画面上に表示される。
図１５に示すダイアログボックス３０１には、選択した番組の録画予約を設定しないことを選択するときに操作するボタンと、選択した番組の録画予約を設定するときに操作するボタンが表示される。
このようなダイアログボックスが表示されることにより、番組の詳細画面や予約内容の確認が表示されない場合においても、ユーザは、放送時間が重複する他の番組の録画予約を既に設定していることを検索結果画面上で確認することができる。
図１６は、検索結果画面の他の表示例を示す図である。
図１６の例においては、放送中／放送予定の番組の行の右端に、検索結果の番組を表すカード画像と並べて、予約リストを表示させるときに選択されるカード画像３１１が表示されている。カード画像３１１が選択された場合、ディスプレイ１０３には予約リストが表示される。
予約リストは、録画予約の設定済みの番組のリストである。予約リストから、番組の録画予約を修正したり、キャンセルしたりすることが可能とされる。
番組のカード画像を選択するだけで録画予約の設定が完了するため、ユーザが間違えて録画予約を設定してしまうことが多くなる可能性がある。予約リスト表示用のカード画像を表示して予約リストへの導線を検索結果画面に確保しておくことにより、ユーザは、録画予約の設定を容易に修正することができる。
図１７は、画面表示の流れの例を示す図である。
図１７に示す検索結果画面＃２１は図１６の画面と同じ画面である。カード画像３１１が選択された場合、矢印Ａ２１の先に示すように、予約リストが検索結果画面＃２１に代えて表示される。検索結果画面＃２１に重ねて予約リストが表示されるようにしてもよい。
録画済み番組だけが検索結果として表示されている場合、録画済みリストへの導線が検索結果画面＃２１に確保される。録画済みリストは、録画済み番組のリストである。録画済みリストは例えば録画番組記録部１２２に記録されている情報に基づいて表示される。
この場合、録画済み番組の行の右端に、検索結果の番組を表すカード画像と並べて、録画済みリストを表示させるときに選択されるカード画像が表示される。録画済みリスト表示用のカード画像が選択された場合、図１７の矢印Ａ２２の先に示すように、録画済みリストが検索結果画面＃２１に代えて表示される。
このように、予約リストや録画済みリストなどの他の画面への導線を検索結果画面に用意するようにしてもよい。
＜＜５．第３の検索例＞＞
ユーザが発した言葉から、ユーザが録画済み番組を視聴しようとしているのか、放送中／放送予定の番組の録画予約を設定しようとしているのかが特定されるものとしたが、さらに、ユーザが意図している番組が特定されるようにしてもよい。この場合、番組の特定に用いられる情報が連携サーバ２において管理され、ユーザが意図している番組の特定が連携サーバ２により行われる。
例えば、録画済みのある番組について、ユーザが視聴しようとしていることが特定された場合、連携サーバ２からTV１に対して、特定された番組の再生を開始することを指示するコマンドが送信される。TV１においては、検索結果画面を表示することなく、連携サーバ２により特定された録画済み番組の再生が開始される。
また、放送中／放送予定のある番組について、ユーザが録画予約を設定しようとしていることが特定された場合、連携サーバ２からTV１に対して、特定された番組の録画予約を設定することを指示するコマンドが送信される。TV１においては、検索結果画面を表示することなく、連携サーバ２により特定された番組の録画予約が設定される。
＜５−１．画面遷移の例＞
図１８は、画面表示の流れの他の例を示す図である。
図１８の左端に示す画面＃３１は視聴中の番組の画面である。例えばこの状態でユーザがリモートコントローラ４のマイクボタンを押した場合、矢印Ａ３１の先に示すように、TV１は、ユーザによる音声入力を待つ状態になる。ディスプレイ１０３の表示は、音声待ち受け画面である画面＃３２に切り替わる。
リモートコントローラ４から送信されてきた音声データは連携サーバ２に送信され、ユーザの発話の内容を表す文字列が取得される。連携サーバ２においては、取得された文字列に基づいて、ユーザが意図している番組の特定と、その番組に対する処理の種類の特定とが行われる。
番組の特定は、例えば、ユーザの発話の内容を表す文字列中に含まれる番組名を検出することによって行われる。連携サーバ２には、各種の番組の番組名が管理されている。
また、番組に対する処理の種類の特定は、ユーザが、特定の属性の言葉に続けて「を予約」等の言葉を発していることを検出することにより、または、「録画した」の言葉に続けて特定の属性の言葉を発していることを検出することにより行われる。連携サーバ２においては、適宜、構文解析が行われる。
ユーザが意図している番組が特定できないものの、ある番組に対する処理の種類が特定された場合、上述した録画リスト表示コマンド、または録画予約設定コマンドが、連携サーバ２からTV１に対して送信される。
この場合の画面表示の切り替えは、矢印Ａ３２の先に示す、破線Ｌ１２で囲む流れで行われる。図１８の破線Ｌ１２で囲んで示す画面表示は、図１３の破線Ｌ１２で囲んで示す画面表示と同様である。
すなわち、特定の属性の言葉に続けて「を予約」等の言葉をユーザが発している場合、検索結果画面には、分解文字列に基づいて検索された放送中／放送予定の番組が表示される。検索結果の放送中／放送予定の番組の中から所定の番組が選択された場合、矢印Ａ１２の先に示すように、番組詳細画面を表示することなく、録画予約が設定される。
また、「録画した」の言葉に続けて特定の属性の言葉をユーザが発している場合、検索結果画面には、分解文字列に基づいて検索された録画済み番組が表示される。検索結果の録画済み番組の中から所定の番組が選択された場合、矢印Ａ１４の先に示すように、録画済み番組の再生が開始される。
一方、ユーザが意図している番組と、その番組に対する処理の種類として録画予約を設定することが特定された場合、矢印Ａ３３の先に示すように、ディスプレイ１０３の表示は、予約内容確認画面＃３３に切り替わる。
予約内容確認画面＃３３は、ユーザの発話の内容から特定された番組の録画予約の内容を提示する画面である。予約内容確認画面＃３３には、予約内容の他に、予約を確定するときに操作される確定ボタンなどが表示される。
確定ボタンが操作された場合、矢印Ａ３４の先に示すように、番組の録画予約が完了し、その内容を表す情報が番組情報記録部１２５に記録される。その後、ディスプレイ１０３の表示は例えば画面＃３１に戻る。ユーザが意図している番組と、その番組に対する処理の種類として録画予約を設定することが特定された場合、予約内容確認画面＃３３が表示されずに、録画予約の設定が行われるようにしてもよい。
また、ユーザが意図している番組と、その番組に対する処理の種類として録画済み番組を視聴することが特定された場合、矢印Ａ３５の先に示すように、ディスプレイ１０３の表示は番組再生画面＃６に切り替わる。録画済み番組のデータが録画番組記録部１２２から読み出され、再生制御部１２３により再生される。
このように、ユーザが意図している番組と、その番組に対する処理の種類が特定された場合、ディスプレイ１０３の表示は破線Ｌ２１で囲むようにして切り替えられる。
これにより、ユーザは、会話と同様の言葉を用いて、検索結果画面を操作することなく、録画済み番組の再生を直接開始させたり、番組の録画予約を直接設定したりすることができる。
＜５−２．情報処理システムの動作の例＞
ここで、図１９のシーケンス図を参照して、以上のような画面表示を実現するTV１と連携サーバ２の動作について説明する。
図１９の処理も、リモートコントローラ４から送信された音声データをTV１が受信したときに開始される。
ステップＳ２１１において、TV１の文字列取得部１２９は、リモートコントローラ４から送信され、音声データ受信部１２８により受信された音声データを連携サーバ２に送信する。
ステップＳ２３１において、連携サーバ２の音声データ取得部２２１は、TV１から送信されてきた音声データを受信する。
ステップＳ２３２において、音声認識部２２２は、音声データに基づいて音声認識を行い、ユーザの発話の内容を表す文字列を生成する。また、音声認識部２２２は、適宜、生成した文字列の構文解析を行う。音声認識部２２２は、ユーザの発話の内容を表す文字列に基づいて、番組に対する処理の種類を特定する。
ステップＳ２３３において、検索部２２３は、構文解析によって得られた番組名を表す文字列を用いるなどして、ユーザが意図している番組を特定する。ここでは、ユーザが意図している番組が特定されたものとして説明する。番組が特定できなかった場合、図１４を参照して説明した処理と同様の処理が行われる。
ユーザが意図していた番組として放送中／放送予定の番組が特定されるとともに、その番組に対する処理の種類として録画予約を設定することが特定された場合、ステップＳ２３４において、検索部２２３は、番組情報と録画予約設定コマンドをTV１に送信する。番組情報には、ユーザが意図していた番組の識別情報が含まれる。
ステップＳ２０１において、TV１の録画予約管理部１２６は、連携サーバ２から送信されてきた情報を受信する。連携サーバ２から送信されてきた情報に基づいて、表示制御部１３２により予約内容確認画面が表示される。図７の各部は、図７において矢印で示す経路以外の図示せぬ経路によっても接続される。
番組の録画予約を確定することが選択された場合、ステップＳ２０２において、録画予約管理部１２６は、識別情報により識別される番組の録画予約を設定する。
一方、ユーザが意図していた番組として録画済み番組が特定されるとともに、その番組に対する処理の種類として視聴しようとしていることが特定された場合、ステップＳ２３５において、検索部２２３は、番組情報と再生コマンドをTV１に送信する。
ステップＳ２０３において、TV１の録画予約管理部１２６は、連携サーバ２から送信されてきた情報を受信し、ステップＳ２０４において、連携サーバ２により特定された番組が録画済みであるかを番組検索部１２７に問い合わせる。録画予約管理部１２６から番組検索部１２７に対する問い合わせには、番組の識別情報が含まれる。
ステップＳ２２１において、番組検索部１２７は、録画予約管理部１２６からの問い合わせを受信する。
ステップＳ２２２において、番組検索部１２７は、録画番組記録部１２２に記録されている録画済み番組を対象として、連携サーバ２により特定された番組の検索を行い、ステップＳ２２３において問い合わせ結果を録画予約管理部１２６に出力する。ここでは、連携サーバ２により特定された番組、すなわち、ユーザが意図していた番組が録画済みであるものとする。
ステップＳ２０５において、録画予約管理部１２６は、番組検索部１２７から供給された問い合わせ結果を受信する。
ステップＳ２０６において、録画予約管理部１２６は、連携サーバ２により特定された番組の再生を再生制御部１２３に開始させ、処理を終了させる。
以上の処理により、ユーザは、検索結果画面を操作することなく、録画済み番組の再生を直接開始させたり、番組の録画予約を直接設定したりすることができる。
以上においては、ユーザが意図している番組の特定と、番組に対する処理の種類の特定とが連携サーバ２により行われるものとしたが、TV１により行われるようにしてもよい。
また、音声によってTV１に行わせることができる処理が、録画予約の設定と録画済み番組の再生であるものとしたが、視聴予約の設定、録画済み番組のダビングなどの、他の種類の処理を発話によって行わせることができるようにしてもよい。また、Webコンテンツの再生、購入などの他の種類の処理を、音声によって行わせることができるようにしてもよい。
＜＜６．変形例＞＞
以上においては、情報処理装置としてのTV１と、連携サーバ２により情報処理システムが構成されるものとしたが、放送波を受信可能な他の装置と連携サーバ２により情報処理システムが構成されるようにしてもよい。
例えば、コンテンツを表示するディスプレイを有さないセットトップボックス、ハードディスクレコーダーなどの録画機器、タブレット端末などの携帯端末をTV１に代えて用いて、情報処理システムが構成されるようにすることが可能である。
また、上述したTV１の機能のうちの少なくとも一部を、TV１の外部の装置に搭載するようにしてもよい。例えば、図７に示す機能のうちの構文解析部１３１の機能を外部のサーバに持たせ、TV１が、その外部のサーバと連携することによって上述した各処理が行われるようにすることが可能である。また、記録部１０９や録画機器を外部のサーバにもたせるようにすることも可能である。さらに、放送波によりコンテンツが提供されずにインターネット経由で外部のサーバよりコンテンツが提供されるようになってもよい。
また、TV１と通信が可能なスマートフォンなどの携帯端末に図７に示す機能のうちの少なくとも一部を持たせ、TV１と携帯端末により、上述した各処理が行われるようにしてもよい。
また、ユーザが発話した内容を表す文字列を処理する情報処理システムとして説明したが、ユーザが発話した内容に限らず、ユーザがキーボードやタッチ操作などにより入力した文字列を処理する情報処理システムとしてもよい。
本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、汎用のパーソナルコンピュータなどにインストールされる。
インストールされるプログラムは、光ディスク（CD-ROM(Compact Disc-Read Only Memory)，DVD(Digital Versatile Disc)等）や半導体メモリなどよりなる図８に示されるリムーバブルメディア２１１に記録して提供される。また、ローカルエリアネットワーク、インターネット、デジタル放送といった、有線または無線の伝送媒体を介して提供されるようにしてもよい。プログラムは、ROM２０２や記録部２０８に、あらかじめインストールしておくことができる。
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
＜構成の組み合わせ例＞
本技術は、以下のような構成をとることもできる。
（１）
ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第１の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果を取得し、前記第１の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果を取得する番組検索部と、
前記第１の検索結果の表示画面または前記第２の検索結果の表示画面を表示させる表示制御部と、
前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する設定部と
を備える情報処理装置。
（２）
ユーザの発話の内容を表す前記文字列の構文解析を行う構文解析部をさらに備え、
前記番組検索部は、前記構文解析の結果である分解文字列に基づいて番組の検索を行うことによって、前記第１の検索結果または前記第２の検索結果を取得する
前記（１）に記載の情報処理装置。
（３）
ネットワークを介して提供されるコンテンツの、前記文字列に基づく検索結果を取得するコンテンツ検索部をさらに備え、
前記表示制御部は、前記コンテンツの検索結果に追加して、前記第１の検索結果または前記第２の検索結果を表示させる
前記（２）に記載の情報処理装置。
（４）
前記コンテンツ検索部は、前記コンテンツを提供するサーバにおいて前記文字列に基づいて行われた前記コンテンツの検索の結果を取得する
前記（３）に記載の情報処理装置。
（５）
前記番組検索部は、前記文字列に、前記第１の文字列が含まれずに録画済みの番組を再生することを表す第２の文字列が含まれる場合、録画済みの番組を対象とした検索を前記文字列に基づいて行い、
前記表示制御部は、録画済みの番組の検索結果を表示させる
前記（１）乃至（４）のうちのいずれかに記載の情報処理装置。
（６）
前記表示制御部は、前記第２の検索結果の番組を表す画像と並べて、録画予約のリストを表示するときに操作される画像を表示させる
前記（１）乃至（５）のうちのいずれかに記載の情報処理装置。
（７）
前記発話の音声データをサーバに送信し、前記サーバから送信されてきた前記文字列を取得する取得部をさらに備える
前記（１）乃至（６）のうちのいずれかに記載の情報処理装置。
（８）
ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果を取得し、
前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果を取得し、
前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
ステップを含む情報処理方法。
（９）
ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果を取得し、
前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果を取得し、
前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
ステップを含む処理をコンピュータに実行させるプログラム。
（１０）
ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第１の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行う検索部と、
前記設定対象となる番組が特定された場合、特定された番組の第１の識別情報と録画予約を設定することを指示する第１のコマンドとを情報処理装置に送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を前記情報処理装置に送信する通信部と
を含むサーバと、
前記発話の音声データを前記サーバに送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
前記第１の識別情報と前記第１のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第１の識別情報により識別される番組の録画予約を設定する設定部と
を含む前記情報処理装置と
を備える情報処理システム。
（１１）
前記サーバの前記検索部は、前記文字列に、前記第１の文字列が含まれずに録画済みの番組を再生することを表す第２の文字列が含まれる場合、再生対象となる番組の特定を行い、
前記サーバの前記通信部は、前記再生対象となる番組が特定された場合、特定された番組の第２の識別情報と再生開始を指示する第２のコマンドとを前記情報処理装置に送信し、
前記情報処理装置は、
前記第２の識別情報と前記第２のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第２の識別情報により識別される録画済みの番組の再生を開始する再生制御部をさらに含む
前記（１０）に記載の情報処理システム。
（１２）
ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行い、前記設定対象となる番組が特定された場合、特定された番組の識別情報と録画予約を設定することを指示するコマンドとを送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を送信するサーバに対して、前記発話の音声データを送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
前記識別情報と前記コマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記識別情報により識別される番組の録画予約を設定する設定部と
を備える情報処理装置。
１ テレビジョン受像機， ２ 連携サーバ， １２１ 録画制御部， １２２ 録画番組記録部， １２３ 再生制御部， １２４ 放送波受信制御部， １２５ 番組情報記録部， １２６ 録画予約管理部， １２７ 番組検索部， １２８ 音声データ受信部， １２９ 文字列取得部， １３０ Webコンテンツ検索部， １３１ 構文解析部， １３２ 表示制御部， ２２１ 音声データ取得部， ２２２ 音声認識部， ２２３ 検索部

Claims (12)

  1. ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第１の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果を取得し、前記第１の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果を取得する番組検索部と、
    前記第１の検索結果の表示画面または前記第２の検索結果の表示画面を表示させる表示制御部と、
    前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する設定部と
    を備える情報処理装置。
  2. ユーザの発話の内容を表す前記文字列の構文解析を行う構文解析部をさらに備え、
    前記番組検索部は、前記構文解析の結果である分解文字列に基づいて番組の検索を行うことによって、前記第１の検索結果または前記第２の検索結果を取得する
    請求項１に記載の情報処理装置。
  3. ネットワークを介して提供されるコンテンツの、前記文字列に基づく検索結果を取得するコンテンツ検索部をさらに備え、
    前記表示制御部は、前記コンテンツの検索結果に追加して、前記第１の検索結果または前記第２の検索結果を表示させる
    請求項２に記載の情報処理装置。
  4. 前記コンテンツ検索部は、前記コンテンツを提供するサーバにおいて前記文字列に基づいて行われた前記コンテンツの検索の結果を取得する
    請求項３に記載の情報処理装置。
  5. 前記番組検索部は、前記文字列に、前記第１の文字列が含まれずに録画済みの番組を再生することを表す第２の文字列が含まれる場合、録画済みの番組を対象とした検索を前記文字列に基づいて行い、
    前記表示制御部は、録画済みの番組の検索結果を表示させる
    請求項１に記載の情報処理装置。
  6. 前記表示制御部は、前記第２の検索結果の番組を表す画像と並べて、録画予約のリストを表示するときに操作される画像を表示させる
    請求項１に記載の情報処理装置。
  7. 前記発話の音声データをサーバに送信し、前記サーバから送信されてきた前記文字列を取得する取得部をさらに備える
    請求項１に記載の情報処理装置。
  8. ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果を取得し、
    前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
    ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果を取得し、
    前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
    ステップを含む情報処理方法。
  9. ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第１の検索結果を取得し、
    前記第１の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第１の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
    ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第２の検索結果を取得し、
    前記第２の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
    ステップを含む処理をコンピュータに実行させるプログラム。
  10. ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第１の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行う検索部と、
    前記設定対象となる番組が特定された場合、特定された番組の第１の識別情報と録画予約を設定することを指示する第１のコマンドとを情報処理装置に送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を前記情報処理装置に送信する通信部と
    を含むサーバと、
    前記発話の音声データを前記サーバに送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
    前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
    前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
    前記第１の識別情報と前記第１のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第１の識別情報により識別される番組の録画予約を設定する設定部と
    を含む前記情報処理装置と
    を備える情報処理システム。
  11. 前記サーバの前記検索部は、前記文字列に、前記第１の文字列が含まれずに録画済みの番組を再生することを表す第２の文字列が含まれる場合、再生対象となる番組の特定を行い、
    前記サーバの前記通信部は、前記再生対象となる番組が特定された場合、特定された番組の第２の識別情報と再生開始を指示する第２のコマンドとを前記情報処理装置に送信し、
    前記情報処理装置は、
    前記第２の識別情報と前記第２のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第２の識別情報により識別される録画済みの番組の再生を開始する再生制御部をさらに含む
    請求項１０に記載の情報処理システム。
  12. ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行い、前記設定対象となる番組が特定された場合、特定された番組の識別情報と録画予約を設定することを指示するコマンドとを送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を送信するサーバに対して、前記発話の音声データを送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
    前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
    前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
    前記識別情報と前記コマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記識別情報により識別される番組の録画予約を設定する設定部と
    を備える情報処理装置。
JP2018540977A 2016-09-26 2017-09-12 情報処理装置、情報処理方法、プログラム、および情報処理システム Active JP6957485B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021164563A JP7280328B2 (ja) 2016-09-26 2021-10-06 情報処理装置、情報処理方法、プログラム

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016186973 2016-09-26
JP2016186973 2016-09-26
PCT/JP2017/032750 WO2018056105A1 (ja) 2016-09-26 2017-09-12 情報処理装置、情報処理方法、プログラム、および情報処理システム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021164563A Division JP7280328B2 (ja) 2016-09-26 2021-10-06 情報処理装置、情報処理方法、プログラム

Publications (2)

Publication Number Publication Date
JPWO2018056105A1 JPWO2018056105A1 (ja) 2019-07-04
JP6957485B2 true JP6957485B2 (ja) 2021-11-02

Family

ID=61690959

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2018540977A Active JP6957485B2 (ja) 2016-09-26 2017-09-12 情報処理装置、情報処理方法、プログラム、および情報処理システム
JP2021164563A Active JP7280328B2 (ja) 2016-09-26 2021-10-06 情報処理装置、情報処理方法、プログラム
JP2023078391A Pending JP2023104954A (ja) 2016-09-26 2023-05-11 情報処理装置、情報処理方法、プログラム

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2021164563A Active JP7280328B2 (ja) 2016-09-26 2021-10-06 情報処理装置、情報処理方法、プログラム
JP2023078391A Pending JP2023104954A (ja) 2016-09-26 2023-05-11 情報処理装置、情報処理方法、プログラム

Country Status (5)

Country Link
US (1) US10911831B2 (ja)
EP (1) EP3518530B1 (ja)
JP (3) JP6957485B2 (ja)
CN (1) CN109792502B (ja)
WO (1) WO2018056105A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6959205B2 (ja) * 2018-09-19 2021-11-02 Kddi株式会社 情報処理システム及び情報処理方法
CN109922376A (zh) * 2019-03-07 2019-06-21 深圳创维－Rgb电子有限公司 一种模式设置方法、装置、电子设备及存储介质
WO2022261920A1 (zh) * 2021-06-18 2022-12-22 深圳Tcl新技术有限公司 数据处理方法、装置、显示终端及介质

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6643620B1 (en) * 1999-03-15 2003-11-04 Matsushita Electric Industrial Co., Ltd. Voice activated controller for recording and retrieving audio/video programs
JP3456176B2 (ja) 1999-09-27 2003-10-14 日本電気株式会社 録画再生処理装置及び録画再生処理システム
US6907397B2 (en) * 2002-09-16 2005-06-14 Matsushita Electric Industrial Co., Ltd. System and method of media file access and retrieval using speech recognition
JP2007140194A (ja) 2005-11-18 2007-06-07 Mitsubishi Electric Corp 番組検索装置および形態素辞書管理サーバ
US20070162502A1 (en) * 2005-12-29 2007-07-12 United Video Properties, Inc. Media library in an interactive media guidance application
KR101197219B1 (ko) * 2007-04-17 2012-11-02 삼성전자주식회사 개인 일정 및 방송 프로그램을 관리하기 위한 장치 및 방법
US8358749B2 (en) * 2009-11-21 2013-01-22 At&T Intellectual Property I, L.P. System and method to search a media content database based on voice input data
JP2011118775A (ja) 2009-12-04 2011-06-16 Sony Corp 検索装置、検索方法、及び、プログラム
JP5463276B2 (ja) 2010-12-15 2014-04-09 日立コンシューマエレクトロニクス株式会社 映像入出力機器および方法
US9547647B2 (en) * 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US10424291B2 (en) * 2012-12-28 2019-09-24 Saturn Licensing Llc Information processing device, information processing method, and program
JP6223744B2 (ja) * 2013-08-19 2017-11-01 株式会社東芝 方法、電子機器およびプログラム
WO2015045039A1 (ja) * 2013-09-25 2015-04-02 株式会社東芝 方法、電子機器およびプログラム
KR20150137499A (ko) * 2014-05-29 2015-12-09 엘지전자 주식회사 영상 표시 기기 및 그의 동작 방법
JP2016062560A (ja) 2014-09-22 2016-04-25 株式会社東芝 電子機器及びその制御方法
JP2016177689A (ja) * 2015-03-20 2016-10-06 株式会社東芝 メモリシステム
US9392324B1 (en) * 2015-03-30 2016-07-12 Rovi Guides, Inc. Systems and methods for identifying and storing a portion of a media asset

Also Published As

Publication number Publication date
CN109792502B (zh) 2021-11-19
US20190208280A1 (en) 2019-07-04
US10911831B2 (en) 2021-02-02
WO2018056105A1 (ja) 2018-03-29
JPWO2018056105A1 (ja) 2019-07-04
EP3518530B1 (en) 2021-12-15
EP3518530A4 (en) 2019-10-16
JP2022003825A (ja) 2022-01-11
JP2023104954A (ja) 2023-07-28
EP3518530A1 (en) 2019-07-31
JP7280328B2 (ja) 2023-05-23
CN109792502A (zh) 2019-05-21

Similar Documents

Publication Publication Date Title
JP7280328B2 (ja) 情報処理装置、情報処理方法、プログラム
US20220286750A1 (en) Reminders of media content referenced in other media content
US9615122B2 (en) Methods and apparatus to synchronize second screen content with audio/video programming using closed captioning data
EP2680596A1 (en) Display apparatus, method for controlling display apparatus, and interactive system
KR101992475B1 (ko) 현재 플레이 중인 텔레비전 프로그램과 연관된 메타데이터를 식별하기 위해 오디오 스트림 사용
KR102520019B1 (ko) 방송 환경들에서의 스피치 인식 애플리케이션들에 대한 스피치 강화
US8543912B2 (en) Methods, systems, and computer products for implementing content conversion and presentation services
JP5242105B2 (ja) 情報処理装置および情報表示方法
JP2010087976A (ja) 情報処理装置、情報取得方法、情報取得プログラム及び情報検索システム
TWI587253B (zh) 提供口述影像可用性通知的方法與設備
JP5121342B2 (ja) 情報処理装置および情報表示方法
US9066135B2 (en) System and method for generating a second screen experience using video subtitle data
US20130290999A1 (en) Information processor, broadcast receiving device, and information processing method
JP2009077166A (ja) 情報処理装置および情報表示方法
KR20200136382A (ko) 정보 처리 장치, 정보 처리 방법, 송신 장치, 및 송신 방법
KR20090074643A (ko) 전자책 서비스 제공 방법
JP2013059038A (ja) 情報処理装置および情報表示方法
JP5575195B2 (ja) 情報処理装置および情報表示方法
JP2022127309A (ja) 電子機器、システム、およびプログラム
KR20080093317A (ko) 데이터 전송 방법 및 시스템
JP2006215903A (ja) 画像表示装置、コンテンツ検索方法およびコンテンツ検索プログラム
KR20090074659A (ko) 자막 정보 제공 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200720

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210907

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211006

R150 Certificate of patent or registration of utility model

Ref document number: 6957485

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150