WO2018056105A1 - 情報処理装置、情報処理方法、プログラム、および情報処理システム - Google Patents

情報処理装置、情報処理方法、プログラム、および情報処理システム Download PDF

Info

Publication number
WO2018056105A1
WO2018056105A1 PCT/JP2017/032750 JP2017032750W WO2018056105A1 WO 2018056105 A1 WO2018056105 A1 WO 2018056105A1 JP 2017032750 W JP2017032750 W JP 2017032750W WO 2018056105 A1 WO2018056105 A1 WO 2018056105A1
Authority
WO
WIPO (PCT)
Prior art keywords
program
character string
search result
search
recording reservation
Prior art date
Application number
PCT/JP2017/032750
Other languages
English (en)
French (fr)
Inventor
和也 香月
裕之 三ツ堀
慎平 亀岡
卓雄 渡邉
悠之 久保田
俊彦 伏見
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to CN201780057700.6A priority Critical patent/CN109792502B/zh
Priority to JP2018540977A priority patent/JP6957485B2/ja
Priority to EP17852882.4A priority patent/EP3518530B1/en
Priority to US16/329,004 priority patent/US10911831B2/en
Publication of WO2018056105A1 publication Critical patent/WO2018056105A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4828End-user interface for program selection for searching program descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/654Transmission by server directed to the client
    • H04N21/6543Transmission by server directed to the client for forcing some client operations, e.g. recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus

Definitions

  • the present technology relates to an information processing device, an information processing method, a program, and an information processing system, and in particular, an information processing device and an information processing method that can easily set recording reservations for programs listed as search results. , Program, and information processing system.
  • the user can set a recording reservation for the program or start playback of the recorded program by selecting a predetermined program from the programs listed in the search result.
  • the content that the user utters to search for a program may include information that can specify what the user is trying to do with the program found by the search. For example, when the user utters “Record a drama of next week's 000 drama”, it can be estimated that a drama program related to “00 000” is being recorded.
  • This technology has been made in view of such a situation, and makes it possible to easily set recording reservations for programs listed as search results.
  • the information processing apparatus performs recording when the character string representing the content of the user's utterance does not include the first character string representing setting of recording reservation for a program to be provided after the present time.
  • the first search result is obtained by performing a search for a program that has been completed and a program that is provided after the present based on the character string, and when the first character string is included,
  • a program search unit that obtains a second search result by performing a search for a provided program based on the character string, and a display screen of the first search result or a display of the second search result
  • a predetermined program provided from now on is selected as a program for setting a recording reservation from the display control unit for displaying a screen and the display screen of the first search result, the information about the predetermined program is included.
  • a character string representing the content of a user's utterance does not include a first character string representing setting of recording reservation for a program provided after the present time
  • a recorded program And a program for setting a recording reservation from the display screen of the first search result by performing a search on the character string and a search for the program provided after the present.
  • a predetermined program provided after the present is selected, a detailed screen including information related to the predetermined program is displayed instead of the display screen of the first search result, and then the recording reservation of the predetermined program is performed. Is set.
  • a second search is performed based on the character string for a program provided after the present time.
  • the recording reservation for the selected program is set without displaying the detailed screen.
  • An information processing system includes a server and an information processing device.
  • the server is set as a recording reservation when the character string representing the content of the user's utterance includes the first character string representing the setting of the recording reservation of the program to be provided from now on.
  • a search unit for specifying a program and, when a program to be set is specified, identification information of the specified program and a first command for instructing to set a recording reservation are transmitted to the information processing apparatus.
  • a communication unit that transmits a search result of content based on the character string to the information processing apparatus when the program to be set is not specified.
  • the information processing apparatus transmits the voice data of the utterance to the server, and receives a program based on the character string transmitted from the server and a communication unit that receives information transmitted from the server.
  • a program search unit for searching the content
  • a display control unit for displaying a display screen including the search result of the content and the search result of the program when the search result of the content is transmitted from the server, and the identification information
  • a setting unit that sets a recording reservation for the program identified by the identification information without displaying the display screen when the first command is transmitted from the server.
  • FIG. 10 is a sequence diagram illustrating another operation of the information processing system. It is a figure which shows the example of a search result screen. It is a figure which shows the other example of a display of a search result screen. It is a figure which shows the example of the flow of a screen display. It is a figure which shows the other example of the flow of a screen display.
  • FIG. 20 is a sequence diagram illustrating still another operation of the information processing system.
  • FIG. 1 is a diagram illustrating a configuration example of an information processing system according to an embodiment of the present technology.
  • the information processing system in FIG. 1 is configured by connecting a television receiver 1 (hereinafter referred to as TV 1 as appropriate) and a linkage server 2 via a network 3 such as the Internet.
  • TV 1 television receiver 1
  • linkage server 2 a network 3 such as the Internet.
  • the network 3 may be any form of a wired network, a wireless network, and a network that combines wired and wireless.
  • TV1 receives television broadcasting such as terrestrial digital broadcasting, satellite broadcasting, and cable broadcasting.
  • the TV 1 displays the broadcast program video on a display and outputs the program audio from a speaker.
  • the program may be provided via the network 3.
  • the TV 1 has a function of recording (recording) the received program on an internal or external recording medium, and a function of reproducing a recorded program.
  • the recording of the program may be performed by a recording device connected to the TV 1.
  • FIG. 2 is a diagram illustrating an example of the application structure of the TV 1.
  • TV1 is equipped with a TV OS (Operating System).
  • TV OS Operating System
  • Various applications such as a search application, a program playback application, a program recording application, and a program guide application operate on the TV OS in cooperation with the TV OS.
  • the search application in FIG. 2 is an application that searches content on the Web, for example.
  • the content includes various digital data that can be used by the user, including moving images, still images, music, games, electronic books, applications, and combinations of two or more thereof.
  • the program playback application is, for example, an application that plays back a broadcast program or a recorded program.
  • the program recording application is an application for recording a program.
  • the program guide application is an application for displaying EPG (Electronic Program Guide), managing recording reservations of programs, and the like.
  • TV1 is also equipped with various modules such as a program search module that works with search applications.
  • the program search module performs, for example, a search for a program targeted for a program posted on an EPG, a search for a program targeted for a recorded program, and the like.
  • the search application searches for Web content that is external content provided via the network 3, whereas the program search module searches for content inside the TV 1. it can.
  • the search application is software prepared by a company that provides a TV OS.
  • the program search module is software prepared by a company that manufactures, sells, etc. the TV 1 upon receiving provision of software such as a TV OS and a search application.
  • the operation of the TV 1 having such various functions is performed using the remote controller 4.
  • the remote controller 4 transmits information representing the content of the operation by the user to the TV 1.
  • the remote controller 4 is provided with a microphone in addition to buttons used for various operations. When the microphone button is pressed, the remote controller 4 collects the user's voice with the microphone and transmits the voice data to the TV 1.
  • the cooperation server 2 is a server managed by a company that provides a TV OS.
  • the cooperation server 2 provides various functions such as a Web content search function and a function of recognizing the voice transmitted from the TV 1 to each device including the TV 1 and equipped with the TV OS.
  • FIG. 3 is a diagram illustrating an example of a search result screen.
  • a search result screen as shown in FIG. 3 is displayed on the display of the TV 1.
  • the upper part of the search result screen is formed with a character string display field 11 that is a character string display field that serves as a key for content search.
  • a character string “program where XXX appears” is displayed.
  • the TV 1 it is possible to search for content using a natural language that a user uses on a daily basis.
  • a Web moving image area 21 a program area 22, and a movie area 23 are formed in order from the top.
  • card-like images representing the contents listed as search results are displayed side by side.
  • a card-like image representing content is simply referred to as a card image.
  • the web video area 21 is a display area for a row of card images representing a video on the Web.
  • the cooperation server 2 provides a service for distributing moving images posted from various users.
  • the card image displayed in the Web moving image area 21 is an image representing a moving image searched for the moving image distributed by the link server 2 through the moving image distribution service.
  • the program area 22 is a display area for rows of card images representing programs. On the card image at the left end, “terrestrial D reservation” is displayed.
  • the card image displayed in the program area 22 in FIG. 3 represents a program for which a recording reservation can be set, which is searched from currently broadcasted programs and programs scheduled to be broadcast, that is, programs broadcast from now on. It is an image.
  • a single card image representing a program is divided into two upper and lower stages.
  • a thumbnail image of the program is displayed in the upper part of the card image, and program information such as a program name and broadcast date and time is displayed in the lower part.
  • the movie area 23 is a display area of a row of card images representing movie contents on the Web.
  • the cooperation server 2 also provides a service for selling movie content by downloading or streaming.
  • the card image displayed in the movie area 23 is an image representing movie content searched for movie content sold by the cooperation server 2.
  • the search results displayed in the Web moving image area 21 and the movie area 23 summarize the character strings representing the contents spoken by the user, that is, the entire character strings displayed in the character string display field 11. This is a result obtained by performing a search using the key as a key.
  • the search result displayed in the program area 22 is a result obtained by performing a search using a decomposed character string obtained as a result of parsing a character string representing the content uttered by the user.
  • FIG. 4 is a diagram showing another example of the search result screen.
  • a row of card images representing programs for which recording reservations can be set and a row of card images representing recorded programs may be displayed.
  • the lower row of the two card images displayed in the program area 22 in FIG. 4 is a row of card images representing recorded programs.
  • the characters “terrestrial D recorded” are displayed on the card image at the left end representing the recorded program.
  • the user When such a search result screen is displayed, the user operates the remote controller 4 to select a predetermined content, view a Web video, schedule recording of a program, play a recorded program, download movie content, etc. It can be performed.
  • the card image representing the content being selected is highlighted in a pop-up state as shown in the Web video at the upper left corner of FIGS.
  • First search example An example will be described in which a search is performed based on the entire character string input by the user, and a search is performed based on the decomposed character string constituting the character string.
  • FIG. 5 is a diagram showing an example of syntax analysis.
  • the search application of TV 1 that has received the character string “next week's drama of next week” transmitted from the cooperation server 2 further acquires the search result of the Web content.
  • the search result of the Web content is transmitted from the cooperation server 2 following the character string representing the content of the user's utterance.
  • the cooperation server 2 searches the Web video and movie content using the entire character string of “next week's 000 drama” as a group, and transmits the search result to the TV 1.
  • the TV 1 displays a card image representing a Web moving image obtained as a search result in the Web moving image area 21 on the search result screen, and displays a card image representing a movie content in the movie area 23 on the search result screen.
  • TV 1 parses the string of “next week's 000 drama”. By the parsing, the natural language uttered by the user is divided into morphemes that are the smallest meaningful units, and the part of speech of each morpheme is determined. In addition, by combining each morpheme, a decomposed character string having an attribute suitable for use in program search is generated.
  • TV1 sets a search condition based on “next week”, “00” and “drama” obtained as a result of syntax analysis, and searches for a program.
  • the search condition is set so as to search for a program of a genre of “drama” broadcast on “next week” based on today.
  • the TV 1 adds and displays a card image representing a program obtained as a search result in the program area 22 of the search result screen.
  • a search result screen including a search result based on the entire character string representing the content of the user's utterance and a search result based on the decomposed character string constituting the character string Will be displayed.
  • FIG. 6 is a block diagram illustrating a hardware configuration example of the TV 1.
  • the broadcast receiving unit 101 receives a broadcast wave signal supplied from an antenna (not shown), performs various processes such as A / D conversion and demodulation, and outputs program data to the decoder 102.
  • the decoder 102 decodes the video stream constituting the program data, and displays the video of the program on the display 103 such as an LCD (Liquid Crystal Display) or an organic EL display. In addition, the decoder 102 decodes an audio stream constituting the program data, and synchronizes with the video to output the program sound from the speaker 104.
  • the display 103 such as an LCD (Liquid Crystal Display) or an organic EL display.
  • the decoder 102 decodes an audio stream constituting the program data, and synchronizes with the video to output the program sound from the speaker 104.
  • a CPU (Central Processing Unit) 106, a ROM (Read Only Memory) 107, and a RAM (Random Access Memory) 108 are connected to each other via a bus 105.
  • the CPU 106 executes a program recorded in the ROM 107 or the recording unit 109 using the RAM 108 and controls the entire TV 1.
  • the recording unit 109 is composed of a recording medium such as an HDD (Hard Disk Drive) or an SSD (Solid State Drive).
  • the recording unit 109 records content such as programs, various data such as EPG data and programs.
  • the communication unit 110 is an interface of the network 3.
  • the communication unit 110 performs communication with the cooperation server 2.
  • the operation I / F unit 111 receives the data transmitted from the remote controller 4 and outputs the data to the CPU 106 via the bus 105.
  • FIG. 7 is a block diagram illustrating a functional configuration example of the TV 1.
  • the recording control unit 121 refers to the information recorded in the program information recording unit 125 and controls the broadcast receiving unit 101 to start recording a program to be recorded when broadcasting of a program for which recording reservation is set is started. Get the data. In the program information recording unit 125, information related to program recording reservation is recorded. The recording control unit 121 outputs the acquired program data to the recorded program recording unit 122 for recording.
  • the recording control unit 121 is realized by executing a program recording application.
  • the recorded program recording unit 122 is realized in the recording unit 109.
  • the recorded program recording unit 122 records the program data supplied from the recording control unit 121 and manages it as a recorded program.
  • the reproduction control unit 123 reads out the data of the program instructed to be reproduced from the recorded programs recorded in the recorded program recording unit 122, and outputs the data to the decoder 102 for reproduction.
  • the broadcast wave reception control unit 124 controls the reception of broadcast waves by the broadcast reception unit 101.
  • the broadcast wave reception control unit 124 extracts EPG data from the broadcast wave signal received by the broadcast reception unit 101 and causes the program information recording unit 125 to record the EPG data.
  • the reproduction control unit 123 and the broadcast wave reception control unit 124 are realized by executing a program reproduction application.
  • the program information recording unit 125 is realized in the recording unit 109.
  • the program information recording unit 125 records EPG data supplied from the broadcast wave reception control unit 124 and information related to the recording reservation supplied from the recording reservation management unit 126.
  • the recording reservation management unit 126 sets a recording reservation for a predetermined program in accordance with a user operation, and records information representing the contents in the program information recording unit 125.
  • the recording reservation management unit 126 is realized by executing a program guide application.
  • the program search unit 127 outputs the character string supplied from the character string acquisition unit 129 to the syntax analysis unit 131 to perform syntax analysis.
  • the program search unit 127 searches for a program using the decomposed character string supplied from the syntax analysis unit 131 as a result of the syntax analysis as a search key.
  • the program search unit 127 refers to the EPG data recorded in the program information recording unit 125 and searches for a program that is being broadcast / planned to be broadcast.
  • the program search unit 127 searches for recorded programs recorded in the recorded program recording unit 122.
  • the program search unit 127 outputs information on the search result program to the display control unit 132.
  • the program search unit 127 is realized by executing a program search module.
  • the voice data reception unit 128 controls the operation I / F unit 111 to receive voice data representing the content of the user's utterance transmitted from the remote controller 4.
  • the voice data reception unit 128 outputs the received voice data to the character string acquisition unit 129.
  • the character string acquisition unit 129 controls the communication unit 110 and transmits the received voice data to the cooperation server 2. In addition, the character string acquisition unit 129 acquires the character string transmitted from the cooperation server 2 in response to transmitting the voice data. The character string acquisition unit 129 outputs the acquired character string to the program search unit 127 and the Web content search unit 130.
  • the character string transmitted from the remote controller 4 is also received by the operation I / F unit 111 and acquired by the character string acquisition unit 129. .
  • the web content search unit 130 controls the communication unit 110 to acquire the search result of the web content transmitted from the cooperation server 2.
  • the web content search unit 130 outputs the search result of the web content to the display control unit 132.
  • the character string may be transmitted from the TV 1 to the cooperation server 2, and the web content may be searched in the cooperation server 2 accordingly, and the search result may be transmitted from the cooperation server 2 to the TV 1.
  • the Web content search unit 130 transmits the character string supplied from the character string acquisition unit 129 to the cooperation server 2 and acquires the search result of the Web content.
  • the syntax analysis unit 131 performs a syntax analysis of the character string supplied from the program search unit 127 and outputs a decomposed character string to the program search unit 127.
  • the syntax analysis unit 131 has information used for natural language processing.
  • the display control unit 132 displays a search result screen on the display 103 based on the search result supplied from the program search unit 127 and the search result supplied from the Web content search unit 130.
  • the voice data reception unit 128, the character string acquisition unit 129, the Web content search unit 130, and the display control unit 132, which are surrounded by the broken line L1, are realized by executing the search application.
  • FIG. 8 is a block diagram illustrating a hardware configuration example of the cooperation server 2.
  • the CPU 201, the ROM 202, and the RAM 203 are connected to each other via a bus 204.
  • An input / output interface 205 is further connected to the bus 204.
  • the input / output interface 205 is connected to an input unit 206 such as a keyboard and a mouse, and an output unit 207 composed of a display and a speaker. Also connected to the input / output interface 205 are a recording unit 208 made up of a hard disk, nonvolatile memory, etc., a network interface, etc., a communication unit 209 that communicates with the TV 1, and a drive 210 that drives the removable media 211. Is done.
  • FIG. 9 is a block diagram illustrating a functional configuration example of the cooperation server 2.
  • a voice data acquisition unit 221, a voice recognition unit 222, and a search unit 223 are realized.
  • the audio data acquisition unit 221 controls the communication unit 209 to acquire the audio data transmitted from the TV 1.
  • the voice data acquisition unit 221 outputs the acquired voice data to the voice recognition unit 222.
  • the voice recognition unit 222 performs voice recognition of the voice data supplied from the voice data acquisition unit 221.
  • the voice recognition unit 222 controls the communication unit 209 to transmit a character string representing the content of the user's utterance to the TV 1.
  • the voice recognition unit 222 outputs a character string representing the content of the user's utterance to the search unit 223.
  • the search unit 223 searches for Web content based on the character string supplied from the speech recognition unit 222 or the character string transmitted from the TV 1 as appropriate.
  • the recording unit 208 records various content data such as Web video data distributed by the video distribution service provided by the cooperation server 2 and movie content transmitted by the content sales service provided by the cooperation server 2. ing.
  • the search unit 223 controls the communication unit 209 and transmits the search result to the TV 1.
  • the function of the cooperation server 2 is realized by a single computer, but the function of the cooperation server 2 may be realized by being distributed by a plurality of computers.
  • the functions of the cooperation server 2 are realized by being distributed by a plurality of computers, each configuration shown in FIG. 9 is realized on the plurality of computers, and processing is performed in cooperation with each other.
  • the remote controller 4 transmits the voice data obtained by collecting the voice to the TV 1 in step S1.
  • step S11 the audio data receiving unit 128 of the TV 1 receives the audio data transmitted from the remote controller 4.
  • the received voice data is supplied to the character string acquisition unit 129.
  • step S12 the character string acquisition unit 129 transmits the voice data to the cooperation server 2.
  • step S51 the voice data acquisition unit 221 of the cooperation server 2 receives the voice data transmitted from the TV 1.
  • the received voice data is supplied to the voice recognition unit 222.
  • step S52 the voice recognition unit 222 performs voice recognition based on the voice data, and generates a character string representing the content of the user's utterance.
  • the character string obtained by the speech recognition is supplied to the search unit 223.
  • step S53 the voice recognition unit 222 transmits the character string obtained by the voice recognition to the TV 1.
  • step S54 the search unit 223 searches for Web content based on the entire character string obtained by voice recognition, and transmits the search result to the TV 1 in step S55.
  • the character string transmitted from the cooperation server 2 in step S53 is received by the character string acquisition unit 129 of the TV 1 in step S13.
  • the search result transmitted from the cooperation server 2 in step S55 is received by the web content search unit 130 of the TV 1 in step S14.
  • the search result received by the Web content search unit 130 is supplied to the display control unit 132.
  • step S15 the character string acquisition unit 129 outputs the character string transmitted from the cooperation server 2 to the program search unit 127.
  • step S16 based on the search result supplied from the web content search unit 130, the display control unit 132 causes the display 103 to display a search result screen in which card images representing the search result web content are arranged. At this time, a card image representing the searched web moving image is displayed in the web moving image area 21, and a card image representing the movie content is displayed in the movie area 23.
  • step S31 the program search unit 127 receives the character string supplied from the character string acquisition unit 129, and outputs it to the syntax analysis unit 131 in step S32.
  • step S41 the syntax analysis unit 131 receives the character string supplied from the program search unit 127, and performs syntax analysis in step S42.
  • step S43 the syntax analysis unit 131 outputs the decomposed character string acquired as a result of the syntax analysis to the program search unit 127 together with attribute information of each decomposed character string.
  • step S33 the program search unit 127 receives the information supplied from the syntax analysis unit 131.
  • step S34 the program search unit 127 performs a search for a program being broadcast / planned and a recorded program based on the decomposed character string. Do. For example, a search condition is set by a decomposed character string, and a program is searched.
  • step S35 the program search unit 127 outputs information related to the search result program to the display control unit 132 together with information for specifying an application to be started when each program is selected. For example, for a searched program that is being broadcast / scheduled, information indicating a program guide application is output as an application that is activated when the program is selected. Further, for the recorded program that has been searched, information representing a program reproduction application is output as an application to be activated when it is selected.
  • step S17 the display control unit 132 receives the information supplied from the program search unit 127, and in step S18, the card image of the searched program is added to the search result screen and displayed.
  • the program guide application When the user selects a card image of a program being broadcast / planned to be displayed displayed in the program area 22, the program guide application is activated and the detailed information of the program is displayed.
  • the recording reservation is set by the recording reservation management unit 126.
  • the program reproduction application is activated and the data of the selected recorded program is read from the recorded program recording unit 122.
  • the read data is supplied to the reproduction control unit 123, and reproduction of the recorded program is started.
  • the information of the Web content searched based on the entire character string input by the user and the program searched based on the decomposed character string constituting the character string are displayed on one search result screen. Information is displayed.
  • Some programs to be searched are not found when searching using the entire character string, but are found when searching using the decomposed character string. Also, if a program search is performed using the entire character string, a program that is not related to, for example, “00”, which the user is trying to search for will be changed to a character string other than “00”. It may be searched based on.
  • search using the decomposed character string is performed for the program, it may be performed for the Web content.
  • Second search example >> Depending on the content of the user's utterance, the user may be trying to find a program from among programs being broadcast / scheduled and set the recording reservation, or may be trying to find a program from recorded programs and watch it It may be possible to identify whether
  • the search result presentation method and the screen display flow may be switched according to the user's intention.
  • 11 and 12 are diagrams showing specific examples of the user's intention.
  • the user when the user utters a word having a specific attribute following the word “recorded”, the user has recorded a word related to the word uttered after the word “recorded”. Identified as trying to watch the program.
  • the word “recorded” is followed by a word having at least one of the attributes “temporal”, “person name”, “program name”, “genre”, and “broadcasting station name”. Such user's intention is specified when issued.
  • a list display command is output from the syntax analysis unit 131 to the program search unit 127.
  • the recording list display command is a command for instructing to display a search result of recorded programs.
  • the program search unit 127 that has received the recording list display command searches for a program only for recorded programs. On the search result screen, recorded programs searched based on the decomposed character string following “recorded” are displayed as search results, and programs being broadcast / scheduled to be broadcast are not displayed.
  • the program search unit 127 searches only recorded programs for programs based on “ ⁇ ”. On the program search screen, a search result of recorded programs including “ ⁇ ” as “program name” is displayed.
  • a recording reservation setting command is output from the syntax analysis unit 131 to the program search unit 127.
  • the recording reservation setting command is a command for instructing to display a search result of a program being broadcast / scheduled to be broadcast for which a recording reservation can be set.
  • the program search unit 127 that has received the recording reservation setting command searches for a program only for a program being broadcast / scheduled to be broadcast.
  • the program being broadcast / scheduled to be searched based on the previous decomposed character string such as “Reserve” is displayed as the search result, and the recorded program is not displayed.
  • the program search unit 127 searches only “drama” programs broadcasted “next week”, and searches for programs based on “00”. On the program search screen, search results of programs in which “00” is appearing are displayed.
  • the TV 1 can identify the user's intention from the content of the utterance and change the way the search results are presented.
  • the search range is narrowed down and the search result of the program being broadcast / scheduled is displayed. Is displayed.
  • the search range is narrowed down and the search result of the recorded program is displayed.
  • FIG. 13 is a diagram illustrating an example of the flow of screen display.
  • FIG. 13 is the screen of the program being viewed.
  • the TV 1 waits for voice input by the user as indicated by the tip of the arrow A1.
  • the display on the display 103 is switched to the screen # 2, which is a voice standby screen.
  • the voice data transmitted from the remote controller 4 is transmitted to the cooperation server 2, and a character string representing the content of the user's utterance is acquired.
  • the syntactic analysis of the character string transmitted from the cooperation server 2 is performed in the TV 1 to obtain a decomposed character string.
  • a recording list display command or a recording reservation setting command is output from the syntax analysis unit 131 to the program search unit 127 as appropriate.
  • the search result screen # 3 is a screen similar to the screen described with reference to FIG. 4 including the search results of the program being broadcast / scheduled to be broadcast and the recorded program.
  • the program detail screen # 4 is a screen including detailed information such as the content of the program selected by the user and the broadcast date and time.
  • the program detail screen # 4 is displayed based on the EPG recorded in the program information recording unit 125, for example.
  • the program detail screen # 4 has a recording reservation button operated when setting a recording reservation for a program whose detailed information is being displayed, a viewing reservation button operated when setting a viewing reservation, and a search result screen # 3.
  • a return button or the like operated when returning is displayed.
  • the display on the display 103 is switched to the reservation content confirmation screen # 5 as indicated by the tip of the arrow A4.
  • the reservation content confirmation screen # 5 in addition to the reservation content, a confirmation button operated when confirming the reservation is displayed.
  • the confirm button When the confirm button is operated, as shown at the end of the arrow A5, the recording reservation of the program is completed, and information indicating the content is recorded in the program information recording unit 125.
  • the display on the display 103 is switched to the program detail screen # 4 as indicated by an arrow A6.
  • the return button When the return button is operated on the program detail screen # 4, the display 103 returns to the search result screen # 3 as indicated by an arrow A7.
  • the display 103 is switched to the program playback screen # 6 as indicated by the tip of the arrow A8.
  • Data of the recorded program is read from the recorded program recording unit 122 and reproduced by the reproduction control unit 123.
  • the display on the display 103 when the recording reservation is set is switched so as to be surrounded by a broken line L11.
  • the display on the display 103 narrows down the search range of the program, as indicated by the tip of the arrow A11.
  • the search result screen # 7 is displayed.
  • the search result screen # 7 is a screen including the search result of the recorded program when the recording list display command is output, and the search result of the program being broadcast / scheduled when the recording reservation setting command is output.
  • the command output from the syntax analysis unit 131 is a recording reservation setting command and a predetermined program that is being broadcast / scheduled is selected on the search result screen # 7, as shown at the end of the arrow A12, The recording reservation is completed, and information indicating the contents is recorded in the program information recording unit 125. That is, in this case, since it is specified that the user intends to set a recording reservation for the program, the program detail screen # 4 or the like is not displayed.
  • the search result screen # 7 continues to be displayed on the display 103 while the program is reserved.
  • the user can set recording reservations for a plurality of programs one after another simply by selecting a broadcast / broadcast scheduled program listed as a search result on the search result screen # 7.
  • the command output from the syntax analysis unit 131 is a recording list display command and a predetermined recorded program is selected on the search result screen # 7, the display 103 is displayed as shown at the end of the arrow A14. The screen is switched to the program playback screen # 6. Data of the recorded program is read from the recorded program recording unit 122 and reproduced by the reproduction control unit 123.
  • the display 103 returns to the search result screen # 7 as indicated by the tip of the arrow A15.
  • the display on the display 103 at the time of recording reservation setting is switched so as to be surrounded by a broken line L12.
  • the screen display until the recording reservation is set can be switched as described above according to the user's intention specified from the content of the utterance, so that the user can easily schedule the recording of the program listed as the search result. It becomes possible to set to.
  • steps S101 to S105, S121 to S123, and S141 to 143 of the TV 1 shown in FIG. 14 are the same as the processes of steps S12 to S16, S31 to S33, and S41 to 43 of FIG.
  • steps S151 to S155 of the cooperation server 2 shown in FIG. 14 are the same processes as the processes of steps S51 to S55 of FIG. The overlapping description will be omitted as appropriate.
  • step S101 the character string acquisition unit 129 of the TV 1 transmits the audio data transmitted from the remote controller 4 and received by the audio data receiving unit 128 to the cooperation server 2.
  • step S151 the voice data acquisition unit 221 of the cooperation server 2 receives the voice data transmitted from the TV 1.
  • step S152 the voice recognition unit 222 performs voice recognition and generates a character string representing the content of the user's utterance.
  • step S153 the voice recognition unit 222 transmits the character string obtained by the voice recognition to the TV 1.
  • step S154 the search unit 223 searches for Web content based on the entire character string obtained by voice recognition, and transmits the search result to the TV 1 in step S155.
  • the character string transmitted from the cooperation server 2 in step S153 is received by the character string acquisition unit 129 of the TV 1 in step S102. Further, the search result transmitted from the cooperation server 2 in step S155 is received by the web content search unit 130 of the TV 1 in step S103.
  • step S104 the character string acquisition unit 129 outputs the character string transmitted from the cooperation server 2 to the program search unit 127.
  • step S105 the display control unit 132 causes the display 103 to display a search result screen in which card images representing Web content are arranged based on the search result supplied from the Web content search unit 130.
  • step S121 the program search unit 127 receives the character string supplied from the character string acquisition unit 129, and outputs it to the syntax analysis unit 131 in step S122.
  • step S141 the syntax analysis unit 131 receives the character string supplied from the program search unit 127, and performs syntax analysis in step S142. Based on the result of the syntax analysis, the syntax analysis unit 131 indicates that the user has uttered a word with a specific attribute following the word “recorded” or “reserved” after the word with the specific attribute. Detect whether or not a word such as
  • step S143 the syntax analysis unit 131 outputs the decomposed character string acquired as a result of the syntax analysis to the program search unit 127 together with attribute information of each decomposed character string.
  • the syntax analysis result transmitted here includes a recording list display command when it is detected that a word having a specific attribute is issued after the word “recorded”. Further, when it is detected that a word such as “reserve” is issued following a word of a specific attribute, a recording reservation setting command is included.
  • step S123 the program search unit 127 receives the information supplied from the syntax analysis unit 131.
  • step S124 the program search unit 127 performs a decomposition character string search for a program being broadcast / scheduled and a recorded program. Based on.
  • step S125 the program search unit 127 outputs information related to the search result program to the display control unit 132 together with information for specifying an application to be activated when each program is selected.
  • the program search unit 127 sets a program search range according to the type of command.
  • the command supplied from the syntax analysis unit 131 is a recording list display command
  • a recorded program is set as a search range
  • it is a recording reservation setting command a program being broadcast / scheduled to be broadcast is set as a search range.
  • step S127 the program search unit 127 searches for programs in the set search range based on the decomposed character string.
  • step S128 the program search unit 127 outputs information on the search result program to the display control unit 132 together with information for specifying an application to be activated when each program is selected.
  • step S125 The search result output in step S125 is received by the display control unit 132 in step S106, and the search result output in step S128 is received by the display control unit 132 in step S107.
  • step S108 the display control unit 132 adds and displays the card image of the searched program on the search result screen. For example, when a recording list display command is output from the syntax analysis unit 131, a line of a recorded program is additionally displayed in the program area 22, and a recording reservation setting command is output from the syntax analysis unit 131. Is displayed by adding a line of a program being broadcast / scheduled to the program area 22. Subsequent screen display switching is performed as described with reference to FIG.
  • a button operated when selecting not to set a recording reservation for the selected program and a button operated when setting a recording reservation for the selected program are displayed.
  • FIG. 16 is a diagram showing another display example of the search result screen.
  • a card image 311 selected when displaying the reservation list is displayed at the right end of the line of the program being broadcast / scheduled to be broadcast, along with the card image representing the program as a search result.
  • a reservation list is displayed on the display 103.
  • the reservation list is a list of programs for which recording reservation has been set. From the reservation list, it is possible to correct or cancel the recording reservation of the program.
  • the recording reservation setting is completed simply by selecting the card image of the program, there is a possibility that the user mistakenly sets the recording reservation.
  • the user By displaying a reservation list display card image and securing a lead to the reservation list on the search result screen, the user can easily correct the recording reservation setting.
  • FIG. 17 is a diagram showing an example of the flow of screen display.
  • the search result screen # 21 shown in FIG. 17 is the same screen as the screen of FIG.
  • the reservation list is displayed instead of the search result screen # 21 as indicated by the tip of the arrow A21.
  • the reservation list may be displayed over the search result screen # 21.
  • the recorded list is a list of recorded programs.
  • the recorded list is displayed based on information recorded in the recorded program recording unit 122, for example.
  • the card image selected when displaying the recorded list is displayed alongside the card image representing the search result program at the right end of the line of the recorded program.
  • the recorded list display card image is selected, the recorded list is displayed in place of the search result screen # 21, as indicated by the tip of the arrow A22 in FIG.
  • Third search example The words spoken by the user specify whether the user intends to view a recorded program or to set a recording reservation for a program being broadcast / planned.
  • a program may be specified.
  • information used for specifying a program is managed by the cooperation server 2, and the program intended by the user is specified by the cooperation server 2.
  • the cooperation server 2 transmits a command instructing the TV 1 to start playback of the specified program.
  • playback of the recorded program specified by the cooperation server 2 is started without displaying the search result screen.
  • the cooperation server 2 instructs the TV 1 to set a recording reservation for the specified program. Command to send.
  • the recording reservation of the program specified by the cooperation server 2 is set without displaying the search result screen.
  • FIG. 18 is a diagram illustrating another example of the flow of screen display.
  • the screen # 31 shown at the left end of FIG. 18 is the screen of the program being viewed.
  • the TV 1 waits for voice input by the user as indicated by the tip of the arrow A31.
  • the display on the display 103 is switched to a screen # 32 that is a voice standby screen.
  • the voice data transmitted from the remote controller 4 is transmitted to the cooperation server 2, and a character string representing the content of the user's utterance is acquired.
  • identification of the program intended by the user and identification of the type of processing for the program are performed based on the acquired character string.
  • the program is identified by detecting a program name included in a character string representing the content of the user's utterance, for example.
  • the cooperation server 2 manages program names of various programs.
  • the type of processing for a program is specified by detecting that the user has issued a word such as “reserve” following a word of a specific attribute, or following the word “recorded”. This is done by detecting that a word having a specific attribute is emitted.
  • the linkage server 2 performs syntax analysis as appropriate.
  • the above-described recording list display command or recording reservation setting command is transmitted from the cooperation server 2 to the TV 1.
  • the screen display is switched in a flow surrounded by a broken line L12 indicated by the tip of the arrow A32.
  • the screen display surrounded by the broken line L12 in FIG. 18 is the same as the screen display surrounded by the broken line L12 in FIG.
  • the search result screen displays a program that is being broadcast / scheduled to be broadcast based on the decomposed character string.
  • a predetermined program is selected from programs being broadcast / scheduled as a search result, a recording reservation is set without displaying the program details screen, as indicated by the tip of arrow A12.
  • the recorded program searched based on the decomposed character string is displayed on the search result screen.
  • a predetermined program is selected from the recorded programs of the search result, as shown at the end of the arrow A14, reproduction of the recorded program is started.
  • the display on the display 103 displays the reservation content confirmation screen # Switch to 33.
  • Reservation content confirmation screen # 33 is a screen that presents the content of the recording reservation of the program specified from the content of the user's utterance.
  • a confirmation button operated when confirming the reservation is displayed.
  • the confirm button When the confirm button is operated, as shown at the end of the arrow A34, the recording reservation of the program is completed, and information indicating the content is recorded in the program information recording unit 125. Thereafter, the display on the display 103 returns to the screen # 31, for example.
  • the reservation reservation confirmation screen # 33 is not displayed and the recording reservation is set. Also good.
  • the display on the display 103 is a program playback screen # 6. Switch to Data of the recorded program is read from the recorded program recording unit 122 and reproduced by the reproduction control unit 123.
  • the display on the display 103 is switched so as to be surrounded by a broken line L21.
  • the user can directly start playback of the recorded program or directly set the recording reservation of the program without operating the search result screen using the same words as the conversation.
  • step S211 the character string acquisition unit 129 of the TV 1 transmits the audio data transmitted from the remote controller 4 and received by the audio data reception unit 128 to the cooperation server 2.
  • step S231 the audio data acquisition unit 221 of the cooperation server 2 receives the audio data transmitted from the TV 1.
  • step S232 the voice recognition unit 222 performs voice recognition based on the voice data, and generates a character string representing the content of the user's utterance.
  • the voice recognition unit 222 appropriately analyzes the syntax of the generated character string.
  • the voice recognition unit 222 identifies the type of processing for the program based on the character string representing the content of the user's utterance.
  • step S233 the search unit 223 specifies a program intended by the user by using a character string representing a program name obtained by syntax analysis.
  • a character string representing a program name obtained by syntax analysis.
  • step S234 When a program being broadcast / scheduled to be broadcast is specified as a program intended by the user and it is specified that a recording reservation is set as the type of processing for the program, in step S234, the search unit 223 displays the program. Information and a recording reservation setting command are transmitted to TV1.
  • the program information includes program identification information intended by the user.
  • step S201 the recording reservation management unit 126 of the TV 1 receives the information transmitted from the cooperation server 2. Based on the information transmitted from the cooperation server 2, a reservation content confirmation screen is displayed by the display control unit 132.
  • Each part in FIG. 7 is also connected by a route (not shown) other than the route indicated by the arrow in FIG.
  • step S202 the recording reservation management unit 126 sets the recording reservation of the program identified by the identification information.
  • step S235 the search unit 223 displays the program information and the reproduction. Send command to TV1.
  • step S203 the recording reservation management unit 126 of the TV 1 receives the information transmitted from the cooperation server 2, and in step S204, the program search unit 127 determines whether the program specified by the cooperation server 2 has been recorded. Inquire.
  • the inquiry from the recording reservation management unit 126 to the program search unit 127 includes program identification information.
  • step S221 the program search unit 127 receives an inquiry from the recording reservation management unit 126.
  • step S222 the program search unit 127 searches the recorded program recorded in the recorded program recording unit 122 for the program specified by the cooperation server 2, and in step S223, the program search management unit 127 It outputs to 126.
  • the program specified by the cooperation server 2 that is, the program intended by the user has been recorded.
  • step S205 the recording reservation management unit 126 receives the inquiry result supplied from the program search unit 127.
  • step S206 the recording reservation management unit 126 causes the reproduction control unit 123 to start reproducing the program specified by the cooperation server 2, and ends the processing.
  • the user can directly start playback of a recorded program or directly set a recording reservation for a program without operating the search result screen.
  • identification of the program intended by the user and identification of the type of processing for the program are performed by the cooperation server 2, but the program may be performed by the TV 1.
  • the processing that can be performed by the TV 1 by voice is the setting of recording reservation and the playback of the recorded program, but other types of processing such as setting of viewing reservation and dubbing of the recorded program are performed. You may enable it to be performed by utterance. Further, other types of processing such as reproduction and purchase of Web content may be performed by voice.
  • the information processing system is configured by the TV 1 as the information processing apparatus and the cooperation server 2, but the information processing system is configured by the cooperation server 2 and another apparatus capable of receiving broadcast waves. It may be.
  • an information processing system can be configured using a set-top box that does not have a display for displaying content, a recording device such as a hard disk recorder, and a portable terminal such as a tablet terminal instead of the TV 1. is there.
  • the functions of the TV 1 described above may be mounted on a device outside the TV 1.
  • the function of the syntax analysis unit 131 among the functions shown in FIG. 7 can be provided in an external server, and the TV 1 can perform the above-described processes in cooperation with the external server. is there.
  • the recording unit 109 and the recording device can be provided on an external server.
  • the content may be provided from an external server via the Internet without being provided by the broadcast wave.
  • a mobile terminal such as a smartphone capable of communicating with the TV 1 may have at least a part of the functions shown in FIG. 7 so that each process described above is performed by the TV 1 and the mobile terminal.
  • the system means a set of a plurality of components (devices, modules (parts), etc.), and it does not matter whether all the components are in the same housing. Accordingly, a plurality of devices housed in separate housings and connected via a network and a single device housing a plurality of modules in one housing are all systems. .
  • the series of processes described above can be executed by hardware or software.
  • a program constituting the software is installed in a computer incorporated in dedicated hardware or a general-purpose personal computer.
  • the program to be installed is provided by being recorded on a removable medium 211 shown in FIG. 8 made of an optical disk (CD-ROM (Compact Disc-Read Only Memory), DVD (Digital Versatile Disc), etc.), semiconductor memory, or the like. Further, it may be provided via a wired or wireless transmission medium such as a local area network, the Internet, or digital broadcasting.
  • the program can be installed in advance in the ROM 202 or the recording unit 208.
  • the program executed by the computer may be a program that is processed in time series in the order described in this specification, or in parallel or at a necessary timing such as when a call is made. It may be a program for processing.
  • Embodiments of the present technology are not limited to the above-described embodiments, and various modifications can be made without departing from the gist of the present technology.
  • the present technology can take a cloud computing configuration in which one function is shared by a plurality of devices via a network and is jointly processed.
  • each step described in the above flowchart can be executed by one device or can be shared by a plurality of devices.
  • the plurality of processes included in the one step can be executed by being shared by a plurality of apparatuses in addition to being executed by one apparatus.
  • This technology can also take the following composition. (1) If the character string representing the content of the user's utterance does not include the first character string representing setting of recording reservation for the program provided after the present, the recorded program and the program provided after the present The first search result is obtained by performing a search for and based on the character string, and when the first character string is included, the search for a program provided after the present is performed A program search unit for obtaining a second search result by performing based on a character string; A display control unit for displaying the display screen of the first search result or the display screen of the second search result; When a predetermined program provided from now on is selected as a program for setting a recording reservation from the display screen of the first search result, a detailed screen including information on the predetermined program is displayed on the first search result.
  • the detailed screen is displayed.
  • a setting unit for setting a recording reservation for the selected program.
  • a parsing unit that parses the character string representing the content of the user's utterance;
  • the program search unit acquires the first search result or the second search result by searching for a program based on a decomposed character string that is a result of the syntax analysis.
  • Information processing device 3.
  • a content search unit for obtaining a search result based on the character string of the content provided via the network; The information processing apparatus according to (2), wherein the display control unit displays the first search result or the second search result in addition to the search result of the content.
  • the information processing apparatus further including: an acquisition unit that transmits voice data of the utterance to a server and acquires the character string transmitted from the server.
  • an acquisition unit that transmits voice data of the utterance to a server and acquires the character string transmitted from the server.
  • the character string representing the content of the user's utterance does not include a predetermined character string representing setting of recording reservation for a program provided after the current time, a recorded program and a program provided after the current time
  • a first search result is obtained by performing a search on the basis of the character string, When a predetermined program provided from now on is selected as a program for setting a recording reservation from the display screen of the first search result, a detailed screen including information on the predetermined program is displayed on the first search result.
  • An information processing method including a step of setting a recording reservation of a selected program without displaying the detailed screen when a program for which a recording reservation is set is selected from the display screen of the second search result.
  • first identification information of the specified program and a first command instructing to set a recording reservation are transmitted to the information processing apparatus, and the setting target is set.
  • a server that includes a communication unit that transmits a search result of content based on the character string to the information processing device when a program is not specified; A communication unit that transmits the voice data of the utterance to the server and receives information transmitted from the server; A program search unit for searching for a program based on the character string transmitted from the server; A display control unit for displaying a display screen including the search result of the content and the search result of the program when the search result of the content is transmitted from the server; When the first identification information and the first command are transmitted from the server, a setting unit for setting a recording reservation for the program identified by the first identification information without displaying the display screen
  • An information processing system comprising: the information processing apparatus including: (11) The search unit of the server specifies a program to be reproduced when the character string includes a second character string indicating that a recorded program is reproduced without including the first character string.
  • the communication unit of the server transmits second identification information of the identified program and a second command instructing reproduction start to the information processing apparatus,
  • the information processing apparatus includes: When the second identification information and the second command are transmitted from the server, playback of the recorded program identified by the second identification information is started without displaying the display screen.
  • the character string representing the content of the user's utterance includes a predetermined character string representing setting recording reservation of a program provided after the present time
  • the program to be set for recording reservation is specified
  • identification information of the specified program and a command for setting a recording reservation are transmitted, and when the program to be set is not specified, the character string
  • a communication unit that transmits the speech data of the utterance and receives information transmitted from the server, to a server that transmits a search result of content based on A program search unit for searching for a program based on the character string transmitted from the server;
  • a display control unit for displaying a display screen including the search result of the content and the search result of the program when the search result of the content is transmitted from the server;
  • An information processing apparatus comprising: a setting unit configured to set a recording reservation of a program identified by the identification information without displaying the display screen when the identification information and the command are transmitted from the server.

Abstract

本技術は、検索結果として挙げられた番組の録画予約を容易に設定することができるようにする情報処理装置、情報処理方法、プログラム、および情報処理システムに関する。 本技術の一側面の情報処理装置は、ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を行うことによって第1の検索結果を取得し、所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を行うことによって第2の検索結果を取得し、第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、詳細画面を表示せずに、選択された番組の録画予約を設定する。本技術は、テレビジョン受像機などの放送番組を受信可能な機器に適用することができる。

Description

情報処理装置、情報処理方法、プログラム、および情報処理システム
 本技術は、情報処理装置、情報処理方法、プログラム、および情報処理システムに関し、特に、検索結果として挙げられた番組の録画予約を容易に設定することができるようにした情報処理装置、情報処理方法、プログラム、および情報処理システムに関する。
 近年、音声認識の精度が向上してきている。例えばテレビジョン受像機の中には、ユーザがリモートコントローラなどに設けられたマイクに向かって話すことで番組の検索を行うことができるものもある。
 ユーザは、検索結果に挙がった番組の中から所定の番組を選択することによって、その番組の録画予約を設定したり、録画済みの番組の再生を開始させたりすることができる。
特開2011-118775号公報
 番組の検索のためにユーザが発話した内容に、検索によって見つかった番組をユーザがどうしようとしているのかを特定することができる情報が含まれていることがある。例えばユーザが「来週の〇〇〇〇のドラマを録画」と発話した場合、「〇〇〇〇」に関連するドラマの番組を録画しようとしていると推定することができる。
 本技術はこのような状況に鑑みてなされたものであり、検索結果として挙げられた番組の録画予約を容易に設定することができるようにするものである。
 本技術の一側面の情報処理装置は、ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第1の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果を取得し、前記第1の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果を取得する番組検索部と、前記第1の検索結果の表示画面または前記第2の検索結果の表示画面を表示させる表示制御部と、前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する設定部とを備える。
 本技術の一側面においては、ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第1の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果が取得され、前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約が設定される。また、ユーザの発話の内容を表す前記文字列に、前記第1の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果が取得され、前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約が設定される。
 また、本技術の他の側面の情報処理システムは、サーバと情報処理装置とを備える。そのうちの前記サーバは、ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第1の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行う検索部と、前記設定対象となる番組が特定された場合、特定された番組の識別情報と録画予約を設定することを指示する第1のコマンドとを情報処理装置に送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を前記情報処理装置に送信する通信部とを含む。また、前記情報処理装置は、前記発話の音声データを前記サーバに送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、前記識別情報と前記第1のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記識別情報により識別される番組の録画予約を設定する設定部とを含む。
 本技術によれば、検索結果として挙げられた番組の録画予約を容易に設定することができる。
 なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術の一実施形態に係る情報処理システムの構成例を示す図である。 TVのアプリケーション構造の例を示す図である。 検索結果画面の例を示す図である。 検索結果画面の他の例を示す図である。 構文解析の例を示す図である。 TVのハードウェア構成例を示すブロック図である。 TVの機能構成例を示すブロック図である。 連携サーバのハードウェア構成例を示すブロック図である。 連携サーバの機能構成例を示すブロック図である。 情報処理システムの動作について説明するシーケンス図である。 ユーザの意図の特定の例を示す図である。 ユーザの意図の特定の他の例を示す図である。 画面表示の流れの例を示す図である。 情報処理システムの他の動作について説明するシーケンス図である。 検索結果画面の例を示す図である。 検索結果画面の他の表示例を示す図である。 画面表示の流れの例を示す図である。 画面表示の流れの他の例を示す図である。 情報処理システムのさらに他の動作について説明するシーケンス図である。
 以下、本技術を実施するための形態について説明する。説明は以下の順序で行う。
 1.情報処理システムの構成例
 2.検索結果の表示例
 3.第1の検索例(粒度の異なる文字列を用いて検索を行う例)
 4.第2の検索例(発話の内容に応じて検索範囲の絞り込みを行う例)
 5.第3の検索例(サーバ側で番組を特定できた場合の例)
 6.変形例
<<1.情報処理システムの構成例>>
 図1は、本技術の一実施形態に係る情報処理システムの構成例を示す図である。
 図1の情報処理システムは、テレビジョン受像機1(以下、適宜、TV1という)と連携サーバ2が、インターネットなどのネットワーク3を介して接続されることによって構成される。
 TV1と連携サーバ2の間では、ネットワーク3を介した通信が行われる。ネットワーク3は、有線のネットワーク、無線のネットワーク、および有線と無線を組み合わせたネットワークのいずれの形態のものであってもよい。
 TV1は、地上デジタル放送、衛星放送、ケーブル放送などのテレビジョン放送を受信する。TV1は、放送された番組の映像をディスプレイに表示するとともに、番組の音声をスピーカから出力する。番組の提供がネットワーク3を介して行われるようにしてもよい。
 また、TV1は、受信した番組を内蔵または外付けの記録媒体に録画(記録)する機能、および、録画済み番組を再生する機能をも有する。番組の録画が、TV1に接続された録画機器により行われるようにしてもよい。
 図2は、TV1のアプリケーション構造の例を示す図である。
 TV1にはTV用OS(Operating System)が搭載される。検索アプリケーション、番組再生アプリケーション、番組録画アプリケーション、番組表アプリケーションなどの各種のアプリケーションが、TV用OS上で、TV用OSと連携して動作する。
 図2の検索アプリケーションは、例えばWeb上のコンテンツの検索を行うアプリケーションである。コンテンツには、動画、静止画、音楽、ゲーム、電子書籍、アプリケーション、およびそれらの2つ以上の組み合わせからなる、ユーザが利用可能な各種のデジタルデータが含まれる。
 番組再生アプリケーションは、例えば、放送中の番組、録画済み番組の再生を行うアプリケーションである。番組録画アプリケーションは、番組の録画を行うアプリケーションである。番組表アプリケーションは、EPG(Electronic Program Guide)の表示、番組の録画予約の管理などを行うアプリケーションである。
 TV1には、検索アプリケーションと連携する番組検索モジュールなどの各種のモジュールも用意される。番組検索モジュールは、例えば、EPGに掲載されている番組を対象とした番組の検索、録画済み番組を対象とした番組の検索などを行う。検索アプリケーションがネットワーク3を介して提供される外部のコンテンツであるWebコンテンツの検索を行うものであるのに対して、番組検索モジュールは、TV1の内部のコンテンツの検索を行うものであるということができる。
 例えば、検索アプリケーションはTV用OSを提供する企業により用意されるソフトウェアである。一方、番組検索モジュールは、TV用OSや検索アプリケーション等のソフトウェアの提供を受けて、TV1の製造、販売等を行う企業により用意されるソフトウェアである。
 番組の受信、番組の録画、録画済み番組の再生、番組の検索などの各種の機能が、これらのプログラムが実行されることによって実現される。
 このような各種の機能を有するTV1の操作は、リモートコントローラ4を用いて行われる。リモートコントローラ4は、ユーザによる操作の内容を表す情報をTV1に送信する。
 リモートコントローラ4には、各種の操作に用いられるボタンの他にマイクロフォンが設けられる。リモートコントローラ4は、マイクボタンが押された場合、マイクロフォンによりユーザの音声を集音し、音声データをTV1に送信する。
 後述するように、TV1においては、番組を含む各種のコンテンツの検索を、音声を用いて行うことが可能とされる。当然、リモートコントローラ4に設けられるボタンを用いて手入力によって入力された文字列を用いてコンテンツの検索を行うことも可能とされる。以下、コンテンツの検索を、音声を用いて行う場合について主に説明する。
 連携サーバ2は、TV用OSを提供する企業が管理するサーバである。連携サーバ2は、Webコンテンツの検索機能、TV1から送信されてきた音声の認識機能などの各種の機能を、TV1を含む、TV用OSを搭載する各機器に提供する。
<<2.検索結果の表示例>>
 図3は、検索結果画面の例を示す図である。
 例えば、ユーザがリモートコントローラ4を操作して検索機能を実行し、検索のキーとする言葉を発した場合、図3に示すような検索結果画面がTV1のディスプレイに表示される。
 検索結果画面の上方には、コンテンツの検索のキーとなる文字列の表示欄である文字列表示欄11が形成される。図3の例においては、「XXXが出ている番組」の文字列が表示されている。TV1においては、このような、ユーザが日常的に使う自然言語を用いてコンテンツの検索を行うことが可能とされる。
 ユーザがリモートコントローラ4のマイクボタンを押して言葉を発した場合、リモートコントローラ4からTV1に対して音声データが送信される。TV1に送信された音声データは、連携サーバ2に送信され、連携サーバ2において音声認識が行われる。文字列表示欄11の表示は、連携サーバ2から送信されてきた音声認識の結果に基づいて表示されることになる。
 文字列表示欄11の下には、上から順に、Web動画領域21、番組領域22、および映画領域23が形成される。各領域には、検索結果として挙げられたコンテンツを表すカード状の画像が横に並べて表示される。以下、適宜、コンテンツを表すカード状の画像を、単に、カード画像という。
 Web動画領域21は、Web上の動画を表すカード画像の行の表示領域である。例えば、連携サーバ2は、様々なユーザから投稿された動画を配信するサービスを提供する。Web動画領域21に表示されるカード画像は、連携サーバ2が、動画配信サービスによって配信する動画を対象として検索された動画を表す画像である。
 番組領域22は、番組を表すカード画像の行の表示領域である。左端のカード画像の上には、「地上D 予約」の文字が表示されている。図3の番組領域22に表示されているカード画像は、現在放送中の番組と放送予定の番組、すなわち現在以降に放送される番組の中から検索された、録画予約を設定可能な番組を表す画像である。
 番組を表す1つのカード画像は上下2段に分けて構成される。カード画像の上段には番組のサムネイル画像が表示され、下段には番組名や放送日時などの番組情報が表示される。
 映画領域23は、Web上の映画コンテンツを表すカード画像の行の表示領域である。例えば、連携サーバ2は、映画コンテンツをダウンロードまたはストリーミングによって販売するサービスをも提供する。映画領域23に表示されるカード画像は、連携サーバ2が販売する映画コンテンツを対象として検索された映画コンテンツを表す画像である。
 なお、Web動画領域21、番組領域22、および映画領域23を示す破線は、画面に実際に表示されるものではない。図3の検索結果画面には表示されていないが、映画領域23の下には、他のカテゴリのコンテンツの検索結果の表示領域が配置される。ユーザは、表示範囲をスクロールすることによって、表示されていない他のカテゴリのコンテンツの検索結果を見ることができる。
 詳細については後述するが、Web動画領域21と映画領域23に表示される検索結果は、ユーザが発話した内容を表す文字列、すなわち、文字列表示欄11に表示されている文字列全体をまとめてキーとして用いて検索を行うことによって得られた結果である。
 一方、番組領域22に表示される検索結果は、ユーザが発話した内容を表す文字列の構文解析結果として得られた分解文字列を用いて検索を行うことによって得られた結果である。
 1つの検索結果画面に、ユーザによって入力された文字列全体に基づいて検索を行うことによって得られた結果と、文字列を構成する分解文字列に基づいて検索を行うことによって得られた結果とが表示されることになる。
 図4は、検索結果画面の他の例を示す図である。
 番組領域22には、録画予約を設定可能な番組を表すカード画像の行と、録画済み番組を表すカード画像の行が表示されることがある。図4の番組領域22に表示されているカード画像の2行のうちの下の行は、録画済み番組を表すカード画像の行である。録画済み番組を表す左端のカード画像の上には「地上D 録画済み」の文字が表示されている。
 番組領域22には、録画予約を設定可能な番組を表すカード画像の行が表示されずに、録画済み番組を表すカード画像の行のみが表示されることがある。
 ユーザは、このような検索結果画面が表示された場合、リモートコントローラ4を操作して所定のコンテンツを選択し、Web動画の視聴、番組の録画予約、録画済み番組の再生、映画コンテンツのダウンロードなどを行うことができる。選択中のコンテンツを表すカード画像は、図3,4の左上端のWeb動画に示すようにポップアップした状態で強調表示される。
<<3.第1の検索例>>
 ここで、ユーザによって入力された文字列全体に基づいて検索を行うとともに、文字列を構成する分解文字列に基づいて検索を行う例について説明する。
 図5は、構文解析の例を示す図である。
 図5の上段に示すように例えばユーザが「来週の〇〇〇〇のドラマ」の言葉を発した場合、連携サーバ2により音声認識が行われ、「来週の〇〇〇〇のドラマ」の文字列が生成される。
 「〇〇〇〇」は固有名詞であり、俳優の名前などの人名であるものとする。この例においては、ユーザが、来週放送される、「〇〇〇〇」が出演するドラマについて調べようと意図していることになる。「来週の〇〇〇〇のドラマ」の文字列は、連携サーバ2からTV1に対して送信される。
 連携サーバ2から送信されてきた「来週の〇〇〇〇のドラマ」の文字列を受信したTV1の検索アプリケーションは、さらに、Webコンテンツの検索結果を取得する。TV1に対しては、ユーザの発話の内容を表す文字列に続けて、Webコンテンツの検索結果が連携サーバ2から送信されてくる。
 連携サーバ2においては、「来週の〇〇〇〇のドラマ」の文字列全体をひとまとまりとして用いて、Web動画と映画コンテンツの検索が行われ、TV1に対して検索結果が送信される。
 TV1は、検索結果として得られたWeb動画を表すカード画像を検索結果画面のWeb動画領域21に表示させ、映画コンテンツを表すカード画像を検索結果画面の映画領域23に表示させる。
 また、TV1は、図5の矢印の先に示すように、「来週の〇〇〇〇のドラマ」の文字列の構文解析を行う。構文解析により、ユーザが発話した自然言語が意味を持つ最小の単位である形態素に分けられ、それぞれの形態素の品詞などが判別される。また、各形態素を組み合わせるなどして、番組の検索に用いるのに適した属性の分解文字列が生成される。
 図5の例においては、「来週の〇〇〇〇のドラマ」の文字列に基づいて、「時制」の属性の「来週」、「人名」の属性の「〇〇〇〇」、および、「ジャンル」の属性の「ドラマ」の分解文字列が生成されている。
 TV1は、構文解析の結果として得られた「来週」、「〇〇〇〇」、「ドラマ」に基づいて検索条件を設定し、番組の検索を行う。例えば、今日を基準として「来週」に放送される「ドラマ」のジャンルの番組を検索するように検索条件が設定される。TV1は、検索結果として得られた番組を表すカード画像を、検索結果画面の番組領域22に追加して表示させる。
 これにより、図3,4を参照して説明したような、ユーザの発話の内容を表す文字列全体に基づく検索結果と、その文字列を構成する分解文字列に基づく検索結果を含む検索結果画面が表示されることになる。
<3-1.各装置の構成例>
<3-1-1.TV1の構成>
 図6は、TV1のハードウェア構成例を示すブロック図である。
 放送受信部101は、図示せぬアンテナから供給された放送波信号を受信し、A/D変換、復調などの各種の処理を施して、番組データをデコーダ102に出力する。
 デコーダ102は、番組データを構成するビデオストリームをデコードし、番組の映像をLCD(Liquid Crystal Display)や有機ELディスプレイなどよりなるディスプレイ103に表示させる。また、デコーダ102は、番組データを構成するオーディオストリームをデコードし、映像に同期させて、番組の音声をスピーカ104から出力させる。
 CPU(Central Processing Unit)106、ROM(Read Only Memory)107、RAM(Random Access Memory)108は、バス105により相互に接続される。CPU106は、ROM107や記録部109に記録されているプログラムをRAM108を用いて実行し、TV1の全体を制御する。
 記録部109は、HDD(Hard Disk Drive)やSSD(Solid State Drive)などの記録媒体により構成される。記録部109は、番組などのコンテンツ、EPGデータ、プログラムなどの各種のデータを記録する。
 通信部110は、ネットワーク3のインタフェースである。通信部110は、連携サーバ2との間で通信を行う。
 操作I/F部111は、リモートコントローラ4から送信されてきたデータを受信し、バス105を介してCPU106に出力する。
 図7は、TV1の機能構成例を示すブロック図である。
 図7に示す機能部のうちの少なくとも一部は、図6のCPU106により、図2の各プログラムが実行されることによって実現される。
 録画制御部121は、番組情報記録部125に記録されている情報を参照し、録画予約が設定されている番組の放送が開始された場合、放送受信部101を制御して、録画対象の番組のデータを取得する。番組情報記録部125には、番組の録画予約に関する情報が記録されている。録画制御部121は、取得した番組のデータを録画番組記録部122に出力し、記録させる。
 例えば、録画制御部121は、番組録画アプリケーションが実行されることによって実現される。
 録画番組記録部122は、記録部109において実現される。録画番組記録部122は、録画制御部121から供給された番組のデータを記録し、録画済み番組として管理する。
 再生制御部123は、録画番組記録部122に記録されている録画済み番組の中から、再生が指示された番組のデータを読み出し、デコーダ102に出力して再生させる。
 放送波受信制御部124は、放送受信部101による放送波の受信を制御する。また、放送波受信制御部124は、放送受信部101において受信された放送波信号からEPGデータを抽出し、番組情報記録部125に記録させる。
 例えば、再生制御部123と放送波受信制御部124は、番組再生アプリケーションが実行されることによって実現される。
 番組情報記録部125は、記録部109において実現される。番組情報記録部125は、放送波受信制御部124から供給されたEPGデータと、録画予約管理部126から供給された録画予約に関する情報を記録する。
 録画予約管理部126は、ユーザの操作に従って、所定の番組の録画予約を設定し、その内容を表す情報を番組情報記録部125に記録させる。
 例えば、録画予約管理部126は、番組表アプリケーションが実行されることによって実現される。
 番組検索部127は、文字列取得部129から供給された文字列を構文解析部131に出力し、構文解析を行わせる。番組検索部127は、構文解析の結果として構文解析部131から供給された分解文字列を検索のキーとして用いて、番組の検索を行う。
 具体的には、番組検索部127は、番組情報記録部125に記録されているEPGデータを参照し、放送中/放送予定の番組を対象として番組の検索を行う。また、番組検索部127は、録画番組記録部122に記録されている録画済み番組の検索を行う。番組検索部127は、検索結果の番組に関する情報を表示制御部132に出力する。
 例えば、番組検索部127は、番組検索モジュールが実行されることによって実現される。
 音声データ受信部128は、リモートコントローラ4から送信された、ユーザの発話の内容を表す音声データを操作I/F部111を制御して受信する。音声データ受信部128は、受信した音声データを文字列取得部129に出力する。
 文字列取得部129は、通信部110を制御し、受信した音声データを連携サーバ2に送信する。また、文字列取得部129は、音声データを送信することに応じて連携サーバ2から送信されてきた文字列を取得する。文字列取得部129は、取得した文字列を番組検索部127とWebコンテンツ検索部130に出力する。
 なお、検索のキーとする文字列が手入力によってユーザにより入力された場合、リモートコントローラ4から送信されてきた文字列も操作I/F部111において受信され、文字列取得部129により取得される。
 Webコンテンツ検索部130は、通信部110を制御し、連携サーバ2から送信されてきたWebコンテンツの検索結果を取得する。Webコンテンツ検索部130は、Webコンテンツの検索結果を表示制御部132に出力する。
 TV1から連携サーバ2に対して文字列が送信され、それに応じて、連携サーバ2においてWebコンテンツの検索が行われ、連携サーバ2からTV1に対して検索結果が送信されるようにしてもよい。この場合、Webコンテンツ検索部130は、文字列取得部129から供給された文字列を連携サーバ2に送信し、Webコンテンツの検索結果を取得する。
 構文解析部131は、番組検索部127から供給された文字列の構文解析を行い、分解文字列を番組検索部127に出力する。構文解析部131は、自然言語処理に用いる情報を有している。
 表示制御部132は、番組検索部127から供給された検索結果とWebコンテンツ検索部130から供給された検索結果に基づいて、検索結果画面をディスプレイ103に表示させる。
 例えば、破線L1で囲んで示す、音声データ受信部128、文字列取得部129、Webコンテンツ検索部130、および表示制御部132が、検索アプリケーションが実行されることによって実現される。
<3-1-2.連携サーバ2の構成>
 図8は、連携サーバ2のハードウェア構成例を示すブロック図である。
 CPU201、ROM202、RAM203は、バス204により相互に接続される。バス204には、さらに、入出力インタフェース205が接続される。
 入出力インタフェース205には、キーボード、マウスなどよりなる入力部206、ディスプレイ、スピーカなどよりなる出力部207が接続される。また、入出力インタフェース205には、ハードディスクや不揮発性のメモリなどよりなる記録部208、ネットワークインタフェースなどよりなり、TV1との間で通信を行う通信部209、リムーバブルメディア211を駆動するドライブ210が接続される。
 図9は、連携サーバ2の機能構成例を示すブロック図である。
 図9に示す機能部のうちの少なくとも一部は、図8のCPU201により、所定のプログラムが実行されることによって実現される。連携サーバ2においては、音声データ取得部221、音声認識部222、および検索部223が実現される。
 音声データ取得部221は、通信部209を制御し、TV1から送信されてきた音声データを取得する。音声データ取得部221は、取得した音声データを音声認識部222に出力する。
 音声認識部222は、音声データ取得部221から供給された音声データの音声認識を行う。音声認識部222は、通信部209を制御し、ユーザの発話の内容を表す文字列をTV1に送信する。また、音声認識部222は、ユーザの発話の内容を表す文字列を検索部223に出力する。
 検索部223は、音声認識部222から供給された文字列、または、適宜、TV1から送信されてきた文字列に基づいて、Webコンテンツの検索を行う。記録部208には、連携サーバ2が提供する動画配信サービスによって配信されるWeb動画のデータ、連携サーバ2が提供するコンテンツ販売サービスによって送信される映画コンテンツなどの、各種のコンテンツのデータが記録されている。検索部223は、通信部209を制御し、検索結果をTV1に送信する。
 この例においては、連携サーバ2の機能が1台のコンピュータによって実現されるものとしているが、連携サーバ2の機能が複数のコンピュータによって分散して実現されることもある。連携サーバ2の機能が複数のコンピュータによって分散して実現される場合、図9に示す各構成は複数のコンピュータ上で実現され、それぞれ連携して処理が行われることになる。
<3-2.情報処理システムの動作の例>
 ここで、図10のシーケンス図を参照して、以上のような構成を有するTV1と連携サーバ2の動作について説明する。
 例えば「来週の〇〇〇〇のドラマ」といったようなユーザの音声をマイクロフォンにより集音した場合、ステップS1において、リモートコントローラ4は、集音して得られた音声データをTV1に送信する。
 ステップS11において、TV1の音声データ受信部128は、リモートコントローラ4から送信されてきた音声データを受信する。受信された音声データは文字列取得部129に供給される。
 ステップS12において、文字列取得部129は、音声データを連携サーバ2に送信する。
 ステップS51において、連携サーバ2の音声データ取得部221は、TV1から送信されてきた音声データを受信する。受信された音声データは音声認識部222に供給される。
 ステップS52において、音声認識部222は、音声データに基づいて音声認識を行い、ユーザの発話の内容を表す文字列を生成する。音声認識によって得られた文字列は検索部223に供給される。
 ステップS53において、音声認識部222は、音声認識によって得られた文字列をTV1に送信する。
 ステップS54において、検索部223は、音声認識によって得られた文字列全体に基づいてWebコンテンツの検索を行い、ステップS55において検索結果をTV1に送信する。
 ステップS53において連携サーバ2から送信された文字列は、ステップS13においてTV1の文字列取得部129により受信される。また、ステップS55において連携サーバ2から送信された検索結果はステップS14においてTV1のWebコンテンツ検索部130により受信される。Webコンテンツ検索部130により受信された検索結果は表示制御部132に供給される。
 ステップS15において、文字列取得部129は、連携サーバ2から送信されてきた文字列を番組検索部127に出力する。
 ステップS16において、表示制御部132は、Webコンテンツ検索部130から供給された検索結果に基づいて、検索結果のWebコンテンツを表すカード画像が並ぶ検索結果画面をディスプレイ103に表示させる。このとき、検索されたWeb動画を表すカード画像がWeb動画領域21に表示され、映画コンテンツを表すカード画像が映画領域23に表示される。
 一方、ステップS31において、番組検索部127は、文字列取得部129から供給された文字列を受信し、ステップS32において構文解析部131に出力する。
 ステップS41において、構文解析部131は、番組検索部127から供給された文字列を受信し、ステップS42において構文解析を行う。
 ステップS43において、構文解析部131は、構文解析の結果として取得された分解文字列を、各分解文字列の属性の情報とともに番組検索部127に出力する。
 ステップS33において、番組検索部127は、構文解析部131から供給された情報を受信し、ステップS34において、放送中/放送予定の番組と録画済み番組を対象とした検索を分解文字列に基づいて行う。例えば、分解文字列により検索条件が設定され、番組の検索が行われる。
 ステップS35において、番組検索部127は、検索結果の番組に関する情報を、各番組が選択されたときに起動するアプリケーションを特定する情報とともに表示制御部132に出力する。例えば、検索された放送中/放送予定の番組については、それが選択されたときに起動させるアプリケーションとして番組表アプリケーションを表す情報が出力される。また、検索された録画済み番組については、それが選択されたときに起動させるアプリケーションとして番組再生アプリケーションを表す情報が出力される。
 ステップS17において、表示制御部132は、番組検索部127から供給された情報を受信し、ステップS18において、検索された番組のカード画像を検索結果画面に追加して表示させる。
 これにより、Web動画領域21と映画領域23の表示に加えて、放送中/放送予定の番組を表すカード画像の行と録画済み番組を表すカード画像の行のうちの一方、又は両方が番組領域22に表示される。その後、検索結果画面を表示するための一連の処理が終了となる。
 番組領域22に表示された放送中/放送予定の番組のカード画像がユーザにより選択された場合、番組表アプリケーションが起動し、番組の詳細情報の表示などが行われた後、選択された番組の録画予約が録画予約管理部126により設定される。
 また、番組領域22に表示された録画済み番組のカード画像がユーザにより選択された場合、番組再生アプリケーションが起動し、選択された録画済み番組のデータが録画番組記録部122から読み出される。読み出されたデータは再生制御部123に供給され、録画済み番組の再生が開始される。
 以上の一連の処理により、1つの検索結果画面に、ユーザによって入力された文字列全体に基づいて検索されたWebコンテンツの情報と、文字列を構成する分解文字列に基づいて検索された番組の情報が表示される。
 検索の対象となる番組の中には、文字列全体を用いて検索した場合には見つからないが、分解文字列を用いて検索した場合には見つかる番組もある。また、仮に、文字列全体を用いて番組の検索を行った場合、ユーザが探そうとしている例えば「〇〇〇〇」とは関係のない番組が、「〇〇〇〇」以外の文字列に基づいて検索されてしまうこともある。
 分解文字列を用いて検索を行うことにより、番組については、ユーザの意図に沿った、精度の高い検索を実現することが可能になる。
 分解文字列を用いた検索が、番組を対象として行われるものとしたが、Webコンテンツを対象としても行われるようにしてもよい。
 なお、図10を参照して説明した各ステップの処理は、適宜、他のステップの処理と並行して、または他のステップの処理と前後して行われる。後述するシーケンス図の処理についても同様である。
<<4.第2の検索例>>
 ユーザの発話の内容によっては、ユーザが、放送中/放送予定の番組の中から番組を見つけてその録画予約を設定しようとしているのか、録画済み番組の中から番組を見つけてそれを視聴しようとしているのかを特定できることがある。
 ユーザの意図を特定できた場合に、検索結果の提示の仕方や画面表示の流れをユーザの意図に応じて切り替えるようにしてもよい。
 図11および図12は、ユーザの意図の特定の例を示す図である。
 図11の上段に示すように、「録画した」の言葉に続けて特定の属性の言葉をユーザが発した場合、ユーザが、「録画した」の言葉の後に発した言葉に関連のある録画済み番組を視聴しようとしているとして特定される。この例においては、「録画した」の言葉に続けて、「時制」、「人名」、「番組名」、「ジャンル」、「放送局名」のうちの少なくともいずれかの属性の言葉をユーザが発した場合にそのようなユーザの意図が特定される。
 ユーザの発話の内容を表す文字列の構文解析を行うことによって、「録画した」の言葉に続けて特定の属性の言葉を発したことが検出された場合、矢印の先に示すように、録画リスト表示コマンドが構文解析部131から番組検索部127に出力される。録画リスト表示コマンドは、録画済み番組の検索結果を表示することを指示するコマンドである。
 録画リスト表示コマンドを受信した番組検索部127は、録画済み番組のみを対象として番組の検索を行う。検索結果画面には、「録画した」に続く分解文字列に基づいて検索された録画済み番組が検索結果として表示され、放送中/放送予定の番組は表示されない。
 例えば、図11の下段に示すように、「録画した△△△△が見たい」をユーザが発した場合、その文字列の構文解析が構文解析部131において行われ、「番組名」の属性の「△△△△」とともに、録画リスト表示コマンドが番組検索部127に供給される。ここでは、「△△△△」は番組名を表す固有名詞であるものとする。
 番組検索部127は、録画済み番組のみを対象として、「△△△△」に基づいて番組の検索を行う。番組検索画面には、「番組名」として「△△△△」を含む録画済み番組の検索結果が表示される。
 一方、図12の上段に示すように、特定の属性の言葉に続けて、「を予約」、「を録画」、および「を録画予約」のうちのいずれかの言葉をユーザが発した場合、ユーザが、「を予約」等の言葉の前に発した言葉に関連のある放送中/放送予定の番組の録画予約を設定しようとしているとして特定される。この例においても、「時制」、「人名」、「番組名」、「ジャンル」、「放送局名」のうちの少なくともいずれかの属性の言葉に続けて、「を予約」等の言葉をユーザが発した場合にそのようなユーザの意図が特定される。
 なお、「を予約して」の言葉をユーザが発した場合も、「を予約」の言葉をユーザが発した場合と同様の処理が行われる。また、「を録画して」の言葉をユーザが発した場合も、「を録画」の言葉をユーザが発した場合と同様の処理が行われる。
 ユーザの発話の内容を表す文字列の構文解析を行うことによって、特定の属性の言葉に続けて「を予約」等の言葉を発したことが検出された場合、矢印の先に示すように、録画予約設定コマンドが構文解析部131から番組検索部127に出力される。録画予約設定コマンドは、録画予約を設定可能な、放送中/放送予定の番組の検索結果を表示することを指示するコマンドである。
 録画予約設定コマンドを受信した番組検索部127は、放送中/放送予定の番組のみを対象として番組の検索を行う。検索結果画面には、「を予約」等の前の分解文字列に基づいて検索された放送中/放送予定の番組が検索結果として表示され、録画済み番組は表示されない。
 例えば、図12の下段に示すように、「来週の〇〇〇〇のドラマを録画」をユーザが発した場合、その文字列の構文解析が構文解析部131において行われる。また、構文解析の結果として、「時制」の属性の「来週」、「人名」の属性の「〇〇〇〇」、および、「ジャンル」の属性の「ドラマ」の分解文字列とともに、録画予約設定コマンドが番組検索部127に供給される。
 番組検索部127は、「来週」に放送される「ドラマ」の番組のみを対象として、「〇〇〇〇」に基づいて番組の検索を行う。番組検索画面には、「〇〇〇〇」が出演する番組の検索結果が表示される。
 このように、TV1は、発話の内容からユーザの意図を特定し、検索結果の提示の仕方を変えることができる。
 すなわち、ユーザが、放送中/放送予定の番組の中から番組を見つけてその録画予約を設定しようとしている場合には、検索範囲の絞り込みが行われ、放送中/放送予定の番組の検索結果が表示される。また、ユーザが、録画済み番組の中から番組を見つけてそれを視聴しようとしている場合には、検索範囲の絞り込みが行われ、録画済み番組の検索結果が表示される。
 このように検索結果の提示の仕方を変えることにより、ユーザにとって直感的でわかりやすい検索結果画面を表示することが可能になる。
<4-1.画面遷移の例>
 図13は、画面表示の流れの例を示す図である。
 図13の左端に示す画面#1は視聴中の番組の画面である。例えばこの状態でユーザがリモートコントローラ4のマイクボタンを押した場合、矢印A1の先に示すように、TV1は、ユーザによる音声入力を待つ状態になる。ディスプレイ103の表示は、音声待ち受け画面である画面#2に切り替わる。
 リモートコントローラ4から送信されてきた音声データは連携サーバ2に送信され、ユーザの発話の内容を表す文字列が取得される。また、連携サーバ2から送信されてきた文字列の構文解析がTV1において行われ、分解文字列が取得される。分解文字列の内容に応じて、適宜、構文解析部131から番組検索部127に対して、録画リスト表示コマンドまたは録画予約設定コマンドが出力される。
 構文解析部131から出力された構文解析の結果に録画リスト表示コマンドまたは録画予約設定コマンドが含まれない場合、矢印A2の先に示すように、ディスプレイ103の表示は、番組の検索範囲の絞り込みが行われていない検索結果画面#3に切り替わる。検索結果画面#3は、放送中/放送予定の番組と録画済み番組の検索結果を含む、図4を参照して説明した画面と同様の画面である。
 検索結果画面#3において、放送中/放送予定の所定の番組が選択された場合、矢印A3の先に示すように、ディスプレイ103の表示は番組詳細画面#4に切り替わる。番組詳細画面#4は、ユーザにより選択された番組の内容、放送日時などの詳細情報を含む画面である。番組詳細画面#4は例えば番組情報記録部125に記録されているEPGに基づいて表示される。
 番組詳細画面#4には、詳細情報を表示中の番組の録画予約を設定するときに操作される録画予約ボタン、視聴予約を設定するときに操作される視聴予約ボタン、検索結果画面#3に戻るときに操作される戻るボタンなどが表示される。
 例えば録画予約ボタンが操作された場合、矢印A4の先に示すように、ディスプレイ103の表示は予約内容確認画面#5に切り替わる。予約内容確認画面#5には、予約内容の他に、予約を確定するときに操作される確定ボタンなどが表示される。
 確定ボタンが操作された場合、矢印A5の先に示すように、番組の録画予約が完了し、その内容を表す情報が番組情報記録部125に記録される。ディスプレイ103の表示は、矢印A6に示すように番組詳細画面#4に切り替わる。番組詳細画面#4において戻るボタンが操作された場合、矢印A7に示すように、ディスプレイ103の表示は検索結果画面#3に戻る。
 検索結果画面#3において、録画済みの所定の番組が選択された場合、矢印A8の先に示すように、ディスプレイ103の表示は番組再生画面#6に切り替わる。録画済み番組のデータが録画番組記録部122から読み出され、再生制御部123により再生される。
 矢印A9の先に示すように番組の再生が終了した場合、矢印A10の先に示すように、ディスプレイ103の表示は検索結果画面#3に戻る。
 構文解析部131から出力された構文解析の結果に録画リスト表示コマンドまたは録画予約設定コマンドが含まれない場合、録画予約設定時のディスプレイ103の表示は破線L11で囲むようにして切り替えられる。
 一方、構文解析部131から出力された構文解析の結果に録画リスト表示コマンドまたは録画予約設定コマンドが含まれる場合、矢印A11の先に示すように、ディスプレイ103の表示は、番組の検索範囲の絞り込みが行われた検索結果画面#7に切り替わる。
 検索結果画面#7は、録画リスト表示コマンドが出力された場合には録画済み番組の検索結果を含む画面となり、録画予約設定コマンドが出力された場合には放送中/放送予定の番組の検索結果を含む画面となる。
 構文解析部131から出力されたコマンドが録画予約設定コマンドであり、検索結果画面#7において、放送中/放送予定の所定の番組が選択された場合、矢印A12の先に示すように、番組の録画予約が完了し、その内容を表す情報が番組情報記録部125に記録される。すなわち、この場合、ユーザが番組の録画予約を設定しようとしていることが特定されているから、番組詳細画面#4などは表示されない。
 矢印A13に示すように、番組の予約が行われている間も、ディスプレイ103には検索結果画面#7が表示され続ける。ユーザは、検索結果画面#7に検索結果として挙げられた放送中/放送予定の番組を選択するだけで、複数の番組の録画予約の設定を次々と行うことができる。
 構文解析部131から出力されたコマンドが録画リスト表示コマンドであり、検索結果画面#7において、録画済みの所定の番組が選択された場合、矢印A14の先に示すように、ディスプレイ103の表示は番組再生画面#6に切り替わる。録画済み番組のデータが録画番組記録部122から読み出され、再生制御部123により再生される。
 番組の再生が終了した場合、矢印A15の先に示すように、ディスプレイ103の表示は検索結果画面#7に戻る。
 このように、構文解析部131から出力された構文解析の結果に録画予約設定コマンドが含まれる場合、録画予約設定時のディスプレイ103の表示は破線L12で囲むようにして切り替えられる。
 特に、録画予約を設定するまでの画面表示が、発話の内容から特定したユーザの意図に応じて以上のようにして切り替えられることにより、ユーザは、検索結果として挙げられた番組の録画予約を容易に設定することが可能になる。
<4-2.情報処理システムの動作の例>
 ここで、図14のシーケンス図を参照して、図13に示す画面表示を実現するTV1と連携サーバ2の動作について説明する。
 図14の処理は、リモートコントローラ4から送信された音声データをTV1が受信したときに開始される。なお、図14に示すTV1のステップS101乃至S105,S121乃至S123,S141乃至143の処理は、それぞれ、図10のステップS12乃至S16,S31乃至S33,S41乃至43の処理と同様の処理である。また、図14に示す連携サーバ2のステップS151乃至S155の処理は、それぞれ、図10のステップS51乃至S55の処理と同様の処理である。重複する説明については適宜省略する。
 ステップS101において、TV1の文字列取得部129は、リモートコントローラ4から送信され、音声データ受信部128により受信された音声データを連携サーバ2に送信する。
 ステップS151において、連携サーバ2の音声データ取得部221は、TV1から送信されてきた音声データを受信する。
 ステップS152において、音声認識部222は、音声認識を行い、ユーザの発話の内容を表す文字列を生成する。
 ステップS153において、音声認識部222は、音声認識によって得られた文字列をTV1に送信する。
 ステップS154において、検索部223は、音声認識によって得られた文字列全体に基づいてWebコンテンツの検索を行い、ステップS155において検索結果をTV1に送信する。
 ステップS153において連携サーバ2から送信された文字列は、ステップS102においてTV1の文字列取得部129により受信される。また、ステップS155において連携サーバ2から送信された検索結果はステップS103においてTV1のWebコンテンツ検索部130により受信される。
 ステップS104において、文字列取得部129は、連携サーバ2から送信されてきた文字列を番組検索部127に出力する。
 ステップS105において、表示制御部132は、Webコンテンツ検索部130から供給された検索結果に基づいて、Webコンテンツを表すカード画像が並ぶ検索結果画面をディスプレイ103に表示させる。
 一方、ステップS121において、番組検索部127は、文字列取得部129から供給された文字列を受信し、ステップS122において構文解析部131に出力する。
 ステップS141において、構文解析部131は、番組検索部127から供給された文字列を受信し、ステップS142において構文解析を行う。構文解析部131は、構文解析の結果に基づいて、ユーザが、「録画した」の言葉に続けて特定の属性の言葉を発しているか、または、特定の属性の言葉に続けて「を予約」等の言葉を発しているかを検出する。
 ステップS143において、構文解析部131は、構文解析の結果として取得された分解文字列を、各分解文字列の属性の情報とともに番組検索部127に出力する。ここで送信される構文解析結果には、「録画した」の言葉に続けて特定の属性の言葉を発していることが検出された場合には録画リスト表示コマンドが含まれる。また、特定の属性の言葉に続けて「を予約」等の言葉を発していることが検出された場合には録画予約設定コマンドが含まれる。
 ステップS123において、番組検索部127は、構文解析部131から供給された情報を受信する。
 受信した情報に録画リスト表示コマンドまたは録画予約設定コマンドが含まれていない場合、ステップS124において、番組検索部127は、放送中/放送予定の番組と録画済み番組を対象とした検索を分解文字列に基づいて行う。
 ステップS125において、番組検索部127は、検索結果の番組に関する情報を、各番組が選択されたときに起動するアプリケーションを特定する情報とともに表示制御部132に出力する。
 一方、受信した情報に録画リスト表示コマンドまたは録画予約設定コマンドが含まれる場合、ステップS126において、番組検索部127は、番組の検索範囲をコマンドの種類に応じて設定する。構文解析部131から供給されたコマンドが録画リスト表示コマンドである場合、録画済み番組が検索範囲として設定され、録画予約設定コマンドである場合、放送中/放送予定の番組が検索範囲として設定される。
 ステップS127において、番組検索部127は、設定した検索範囲の番組を対象として、番組の検索を分解文字列に基づいて行う。
 ステップS128において、番組検索部127は、検索結果の番組に関する情報を、各番組が選択されたときに起動するアプリケーションを特定する情報とともに表示制御部132に出力する。
 ステップS125において出力された検索結果はステップS106において表示制御部132により受信され、ステップS128において出力された検索結果はステップS107において表示制御部132により受信される。
 ステップS108において、表示制御部132は、検索された番組のカード画像を検索結果画面に追加して表示させる。例えば、録画リスト表示コマンドが構文解析部131から出力された場合には、録画済み番組の行が番組領域22に追加して表示され、録画予約設定コマンドが構文解析部131から出力された場合には、放送中/放送予定の番組の行が番組領域22に追加して表示される。その後の画面表示の切り替えは、図13を参照して説明したようにして行われる。
 以上のように、録画済み番組を視聴しようとして音声による検索を行った場合、録画済み番組だけが検索結果として表示されるため、ユーザは、視聴しようとする番組を容易に選択することができる。
 また、放送中/放送予定の番組の録画予約を設定しようとして音声による検索を行った場合、放送中/放送予定の番組だけが検索結果として表示されるため、ユーザは、録画したい番組を容易に選択することができる。録画したい番組を選択した場合には、詳細画面などが表示されずに録画予約が直接設定されるため、ユーザは、番組の録画予約を容易に設定することができる。
<4-3.他の表示例>
 録画予約を設定しようとして選択した番組と放送時間帯が重複する他の番組に録画予約が既に設定されている場合、図15に示すように、そのことを通知するダイアログボックス301が検索結果画面上に表示される。
 図15に示すダイアログボックス301には、選択した番組の録画予約を設定しないことを選択するときに操作するボタンと、選択した番組の録画予約を設定するときに操作するボタンが表示される。
 このようなダイアログボックスが表示されることにより、番組の詳細画面や予約内容の確認が表示されない場合においても、ユーザは、放送時間が重複する他の番組の録画予約を既に設定していることを検索結果画面上で確認することができる。
 図16は、検索結果画面の他の表示例を示す図である。
 図16の例においては、放送中/放送予定の番組の行の右端に、検索結果の番組を表すカード画像と並べて、予約リストを表示させるときに選択されるカード画像311が表示されている。カード画像311が選択された場合、ディスプレイ103には予約リストが表示される。
 予約リストは、録画予約の設定済みの番組のリストである。予約リストから、番組の録画予約を修正したり、キャンセルしたりすることが可能とされる。
 番組のカード画像を選択するだけで録画予約の設定が完了するため、ユーザが間違えて録画予約を設定してしまうことが多くなる可能性がある。予約リスト表示用のカード画像を表示して予約リストへの導線を検索結果画面に確保しておくことにより、ユーザは、録画予約の設定を容易に修正することができる。
 図17は、画面表示の流れの例を示す図である。
 図17に示す検索結果画面#21は図16の画面と同じ画面である。カード画像311が選択された場合、矢印A21の先に示すように、予約リストが検索結果画面#21に代えて表示される。検索結果画面#21に重ねて予約リストが表示されるようにしてもよい。
 録画済み番組だけが検索結果として表示されている場合、録画済みリストへの導線が検索結果画面#21に確保される。録画済みリストは、録画済み番組のリストである。録画済みリストは例えば録画番組記録部122に記録されている情報に基づいて表示される。
 この場合、録画済み番組の行の右端に、検索結果の番組を表すカード画像と並べて、録画済みリストを表示させるときに選択されるカード画像が表示される。録画済みリスト表示用のカード画像が選択された場合、図17の矢印A22の先に示すように、録画済みリストが検索結果画面#21に代えて表示される。
 このように、予約リストや録画済みリストなどの他の画面への導線を検索結果画面に用意するようにしてもよい。
<<5.第3の検索例>>
 ユーザが発した言葉から、ユーザが録画済み番組を視聴しようとしているのか、放送中/放送予定の番組の録画予約を設定しようとしているのかが特定されるものとしたが、さらに、ユーザが意図している番組が特定されるようにしてもよい。この場合、番組の特定に用いられる情報が連携サーバ2において管理され、ユーザが意図している番組の特定が連携サーバ2により行われる。
 例えば、録画済みのある番組について、ユーザが視聴しようとしていることが特定された場合、連携サーバ2からTV1に対して、特定された番組の再生を開始することを指示するコマンドが送信される。TV1においては、検索結果画面を表示することなく、連携サーバ2により特定された録画済み番組の再生が開始される。
 また、放送中/放送予定のある番組について、ユーザが録画予約を設定しようとしていることが特定された場合、連携サーバ2からTV1に対して、特定された番組の録画予約を設定することを指示するコマンドが送信される。TV1においては、検索結果画面を表示することなく、連携サーバ2により特定された番組の録画予約が設定される。
<5-1.画面遷移の例>
 図18は、画面表示の流れの他の例を示す図である。
 図18の左端に示す画面#31は視聴中の番組の画面である。例えばこの状態でユーザがリモートコントローラ4のマイクボタンを押した場合、矢印A31の先に示すように、TV1は、ユーザによる音声入力を待つ状態になる。ディスプレイ103の表示は、音声待ち受け画面である画面#32に切り替わる。
 リモートコントローラ4から送信されてきた音声データは連携サーバ2に送信され、ユーザの発話の内容を表す文字列が取得される。連携サーバ2においては、取得された文字列に基づいて、ユーザが意図している番組の特定と、その番組に対する処理の種類の特定とが行われる。
 番組の特定は、例えば、ユーザの発話の内容を表す文字列中に含まれる番組名を検出することによって行われる。連携サーバ2には、各種の番組の番組名が管理されている。
 また、番組に対する処理の種類の特定は、ユーザが、特定の属性の言葉に続けて「を予約」等の言葉を発していることを検出することにより、または、「録画した」の言葉に続けて特定の属性の言葉を発していることを検出することにより行われる。連携サーバ2においては、適宜、構文解析が行われる。
 ユーザが意図している番組が特定できないものの、ある番組に対する処理の種類が特定された場合、上述した録画リスト表示コマンド、または録画予約設定コマンドが、連携サーバ2からTV1に対して送信される。
 この場合の画面表示の切り替えは、矢印A32の先に示す、破線L12で囲む流れで行われる。図18の破線L12で囲んで示す画面表示は、図13の破線L12で囲んで示す画面表示と同様である。
 すなわち、特定の属性の言葉に続けて「を予約」等の言葉をユーザが発している場合、検索結果画面には、分解文字列に基づいて検索された放送中/放送予定の番組が表示される。検索結果の放送中/放送予定の番組の中から所定の番組が選択された場合、矢印A12の先に示すように、番組詳細画面を表示することなく、録画予約が設定される。
 また、「録画した」の言葉に続けて特定の属性の言葉をユーザが発している場合、検索結果画面には、分解文字列に基づいて検索された録画済み番組が表示される。検索結果の録画済み番組の中から所定の番組が選択された場合、矢印A14の先に示すように、録画済み番組の再生が開始される。
 一方、ユーザが意図している番組と、その番組に対する処理の種類として録画予約を設定することが特定された場合、矢印A33の先に示すように、ディスプレイ103の表示は、予約内容確認画面#33に切り替わる。
 予約内容確認画面#33は、ユーザの発話の内容から特定された番組の録画予約の内容を提示する画面である。予約内容確認画面#33には、予約内容の他に、予約を確定するときに操作される確定ボタンなどが表示される。
 確定ボタンが操作された場合、矢印A34の先に示すように、番組の録画予約が完了し、その内容を表す情報が番組情報記録部125に記録される。その後、ディスプレイ103の表示は例えば画面#31に戻る。ユーザが意図している番組と、その番組に対する処理の種類として録画予約を設定することが特定された場合、予約内容確認画面#33が表示されずに、録画予約の設定が行われるようにしてもよい。
 また、ユーザが意図している番組と、その番組に対する処理の種類として録画済み番組を視聴することが特定された場合、矢印A35の先に示すように、ディスプレイ103の表示は番組再生画面#6に切り替わる。録画済み番組のデータが録画番組記録部122から読み出され、再生制御部123により再生される。
 このように、ユーザが意図している番組と、その番組に対する処理の種類が特定された場合、ディスプレイ103の表示は破線L21で囲むようにして切り替えられる。
 これにより、ユーザは、会話と同様の言葉を用いて、検索結果画面を操作することなく、録画済み番組の再生を直接開始させたり、番組の録画予約を直接設定したりすることができる。
<5-2.情報処理システムの動作の例>
 ここで、図19のシーケンス図を参照して、以上のような画面表示を実現するTV1と連携サーバ2の動作について説明する。
 図19の処理も、リモートコントローラ4から送信された音声データをTV1が受信したときに開始される。
 ステップS211において、TV1の文字列取得部129は、リモートコントローラ4から送信され、音声データ受信部128により受信された音声データを連携サーバ2に送信する。
 ステップS231において、連携サーバ2の音声データ取得部221は、TV1から送信されてきた音声データを受信する。
 ステップS232において、音声認識部222は、音声データに基づいて音声認識を行い、ユーザの発話の内容を表す文字列を生成する。また、音声認識部222は、適宜、生成した文字列の構文解析を行う。音声認識部222は、ユーザの発話の内容を表す文字列に基づいて、番組に対する処理の種類を特定する。
 ステップS233において、検索部223は、構文解析によって得られた番組名を表す文字列を用いるなどして、ユーザが意図している番組を特定する。ここでは、ユーザが意図している番組が特定されたものとして説明する。番組が特定できなかった場合、図14を参照して説明した処理と同様の処理が行われる。
 ユーザが意図していた番組として放送中/放送予定の番組が特定されるとともに、その番組に対する処理の種類として録画予約を設定することが特定された場合、ステップS234において、検索部223は、番組情報と録画予約設定コマンドをTV1に送信する。番組情報には、ユーザが意図していた番組の識別情報が含まれる。
 ステップS201において、TV1の録画予約管理部126は、連携サーバ2から送信されてきた情報を受信する。連携サーバ2から送信されてきた情報に基づいて、表示制御部132により予約内容確認画面が表示される。図7の各部は、図7において矢印で示す経路以外の図示せぬ経路によっても接続される。
 番組の録画予約を確定することが選択された場合、ステップS202において、録画予約管理部126は、識別情報により識別される番組の録画予約を設定する。
 一方、ユーザが意図していた番組として録画済み番組が特定されるとともに、その番組に対する処理の種類として視聴しようとしていることが特定された場合、ステップS235において、検索部223は、番組情報と再生コマンドをTV1に送信する。
 ステップS203において、TV1の録画予約管理部126は、連携サーバ2から送信されてきた情報を受信し、ステップS204において、連携サーバ2により特定された番組が録画済みであるかを番組検索部127に問い合わせる。録画予約管理部126から番組検索部127に対する問い合わせには、番組の識別情報が含まれる。
 ステップS221において、番組検索部127は、録画予約管理部126からの問い合わせを受信する。
 ステップS222において、番組検索部127は、録画番組記録部122に記録されている録画済み番組を対象として、連携サーバ2により特定された番組の検索を行い、ステップS223において問い合わせ結果を録画予約管理部126に出力する。ここでは、連携サーバ2により特定された番組、すなわち、ユーザが意図していた番組が録画済みであるものとする。
 ステップS205において、録画予約管理部126は、番組検索部127から供給された問い合わせ結果を受信する。
 ステップS206において、録画予約管理部126は、連携サーバ2により特定された番組の再生を再生制御部123に開始させ、処理を終了させる。
 以上の処理により、ユーザは、検索結果画面を操作することなく、録画済み番組の再生を直接開始させたり、番組の録画予約を直接設定したりすることができる。
 以上においては、ユーザが意図している番組の特定と、番組に対する処理の種類の特定とが連携サーバ2により行われるものとしたが、TV1により行われるようにしてもよい。
 また、音声によってTV1に行わせることができる処理が、録画予約の設定と録画済み番組の再生であるものとしたが、視聴予約の設定、録画済み番組のダビングなどの、他の種類の処理を発話によって行わせることができるようにしてもよい。また、Webコンテンツの再生、購入などの他の種類の処理を、音声によって行わせることができるようにしてもよい。
<<6.変形例>>
 以上においては、情報処理装置としてのTV1と、連携サーバ2により情報処理システムが構成されるものとしたが、放送波を受信可能な他の装置と連携サーバ2により情報処理システムが構成されるようにしてもよい。
 例えば、コンテンツを表示するディスプレイを有さないセットトップボックス、ハードディスクレコーダーなどの録画機器、タブレット端末などの携帯端末をTV1に代えて用いて、情報処理システムが構成されるようにすることが可能である。
 また、上述したTV1の機能のうちの少なくとも一部を、TV1の外部の装置に搭載するようにしてもよい。例えば、図7に示す機能のうちの構文解析部131の機能を外部のサーバに持たせ、TV1が、その外部のサーバと連携することによって上述した各処理が行われるようにすることが可能である。また、記録部109や録画機器を外部のサーバにもたせるようにすることも可能である。さらに、放送波によりコンテンツが提供されずにインターネット経由で外部のサーバよりコンテンツが提供されるようになってもよい。
 また、TV1と通信が可能なスマートフォンなどの携帯端末に図7に示す機能のうちの少なくとも一部を持たせ、TV1と携帯端末により、上述した各処理が行われるようにしてもよい。
 また、ユーザが発話した内容を表す文字列を処理する情報処理システムとして説明したが、ユーザが発話した内容に限らず、ユーザがキーボードやタッチ操作などにより入力した文字列を処理する情報処理システムとしてもよい。
 本明細書において、システムとは、複数の構成要素(装置、モジュール(部品)等)の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、1つの筐体の中に複数のモジュールが収納されている1つの装置は、いずれも、システムである。
 上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、汎用のパーソナルコンピュータなどにインストールされる。
 インストールされるプログラムは、光ディスク(CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)等)や半導体メモリなどよりなる図8に示されるリムーバブルメディア211に記録して提供される。また、ローカルエリアネットワーク、インターネット、デジタル放送といった、有線または無線の伝送媒体を介して提供されるようにしてもよい。プログラムは、ROM202や記録部208に、あらかじめインストールしておくことができる。
 なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
 本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
 例えば、本技術は、1つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
 また、上述のフローチャートで説明した各ステップは、1つの装置で実行する他、複数の装置で分担して実行することができる。
 さらに、1つのステップに複数の処理が含まれる場合には、その1つのステップに含まれる複数の処理は、1つの装置で実行する他、複数の装置で分担して実行することができる。
<構成の組み合わせ例>
 本技術は、以下のような構成をとることもできる。
(1)
 ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第1の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果を取得し、前記第1の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果を取得する番組検索部と、
 前記第1の検索結果の表示画面または前記第2の検索結果の表示画面を表示させる表示制御部と、
 前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する設定部と
 を備える情報処理装置。
(2)
 ユーザの発話の内容を表す前記文字列の構文解析を行う構文解析部をさらに備え、
 前記番組検索部は、前記構文解析の結果である分解文字列に基づいて番組の検索を行うことによって、前記第1の検索結果または前記第2の検索結果を取得する
 前記(1)に記載の情報処理装置。
(3)
 ネットワークを介して提供されるコンテンツの、前記文字列に基づく検索結果を取得するコンテンツ検索部をさらに備え、
 前記表示制御部は、前記コンテンツの検索結果に追加して、前記第1の検索結果または前記第2の検索結果を表示させる
 前記(2)に記載の情報処理装置。
(4)
 前記コンテンツ検索部は、前記コンテンツを提供するサーバにおいて前記文字列に基づいて行われた前記コンテンツの検索の結果を取得する
 前記(3)に記載の情報処理装置。
(5)
 前記番組検索部は、前記文字列に、前記第1の文字列が含まれずに録画済みの番組を再生することを表す第2の文字列が含まれる場合、録画済みの番組を対象とした検索を前記文字列に基づいて行い、
 前記表示制御部は、録画済みの番組の検索結果を表示させる
 前記(1)乃至(4)のうちのいずれかに記載の情報処理装置。
(6)
 前記表示制御部は、前記第2の検索結果の番組を表す画像と並べて、録画予約のリストを表示するときに操作される画像を表示させる
 前記(1)乃至(5)のうちのいずれかに記載の情報処理装置。
(7)
 前記発話の音声データをサーバに送信し、前記サーバから送信されてきた前記文字列を取得する取得部をさらに備える
 前記(1)乃至(6)のうちのいずれかに記載の情報処理装置。
(8)
 ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果を取得し、
 前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
 ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果を取得し、
 前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
 ステップを含む情報処理方法。
(9)
 ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果を取得し、
 前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
 ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果を取得し、
 前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
 ステップを含む処理をコンピュータに実行させるプログラム。
(10)
 ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第1の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行う検索部と、
 前記設定対象となる番組が特定された場合、特定された番組の第1の識別情報と録画予約を設定することを指示する第1のコマンドとを情報処理装置に送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を前記情報処理装置に送信する通信部と
 を含むサーバと、
 前記発話の音声データを前記サーバに送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
 前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
 前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
 前記第1の識別情報と前記第1のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第1の識別情報により識別される番組の録画予約を設定する設定部と
 を含む前記情報処理装置と
 を備える情報処理システム。
(11)
 前記サーバの前記検索部は、前記文字列に、前記第1の文字列が含まれずに録画済みの番組を再生することを表す第2の文字列が含まれる場合、再生対象となる番組の特定を行い、
 前記サーバの前記通信部は、前記再生対象となる番組が特定された場合、特定された番組の第2の識別情報と再生開始を指示する第2のコマンドとを前記情報処理装置に送信し、
 前記情報処理装置は、
 前記第2の識別情報と前記第2のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第2の識別情報により識別される録画済みの番組の再生を開始する再生制御部をさらに含む
 前記(10)に記載の情報処理システム。
(12)
 ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行い、前記設定対象となる番組が特定された場合、特定された番組の識別情報と録画予約を設定することを指示するコマンドとを送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を送信するサーバに対して、前記発話の音声データを送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
 前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
 前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
 前記識別情報と前記コマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記識別情報により識別される番組の録画予約を設定する設定部と
 を備える情報処理装置。
 1 テレビジョン受像機, 2 連携サーバ, 121 録画制御部, 122 録画番組記録部, 123 再生制御部, 124 放送波受信制御部, 125 番組情報記録部, 126 録画予約管理部, 127 番組検索部, 128 音声データ受信部, 129 文字列取得部, 130 Webコンテンツ検索部, 131 構文解析部, 132 表示制御部, 221 音声データ取得部, 222 音声認識部, 223 検索部

Claims (12)

  1.  ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第1の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果を取得し、前記第1の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果を取得する番組検索部と、
     前記第1の検索結果の表示画面または前記第2の検索結果の表示画面を表示させる表示制御部と、
     前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する設定部と
     を備える情報処理装置。
  2.  ユーザの発話の内容を表す前記文字列の構文解析を行う構文解析部をさらに備え、
     前記番組検索部は、前記構文解析の結果である分解文字列に基づいて番組の検索を行うことによって、前記第1の検索結果または前記第2の検索結果を取得する
     請求項1に記載の情報処理装置。
  3.  ネットワークを介して提供されるコンテンツの、前記文字列に基づく検索結果を取得するコンテンツ検索部をさらに備え、
     前記表示制御部は、前記コンテンツの検索結果に追加して、前記第1の検索結果または前記第2の検索結果を表示させる
     請求項2に記載の情報処理装置。
  4.  前記コンテンツ検索部は、前記コンテンツを提供するサーバにおいて前記文字列に基づいて行われた前記コンテンツの検索の結果を取得する
     請求項3に記載の情報処理装置。
  5.  前記番組検索部は、前記文字列に、前記第1の文字列が含まれずに録画済みの番組を再生することを表す第2の文字列が含まれる場合、録画済みの番組を対象とした検索を前記文字列に基づいて行い、
     前記表示制御部は、録画済みの番組の検索結果を表示させる
     請求項1に記載の情報処理装置。
  6.  前記表示制御部は、前記第2の検索結果の番組を表す画像と並べて、録画予約のリストを表示するときに操作される画像を表示させる
     請求項1に記載の情報処理装置。
  7.  前記発話の音声データをサーバに送信し、前記サーバから送信されてきた前記文字列を取得する取得部をさらに備える
     請求項1に記載の情報処理装置。
  8.  ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果を取得し、
     前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
     ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果を取得し、
     前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
     ステップを含む情報処理方法。
  9.  ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれない場合、録画済みの番組と現在以降に提供される番組とを対象とした検索を前記文字列に基づいて行うことによって第1の検索結果を取得し、
     前記第1の検索結果の表示画面から、録画予約を設定する番組として現在以降に提供される所定の番組が選択された場合、前記所定の番組に関する情報を含む詳細画面を前記第1の検索結果の表示画面に代えて表示した後に、前記所定の番組の録画予約を設定し、
     ユーザの発話の内容を表す前記文字列に、前記所定の文字列が含まれる場合、現在以降に提供される番組を対象とした検索を前記文字列に基づいて行うことによって第2の検索結果を取得し、
     前記第2の検索結果の表示画面から、録画予約を設定する番組が選択された場合、前記詳細画面を表示せずに、選択された番組の録画予約を設定する
     ステップを含む処理をコンピュータに実行させるプログラム。
  10.  ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す第1の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行う検索部と、
     前記設定対象となる番組が特定された場合、特定された番組の第1の識別情報と録画予約を設定することを指示する第1のコマンドとを情報処理装置に送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を前記情報処理装置に送信する通信部と
     を含むサーバと、
     前記発話の音声データを前記サーバに送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
     前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
     前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
     前記第1の識別情報と前記第1のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第1の識別情報により識別される番組の録画予約を設定する設定部と
     を含む前記情報処理装置と
     を備える情報処理システム。
  11.  前記サーバの前記検索部は、前記文字列に、前記第1の文字列が含まれずに録画済みの番組を再生することを表す第2の文字列が含まれる場合、再生対象となる番組の特定を行い、
     前記サーバの前記通信部は、前記再生対象となる番組が特定された場合、特定された番組の第2の識別情報と再生開始を指示する第2のコマンドとを前記情報処理装置に送信し、
     前記情報処理装置は、
     前記第2の識別情報と前記第2のコマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記第2の識別情報により識別される録画済みの番組の再生を開始する再生制御部をさらに含む
     請求項10に記載の情報処理システム。
  12.  ユーザの発話の内容を表す文字列に、現在以降に提供される番組の録画予約を設定することを表す所定の文字列が含まれる場合、録画予約の設定対象となる番組の特定を行い、前記設定対象となる番組が特定された場合、特定された番組の識別情報と録画予約を設定することを指示するコマンドとを送信し、前記設定対象となる番組が特定されなかった場合、前記文字列に基づくコンテンツの検索結果を送信するサーバに対して、前記発話の音声データを送信するとともに、前記サーバから送信されてきた情報を受信する通信部と、
     前記サーバから送信されてきた前記文字列に基づいて番組の検索を行う番組検索部と、
     前記コンテンツの検索結果が前記サーバから送信されてきた場合、前記コンテンツの検索結果と前記番組の検索結果を含む表示画面を表示させる表示制御部と、
     前記識別情報と前記コマンドが前記サーバから送信されてきた場合、前記表示画面を表示せずに、前記識別情報により識別される番組の録画予約を設定する設定部と
     を備える情報処理装置。
PCT/JP2017/032750 2016-09-26 2017-09-12 情報処理装置、情報処理方法、プログラム、および情報処理システム WO2018056105A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201780057700.6A CN109792502B (zh) 2016-09-26 2017-09-12 信息处理设备、信息处理方法、存储介质和信息处理系统
JP2018540977A JP6957485B2 (ja) 2016-09-26 2017-09-12 情報処理装置、情報処理方法、プログラム、および情報処理システム
EP17852882.4A EP3518530B1 (en) 2016-09-26 2017-09-12 Information processing apparatus, information processing method, program for scheduling the recording of a broadcast program
US16/329,004 US10911831B2 (en) 2016-09-26 2017-09-12 Information processing apparatus, information processing method, program, and information processing system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016186973 2016-09-26
JP2016-186973 2016-09-26

Publications (1)

Publication Number Publication Date
WO2018056105A1 true WO2018056105A1 (ja) 2018-03-29

Family

ID=61690959

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/032750 WO2018056105A1 (ja) 2016-09-26 2017-09-12 情報処理装置、情報処理方法、プログラム、および情報処理システム

Country Status (5)

Country Link
US (1) US10911831B2 (ja)
EP (1) EP3518530B1 (ja)
JP (3) JP6957485B2 (ja)
CN (1) CN109792502B (ja)
WO (1) WO2018056105A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109922376A (zh) * 2019-03-07 2019-06-21 深圳创维-Rgb电子有限公司 一种模式设置方法、装置、电子设备及存储介质
JP2020046546A (ja) * 2018-09-19 2020-03-26 Kddi株式会社 情報処理システム及び情報処理方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2622751A (en) * 2021-06-18 2024-03-27 Shenzhen Tcl New Tech Co Ltd Data processing method and apparatus, display terminal, and medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001094912A (ja) * 1999-09-27 2001-04-06 Nec Corp 録画再生処理方法、装置及び録画再生処理システム
JP2007140194A (ja) * 2005-11-18 2007-06-07 Mitsubishi Electric Corp 番組検索装置および形態素辞書管理サーバ
JP2011118775A (ja) * 2009-12-04 2011-06-16 Sony Corp 検索装置、検索方法、及び、プログラム
JP2012129758A (ja) * 2010-12-15 2012-07-05 Hitachi Consumer Electronics Co Ltd 映像入出力機器および方法
JP2016062560A (ja) * 2014-09-22 2016-04-25 株式会社東芝 電子機器及びその制御方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6643620B1 (en) * 1999-03-15 2003-11-04 Matsushita Electric Industrial Co., Ltd. Voice activated controller for recording and retrieving audio/video programs
US6907397B2 (en) * 2002-09-16 2005-06-14 Matsushita Electric Industrial Co., Ltd. System and method of media file access and retrieval using speech recognition
US20070162502A1 (en) * 2005-12-29 2007-07-12 United Video Properties, Inc. Media library in an interactive media guidance application
KR101197219B1 (ko) * 2007-04-17 2012-11-02 삼성전자주식회사 개인 일정 및 방송 프로그램을 관리하기 위한 장치 및 방법
US8358749B2 (en) * 2009-11-21 2013-01-22 At&T Intellectual Property I, L.P. System and method to search a media content database based on voice input data
US9547647B2 (en) * 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
CN104871240A (zh) * 2012-12-28 2015-08-26 索尼公司 信息处理设备、信息处理方法、以及程序
JP6223744B2 (ja) * 2013-08-19 2017-11-01 株式会社東芝 方法、電子機器およびプログラム
JP5902359B2 (ja) * 2013-09-25 2016-04-13 株式会社東芝 方法、電子機器およびプログラム
KR20150137499A (ko) * 2014-05-29 2015-12-09 엘지전자 주식회사 영상 표시 기기 및 그의 동작 방법
JP2016177689A (ja) * 2015-03-20 2016-10-06 株式会社東芝 メモリシステム
US9392324B1 (en) * 2015-03-30 2016-07-12 Rovi Guides, Inc. Systems and methods for identifying and storing a portion of a media asset

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001094912A (ja) * 1999-09-27 2001-04-06 Nec Corp 録画再生処理方法、装置及び録画再生処理システム
JP2007140194A (ja) * 2005-11-18 2007-06-07 Mitsubishi Electric Corp 番組検索装置および形態素辞書管理サーバ
JP2011118775A (ja) * 2009-12-04 2011-06-16 Sony Corp 検索装置、検索方法、及び、プログラム
JP2012129758A (ja) * 2010-12-15 2012-07-05 Hitachi Consumer Electronics Co Ltd 映像入出力機器および方法
JP2016062560A (ja) * 2014-09-22 2016-04-25 株式会社東芝 電子機器及びその制御方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3518530A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020046546A (ja) * 2018-09-19 2020-03-26 Kddi株式会社 情報処理システム及び情報処理方法
CN109922376A (zh) * 2019-03-07 2019-06-21 深圳创维-Rgb电子有限公司 一种模式设置方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
EP3518530A4 (en) 2019-10-16
US10911831B2 (en) 2021-02-02
JP6957485B2 (ja) 2021-11-02
JP2022003825A (ja) 2022-01-11
US20190208280A1 (en) 2019-07-04
CN109792502A (zh) 2019-05-21
JPWO2018056105A1 (ja) 2019-07-04
JP7280328B2 (ja) 2023-05-23
EP3518530A1 (en) 2019-07-31
CN109792502B (zh) 2021-11-19
JP2023104954A (ja) 2023-07-28
EP3518530B1 (en) 2021-12-15

Similar Documents

Publication Publication Date Title
JP7280328B2 (ja) 情報処理装置、情報処理方法、プログラム
EP3579118B1 (en) Clarifying audible verbal information in video content
US20220286750A1 (en) Reminders of media content referenced in other media content
US11792456B2 (en) Systems and methods for managing available bandwidth in a household
US20140006022A1 (en) Display apparatus, method for controlling display apparatus, and interactive system
CA3187269A1 (en) Systems and methods for performing asr in the presence of heterographs
US8543912B2 (en) Methods, systems, and computer products for implementing content conversion and presentation services
JP5242105B2 (ja) 情報処理装置および情報表示方法
TWI587253B (zh) 提供口述影像可用性通知的方法與設備
JP5121342B2 (ja) 情報処理装置および情報表示方法
US20130290999A1 (en) Information processor, broadcast receiving device, and information processing method
JP2009077166A (ja) 情報処理装置および情報表示方法
TWI384878B (zh) 電視節目附加資訊顯示系統與應用於其上之顯示方法
KR20090074643A (ko) 전자책 서비스 제공 방법
JP2013059038A (ja) 情報処理装置および情報表示方法
JP5575195B2 (ja) 情報処理装置および情報表示方法
JP2013176089A (ja) 情報処理装置および情報表示方法
JP2022127309A (ja) 電子機器、システム、およびプログラム
KR20080093317A (ko) 데이터 전송 방법 및 시스템
JP2006215903A (ja) 画像表示装置、コンテンツ検索方法およびコンテンツ検索プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17852882

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018540977

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2017852882

Country of ref document: EP