WO2018034077A1 - 情報処理装置、情報処理方法、及びプログラム - Google Patents

情報処理装置、情報処理方法、及びプログラム Download PDF

Info

Publication number
WO2018034077A1
WO2018034077A1 PCT/JP2017/024782 JP2017024782W WO2018034077A1 WO 2018034077 A1 WO2018034077 A1 WO 2018034077A1 JP 2017024782 W JP2017024782 W JP 2017024782W WO 2018034077 A1 WO2018034077 A1 WO 2018034077A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
output
content
input
processing apparatus
Prior art date
Application number
PCT/JP2017/024782
Other languages
English (en)
French (fr)
Inventor
祐紀 岡村
村田 誠
允文 加藤
健吾 吉井
直樹 澁谷
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to EP17841305.0A priority Critical patent/EP3502864A4/en
Priority to US16/324,971 priority patent/US11264022B2/en
Priority to JP2018534295A priority patent/JP6904357B2/ja
Publication of WO2018034077A1 publication Critical patent/WO2018034077A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Definitions

  • the present disclosure relates to an information processing apparatus, an information processing method, and a program.
  • Patent Document 1 discloses a technique for realizing information provision such as a radio program by voice synthesis by performing voice output based on an output timing corresponding to a theme.
  • content prepared in advance or content that is dynamically acquired is continuously provided according to output timing.
  • the present disclosure proposes a new and improved information processing apparatus, information processing method, and program capable of more appropriate output in response to user input.
  • an information acquisition unit that acquires input information of a user who has a time lag from the input start to the input end And when the input information is acquired during a content period in which the first content included in the plurality of contents or the second content provided at a time later than the first content is provided. Based on the input information, when the first output information is output to the output unit and the input information is acquired in the non-content period between the first content and the second content. And an output control unit that causes the output unit to output second output information different from the first output information.
  • the processor acquires input information of a user who has a time lag from the input start to the input end And when the input information is acquired during a content period in which the first content included in the plurality of contents or the second content provided at a time later than the first content is provided,
  • the first output information is output to the output unit based on the input information, and the input information is acquired in the non-content period between the first content and the second content, the input information And outputting the second output information different from the first output information to the output unit based on the information processing method is provided.
  • a mode in which a plurality of contents are continuously provided to a computer through at least one non-content period user input information having a time lag from the input start to the input end is provided.
  • the input information is acquired in a content period in which the function to obtain and the first content included in the plurality of contents or the second content provided at a time later than the first content are provided
  • the first output information is output to the output unit based on the input information, and the input information is acquired in the non-content period between the first content and the second content.
  • a function for causing the output unit to output second output information different from the first output information based on the information. Beam is provided.
  • FIG. It is explanatory drawing for demonstrating schematic structure of the information processing system 99 which concerns on one Embodiment of this indication. It is a table
  • 4 is a conceptual diagram illustrating an example of a service provided by the information processing apparatus 1 according to the embodiment and an operation by voice input.
  • FIG. It is a block diagram showing an example of composition of information processor 1 which information processing system 99 concerning the embodiment has. It is a flowchart figure for demonstrating the flow of the output process with respect to a user input which the information processing apparatus 1 which concerns on the embodiment performs. It is the time chart figure which showed an example of the flow of the corner which concerns on the same embodiment in detail.
  • FIG. 1 is an explanatory diagram for explaining a schematic configuration of an information processing system 99 according to the present embodiment.
  • the information processing system 99 includes an information processing apparatus 1, a server 2, and a communication network 5 that a user U has. Further, as shown in FIG. 1, the information processing apparatus 1 and the server 2 are connected to each other via a communication network 5.
  • the information processing apparatus 1 provides content to the user U and accepts input from the user U.
  • the information processing apparatus 1 may provide content by voice output, and may receive user U input by voice input.
  • FIG. 1 shows an example in which the information processing device 1 is a smartphone, the information processing device 1 is not limited to a smartphone.
  • the information processing apparatus 1 may be a PC (Personal Computer), a mobile phone, a tablet PC, a music player, a neckband device, or the like.
  • the information processing apparatus 1 may recognize a voice command spoken by the user U, accept the user U input, and perform various processes based on the user input.
  • FIG. 2 is a table showing an example of voice commands recognized by the information processing apparatus 1.
  • the voice command recognized by the information processing apparatus 1 may be “Start”, “Stop”, “Next”, or the like. Further, the voice command recognized by the information processing apparatus 1 is not limited to the above example, and may include a voice command similar to the above or a voice command included in the Option shown in FIG.
  • the information processing apparatus 1 may recognize objects such as “Music”, “Running”, “Photo”, “Video”, “Song”, and “Corner” shown in FIG. .
  • the information processing apparatus 1 can recognize various operations by recognizing combinations of voice commands and objects.
  • FIG. 3 is a conceptual diagram illustrating an example of a service provided by the information processing apparatus 1 according to the present embodiment and an operation by voice input.
  • the information processing apparatus 1 according to the present embodiment provides a radio program-like service (personal radio service) that provides information for the user U by voice output.
  • personal radio service personal radio service
  • the personal radio service provided by the information processing apparatus 1 includes a plurality of corners, and audio output such as corner introduction (DJ in FIG. 3) by a radio DJ is performed between the corners.
  • Each corner includes a plurality of contents classified into the same category (weather, news, etc.) corresponding to the corner.
  • the content may be provided continuously through non-content periods when no content is provided.
  • the information processing apparatus 1 acquires user input information based on a combination of a voice command and an object as shown in the table of FIG. 2, and performs processing (for example, voice output) based on the input information. As shown, a service operation for the entire service, a corner operation for a corner, and a content operation for a content can be realized.
  • the information processing apparatus 1 may perform processing based on input information that does not include an object and includes only a voice command. For example, the information processing apparatus 1 may perform processing according to input information that does not include an object and conditions described later. With such a configuration, the user can operate with fewer voice utterances, and the user can operate without memorizing various objects.
  • a server 2 illustrated in FIG. 1 is an information processing apparatus that provides various information to the information processing apparatus 1 via a communication network 5.
  • the server 2 may provide the information processing apparatus 1 with information for realizing the personal radio service described with reference to FIG.
  • the server 2 may provide the information processing apparatus 1 with information on each corner shown in FIG. 3, information on each content, information on corner introduction by the radio DJ, and the like.
  • the communication network 5 is a wired or wireless transmission path for information transmitted from a device connected to the communication network 5.
  • the communication network 5 may include a public line network such as the Internet, a telephone line network, a satellite communication network, various LANs including the Ethernet (registered trademark), a WAN (Wide Area Network), and the like.
  • the communication network 5 may include a dedicated line network such as an IP-VPN (Internet Protocol-Virtual Private Network).
  • the outline of the information processing system 99 according to this embodiment has been described above.
  • the information processing system 99 according to the present embodiment it is possible to provide a radio program-like service that provides information for the user, for example, by voice as described with reference to FIG.
  • Various operations can be performed by voice.
  • the user since both input and output (providing services) are performed by voice, the user can receive services and perform operations in parallel (while performing work) with other work.
  • a detailed configuration of the information processing apparatus 1 for realizing such an effect will be described with reference to FIG.
  • FIG. 4 is a block diagram illustrating a configuration example of the information processing apparatus 1 included in the information processing system 99 according to the present embodiment.
  • the information processing apparatus 1 according to the present embodiment is an information processing apparatus including a control unit 10, a communication unit 20, a sensor unit 30, an output unit 40, and a storage unit 50.
  • the output unit 40 may be provided in an external device of the information processing apparatus 1.
  • the control unit 10 controls each component of the information processing apparatus 1. Further, as shown in FIG. 4, the control unit 10 according to the present embodiment also functions as a communication control unit 11, an information acquisition unit 12, a voice recognition unit 13, a condition processing unit 14, and an output control unit 15.
  • the communication control unit 11 controls communication by the communication unit 20.
  • the communication control unit 11 controls the communication unit 20 to receive information on each corner, information on each content, information on corner introduction by the radio DJ, and the like from the server 2 described with reference to FIG. Let
  • the information acquisition unit 12 acquires user input information based on sensing by the sensor unit 30.
  • the information acquisition unit 12 may acquire, as input information, an audio signal generated by sensing a user's voice by a microphone included in the sensor unit 30 described later.
  • the information acquisition unit 12 acquires input information having a time lag from the start of input to the end of input, like an audio signal.
  • the information acquisition unit 12 provides acquisition time information related to the acquisition time of the input information to the condition processing unit 14 described later.
  • the acquisition time information may include either or both of an input start time and an input end time.
  • the information acquisition unit 12 specifies the input start time and the input end time as follows, for example.
  • the time when the user starts speaking the voice related to the input information may be specified as the input start time.
  • the input start time may be estimated from the input end time based on the recognition result (for example, the length of the recognized utterance text) by the voice recognition unit 13 described later.
  • the time when a predetermined voice input start word (for example, “Hello Agent” or the like) is recognized by the voice recognition unit 13 may be specified as the input start time. According to such a configuration, it is possible to specify the voice input start time even when it is difficult to detect the voice input start due to surrounding noise or the like.
  • the time when the speech utterance related to the input information ends may be specified as the input end time. Further, the time when the utterance text is recognized may be specified as the input end time by the voice recognition unit 13 described later.
  • the voice recognition unit 13 performs a recognition process related to the voice signal acquired as input information by the information acquisition unit 12. For example, the voice recognition unit 13 converts a voice signal into a character string and acquires a speech text. Further, the voice recognition unit 13 may determine whether or not the acquired utterance text corresponds to the voice command or object described with reference to FIG. 2 or a predetermined voice input start word. Further, the voice recognition unit 13 may recognize (identify) the user based on voice characteristics.
  • the condition processing unit 14 performs a recognition process related to a condition and a determination process corresponding to the condition.
  • the conditions handled by the condition processing unit 14 are various. For example, the type of information output by the information processing apparatus 1, the acquisition timing (acquisition time) of input information, context information, the state of an application related to the provision of content, etc. May be included.
  • the type of information output by the information processing apparatus 1 includes music, corner introduction by the radio DJ described with reference to FIG.
  • the context information includes, for example, time zone information, content information, user behavior information, environmental information about the environment around the user, location information about the place where the user exists, and the like.
  • the condition processing unit 14 may perform recognition processing on a sensing result by the sensor unit 30 to be described later, and acquire the context information.
  • the condition processing unit 14 provides the output control unit 15 with the result of the determination process corresponding to the condition. Details of the determination according to the condition by the condition processing unit 14 will be described later together with an output control example according to the determination result by the output control unit 15.
  • the output control unit 15 controls the output unit 40 described later to output various output information.
  • the output control unit 15 according to the present embodiment controls the audio output related to the personal radio service as described with reference to FIG.
  • the output information according to the present embodiment is information output by voice will be described.
  • the output control unit 15 provides the user with content by causing the output unit 40 to output a plurality of contents in each corner as described with reference to FIG. 3 as output information.
  • the output control unit 15 provides a plurality of contents continuously through at least one non-content period.
  • the output control unit 15 may output speech by performing speech synthesis based on text information stored in the storage unit 50 or text information acquired from the server 2. Further, the output control unit 15 may output sound based on sound data (sound signal) stored in the storage unit 50 or sound data acquired from the server 2.
  • the output control unit 15 may cause the output unit 40 to output the output information based on the input information acquired by the information acquisition unit 12. For example, the output control unit 15 responds to the user's input by outputting output information corresponding to the voice command, object, etc. recognized by the voice recognition unit 13 based on the input information. Further, the output control unit 15 may output the output information according to the result (determination result) of the determination process according to the condition by the condition processing unit 14. With such a configuration, even if the utterance (for example, only a voice command) with less user input can be output more appropriately.
  • the output control unit 15 may control the output according to the acquisition time (acquisition timing) of the input information and the determination result based on the content provision status.
  • acquisition time acquisition timing
  • the above determination is performed by, for example, the condition processing unit 14.
  • the acquisition time used for the determination may be, for example, an input end time.
  • the output control unit 15 causes the output unit 40 to output the first output information based on the input information, and the content and the other content
  • second output information different from the first output information may be output to the output unit 40 based on the input information.
  • the output control unit 15 may specify the target content related to the user input information according to the acquisition time information, and output the output information related to the target content. According to such a configuration, the user can receive provision of information related to the target content without speaking an object for specifying the target content.
  • the first content may be specified as the content. According to such a configuration, the user can perform voice input for the content (first content) provided immediately before, without speaking the object for specifying the target content.
  • the output control unit 15 determines that the input information is acquired in the non-content period immediately after the first content.
  • the output information related to the first content may be output.
  • the output control unit 15 may output the output information related to the second content.
  • the output control unit 15 may cause the output unit 40 to output input request output information that prompts the user to input target content. According to such a configuration, for example, when it is difficult to specify the target content, it is possible to prompt the user for input for specifying the target content, and to specify the target content interactively.
  • the output control unit 15 displays the input request output information when the input information is acquired in a predetermined period from the start of provision of the second content in the content period in which the second content is provided. It may be output.
  • the provision of the second content is started when the utterance ends. It can be considered. In such a case, it may be difficult to specify the target content only with the acquisition time of the input information.
  • the target content can be specified interactively.
  • the output control unit 15 sets the non-content period immediately after the first content and immediately before the second content.
  • the input request output information may be output.
  • the output control unit 15 may specify the target content according to the input start time and the input end time. According to such a configuration, it is possible to specify the target content intended by the user with higher accuracy, and more appropriate output is possible.
  • the output control by the output control unit 15 is not limited to the above example.
  • the output control unit 15 may cause the output unit 40 to output output information corresponding to the context information, and the output control unit 15 controls the output by the output unit 40 according to the state of the application related to the provision of content. May be.
  • the communication unit 20 is a communication interface that mediates communication with other devices.
  • the communication unit 20 supports an arbitrary wireless communication protocol or wired communication protocol, and establishes a communication connection with the server 2 via, for example, the communication network 5 described with reference to FIG. Further, the communication unit 20 receives information from the server 2 or transmits information to the server 2 according to the control of the communication control unit 11.
  • the sensor unit 30 senses the situation around the information processing apparatus 1.
  • the sensor unit 30 includes a microphone that senses at least a user's voice and generates a voice signal (input information).
  • the sensor unit 30 may include various sensors such as an acceleration sensor, a gyro sensor, a geomagnetic sensor, an optical sensor, a sound sensor, a distance measuring sensor, and a force sensor.
  • the output unit 40 performs output according to the control of the output control unit 15.
  • the output unit 40 includes a sound output device capable of outputting sound, such as a speaker and headphones.
  • the output unit 40 may include a display, an LED, and the like.
  • the storage unit 50 stores programs and parameters for the functions of the information processing apparatus 1 to function.
  • the configuration of the information processing apparatus 1 according to the present embodiment has been specifically described above.
  • the configuration of the information processing apparatus 1 illustrated in FIG. 4 is an example, and the present embodiment is not limited to this.
  • the information processing apparatus 1 may further include a touch panel display, a physical button, or the like as a user interface.
  • each function of the control unit 10 according to the present embodiment may be included in another information processing apparatus (for example, the server 2 in FIG. 1) connected via the communication network 5.
  • FIG. 5 is a flowchart for explaining the flow of output processing for user input performed by the information processing apparatus 1 according to the present embodiment.
  • the information acquisition unit 12 acquires a user's voice signal as input information from the sensor unit 30 (S102). Subsequently, the voice recognition unit 13 performs voice recognition based on the acquired input information (voice signal) (S104).
  • condition processing unit 14 performs determination according to various conditions (S106). Subsequently, based on the speech recognition result in step S104 and the determination result in step S106, the output control unit 15 controls the output of the output unit 40 (S108).
  • FIG. 6 is a time chart showing in more detail an example of the corner flow described with reference to FIG.
  • the vertical axis indicates the volume of sound
  • the horizontal axis indicates time.
  • the Music shown in FIG. 6 is, for example, music that is selectively reproduced by the user, and is reproduced by, for example, a music player function. Further, CueVoice shown in FIG. 6 corresponds to the DJ shown in FIG. 3, and, for example, a corner introduction at the start of a corner and a labor word to a reporter (TTS) at the end of the corner are reproduced. Loop shown in FIG. 6 is music (BGM) uniquely set for each corner.
  • Bumper and Bumper Voice shown in FIG. 6 are a jingle sound unique to a corner and a reporter greeting, respectively.
  • TTS Text To Speech
  • FIG. 6 is a reporter reading by speech synthesis. In the following, the TTS playback is sometimes referred to as a corner main part.
  • the reproduction of the TTS ends at time T16.
  • the corner from the time T15 to the time T16 is the main part of the corner.
  • reproduction of CueVoice (at the end of the corner) is started at time T17, and is ended at time T18.
  • FIG. 7 is a table showing an example of output control when input information is acquired when the corner described with reference to FIG. 6 is provided. As shown in FIG. 7, output control is performed according to the playback state at the time when the input information is acquired and the input sound.
  • the voice command Start is input in combination with a target name XXX that specifies a corner name and information in the corner.
  • FIG. 8 is an explanatory diagram for describing a specific example of a corner according to the present embodiment.
  • FIG. 8 shows an example of a news corner according to the present embodiment.
  • a news corner for example, after a corner introduction (P1) by a DJ and a reporter greeting (P2), a plurality of contents C1 to C3 are read out by speech synthesis (P3).
  • the user can input more detailed information by performing voice input such as “tell me in detail” or “more in detail”.
  • voice input such as “tell me in detail” or “more in detail”.
  • gaps G1 to G3 in which no content is provided between the content are provided. Exists. Note that the Loop (BGM) described in FIG. 6 may be reproduced in the gaps G1 to G3.
  • FIG. 9 is an explanatory diagram for explaining an example of user input in the news corner.
  • the output control unit 15 when the user utters the utterance H1 “Tell me in detail” during the gap G1, the user intends the content C1 output (provided) immediately before as the target content. it is conceivable that. Therefore, the output control unit 15 according to the present embodiment outputs more detailed output information R1 with the content C1 as the target content in the example illustrated in FIG.
  • the output control unit 15 may output more detailed output information related to the target content after outputting the output information indicating the target content.
  • FIG. 10 is an explanatory diagram for explaining a specific example of the target content. Similar to the example of FIG. 8, there is a gap G1 in which no content is provided between the content C1 (first content) and the content C2 (second content) shown in FIG.
  • the output control unit 15 may specify the content C1 as the target content. In this case, the output control unit 15 may output more detailed output information related to the content C1 after outputting the output information indicating the target content “I will tell you the current article in detail”.
  • the output control unit 15 When the user input information is acquired in the non-content period D12 corresponding to the gap G1 in which no content is provided, the output control unit 15 identifies the content C1 that is the content immediately before the non-content period D12 as the target content. May be. In such a case, the output control unit 15 may output more detailed output information related to the content C1 after outputting the output information indicating the target content, saying “I will tell you in detail about the previous article”.
  • the output control unit 15 indicates that “the previous article?
  • the input request output information prompting the user to input the target content may be output.
  • the target content can be specified interactively.
  • the period D13 is a preliminary period of the non-content period D12, and is preferably shorter than the non-content period D12.
  • the output control unit 15 may specify the content C2 as the target content. In such a case, the output control unit 15 may output more detailed output information related to the content C2 after outputting the output information indicating the target content “I will tell you the current article in detail”.
  • FIG. 11 is an explanatory diagram for explaining another specific example of the target content.
  • the gap G1 is subdivided into three non-content periods D22, D23, and D24.
  • the output control unit 15 may specify the content C1 as the target content. In this case, the output control unit 15 may output more detailed output information related to the content C1 after outputting the output information indicating the target content “I will tell you the current article in detail”.
  • the output control unit 15 may specify the content C1 as the target content. In this case, the output control unit 15 may output more detailed output information related to the content C1 after outputting the output information indicating the target content “I will tell you the previous article in detail”.
  • the output control unit 15 determines that the previous article or the current article? Then, input request output information that prompts the user to specify the target content may be output.
  • the output control unit 15 may specify the content C2 as the target content. In this case, the output control unit 15 may output more detailed output information related to the content C2 after outputting the output information indicating the target content “I will tell you the next article in detail”.
  • the output control unit 15 may specify the content C2 as the target content. In such a case, the output control unit 15 may output more detailed output information related to the content C2 after outputting the output information indicating the target content “I will tell you the current article in detail”.
  • the output control described with reference to FIG. 11 is effective, for example, when the user knows in advance the outline and order of the contents to be provided.
  • the outline and order of contents may be displayed on a display included in the output unit 40.
  • FIG. 12 is an explanatory diagram for explaining another specific example of the target content.
  • the target content is specified according to the time at the input start time and the time at the input end time.
  • the output control unit 15 may output more detailed output information related to the content after outputting the output information indicating the target content “I will tell you the current article in detail”.
  • the output control unit 15 When the input start time is included in the content period D31 and the input end time is included in the non-content period D32 as in the input information H32, the output control unit 15 is provided at the input start time.
  • the content C1 may be specified as the target content.
  • the output control unit 15 may output more detailed output information related to the content C1 after outputting the output information indicating the target content “I will tell you the previous article in detail”.
  • the output control unit 15 determines that “is the previous article? Is it the current article?”
  • the input request output information that prompts the user to input can be output.
  • the input start time is included in the period D31 in which the content C1 is provided or the non-content period D32, and the input end time is included in the period D33 in which the content C2 is provided.
  • the output control unit 15 causes the output control unit 15 to output the input request output information that prompts the user's input for specifying the target content, “Is it the previous article or the current article?” Also good.
  • the output control unit 15 may output a voice prompting the user to speak, for example, “Please tell me if you want to hear in detail” at the beginning of the corner.
  • the output control unit 15 may provide an explanation relating to the identification of the target content, such as “Please speak while reading an article you want to hear in detail and after that for 5 seconds”.
  • the non-content period is too long, the amount of information that can be provided decreases when the corner time is determined in advance. On the other hand, if the non-content period is too short, the utterance timing is reduced. There is a risk of missing.
  • the output control unit 15 may specify the length of the non-content period according to the information associated with the user, and may control the output of the content so that the non-content period is reached.
  • the information associated with the user may be at least any one of the user's tendency, the user's state, and the user's surrounding environment.
  • the length of the non-content period may be specified by a component other than the output control unit 15, and the component may be a component included in an external device other than the information processing device 1.
  • the non-content period may be set to be long in the case of a user who tends to input a voice by a long utterance.
  • the user may be identified based on voice or the like acquired from the sensor unit 30.
  • the non-content period may be short.
  • the state of the user may be recognized based on information acquired from the sensor unit 30, and the non-content period may be set.
  • the length of the set non-content period is longer when the user is running (for example, 7 seconds), moderate when the user is walking (for example, 5 seconds), and when the user is sitting It may be set to be shorter (for example, 3 seconds).
  • the non-content period may be set longer.
  • environmental information may be recognized based on information acquired from the sensor unit 30.
  • processing for user input in the news corner performed by the information processing apparatus 1 is not limited to the above.
  • the output control unit 15 may output output information corresponding to the period from the start of provision of the provided content.
  • the output control unit 15 may output output information (more detailed information) including more information as the period from the start of provision becomes longer at the acquisition time of the input information. For example, if “Let me know more” is spoken in the second half of the content, output information that is longer (including more information) than if I told “Tell me more” in the first half of the content is output. Also good.
  • the output control unit 15 may output output information corresponding to the remaining time during which a plurality of contents scheduled to be provided can be provided. For example, as the remaining time is longer, more detailed output information (a large amount of information) may be output.
  • the remaining time may be the remaining time of use of a service (personal radio service) estimated from the user's past behavior. For example, when the user always uses the service during commuting, the remaining time may be an estimated time until the commuting end. Further, the remaining time may be, for example, the time until the end of the current corner.
  • a service personal radio service
  • new news content related to the keyword may be output.
  • the content separation may be made clearer by changing the BGM (Loop described with reference to FIG. 6) for each content.
  • the user can ask questions about so-called 5W1H information such as “when”, “where”, “who”, “what”, “why”, “how”. If the questioned content is in the second half of the content, the output of the content may jump to that point.
  • the predetermined keyword such as the person name may be registered in the bookmark.
  • bookmark is also possible outside the news corner.
  • the content that the user is currently listening to (news, restaurants, events, SNS information), the music being played, the photo immediately after taking the photo, the place where the user has stayed for a long time, etc. is identified as the bookmark target and registered in the bookmark obtain.
  • the output control unit 15 may perform output control according to the context information.
  • the context information includes, for example, time zone information, content information, user behavior information, environmental information about the environment around the user, location information about the location where the user exists, and the like.
  • the output may be controlled according to the atmosphere of the music.
  • An example of output control according to the BPM (an example of content information) of music is shown below. If BPM ⁇ 100, the information system corner is reproduced. If 100 ⁇ BPM, the entertainment system corner is reproduced.
  • the example of output control according to a user's action information (for example, whether it is running) is shown below. If the user speaks “Start” while running, recording of the user's behavior history is started. When the user utters “Start” at other times, a corner other than the user's action history recording is activated.
  • output control according to the surrounding conversation may be performed as described below. If the user speaks “Start” while talking about the weather in the surroundings, the weather corner is activated. If the user speaks “Start” while talking about the afternoon schedule, the schedule corner is activated and the afternoon schedule is read out.
  • output control according to the location information where the user exists is possible.
  • the contents of the corner may be controlled depending on whether or not the user is in a private environment (Private Space) or not (Public Space).
  • Primary Space Primary Space
  • Public Space An example of output control according to location information is shown below.
  • Location information Public Space Read only the number of new mail. Further, when the user utters “Tell me in detail”, the title or the text may be read out. Location Information: Private Space Read the title and the sender. Further, when the user utters “Tell me in detail”, the text may be read out. In such a case, all information may be read out depending on the setting of the user.
  • Schedule Corner Location Information Public Space Read only the number of appointments. Also, if the user utters “Tell me in detail”, the title and location may be read out. Location information: Private Space Read the title, location, and time. Further, when the user utters “Tell me in detail”, the text may be read out.
  • condition processing unit 14 determines that it is a private environment when it is determined that the person is at home and there are no people around him (utterance detection is negative), In other cases, it may be determined that the environment is not private.
  • the output control unit 15 may control output by the output unit 40 in accordance with the state of an application related to content provision.
  • the state of the application may include, for example, whether or not the application is operating in the background (whether it is operating in the background or in the foreground).
  • the operation when the input information is acquired while the application is operating in the foreground, the operation may be performed on the application based on the user input information, and the output information as described above may be output.
  • the input information when the input information is acquired while the application is operating in the background, the input information may be used for an operation not on the application but on another application that is operating in the foreground.
  • FIG. 13 is a block diagram illustrating an example of a hardware configuration of the information processing apparatus according to the present embodiment.
  • the information processing apparatus 900 illustrated in FIG. 20 can realize, for example, the information processing apparatus 1 and the server 2 illustrated in FIGS.
  • Information processing by the information processing apparatus 1 and the server 2 according to the present embodiment is realized by cooperation of software and hardware described below.
  • the information processing apparatus 900 includes a CPU (Central Processing Unit) 901, a ROM (Read Only Memory) 902, a RAM (Random Access Memory) 903, and a host bus 904a.
  • the information processing apparatus 900 includes a bridge 904, an external bus 904b, an interface 905, an input device 906, an output device 907, a storage device 908, a drive 909, a connection port 911, a communication device 913, and a sensor 915.
  • the information processing apparatus 900 may include a processing circuit such as a DSP or an ASIC in place of or in addition to the CPU 901.
  • the CPU 901 functions as an arithmetic processing unit and a control unit, and controls the overall operation in the information processing apparatus 900 according to various programs. Further, the CPU 901 may be a microprocessor.
  • the ROM 902 stores programs used by the CPU 901, calculation parameters, and the like.
  • the RAM 903 temporarily stores programs used in the execution of the CPU 901, parameters that change as appropriate during the execution, and the like.
  • the CPU 901 can form, for example, the control unit 10 shown in FIG.
  • the CPU 901, ROM 902, and RAM 903 are connected to each other by a host bus 904a including a CPU bus.
  • the host bus 904 a is connected to an external bus 904 b such as a PCI (Peripheral Component Interconnect / Interface) bus via a bridge 904.
  • an external bus 904 b such as a PCI (Peripheral Component Interconnect / Interface) bus
  • PCI Peripheral Component Interconnect / Interface
  • the host bus 904a, the bridge 904, and the external bus 904b do not necessarily have to be configured separately, and these functions may be mounted on one bus.
  • the input device 906 is realized by a device in which information is input by the user, such as a mouse, a keyboard, a touch panel, a button, a microphone, a switch, and a lever.
  • the input device 906 may be, for example, a remote control device using infrared rays or other radio waves, or may be an external connection device such as a mobile phone or a PDA that supports the operation of the information processing device 900.
  • the input device 906 may include, for example, an input control circuit that generates an input signal based on information input by the user using the above-described input means and outputs the input signal to the CPU 901.
  • a user of the information processing apparatus 900 can input various data and instruct a processing operation to the information processing apparatus 900 by operating the input device 906.
  • the output device 907 is formed of a device that can notify the user of the acquired information visually or audibly. Examples of such devices include CRT display devices, liquid crystal display devices, plasma display devices, EL display devices, display devices such as lamps, audio output devices such as speakers and headphones, printer devices, and the like.
  • the output device 907 outputs results obtained by various processes performed by the information processing device 900. Specifically, the display device visually displays results obtained by various processes performed by the information processing device 900 in various formats such as text, images, tables, and graphs.
  • the audio output device converts an audio signal composed of reproduced audio data, acoustic data, and the like into an analog signal and outputs it aurally.
  • the output device 907 can form, for example, the output unit 40 shown in FIG.
  • the storage device 908 is a data storage device formed as an example of a storage unit of the information processing device 900.
  • the storage apparatus 908 is realized by, for example, a magnetic storage device such as an HDD, a semiconductor storage device, an optical storage device, a magneto-optical storage device, or the like.
  • the storage device 908 may include a storage medium, a recording device that records data on the storage medium, a reading device that reads data from the storage medium, a deletion device that deletes data recorded on the storage medium, and the like.
  • the storage device 908 stores programs executed by the CPU 901, various data, various data acquired from the outside, and the like.
  • the storage device 908 can form, for example, the storage unit 50 shown in FIG.
  • the drive 909 is a storage medium reader / writer, and is built in or externally attached to the information processing apparatus 900.
  • the drive 909 reads information recorded on a removable storage medium such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, and outputs the information to the RAM 903.
  • the drive 909 can also write information to a removable storage medium.
  • connection port 911 is an interface connected to an external device, and is a connection port with an external device capable of transmitting data by USB (Universal Serial Bus), for example.
  • USB Universal Serial Bus
  • the communication device 913 is a communication interface formed by a communication device or the like for connecting to the network 920, for example.
  • the communication device 913 is, for example, a communication card for wired or wireless LAN (Local Area Network), LTE (Long Term Evolution), Bluetooth (registered trademark), or WUSB (Wireless USB).
  • the communication device 913 may be a router for optical communication, a router for ADSL (Asymmetric Digital Subscriber Line), a modem for various communication, or the like.
  • the communication device 913 can transmit and receive signals and the like according to a predetermined protocol such as TCP / IP, for example, with the Internet and other communication devices.
  • the communication device 913 can form, for example, the communication unit 20 illustrated in FIG.
  • the network 920 is a wired or wireless transmission path for information transmitted from a device connected to the network 920.
  • the network 920 may include a public line network such as the Internet, a telephone line network, and a satellite communication network, various LANs including the Ethernet (registered trademark), a wide area network (WAN), and the like.
  • the network 920 may include a dedicated line network such as an IP-VPN (Internet Protocol-Virtual Private Network).
  • IP-VPN Internet Protocol-Virtual Private Network
  • the sensor 915 is various sensors such as an acceleration sensor, a gyro sensor, a geomagnetic sensor, an optical sensor, a sound sensor, a distance measuring sensor, and a force sensor.
  • the sensor 915 acquires information on the state of the information processing apparatus 900 itself, such as the posture and movement speed of the information processing apparatus 900, and information on the surrounding environment of the information processing apparatus 900, such as brightness and noise around the information processing apparatus 900.
  • Sensor 915 may also include a GPS sensor that receives GPS signals and measures the latitude, longitude, and altitude of the device.
  • the sensor 915 can form, for example, the sensor unit 30 shown in FIG.
  • each of the above components may be realized using a general-purpose member, or may be realized by hardware specialized for the function of each component. Therefore, it is possible to change the hardware configuration to be used as appropriate according to the technical level at the time of carrying out this embodiment.
  • a computer program for realizing each function of the information processing apparatus 900 according to the present embodiment as described above can be produced and mounted on a PC or the like.
  • a computer-readable recording medium storing such a computer program can be provided.
  • the recording medium is, for example, a magnetic disk, an optical disk, a magneto-optical disk, a flash memory, or the like.
  • the above computer program may be distributed via a network, for example, without using a recording medium.
  • the input information is an audio signal.
  • the present technology is not limited to such an example, and can be applied when other input information is input.
  • the input information having a time lag from the start of input to the end of input described above may be input information by a so-called gesture operation such as a flick operation in a touch operation or a drag-and-drop operation in a mouse operation. .
  • each step in the above embodiment does not necessarily have to be processed in time series in the order described as a flowchart.
  • each step in the processing of the above embodiment may be processed in an order different from the order described as the flowchart diagram or may be processed in parallel.
  • An information acquisition unit that acquires input information of a user having a time lag from the input start to the input end in a mode in which a plurality of contents are continuously provided through at least one non-content period;
  • the input information First output information based on the input information when the first output information is output to the output unit and the input information is acquired in the non-content period between the first content and the second content.
  • An output control unit for causing the output unit to output second output information different from the first output information;
  • An information processing apparatus comprising: (2) The output control unit outputs, as the first output information or the second output information, output information related to target content according to acquisition time information of the input information acquired by the information acquisition unit to the output unit.
  • the information processing apparatus according to (1) which is output.
  • the output control unit When the input information is acquired in the non-content period immediately after the first content, the output control unit outputs the second output information related to the first content, and the second content The information according to (2) or (3), wherein when the input information is acquired in the non-content period immediately before the second content, the second output information related to the second content is output to the output unit. Processing equipment. (5) The information processing apparatus according to any one of (2) to (4), wherein the output control unit causes the output unit to output input request output information that prompts a user to input the target content. .
  • the output control unit when the input information is acquired in a predetermined period from the start of provision of the second content among the content period in which the second content is provided, The information processing apparatus according to (5), wherein the information is output to the output unit.
  • There are three or more non-content periods between the first content and the second content The output control unit, when the input information is acquired in the non-content period between the non-content period immediately after the first content and the non-content period immediately before the second content.
  • the information processing apparatus causes the output unit to output the output information relating to target content according to the input start time and the input end time.
  • the output control unit causes the output unit to output the first output information according to a period from the start of provision of the provided content.
  • the information processing apparatus according to any one of (1) to (9).
  • (11) The information processing apparatus according to (10), wherein the output control unit causes the output unit to output the first output information including more information as the period from the start of provision is longer.
  • the length of the non-content period is specified according to at least one of the user's tendency, the user's state, and the surrounding environment of the user, any one of (1) to (11) The information processing apparatus according to one item.
  • the output control unit When the input information is acquired, the output control unit outputs, as the first output information or the second output information, output information according to a remaining time during which the plurality of contents can be provided.
  • the information processing apparatus according to any one of (1) to (12), which is output to (14) The information processing apparatus according to any one of (1) to (13), wherein the output control unit causes the output unit to output output information corresponding to context information.
  • the context information includes at least one of time zone information, content information, user action information, environment information, and location information.
  • the output control unit controls output by the output unit in accordance with a state of an application related to content provision.
  • the processor obtains input information of a user having a time lag from the input start to the input end;
  • the input information First output information based on the input information when the first output information is output to the output unit and the input information is acquired in the non-content period between the first content and the second content.
  • An information processing method including: (20) On the computer, A function of acquiring user input information having a time lag between the start of input and the end of input in a mode in which a plurality of contents are continuously provided through at least one non-content period; and When the input information is acquired during a content period in which the first content included in the plurality of contents or the second content provided at a later time than the first content is provided, the input information First output information based on the input information when the first output information is output to the output unit and the input information is acquired in the non-content period between the first content and the second content. A function of causing the output unit to output second output information different from the first output information; A program to realize

Abstract

【課題】情報処理装置、情報処理方法、及びプログラムを提供する。 【解決手段】複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報を取得する情報取得部と、前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させる出力制御部と、を備える情報処理装置。

Description

情報処理装置、情報処理方法、及びプログラム
 本開示は、情報処理装置、情報処理方法、及びプログラムに関する。
 近年、音声合成技術の発展に伴い、音声による多様な情報提供が可能となりつつある。例えば、下記特許文献1には、テーマに応じた出力タイミングに基づいて音声出力を行うことで、ラジオ番組のような情報提供を音声合成により実現する技術が開示されている。特許文献1に記載の技術では、予め用意されたコンテンツや、動的に取得されるコンテンツが、出力タイミングに応じて連続的に提供される。
特開2011-43710号公報
 上記特許文献1のように、連続してコンテンツが提供される技術において、ユーザの入力を受け付けようとすると、ユーザの入力に対して適切な出力(応答)を行うことが困難になる可能性がある。例えば、コンテンツを対象とする入力が行われた場合、入力においてユーザが意図した対象コンテンツと、応答における対象コンテンツが異なってしまう可能性がある。
 そこで、本開示では、ユーザの入力に対してより適切な出力が可能な、新規かつ改良された情報処理装置、情報処理方法、及びプログラムを提案する。
 本開示によれば、複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報を取得する情報取得部と、前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させる出力制御部と、を備える情報処理装置が提供される。
 また、本開示によれば、複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報をプロセッサが取得することと、前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させることと、を含む情報処理方法が提供される。
 また、本開示によれば、コンピュータに、複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報を取得する機能と、前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させる機能と、を実現させるための、プログラムが提供される。
 以上説明したように本開示によれば、ユーザの入力に対してより適切な出力が可能である。
 なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態に係る情報処理システム99の概略構成を説明するための説明図である。 同実施形態に係る情報処理装置1が認識する音声コマンドの例を示す表である。 同実施形態に係る情報処理装置1が提供するサービスと、音声入力による操作の例を示す概念図である。 同実施形態に係る情報処理システム99が有する情報処理装置1の構成例を示すブロック図である。 同実施形態に係る情報処理装置1が行う、ユーザ入力に対する出力処理の流れを説明するためのフローチャート図である。 同実施形態に係るコーナーの流れの一例をより詳細に示したタイムチャート図である。 同実施形態に係るコーナーが提供されている際に入力情報が取得された場合の出力制御の例を示す表である。 同実施形態に係るコーナーの具体例を説明するための説明図である。 同実施形態に係るニュースコーナーにおけるユーザの入力の例を説明するための説明図である。 同実施形態に係る対象コンテンツの特定の具体例を説明するための説明図である。 同実施形態に係る対象コンテンツの特定の他の具体例を説明するための説明図である。 同実施形態に係る対象コンテンツの特定の他の具体例を説明するための説明図である。 ハードウェア構成例を示す説明図である。
 以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
 なお、説明は以下の順序で行うものとする。
 <<1.概要>>
 <<2.構成>>
 <<3.動作>>
  <3-1.処理の流れ>
  <3-2.出力制御の例>
 <<4.ハードウェア構成例>>
 <<5.むすび>>
 <<1.概要>>
 まず、図1を参照しながら、本開示の一実施形態に係る情報処理システムの概略構成を説明する。図1は、本実施形態に係る情報処理システム99の概略構成を説明するための説明図である。
 図1に示すように、本実施形態に係る情報処理システム99は、ユーザUが有する情報処理装置1、サーバ2、及び通信網5を有する。また、図1に示すように情報処理装置1とサーバ2は、通信網5を介して相互に接続される。
 本実施形態に係る情報処理装置1は、ユーザUにコンテンツを提供し、また、ユーザUの入力を受け付ける。例えば、本実施形態に係る情報処理装置1は、音声出力によりコンテンツを提供し、また、音声入力によりユーザUの入力を受け付けてもよい。なお、図1では、情報処理装置1がスマートフォンである例を示しているが、情報処理装置1はスマートフォンに限定されない。例えば、情報処理装置1は、PC(Personal Computer)、携帯電話、タブレットPC、音楽プレイヤ、ネックバンド型デバイス等であってもよい。
 例えば、情報処理装置1は、ユーザUが発話する音声コマンドを認識して、ユーザUの入力を受け付け、ユーザの入力に基づいた多様な処理を行ってもよい。図2は、情報処理装置1が認識する音声コマンドの例を示す表である。
 図2に示すように、情報処理装置1が認識する音声コマンドは、“Start”、“Stop”、“Next”等であってもよい。また、情報処理装置1が認識する音声コマンドは、上記の例に限定されず、上記に類似した音声コマンドや、図2に示すOptionに含まれる音声コマンドを含んでもよい。
 また、情報処理装置1は、音声コマンドに加え、図2に示す“Music”、“Running”、“Photo”、“Video”、“Song”、“Corner”等の目的語を認識してもよい。情報処理装置1は、音声コマンドと目的語の組み合わせを認識することで、多様な操作を認識し得る。
 図3は、本実施形態に係る情報処理装置1が提供するサービスと、音声入力による操作の例を示す概念図である。図3に示すように、本実施形態に係る情報処理装置1は、ユーザU向けの情報を提供するラジオ番組風のサービス(パーソナルラジオサービス)を音声出力により提供する。
 情報処理装置1が提供するパーソナルラジオサービスは、複数のコーナーを含み、コーナーの間には、ラジオDJによるコーナー紹介(図3のDJ)等の音声出力が行われる。また、各コーナーは、コーナーに対応した同一のカテゴリ(天気、ニュース等)に分類される複数のコンテンツを含む。コンテンツはコンテンツが提供されない非コンテンツ期間を介して連続的に提供されてもよい。
 情報処理装置1は、図2に示した表のような音声コマンドと目的語の組み合わせによるユーザの入力情報を取得し、入力情報に基づいて処理(例えば音声出力)を行うことで、図3に示すようなサービス全体を対象とするサービス操作、コーナを対象とするコーナー操作、及びコンテンツを対象とするコンテンツ操作を実現し得る。
 また、情報処理装置1は、目的語を含まず、音声コマンドのみを含む入力情報に基づいて、処理を行ってもよい。例えば、情報処理装置1は、目的語を含まない入力情報と、後述する条件に応じて、処理を行ってもよい。係る構成により、ユーザはより少ない音声発話により操作することが可能であり、また、ユーザは多様な目的語を覚えずとも、操作することが可能となり得る。
 図1に戻って情報処理システム99の説明を続ける。図1に示すサーバ2は、通信網5を介して、情報処理装置1に多様な情報を提供する情報処理装置である。例えば、サーバ2は、図3を参照して説明したパーソナルラジオサービスを実現するための情報を情報処理装置1に提供してもよい。例えば、サーバ2は、図3に示した各コーナーに関する情報や、各コンテンツの情報、ラジオDJによるコーナー紹介の情報等を情報処理装置1に提供してもよい。
 通信網5は、通信網5に接続されている装置から送信される情報の有線、または無線の伝送路である。例えば、通信網5は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ethernet(登録商標)を含む各種のLAN(Local Area Network)、WAN(Wide Area Network)などを含んでもよい。また、通信網5は、IP-VPN(Internet Protocol-Virtual Private Network)などの専用回線網を含んでもよい。
 以上、本実施形態に係る情報処理システム99の概要を説明した。本実施形態に係る情報処理システム99によれば、例えば図3を参照して説明したような音声により、ユーザ向けの情報を提供するラジオ番組風のサービスを提供することが可能であり、ユーザは、音声により多様な操作を行うことが可能となる。また、入力と出力(サービスの提供)の双方が音声により行われるため、ユーザは他の作業と並行して(作業をしながら)サービスを受け、操作を行うことが可能となる。以下、このような効果を実現するための情報処理装置1の詳細な構成について、図4を参照して説明する。
 <<2.構成>>
 図4は、本実施形態に係る情報処理システム99が有する情報処理装置1の構成例を示すブロック図である。図4に示すように、本実施形態に係る情報処理装置1は、制御部10、通信部20、センサ部30、出力部40、及び記憶部50を備える情報処理装置である。なお、出力部40は、情報処理装置1の外部装置に設けられてもよい。
 制御部10は、情報処理装置1の各構成を制御する。また、本実施形態に係る制御部10は、図4に示すように、通信制御部11、情報取得部12、音声認識部13、条件処理部14、及び出力制御部15としても機能する。
 通信制御部11は、通信部20による通信を制御する。例えば、通信制御部11は、通信部20を制御して、図1を参照して説明したサーバ2から各コーナーに関する情報や、各コンテンツの情報、ラジオDJによるコーナー紹介の情報等の情報を受信させる。
 情報取得部12は、センサ部30のセンシングに基づく、ユーザの入力情報を取得する。例えば、本実施形態に係る情報取得部12は、後述するセンサ部30に含まれるマイクロフォンがユーザの音声をセンシングして生成した音声信号を入力情報として取得してもよい。
 本実施形態に係る情報取得部12は、音声信号のように、入力開始から入力終了までの間にタイムラグを有する入力情報を取得する。また、情報取得部12は、入力情報の取得時刻に係る取得時刻情報を後述する条件処理部14に提供する。
 例えば、取得時刻情報は、入力開始の時刻と入力終了の時刻のうちいずれか、または両方を含んでもよい。情報取得部12は、入力開始の時刻と入力終了の時刻を例えば以下のように特定する。
 なお、本実施形態においては、ユーザが当該入力情報に係る音声の発話を開始した時刻が入力開始の時刻として特定されてもよい。また、後述する音声認識部13による認識結果(例えば認識された発話テキストの長さ)に基づいて、入力終了の時刻から入力開始の時刻を推定してもよい。また、所定の音声入力開始用ワード(例えば、「Hello Agent」等)が音声認識部13により認識された時刻が、入力開始の時刻として特定されてもよい。係る構成によれば、周辺の雑音等により音声入力開始の検出が困難である場合にも音声入力開始の時刻を特定可能である。
 また、本実施形態においては、当該入力情報に係る音声の発話が終了した時刻が入力終了の時刻として特定されてもよい。また、後述する音声認識部13により、発話テキストが認識された時刻が入力終了の時刻として特定されてもよい。
 音声認識部13は、情報取得部12により入力情報として取得された音声信号に係る認識処理を行う。例えば、音声認識部13は、音声信号を文字列へ変換し、発話テキストを取得する。また、音声認識部13は、取得した発話テキストが図2を参照して説明した音声コマンドや目的語、または所定の音声入力開始用ワードに対応するか否かを判定してもよい。また、音声認識部13は、音声の特徴に基づいてユーザを認識(識別)してもよい。
 条件処理部14は、条件に係る認識処理と、条件に応じた判定処理を行う。条件処理部14が扱う条件は多様であるが、例えば、情報処理装置1により出力される情報の種類、入力情報の取得タイミング(取得時刻)、コンテキスト情報、コンテンツの提供に係るアプリケーションの状態等を含んでもよい。
 例えば、情報処理装置1により出力される情報の種類には、音楽や、図3を参照して説明したラジオDJによるコーナー紹介、コーナー等が含まれる。
 また、コンテキスト情報には、例えば時間帯情報、コンテンツ情報、ユーザの行動情報、ユーザの周囲の環境に関する環境情報、ユーザが存在する場所に関する場所情報等が含まれる。条件処理部14は、例えば後述するセンサ部30によるセンシング結果に対する認識処理を行い、上記のコンテキスト情報を取得してもよい。
 条件処理部14は、条件に応じた判定処理の結果を出力制御部15に提供する。なお、条件処理部14による条件に応じた判定の詳細については、出力制御部15による判定結果に応じた出力制御例と合わせて後述する。
 出力制御部15は、後述する出力部40を制御して、様々な出力情報を出力させる。本実施形態に係る出力制御部15は、例えば図3を参照して説明したような、パーソナルラジオサービスに係る音声出力を制御する。以下では、一例として、本実施形態に係る出力情報が音声により出力される情報である例を説明する。
 例えば、出力制御部15は、図3を参照して説明したような各コーナー内の複数のコンテンツを出力情報として出力部40に出力させることで、コンテンツをユーザに提供する。例えば、図3の各コーナーが提供されるモードにおいて、出力制御部15は、複数のコンテンツを少なくとも1の非コンテンツ期間を介して連続的に提供する。
 なお、出力制御部15は、記憶部50に記憶されるテキスト情報、またはサーバ2から取得されるテキスト情報に基づいて音声合成を行って音声を出力させてもよい。また、出力制御部15は、記憶部50に記憶される音声データ(音声信号)、またはサーバ2から取得される音声データに基づいて、音声を出力させてもよい。
 また、出力制御部15は、情報取得部12が取得した入力情報に基づいて出力情報を出力部40に出力させてもよい。例えば、出力制御部15は、入力情報に基づいて音声認識部13が認識した音声コマンド、目的語等に応じた出力情報を出力させることで、ユーザの入力への応答を行う。また、出力制御部15は、条件処理部14による条件に応じた判定処理の結果(判定結果)に応じて出力情報を出力させてもよい。係る構成により、ユーザの入力が少ない発話(例えば音声コマンドのみ)であっても、より適切な出力が可能となり得る。
 例えば、出力制御部15は、入力情報の取得時刻(取得タイミング)と、コンテンツの提供状況による判定の結果に応じて、出力を制御してもよい。上記の判定は、例えば条件処理部14により行われる。また、当該判定に用いられる取得時刻は、例えば入力終了の時刻であってもよい。
 例えば、出力制御部15は、コンテンツが提供されるコンテンツ期間に入力情報が取得された場合、入力情報に基づいて、第一の出力情報を出力部40に出力させ、コンテンツと他のコンテンツとの間の非コンテンツ期間に入力情報が取得された場合、入力情報に基づいて第一の出力情報とは異なる第二の出力情報を出力部40に出力させてもよい。
 また、出力制御部15は、取得時刻情報に応じて、ユーザの入力情報に係る対象コンテンツを特定し、対象コンテンツに係る出力情報を出力させてもよい。係る構成によれば、ユーザは対象コンテンツを特定するための目的語を発話しなくても、対象コンテンツに係る情報の提供を受けることが可能である。
 例えば、第一のコンテンツと、第一のコンテンツより後の時刻に提供される第二のコンテンツとの間の非コンテンツ期間に入力情報が取得された場合に出力される第二の出力情報の対象コンテンツとして、第一のコンテンツが特定されてもよい。係る構成によれば、ユーザは対象コンテンツを特定するための目的語を発話しなくても、直前に提供を受けたコンテンツ(第一のコンテンツ)を対象とした音声入力が可能である。
 また、第一のコンテンツと、第二のコンテンツの間に複数の非コンテンツ期間が存在する際、出力制御部15は、第一のコンテンツの直後の非コンテンツ期間に入力情報が取得された場合に、当該第一のコンテンツに係る出力情報を出力させてもよい。また、出力制御部15は、第二のコンテンツの直前の非コンテンツ期間に入力情報が取得された場合、当該第二のコンテンツに係る出力情報を出力させてもよい。
 また、出力制御部15は、対象コンテンツを特定するためのユーザの入力を促す入力要求出力情報を出力部40に出力させてもよい。係る構成によれば、例えば対象コンテンツを特定することが困難である場合に、ユーザに対象コンテンツを特定するための入力を求め、対象コンテンツを対話的に特定することが可能になる。
 また、出力制御部15は、第二のコンテンツが提供されているコンテンツ期間のうち、第二のコンテンツの提供開始から所定の期間に入力情報が取得された場合に、上記の入力要求出力情報を出力させてもよい。例えば、ユーザが第一のコンテンツの提供を受け、第一のコンテンツを対象とした入力を意図して発話(入力)を開始したが、発話の終了した時点で第二のコンテンツの提供が開始されることが考えられる。係る場合、入力情報の取得時刻だけでは、対象コンテンツの特定は困難であり得るが、上記構成によれば、対象コンテンツを対話的に特定することが可能になる。
 また、例えば第一のコンテンツと第二のコンテンツの間に3以上の非コンテンツ期間が存在する際、出力制御部15は、第一のコンテンツの直後の非コンテンツ期間と、第二のコンテンツの直前の非コンテンツ期間との間の非コンテンツ期間に入力情報が取得された場合に、入力要求出力情報を出力させてもよい。
 また、出力制御部15は、入力開始の時刻と入力終了の時刻とに応じて対象コンテンツを特定してもよい。係る構成によれば、より高精度にユーザの意図した対象コンテンツを特定することが可能であり、より適切な出力が可能となる。
 なお、上述した対象コンテンツの特定と、対象コンテンツに係る出力制御の具体的な例については、図8~12を参照して後述する。
 なお、出力制御部15による出力制御は上記の例に限定されない。出力制御部15は、コンテキスト情報に応じた出力情報を出力部40に出力させてもよいし、出力制御部15は、コンテンツの提供に係るアプリケーションの状態に応じて出力部40による出力を制御してもよい。
 上述した出力制御部15による出力制御の具体例については後述する。
 通信部20は、他の装置との間の通信を仲介する通信インタフェースである。通信部20は、任意の無線通信プロトコルまたは有線通信プロトコルをサポートし、例えば図1を参照して説明した通信網5を介してサーバ2との間の通信接続を確立する。また、通信部20は、通信制御部11の制御に従い、サーバ2から情報を受信し、またはサーバ2に情報を送信する。
 センサ部30は、情報処理装置1の周囲の状況をセンシングする。本実施形態に係るセンサ部30は、少なくともユーザの音声をセンシングして音声信号(入力情報)を生成するマイクロフォンを含む。また、センサ部30は、加速度センサ、ジャイロセンサ、地磁気センサ、光センサ、音センサ、測距センサ、力センサ等の各種のセンサを含んでもよい。
 出力部40は、出力制御部15の制御に従い、出力を行う。本実施形態に係る出力部40は、例えばスピーカ及びヘッドホン等の音声を出力可能な音声出力装置を含む。また、出力部40は、ディスプレイやLED等を含んでもよい。
 記憶部50は、情報処理装置1の各構成が機能するためのプログラムやパラメータを記憶する。
 以上、本実施形態による情報処理装置1の構成について具体的に説明した。なお、図4に示す情報処理装置1の構成は一例であって、本実施形態はこれに限定されない。また、情報処理装置1は、ユーザインタフェースとして、タッチパネルディスプレイや物理ボタン等をさらに備えていてもよい。また、本実施形態による制御部10の各機能は、通信網5を介して接続される他の情報処理装置(例えば図1のサーバ2等)が有してもよい。
 <<3.動作>>
 続いて、本実施形態による情報処理装置1の動作について説明する。まず、図5を参照して、本実施形態に係る情報処理装置1が行うユーザ入力に対する出力(応答)処理の流れを説明した後、ユーザの入力に対する出力制御の例を具体的に説明する。
  <3-1.処理の流れ>
 図5は、本実施形態による情報処理装置1が行う、ユーザ入力に対する出力処理の流れを説明するためのフローチャート図である。
 図5に示すように、まず情報取得部12が、センサ部30から入力情報として、ユーザの音声信号を取得する(S102)。続いて、音声認識部13が取得された入力情報(音声信号)に基づいて音声認識を行う(S104)。
 続いて、条件処理部14が、様々な条件に応じた判定を行う(S106)。続いて、ステップS104の音声認識結果と、ステップS106の判定結果に基づき、出力制御部15が出力部40の出力を制御する(S108)。
 以上、本実施形態に係る処理の流れについて説明した。続いて、本実施形態に係る条件判定に応じた出力制御の幾つかの具体例について説明する。
  <3-2.出力制御の例>
再生状態に応じた出力制御)
 図6は、図3を参照して説明したコーナーの流れの一例をより詳細に示したタイムチャート図である。図6において、縦軸は音の大きさを示し、横軸は時間を示している。
 図6に示すMusicは、例えばユーザが選択的に再生する音楽であり、例えば音楽プレイヤ機能により再生される。また、図6に示すCueVoiceは、図3に示したDJに対応し、例えば、コーナー開始時のコーナー紹介や、コーナー終了時のレポーター(TTS)への労いの言葉が再生される。図6に示すLoopは、コーナーごとに独自に設定される音楽(BGM)である。また、図6に示すBumper、及びBumper Voiceは、それぞれコーナー独自のジングル音と、レポーターの挨拶である。また、図6に示すTTS(Text To Speech)は、音声合成によるレポーターの読み上げである。なお、以下ではTTSの再生中をコーナー本編と呼ぶ場合がある。
 図6に示すように、Musicが再生された状態において、時刻T11にCueVoice(コーナー開始時)の再生が開始されると、Musicの再生音量が低下する。続いて、時刻T12にCueVoiceの再生が終了すると共に、Musicの再生音量が0に近づき、Bumperの再生が開始される。続いて、時刻T13にBumper Voiceの再生が開始される。続いて、時刻T15にBumper、及びBumper Voiceの再生が終了し、Loopの再生が開始される。また、時刻T15にTTSの再生が開始されると、Loopの再生音量が低下する。また、時刻T16にTTSの再生が終了する。時刻T15から時刻T16の間がコーナ―本編である。続いて、時刻T17にCueVoice(コーナー終了時)の再生が開始され、時刻T18に終了する。時刻T19にLoopの再生音量が0に近づくと共に、Musicの再生が再開される。
 図7は、図6を参照して説明したコーナーが提供されている際に入力情報が取得された場合の出力制御の例を示す表である。図7に示すように、入力情報が取得された時刻における再生状態と、入力された音声に応じた出力制御が行われる。なお、図7に示す例では、音声コマンドStartはコーナー名やコーナー内の情報を指定する目的語XXXと組み合わされて入力される。
 (入力タイミングに応じた出力制御)
 図8は、本実施形態に係るコーナーの具体例を説明するための説明図である。図8は、本実施形態に係るニュースコーナーの一例を示している。ニュースコーナーにおいて、例えば、DJによるコーナー紹介(P1)、及びレポーターの挨拶(P2)の後、音声合成により複数のコンテンツC1~C3が読み上げられる(P3)。
 ここで、ユーザはコンテンツをより詳しく知りたい場合、ユーザは「詳しく教えて」「もっと詳しく」等の音声入力を行うことで、より詳しい情報が出力される。ここで、ユーザの入力においてユーザが対象とする対象コンテンツを特定し易くするため、本実施形態に係るコーナーでは図8に示すように、コンテンツとコンテンツの間にはコンテンツが提供されないギャップG1~G3が存在する。なお、ギャップG1~G3において、図6で説明したLoop(BGM)が再生されていてもよい。
 図9は、ニュースコーナーにおけるユーザの入力の例を説明するための説明図である。例えば、図9に示すように、ギャップG1の期間にユーザが「詳しく教えて。」という発話H1を行った場合、ユーザは直前に出力(提供)されたコンテンツC1を対象コンテンツとして意図していると考えられる。そこで、本実施形態に係る出力制御部15は、図9に示す例において、コンテンツC1を対象コンテンツとしたより詳しい出力情報R1を出力させる。
 また、出力制御部15は、対象コンテンツが特定された場合に、対象コンテンツを示す出力情報を出力させた後、対象コンテンツに係るより詳しい出力情報を出力させてもよい。
 図10は、対象コンテンツの特定の具体例を説明するための説明図である。図8の例と同様に、図10に示すコンテンツC1(第一のコンテンツ)と、コンテンツC2(第二のコンテンツ)の間には、コンテンツが提供されないギャップG1が存在する。
 例えば、ユーザの入力情報が、コンテンツC1が提供される期間D11に取得された場合、出力制御部15は、コンテンツC1を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「ただ今の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、コンテンツC1に係るより詳しい出力情報を出力させてもよい。
 また、ユーザの入力情報が、コンテンツが提供されないギャップG1に相当する非コンテンツ期間D12に取得された場合、出力制御部15は、非コンテンツ期間D12の直前のコンテンツであるコンテンツC1を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「前の記事について詳しくお伝えします」と、対象コンテンツを示す出力情報を出力させた後、コンテンツC1に係るより詳しい出力情報を出力させてもよい。
 また、ユーザの入力情報が、コンテンツC2が提供されている期間のうち、コンテンツC2が提供されてから所定の期間D13に取得された場合、出力制御部15は、「前の記事ですか?現在の記事ですか?」と、対象コンテンツを特定するためのユーザの入力を促す入力要求出力情報を出力させてもよい。係る構成により、対象コンテンツを特定することが困難な場合であっても、対話的に対象コンテンツを特定可能である。なお、期間D13は非コンテンツ期間D12の予備的な期間であるため、非コンテンツ期間D12よりも短いことが望ましい。
 また、ユーザの入力情報が、コンテンツC2が提供されている期間のうち、期間D13より後の期間D14に取得された場合、出力制御部15は、コンテンツC2を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「ただ今の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、コンテンツC2に係るより詳しい出力情報を出力させてもよい。
 図11は、対象コンテンツの特定の他の具体例を説明するための説明図である。図11に示す例では、ギャップG1が、3つの非コンテンツ期間D22,D23,D24に細分化される。
 例えば、ユーザの入力情報が、コンテンツC1が提供される期間D21に取得された場合、出力制御部15は、コンテンツC1を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「ただ今の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、コンテンツC1に係るより詳しい出力情報を出力させてもよい。
 また、ユーザの入力情報が、コンテンツC1の直後の非コンテンツ期間D22に取得された場合、出力制御部15は、コンテンツC1を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「前の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、コンテンツC1に係るより詳しい出力情報を出力させてもよい。
 また、ユーザの入力情報が、非コンテンツ期間D22と非コンテンツ期間D24の間の非コンテンツ期間D23に取得された場合、出力制御部15は、「前の記事ですか?現在の記事ですか?」と、対象コンテンツを特定するためのユーザの入力を促す入力要求出力情報を出力させてもよい。
 また、ユーザの入力情報が、コンテンツC2の直前の非コンテンツ期間D24に取得された場合、出力制御部15は、コンテンツC2を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「次の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、コンテンツC2に係るより詳しい出力情報を出力させてもよい。
 また、ユーザの入力情報が、コンテンツC2が提供される期間D25に取得された場合、出力制御部15は、コンテンツC2を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「ただ今の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、コンテンツC2に係るより詳しい出力情報を出力させてもよい。
 図11を参照して説明した出力制御は、例えば、提供されるコンテンツの概要や順番をユーザが事前に把握している場合に、有効である。例えばコンテンツの概要や順番は、出力部40に含まれるディスプレイに表示されてもよい。
 図12は、対象コンテンツの特定の他の具体例を説明するための説明図である。図12に示す例では、入力開始時点の時刻と、入力終了時点の時刻とに応じて、対象コンテンツが特定される。
 例えば、図12に示す入力情報H31、H35のように、入力の開始時刻と終了時刻が同一のコンテンツ期間(コンテンツ期間D31、またはコンテンツ期間D33)に含まれる場合、出力制御部15は、当該期間に提供されるコンテンツを対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「ただ今の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、当該コンテンツに係るより詳しい出力情報を出力させてもよい。
 また、入力情報H32のように、入力の開始時刻がコンテンツ期間D31に含まれ、入力の終了時刻が非コンテンツ期間D32に含まれる場合、出力制御部15は、入力の開始時刻に提供されていたコンテンツC1を対象コンテンツとして特定してもよい。係る場合、出力制御部15は、「前の記事を詳しくお伝えします」と対象コンテンツを示す出力情報を出力させた後、コンテンツC1に係るより詳しい出力情報を出力させてもよい。
 また、入力情報H33のように、入力の開始時刻と終了時刻が非コンテンツ期間D32に含まれる場合、出力制御部15は、「前の記事ですか?現在の記事ですか?」と、対象コンテンツを特定するためのユーザの入力を促す入力要求出力情報を出力させてもよい。
 また、入力情報H34、H36のように、入力の開始時刻がコンテンツC1が提供される期間D31、または非コンテンツ期間D32に含まれ、入力の終了時刻がコンテンツC2が提供される期間D33に含まれる場合、出力制御部15は、出力制御部15は、「前の記事ですか?現在の記事ですか?」と、対象コンテンツを特定するためのユーザの入力を促す入力要求出力情報を出力させてもよい。
 図12を参照して説明した例によれば、入力の開始と終了の時刻の両方を用いることで、より高精度にユーザの意図した対象コンテンツを特定することが可能であり、より適切な出力が可能となる。
 なお、出力制御部15は、例えばコーナーの冒頭に、「詳しく聞きたかったら詳しく教えて、と言ってください」等、ユーザの発話を促す音声を出力させてもよい。また、出力制御部15は、「詳しく聞きたい記事を読んでいる間とその後5秒の間に発話してください」等、対象コンテンツの特定に係る説明を行ってもよい。
 また、上述した非コンテンツ期間が長すぎると、コーナーの時間が予め定まっている場合には、提供可能な情報量が減少してしまい、一方で、非コンテンツ期間が短すぎると、発話するタイミングを逃してしまう恐れがある。
 そこで、出力制御部15は、ユーザに関連付けられた情報に応じて、非コンテンツ期間の長さを特定し、当該非コンテンツ期間となるように、コンテンツの出力を制御してもよい。ここで、ユーザに関連付けられた情報は、ユーザの傾向、ユーザの状態、ユーザの周辺環境のうち、少なくともいずれか一つの情報であってもよい。なお、非コンテンツ期間の長さの特定は、出力制御部15以外の構成要素によって行われてもよく、当該構成要素は、情報処理装置1以外の外部装置が有する構成要素であってもよい。
 例えば、長い発話による音声入力を行う傾向のあるユーザの場合に、非コンテンツ期間が長く設定されてもよい。なお、センサ部30から取得される音声等に基づいてユーザが識別されてもよい。
 また、ユーザが音声による情報提示により集中している場合には、非コンテンツ期間が短くてもよいと考えられる。例えば、センサ部30から取得される情報に基づいて、ユーザの状態が認識され、非コンテンツ期間が設定されてもよい。例えば、設定される非コンテンツ期間の長さは、ユーザが走っている状態ではより長く(例えば7秒)、ユーザが歩いている状態では中程度(例えば5秒)、ユーザが座っている状態ではより短く(例えば3秒)と、設定されてもよい。
 また、ユーザの周辺環境が、騒音の多い環境であれば、非コンテンツ期間がより長く設定されてもよい。なお、例えば、センサ部30から取得される情報に基づいて環境の情報が認識されてもよい。
 また、情報処理装置1が行う、ニュースコーナーにおける、ユーザ入力に対する処理は上記に限定されない。
 例えば、出力制御部15は、コンテンツが提供されるコンテンツ期間に入力情報が取得された場合に、提供されている当該コンテンツの提供開始からの期間に応じた出力情報を出力させてもよい。
 例えば、出力制御部15は、入力情報の取得時刻において、提供開始からの期間が長い程、より多くの情報を含む出力情報(より詳細な情報)を出力させてもよい。例えば、コンテンツの後半に「詳しく教えて」と発話された場合には、コンテンツの前半に「詳しく教えて」と発話された場合よりも長い(より多くの情報を含む)出力情報を出力させてもよい。
 また、出力制御部15は、入力情報が取得された場合に、提供予定の複数のコンテンツを提供可能な残り時間に応じた出力情報を出力させてもよい。例えば、残り時間がより長い程、より詳細な(情報量の多い)出力情報を出力させてもよい。
 なお、残り時間は、ユーザの過去の行動から推定されるサービス(パーソナルラジオサービス)の利用の残り時間であってもよい。例えば、ユーザがいつも通勤中に当該サービスを利用する場合、残り時間は、推定される通勤終了までの時間であってもよい。また、残り時間は、例えば現在のコーナー終了までの時間であってもよい。
 また、コンテンツに、予めキーワードが設定され、当該キーワードが読み上げられてから所定の期間に「詳しく教えて」と発話された場合に、当該キーワードに関連する新たなニュースコンテンツが出力されてもよい。
 また、コンテンツごとに、BGM(図6を参照して説明したLoop)を変更することで、コンテンツの区切りをより明確にしてもよい。
 また、ユーザは「いつ」、「どこで」、「だれが」、「何を」、「なぜ」、「どのよう」等の所謂5W1Hの情報についてユーザーは質問可能である。質問した内容がコンテンツの後半にある場合は、その該当箇所までコンテンツの出力がジャンプしてもよい。
 また、コンテンツ内に含まれる人物名等の所定のキーワードが読み上げられてから所定の期間に「ブックマーク」とユーザが発話した場合に、当該人物名等の所定のキーワードがブックマークに登録されてもよい。
 なお、「ブックマーク」という発話は、ニュースコーナー以外であっても同様に可能である。例えば、ユーザが現在聞いているコンテンツ(ニュース、レストラン、イベント、SNS情報)、再生中の楽曲、写真撮影直後の写真、長く滞在している場所店等がブックマーク対象として特定され、ブックマークに登録され得る。
コンテキストに応じた出力制御)
 出力制御部15は、コンテキスト情報に応じて出力制御を行ってもよい。コンテキスト情報には、例えば時間帯情報、コンテンツ情報、ユーザの行動情報、ユーザの周囲の環境に関する環境情報、ユーザが存在する場所に関する場所情報等が含まれる。
 例えば、同じ音声コマンドを発話した場合であっても、発話した時間が異なる場合、その時間帯に合わせた出力制御を行うことがより適切であり得る。以下に時間帯情報(例えば朝、または夜)に応じた出力制御例を示す。
  朝:ユーザの「Start」という発話で天気コーナーが始まり、自宅と職場の天気を教えてくれる。
  夜:ユーザの「Start」という発話でエリアガイドコーナーが始まり、近くのナイトスポット情報を教えてくれる。
 また、コンテンツが楽曲である場合、楽曲の雰囲気に応じて出力が制御されてよい。以下に、楽曲のBPM(コンテンツ情報の一例)に応じた出力制御例を示す。
  BPM < 100 ならば情報系コーナーを再生する。
  100 ≦ BPM ならばエンターテインメント系コーナーを再生する。
 なお、一般的に音楽のBPM60以下はゆっくりなバラード調の曲、BPM80~110が普通の曲、BPM130以上は早いテンポの曲とされるため、係る基準が条件判定に用いられてもよい。
 また、以下にユーザの行動情報(例えば、走っているか否か)に応じた出力制御例を示す。
  走っているときにユーザが「Start」と発話したら、ユーザの行動履歴の記録を開始する。
  その他のときにユーザが「Start」と発話したら、ユーザの行動履歴記録以外のコーナーを起動する。
 また、周囲の会話(環境情報の一例)を認識することで、以下に示すように周囲の会話に応じた出力制御が行われてもよい。
  周囲で天気の話をしていたときに、ユーザが「Start」と発話したら、天気コーナーを起動する。
  周囲で午後の予定について話していたときに、ユーザが「Start」と発話したら、スケジュールコーナーを起動し、午後の予定について読み上げる。
 また、ユーザが存在する場所情報に応じた出力制御も可能である。例えば、ユーザのいる場所がプライベート環境(Private Space)であるか否か(Public Space)によってコーナーの内容を制御してもよい。以下に場所情報に応じた出力制御の例を示す。
 ・メールコーナーの場合
  場所情報:Public Space
   新着メールの件数のみを読み上げる。また、ユーザが「詳しく教えて」と発話した場合、タイトルや本文が読み上げられてもよい。
  場所情報:Private Space
   タイトル、送信者までを読み上げる。また、「詳しく教えて」とユーザが発話した場合、本文が読み上げられてもよい。また、係る場合、ユーザの設定によっては全ての情報が読み上げられてもよい。
 ・スケジュールコーナーの場合
  場所情報:Public Space
   予定の件数のみを読み上げる。また、「詳しく教えて」とユーザが発話した場合、タイトルや場所が読み上げられてもよい
  場所情報:Private Space
   タイトル、場所、時間までを読み上げる。また、「詳しく教えて」とユーザが発話した場合、本文が読み上げられてもよい。
 なお、例えば条件処理部14は、センサ部30から取得される情報に基づき、自宅にいるかつ周りに人がいない(発話検出が陰性)と判定された場合に、プライベート環境であると判定し、それ以外の場合にプライベート環境ではないと判定してもよい。
 (アプリケーションの状態に応じた出力制御)
 また、出力制御部15は、コンテンツの提供に係るアプリケーションの状態に応じて出力部40による出力の制御を行ってもよい。アプリケーションの状態には、例えばアプリケーションがバックグラウンド動作中であるか否か(バックグラウンド動作中であるか、フォアグラウンド動作中であるか)が含まれてもよい。
 例えば、アプリケーションがフォアグラウンド動作中に入力情報が取得された場合、ユーザの入力情報に基づいて、当該アプリケーションへの操作が行われて、上述したような出力情報の出力が行われてもよい。一方、アプリケーションがバックグラウンド動作中に入力情報が取得された場合、当該アプリケーションではなく、フォアグラウンド動作中の他のアプリケーションへの操作に入力情報が用いられてもよい。
 <<4.ハードウェア構成例>>
 以上、本開示の実施形態を説明した。最後に、図13を参照して、本実施形態に係る情報処理装置のハードウェア構成について説明する。図13は、本実施形態に係る情報処理装置のハードウェア構成の一例を示すブロック図である。なお、図20に示す情報処理装置900は、例えば、図1、4に示した情報処理装置1、及びサーバ2を実現し得る。本実施形態に係る情報処理装置1、及びサーバ2による情報処理は、ソフトウェアと、以下に説明するハードウェアとの協働により実現される。
 図20に示すように、情報処理装置900は、CPU(Central Processing Unit)901、ROM(Read Only Memory)902、RAM(Random Access Memory)903及びホストバス904aを備える。また、情報処理装置900は、ブリッジ904、外部バス904b、インタフェース905、入力装置906、出力装置907、ストレージ装置908、ドライブ909、接続ポート911、通信装置913、及びセンサ915を備える。情報処理装置900は、CPU901に代えて、又はこれとともに、DSP若しくはASIC等の処理回路を有してもよい。
 CPU901は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置900内の動作全般を制御する。また、CPU901は、マイクロプロセッサであってもよい。ROM902は、CPU901が使用するプログラムや演算パラメータ等を記憶する。RAM903は、CPU901の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。CPU901は、例えば、図4に示した制御部10を形成し得る。
 CPU901、ROM902及びRAM903は、CPUバスなどを含むホストバス904aにより相互に接続されている。ホストバス904aは、ブリッジ904を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス904bに接続されている。なお、必ずしもホストバス904a、ブリッジ904および外部バス904bを分離構成する必要はなく、1つのバスにこれらの機能を実装してもよい。
 入力装置906は、例えば、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチ及びレバー等、ユーザによって情報が入力される装置によって実現される。また、入力装置906は、例えば、赤外線やその他の電波を利用したリモートコントロール装置であってもよいし、情報処理装置900の操作に対応した携帯電話やPDA等の外部接続機器であってもよい。さらに、入力装置906は、例えば、上記の入力手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、CPU901に出力する入力制御回路などを含んでいてもよい。情報処理装置900のユーザは、この入力装置906を操作することにより、情報処理装置900に対して各種のデータを入力したり処理動作を指示したりすることができる。
 出力装置907は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で形成される。このような装置として、CRTディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ELディスプレイ装置及びランプ等の表示装置や、スピーカ及びヘッドホン等の音声出力装置や、プリンタ装置等がある。出力装置907は、例えば、情報処理装置900が行った各種処理により得られた結果を出力する。具体的には、表示装置は、情報処理装置900が行った各種処理により得られた結果を、テキスト、イメージ、表、グラフ等、様々な形式で視覚的に表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して聴覚的に出力する。上記出力装置907は、例えば、図4に示す出力部40を形成し得る。
 ストレージ装置908は、情報処理装置900の記憶部の一例として形成されたデータ格納用の装置である。ストレージ装置908は、例えば、HDD等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス又は光磁気記憶デバイス等により実現される。ストレージ装置908は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。このストレージ装置908は、CPU901が実行するプログラムや各種データ及び外部から取得した各種のデータ等を格納する。上記ストレージ装置908は、例えば、図4に示す記憶部50を形成し得る。
 ドライブ909は、記憶媒体用リーダライタであり、情報処理装置900に内蔵、あるいは外付けされる。ドライブ909は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体に記録されている情報を読み出して、RAM903に出力する。また、ドライブ909は、リムーバブル記憶媒体に情報を書き込むこともできる。
 接続ポート911は、外部機器と接続されるインタフェースであって、例えばUSB(Universal Serial Bus)などによりデータ伝送可能な外部機器との接続口である。
 通信装置913は、例えば、ネットワーク920に接続するための通信デバイス等で形成された通信インタフェースである。通信装置913は、例えば、有線若しくは無線LAN(Local Area Network)、LTE(Long Term Evolution)、Bluetooth(登録商標)又はWUSB(Wireless USB)用の通信カード等である。また、通信装置913は、光通信用のルータ、ADSL(Asymmetric Digital Subscriber Line)用のルータ又は各種通信用のモデム等であってもよい。この通信装置913は、例えば、インターネットや他の通信機器との間で、例えばTCP/IP等の所定のプロトコルに則して信号等を送受信することができる。上記通信装置913は、例えば、図4に示す通信部20を形成し得る。
 なお、ネットワーク920は、ネットワーク920に接続されている装置から送信される情報の有線、または無線の伝送路である。例えば、ネットワーク920は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ethernet(登録商標)を含む各種のLAN(Local Area Network)、WAN(Wide Area Network)などを含んでもよい。また、ネットワーク920は、IP-VPN(Internet Protocol-Virtual Private Network)などの専用回線網を含んでもよい。
 センサ915は、例えば、加速度センサ、ジャイロセンサ、地磁気センサ、光センサ、音センサ、測距センサ、力センサ等の各種のセンサである。センサ915は、情報処理装置900の姿勢、移動速度等、情報処理装置900自身の状態に関する情報や、情報処理装置900の周辺の明るさや騒音等、情報処理装置900の周辺環境に関する情報を取得する。また、センサ915は、GPS信号を受信して装置の緯度、経度及び高度を測定するGPSセンサを含んでもよい。センサ915は、例えば、図4に示したセンサ部30を形成し得る。
 以上、本実施形態に係る情報処理装置900の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて実現されていてもよいし、各構成要素の機能に特化したハードウェアにより実現されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。
 なお、上述のような本実施形態に係る情報処理装置900の各機能を実現するためのコンピュータプログラムを作製し、PC等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信されてもよい。
 <<5.むすび>>
 以上、説明したように、本開示の実施形態によれば、ユーザの入力に対してより適切な出力が可能である。
 以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
 例えば、上記実施形態では、入力情報が音声信号である例を説明したが、本技術は係る例に限定されず、他の入力情報が入力される場合にも適用可能である。例えば、上述した入力開始から入力終了までの間にタイムラグを有する入力情報は、タッチ操作におけるフリック操作、またはマウス操作におけるドラッグ・アンド・ドロップ操作等の所謂ジェスチャ操作による入力の情報であってもよい。
 また、上記実施形態における各ステップは、必ずしもフローチャート図として記載された順序に沿って時系列に処理される必要はない。例えば、上記実施形態の処理における各ステップは、フローチャート図として記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
 また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
 なお、以下のような構成も本開示の技術的範囲に属する。
(1)
 複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報を取得する情報取得部と、
 前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させる出力制御部と、
 を備える情報処理装置。
(2)
 前記出力制御部は、前記第一の出力情報または前記第二の出力情報として、前記情報取得部により取得される前記入力情報の取得時刻情報に応じた対象コンテンツに係る出力情報を前記出力部に出力させる、前記(1)に記載の情報処理装置。
(3)
 前記第二の出力情報の対象コンテンツは、前記第一のコンテンツである、前記(2)に記載の情報処理装置。
(4)
 前記第一のコンテンツと前記第二のコンテンツの間には複数の非コンテンツ期間が存在し、
 前記出力制御部は、前記第一のコンテンツの直後の前記非コンテンツ期間に前記入力情報が取得された場合、前記第一のコンテンツに係る前記第二の出力情報を出力させ、前記第二のコンテンツの直前の前記非コンテンツ期間に前記入力情報が取得された場合、前記第二のコンテンツに係る前記第二の出力情報を前記出力部に出力させる、前記(2)または(3)に記載の情報処理装置。
(5)
 前記出力制御部は、前記対象コンテンツを特定するためのユーザの入力を促す入力要求出力情報を前記出力部に出力させる、前記(2)~(4)のいずれか一項に記載の情報処理装置。
(6)
 前記出力制御部は、前記第二のコンテンツが提供されている前記コンテンツ期間のうち前記第二のコンテンツの提供開始から所定の期間に前記入力情報が取得された場合に、前記入力要求出力情報を前記出力部に出力させる、前記(5)に記載の情報処理装置。
(7)
 前記第一のコンテンツと前記第二のコンテンツの間には3以上の非コンテンツ期間が存在し、
 前記出力制御部は、前記第一のコンテンツの直後の前記非コンテンツ期間と、前記第二のコンテンツの直前の前記非コンテンツ期間との間の前記非コンテンツ期間に前記入力情報が取得された場合に、前記入力要求出力情報を前記出力部に出力させる、前記(5)に記載の情報処理装置。
(8)
 前記取得時刻情報は、前記入力終了の時刻を含む、前記(2)~(7)のいずれか一項に記載の情報処理装置。
(9)
 前記出力制御部は、前記入力開始の時刻と前記入力終了の時刻とに応じた対象コンテンツに係る前記出力情報を前記出力部に出力させる、前記(8)に記載の情報処理装置。
(10)
 前記出力制御部は、前記コンテンツ期間に前記入力情報が取得された場合に、提供されている前記コンテンツの提供開始からの期間に応じた前記第一の出力情報を前記出力部に出力させる、前記(1)~(9)のいずれか一項に記載の情報処理装置。
(11)
 前記出力制御部は、前記提供開始からの期間が長い程、より多くの情報を含む前記第一の出力情報を前記出力部に出力させる、前記(10)に記載の情報処理装置。
(12)
 前記非コンテンツ期間の長さは、前記ユーザの傾向、前記ユーザの状態、前記ユーザの周辺環境のうち、少なくともいずれか一つに応じて特定される、前記(1)~(11)のいずれか一項に記載の情報処理装置。
(13)
 前記出力制御部は、前記入力情報が取得された場合に、前記第一の出力情報または前記第二の出力情報として、前記複数のコンテンツを提供可能な残り時間に応じた出力情報を前記出力部に出力させる、前記(1)~(12)のいずれか一項に記載の情報処理装置。
(14)
 前記出力制御部は、コンテキスト情報に応じた出力情報を前記出力部に出力させる、前記(1)~(13)のいずれか一項に記載の情報処理装置。
(15)
 前記コンテキスト情報は、時間帯情報、コンテンツ情報、前記ユーザの行動情報、環境情報、場所情報のうち少なくともいずれか一つを含む、前記(14)に記載の情報処理装置。
(16)
 前記出力制御部は、コンテンツの提供に係るアプリケーションの状態に応じて前記出力部による出力を制御する、前記(1)~(15)のいずれか一項に記載の情報処理装置。
(17)
 前記情報処理装置は、前記ユーザの音声をセンシングして前記入力情報を生成するマイクロフォンをさらに備える、前記(1)~(16)のいずれか一項に記載の情報処理装置。
(18)
 前記複数のコンテンツは、同一のカテゴリに分類されるコンテンツである、前記(1)~(17)のいずれか一項に記載の情報処理装置。
(19)
 複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報をプロセッサが取得することと、
 前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させることと、
 を含む情報処理方法。
(20)
 コンピュータに、
 複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報を取得する機能と、
 前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させる機能と、
 を実現させるための、プログラム。
 1 情報処理装置
 2 サーバ
 5 通信網
 10 制御部
 11 通信制御部
 12 情報取得部
 13 音声認識部
 14 条件処理部
 15 出力制御部
 20 通信部
 30 センサ部
 40 出力部
 50 記憶部
 99 情報処理システム

Claims (20)

  1.  複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報を取得する情報取得部と、
     前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させる出力制御部と、
     を備える情報処理装置。
  2.  前記出力制御部は、前記第一の出力情報または前記第二の出力情報として、前記情報取得部により取得される前記入力情報の取得時刻情報に応じた対象コンテンツに係る出力情報を前記出力部に出力させる、請求項1に記載の情報処理装置。
  3.  前記第二の出力情報の対象コンテンツは、前記第一のコンテンツである、請求項2に記載の情報処理装置。
  4.  前記第一のコンテンツと前記第二のコンテンツの間には複数の非コンテンツ期間が存在し、
     前記出力制御部は、前記第一のコンテンツの直後の前記非コンテンツ期間に前記入力情報が取得された場合、前記第一のコンテンツに係る前記第二の出力情報を出力させ、前記第二のコンテンツの直前の前記非コンテンツ期間に前記入力情報が取得された場合、前記第二のコンテンツに係る前記第二の出力情報を前記出力部に出力させる、請求項2に記載の情報処理装置。
  5.  前記出力制御部は、前記対象コンテンツを特定するためのユーザの入力を促す入力要求出力情報を前記出力部に出力させる、請求項2に記載の情報処理装置。
  6.  前記出力制御部は、前記第二のコンテンツが提供されている前記コンテンツ期間のうち前記第二のコンテンツの提供開始から所定の期間に前記入力情報が取得された場合に、前記入力要求出力情報を前記出力部に出力させる、請求項5に記載の情報処理装置。
  7.  前記第一のコンテンツと前記第二のコンテンツの間には3以上の非コンテンツ期間が存在し、
     前記出力制御部は、前記第一のコンテンツの直後の前記非コンテンツ期間と、前記第二のコンテンツの直前の前記非コンテンツ期間との間の前記非コンテンツ期間に前記入力情報が取得された場合に、前記入力要求出力情報を前記出力部に出力させる、請求項5に記載の情報処理装置。
  8.  前記取得時刻情報は、前記入力終了の時刻を含む、請求項2に記載の情報処理装置。
  9.  前記出力制御部は、前記入力開始の時刻と前記入力終了の時刻とに応じた対象コンテンツに係る前記出力情報を前記出力部に出力させる、請求項8に記載の情報処理装置。
  10.  前記出力制御部は、前記コンテンツ期間に前記入力情報が取得された場合に、提供されている前記コンテンツの提供開始からの期間に応じた前記第一の出力情報を前記出力部に出力させる、請求項1に記載の情報処理装置。
  11.  前記出力制御部は、前記提供開始からの期間が長い程、より多くの情報を含む前記第一の出力情報を前記出力部に出力させる、請求項10に記載の情報処理装置。
  12.  前記非コンテンツ期間の長さは、前記ユーザの傾向、前記ユーザの状態、前記ユーザの周辺環境のうち、少なくともいずれか一つに応じて特定される、請求項1に記載の情報処理装置。
  13.  前記出力制御部は、前記入力情報が取得された場合に、前記第一の出力情報または前記第二の出力情報として、前記複数のコンテンツを提供可能な残り時間に応じた出力情報を前記出力部に出力させる、請求項1に記載の情報処理装置。
  14.  前記出力制御部は、コンテキスト情報に応じた出力情報を前記出力部に出力させる、請求項1に記載の情報処理装置。
  15.  前記コンテキスト情報は、時間帯情報、コンテンツ情報、前記ユーザの行動情報、環境情報、場所情報のうち少なくともいずれか一つを含む、請求項14に記載の情報処理装置。
  16.  前記出力制御部は、コンテンツの提供に係るアプリケーションの状態に応じて前記出力部による出力を制御する、請求項1に記載の情報処理装置。
  17.  前記情報処理装置は、前記ユーザの音声をセンシングして前記入力情報を生成するマイクロフォンをさらに備える、請求項1に記載の情報処理装置。
  18.  前記複数のコンテンツは、同一のカテゴリに分類されるコンテンツである、請求項1に記載の情報処理装置。
  19.  複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報をプロセッサが取得することと、
     前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させることと、
     を含む情報処理方法。
  20.  コンピュータに、
     複数のコンテンツを、少なくとも1の非コンテンツ期間を介して連続的に提供するモードにおいて、入力開始から入力終了までの間にタイムラグを有するユーザの入力情報を取得する機能と、
     前記複数のコンテンツに含まれる第一のコンテンツまたは前記第一のコンテンツより後の時刻に提供される第二のコンテンツが提供されているコンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて第一の出力情報を出力部に出力させ、前記第一のコンテンツと前記第二のコンテンツとの間の前記非コンテンツ期間に前記入力情報が取得された場合、前記入力情報に基づいて前記第一の出力情報とは異なる第二の出力情報を前記出力部に出力させる機能と、
     を実現させるための、プログラム。
PCT/JP2017/024782 2016-08-19 2017-07-06 情報処理装置、情報処理方法、及びプログラム WO2018034077A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP17841305.0A EP3502864A4 (en) 2016-08-19 2017-07-06 INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, AND PROGRAM
US16/324,971 US11264022B2 (en) 2016-08-19 2017-07-06 Information processing apparatus, information processing method, and program
JP2018534295A JP6904357B2 (ja) 2016-08-19 2017-07-06 情報処理装置、情報処理方法、及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-161545 2016-08-19
JP2016161545 2016-08-19

Publications (1)

Publication Number Publication Date
WO2018034077A1 true WO2018034077A1 (ja) 2018-02-22

Family

ID=61196575

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/024782 WO2018034077A1 (ja) 2016-08-19 2017-07-06 情報処理装置、情報処理方法、及びプログラム

Country Status (4)

Country Link
US (1) US11264022B2 (ja)
EP (1) EP3502864A4 (ja)
JP (1) JP6904357B2 (ja)
WO (1) WO2018034077A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020004056A (ja) * 2018-06-27 2020-01-09 Zホールディングス株式会社 コンテンツ制御装置、制御方法および制御プログラム
JP2020077341A (ja) * 2018-11-09 2020-05-21 キヤノン株式会社 中継サーバおよび制御方法
WO2020217848A1 (ja) * 2019-04-26 2020-10-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
WO2021085242A1 (ja) * 2019-10-30 2021-05-06 ソニー株式会社 情報処理装置、及びコマンド処理方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11882232B2 (en) * 2021-04-09 2024-01-23 International Business Machines Corporation Tiered audio notifications based on surrounding context

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012173850A (ja) * 2011-02-18 2012-09-10 Sharp Business Computer Software Inc 情報処理装置および方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002108380A (ja) 2000-10-02 2002-04-10 Canon Inc 情報提示装置及びその制御方法、コンピュータ可読メモリ
US20080104112A1 (en) * 2006-10-27 2008-05-01 Sony Ericsson Mobile Communications Ab Method and Apparatus for Music Play List Control
JP2011043710A (ja) * 2009-08-21 2011-03-03 Sony Corp 音声処理装置、音声処理方法及びプログラム
US9288249B1 (en) * 2013-08-02 2016-03-15 Purplecomm Inc. Content interaction technology
JP2015106203A (ja) 2013-11-28 2015-06-08 Necパーソナルコンピュータ株式会社 情報処理装置、情報処理方法、及びプログラム
US9766959B2 (en) * 2014-03-18 2017-09-19 Google Inc. Determining user response to notifications based on a physiological parameter
US20170104840A1 (en) * 2015-10-08 2017-04-13 Perry M. Spagnola Adaptive system cache
US9659068B1 (en) * 2016-03-15 2017-05-23 Spotify Ab Methods and systems for providing media recommendations based on implicit user behavior
US10362127B2 (en) * 2016-06-27 2019-07-23 Paypal, Inc. Procuring feedback
US10762903B1 (en) * 2017-11-07 2020-09-01 Amazon Technologies, Inc. Conversational recovery for voice user interface

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012173850A (ja) * 2011-02-18 2012-09-10 Sharp Business Computer Software Inc 情報処理装置および方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020004056A (ja) * 2018-06-27 2020-01-09 Zホールディングス株式会社 コンテンツ制御装置、制御方法および制御プログラム
JP7136606B2 (ja) 2018-06-27 2022-09-13 ヤフー株式会社 コンテンツ制御装置、制御方法および制御プログラム
JP2020077341A (ja) * 2018-11-09 2020-05-21 キヤノン株式会社 中継サーバおよび制御方法
JP7224863B2 (ja) 2018-11-09 2023-02-20 キヤノン株式会社 中継サーバおよび制御方法
US11586866B2 (en) 2018-11-09 2023-02-21 Canon Kabushiki Kaisha System including a controlling server for printing print data based on a first printing content and print data based on a second printing content
WO2020217848A1 (ja) * 2019-04-26 2020-10-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
WO2021085242A1 (ja) * 2019-10-30 2021-05-06 ソニー株式会社 情報処理装置、及びコマンド処理方法
US20220357915A1 (en) * 2019-10-30 2022-11-10 Sony Group Corporation Information processing apparatus and command processing method

Also Published As

Publication number Publication date
US20210295831A1 (en) 2021-09-23
EP3502864A1 (en) 2019-06-26
JPWO2018034077A1 (ja) 2019-06-13
EP3502864A4 (en) 2019-07-10
JP6904357B2 (ja) 2021-07-14
US11264022B2 (en) 2022-03-01

Similar Documents

Publication Publication Date Title
WO2018034077A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP6720359B2 (ja) 発語トリガを常時リッスンするための動的閾値
CN108446022B (zh) 用户装置及其控制方法
US9553979B2 (en) Bluetooth headset and voice interaction control thereof
JP2019117623A (ja) 音声対話方法、装置、デバイス及び記憶媒体
US20180069815A1 (en) Application-based messaging system using headphones
US10228899B2 (en) Monitoring environmental noise and data packets to display a transcription of call audio
IE86422B1 (en) Method for voice activation of a software agent from standby mode
US10461712B1 (en) Automatic volume leveling
JPWO2017168936A1 (ja) 情報処理装置、情報処理方法、及びプログラム
KR102488285B1 (ko) 디지털 어시스턴트를 이용한 오디오 정보 제공
WO2019239656A1 (ja) 情報処理装置および情報処理方法
WO2019142418A1 (ja) 情報処理装置および情報処理方法
KR20230133864A (ko) 스피치 오디오 스트림 중단들을 처리하는 시스템들및 방법들
WO2021153101A1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
WO2019138652A1 (ja) 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム
JP2008249893A (ja) 音声応答装置及びその方法
WO2019187543A1 (ja) 情報処理装置および情報処理方法
US20240087597A1 (en) Source speech modification based on an input speech characteristic
WO2017187674A1 (ja) 情報処理装置、情報処理システム、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17841305

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018534295

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017841305

Country of ref document: EP

Effective date: 20190319