WO2019146188A1 - Information processing device and information processing method - Google Patents

Information processing device and information processing method Download PDF

Info

Publication number
WO2019146188A1
WO2019146188A1 PCT/JP2018/039222 JP2018039222W WO2019146188A1 WO 2019146188 A1 WO2019146188 A1 WO 2019146188A1 JP 2018039222 W JP2018039222 W JP 2018039222W WO 2019146188 A1 WO2019146188 A1 WO 2019146188A1
Authority
WO
WIPO (PCT)
Prior art keywords
transition
information
information processing
user
processing apparatus
Prior art date
Application number
PCT/JP2018/039222
Other languages
French (fr)
Japanese (ja)
Inventor
義己 田中
健斗 鈴木
裕明 三上
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to CN201880075030.5A priority Critical patent/CN111417917A/en
Priority to EP18902801.2A priority patent/EP3745236A4/en
Priority to US16/962,850 priority patent/US20210385101A1/en
Priority to JP2019567852A priority patent/JPWO2019146188A1/en
Publication of WO2019146188A1 publication Critical patent/WO2019146188A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/2821—Avoiding conflicts related to the use of home appliances
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/283—Processing of data at an internetworking point of a home automation network
    • H04L12/2834—Switching of information between an external network and a home network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces

Definitions

  • a user places a plurality of agent devices (hereinafter, also simply referred to as devices) in a home, and wants to use agent functions continuously while moving between rooms, or mobile agent functions It is assumed that there is a case where it is desired to make a transition to a terminal or the like and to use the function at the place where it is out.
  • agent devices hereinafter, also simply referred to as devices
  • the information processing server 20 is an information processing apparatus that manages information related to a plurality of information processing terminals 10 in an integrated manner.
  • the information processing server 20 according to the present embodiment may perform control related to the intelligent processing of the agent function provided to the user by the information processing terminal 10.
  • the intelligent processing unit 160 of the information processing terminal 10 a receives the image information captured by the imaging unit 110 of the information processing terminal 10 b via the network 30, and also receives the image information of the information processing terminal 10 via the network 30. It is possible to control the display unit 150.
  • the intelligent processing unit 240 controls the transition of the provider providing the function to the user, and the transition information indicating the status of the transition is the transition source device (information processing terminal 10) that is the transition source. Dynamically).
  • the function may be an agent function.
  • the intelligent processing unit 240 first causes the display unit 150 to display an object AO indicating the state of the agent before transition.
  • the intelligent processing unit 240 causes the object AO to gradually move toward the outside of the display area with the progress of the transition, and produces a fade-out expression such that the object AO exits the display area when the transition is completed. , And may indicate to the user that a function transition has occurred.
  • the intelligent processing unit 240 may cause the display unit 150 to perform display such as gradually reducing the color or pattern of the object AO.
  • context information includes information on a user context, a task context, and a relation context.
  • the user context indicates a context regarding a user who uses the agent function, and widely includes, for example, information regarding a user operation state including movement, a distance to the information processing terminal 10 with the user, a schedule of the user, and the like.
  • the intelligent processing unit 240 may calculate, for example, the availability of the information processing terminal 10 suitable for the action scheduled by the user later becomes higher.
  • the intelligent processing unit 240 may be configured to display the transition destination device or the candidate The display unit 150 may cause the display unit 150 to display the elapsed time as described above without displaying the icon corresponding to the device.
  • the intelligent processing unit 240 selects the information processing terminal 10 in which the same task is most frequently executed as the transition destination device. You may
  • the intelligent processing unit 240 is not suitable for use of the smartphone-type information processing terminal 10b (device information) during driving of the vehicle, and can use a battery for use of the smartphone-type information processing terminal 10b.
  • the information processing terminal 10 provided in the car can use the electricity generated by the car itself, and there is a surplus of power (device state), so the information processing terminal provided in the car It may be decided to transition the agent function to 10.
  • FIG. 16 although the user U uses the agent function provided by the stationary information processing terminal 10 a, the living room in which the information processing terminal 10 is installed when a child's friend comes into play The situation has been shown to be noisy.
  • the intelligent processing unit 240 determines that the use of the agent function at the current position of the user is not appropriate, it is possible to improve convenience by proposing the change of the space or time to the user. Is possible.
  • FIG. 18 is a block diagram illustrating an exemplary hardware configuration of the information processing terminal 10 and the information processing server 20 according to an embodiment of the present disclosure.
  • the information processing terminal 10 and the information processing server 20 include, for example, a processor 871, a ROM 872, a RAM 873, a host bus 874, a bridge 875, an external bus 876, an interface 877, and an input device 878. , An output device 879, a storage 880, a drive 881, a connection port 882, and a communication device 883.
  • the hardware configuration shown here is an example, and some of the components may be omitted. In addition, components other than the components shown here may be further included.
  • Input device 8708 For the input device 878, for example, a mouse, a keyboard, a touch panel, a button, a switch, a lever, and the like are used. Furthermore, as the input device 878, a remote controller (hereinafter, remote control) capable of transmitting a control signal using infrared rays or other radio waves may be used.
  • the input device 878 also includes a voice input device such as a microphone.
  • the input device 878 may include a device that senses light such as a camera, and a device that receives a Global Navigation Satellite System (GNSS) signal.
  • GNSS Global Navigation Satellite System
  • the removable recording medium 901 is, for example, DVD media, Blu-ray (registered trademark) media, HD DVD media, various semiconductor storage media, and the like.
  • the removable recording medium 901 may be, for example, an IC card equipped with a non-contact IC chip, an electronic device, or the like.
  • connection port 882 is, for example, a port for connecting an externally connected device 902 such as a USB (Universal Serial Bus) port, an IEEE 1394 port, a SCSI (Small Computer System Interface), an RS-232C port, or an optical audio terminal. is there.
  • an externally connected device 902 such as a USB (Universal Serial Bus) port, an IEEE 1394 port, a SCSI (Small Computer System Interface), an RS-232C port, or an optical audio terminal. is there.
  • each step concerning processing of information processing server 20 of this specification does not necessarily need to be processed in chronological order according to the order described in the flowchart.
  • the steps related to the processing of the information processing server 20 may be processed in an order different from the order described in the flowchart or may be processed in parallel.
  • the transition information includes information on a candidate device that is a candidate for a transition destination of the provider.
  • the control unit outputs a visual expression corresponding to a plurality of the candidate devices.
  • the information processing apparatus according to any one of the above (1) to (3).
  • the control unit causes information indicating the context of the candidate device to be output along with the visual representation corresponding to the candidate device.
  • the transition information includes information related to the transition source device,
  • the control unit outputs a visual representation corresponding to the transition source device.
  • the information processing apparatus according to any one of the above (1) to (5).
  • the result of processing related to the transition of the providing entity includes the normal completion of the transition or the occurrence of an error,
  • the control unit displays information indicating either the normal completion or the error.

Abstract

[Problem] To make a user clearly aware of a transition state of a function-providing entity between a plurality of devices. [Solution] Provided is an information processing device comprising a control unit which, between devices, controls the transition of a providing entity which provides a function to a user, wherein, when performing the transition of the providing entity, the control unit dynamically outputs transition information, indicating the transition state, to a transition source device that is a transition source of the providing entity. Also provided is an information processing method that involves a processor controlling the transition, between devices, of a providing entity that provides a function to a user, wherein the control further involves dynamically outputting transition information, indicating the transition state, to a transition source device that is a transition source of the providing entity, when performing the transition of the providing entity.

Description

情報処理装置および情報処理方法INFORMATION PROCESSING APPARATUS AND INFORMATION PROCESSING METHOD
　本開示は、情報処理装置および情報処理方法に関する。 The present disclosure relates to an information processing apparatus and an information processing method.
　近年、情報処理技術の発展に伴い、多様な情報処理デバイスが開発され、また普及している。このため、ユーザが複数の情報処理デバイスを保有し、用途や状況などに応じて、当該端末を使い分けるシーンが増加している。また、複数の情報処理デバイスを利用するユーザの利便性を向上させるための技術も多く提案されている。例えば、特許文献１には、複数の情報処理デバイスから共通して利用することが可能なワークスペースを提供する技術が開示されている。 In recent years, with the development of information processing technology, various information processing devices have been developed and spread. For this reason, a user holds a plurality of information processing devices, and the scene which uses the said terminal appropriately according to a use, a condition, etc. is increasing. In addition, many techniques have been proposed to improve the convenience of the user who uses a plurality of information processing devices. For example, Patent Document 1 discloses a technique for providing a work space that can be commonly used by a plurality of information processing devices.
特開２０１７－３９７４６号公報JP 2017-39746 A
　しかし、例えば、情報処理デバイス側から動的な機能提供が行われ、また機能提供の主体が複数の情報処理デバイス間を遷移する場合、特許文献１に記載の技術では、どの情報処理デバイスに上記主体が遷移したのかをユーザが把握することが困難である。 However, for example, in the case where dynamic function provision is performed from the information processing device side, and the subject of the function provision transitions between a plurality of information processing devices, in the technology described in Patent Document 1, the information processing device described above It is difficult for the user to grasp whether the subject has transitioned.
　そこで、本開示では、複数の装置間における機能提供主体の遷移状況をユーザに明確に知覚させることが可能な、新規かつ改良された情報処理装置および情報処理方法を提案する。 Thus, the present disclosure proposes a novel and improved information processing apparatus and information processing method that can make a user clearly perceive the transition situation of a function providing entity among a plurality of apparatuses.
　本開示によれば、デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御する制御部、を備え、前記制御部は、前記提供主体の遷移を実行する場合、前記遷移の状況を示す遷移情報を、前記提供主体の遷移元である遷移元デバイスに動的に出力させる、情報処理装置が提供される。 According to the present disclosure, there is provided a control unit that controls transition of a providing entity that provides a function to a user between devices, and the control unit executes the transition state of the transition when the transition of the providing entity is executed. An information processing apparatus is provided, which causes a transition source device, which is a transition source of the providing entity, to dynamically output the transition information indicated.
　また、本開示によれば、プロセッサが、デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御すること、を含み、前記制御することは、前記提供主体の遷移を実行する場合、前記遷移の状況を示す遷移情報を、前記提供主体の遷移元である遷移元デバイスに動的に出力させること、をさらに含む、情報処理方法が提供される。 Also, according to the present disclosure, the processor controls, among the devices, transition of a providing entity that provides a function to a user, wherein the controlling executes the transition of the providing entity. The information processing method is provided, further including: outputting dynamically transition information indicating the status of the transition to a transition source device that is a transition source of the providing entity.
　以上説明したように本開示によれば、複数の装置間における機能提供主体の遷移状況をユーザに明確に知覚させることが可能となる。 As described above, according to the present disclosure, it is possible to make the user clearly perceive the transition situation of the function providing entity between a plurality of devices.
　なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。 Note that the above-mentioned effects are not necessarily limited, and, along with or in place of the above-mentioned effects, any of the effects shown in the present specification, or other effects that can be grasped from the present specification May be played.
本開示の一実施形態に係る情報処理システムの構成例を示すブロック図である。It is a block diagram showing an example of composition of an information processing system concerning one embodiment of this indication. 同実施形態に係る機能構成例を示す図である。It is a figure showing an example of functional composition concerning the embodiment. 同実施形態に係る機能構成例を示す図である。It is a figure showing an example of functional composition concerning the embodiment. 同実施形態に係る機能構成例を示す図である。It is a figure showing an example of functional composition concerning the embodiment. 同実施形態に係る機能構成例を示す図である。It is a figure showing an example of functional composition concerning the embodiment. 同実施形態に係る遷移情報表示の一例を示す図である。It is a figure which shows an example of the transition information display which concerns on the embodiment. 同実施形態に係る利用可能の算出について説明するための図である。It is a figure for demonstrating calculation of availability which concerns on the embodiment. 同実施形態に係る遷移先デバイスの情報を含む遷移情報の提示について説明するための図である。It is a figure for demonstrating presentation of the transition information containing the information of the transition destination device which concerns on the embodiment. 同実施形態に係る遷移失敗時における遷移情報の提示例について説明するための図である。It is a figure for demonstrating the example of presentation of the transition information at the time of the transition failure which concerns on the embodiment. 同実施形態に係る遷移の処理に掛かる時間が所定時間以上経過した場合における遷移情報の提示例について説明するための図である。It is a figure for demonstrating the example of presentation of transition information in, when the time concerning the process of the transition which concerns on the embodiment takes more than predetermined time. 同実施形態に係るマルチユーザおよびマルチタスクに係る遷移情報の提示例について説明するための図である。It is a figure for demonstrating the example of presentation of the transition information which concerns on the multi user and multi task which concern on the embodiment. 同実施形態に係る遷移情報提示の具体例を示す図である。It is a figure which shows the specific example of the transition information presentation concerning the embodiment. 同実施形態に係る遷移情報提示の具体例を示す図である。It is a figure which shows the specific example of the transition information presentation concerning the embodiment. 同実施形態に係る遷移情報提示の具体例を示す図である。It is a figure which shows the specific example of the transition information presentation concerning the embodiment. 同実施形態に係る遷移情報提示の具体例を示す図である。It is a figure which shows the specific example of the transition information presentation concerning the embodiment. 同実施形態に係る遷移情報提示の具体例を示す図である。It is a figure which shows the specific example of the transition information presentation concerning the embodiment. 同実施形態に係る情報処理サーバの動作の流れを示すフローチャートである。It is a flowchart which shows the flow of operation | movement of the information processing server which concerns on the embodiment. 本開示の一実施形態に係るハードウェア構成例を示す図である。It is a figure showing an example of hardware constitutions concerning one embodiment of this indication.
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。 Hereinafter, preferred embodiments of the present disclosure will be described in detail with reference to the accompanying drawings. In the present specification and the drawings, components having substantially the same functional configuration will be assigned the same reference numerals and redundant description will be omitted.
　なお、説明は以下の順序で行うものとする。
　１．実施形態
　　１．１．背景
　　１．２．システム構成例
　　１．３．機能構成例
　　１．４．遷移情報の提示
　　１．５．遷移情報の提示に係る具体例
　　１．６．動作の流れ
　　１．７．効果
　２．ハードウェア構成例
　３．まとめ The description will be made in the following order.
1. Embodiment 1.1. Background 1.2. System configuration example 1.3. Functional configuration example 1.4. Presentation of Transition Information 1.5. Specific Example of Presentation of Transition Information 1.6. Flow of operation 1.7. Effect 2. Hardware configuration example 3. Summary
　＜１．実施形態＞
　＜＜１．１．背景＞＞
　上述したように、近年においては、複数の情報処理デバイスを所有し、用途や状況に応じて当該複数の情報処理デバイスを使い分けるシーンが増加している。上記のような情報デバイスには、例えば、エージェントデバイスが挙げられる。 <1. Embodiment>
<< 1.1. Background >>
As described above, in recent years, there are increasing scenes in which a plurality of information processing devices are owned, and the plurality of information processing devices are selectively used according to applications and situations. Examples of such information devices include agent devices.
　エージェントデバイスとは、視覚情報や音声などを用いてユーザとの対話を行いながら、種々の情報をユーザに提示する装置の総称であり、例えば、エージェントデバイスは、スマートフォン、ウェアラブルデバイス、タブレット、汎用コンピュータ、またスマートスピーカーなどにより実現される。 An agent device is a general term for an apparatus that presents various information to the user while interacting with the user using visual information, voice, etc. For example, the agent device is a smartphone, wearable device, tablet, general purpose computer Also realized by smart speakers etc.
　今後は、ユーザが、例えば、複数のエージェントデバイス（以下、単に、デバイス、とも称する）を家庭内に配置し、部屋間を移動しながらエージェント機能を継続的に利用したいケースや、エージェント機能をモバイル端末などに遷移させ、外出先で当該機能を利用したいケースが想定される。 In the future, for example, a user places a plurality of agent devices (hereinafter, also simply referred to as devices) in a home, and wants to use agent functions continuously while moving between rooms, or mobile agent functions It is assumed that there is a case where it is desired to make a transition to a terminal or the like and to use the function at the place where it is out.
　しかし、ここで、エージェント機能の遷移状況に係る情報が提示されない場合、ユーザは、どのデバイスに当該機能が遷移したのか把握することが困難である。また、遷移の都度、ユーザがエージェント機能の遷移先を指定する場合、煩雑であると共に、最適ではない遷移先をユーザが指定してしまう可能性も想定される。 However, here, when the information related to the transition state of the agent function is not presented, it is difficult for the user to grasp to which device the device has transitioned. In addition, when the user designates the transition destination of the agent function at each transition, the possibility of the user specifying the non-optimum transition destination is assumed as well as being complicated.
　本開示に係る技術思想は、上記の点に着目して発想されたものであり、複数デバイス間における機能提供主体の遷移状況をユーザに明確に把握させることを可能とする。このために、本開示の一実施形態に係る情報処理装置は、デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御する制御部、を備える。また、上記制御部は、提供主体の遷移を実行する場合、遷移の状況を示す遷移情報を、提供主体の遷移元である遷移元デバイスに動的に出力させること、を特徴の一つとする。 The technical concept according to the present disclosure is conceived based on the above points, and enables the user to clearly understand the transition situation of the function providing entity between a plurality of devices. To this end, the information processing apparatus according to an embodiment of the present disclosure includes a control unit that controls transition of a provider that provides a function to a user between devices. In addition, when the transition of the providing entity is executed, the control unit dynamically outputs transition information indicating a state of the transition to a transition source device that is a transition source of the providing entity.
　以下、本開示の一実施形態に係る情報処理装置が有する上記の特徴と当該特徴により奏される効果について詳細に説明する。 Hereinafter, the above-described features of the information processing apparatus according to an embodiment of the present disclosure and the effects achieved by the features will be described in detail.
　＜＜１．２．システム構成例＞＞
　まず、本開示の一実施形態に係る情報処理システムの構成例について説明する。図１は、本実施形態に係る情報処理システムの構成例を示すブロック図である。図１を参照すると、本実施形態に係る情報処理システムは、情報処理端末１０および情報処理サーバ２０を備える。また、情報処理端末１０および情報処理サーバ２０は、ネットワーク３０を介して、互いに通信が行えるように接続される。 << 1.2. System configuration example >>
First, a configuration example of an information processing system according to an embodiment of the present disclosure will be described. FIG. 1 is a block diagram showing an exemplary configuration of an information processing system according to the present embodiment. Referring to FIG. 1, the information processing system according to the present embodiment includes an information processing terminal 10 and an information processing server 20. Further, the information processing terminal 10 and the information processing server 20 are connected via the network 30 so that they can communicate with each other.
　（情報処理端末１０）
　本実施形態に係る情報処理端末１０は、ユーザに対する機能提供を行う提供主体となるデバイスである。情報処理端末１０が提供する機能には、例えば、エージェント機能が含まれる。本実施形態に係る情報処理端末１０は、例えば、スマートフォン、ウェアラブルデバイス、タブレット、汎用コンピュータ、またスマートスピーカーなどにより実現される。 (Information processing terminal 10)
The information processing terminal 10 according to the present embodiment is a device serving as a provider that provides functions to the user. The functions provided by the information processing terminal 10 include, for example, an agent function. The information processing terminal 10 according to the present embodiment is realized by, for example, a smartphone, a wearable device, a tablet, a general-purpose computer, a smart speaker, or the like.
　（情報処理サーバ２０）
　本実施形態に係る情報処理サーバ２０は、複数の情報処理端末１０に係る情報を統合的に管理する情報処理装置である。また、本実施形態に係る情報処理サーバ２０は、情報処理端末１０によりユーザに提供されるエージェント機能の知的処理に係る制御を行ってもよい。 (Information processing server 20)
The information processing server 20 according to the present embodiment is an information processing apparatus that manages information related to a plurality of information processing terminals 10 in an integrated manner. In addition, the information processing server 20 according to the present embodiment may perform control related to the intelligent processing of the agent function provided to the user by the information processing terminal 10.
　（ネットワーク３０）
　ネットワーク３０は、情報処理端末１０と情報処理サーバ２０とを接続する機能を有する。ネットワーク３０は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ｅｔｈｅｒｎｅｔ（登録商標）を含む各種のＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）などを含んでもよい。また、ネットワーク３０は、ＩＰ－ＶＰＮ（Ｉｎｔｅｒｎｅｔ　Ｐｒｏｔｏｃｏｌ－Ｖｉｒｔｕａｌ　Ｐｒｉｖａｔｅ　Ｎｅｔｗｏｒｋ）などの専用回線網を含んでもよい。また、ネットワーク３０は、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）など無線通信網を含んでもよい。 (Network 30)
The network 30 has a function of connecting the information processing terminal 10 and the information processing server 20. The network 30 may include the Internet, a public network such as a telephone network, a satellite communication network, various LANs (Local Area Networks) including Ethernet (registered trademark), a WAN (Wide Area Network), and the like. Also, the network 30 may include a leased line network such as an Internet Protocol-Virtual Private Network (IP-VPN). The network 30 may also include a wireless communication network such as Wi-Fi (registered trademark) or Bluetooth (registered trademark).
　以上、本開示の一実施形態に係る情報処理システムの構成例について説明した。なお、図１を用いて説明した上記の構成はあくまで一例であり、本実施形態に係る情報処理システムの構成は係る例に限定されない。本実施形態に係る情報処理システムの構成は、仕様や運用に応じて柔軟に変形可能である。 The configuration example of the information processing system according to an embodiment of the present disclosure has been described above. The configuration described above with reference to FIG. 1 is merely an example, and the configuration of the information processing system according to the present embodiment is not limited to such an example. The configuration of the information processing system according to the present embodiment can be flexibly deformed according to the specification and the operation.
　＜＜１．３．機能構成例＞＞
　次に、本開示の一実施形態に係る情報処理端末１０および情報処理サーバ２０の機能構成例について説明する。本実施形態に係る情報処理端末１０および情報処理サーバ２０の機能構成については、いくつかの形態が考えられるが、まず、図２を用いて、エージェント機能の制御に係る知的処理を情報処理端末１０により実現する場合の構成例について説明する。 << 1.3. Functional configuration example >>
Next, functional configuration examples of the information processing terminal 10 and the information processing server 20 according to an embodiment of the present disclosure will be described. Several forms of the functional configuration of the information processing terminal 10 and the information processing server 20 according to the present embodiment can be considered, but first, using FIG. 2, the intelligent processing related to the control of the agent function is an information processing terminal A configuration example in the case of realization by 10 will be described.
　図２を参照すると、本実施形態に係る情報処理端末１０は、撮像部１１０、音声入力部１２０、センサ部１３０、音声出力部１４０、表示部１５０、知的処理部１６０、デバイス情報管理部１７０、およびサーバ通信部１８０を備えてもよい。 Referring to FIG. 2, the information processing terminal 10 according to the present embodiment includes an imaging unit 110, an audio input unit 120, a sensor unit 130, an audio output unit 140, a display unit 150, an intelligent processing unit 160, and a device information management unit 170. , And a server communication unit 180.
　また、本実施形態に係る情報処理サーバ２０は、ユーザ情報管理部２１０、デバイス管理部２２０、タスク情報管理部２３０、および端末通信部２５０を備えてもよい。以下、各構成が有する基本的な機能について説明する。 Further, the information processing server 20 according to the present embodiment may include a user information management unit 210, a device management unit 220, a task information management unit 230, and a terminal communication unit 250. The basic functions of each configuration will be described below.
　（撮像部１１０）
　本実施形態に係る撮像部１１０は、ユーザや周囲環境の画像を撮像する機能を有する。撮像部１１０が撮像した画像情報は、知的処理部１６０によるユーザの識別や状態推定に用いられる。本実施形態に係る撮像部１１０は、画像を撮像することが可能な撮像装置を備える。なお、上記の画像には、静止画像のほか動画像が含まれる。 (Imaging unit 110)
The imaging unit 110 according to the present embodiment has a function of capturing an image of the user or the surrounding environment. The image information captured by the imaging unit 110 is used for identification of the user by the intelligent processing unit 160 and state estimation. The imaging unit 110 according to the present embodiment includes an imaging device capable of capturing an image. Note that the above image includes moving images as well as still images.
　（音声入力部１２０）
　本実施形態に係る音声入力部１２０は、ユーザの発話や、情報処理端末１０の周囲で発生する周囲音などの音情報を収集する機能を有する。音声入力部１２０が収集する音情報は、知的処理部１６０による音声認識などに用いられる。本実施形態に係る音声入力部１２０は、音情報を収集するための複数のマイクロフォンを備える。 (Voice input unit 120)
The voice input unit 120 according to the present embodiment has a function of collecting sound information such as an utterance of a user and an ambient sound generated around the information processing terminal 10. The sound information collected by the voice input unit 120 is used for voice recognition by the intelligent processing unit 160 and the like. The voice input unit 120 according to the present embodiment includes a plurality of microphones for collecting sound information.
　（センサ部１３０）
　本実施形態に係るセンサ部１３０は、周囲環境やユーザに関する種々のセンサ情報を収集する機能を有する。センサ部１３０が収集したセンサ情報は、例えば、知的処理部１６０によるユーザ検出やユーザの状態推定に用いられる。センサ部１３０は、例えば、赤外線センサを含む人感センサや、加速度センサ、ジャイロセンサ、地磁気センサ、などを備える。 (Sensor unit 130)
The sensor unit 130 according to the present embodiment has a function of collecting various sensor information related to the surrounding environment and the user. The sensor information collected by the sensor unit 130 is used, for example, for user detection by the intelligent processing unit 160 and state estimation of the user. The sensor unit 130 includes, for example, a human sensor including an infrared sensor, an acceleration sensor, a gyro sensor, a geomagnetic sensor, and the like.
　（音声出力部１４０）
　本実施形態に係る音声出力部１４０は、音声を含む種々の音を出力する機能を有する。本実施形態に係る音声出力部１４０は、例えば、知的処理部１６０による制御に基づいて、ユーザの発話に対する回答を音声により出力する。このために、本実施形態に係る音声出力部１４０は、スピーカやアンプなどの音声出力装置を備える。 (Voice output unit 140)
The sound output unit 140 according to the present embodiment has a function of outputting various sounds including sound. The voice output unit 140 according to the present embodiment outputs the answer to the user's utterance by voice based on the control by the intelligent processing unit 160, for example. For this purpose, the audio output unit 140 according to the present embodiment includes an audio output device such as a speaker or an amplifier.
　（表示部１５０）
　本実施形態に係る表示部１５０は、画像やテキストなどの視覚情報を出力する機能を有する。本実施形態に係る表示部１５０は、例えば、知的処理部１６０による制御に基づいて、エージェント機能の遷移状況を示す遷移情報を表示する。 (Display unit 150)
The display unit 150 according to the present embodiment has a function of outputting visual information such as an image or text. The display unit 150 according to the present embodiment displays transition information indicating the transition status of the agent function based on control by the intelligent processing unit 160, for example.
　このために、本実施形態に係る表示部１５０は、視覚情報を提示する表示デバイスなどを備える。上記の表示デバイスには、例えば、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ　Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）装置、タッチパネルなどが挙げられる。また、本実施形態に係る表示部１５０は、プロジェクション機能により視覚情報を出力してもよい。 To this end, the display unit 150 according to the present embodiment includes a display device or the like that presents visual information. Examples of the display device include a liquid crystal display (LCD) device, an organic light emitting diode (OLED) device, and a touch panel. In addition, the display unit 150 according to the present embodiment may output visual information by a projection function.
　（知的処理部１６０）
　本実施形態に係る知的処理部１６０は、エージェント機能に係る知的処理の全般を担う。知的処理部１６０は、例えば、音声入力部１２０が収集したユーザの発話に基づいて、当該発話の意図に対応した情報提供などを行う。 (Intelligent processing unit 160)
The intelligent processing unit 160 according to the present embodiment is responsible for the entire intelligent processing related to the agent function. For example, based on the user's utterance collected by the voice input unit 120, the intelligent processing unit 160 provides information corresponding to the intention of the utterance.
　また、本実施形態に係る知的処理部１６０は、デバイス（情報処理端末１０）間において、ユーザに対し機能を提供する提供主体の遷移を制御する制御部として機能する。知的処理部１６０は、提供主体の遷移を実行する場合、遷移の状況を示す遷移情報を、提供主体の遷移元である遷移元デバイスに動的に出力することを特徴の一つとする。 In addition, the intelligent processing unit 160 according to the present embodiment functions as a control unit that controls the transition of the providing entity that provides the function to the user between the devices (the information processing terminal 10). When executing the transition of the providing entity, the intelligent processing unit 160 dynamically outputs transition information indicating the state of the transition to the transition source device that is the transition source of the providing entity.
　上記の遷移情報には、例えば、提供主体の遷移に係る処理の開始、経過、または結果に関する情報が含まれてよい。知的処理部１６０は、遷移情報を例えば視覚表現を用いて表示部１５０に表示させることができる。本実施形態に係る知的処理部１６０が有する機能の詳細については別途後述する。 The above transition information may include, for example, information on the start, progress, or result of the process related to the transition of the provider. The intelligent processing unit 160 can cause the display unit 150 to display transition information using, for example, a visual expression. Details of the function of the intelligent processing unit 160 according to the present embodiment will be described later separately.
　（デバイス情報管理部１７０）
　本実施形態に係るデバイス情報管理部１７０は、情報処理端末１０に係る情報を管理する機能を有する。デバイス情報管理部１７０は、例えば、情報処理端末１０のプロパティ情報やスペック情報などを記憶する。また、デバイス情報管理部１７０は、情報処理端末１０の位置などに関する状態を管理してよい。 (Device information management unit 170)
The device information management unit 170 according to the present embodiment has a function of managing information related to the information processing terminal 10. The device information management unit 170 stores, for example, property information and specification information of the information processing terminal 10. In addition, the device information management unit 170 may manage a state regarding the position of the information processing terminal 10 or the like.
　（サーバ通信部１８０）
　本実施形態に係るサーバ通信部１８０は、ネットワーク３０を介して、情報処理サーバ２０との情報通信を行う。 (Server communication unit 180)
The server communication unit 180 according to the present embodiment performs information communication with the information processing server 20 via the network 30.
　（ユーザ情報管理部２１０）
　本実施形態に係るユーザ情報管理部２１０は、情報処理端末１０を所有するユーザの情報を統合的に管理する。ユーザ情報管理部２１０は、例えば、ユーザに関する一般情報や嗜好に関する情報、また後述するユーザコンテキストに関する情報などを記憶する。 (User information management unit 210)
The user information management unit 210 according to the present embodiment manages information of a user who owns the information processing terminal 10 in an integrated manner. The user information management unit 210 stores, for example, general information on the user, information on the preference, and information on the user context described later.
　（デバイス管理部２２０）
　本実施形態に係るデバイス管理部２２０は、複数の情報処理端末１０に関する情報を統合的に管理する。 (Device management unit 220)
The device management unit 220 according to the present embodiment manages information on a plurality of information processing terminals 10 in an integrated manner.
　（タスク情報管理部２３０）
　本実施形態に係るタスク情報管理部２３０は、エージェント機能に係るタスクの情報を統合的に管理する。タスク情報管理部２３０は、例えば、後述するタスクコンテキストに関する情報などを記憶する。 (Task information management unit 230)
The task information management unit 230 according to the present embodiment manages information of tasks related to the agent function in an integrated manner. The task information management unit 230 stores, for example, information on a task context, which will be described later.
　（端末通信部２５０）
　本実施形態に係る端末通信部２５０は、ネットワーク３０を介して複数の情報処理端末１０との情報通信を行う。 (Terminal communication unit 250)
The terminal communication unit 250 according to the present embodiment performs information communication with a plurality of information processing terminals 10 via the network 30.
　以上、エージェント機能の制御に係る知的処理を情報処理端末１０により実現する場合の構成例について説明した。次に、図３を用いて、上記の知的処理を情報処理サーバ２０により実現する場合の構成例について説明する。 The configuration example in the case where the intelligent processing related to the control of the agent function is realized by the information processing terminal 10 has been described above. Next, a configuration example in the case where the above-mentioned intelligent processing is realized by the information processing server 20 will be described using FIG.
　図３を参照すると、図２に示した構成と比較して、情報処理端末１０から知的処理部１６０の構成が削除され、情報処理サーバ２０に新たに知的処理部２４０が追加されていることがわかる。 Referring to FIG. 3, compared with the configuration shown in FIG. 2, the configuration of intelligent processing unit 160 is deleted from information processing terminal 10, and intelligent processing unit 240 is newly added to information processing server 20. I understand that.
　この場合、知的処理部２４０は、ネットワーク３０を介して、情報処理端末１０が収集した各種の情報を受信することで、エージェント機能に係る知的処理を実行し、また情報処理端末１０による出力を制御するための制御信号を生成することができる。 In this case, the intelligent processing unit 240 executes various types of information collected by the information processing terminal 10 via the network 30 to execute intelligent processing related to the agent function, and also outputs the information processing terminal 10 Control signals can be generated to control the
　また、情報処理サーバ２０は、生成した上記の制御信号を情報処理端末１０に送信することで、情報処理端末１０が備える音声出力部１４０や表示部１５０による出力を制御する。 In addition, the information processing server 20 transmits the generated control signal to the information processing terminal 10 to control the output of the audio output unit 140 or the display unit 150 included in the information processing terminal 10.
　また、図４は、エージェント機能に係る知的処理が情報処理端末１０により実現され、また、情報の入出力に係る構成が複数の情報処理端末１０により分散されて実現される場合の構成例を示す図である。 Further, FIG. 4 shows a configuration example in the case where the intelligent processing related to the agent function is realized by the information processing terminal 10 and the configuration related to the input / output of information is realized by being dispersed by the plurality of information processing terminals 10 FIG.
　図４に示す一例の場合、図２を用いて説明した構成が、知的処理部１６０、音声入力部１２０、センサ部１３０、および音声出力部１４０を備える情報処理端末１０ａと、撮像部１１０および表示部１５０を備える情報処理端末１０ｂに分散されて実現されている。 In the example illustrated in FIG. 4, the configuration described with reference to FIG. 2 includes the information processing terminal 10 a including the intelligent processing unit 160, the voice input unit 120, the sensor unit 130, and the voice output unit 140; The information processing terminal 10 b including the display unit 150 is realized by being dispersed.
　この場合、情報処理端末１０ａの知的処理部１６０は、ネットワーク３０を介して、情報処理端末１０ｂの撮像部１１０が撮像した画像情報を受信し、またネットワーク３０を介して、情報処理端末１０の表示部１５０を制御することが可能である。 In this case, the intelligent processing unit 160 of the information processing terminal 10 a receives the image information captured by the imaging unit 110 of the information processing terminal 10 b via the network 30, and also receives the image information of the information processing terminal 10 via the network 30. It is possible to control the display unit 150.
　また、図５は、エージェント機能に係る知的処理が情報処理端末１０および情報処理サーバ２０の両者により実現される場合の構成例を示す図である。図５に示す一例の場合、情報処理端末１０が知的処理部１６０を、情報処理サーバ２０が知的処理部２４０をそれぞれ備えている。 Further, FIG. 5 is a diagram showing a configuration example in the case where the intelligent processing related to the agent function is realized by both the information processing terminal 10 and the information processing server 20. In the example shown in FIG. 5, the information processing terminal 10 includes the intelligent processing unit 160, and the information processing server 20 includes the intelligent processing unit 240.
　この場合、情報処理端末１０の知的処理部１６０は、例えば、撮像部１１０などが収集した情報を統合し情報処理端末１０やユーザの状態などを認識し、認識した情報をサーバ通信部１８０およびネットワーク３０を介して、情報処理サーバ２０に送信する。 In this case, for example, the intelligent processing unit 160 of the information processing terminal 10 integrates information collected by the imaging unit 110 and the like, recognizes the state of the information processing terminal 10 and the user, and the like. It is transmitted to the information processing server 20 via the network 30.
　また、情報処理サーバ２０は、受信した認識情報や各管理部が記憶するユーザ情報（ユーザコンテキスト）、デバイス管理情報、タスク情報（タスクコンテキスト）に基づいて、エージェント機能の遷移先となる情報処理端末１０を決定し、当該遷移に係る制御信号や、遷移情報を情報処理端末１０に送信してよい。 In addition, the information processing server 20 is an information processing terminal to which the agent function is to be transferred based on the received recognition information, user information (user context) stored by each management unit, device management information, and task information (task context). 10 may be determined, and a control signal related to the transition and transition information may be transmitted to the information processing terminal 10.
　以上、図２～図５を用いて、本開示の一実施形態に係る情報処理端末１０および情報処理サーバ２０の機能構成例について説明した。このように、本実施形態に係る機能構成は、種々の形態により実現され得る。なお、以下においては、図５に示す構成、すなわち、情報処理端末１０および情報処理サーバ２０の両者によりエージェント機能に係る知的処理が実現される場合を基に説明を行う。一方、以下において、知的処理部２４０の機能として説明される機能は、情報処理端末１０の知的処理部１６０により実現されてもよい。本実施形態に係る機能構成は、仕様や運用に応じて柔軟に変形可能である。 In the above, the function configuration example of the information processing terminal 10 and the information processing server 20 according to an embodiment of the present disclosure has been described using FIGS. 2 to 5. Thus, the functional configuration according to the present embodiment can be realized in various forms. In the following, description will be made based on the configuration shown in FIG. 5, that is, a case where intelligent processing related to the agent function is realized by both the information processing terminal 10 and the information processing server 20. On the other hand, the function described below as the function of the intelligent processing unit 240 may be realized by the intelligent processing unit 160 of the information processing terminal 10. The functional configuration according to the present embodiment can be flexibly deformed according to the specification and the operation.
　＜＜１．４．遷移情報の提示＞＞
　次に、本実施形態に係る遷移情報の提示について詳細に説明する。本実施形態に係る知的処理部２４０は、ユーザに対し機能を提供する提供主体の遷移を制御し、また当該遷移の状況を示す遷移情報を、遷移元である遷移元デバイス（情報処理端末１０）に動的に出力させる機能を有する。上述したように、上記機能は、エージェント機能であってもよい。 << 1.4. Presentation of transition information >>
Next, presentation of transition information according to the present embodiment will be described in detail. The intelligent processing unit 240 according to the present embodiment controls the transition of the provider providing the function to the user, and the transition information indicating the status of the transition is the transition source device (information processing terminal 10) that is the transition source. Dynamically). As mentioned above, the function may be an agent function.
　ここで、エージェントとは、人に代わり、ユーザの種々の要求に応えるバーチャルな人的存在と考えることができる。このため、本実施形態に係る知的処理部２４０は、エージェントの存在を視覚化したうえで、遷移に係る処理の開始、経過または結果を含む遷移情報を情報処理端末１０に出力させてもよい。 Here, the agent can be considered as a virtual human existence that responds to various requests of the user instead of a person. Therefore, the intelligent processing unit 240 according to the present embodiment may cause the information processing terminal 10 to output transition information including the start, the progress, or the result of the process related to the transition after visualizing the presence of the agent. .
　図６は、本実施形態に係る遷移情報表示の一例を示す図である。図６では、図中左が遷移前の状態を、図中中央が遷移過程の状態を、図中右が遷移が完了した場合の状態をそれぞれ示している。 FIG. 6 is a view showing an example of transition information display according to the present embodiment. In FIG. 6, the left in the drawing shows the state before transition, the middle in the drawing shows the state of the transition process, and the right in the drawing shows the state when the transition is completed.
　例えば、図６の上段に示す一例の場合、知的処理部２４０は、まず、遷移前のエージェントの状態を示すオブジェクトＡＯを表示部１５０に表示させる。また、知的処理部２４０は、遷移の経過に伴い、オブジェクトＡＯが表示領域外に向かって徐々に移動し、遷移の完了時には、オブジェクトＡＯが表示領域から抜け出るようなフェードアウト表現を演出することで、ユーザに機能遷移が行われたことを示してもよい。この際、知的処理部２４０は、オブジェクトＡＯの色や模様を徐々に薄くするなどの表示を表示部１５０に行わせてもよい。 For example, in the case of an example shown in the upper part of FIG. 6, the intelligent processing unit 240 first causes the display unit 150 to display an object AO indicating the state of the agent before transition. In addition, the intelligent processing unit 240 causes the object AO to gradually move toward the outside of the display area with the progress of the transition, and produces a fade-out expression such that the object AO exits the display area when the transition is completed. , And may indicate to the user that a function transition has occurred. At this time, the intelligent processing unit 240 may cause the display unit 150 to perform display such as gradually reducing the color or pattern of the object AO.
　なお、知的処理部２４０は、エージェント機能の遷移処理が完了した後に、図示するようないイメージを表示部１５０に表示させてもよい。一方、この場合、遷移経過に係る状況が把握できなくなるため、遷移が始まった際に、上記のようなフェードアウト演出が開始し、遷移の完了時に当該フェードアウト演出が完了するように制御が行われてもよい。 The intelligent processing unit 240 may cause the display unit 150 to display an image (not shown) after the transition process of the agent function is completed. On the other hand, in this case, since the situation relating to the transition progress can not be grasped, when the transition starts, the above-mentioned fade-out effect starts, and the control is performed such that the fade-out effect is completed when the transition is completed. It is also good.
　また、知的処理部２４０は、遷移状態を音により表現することも可能である。知的処理部２４０は、例えば、遷移処理の経過に伴い、遷移元の音声出力部１４０に出力させる音の大きさを徐々に低下させ、また反対に、遷移先の音声出力部１４０に出力させる音を徐々に大きくすることで、遷移状態を表現してもよい。この場合、知的処理部２４０は、時間軸で変化のある音（無音部分を含んでもよい）を遷移元および遷移先の音声出力部１４０で同期させながらフェードアウトおよびフェードインを制御することで、ユーザがより把握しやすい遷移状況の提示を実現することができる。 The intelligent processing unit 240 can also express the transition state by sound. For example, with the progress of the transition processing, the intelligent processing unit 240 gradually reduces the magnitude of the sound to be output to the audio output unit 140 of the transition source, and, conversely, causes the audio output unit 140 of the transition destination to output. The transition state may be expressed by gradually increasing the sound. In this case, the intelligent processing unit 240 controls fade-out and fade-in while synchronizing the sound (which may include a silent portion) having a change in time axis with the audio output unit 140 of the transition source and the transition destination. It is possible to realize the presentation of transition situations that the user can easily grasp.
　また、知的処理部２４０は、図６の下段に示すように、遷移元デバイス、すなわち遷移元の情報処理端末１０に対応する視覚表現を表示部１５０に表示させてもよい。図６の下段に示す一例の場合、知的処理部２４０は、遷移元の情報処理端末１０の形状を模したアイコンＤＩを表示部１５０に表示させ、アイコンＤＩからオブジェクトＡＯが抜け出ていくような演出を制御している。このように、本実施形態に係る知的処理部２４０は、遷移元の情報処理端末１０を視覚化することで、ユーザがより把握しやすい遷移状況の提示を実現することができる。 Further, as shown in the lower part of FIG. 6, the intelligent processing unit 240 may cause the display unit 150 to display a visual representation corresponding to the transition source device, ie, the information processing terminal 10 of the transition source. In the example shown in the lower part of FIG. 6, the intelligent processing unit 240 causes the display unit 150 to display the icon DI imitating the shape of the information processing terminal 10 of the transition source, such that the object AO escapes from the icon DI. Control the production. As described above, by visualizing the information processing terminal 10 of the transition source, the intelligent processing unit 240 according to the present embodiment can realize the presentation of the transition situation which is easier for the user to grasp.
　以上、本実施形態に係る遷移情報の提示に関し一例を述べた。知的処理部２４０は、例えば、ユーザによりエージェント機能の遷移が指示された際、指定された遷移先デバイスへの遷移処理を実行し、また上記のような遷移情報の出力制御を行ってもよい。 An example has been described above regarding the presentation of transition information according to the present embodiment. For example, when the user instructs transition of the agent function, the intelligent processing unit 240 may execute transition processing to the designated transition destination device, and may perform output control of transition information as described above. .
　一方、ユーザが所有する情報処理端末１０の数が多い場合などにおいては、ユーザが都度遷移先デバイスを指定することが煩雑であるため、知的処理部２４０が状況に適した遷移先を動的に選択することが望ましい。 On the other hand, when the number of information processing terminals 10 owned by the user is large, it is troublesome for the user to designate the transition destination device each time, so the intelligent processing unit 240 dynamically changes the transition destination suitable for the situation. It is desirable to choose
　このために、本実施形態に係る知的処理部２４０は、遷移先の候補となる複数の候補デバイスに係る利用可能度を算出し、当該利用可能度に基づいて、複数の候補デバイスの中から、状況に適した遷移先を選択する機能を有してよい。ここで、上記の利用可能度とは、遷移先としての適性を示すスコアであってよい。 To this end, the intelligent processing unit 240 according to the present embodiment calculates the availability for a plurality of candidate devices that are candidates for the transition destination, and based on the availability, the plurality of candidate devices are selected. , And may have a function of selecting a transition destination suitable for the situation. Here, the above-mentioned availability may be a score indicating suitability as a transition destination.
　この際、知的処理部２４０は、例えば、遷移元デバイスの周囲に存在する情報処理端末１０に係るデバイス情報や、ユーザやタスクに係るコンテキスト情報に基づいて、利用可能度を算出し、当該利用可能度のスコアが最も高い情報処理端末１０を遷移先デバイスとして選択することができる。 At this time, the intelligent processing unit 240 calculates the availability based on, for example, device information related to the information processing terminal 10 existing around the transition source device, and context information related to the user or task, The information processing terminal 10 with the highest possibility score can be selected as the transition destination device.
　図７は、本実施形態に係る利用可能の算出について説明するための図である。図７に示すように、本実施形態に係るデバイス情報は、デバイスのプロパティ、状態、位置、スペックに関する情報を含む。上記のプロパティには、情報処理端末１０を所有するユーザごとに定義される情報であり、例えば、情報処理端末１０の所有ユーザ、ユーザが設定したデバイス名称、情報処理端末１０の購入日などが含まれる。知的処理部２４０は、例えば、購入日が新しい情報処理端末１０の利用可能度がより高くなるよう算出を行ってもよい。 FIG. 7 is a diagram for explaining calculation of availability according to the present embodiment. As shown in FIG. 7, the device information according to the present embodiment includes information on device properties, states, positions, and specifications. The above properties are information defined for each user who owns the information processing terminal 10, and includes, for example, the user who owns the information processing terminal 10, the device name set by the user, the purchase date of the information processing terminal 10, and the like. Be For example, the intelligent processing unit 240 may perform calculation so that the availability of the information processing terminal 10 having a new purchase date becomes higher.
　また、本実施形態に係るデバイス位置には、情報処理端末１０が置かれている絶対位置、利用ユーザとの相対位置、また、想定位置への近さなどが挙げられる。ここで、上記の想定位置とは、情報処理端末１０を正しく利用できる位置を示し、例えば、情報処理端末１０がウェアラブルデバイスなどである場合、ユーザに装着されている状態などを示す。知的処理部２４０は、例えば、ユーザや想定位置に近い情報処理端末１０の利用可能度がより高くなるよう算出を行ってもよい。 Further, the device position according to the present embodiment includes an absolute position where the information processing terminal 10 is placed, a relative position with respect to the user, a proximity to an assumed position, and the like. Here, the above-described assumed position indicates a position where the information processing terminal 10 can be used properly, and for example, when the information processing terminal 10 is a wearable device or the like, it indicates a state of being worn by the user. The intelligent processing unit 240 may calculate, for example, the availability of the information processing terminal 10 closer to the user or the assumed position is higher.
　また、本実施形態に係るデバイスのスペックは、情報処理端末１０の性能を示す情報であり、例えば、音声入力部１２０や音声出力部１４０の有無、表示部１５０の大きさ、発売日などの情報を含む。知的処理部２４０は、例えば、性能が高い情報処理端末１０の利用可能度がより高くなるよう算出を行ってもよい。 The specifications of the device according to the present embodiment are information indicating the performance of the information processing terminal 10. For example, information such as the presence or absence of the voice input unit 120 or the voice output unit 140, the size of the display unit 150, and the release date including. The intelligent processing unit 240 may calculate, for example, the availability of the information processing terminal 10 with high performance is higher.
　また、本実施形態に係るデバイスの状態には、例えば、電源のＯＮ／ＯＦＦ、バッテリー残量、充電中であるか否かなどの状態が挙げられる。知的処理部２４０は、例えば、バッテリー残量が多い情報処理端末１０の利用可能度がより高くなるよう算出を行ってもよい。 Further, the state of the device according to the present embodiment includes, for example, states such as power ON / OFF, battery remaining amount, whether charging is in progress, and the like. For example, the intelligent processing unit 240 may perform calculation so that the availability of the information processing terminal 10 having a large amount of remaining battery power is higher.
　また、図７に示すように、本実施形態に係るコンテキスト情報は、ユーザコンテキスト、タスクコンテキスト、また関係コンテキストに関する情報を含む。本実施形態に係るユーザコンテキストは、エージェント機能を利用するユーザに関するコンテキストを示し、例えば、移動を含むユーザ動作状態、情報処理端末１０とのユーザとの距離、ユーザの予定などに関する情報を広く含む。知的処理部２４０は、例えば、ユーザがこの後予定している行動に適した情報処理端末１０の利用可能度がより高くなるよう算出を行ってもよい。 Further, as shown in FIG. 7, context information according to the present embodiment includes information on a user context, a task context, and a relation context. The user context according to the present embodiment indicates a context regarding a user who uses the agent function, and widely includes, for example, information regarding a user operation state including movement, a distance to the information processing terminal 10 with the user, a schedule of the user, and the like. The intelligent processing unit 240 may calculate, for example, the availability of the information processing terminal 10 suitable for the action scheduled by the user later becomes higher.
　また、本実施形態に係るタスクコンテキストは、エージェント機能が実行するタスクに関する情報を含む。タスクコンテキストには、例えば、タスク種別や、過去にタスクが実行された回数、総時間などの情報を含む。知的処理部２４０は、例えば、過去に同一のタスクを多数実行している情報処理端末１０の利用可能度がより高くなるよう算出を行ってもよい。 In addition, the task context according to the present embodiment includes information on the task executed by the agent function. The task context includes, for example, information such as the task type, the number of times the task has been executed in the past, and the total time. For example, the intelligent processing unit 240 may perform calculation so that the availability of the information processing terminal 10 that has executed many identical tasks in the past becomes higher.
　また、本実施形態に係る関係コンテキストとは、ユーザ間の関係に係るコンテキストを示す。関係コンテストの一例としては、例えば、ユーザ間の物理的な距離の近さ、ユーザ間の人間関係の近さ（親密度など）、過去に他のユーザが所有する情報処理端末１０にエージェント機能を遷移させた回数または時間などの情報が挙げられる。知的処理部２４０は、例えば、エージェント機能を利用するユーザとより親密度が高い別のユーザが所有する情報処理端末１０の利用可能度がより高くなるよう算出を行ってもよい。 Moreover, the relation context which concerns on this embodiment shows the context which concerns on the relation between users. As an example of the relation contest, for example, closeness of physical distance between users, closeness of human relation between users (such as closeness), an agent function to the information processing terminal 10 owned by another user in the past Information such as the number of times of transition or time is included. For example, the intelligent processing unit 240 may perform calculation so that the availability of the information processing terminal 10 owned by another user who is more familiar with the user using the agent function is higher.
　以上、本実施形態に係る利用可能度の算出について説明した。このように、本実施形態に係る知的処理部２４０は、種々の情報に基づいて、総合的に利用可能度を算出し、状況ごとに適切な遷移先デバイスを選択することが可能である。 The calculation of the availability according to the present embodiment has been described above. As described above, the intelligent processing unit 240 according to the present embodiment can comprehensively calculate the availability based on various information, and can select an appropriate transition destination device for each situation.
　次に、図８を用いて本実施形態に遷移先デバイスの情報を含む遷移情報の提示について説明する。図８では、図中左の１画面が遷移前の状態を、図中中央の２画面が遷移過程の状態を、図中右の１画面が遷移が完了した場合の状態をそれぞれ示している。 Next, presentation of transition information including information of a transition destination device in the present embodiment will be described with reference to FIG. In FIG. 8, the left one screen in the drawing shows the state before transition, the two middle screens in the drawing show the state of transition process, and the one in the right side shows the state when the transition is completed.
　ユーザの指示に依らず遷移先となる情報処理端末１０（遷移先デバイス）を動的に選択する場合、知的処理部２４０は、図８に示すように、遷移先の候補となる情報処理端末１０（候補デバイス）のすべてまたは一部を表示部１５０に表示させ、また、候補デバイスの中から選択された遷移先デバイスにエージェント機能が遷移するような演出を制御してもよい。 When dynamically selecting the information processing terminal 10 (transition destination device) to be the transition destination regardless of the instruction of the user, the intelligent processing unit 240 is an information processing terminal to be a candidate of the transition destination as shown in FIG. All or a part of the ten (candidate devices) may be displayed on the display unit 150, and an effect may be controlled such that the agent function transitions to a transition destination device selected from among the candidate devices.
　図８に示す一例は、知的処理部２４０は、エージェント機能を示すオブジェクトＡＯが、アイコンＤＩ１により示される遷移元デバイスから、アイコンＤＩ２およびＤＩ３により示される候補デバイスのうち、アイコンＤＩ２により示される遷移先デバイスに移動するような表示を表示部１５０に実行させている。この際、知的処理部２４０は、図６に示した一例とは異なり、オブジェクトＡＯを表示部１５０の表示領域外にフェードアウトさせる必要はなく、遷移先デバイスに対応するアイコンＤＩ２にオブジェクトＡＯが重畳するような表示や、アイコンＤＩ２の脇にオブジェクトＡＯが移動するような演出を制御してよい。 In an example shown in FIG. 8, in the intelligent processing unit 240, an object AO indicating an agent function is indicated by an icon DI2 among the candidate devices indicated by the icons DI2 and DI3 from the transition source device indicated by the icon DI1. The display unit 150 is caused to execute display such as moving to the destination device. At this time, unlike the example shown in FIG. 6, it is not necessary for the intelligent processing unit 240 to fade out the object AO out of the display area of the display unit 150, and the object AO is superimposed on the icon DI2 corresponding to the transition destination device. It is possible to control such a display or an effect that the object AO moves to the side of the icon DI2.
　また、この際、知的処理部２４０は、候補デバイスに係るコンテキスト情報の一部をアイコンと対応付けて表示させてもよい。図８に示す一例の場合、知的処理部２４０は、各候補デバイスのバッテリー残量に関する情報をアイコンＤＩ２およびＤＩ３に対応づけて表示させている。なお、知的処理部２４０は、図示する例に限定されず、例えば、候補デバイスの位置に関するコンテキストを表示させてもよい。知的処理部２４０は、例えば、アイコンＤＩ２に対応する候補デバイスが鞄の中にあり、アイコンＤＩ３に対応する候補デバイスがユーザにより装着中であることなどを、各アイコンと対応付けて表示させてもよい。本実施形態に係る知的処理部２４０が有する上記の機能によれば、候補デバイスの中から遷移先デバイスが選択された理由をユーザが把握することが可能となる。 At this time, the intelligent processing unit 240 may display a part of the context information related to the candidate device in association with the icon. In the example shown in FIG. 8, the intelligent processing unit 240 displays information on the remaining battery capacity of each candidate device in association with the icons DI2 and DI3. The intelligent processing unit 240 is not limited to the illustrated example, and may display, for example, a context related to the position of the candidate device. The intelligent processing unit 240 displays, for example, that the candidate device corresponding to the icon DI2 is in the bag and the candidate device corresponding to the icon DI3 is being worn by the user in association with each icon. It is also good. According to the above-described function of the intelligent processing unit 240 according to the present embodiment, the user can understand the reason why the transition destination device is selected from the candidate devices.
　また、図８に示すような候補デバイス、遷移先デバイスを含む遷移情報の提示を行う場合、知的処理部２４０は、エージェント機能の遷移が開始され、遷移中の状態となった際に、遷移情報を表示部１５０に表示させる。この際、知的処理部２４０は、候補デバイスに対応するアイコンの表示が、所定時間の経過により消えるよう制御を行ってもよい。また、知的処理部２４０は、例えば、ユーザが、「確認したよ」などの発話を行ったことが検出された場合に、候補デバイスに対応するアイコンの表示を消す制御を行ってもよい。 In addition, when presenting transition information including candidate devices and transition destination devices as shown in FIG. 8, the intelligent processing unit 240 starts the transition of the agent function and transitions to the state during transition. Information is displayed on the display unit 150. At this time, the intelligent processing unit 240 may perform control such that the display of the icon corresponding to the candidate device disappears after a predetermined time has elapsed. Also, for example, when it is detected that the user has made an utterance such as “confirmed,” the intellectual processing unit 240 may perform control to turn off the display of the icon corresponding to the candidate device.
　次に、図９を用いて、本実施形態に係る遷移失敗時における遷移情報の提示例について説明する。図９では、図中左の１画面が遷移前の状態を、図中中央の２画面が遷移過程の状態を、図中右の１画面が遷移が失敗した場合の状態をそれぞれ示している。 Next, an example of presenting transition information at the time of transition failure according to the present embodiment will be described using FIG. In FIG. 9, the left one screen in the drawing shows the state before transition, the two middle screens in the drawing show the state of the transition process, and the right one screen in the drawing shows the state when the transition fails.
　上述したように、本実施形態に係る知的処理部２４０は、種々の情報に基づき利用可能度を算出し遷移先デバイスを選択するが、実際には、遷移を試みた際に正常に遷移が行えない場合も想定される。 As described above, the intelligent processing unit 240 according to the present embodiment calculates the availability based on various pieces of information and selects the transition destination device, but actually, when transition is attempted, the transition is normally made. It is also assumed that it can not be done.
　このため、本実施形態に係る知的処理部２４０は、遷移が正常に完了できない場合、図９に示すように、遷移先デバイスに対応するアイコンＤＩ２付近まで移動させたオブジェクトＡＯが遷移元デバイスに対応するアイコンＤＩ１側に引き返すような演出に加え、エラーの発生を示す文言やアイコンなどを表示部１５０に表示させてよい。また、知的処理部２４０は、エラーの発生を示す音声を音声出力部１４０に出力させてもよい。 Therefore, when the transition can not be completed normally, the intelligent processing unit 240 according to the present embodiment causes the object AO moved to the vicinity of the icon DI2 corresponding to the transition destination device to be the transition source device as shown in FIG. In addition to the effect of returning to the corresponding icon DI1, the display unit 150 may display a word or an icon indicating the occurrence of an error. Also, the intelligent processing unit 240 may cause the voice output unit 140 to output a voice indicating the occurrence of an error.
　本実施形態に係る知的処理部２４０が有する上記の機能によれば、遷移が失敗したことをユーザが明確に把握することができ、例えば、他の情報処理端末１０への遷移を指示するなどの対応を行うことが可能となる。なお、図９では、知的処理部２４０が、遷移先デバイスや候補デバイスに対応するアイコンを表示部１５０に表示させる場合を例に述べたが、知的処理部２４０は、遷移先デバイスや候補デバイスに対応するアイコンの表示なしに、上記のようなエラーに関する表示や音声出力を表示部１５０や音声出力部１４０に行わせてもよい。 According to the above-described function of the intelligent processing unit 240 according to the present embodiment, the user can clearly understand that the transition has failed, for example, instructing the transition to another information processing terminal 10, etc. It is possible to take action. Although FIG. 9 describes the case where the intelligent processing unit 240 causes the display unit 150 to display an icon corresponding to the transition destination device or the candidate device, the intelligent processing unit 240 does not require the transition destination device or the candidate. The display unit 150 or the audio output unit 140 may cause the display unit 150 or the audio output unit 140 to perform display and audio output relating to an error as described above without displaying an icon corresponding to the device.
　次に、図１０を用いて、遷移の処理に掛かる時間が所定時間以上経過した場合における遷移情報の提示例について説明する。図１０では、図中左の１画面が遷移前の状態を、図中中央の２画面が遷移過程の状態を、図中右の１画面が遷移が失敗した場合の状態をそれぞれ示している。 Next, with reference to FIG. 10, an example of presenting transition information in the case where the time taken to process the transition has exceeded a predetermined time will be described. In FIG. 10, the left one screen in the figure shows the state before transition, the two middle screens in the figure show the state of the transition process, and the right one screen in the figure shows the state when the transition fails.
　遷移の処理に掛かる時間が所定時間以上経過した場合、知的処理部２４０は、例えば、遷移過程の状態を示す図中中央向かって右の画面に示すように、オブジェクトＡＯが、左右または上下などに揺れるような演出を表示部１５０に継続して表示させる。知的処理部２４０は、予め定められた所定時間が経過した場合、上記のような表示を開始させてよい。また、知的処理部２４０は、遷移が正常に完了するか、またはエラーの発生が検出されるまで、上記の演出を継続して実行させる。図１０に示す一例の場合、エラーの発生が検出されたことにより、知的処理部２４０が、時間経過に係る演出を停止させ、エラー表示を表示部１５０に表示させている。 When the time taken to process the transition has exceeded a predetermined time, the intelligent processing unit 240 displays, for example, the object AO in the horizontal or vertical direction, as shown on the right screen toward the center of the drawing showing the state of the transition process. The display unit 150 continuously displays an effect such as shaking. The intelligent processing unit 240 may start the display as described above when a predetermined time which has been determined in advance has elapsed. In addition, the intellectual processing unit 240 continues to execute the above-mentioned effect until the transition is normally completed or the occurrence of an error is detected. In the example shown in FIG. 10, when the occurrence of an error is detected, the intelligent processing unit 240 stops the effect relating to the passage of time and causes the display unit 150 to display an error display.
　本実施形態に係る知的処理部２４０が有する上記の機能によれば、遷移の経過に係る状態をユーザが明確に把握することが可能となる。なお、図１０では、知的処理部２４０が、遷移先デバイスや候補デバイスに対応するアイコンを表示部１５０に表示させる場合を例に述べたが、知的処理部２４０は、遷移先デバイスや候補デバイスに対応するアイコンの表示なしに、上記のような時間経過に関する表示を表示部１５０に行わせてもよい。 According to the above-described function of the intelligent processing unit 240 according to the present embodiment, it is possible for the user to clearly grasp the state related to the progress of the transition. In FIG. 10, although the case where the intelligent processing unit 240 causes the display unit 150 to display an icon corresponding to the transition destination device or the candidate device is described as an example, the intelligent processing unit 240 may be configured to display the transition destination device or the candidate The display unit 150 may cause the display unit 150 to display the elapsed time as described above without displaying the icon corresponding to the device.
　次に、図１１を用いて、マルチユーザおよびマルチタスクに係る遷移情報の提示例について説明する。図１１では、図中左の１画面が遷移前の状態を、図中中央の２画面が遷移過程の状態を、図中右の１画面が遷移が失敗した場合の状態をそれぞれ示している。 Next, an example of presentation of transition information related to multi-user and multi-task will be described using FIG. In FIG. 11, one screen on the left in the figure shows a state before transition, two screens at the center in the figure show a state of transition process, and one screen on the right in the figure shows a state when the transition fails.
　本実施形態に係る知的処理部２４０は、遷移の対象となる機能、すなわちタスクごとに遷移情報の表示を制御することができ、また各タスクの対象となるユーザと遷移情報とを対応付けて表示部１５０に表示させることが可能である。 The intelligent processing unit 240 according to the present embodiment can control the display of transition information for each function that is the target of transition, that is, for each task, and associates the target user of each task with the transition information. It can be displayed on the display unit 150.
　図１１に示す一例の場合、知的処理部２４０は、３つのタスクにそれぞれ対応するオブジェクトＡＯ１～ＡＯ３を異なる色で表示させ、また各タスクの対象ユーザを対応する顔のアイコンにより表現している。 In the example shown in FIG. 11, the intelligent processing unit 240 displays the objects AO1 to AO3 corresponding to the three tasks in different colors, and expresses the target user of each task by the icon of the corresponding face. .
　また、知的処理部２４０は、オブジェクトＡＯ１のみをアイコンＤＩ２に移動させることで、３つのタスクのうちオブジェクトＡＯ１に対応するタスクのみが、遷移先デバイスに遷移することを表現している。なお、知的処理部２４０は、例えば、各タスクに対応するオブジェクトＡＯ１～ＡＯ３に対応付けてタスク種別を示す文言などを表示させてもよい。 Further, the intelligent processing unit 240 moves only the object AO1 to the icon DI2, thereby expressing that only the task corresponding to the object AO1 among the three tasks transits to the transition destination device. The intelligent processing unit 240 may display, for example, texts indicating task types in association with the objects AO1 to AO3 corresponding to the respective tasks.
　このように、本実施形態に係る知的処理部２４０によれば、複数のタスクが存在し、また各タスクの対象となるユーザが複数祖納する場合であっても、どのユーザを対象としたどのタスクが、遷移先に遷移するのかをユーザに明確に把握させることができる。 As described above, according to the intelligent processing unit 240 according to the present embodiment, even when there are a plurality of tasks and a plurality of users targeted by each task receive multiple tasks, which user is targeted The user can clearly understand which task is transitioned to the transition destination.
　＜＜１．５．遷移情報の提示に係る具体例＞＞
　以上、本実施形態に係る知的処理部２４０が有する機能について詳細に説明した。続いて、本実施形態に係る知的処理部２４０による遷移情報提示の制御について、具体的を挙げながら説明を続ける。図１２～図１６は、本実施形態に係る遷移情報提示の具体例を示す図である。 << 1.5. Specific Example of Presentation of Transition Information >>
Heretofore, the functions of the intelligent processing unit 240 according to the present embodiment have been described in detail. Subsequently, the control of the transition information presentation by the intelligent processing unit 240 according to the present embodiment will be described while giving a specific example. 12 to 16 show specific examples of transition information presentation according to the present embodiment.
　図１２は、知的処理部２４０が、ユーザＵの外出を検知し、エージェント機能をモバイルデバイスに遷移させる場合の一例を示す図である。 FIG. 12 is a diagram illustrating an example in which the intelligent processing unit 240 detects that the user U is out, and causes the agent function to transition to the mobile device.
　図１２には、ユーザＵが、据え置き型の情報処理端末１０ａが提供するエージェント機能を利用して、恋人と外出する先のスポットを探しているが、約束の時間を考慮するとそろそろ家を出る必要がある状況が示されている。 In FIG. 12, the user U uses the agent function provided by the stationary information processing terminal 10a to search for a spot ahead with his lover, but it is necessary to leave the house in consideration of the promised time There is a situation shown.
　ここで、外出先でもエージェント機能を継続して用いるためには、ユーザＵが所有するスマートフォン型の情報処理端末１０ｃに当該エージェント機能を遷移させることが望ましい。この際、ユーザＵは、情報処理端末１０ｃにエージェント機能を遷移させるように、情報処理端末１０ａに明示的に指示してもよいが、上述したように、本実施形態に知的処理部２４０は、遷移の実行要否および遷移先デバイスを自動で判断することが可能である。 Here, in order to continue to use the agent function even when away from home, it is desirable to make the agent function transition to the smart phone type information processing terminal 10 c owned by the user U. At this time, the user U may explicitly instruct the information processing terminal 10a to cause the information processing terminal 10c to transition the agent function, but as described above, the intelligent processing unit 240 performs the process according to the present embodiment. It is possible to automatically determine whether or not to execute the transition and the transition destination device.
　この場合、知的処理部２４０は、例えば、取得したユーザＵのスケジュール情報と現在時刻とに基づいて、ユーザＵがそろそろ外出すると判断し、ユーザが所有するスマートフォン型の情報処理端末１０ｃにエージェント機能を遷移することを決定してもよい。なお、知的処理部２４０は、ユーザＵの発話などから、ユーザＵのスケジュールを推定してもよい。また、知的処理部２４０は、ユーザＵが情報処理端末１０ｃを持って部屋の外へ出たことをトリガーとして、情報処理端末１０ｃへの遷移を決定してもよい。 In this case, the intelligent processing unit 240 determines that the user U is going out soon, based on the acquired user U's schedule information and the current time, for example, and uses the agent function to the information processing terminal 10c of the smartphone type owned by the user. It may decide to transition. The intelligent processing unit 240 may estimate the schedule of the user U based on the utterance of the user U or the like. Further, the intelligent processing unit 240 may determine the transition to the information processing terminal 10c, triggered by the user U having moved out of the room with the information processing terminal 10c.
　また、知的処理部２４０は例えば、ユーザＵがコートＣを着用したことなどを検知し、遷移のトリガーとすることもできる。知的処理部２４０は、画像認識によりコートＣの着用を判断してもよいし、コートＣに取り付けられたセンサの情報からコートＣの着用を判断してもよい。 Also, the intellectual processing unit 240 can detect, for example, that the user U wears the coat C, and can use it as a trigger of transition. The intelligent processing unit 240 may determine the wearing of the coat C by image recognition, or may determine the wearing of the coat C from information of a sensor attached to the coat C.
　また、この際、部屋の中には、ユーザＵが所有するスマートフォン型の情報処理端末１０ｃに加え、ユーザＵの父親が所有するスマートフォン型の情報処理端末１０ｂがある場合を想定する。 Moreover, in addition to the smart phone type information processing terminal 10c which a user U owns in this case, the case where the smart phone type information processing terminal 10 b which a user U's father owns exists is assumed.
　この場合、知的処理部２４０は、２つの情報処理端末１０ｂおよび１０ｃの所有者をデバイス管理部２２０が保持するデバイスのプロパティ情報から取得し、ユーザＵが所有する情報処理端末１０ｃを遷移先として正しく選択することが可能である。 In this case, the intelligent processing unit 240 acquires the owners of the two information processing terminals 10b and 10c from the property information of the device held by the device management unit 220, and takes the information processing terminal 10c owned by the user U as the transition destination. It is possible to choose correctly.
　このように、知的処理部２４０は、種々のトリガーに基づいて、遷移先デバイスの選択を行い、遷移の実行および遷移情報の提示を行うことができる。図中の右上には、表示部１５０が、知的処理部２４０による制御に基づき、ユーザＵが所有する情報処理端末１０ｃに対応するアイコンＤＩ３にオブジェクトＡＯが移動する表示を行う状況が示されている。本実施形態に係る知的処理部２４０によれば、ユーザＵが外出先でも引き続きエージェント機能を利用し、スポットの推薦情報を入手することが可能となる。 Thus, the intelligent processing unit 240 can select a transition destination device based on various triggers, and can execute transition and present transition information. In the upper right of the figure, a state is shown in which the display unit 150 displays the object AO moving to the icon DI3 corresponding to the information processing terminal 10c owned by the user U based on the control by the intelligent processing unit 240. There is. According to the intelligent processing unit 240 according to the present embodiment, it is possible for the user U to continue to use the agent function even when away from home, and to obtain spot recommendation information.
　また、図１３は、知的処理部２４０が、ユーザＵが外出先で行う行動に適した遷移先デバイスを選択する場合の一例を示す図である。 Further, FIG. 13 is a diagram illustrating an example in which the intelligent processing unit 240 selects a transition destination device suitable for an action performed by the user U outside the house.
　図１３には、ユーザＵが、据え置き型の情報処理端末１０ａが提供するエージェント機能を利用して、今夜見る映画を探しているが、日課のジョギングに出かける時間が迫っている状況が示されている。 FIG. 13 shows a situation in which the user U is looking for a movie to see tonight using the agent function provided by the stationary information processing terminal 10a, but it is almost time for the user to go out for jogging. There is.
　この際、知的処理部２４０は、ユーザＵが毎日同じ時間にジョギングを行っていることから、そろそろユーザＵがジョギングに出かけるだろうことを推定して遷移のトリガーとしてもよいし、ユーザＵがトレーニングウェアＴＷを着用したことを遷移のトリガーとしてもよい。 At this time, since the user U is jogging at the same time every day, the intelligent processing unit 240 may estimate that the user U will go jogging at the same time as a trigger for the transition, or the user U may Wearing the training wear TW may be used as a transition trigger.
　また、ここで、ユーザＵが普段、スマートフォン型の情報処理端末１０ｂを持ち、腕時計型の情報処理端末１０ｃおよびネックバンド型の情報処理端末１０を装着しながらジョギングを行っている場合を想定する。この場合、図１２に示した一例とは異なり、情報処理端末１０ｂ～１０ｄの所有者はすべてユーザＵであるため、プロパティ情報のみから遷移先デバイスを選択することが困難である。 Here, it is assumed that the user U usually carries a smartphone type information processing terminal 10 b and performs jogging while wearing a wristwatch type information processing terminal 10 c and a neck band type information processing terminal 10. In this case, unlike the example shown in FIG. 12, since all the owners of the information processing terminals 10b to 10d are the user U, it is difficult to select the transition destination device only from the property information.
　この場合、知的処理部２４０は、例えば、ユーザＵの動作に係るユーザコンテキストやタスクテキストに基づいて、遷移先デバイスを選択してもよい。具体的には、知的処理部２４０は、ユーザＵがジョギング中（ユーザコンテキスト）に、映画を探す（タスクコンテキスト）には、音声による情報提示のみで十分であると判断し、ネックバンド型の情報処理端末１０ｄを遷移先デバイスとして選択することが可能である。 In this case, the intelligent processing unit 240 may select the transition destination device based on, for example, the user context or task text related to the operation of the user U. Specifically, the intelligent processing unit 240 determines that only information presentation by voice is sufficient for searching for a movie (task context) while the user U is jogging (user context), and the neck band type It is possible to select the information processing terminal 10d as a transition destination device.
　また、ユーザＵが普段からジョギング中に映画探しをするという過去実績に係るコンテキストがある場合、知的処理部２４０は、同様のタスクが最も多く実行された情報処理端末１０を遷移先デバイスとして選択してもよい。 In addition, when there is a context related to the past performance that the user U usually searches for a movie while jogging, the intelligent processing unit 240 selects the information processing terminal 10 in which the same task is most frequently executed as the transition destination device. You may
　一方、ユーザＵが普段、腕時計型の情報処理端末１０ｃおよびネックバンド型の情報処理端末１０を装着しながらジョギングを行うが、スマートフォン型の情報処理端末１０ｂは家に置いていく場合を想定する。 On the other hand, although the user U usually jogs while wearing the wristwatch type information processing terminal 10c and the neckband type information processing terminal 10, it is assumed that the smartphone type information processing terminal 10b is left at home.
　この場合、知的処理部２４０は、上記の判定方法に加え、デバイスの想定位置を考慮して遷移先デバイスを選択してもよい。例えば、知的処理部２４０は、腕時計型の情報処理端末１０ｃおよびネックバンド型の情報処理端末１０ｄが、正常利用に係る想定位置にあること、すなわち腕または首に身に付けられていることを検知したうえで、音声により対話を行うのにより適しているのは、首元に装着されたネックバンド型の情報処理端末１０ｄであると判断してもよい。 In this case, in addition to the above determination method, the intelligent processing unit 240 may select the transition destination device in consideration of the assumed position of the device. For example, in the intelligent processing unit 240, the wristwatch-type information processing terminal 10c and the neckband-type information processing terminal 10d are in an assumed position related to normal use, that is, worn on an arm or a neck. After detection, it may be determined that it is the neckband type information processing terminal 10 d worn around the neck that is more suitable for conducting dialogue by voice.
　このように、知的処理部２４０は、種々のコンテキスト情報に基づいて、遷移先デバイスの選択を行い、遷移の実行および遷移情報の提示を行うことができる。図中の右上には、表示部１５０が、知的処理部２４０による制御に基づき、ユーザＵが所有する情報処理端末１０ｄに対応するアイコンＤＩ４にオブジェクトＡＯが移動する表示を行う状況が示されている。本実施形態に係る知的処理部２４０によれば、ユーザＵが外出先でもジョギングを行いながら引き続きエージェント機能を利用し、映画の推薦情報を入手することが可能となる。 Thus, the intelligent processing unit 240 can select a transition destination device based on various pieces of context information, and can execute transition and present transition information. In the upper right of the figure, a state is shown in which the display unit 150 displays the object AO moving to the icon DI4 corresponding to the information processing terminal 10d owned by the user U based on the control by the intelligent processing unit 240. There is. According to the intelligent processing unit 240 according to the present embodiment, it is possible to obtain movie recommendation information by continuing to use the agent function while the user U is jogging outside.
　なお、図１３に示す一例の場合、例えば、映画館の位置確認などのために、一時的に腕時計型の情報処理端末１０ｃに地図を表示するなどのデバイス間連携があってもよい。本実施形態に係るエージェント機能の遷移は、エージェントアプリケーションの特性に応じて柔軟に変形可能である。 In the example shown in FIG. 13, there may be device-to-device cooperation such as temporarily displaying a map on the wristwatch-type information processing terminal 10 c, for example, to confirm the position of a movie theater. The transition of the agent function according to the present embodiment can be flexibly deformed according to the characteristics of the agent application.
　また、図１４は、知的処理部２４０が、ユーザＵが利用中のタスクを他のユーザが所有する情報処理端末１０に遷移させる場合の一例を示す図である。 FIG. 14 is a diagram showing an example in which the intelligent processing unit 240 causes the task being used by the user U to transition to the information processing terminal 10 owned by another user.
　図１４には、子供であるユーザＵが、据え置き型の情報処理端末１０ａが提供するエージェント機能を利用して、調べものをしているが、家族で出かける時間が迫っている状況が示されている。また、ここでは、子供であるユーザＵは、スマートフォンなどの情報処理端末１０を所有していないが、共に外出する父親および母親は、それぞれスマートフォン型の情報処理端末１０ｂおよび１０ｃを所有している場合を想定する。 FIG. 14 shows a situation in which the user U who is a child uses the agent function provided by the stationary information processing terminal 10a to investigate but the time for the family to go out is approaching. There is. In addition, here, the user U who is a child does not possess the information processing terminal 10 such as a smartphone, but the father and mother who go out together possess the information processing terminals 10b and 10c of the smartphone type, respectively. Assume.
　この際、知的処理部２４０は、父親、母親、子という親子関係を示す関係コンテキストに基づいて、父親または母親が所有するスマートフォン型の情報処理端末１０ｂまたは１０ｃのいずれかにユーザＵが利用中のタスクを遷移させることが可能であると判断することができる。 At this time, the intellectual processing unit 240 is using the user U for either the smart phone type information processing terminal 10 b or 10 c owned by the father or the mother based on the relationship context indicating the parent-child relationship of the father, the mother, and the child. It can be determined that it is possible to make the task transition of
　また、この際、知的処理部２４０は、例えば、母親が所有する情報処理端末１０ｃのバッテリー残量（デバイス状態）が少ないことから、父親が所有する情報処理端末１０ｂを遷移先デバイスとして選択することが可能である。 At this time, for example, the intelligent processing unit 240 selects the information processing terminal 10b owned by the father as the transition destination device because the battery remaining amount (device state) of the information processing terminal 10c owned by the mother is small. It is possible.
　また、知的処理部２４０は、例えば、出先において母親のみが１時間ほど別行動を取る予定（ユーザコンテキスト）であることから、父親が所有する情報処理端末１０ｂを遷移先デバイスとして選択することが可能である。 In addition, for example, since only the mother intends to take another action for about one hour (user context) on the destination, the intellectual processing unit 240 may select the information processing terminal 10b owned by the father as the transition destination device. It is possible.
　また、知的処理部２４０は、例えば、同様のタスクを父親が所有する情報処理端末１０ｂで行うことが多いという過去実績（タスクコンテキスト）から、情報処理端末１０ｂを遷移先デバイスとして選択することが可能である。 Also, for example, the intelligent processing unit 240 may select the information processing terminal 10 b as the transition destination device from the past performance (task context) that the same task is often performed by the information processing terminal 10 b owned by the father. It is possible.
　このように、知的処理部２４０は、コンテキスト情報などに基づいて、他のユーザが所有する情報処理端末１０を遷移先デバイスとして選択することが可能である。図中の右上には、表示部１５０が、知的処理部２４０による制御に基づき、ユーザＵの父親が所有する情報処理端末１０ｂに対応するアイコンＤＩ３にオブジェクトＡＯが移動する表示を行う状況が示されている。本実施形態に係る知的処理部２４０によれば、ユーザＵが引き続きエージェント機能を利用し、調べものを行うことが可能となる。 Thus, the intelligent processing unit 240 can select the information processing terminal 10 owned by another user as the transition destination device based on the context information and the like. In the upper right of the figure, the display unit 150 displays a state in which the object AO is moved to the icon DI3 corresponding to the information processing terminal 10b owned by the father of the user U based on the control by the intelligent processing unit 240. It is done. According to the intelligent processing unit 240 according to the present embodiment, the user U can continue to use the agent function to perform investigations.
　また、図１５および図１６は、知的処理部２４０が、空間の移動を伴う遷移を実行する場合の一例を示す図である。図１５には、ユーザＵが据え置き型の情報処理端末１０ａが提供するエージェント機能を利用して、週末のお出かけスポットを探しているが、出勤の時間が迫っている状況が示されている。また、ここでは、ユーザＵが、普段、車で通勤を行っている場合を想定する。 FIG. 15 and FIG. 16 are diagrams showing an example of the case where the intelligent processing unit 240 executes the transition accompanied by the movement of the space. FIG. 15 shows a situation in which the user U is searching for a weekend outing spot using an agent function provided by the stationary type information processing terminal 10a, but the time for coming to work is approaching. Here, it is assumed that the user U usually commutes by car.
　この際、知的処理部２４０は、日常的にユーザが車で通勤を行っている（ユーザコンテキスト）ことから、車に備えられる情報処理端末１０にエージェント機能を遷移することを決定してもよい。 At this time, since the user is commuting by car on a daily basis (user context), the intelligent processing unit 240 may decide to transition the agent function to the information processing terminal 10 provided in the car. .
　また、この際、知的処理部２４０は、車の運転中には、スマートフォン型の情報処理端末１０ｂの利用が適さないこと（デバイス情報）、スマートフォン型の情報処理端末１０ｂの利用にはバッテリーの消費が伴うが、車に備えられる情報処理端末１０は、車自体が生成した電気を利用することが可能であり、電力的な余裕がある（デバイス状態）ことから、車に備えられる情報処理端末１０にエージェント機能を遷移することを決定してもよい。 In addition, at this time, the intelligent processing unit 240 is not suitable for use of the smartphone-type information processing terminal 10b (device information) during driving of the vehicle, and can use a battery for use of the smartphone-type information processing terminal 10b. Although the consumption is accompanied, the information processing terminal 10 provided in the car can use the electricity generated by the car itself, and there is a surplus of power (device state), so the information processing terminal provided in the car It may be decided to transition the agent function to 10.
　このように、本実施形態に係る知的処理部２４０は、部屋から車などのように、空間の移動を伴うエージェント機能の遷移を制御することが可能である。図中の右上には、表示部１５０が、知的処理部２４０による制御に基づき、車が備える情報処理端末１０に対応するアイコンＤＩ３にオブジェクトＡＯが移動する表示を行う状況が示されている。なお、この場合、車への移動には時間が掛かることから、知的処理部２４０は、ユーザＵが車に乗車したことが検出されたタイミングで、エージェント機能の提供を再開するなどの制御を行ってよい。 As described above, the intelligent processing unit 240 according to the present embodiment can control the transition of the agent function that involves the movement of space, such as from a room to a car. In the upper right of the figure, a situation is shown in which the display unit 150 performs display in which the object AO moves to the icon DI3 corresponding to the information processing terminal 10 provided in the car under the control of the intelligent processing unit 240. In this case, since movement to a car takes time, the intelligent processing unit 240 performs control such as resuming provision of the agent function at the timing when it is detected that the user U gets in the car. You may go.
　また、図１６には、ユーザＵが、据え置き型の情報処理端末１０ａが提供するエージェント機能を利用しているが、子供の友人が遊びにきたことにより、情報処理端末１０が設置されるリビングが騒がしくなった状況が示されている。 Further, in FIG. 16, although the user U uses the agent function provided by the stationary information processing terminal 10 a, the living room in which the information processing terminal 10 is installed when a child's friend comes into play The situation has been shown to be noisy.
　この際、本実施形態に係る知的処理部２４０は、周辺が騒がしくなったことを検知し、これをトリガーとしてエージェント機能の遷移を実行してもよい。 At this time, the intelligent processing unit 240 according to the present embodiment may detect that the surroundings have become noisy, and may use this as a trigger to execute the transition of the agent function.
　この場合、知的処理部２４０は、例えば、寝室では雑音が少ないことを検知し、寝室に配置される情報処理端末１０を遷移先デバイスとして選択してもよい（デバイス位置およびデバイス状態の利用）。図中の右上には、表示部１５０が、知的処理部２４０による制御に基づき、寝室に配置される情報処理端末１０に対応するアイコンＤＩ３にオブジェクトＡＯが移動する表示を行う状況が示されている。 In this case, for example, the intelligent processing unit 240 may detect that the noise is small in the bedroom, and select the information processing terminal 10 disposed in the bedroom as the transition destination device (use of the device position and the device state) . In the upper right of the figure, a situation is shown in which the display unit 150 displays the object AO moving to the icon DI3 corresponding to the information processing terminal 10 disposed in the bedroom under the control of the intelligent processing unit 240. There is.
　一方、知的処理部２４０は、据え置き型の情報処理端末１０がリビングに配置される情報処理端末１０ａのみの場合、移動に適したスマートフォン型の情報処理端末１０ｂを遷移先デバイスとして選択してもよい（デバイス情報の利用）。 On the other hand, in the case of only the information processing terminal 10a in which the stationary information processing terminal 10 is disposed in the living, the intelligent processing unit 240 selects the smart phone type information processing terminal 10b suitable for movement as the transition destination device. Good (use of device information).
　他方、ユーザＵが利用中のタスクが急ぎではない場合、知的処理部２４０は、エージェント機能の利用を一時停止し、子供の友人が帰ってから、利用を再開することなどをユーザＵに提案してもよい（タスクコンテキストの利用）。 On the other hand, when the task being used by the user U is not urgent, the intelligent processing unit 240 suspends the use of the agent function, and proposes to the user U that the use is resumed after the child's friend returns. May be used (use of task context).
　このように、知的処理部２４０は、ユーザの現在位置におけるエージェント機能の利用が適切ではないと判断した場合には、空間や時間の変更をユーザに提案することで、利便性を向上させることが可能である。 As described above, when the intelligent processing unit 240 determines that the use of the agent function at the current position of the user is not appropriate, it is possible to improve convenience by proposing the change of the space or time to the user. Is possible.
　＜＜１．６．動作の流れ＞＞
　次に、本実施形態に係る情報処理サーバ２０の動作の流れについて詳細に説明する。図１７は、本実施形態に係る情報処理サーバ２０の動作の流れを示すフローチャートである。 << 1.6. Flow of operation >>
Next, the flow of the operation of the information processing server 20 according to the present embodiment will be described in detail. FIG. 17 is a flowchart showing the flow of the operation of the information processing server 20 according to the present embodiment.
　図１７を参照すると、まず、端末通信部２５０が、情報処理端末１０が取集した収集情報を受信する（Ｓ１１０１）。上記の収集情報には、音情報、画像情報、センサ情報、またこれらに基づく認識処理結果が含まれる。 Referring to FIG. 17, first, the terminal communication unit 250 receives the collected information collected by the information processing terminal 10 (S1101). The above-mentioned collected information includes sound information, image information, sensor information, and recognition processing results based on these.
　次に、知的処理部２４０は、ステップＳ１１０１において受信された収集情報に基づく認識処理を実行する（Ｓ１１０２）。知的処理部２４０は、例えば、複数の情報処理端末１０により収集された収集情報に基づいて、ユーザや周囲の状況を総合的に認識してもよい。なお、情報処理端末１０から認識処理結果を受信する場合、本ステップは必ずしも実行されなくてもよい。 Next, the intelligent processing unit 240 executes recognition processing based on the collected information received in step S1101 (S1102). The intelligent processing unit 240 may generally recognize the user and the surrounding situation based on the collected information collected by the plurality of information processing terminals 10, for example. When the recognition processing result is received from the information processing terminal 10, this step may not necessarily be executed.
　次に、知的処理部２４０は、ステップＳ１１０１において受信された収集情報や、ステップＳ１１０２における認識処理結果に基づいて、エージェント機能の遷移が必要か否かを判定する（Ｓ１１０３）。 Next, the intelligent processing unit 240 determines whether a transition of the agent function is necessary based on the collected information received in step S1101 and the recognition processing result in step S1102 (S1103).
　ここで、知的処理部２４０が遷移が不要であると判定した場合（Ｓ１１０３：Ｎｏ）、情報処理サーバ２０は、ステップＳ１１０１に復帰する。 Here, when the intelligent processing unit 240 determines that the transition is unnecessary (S1103: No), the information processing server 20 returns to step S1101.
　一方、知的処理部２４０が遷移が不要であると判定した場合（Ｓ１１０３：Ｙｅｓ）、知的処理部２４０は、候補デバイスの利用可能度を算出する（Ｓ１１０４）。 On the other hand, when the intelligent processing unit 240 determines that the transition is unnecessary (S1103: Yes), the intelligent processing unit 240 calculates the availability of the candidate device (S1104).
　続いて、知的処理部２４０は、ステップＳ１１０４において算出した利用可能度に基づいて、候補デバイスの中から実際の遷移先となる遷移先デバイスを決定する（Ｓ１１０５）。 Subsequently, the intelligent processing unit 240 determines a transition destination device to be an actual transition destination among the candidate devices based on the availability calculated in step S1104 (S1105).
　次に、知的処理部２４０は、ステップＳ１１０６において決定した遷移先デバイスにエージェント機能を遷移させる（Ｓ１１０６）。 Next, the intelligent processing unit 240 causes the agent function to transition to the transition destination device determined in step S1106 (S1106).
　また、知的処理部２４０は、遷移の状況を示す遷移情報を表示部１５０や音声出力部１４０に出力させる（Ｓ１１０７）。 Also, the intelligent processing unit 240 causes the display unit 150 and the voice output unit 140 to output transition information indicating the state of transition (S1107).
　＜＜１．７．効果＞＞
　以上、本実施形態に係る情報処理端末１０および情報処理サーバ２０が有する機能について詳細に説明した。上述したように、本実施形態に係る情報処理サーバ２０および情報処理端末１０によれば、エージェント機能の遷移が正常に行われたのか、またどの情報処理端末１０にエージェント機能が遷移されたのか、などの情報をユーザが明確に把握することが可能となる。 << 1.7. Effect >>
The functions of the information processing terminal 10 and the information processing server 20 according to the present embodiment have been described above in detail. As described above, according to the information processing server 20 and the information processing terminal 10 according to the present embodiment, whether the transition of the agent function is normally performed or to which information processing terminal 10 the agent function is transitioned, Etc. can be clearly grasped by the user.
　また、本実施形態に係る情報処理サーバ２０によれば、ユーザが遷移先を明示的に指示しない場合でも、状況に適した遷移先を自動で選択することが可能なため、例えば、ユーザが、バッテリー残量の確認などの煩雑な作業から解放されるメリットが生じる。 Further, according to the information processing server 20 according to the present embodiment, even when the user does not explicitly designate the transition destination, the user can automatically select the transition destination suitable for the situation. There is a merit of being relieved of troublesome work such as checking the remaining battery level.
　また、本実施形態に係る情報処理サーバ２０によれば、着替えなどからユーザの行動を推定し、最適な遷移先を選択することなどが可能となり、ユーザの生活に溶け込んだ形で利用することができる。 In addition, according to the information processing server 20 according to the present embodiment, it is possible to estimate the user's behavior from changing clothes and the like, to select the optimal transition destination, etc., and use it in a form of being embedded in the user's life. it can.
　また、本実施形態に係る情報処理サーバ２０によれば、家の中に複数の情報処理端末１０が配置される場合、部屋を移動しても、同一のタスクを継続して利用することなどが可能となる。 Further, according to the information processing server 20 according to the present embodiment, when a plurality of information processing terminals 10 are disposed in a house, using the same task continuously even if the room is moved, etc. It becomes possible.
　また、本実施形態に係る情報処理サーバ２０によれば、ユーザが複数の情報処理端末１０を所有する場合であっても、用途や状況に応じた最適な遷移先を自動で選択することが可能となる。 Further, according to the information processing server 20 according to the present embodiment, even when the user owns the plurality of information processing terminals 10, it is possible to automatically select the optimum transition destination according to the application and the situation. It becomes.
　また、本実施形態に係る情報処理サーバ２０によれば、親子関係などを考慮することにより、スマートフォンなどの情報処理端末１０を所有しない子供でも、簡単にエージェント機能を外出先に持ちだすことが可能となる。 Further, according to the information processing server 20 according to the present embodiment, even if a child who does not possess the information processing terminal 10 such as a smartphone can easily take the agent function to the outside by taking into consideration the parent-child relationship and the like. It becomes.
　また、本実施形態に係る情報処理サーバ２０によれば、空間的な移動を伴う遷移に限らず、時間的な移動を伴う遷移を可能とし、利便性を向上させることができる。 Further, according to the information processing server 20 according to the present embodiment, not only the transition involving spatial movement but also the transition involving temporal movement can be enabled, and convenience can be improved.
　なお、上記では、本実施形態に係る遷移の対象機能がエージェント機能である場合を主な例として説明したが、本実施形態に係る遷移の対象機能は係る例に限定されない。本実施形態に係る技術思想は、複数のデバイスで利用され得る多様な機能に広く適用可能である。 In addition, although the case where the object function of the transition which concerns on this embodiment is an agent function was demonstrated above as a main example, the object function of the transition which concerns on this embodiment is not limited to the example which concerns. The technical concept according to the present embodiment is widely applicable to various functions that can be used by a plurality of devices.
　＜２．ハードウェア構成例＞
　次に、本開示の一実施形態に係る情報処理端末１０および情報処理サーバ２０に共通するハードウェア構成例について説明する。図１８は、本開示の一実施形態に係る情報処理端末１０および情報処理サーバ２０のハードウェア構成例を示すブロック図である。図１８を参照すると、情報処理端末１０および情報処理サーバ２０は、例えば、プロセッサ８７１と、ＲＯＭ８７２と、ＲＡＭ８７３と、ホストバス８７４と、ブリッジ８７５と、外部バス８７６と、インターフェース８７７と、入力装置８７８と、出力装置８７９と、ストレージ８８０と、ドライブ８８１と、接続ポート８８２と、通信装置８８３と、を有する。なお、ここで示すハードウェア構成は一例であり、構成要素の一部が省略されてもよい。また、ここで示される構成要素以外の構成要素をさらに含んでもよい。 <2. Hardware configuration example>
Next, a hardware configuration example common to the information processing terminal 10 and the information processing server 20 according to an embodiment of the present disclosure will be described. FIG. 18 is a block diagram illustrating an exemplary hardware configuration of the information processing terminal 10 and the information processing server 20 according to an embodiment of the present disclosure. Referring to FIG. 18, the information processing terminal 10 and the information processing server 20 include, for example, a processor 871, a ROM 872, a RAM 873, a host bus 874, a bridge 875, an external bus 876, an interface 877, and an input device 878. , An output device 879, a storage 880, a drive 881, a connection port 882, and a communication device 883. Note that the hardware configuration shown here is an example, and some of the components may be omitted. In addition, components other than the components shown here may be further included.
　（プロセッサ８７１）
　プロセッサ８７１は、例えば、演算処理装置又は制御装置として機能し、ＲＯＭ８７２、ＲＡＭ８７３、ストレージ８８０、又はリムーバブル記録媒体９０１に記録された各種プログラムに基づいて各構成要素の動作全般又はその一部を制御する。 (Processor 871)
The processor 871 functions as, for example, an arithmetic processing unit or a control unit, and controls the overall operation or a part of each component based on various programs recorded in the ROM 872, RAM 873, storage 880, or removable recording medium 901. .
　（ＲＯＭ８７２、ＲＡＭ８７３）
　ＲＯＭ８７２は、プロセッサ８７１に読み込まれるプログラムや演算に用いるデータ等を格納する手段である。ＲＡＭ８７３には、例えば、プロセッサ８７１に読み込まれるプログラムや、そのプログラムを実行する際に適宜変化する各種パラメータ等が一時的又は永続的に格納される。 (ROM 872, RAM 873)
The ROM 872 is a means for storing a program read by the processor 871, data used for an operation, and the like. The RAM 873 temporarily or permanently stores, for example, a program read by the processor 871 and various parameters and the like that appropriately change when the program is executed.
　（ホストバス８７４、ブリッジ８７５、外部バス８７６、インターフェース８７７）
　プロセッサ８７１、ＲＯＭ８７２、ＲＡＭ８７３は、例えば、高速なデータ伝送が可能なホストバス８７４を介して相互に接続される。一方、ホストバス８７４は、例えば、ブリッジ８７５を介して比較的データ伝送速度が低速な外部バス８７６に接続される。また、外部バス８７６は、インターフェース８７７を介して種々の構成要素と接続される。 (Host bus 874, bridge 875, external bus 876, interface 877)
The processor 871, the ROM 872, and the RAM 873 are connected to one another via, for example, a host bus 874 capable of high-speed data transmission. On the other hand, host bus 874 is connected to external bus 876, which has a relatively low data transmission speed, via bridge 875, for example. Also, the external bus 876 is connected to various components via an interface 877.
　（入力装置８７８）
　入力装置８７８には、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ、及びレバー等が用いられる。さらに、入力装置８７８としては、赤外線やその他の電波を利用して制御信号を送信することが可能なリモートコントローラ（以下、リモコン）が用いられることもある。また、入力装置８７８には、マイクロフォンなどの音声入力装置が含まれる。また、入力装置８７８には、カメラなどの光を感知する装置や、ＧＮＳＳ（Ｇｌｏｂａｌ　Ｎａｖｉｇａｔｉｏｎ　Ｓａｔｅｌｌｉｔｅ　Ｓｙｓｔｅｍ）信号の受信装置などが含まれてもよい。 (Input device 878)
For the input device 878, for example, a mouse, a keyboard, a touch panel, a button, a switch, a lever, and the like are used. Furthermore, as the input device 878, a remote controller (hereinafter, remote control) capable of transmitting a control signal using infrared rays or other radio waves may be used. The input device 878 also includes a voice input device such as a microphone. In addition, the input device 878 may include a device that senses light such as a camera, and a device that receives a Global Navigation Satellite System (GNSS) signal.
　（出力装置８７９）
　出力装置８７９は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ　Ｒａｙ　Ｔｕｂｅ）、ＬＣＤ、又は有機ＥＬ等のディスプレイ装置、スピーカ、ヘッドホン等のオーディオ出力装置、プリンタ、携帯電話、又はファクシミリ等、取得した情報を利用者に対して視覚的又は聴覚的に通知することが可能な装置である。また、本開示に係る出力装置８７９は、触覚刺激を出力することが可能な種々の振動デバイスを含む。 (Output device 879)
The output device 879 is a display device such as a CRT (Cathode Ray Tube), an LCD, or an organic EL, a speaker, an audio output device such as a headphone, a printer, a mobile phone, or a facsimile. It is a device that can be notified visually or aurally. Also, the output device 879 according to the present disclosure includes various vibration devices capable of outputting haptic stimulation.
　（ストレージ８８０）
　ストレージ８８０は、各種のデータを格納するための装置である。ストレージ８８０としては、例えば、ハードディスクドライブ（ＨＤＤ）等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等が用いられる。 (Storage 880)
The storage 880 is a device for storing various data. As the storage 880, for example, a magnetic storage device such as a hard disk drive (HDD), a semiconductor storage device, an optical storage device, a magneto-optical storage device, or the like is used.
　（ドライブ８８１）
　ドライブ８８１は、例えば、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体９０１に記録された情報を読み出し、又はリムーバブル記録媒体９０１に情報を書き込む装置である。 (Drive 881)
The drive 881 is a device that reads information recorded on a removable recording medium 901 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, or writes information on the removable recording medium 901, for example.
　（リムーバブル記録媒体９０１）
リムーバブル記録媒体９０１は、例えば、ＤＶＤメディア、Ｂｌｕ－ｒａｙ（登録商標）メディア、ＨＤ　ＤＶＤメディア、各種の半導体記憶メディア等である。もちろん、リムーバブル記録媒体９０１は、例えば、非接触型ＩＣチップを搭載したＩＣカード、又は電子機器等であってもよい。 (Removable recording medium 901)
The removable recording medium 901 is, for example, DVD media, Blu-ray (registered trademark) media, HD DVD media, various semiconductor storage media, and the like. Of course, the removable recording medium 901 may be, for example, an IC card equipped with a non-contact IC chip, an electronic device, or the like.
　（接続ポート８８２）
　接続ポート８８２は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ　Ｓｅｒｉａｌ　Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ　Ｃｏｍｐｕｔｅｒ　Ｓｙｓｔｅｍ　Ｉｎｔｅｒｆａｃｅ）、ＲＳ－２３２Ｃポート、又は光オーディオ端子等のような外部接続機器９０２を接続するためのポートである。 (Connection port 882)
The connection port 882 is, for example, a port for connecting an externally connected device 902 such as a USB (Universal Serial Bus) port, an IEEE 1394 port, a SCSI (Small Computer System Interface), an RS-232C port, or an optical audio terminal. is there.
　（外部接続機器９０２）
　外部接続機器９０２は、例えば、プリンタ、携帯音楽プレーヤ、デジタルカメラ、デジタルビデオカメラ、又はＩＣレコーダ等である。 (Externally connected device 902)
The external connection device 902 is, for example, a printer, a portable music player, a digital camera, a digital video camera, an IC recorder, or the like.
　（通信装置８８３）
　通信装置８８３は、ネットワークに接続するための通信デバイスであり、例えば、有線又は無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ　ＵＳＢ）用の通信カード、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ　Ｄｉｇｉｔａｌ　Ｓｕｂｓｃｒｉｂｅｒ　Ｌｉｎｅ）用のルータ、又は各種通信用のモデム等である。通信装置８８３は、例えば、３ＧやＬＴＥなどの公衆網との通信を行ってよい。 (Communication device 883)
The communication device 883 is a communication device for connecting to a network. For example, a communication card for wired or wireless LAN, Bluetooth (registered trademark) or WUSB (Wireless USB), a router for optical communication, ADSL (Asymmetric Digital) (Subscriber Line) router, or modem for various communications. The communication device 883 may perform communication with a public network such as 3G or LTE, for example.
　＜３．まとめ＞
　以上説明したように、本開示の一実施形態に係る情報処理サーバ２０は、デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御する知的処理部２４０を備える。また、本実施形態に係る知的処理部２４０は、提供主体の遷移を実行する場合、遷移の状況を示す遷移情報を、提供主体の遷移元である遷移元デバイスに動的に出力させることを特徴の一つとする。係る構成によれば、複数の装置間における機能提供主体の遷移状況をユーザに明確に知覚させることが可能となる。 <3. Summary>
As described above, the information processing server 20 according to an embodiment of the present disclosure includes the intelligent processing unit 240 that controls the transition of the providing entity that provides the function to the user among the devices. Further, when executing the transition of the providing entity, the intelligent processing unit 240 according to the present embodiment causes the transition source device, which is the transition source of the providing entity, to dynamically output transition information indicating the state of the transition. It is one of the features. According to the configuration, it is possible to make the user clearly perceive the transition situation of the function providing entity between the plurality of devices.
　以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。 The preferred embodiments of the present disclosure have been described in detail with reference to the accompanying drawings, but the technical scope of the present disclosure is not limited to such examples. It will be apparent to those skilled in the art of the present disclosure that various modifications and alterations can be conceived within the scope of the technical idea described in the claims. It is naturally understood that the technical scope of the present disclosure is also included.
　また、本明細書の情報処理サーバ２０の処理に係る各ステップは、必ずしもフローチャートに記載された順序に沿って時系列に処理される必要はない。例えば、情報処理サーバ２０の処理に係る各ステップは、フローチャートに記載された順序と異なる順序で処理されても、並列的に処理されてもよい。 Moreover, each step concerning processing of information processing server 20 of this specification does not necessarily need to be processed in chronological order according to the order described in the flowchart. For example, the steps related to the processing of the information processing server 20 may be processed in an order different from the order described in the flowchart or may be processed in parallel.
　なお、以下のような構成も本開示の技術的範囲に属する。
（１）
　デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御する制御部、
　を備え、
　前記制御部は、前記提供主体の遷移を実行する場合、前記遷移の状況を示す遷移情報を、前記提供主体の遷移元である遷移元デバイスに動的に出力させる、
情報処理装置。
（２）
　前記遷移情報は、前記提供主体の遷移に係る処理の開始、経過、または結果に関する情報を含み、
　前記制御部は、前記遷移情報を視覚表現を用いて出力させる、
前記（１）に記載の情報処理装置。
（３）
　前記遷移情報は、前記提供主体の遷移先となる遷移先デバイスに係る情報を含み、
　前記制御部は、前記遷移先デバイスに対応する視覚表現を出力させる、
前記（１）または（２）に記載の情報処理装置。
（４）
　前記遷移情報は、前記提供主体の遷移先の候補である候補デバイスに係る情報を含み、
　前記制御部は、複数の前記候補デバイスに対応する視覚表現を出力させる、
前記（１）～（３）のいずれかに記載の情報処理装置。
（５）
　前記制御部は、前記候補デバイスに対応する視覚表現と共に前記候補デバイスのコンテキストを示す情報を出力させる、
前記（４）に記載の情報処理装置。
（６）
　前記遷移情報は、前記遷移元デバイスに係る情報を含み、
　前記制御部は、前記遷移元デバイスに対応する視覚表現を出力させる、
前記（１）～（５）のいずれかに記載の情報処理装置。
（７）
　前記提供主体の遷移に係る処理の結果は、遷移の正常完了またはエラーの発生を含み、
　前記制御部は、前記正常完了または前記エラーのいずれかを示す情報を表示させる、
前記（２）に記載の情報処理装置。
（８）
　前記制御部は、前記提供主体の遷移先の候補である候補デバイスの遷移先としての適性を示す利用可能度を算出し、前記利用可能度に基づいて、複数の前記候補デバイスの中から前記提供主体の遷移先となる遷移先デバイスを選択する、
前記（１）～（７）のいずれかに記載の情報処理装置。
（９）
　前記制御部は、前記候補デバイスに係るデバイス情報に基づいて、前記利用可能度を算出する、
前記（８）に記載の情報処理装置。
（１０）
　前記デバイス情報は、デバイスプロパティ、デバイス位置、デバイススペック、またはデバイス状態のうち少なくともいずれかに関する情報を含む、
前記（９）に記載の情報処理装置。
（１１）
　前記デバイス情報は、デバイスが配置される位置、想定位置への近さ、音声入力の可否、電源が入っているか否か、またはバッテリー残量のうち少なくともいずれかに関する情報を含む、
前記（９）に記載の情報処理装置。
（１２）
　前記制御部は、前記提供主体の遷移に係るコンテキスト情報に基づいて、前記利用可能度を算出する、
前記（８）～（１１）のいずれかに記載の情報処理装置。
（１３）
　前記コンテキスト情報は、ユーザのコンテキスト、タスクのコンテキスト、またはユーザ間の関係を示すコンテキストのうち少なくともいずれかに関する情報を含む、
前記（１２）に記載の情報処理装置。
（１４）
　前記コンテキスト情報は、ユーザの予定、ユーザ同士の関係の近さ、または対象となるタスクが過去に実行された回数のうち少なくともいずれかに関する情報を含む、
前記（１２）に記載の情報処理装置。
（１５）
　前記制御部は、前記提供主体が提供する機能ごとに前記遷移情報の表示を制御する、
前記（１）～（１４）のいずれかに記載の情報処理装置。
（１６）
　前記制御部は、前記提供主体による機能提供の対象となるユーザと前記遷移情報とを対応付けて表示させる、
前記（１）～（１５）のいずれかに記載の情報処理装置。
（１７）
　前記制御部は、前記遷移情報を音を用いて出力させる、
前記（１）～（１６）のいずれかに記載の情報処理装置。
（１８）
　前記提供主体が提供する機能は、エージェント機能を含む、
前記（１）～（１７）のいずれかに記載の情報処理装置。
（１９）
　前記制御部による制御に基づいて、前記遷移情報を表示する表示部、
　をさらに備える、
前記（１）～（１８）のいずれかに記載の情報処理装置。
（２０）
　プロセッサが、デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御すること、
　を含み、
　前記制御することは、前記提供主体の遷移を実行する場合、前記遷移の状況を示す遷移情報を、前記提供主体の遷移元である遷移元デバイスに動的に出力させること、
　をさらに含む、
情報処理方法。 The following configurations are also within the technical scope of the present disclosure.
(1)
A control unit that controls transitions of providers providing functions to users between devices;
Equipped with
When the transition of the providing entity is executed, the control unit dynamically outputs transition information indicating a state of the transition to a transition source device that is a transition source of the providing entity.
Information processing device.
(2)
The transition information includes information on the start, progress, or result of processing related to the transition of the provider.
The control unit causes the transition information to be output using a visual expression.
The information processing apparatus according to (1).
(3)
The transition information includes information on a transition destination device which is a transition destination of the provider.
The control unit outputs a visual representation corresponding to the transition destination device.
The information processing apparatus according to (1) or (2).
(4)
The transition information includes information on a candidate device that is a candidate for a transition destination of the provider.
The control unit outputs a visual expression corresponding to a plurality of the candidate devices.
The information processing apparatus according to any one of the above (1) to (3).
(5)
The control unit causes information indicating the context of the candidate device to be output along with the visual representation corresponding to the candidate device.
The information processing apparatus according to (4).
(6)
The transition information includes information related to the transition source device,
The control unit outputs a visual representation corresponding to the transition source device.
The information processing apparatus according to any one of the above (1) to (5).
(7)
The result of processing related to the transition of the providing entity includes the normal completion of the transition or the occurrence of an error,
The control unit displays information indicating either the normal completion or the error.
The information processing apparatus according to (2).
(8)
The control unit calculates an availability indicating an aptitude as a transition destination of a candidate device that is a candidate of a transition destination of the providing entity, and based on the availability, the provision among the plurality of candidate devices is performed. Select the transition destination device to be the transition destination of the subject,
The information processing apparatus according to any one of the above (1) to (7).
(9)
The control unit calculates the availability based on device information related to the candidate device.
The information processing apparatus according to (8).
(10)
The device information includes information on device properties, device positions, device specifications, and / or device states.
The information processing apparatus according to (9).
(11)
The device information includes information on at least one of a position where the device is placed, a proximity to an assumed position, voice input availability, power on / off, and a battery remaining amount.
The information processing apparatus according to (9).
(12)
The control unit calculates the availability based on context information related to the transition of the provider.
The information processing apparatus according to any one of the above (8) to (11).
(13)
The context information includes information on at least one of a user context, a task context, and a context indicating a relationship between users.
The information processing apparatus according to (12).
(14)
The context information may include information regarding at least one of a user's schedule, the proximity of the user's relationship, and the number of times the target task has been executed in the past.
The information processing apparatus according to (12).
(15)
The control unit controls display of the transition information for each function provided by the providing entity.
The information processing apparatus according to any one of the above (1) to (14).
(16)
The control unit associates the user as the target of the function provision by the provider and the transition information, and displays the associated information.
The information processing apparatus according to any one of the above (1) to (15).
(17)
The control unit causes the transition information to be output using sound.
The information processing apparatus according to any one of the above (1) to (16).
(18)
The functions provided by the providing entity include an agent function,
The information processing apparatus according to any one of the above (1) to (17).
(19)
A display unit that displays the transition information based on control by the control unit;
Further comprising
The information processing apparatus according to any one of the above (1) to (18).
(20)
The processor controlling, among the devices, transitions of provider entities that provide functions to the user;
Including
The controlling may, when executing the transition of the providing entity, dynamically output transition information indicating a state of the transition to a transition source device as a transition source of the providing entity.
Further include,
Information processing method.
　１０　　　情報処理端末
　１１０　　撮像部
　１２０　　音声入力部
　１３０　　センサ部
　１４０　　音声出力部
　１５０　　表示部
　１６０　　知的処理部
　１７０　　デバイス情報管理部
　１８０　　サーバ通信部
　２０　　　情報処理サーバ
　２１０　　ユーザ情報管理部
　２２０　　デバイス管理部
　２３０　　タスク情報管理部
　２４０　　知的処理部
　２５０　　端末通信部 10 information processing terminal 110 imaging unit 120 voice input unit 130 sensor unit 140 voice output unit 150 display unit 160 intelligent processing unit 170 device information management unit 180 server communication unit 20 information processing server 210 user information management unit 220 device management unit 230 task Information management unit 240 Intelligent processing unit 250 Terminal communication unit

Claims (20)

  1. 　デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御する制御部、
    　を備え、
    　前記制御部は、前記提供主体の遷移を実行する場合、前記遷移の状況を示す遷移情報を、前記提供主体の遷移元である遷移元デバイスに動的に出力させる、
    情報処理装置。     A control unit that controls transitions of providers providing functions to users between devices;
    Equipped with
    When the transition of the providing entity is executed, the control unit dynamically outputs transition information indicating a state of the transition to a transition source device that is a transition source of the providing entity.
    Information processing device.
  2. 　前記遷移情報は、前記提供主体の遷移に係る処理の開始、経過、または結果に関する情報を含み、
    　前記制御部は、前記遷移情報を視覚表現を用いて出力させる、
    請求項１に記載の情報処理装置。     The transition information includes information on the start, progress, or result of processing related to the transition of the provider.
    The control unit causes the transition information to be output using a visual expression.
    An information processing apparatus according to claim 1.
  3. 　前記遷移情報は、前記提供主体の遷移先となる遷移先デバイスに係る情報を含み、
    　前記制御部は、前記遷移先デバイスに対応する視覚表現を出力させる、
    請求項１に記載の情報処理装置。     The transition information includes information on a transition destination device which is a transition destination of the provider.
    The control unit outputs a visual representation corresponding to the transition destination device.
    An information processing apparatus according to claim 1.
  4. 　前記遷移情報は、前記提供主体の遷移先の候補である候補デバイスに係る情報を含み、
    　前記制御部は、複数の前記候補デバイスに対応する視覚表現を出力させる、
    請求項１に記載の情報処理装置。     The transition information includes information on a candidate device that is a candidate for a transition destination of the provider.
    The control unit outputs a visual expression corresponding to a plurality of the candidate devices.
    An information processing apparatus according to claim 1.
  5. 　前記制御部は、前記候補デバイスに対応する視覚表現と共に前記候補デバイスのコンテキストを示す情報を出力させる、
    請求項４に記載の情報処理装置。     The control unit causes information indicating the context of the candidate device to be output along with the visual representation corresponding to the candidate device.
    The information processing apparatus according to claim 4.
  6. 　前記遷移情報は、前記遷移元デバイスに係る情報を含み、
    　前記制御部は、前記遷移元デバイスに対応する視覚表現を出力させる、
    請求項１に記載の情報処理装置。     The transition information includes information related to the transition source device,
    The control unit outputs a visual representation corresponding to the transition source device.
    An information processing apparatus according to claim 1.
  7. 　前記提供主体の遷移に係る処理の結果は、遷移の正常完了またはエラーの発生を含み、
    　前記制御部は、前記正常完了または前記エラーのいずれかを示す情報を表示させる、
    請求項２に記載の情報処理装置。     The result of processing related to the transition of the providing entity includes the normal completion of the transition or the occurrence of an error,
    The control unit displays information indicating either the normal completion or the error.
    The information processing apparatus according to claim 2.
  8. 　前記制御部は、前記提供主体の遷移先の候補である候補デバイスの遷移先としての適性を示す利用可能度を算出し、前記利用可能度に基づいて、複数の前記候補デバイスの中から前記提供主体の遷移先となる遷移先デバイスを選択する、
    請求項１に記載の情報処理装置。     The control unit calculates an availability indicating an aptitude as a transition destination of a candidate device that is a candidate of a transition destination of the providing entity, and based on the availability, the provision among the plurality of candidate devices is performed. Select the transition destination device to be the transition destination of the subject,
    An information processing apparatus according to claim 1.
  9. 　前記制御部は、前記候補デバイスに係るデバイス情報に基づいて、前記利用可能度を算出する、
    請求項８に記載の情報処理装置。     The control unit calculates the availability based on device information related to the candidate device.
    The information processing apparatus according to claim 8.
  10. 　前記デバイス情報は、デバイスプロパティ、デバイス位置、デバイススペック、またはデバイス状態のうち少なくともいずれかに関する情報を含む、
    請求項９に記載の情報処理装置。     The device information includes information on device properties, device positions, device specifications, and / or device states.
    The information processing apparatus according to claim 9.
  11. 　前記デバイス情報は、デバイスが配置される位置、想定位置への近さ、音声入力の可否、電源が入っているか否か、またはバッテリー残量のうち少なくともいずれかに関する情報を含む、
    請求項９に記載の情報処理装置。     The device information includes information on at least one of a position where the device is placed, a proximity to an assumed position, voice input availability, power on / off, and a battery remaining amount.
    The information processing apparatus according to claim 9.
  12. 　前記制御部は、前記提供主体の遷移に係るコンテキスト情報に基づいて、前記利用可能度を算出する、
    請求項８に記載の情報処理装置。     The control unit calculates the availability based on context information related to the transition of the provider.
    The information processing apparatus according to claim 8.
  13. 　前記コンテキスト情報は、ユーザのコンテキスト、タスクのコンテキスト、またはユーザ間の関係を示すコンテキストのうち少なくともいずれかに関する情報を含む、
    請求項１２に記載の情報処理装置。     The context information includes information on at least one of a user context, a task context, and a context indicating a relationship between users.
    The information processing apparatus according to claim 12.
  14. 　前記コンテキスト情報は、ユーザの予定、ユーザ同士の関係の近さ、または対象となるタスクが過去に実行された回数のうち少なくともいずれかに関する情報を含む、
    請求項１２に記載の情報処理装置。     The context information may include information regarding at least one of a user's schedule, the proximity of the user's relationship, and the number of times the target task has been executed in the past.
    The information processing apparatus according to claim 12.
  15. 　前記制御部は、前記提供主体が提供する機能ごとに前記遷移情報の表示を制御する、
    請求項１に記載の情報処理装置。     The control unit controls display of the transition information for each function provided by the providing entity.
    An information processing apparatus according to claim 1.
  16. 　前記制御部は、前記提供主体による機能提供の対象となるユーザと前記遷移情報とを対応付けて表示させる、
    請求項１に記載の情報処理装置。     The control unit associates the user as the target of the function provision by the provider and the transition information, and displays the associated information.
    An information processing apparatus according to claim 1.
  17. 　前記制御部は、前記遷移情報を音を用いて出力させる、
    請求項１に記載の情報処理装置。     The control unit causes the transition information to be output using sound.
    An information processing apparatus according to claim 1.
  18. 　前記提供主体が提供する機能は、エージェント機能を含む、
    請求項１に記載の情報処理装置。     The functions provided by the providing entity include an agent function,
    An information processing apparatus according to claim 1.
  19. 　前記制御部による制御に基づいて、前記遷移情報を表示する表示部、
    　をさらに備える、
    請求項１に記載の情報処理装置。     A display unit that displays the transition information based on control by the control unit;
    Further comprising
    An information processing apparatus according to claim 1.
  20. 　プロセッサが、デバイス間において、ユーザに対し機能を提供する提供主体の遷移を制御すること、
    　を含み、
    　前記制御することは、前記提供主体の遷移を実行する場合、前記遷移の状況を示す遷移情報を、前記提供主体の遷移元である遷移元デバイスに動的に出力させること、
    　をさらに含む、
    情報処理方法。     The processor controlling, among the devices, transitions of provider entities that provide functions to the user;
    Including
    The controlling may, when executing the transition of the providing entity, dynamically output transition information indicating a state of the transition to a transition source device as a transition source of the providing entity.
    Further include,
    Information processing method.
PCT/JP2018/039222 2018-01-24 2018-10-22 Information processing device and information processing method WO2019146188A1 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201880075030.5A CN111417917A (en) 2018-01-24 2018-10-22 Information processing apparatus and information processing method
EP18902801.2A EP3745236A4 (en) 2018-01-24 2018-10-22 Information processing device and information processing method
US16/962,850 US20210385101A1 (en) 2018-01-24 2018-10-22 Information processing apparatus and information processing method
JP2019567852A JPWO2019146188A1 (en) 2018-01-24 2018-10-22 Information processing device and information processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-009496 2018-01-24
JP2018009496 2018-01-24

Publications (1)

Publication Number Publication Date
WO2019146188A1 true WO2019146188A1 (en) 2019-08-01

Family

ID=67395293

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/039222 WO2019146188A1 (en) 2018-01-24 2018-10-22 Information processing device and information processing method

Country Status (5)

Country Link
US (1) US20210385101A1 (en)
EP (1) EP3745236A4 (en)
JP (1) JPWO2019146188A1 (en)
CN (1) CN111417917A (en)
WO (1) WO2019146188A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7440654B2 (en) 2020-02-28 2024-02-28 グーグル エルエルシー Interface and mode selection for digital action execution

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10319795A (en) * 1997-05-21 1998-12-04 Minolta Co Ltd Recording medium for copying machine recorded with assigned program in alternative output equipment and copying machine as well as alternative output equipment assigning method for copying machine
JP2000187474A (en) * 1998-12-22 2000-07-04 Casio Comput Co Ltd Display device managing system and program recording medium therefor
JP2005250867A (en) * 2004-03-04 2005-09-15 Sony Corp Control method for information reproduction system, information reproduction system, information provision device, information reproduction device and information provision control program
JP2007072757A (en) * 2005-09-07 2007-03-22 Matsushita Electric Ind Co Ltd Communication terminal
JP2014044483A (en) * 2012-08-24 2014-03-13 Sony Corp Information processing device, information processing method, and program
JP2015194864A (en) * 2014-03-31 2015-11-05 Kddi株式会社 Remote operation method, system, user terminal, and viewing terminal
JP2017039746A (en) 2010-10-12 2017-02-23 シプラ・リミテッド Pharmaceutical composition

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120260202A1 (en) * 2011-04-11 2012-10-11 Microsoft Corporation Customized launching of applications

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10319795A (en) * 1997-05-21 1998-12-04 Minolta Co Ltd Recording medium for copying machine recorded with assigned program in alternative output equipment and copying machine as well as alternative output equipment assigning method for copying machine
JP2000187474A (en) * 1998-12-22 2000-07-04 Casio Comput Co Ltd Display device managing system and program recording medium therefor
JP2005250867A (en) * 2004-03-04 2005-09-15 Sony Corp Control method for information reproduction system, information reproduction system, information provision device, information reproduction device and information provision control program
JP2007072757A (en) * 2005-09-07 2007-03-22 Matsushita Electric Ind Co Ltd Communication terminal
JP2017039746A (en) 2010-10-12 2017-02-23 シプラ・リミテッド Pharmaceutical composition
JP2014044483A (en) * 2012-08-24 2014-03-13 Sony Corp Information processing device, information processing method, and program
JP2015194864A (en) * 2014-03-31 2015-11-05 Kddi株式会社 Remote operation method, system, user terminal, and viewing terminal

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3745236A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7440654B2 (en) 2020-02-28 2024-02-28 グーグル エルエルシー Interface and mode selection for digital action execution
US11922193B2 (en) 2020-02-28 2024-03-05 Google Llc Interface and mode selection for digital action execution

Also Published As

Publication number Publication date
EP3745236A4 (en) 2021-03-24
EP3745236A1 (en) 2020-12-02
CN111417917A (en) 2020-07-14
JPWO2019146188A1 (en) 2021-01-07
US20210385101A1 (en) 2021-12-09

Similar Documents

Publication Publication Date Title
US11625157B2 (en) Continuation of playback of media content by different output devices
JP6503557B2 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND PROGRAM
US10725972B2 (en) Continuous and concurrent device experience in a multi-device ecosystem
JP2020528164A (en) A display device that visualizes content by rotating the display and its control method
KR20140113465A (en) Computing system with content-based alert mechanism and method of operation thereof
WO2017130486A1 (en) Information processing device, information processing method, and program
CN105051653A (en) Information processing device, notification state control method, and program
US20190265798A1 (en) Information processing apparatus, information processing method, program, and information processing system
WO2017115507A1 (en) Information processing device, information processing method, program, and information processing system
JP6857024B2 (en) Playback control method, system, and information processing device
WO2018139036A1 (en) Information processing device, information processing method, and program
JP6733662B2 (en) Information processing apparatus, information processing method, and computer program
WO2019146188A1 (en) Information processing device and information processing method
WO2019146309A1 (en) Information processing device, information processing method, and program
US10445051B1 (en) Recording and replay of support sessions for computing devices
US9596335B2 (en) Communication terminal and communication method
JPWO2015198729A1 (en) Display control apparatus, display control method, and program
JP2016109726A (en) Information processing device, information processing method and program
RU2679719C2 (en) Method and device for controlling working condition
US9417776B2 (en) Media reproducing apparatus and method
WO2018139050A1 (en) Information processing device, information processing method, and program
WO2020031795A1 (en) Information processing device, information processing method, and program
JP7306390B2 (en) Information processing device, information processing method, and program
JP6691201B2 (en) Terminal and server for providing video call service
JP7151707B2 (en) Information processing device, information processing method, and program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18902801

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019567852

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018902801

Country of ref document: EP

Effective date: 20200824