JP7151707B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP7151707B2
JP7151707B2 JP2019525082A JP2019525082A JP7151707B2 JP 7151707 B2 JP7151707 B2 JP 7151707B2 JP 2019525082 A JP2019525082 A JP 2019525082A JP 2019525082 A JP2019525082 A JP 2019525082A JP 7151707 B2 JP7151707 B2 JP 7151707B2
Authority
JP
Japan
Prior art keywords
information
output
information processing
control unit
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019525082A
Other languages
English (en)
Other versions
JPWO2018230056A1 (ja
Inventor
真里 斎藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2018230056A1 publication Critical patent/JPWO2018230056A1/ja
Application granted granted Critical
Publication of JP7151707B2 publication Critical patent/JP7151707B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41415—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance involving a public display, viewable by several users in a public space outside their home, e.g. movie theatre, information kiosk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43078—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen for seamlessly watching content streams when changing device, e.g. when watching the same program sequentially on a TV and then on a tablet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person

Description

本開示は、情報処理装置、情報処理方法、およびプログラムに関する。
近年、情報処理技術の発展に伴い、ユーザに対し情報提示を行う種々の装置が普及している。また、上記のような装置による情報提示の利便性を高める技術が多く開発されている。例えば、特許文献１には、ユーザが装置の周囲に存在する場合にのみ提示情報を音声出力することで、ユーザが提示情報を聞き逃す可能性を低減する情報通知方法が開示されている。
特開２０１６－２０８４９１号公報
しかし、特許文献１に記載の情報通知方法を用いる場合、情報の提示を受けようとするユーザを装置の周辺に拘束することとなる。また、特許文献１に記載の情報通知方法では、装置の周辺に存在しないユーザに対しリアルタイムに情報を提示することが困難である。
そこで、本開示では、ユーザの自由度を許容しながら、より柔軟かつより確実に情報を伝達することが可能な、新規かつ改良された情報処理装置、情報処理方法、およびプログラムを提案する。
本開示によれば、複数の出力端末による提示情報の出力を制御する出力制御部、を備え、前記出力制御部は、ユーザの移動経路に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定する、情報処理装置が提供される。
また、本開示によれば、プロセッサが、複数の出力端末による提示情報の出力を制御すること、を含み、前記制御することは、ユーザの移動経路に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定すること、をさらに含む、情報処理方法が提供される。
また、本開示によれば、コンピュータを、複数の出力端末による提示情報の出力を制御する出力制御部、を備え、前記出力制御部は、ユーザの移動経路に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定する、情報処理装置、として機能させるためのプログラムが提供される。
以上説明したように本開示によれば、ユーザの自由度を許容しながら、より柔軟かつより確実に情報を伝達することが可能となる。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態に係る情報処理装置による提示情報の出力制御について説明するための図である。 同実施形態に係る情報処理システムの構成例を示すブロック図である。 同実施形態に係る情報処理端末の機能構成例を示すブロック図である。 同実施形態に係る情報処理装置の機能構成例を示すブロック図である。 同実施形態に係る情報処理端末が出力可能な視覚情報の情報量に基づく提示情報の割り当てについて説明するための図である。 同実施形態に係る情報処理端末が出力可能な聴覚情報の情報量に基づく提示情報の割り当てについて説明するための図である。 同実施形態に係る情報処理装置による芸術施設に設置される情報処理端末１０の制御例について説明するための図である。 同実施形態に係る情報処理装置による屋外に設置される情報処理端末１０の制御例について説明するための図である。 同実施形態に係る情報処理装置による制御の流れを示すフローチャートである。 同実施形態に係る情報処理装置２０による提示情報の割り当てと出力制御の流れを示すフローチャートである。 本開示に係るハードウェア構成例を示す図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
１．実施形態
１．１．実施形態の概要
１．２．システム構成例
１．３．情報処理端末１０の機能構成例
１．４．情報処理装置２０の機能構成例
１．５．適用例
１．６．制御の流れ
２．ハードウェア構成例
３．まとめ
＜１．実施形態＞
＜＜１．１．実施形態の概要＞＞
まず、本開示の一実施形態の概要について説明する。上述したように、近年においては、ユーザに対し情報を提示する種々の装置が普及している。上記のような装置は、例えば、受信したメッセージやニュース、設定されたアラームやスケジュールなどを音声や画像を用いてユーザに逐次提示することができる。
しかし、上記のような装置が、所定の場所に設置される据え置き型である場合、ユーザが情報を受け取れるのは、装置の周辺に居る場合のみである。このため、装置の周辺に居ない際に情報が出力された場合、ユーザが重要な情報を見落とす、あるいは聞き逃す状況が生じ得る。
ここで、上記のような状況を防止するためには、例えば、特許文献１に記載の技術のように、ユーザの所在を検出し、ユーザが装置の周辺に存在する場合にのみ、情報を提示することも想定される。
しかし、特許文献１に記載の技術では、提示される情報の重要度や緊急度が高い場合であっても、ユーザが装置の周辺に存在しない場合には、当該情報をユーザにリアルタイムに提示することが困難である。このため、特許文献１に記載の技術を用いる場合、提示情報の鮮度が失われ、ユーザが情報を受けとった際には、当該情報の本来の価値が著しく低下しているケースも起こり得る。
一方、情報提示に係るリアルタイム性を優先する場合、提示情報を例えばユーザが所持するモバイル端末などに転送することも可能である。しかしながら、例えば、家庭内やオフィス、休暇中に滞在する宿泊施設などにおいては、ユーザがモバイル端末の携帯を避けたがるケースや、モバイル端末の携帯を失念するケースなども想定される。また、例えば、公共施設や客先などでは、モバイル端末が使用できない、あるいはモバイル端末の使用が躊躇われる場合もある。
このため、ユーザに対する情報提示においては、ユーザがモバイル端末を携帯していない場合であっても、ユーザが所在する地点においてリアルタイムに情報を提示する技術が求められていた。
本開示に係る技術思想は、上記の点に着目して発想されたものであり、ユーザの自由度を許容しながら、より柔軟かつより確実に情報を伝達することを可能とする。このために、本開示の一実施形態に係る情報処理方法に基づく処理を実現する情報処理装置は、ユーザの移動経路に基づいて複数の出力端末のそれぞれに出力させる提示情報の割り当てを決定すること、を特徴の一つとする。すなわち、本実施形態に係る情報処理装置は、ユーザの移動経路に存在する複数の出力端末に、提示情報を分散して出力させることができる。
図１は、本実施形態に係る情報処理装置による提示情報の出力制御について説明するための図である。なお、図１では、提示情報がユーザのスケジュールに関する情報であり、ユーザが家庭内をリビング、廊下、自室と順に移動する場合を例に説明する。
この際、本実施形態に係る情報処理装置は、ユーザの移動経路に存在する複数の出力端末、すなわち情報処理端末１０ａ～１０ｃに出力させる提示情報の割り当てを決定し、当該割り当てに基づいて、提示情報を分散して出力させることができる。
また、本実施形態に係る情報処理装置は、情報処理端末１０ａ～１０ｃの出力特性に基づいて、提示情報の割り当てを決定してよい。上記の出力特性には、例えば、情報処理端末１０ａ～１０ｃが出力可能な情報種別が含まれる。より具体的には、情報処理装置は、情報処理端末１０がディスプレイなどを有し視覚情報を出力可能である場合には、情報処理端末１０に提示情報の一部を画像として割り当て、出力させることができる。また、情報処理装置は、情報処理端末１０がスピーカなどを有し聴覚情報を出力可能である場合には、情報処理端末１０に提示情報の一部を音声として割り当て、出力させることができる。
例えば、時刻ｔ１において、ユーザが存在するリビングに配置される情報処理端末１０ａは、視覚情報および聴覚情報の両方を出力することが可能な端末である。この際、情報処理装置は、提示情報の一部を画像および音声として情報処理端末１０ａに割り当て、出力させる。図１に示す一例の場合、情報処理端末１０ａは、上記の割り当てに基づいて、月曜日のスケジュールに関する情報を画像および音声を用いて出力している。
また、時刻ｔ２において、ユーザが移動する廊下に配置される情報処理端末１０ｂは、聴覚情報のみを出力することが可能な端末である。この際、情報処理装置は、提示情報の一部を音声として情報処理端末１０ｂに割り当て、出力させる。図１に示す一例の場合、情報処理端末１０ｂは、上記の割り当てに基づいて、火曜日のスケジュールに関する情報を音声を用いて出力している。
また、時刻ｔ３において、ユーザが存在する自室に配置される情報処理端末１０ｃは、視覚情報および聴覚情報の両方を出力することが可能な端末である。この際、情報処理装置は、提示情報の一部を画像および音声として情報処理端末１０ｃに割り当て、出力させる。図１に示す一例の場合、情報処理端末１０ｃは、上記の割り当てに基づいて、水曜日のスケジュールに関する情報を画像および音声を用いて出力している。
また、本実施形態に係る情報処理装置は、提示情報の一部が複数の情報処理端末１０により重複して出力されるように割り当てを決定してもよい。情報処理装置は、例えば、提示情報の一部が２つの異なる情報処理端末１０によりそれぞれ音声または画像として出力されるよう割り当てを行うことができる。
図１に示す一例の場合、情報処理装置は、情報処理端末１０ｂに火曜日のスケジュールに関する情報を音声により出力させ、情報処理端末１０ｃに当該情報を画像により出力させている。本実施形態に係る情報処理装置による上記の制御によれば、ユーザは、時刻ｔ２において音声のみを用いて提示された火曜日のスケジュールに関する情報を、時刻ｔ３において画像として再度確認することができる。このように、本実施形態に係る情報処理装置は、移動経路において聴覚情報または視覚情報の一方のみを出力可能な情報処理端末１０が存在する場合、他の情報処理端末１０により不足した情報が補われるよう割り当てを行うことが可能である。
以上説明したように、本実施形態に係る情報処理装置は、ユーザの移動経路に存在する複数の情報処理端末１０に提示情報を分散して出力させることができる。情報処理装置が有する上記の機能によれば、ユーザがモバイル端末を携帯しない場合であっても、ユーザの移動経路に応じてリアルタイムに情報を提示することができ、ユーザの行動を限定することなくより利便性の高い情報提示を実現するこが可能となる。
＜＜１．２．システム構成例＞＞
次に、本実施形態に係る情報処理システムの構成例について説明する。図２は、本実施形態に係る情報処理システムの構成例を示すブロック図である。図２を参照すると、本実施形態に係る情報処理システムは、情報処理端末１０と情報処理装置２０を備える。なお、本実施形態に係る情報処理システムは、情報処理端末１０を複数備えてよい。また、情報処理端末１０と情報処理装置２０とは、互いに通信が行えるようにネットワーク３０を介して接続される。
（情報処理端末１０）
本実施形態に係る情報処理端末１０は、情報処理装置２０による制御に基づいて、割り当てられた提示情報の一部を聴覚情報や視覚情報として出力する機能を有する。本実施形態に係る情報処理端末１０は、聴覚情報または視覚情報のうち少なくとも一方を出力することが可能な装置と定義することができる。
本実施形態に係る情報処理端末１０は、例えば、聴覚情報を出力可能な音響装置であってもよいし、視覚情報を出力可能なディスプレイ装置であってもよい。また、本実施形態に係る情報処理端末１０は、聴覚情報および視覚情報の両方を出力可能な装置であってもよい。
本実施形態に係る情報処理端末１０は、屋内や屋外に配置される種々の装置として実現され得る。情報処理端末１０は、例えば、テレビジョン装置、コンピュータ、オーディオ装置、家電機器、デジタルサイネージ装置、自動販売機などであり得る。
また、本実施形態に係る情報処理端末１０は、ユーザや周囲の環境に係る種々のセンサ情報を収集する機能を有する。上記のセンサ情報は、情報処理装置２０による提示情報の出力制御に用いられる。
（情報処理装置２０）
本実施形態に係る情報処理装置２０は、ユーザの移動経路や情報処理端末１０の出力特性などに基づいて、複数の情報処理端末１０による提示情報の出力を制御する機能を有する。より具体的には、本実施形態に係る情報処理装置２０は、ユーザの移動経路に存在する複数の情報処理端末１０に出力させる提示情報の割り当てを決定し、当該割り当てに基づいて提示情報を分散して出力させることができる。
（ネットワーク３０）
ネットワーク３０は、情報処理端末１０と情報処理装置２０とを接続する機能を有する。ネットワーク３０は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ｅｔｈｅｒｎｅｔ（登録商標）を含む各種のＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを含んでもよい。また、ネットワーク３０は、ＩＰ－ＶＰＮ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ－Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）などの専用回線網を含んでもよい。また、ネットワーク３０は、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）など無線通信網を含んでもよい。
＜＜１．３．情報処理端末１０の機能構成例＞＞
次に、本実施形態に係る情報処理端末１０の機能構成例について説明する。図３は、本実施形態に係る情報処理端末１０の機能構成例を示すブロック図である。図３を参照すると、本実施形態に係る情報処理端末１０は、出力部１１０、音声入力部１２０、撮像部１３０、センサ部１４０、およびサーバ通信部１５０を備える。
本実施形態に係る出力部１１０は、情報処理装置２０による制御に基づいて、割り当てられた提示情報の一部を聴覚情報または視覚情報として出力させる機能を有する。このために、本実施形態に係る出力部１１０は、画像を出力することが可能なディスプレイ装置や音声を出力することが可能なスピーカなどを備える。
（音声入力部１２０）
本実施形態に係る音声入力部１２０は、背景音やユーザによる発話など音情報を収集する機能を有する。音声入力部１２０が収集した背景音や発話は、情報処理装置２０による提示情報の出力制御に用いられる。本実施形態に係る音声入力部１２０は、背景音や発話などを収集するためのマイクロフォンを備える。
（撮像部１３０）
本実施形態に係る撮像部１３０は、ユーザや周囲環境を含む画像を撮像する機能を有する。撮像部１３０が撮像した画像は、情報処理装置２０による提示情報の出力制御に用いられる。本実施形態に係る撮像部１３０は、画像を撮像することが可能な撮像装置を備える。なお、上記の画像には、静止画像のほか動画像が含まれる。
（センサ部１４０）
本実施形態にセンサ部１４０は、ユーザや周囲環境の状態を示す種々のセンサ情報を収集する機能を有する。センサ部１４０が収集したセンサ情報は、情報処理装置２０による提示情報の出力制御に用いられる。本実施形態に係るセンサ部１４０は、例えば、赤外線センサを含む各種の光センサ、熱センサなどを備える。
（サーバ通信部１５０）
本実施形態に係るサーバ通信部１５０は、ネットワーク３０を介して情報処理装置２０との次情報通信を行う機能を有する。具体的には、サーバ通信部１５０は、情報処理装置２０に、音声入力部１２０が収集した音情報、撮像部１３０が撮像した画像情報、センサ部１４０が収集したセンサ情報を送信する。また、サーバ通信部１５０は、情報処理装置２０に、情報処理端末１０の稼働状況を示す情報を送信してもよい。また、サーバ通信部１５０は、提示情報の出力に係る制御信号や合成された人工音声を情報処理装置２０から受信する。
以上、本実施形態に係る情報処理端末１０の機能構成例について説明した。なお、図３を用いて説明した上記の構成はあくまで一例であり、本実施形態に係る情報処理端末１０の機能構成は係る例に限定されない。本実施形態に係る情報処理端末１０は、例えば、音声入力部１２０、撮像部１３０、センサ部１４０のすべてを必ずしも備えなくてもよい。また、本実施形態に係る情報処理端末１０は、図３に示す以外の構成をさらに備えてもよい。情報処理端末１０は、例えば、ユーザによる入力操作を受け付ける入力部や、情報処理端末１０の特性に応じた機能を制御する機能制御部などを備えてもよい。本実施形態に係る情報処理端末１０の機能構成は、仕様や運用に応じて柔軟の変形可能である。
＜＜１．４．情報処理装置２０の機能構成例＞＞
次に、本実施形態に係る情報処理装置２０の機能構成例について説明する。図４は、本実施形態に係る情報処理装置２０の機能構成例を示すブロック図である。図４を参照すると、本実施形態に係る情報処理装置２０は、認識部２１０、経路算出部２２０、出力制御部２３０、音声合成部２４０、記憶部２５０、および端末通信部２６０を備える。また、記憶部２５０は、ユーザＤＢ２５２、端末ＤＢ２５４、提示情報ＤＢ２５６を含む。
（認識部２１０）
本実施形態に係る認識部２１０は、ユーザや周囲の環境状態を認識する機能を有する。認識部２１０は、例えば、情報処理端末１０が収集したユーザの発話や画像と、ユーザＤＢ２５２に予め記憶されるユーザの音声特徴や画像とを比較することでユーザの認識を行うことができる。本実施形態に係る認識部２１０は、広く用いられる種々の認識技術を用いて上記のユーザ認識を行ってよい。
また、認識部２１０は、情報処理端末１０が収集したユーザの発話、画像、センサ情報などに基づいて、ユーザの状態を認識することができる。上記の状態には、ユーザの行動や感情に係る種々の状態が含まれる。例えば、認識部２１０は、情報処理端末１０が収集した画像やセンサ情報に基づいて、ユーザの移動速度を認識することができる。また、例えば、認識部２１０は、情報処理端末１０が収集したユーザの発話に基づいて、当該ユーザが他者と会話を行っていることを認識してもよい。
また、例えば、認識部２１０は、情報処理端末１０が撮像した画像に基づいて、ユーザの視線が情報処理端末１０が備えるディスプレイ装置を向いていないことを認識してもよい。また、例えば、認識部２１０は、情報処理端末１０が撮像した画像に基づいて、ユーザの感情が昂っていることを認識してもよい。
また、認識部２１０は、情報処理端末１０が収集した音情報、画像、センサ情報などに基づいて、周囲の環境状態を認識することができる。例えば、認識部２１０は、情報処理端末１０が収集した音情報に基づいて周囲の騒音レベルを認識してもよい。また、例えば、認識部２１０は、情報処理端末１０が収集したセンサ情報に基づいて、周囲における光量や光源の向きなどを認識してもよい。
（経路算出部２２０）
本実施形態に係る経路算出部２２０は、ユーザの移動経路を算出する機能を有する。経路算出部２２０は、例えば、複数の情報処理端末１０により収集されたユーザの発話、画像、センサ情報などに基づいて、ユーザの移動経路を推定してもよい。経路算出部２２０は、例えば、情報処理端末１０が備える赤外線センサがユーザの接近を検出したことに基づいて、その後のユーザの移動経路を推定することができる。
また、経路算出部２２０は、ユーザによる明示的な入力に基づいて移動経路を算出してもよい。経路算出部２２０は、例えば、ユーザが入力した目的地に基づいて、移動経路を算出してもよい。
また、経路算出部２２０は、ユーザＤＢ２５２に記憶されるユーザの情報に基づいて移動経路を算出することも可能である。経路算出部２２０は、例えば、日常においてユーザが所定時間に同一の経路を移動することを示す情報に基づいて移動経路を算出してもよい。
また、経路算出部２２０は、予め設定された特定の経路を移動経路として出力してもよい。例えば、ホテルなどの施設における避難経路は基本的に変更されないことが想定される。この場合、経路算出部２２０は、予め設定された避難経路を移動経路として出力してよい。
（出力制御部２３０）
本実施形態に係る出力制御部２３０は、複数の情報処理端末１０による提示情報の出力を制御する機能を有する。この際、出力制御部２３０は、経路算出部２２０が算出した移動経路に基づいて、提示情報を出力させる複数の情報処理端末１０を決定し、それぞれに出力させる提示情報の割り当てを行うこと、を特徴の一つとする。
本実施形態に係る出力制御部２３０が有する上記の機能によれば、ユーザが行動の制限を受けず、移動先でリアルタイムに情報の提示を受けることが可能となる。
なお、本実施形態に係る出力制御部２３０は、移動経路のほか、種々の要素に基づいて、提示情報の割り当てや出力を柔軟に制御することができる。
出力制御部２３０は、例えば、情報処理端末１０の出力特性に基づいて、提示情報の割り当てや出力を制御してよい。ここで、上記の出力特性には、情報処理端末１０が出力可能な情報種別が含まれる。出力制御部２３０は、図１を用いて説明したように、聴覚情報を出力可能な情報処理端末１０に対し提示情報の一部を音声として割り当てて出力させ、視覚情報を出力可能な情報処理端末１０に対し提示情報の一部を画像として割り当てて出力させることができる。
本実施形態に係る出力制御部２３０が有する上記の機能によれば、移動経路に存在する情報処理端末１０が有するモーダルに応じた柔軟な提示情報の割り当てが可能となる。また、上述したように、出力制御部２３０は、不足した聴覚情報や視覚情報が他の情報処理端末１０により補われるよう割り当てを制御することで、提示情報の完全性を担保することができる。
また、情報処理端末１０の出力特性には、情報処理端末１０が出力可能な情報量が含まれる。本実施形態に係る出力制御部２３０は、上記の情報量に基づいて提示情報の割り当てや出力を制御することができる。出力制御部２３０は、例えば、より多くの情報量を出力できる情報処理端末１０により多くの提示情報を割り当ててよい。
例えば、情報処理端末１０が視覚情報を出力可能な場合、出力制御部２３０は、情報処理端末１０が備える表示部（ディスプレイ装置など）の画面サイズや解像度に基づいて上記の情報量を算出することができる。
図５は、本実施形態に係る情報処理端末１０が出力可能な視覚情報の情報量に基づく提示情報の割り当てについて説明するための図である。図５には、ユーザの移動経路において、時刻ｔ１の時点に存在する情報処理端末１０ａ、時刻ｔ２の時点に存在する情報処理端末１０ｂ、および時刻ｔ３の時点に存在する情報処理端末１０ｃが示されている。
この際、本実施形態に係る出力制御部２３０は、情報処理端末１０ａ～１０ｃが備えるディスプレイ装置の画面サイズに基づいて、提示情報の割り当てと出力を制御することができる。図５に示す一例の場合、出力制御部２３０は、情報処理端末１０ａ～１０ｃにそれぞれ月曜日、火曜日、水曜日のスケジュールに関する情報を割り当てているが、このうち画面サイズの小さい情報処理端末１０ｂには、情報処理端末１０ａや情報処理端末１０ｃよりも粒度の粗いスケジュールを表示させている。また、図５に示す一例の場合、出力制御部２３０は、情報処理端末１０ｂによる出力において不足した詳細な情報を情報処理端末１０ｃに聴覚情報として出力させることで補完している。
このように、本実施形態に係る出力制御部２３０によれば、情報処理端末１０が出力可能な視覚情報の情報量に応じて提示情報の割り当てや出力を適切に制御することで、ユーザにとってより把握のし易い情報提示を実現することができる。
また、情報処理端末１０が聴覚情報を出力可能な場合、出力制御部２３０は、情報処理端末１０が出力可能な最大音量に基づいて上記の情報量を算出することができる。より具体的には、出力制御部２３０は、上記の最大音量に基づいて情報処理端末１０により出力される聴覚情報がユーザに届く範囲を推定し、提示情報の割り当てや出力を制御してよい。
図６は、本実施形態に係る情報処理端末１０が出力可能な聴覚情報の情報量に基づく提示情報の割り当てについて説明するための図である。図６には、ユーザの移動経路において、時刻ｔ１の時点に存在する情報処理端末１０ａ、および時刻ｔ２の時点に存在する情報処理端末１０ｂが示されている。
この際、本実施形態に係る出力制御部２３０は、情報処理端末１０ａおよび１０ｂが出力可能な最大音量に基づいて、提示情報の割り当てと出力を制御することができる。図６に示す一例の場合、出力制御部２３０は、「今日は午後２時からＸ支社で会議の予定です」、という提示情報の前半部および後半部を情報処理端末１０ａおよび１０ｂにそれぞれ割り当て出力させている。
より具体的には、出力制御部２３０は、情報処理端末１０ａが最大音量で出力を行った場合に、提示情報がユーザに届くと推定される距離と提示情報の出力に要する時間とに基づいて、「今日は午後２時からＸ支社」、を情報処理端末１０ａに割り当て出力させている。
また、出力制御部２３０は、情報処理端末１０ｂが最大音量で出力を行った場合に、提示情報がユーザに届くと推定される距離と提示情報の出力に要する時間とに基づいて、「Ｘ支社で会議の予定です」、を情報処理端末１０ｂに割り当て出力させている。
また、出力制御部２３０は、情報処理端末１０ａおよび１０ｂに「Ｘ支社」が重複して出力されるように割り当てを行っている。出力制御部２３０が上記のような重複割り当てを行うことで、提示情報が不自然に途切れることを防止し、より自然な情報提示を実現することができる。
さらには、出力制御部２３０は、情報処理端末１０ａおよび１０ｂの出力音量を変化させることで、ユーザにとっては提示情報が一定の大きさで聞こえるように制御を行うことも可能である。具体的には、出力制御部２３０は、情報処理端末１０ａによる音声出力では次第に出力音量が上がるよう制御し、情報処理端末１０ｂによる音声出力では次第に出力音量が下がるよう制御してよい。出力制御部２３０による上記の制御によれば、音声を用いたより自然な情報提示を実現することが可能となる。なお、出力制御部２３０は、例えば、認識部２１０が認識したユーザの移動速度に基づいて、音量の制御を行うことができる。
また、本実施形態に係る情報処理端末１０の出力と特性には、上記で述べた出力可能な情報種別や情報量のほか、情報処理端末１０が有する機能の有無などが含まれる。出力制御部２３０は、例えば、情報処理端末１０がビームフォーミングなど出力方向の指向性を制御可能な機能を有する場合には、当該機能を考慮して提示情報の割り当てや出力を制御してもよい。また、例えば、出力制御部２３０は、情報処理端末１０が画面分割機能などを有する場合には、当該機能を活用するための割り当てや出力制御を行うことが可能である。
また、本実施形態に係る出力制御部２３０は、提示情報の出力に係るコンテキストに基づいて、割り当てや出力制御を行うことができる。上記コンテキストには、例えば、ユーザの状態が含まれる。出力制御部２３０は、認識部２１０により認識されたユーザの状態に基づいて提示情報の割り当てや出力を制御することが可能である。
例えば、出力制御部２３０は、認識部２１０が認識したユーザの移動速度に基づいて、提示情報の割り当てを決定し、出力制御を行ってもよい。出力制御部２３０は、ユーザの移動速度が比較的速い場合には、ユーザが視覚情報を把握することが困難であると判定し、聴覚情報を中心に割り当てを行うことで、ユーザが提示情報を見逃す可能性を低減することができる。また、出力制御部２３０は、ユーザの移動速度に応じた適切な情報提示を行うために、情報処理端末１０の数や配置間隔を考慮した割り当てを行うことできる。
また、例えば、出力制御部２３０は、認識部２１０が認識したユーザの行動に基づいて、提示情報の割り当てを決定し、出力制御を行ってもよい。出力制御部２３０は、ユーザが他者と会話を行っている場合には視覚情報を中心とした割り当てを行ってもよいし、ユーザが他の装置の操作などを行っている場合には聴覚情報を中心とした割り当てを行ってもよい。また、出力制御部２３０は、認識部２１０がユーザの視線が情報処理端末１０が備えるディスプレイ装置を向いていないと認識したことに基づいて、聴覚情報での補完を行ったり、他の情報処理端末１０に再度同じ視覚情報を出力させるなどの制御を行うことも可能である。
また、提示情報の出力に係るコンテキストには、ユーザ特性が含まれる。出力制御部２３０は、ユーザＤＢ２５２に記憶されるユーザの情報に基づいて、提示情報の割り当てや出力を制御することができる。
例えば、出力制御部２３０は、ユーザＤＢ２５２に記憶される情報が、ユーザが視覚情報による情報提示を好むことを示す場合には、視覚情報を中心とした割り当てを行ってもよい。また、例えば、出力制御部２３０は、ユーザＤＢ２５２からユーザが多忙である時間帯に係る情報を取得し、当該時間帯においては、ユーザが他の作業を行っている可能性が高いと推定し、聴覚情報を中心とした割り当てを行ってもよい。
また、提示情報の出力に係るコンテキストには、周囲の環境状態が含まれる。出力制御部２３０は、認識部２１０が認識したユーザの周囲の環境状態に基づいて、提示情報の割り当てや出力を制御することができる。
例えば、出力制御部２３０は、認識部２１０が認識した騒音レベルが閾値よりも高い場合には、視覚情報を中心とした提示情報の割り当てを行ってもよい。また、例えば、出力制御部２３０は、認識部２１０が認識した光源や光量に基づいて視覚情報の視認が困難であると判定した場合には、聴覚情報を中心とした提示情報の割り当てを行ってもよい。
また、提示情報の出力に係るコンテキストには、端末の稼働状況が含まれる。出力制御部２３０は、情報処理端末１０から取得した稼働状況に関する情報に基づいて、提示情報の割り当てや出力を制御することができる。
例えば、出力制御部２３０は、ＢＧＭなど他の音情報を出力中の情報処理端末１０には視覚情報の割り当てを行ってもよいし、スライドなど他の視覚情報を出力中の情報処理端末１０には聴覚情報の割り当てを行ってもよい。
また、提示情報の出力に係るコンテキストには、提示情報の特性が含まれる。出力制御部２３０は、提示情報の特性に基づいて、当該提示情報の割り当てや出力を制御することができる。
例えば、提示情報に時系列データなどグラフ化が可能な情報が含まれる場合、出力制御部２３０は、当該情報を視覚情報として情報処理端末１０に割り当て、出力させることができる。また、例えば、提示情報に画像と当該画像に関する説明が含まれる場合には、出力制御部２３０は、画像を視覚情報として割り当て、説明を聴覚情報として割り当てることもできる。
以上、本実施形態に係る出力制御部２３０による提示情報の割り当てと出力制御の例について説明した。本実施形態に係る出力制御部２３０は、上記の例示に限定されず、種々の要素に応じた柔軟な出力制御を行うことが可能である。
（音声合成部２４０）
本実施形態に係る音声合成部２４０は、出力制御部２３０による制御に基づいて、情報処理端末１０により出力される人工音声を合成する機能を有する。
（記憶部２５０）
本実施形態に係る記憶部２５０は、ユーザＤＢ２５２、端末ＤＢ２５４、および提示情報ＤＢ２５６を含む。
（（ユーザＤＢ２５２））
本実施形態に係るユーザＤＢ２５２は、ユーザに関する情報を記憶する。ユーザＤＢ２５２は、例えば、ユーザ年齢、性別、顔画像、音声特徴などを記憶する。また、ユーザＤＢ２５２は、ユーザの嗜好や特性を示す種々の情報を記憶する。
（（端末ＤＢ２５４））
本実施形態に係る端末ＤＢ２５４は、情報処理端末１０に関する情報を記憶する。端末ＤＢ２５４は、例えば、端末ＤＢ２５４の位置情報、出力可能な情報種別、画面サイズ、解像度、最大出力音量、機能などの情報を記憶する。端末ＤＢ２５４が記憶する上記の情報は、出力制御部２３０による情報処理端末１０の選択や割り当て、出力制御に用いられる。
（（提示情報ＤＢ２５６））
本実施形態に係る提示情報ＤＢ２５６は、情報処理端末１０により出力される提示情報を記録する。提示情報ＤＢ２５６が記憶する提示情報は、例えば、メッセージ、ニュース、広告、スケジュール、ユーザの問い合わせに対する回答などであってよい。また、本実施形態に係る提示情報は、必ずしも提示情報ＤＢ２５６に記憶されなくてもよい。本実施形態に係る提示情報は、例えば、ネットワーク３０を介して別の装置から取得されてもよいし、出力制御部２３０により動的に生成されてもよい。
（端末通信部２６０）
本実施形態に係る端末通信部２６０は、ネットワーク３０を介して、複数の情報処理端末１０との情報通信を行う機能を有する。具体的には、端末通信部２６０は、情報処理端末１０から音情報、画像情報、センサ情報、および稼働状況を示す情報などを受信する。また、端末通信部２６０は、出力制御部２３０が生成する提示情報の出力に係る制御信号や、音声合成部２４０が合成した人工音声を情報処理端末１０に送信する。
以上、本実施形態に係る情報処理装置２０の機能構成例について説明した。なお、図４を用いて説明した上記の構成はあくまで一例であり、本実施形態に係る情報処理装置２０の機能構成は係る例に限定されない。例えば、情報処理装置２０は、必ずしも図４に示す構成のすべてを備えなくてもよい。認識部２１０、経路算出部２２０、音声合成部２４０、および記憶部２５０は、情報処理装置２０とは異なる別の装置に備えることも可能である。本実施形態に係る情報処理装置２０の機能構成は、仕様や運用に応じて柔軟に変形可能である。
＜＜１．５．適用例＞＞
次に、本実施形態に係る情報処理装置２０の適用例について説明する。上記の説明においては、本実施形態に係る情報処理装置２０が主に家庭やオフィスなどの屋内に設置される情報処理端末１０による出力を制御する場合を例に述べた。しかし、本実施形態に係る情報処理装置２０は、上記の例に限定されず、種々の屋内施設に設置される情報処理端末１０による出力を制御することが可能である。
本実施形態に係る情報処理装置２０は、例えば、美術館などの芸術施設に設置される情報処理端末１０による提示情報の出力を制御してもよい。近年では、芸術施設においては、ヘッドセットなどを用いて作品などの説明を行う場合があるが、本実施形態に係る情報処理装置２０によれば、上記のようなヘッドセットがなくともユーザが移動経路に応じた作品の説明などを享受することが可能である。
図７は、本実施形態に係る情報処理装置２０による芸術施設に設置される情報処理端末１０の制御例について説明するための図である。図７には、ユーザの移動経路において、時刻ｔ１の時点に存在する情報処理端末１０ａ、および時刻ｔ２の時点に存在する情報処理端末１０ｂが示されている。
この際、本実施形態に係る出力制御部２３０は、ユーザの移動速度や状態に基づいて、情報処理端末１０ａおよび１０ｂに出力させる提示情報の割り当てを行うことができる。例えば、芸術施設における作品鑑賞の時間は、ユーザによる個人差が比較的大きいことが想定される。このため、出力制御部２３０は、ユーザが作品を鑑賞するために移動を停止している間、近くに位置する情報処理端末１０ａに提示情報を出力させ続け、ユーザが移動を再開した場合には、移動先に配置される情報処理端末１０ｂに残りの提示情報を出力させることもできる。このように、本実施形態に係る出力制御部２３０は、提示情報に係るコンテキストに基づいて、当該提示情報の割り当てを動的に変更することが可能である。
また、出力制御部２３０は、ユーザが作品の鑑賞に集中している場合には、提示情報を聴覚情報として割り当てることで、作品の鑑賞中にもユーザが提示情報を受け取れるよう制御を行ってもよい。
このように、本実施形態に係る情報処理装置２０によれば、ヘッドセットやモバイル端末を用いずにユーザに適切な情報提示を行うことができ、ユーザが芸術を楽しみながらも有益な情報を手軽に入手することが可能となる。
なお、ユーザが同時に複数存在する場合には、出力制御部２３０は、ビームフォーミングや画面分割などの機能を活用することで、それぞれのユーザに対応した出力制御を行うことができる。
また、本実施形態に係る情報処理装置２０は、屋内に設置される情報処理端末１０のほか、屋外に配置される情報処理端末１０による提示情報の出力を制御することも可能である。
図８は、本実施形態に係る情報処理装置２０による屋外に設置される情報処理端末１０の制御例について説明するための図である。図８には、市街における道路地図と道路に沿って配置される複数の情報処理端末１０ａ～ｄとが示されている。
本実施形態に係る情報処理装置２０は、例えば、目的地Ｄまでのナビゲーション情報を情報処理端末１０に出力させることができる。例えば、ユーザがナビケーションの開始地点Ｓにいる場合、本実施形態に係る経路算出部２２０が目的地Ｄまでの移動経路ｒ１を算出する。この際、出力制御部２３０は、経路算出部２２０が算出した移動経路ｒ１に基づいて、ナビゲーション情報、すなわち提示情報を情報処理端末１０ａおよび１０ｂに割り当て出力させる。このように、本実施形態に係る出力制御部２３０は、算出された移動経路に基づいて、提示情報を出力させる情報処理端末１０ａを決定してよい。
図８に示す一例の場合、出力制御部２３０は、情報処理端末１０ａに右折を促す旨の聴覚情報を割り当てて出力させ、情報処理端末１０ｂに目的地Ｄまでの具体的な道のりを示す視覚情報を割り当てて出力させている。
一方、ユーザがナビゲーションに従わない場合や、出力された提示情報を聞き逃す場合も想定される。例えば、ユーザが情報処理端末１０ａにより出力される聴覚情報を聞き逃して開始地点Ｓから左折を行った場合、経路算出部２２０は、情報処理端末１０ａや１０ｃが収集した画像やセンサ情報に基づいて、移動経路ｒ２を算出する。
この際、出力制御部２３０は、新たに算出された移動経路ｒ２に基づいて、提示情報を情報処理端末１０ｃおよび１０ｄに割り当てし直すことが可能である。図８に示す一例では、出力制御部２３０が情報処理端末１０ｃおよび１０ｄにそれぞれ右折を促す旨の聴覚情報を割り当てて出力させている。このように、本実施形態に係る出力制御部２３０は、経路算出部２２０が算出する移動経路に基づいて、提示情報を出力させる情報処理端末１０や割り当てを動的に変更することが可能である。
以上、本実施形態に係る情報処理装置２０が屋外に設置される情報処理端末１０による提示情報の出力を制御する場合の例を説明した。本実施形態に係る情報処理装置２０によれば、市街に配置されるデジタルサイネージ装置や自動販売機などのリソースを有効に活用し、ユーザに対し有益な情報提示をリアルタイムに行うことが可能となる。
なお、本実施形態に係る情報処理装置２０は、市街のほか、例えば、企業などの私有地に配置される情報処理端末１０に係る出力制御を行ってもよい。上記のような私有地では、地図情報を外部に公開しない場合が一般的であるが、本実施形態に係る情報処理装置２０によれば、来客に地図情報を公開せずに上記のようなナビゲーションを実施することも可能となる。
＜＜１．６．制御の流れ＞＞
次に、本実施形態に係る情報処理装置２０による制御の流れについて説明する。図９は、本実施形態に係る情報処理装置２０による制御の流れを示すフローチャートである。
図９を参照すると、まず、情報処理装置２０の端末通信部２６０が複数の情報処理端末１０から収集情報を受信する（Ｓ１１０１）。ここで、上記の収集情報には、音情報、画像情報、センサ情報、稼働状況を示す情報などが含まれる。
次に、認識部２１０がステップＳ１１０１において受信された収集情報に基づいて、ユーザや周辺環境に係る認識を実行する（Ｓ１１０２）。なお、ステップＳ１１０２における認識処理は、後続する処理と並行して継続して実行される。
次に、経路算出部２２０がステップＳ１１０１において受信された収集情報などに基づいて、ユーザの移動経路を算出する（Ｓ１１０３）。
次に、出力制御部２３０がステップＳ１１０３において算出された移動経路に基づいて、移動経路に存在する複数の情報処理端末１０に係る端末情報を端末ＤＢ２５４から取得する（Ｓ１１０４）。
続いて、出力制御部２３０は、ステップＳ１１０４において取得した端末情報やステップＳ１１０２において認識された種々の状態に基づいて提示情報の割り当てと出力制御を実行する（１１０５）。
以上、本実施形態に係る情報処理装置２０による制御の流れについて説明した。続いて、本実施形態に係る情報処理装置２０による提示情報の割り当てと出力制御の流れについて詳細に説明する。図１０は、本実施形態に係る情報処理装置２０による提示情報の割り当てと出力制御の流れを示すフローチャートである。
図１０を参照すると、出力制御部２３０は、図９に示すステップＳ１１０４において取得した端末情報に基づいて、情報処理端末１０が出力可能な情報種別を判定する（Ｓ１２０１）。
ここで、情報処理端末１０が出力可能な情報種別が聴覚情報のみである場合（Ｓ１２０１：聴覚）、出力制御部２３０は、情報処理端末１０の出力特性と提示情報の出力に係るコンテキストに基づいて、情報処理端末１０に聴覚情報の割り当てを行う（Ｓ１２０２）。
また、情報処理端末１０が聴覚情報および視覚情報の両方を出力可能である場合（Ｓ１２０１：聴覚・視覚）、出力制御部２３０は、情報処理端末１０の出力特性と提示情報の出力に係るコンテキストに基づいて、情報処理端末１０に聴覚情報および視覚情報の割り当てを行う（Ｓ１２０３）。
また、情報処理端末１０が出力可能な情報種別が視覚情報のみである場合（Ｓ１２０１：視覚）、出力制御部２３０は、情報処理端末１０の出力特性と提示情報の出力に係るコンテキストに基づいて、情報処理端末１０に視覚情報の割り当てを行う（Ｓ１２０４）。
ステップＳ１２０２やステップＳ１２０３において聴覚情報の割り当てを行った場合、出力制御部２３０は、当該聴覚情報に対応する人工音声を音声合成部２４０に合成させる（Ｓ１２０５）。
続いて、出力制御部２３０は、ステップＳ１２０２～Ｓ１２０４において決定した割り当てに基づいて複数の情報処理端末１０による提示情報の出力を制御する（Ｓ１２０６）。なお、本実施形態に係る出力制御部２３０は、上述したように、情報処理端末１０により収集される収集情報に基づいて、動的に割り当てを変更することが可能である。
＜２．ハードウェア構成例＞
次に、本開示の一実施形態に係る情報処理端末１０および情報処理装置２０に共通するハードウェア構成例について説明する。図１１は、本開示の一実施形態に係る情報処理端末１０および情報処理装置２０のハードウェア構成例を示すブロック図である。図１１を参照すると、情報処理端末１０および情報処理装置２０は、例えば、ＣＰＵ８７１と、ＲＯＭ８７２と、ＲＡＭ８７３と、ホストバス８７４と、ブリッジ８７５と、外部バス８７６と、インターフェース８７７と、入力装置８７８と、出力装置８７９と、ストレージ８８０と、ドライブ８８１と、接続ポート８８２と、通信装置８８３と、を有する。なお、ここで示すハードウェア構成は一例であり、構成要素の一部が省略されてもよい。また、ここで示される構成要素以外の構成要素をさらに含んでもよい。
（ＣＰＵ８７１）
ＣＰＵ８７１は、例えば、演算処理装置又は制御装置として機能し、ＲＯＭ８７２、ＲＡＭ８７３、ストレージ８８０、又はリムーバブル記録媒体９０１に記録された各種プログラムに基づいて各構成要素の動作全般又はその一部を制御する。
（ＲＯＭ８７２、ＲＡＭ８７３）
ＲＯＭ８７２は、ＣＰＵ８７１に読み込まれるプログラムや演算に用いるデータ等を格納する手段である。ＲＡＭ８７３には、例えば、ＣＰＵ８７１に読み込まれるプログラムや、そのプログラムを実行する際に適宜変化する各種パラメータ等が一時的又は永続的に格納される。
（ホストバス８７４、ブリッジ８７５、外部バス８７６、インターフェース８７７）
ＣＰＵ８７１、ＲＯＭ８７２、ＲＡＭ８７３は、例えば、高速なデータ伝送が可能なホストバス８７４を介して相互に接続される。一方、ホストバス８７４は、例えば、ブリッジ８７５を介して比較的データ伝送速度が低速な外部バス８７６に接続される。また、外部バス８７６は、インターフェース８７７を介して種々の構成要素と接続される。
（入力装置８７８）
入力装置８７８には、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ、及びレバー等が用いられる。さらに、入力装置８７８としては、赤外線やその他の電波を利用して制御信号を送信することが可能なリモートコントローラ（以下、リモコン）が用いられることもある。また、入力装置８７８には、マイクロフォンなどの音声入力装置が含まれる。
（出力装置８７９）
出力装置８７９は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）、ＬＣＤ、又は有機ＥＬ等のディスプレイ装置、スピーカ、ヘッドホン等のオーディオ出力装置、プリンタ、携帯電話、又はファクシミリ等、取得した情報を利用者に対して視覚的又は聴覚的に通知することが可能な装置である。また、本開示に係る出力装置８７９は、触覚刺激を出力することが可能な種々の振動デバイスを含む。
（ストレージ８８０）
ストレージ８８０は、各種のデータを格納するための装置である。ストレージ８８０としては、例えば、ハードディスクドライブ（ＨＤＤ）等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等が用いられる。
（ドライブ８８１）
ドライブ８８１は、例えば、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体９０１に記録された情報を読み出し、又はリムーバブル記録媒体９０１に情報を書き込む装置である。
（リムーバブル記録媒体９０１）
リムーバブル記録媒体９０１は、例えば、ＤＶＤメディア、Ｂｌｕ－ｒａｙ（登録商標）メディア、ＨＤ ＤＶＤメディア、各種の半導体記憶メディア等である。もちろん、リムーバブル記録媒体９０１は、例えば、非接触型ＩＣチップを搭載したＩＣカード、又は電子機器等であってもよい。
（接続ポート８８２）
接続ポート８８２は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）、ＲＳ－２３２Ｃポート、又は光オーディオ端子等のような外部接続機器９０２を接続するためのポートである。
（外部接続機器９０２）
外部接続機器９０２は、例えば、プリンタ、携帯音楽プレーヤ、デジタルカメラ、デジタルビデオカメラ、又はＩＣレコーダ等である。
（通信装置８８３）
通信装置８８３は、ネットワークに接続するための通信デバイスであり、例えば、有線又は無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ ＵＳＢ）用の通信カード、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）用のルータ、又は各種通信用のモデム等である。
＜３．まとめ＞
以上説明したように、本開示の一実施形態に係る情報処理装置２０は、ユーザの移動経路に基づいて、当該移動経路に存在する複数の情報処理端末１０に出力させる提示情報の割り当てを決定することを特徴の一つとする。また、本開示の一実施形態に係る情報処理装置２０は、上記の割り当てに基づいて、提示情報を複数の情報処理端末１０分散して出力させることができる。係る構成によれば、ユーザの自由度を許容しながら、より柔軟かつより確実に情報を伝達することが可能となる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
また、本明細書の情報処理装置２０の処理に係る各ステップは、必ずしもフローチャートに記載された順序に沿って時系列に処理される必要はない。例えば、情報処理装置２０の処理に係る各ステップは、フローチャートに記載された順序と異なる順序で処理されても、並列的に処理されてもよい。
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
複数の出力端末による提示情報の出力を制御する出力制御部、
を備え、
前記出力制御部は、ユーザの移動経路に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定する、
情報処理装置。
（２）
前記出力制御部は、前記出力端末の出力特性に基づいて、前記割り当てを決定する、
前記（１）に記載の情報処理装置。
（３）
前記出力特性は、前記出力端末が出力可能な情報種別を含み、
前記出力制御部は、前記情報種別に基づいて前記割り当てを決定する、
前記（２）に記載の情報処理装置。
（４）
前記情報種別は、少なくとも聴覚情報および視覚情報を含み、
前記出力制御部は、前記聴覚情報を出力可能な前記出力端末に対し前記提示情報の少なくとも一部を音声として割り当て、前記視覚情報を出力可能な前記出力端末に対し前記提示情報の少なくとも一部を画像として割り当てる、
前記（３）に記載の情報処理装置。
（５）
前記出力特性は、前記出力端末が出力可能な情報量を含み、
前記出力制御部は、前記出力可能な情報量に基づいて前記割り当てを決定する、
前記（２）～（４）のいずれかに記載の情報処理装置。
（６）
前記出力制御部は、前記出力端末が備える表示部のサイズに基づいて前記出力可能な情報量を算出する、
前記（５）に記載の情報処理装置。
（７）
前記出力制御部は、前記出力端末が出力可能な最大音量に基づいて前記出力可能な情報量を算出する、
前記（５）または（６）に記載の情報処理装置。
（８）
前記出力制御部は、前記提示情報の出力に係るコンテキストに基づいて、前記割り当てを決定する、
前記（１）～（７）のいずれかに記載の情報処理装置。
（９）
前記コンテキストは、ユーザの状態を含み、
前記出力制御部は、認識されたユーザの状態に基づいて前記割り当てを決定する、
前記（８）に記載の情報処理装置。
（１０）
前記出力制御部は、認識されたユーザの移動速度に基づいて前記割り当てを決定する、
前記（９）に記載の情報処理装置。
（１１）
前記コンテキストは、周囲の環境状態を含み、
前記出力制御部は、認識されたユーザの状態に基づいて前記割り当てを決定する、
前記（８）～（１０）のいずれかに記載の情報処理装置。
（１２）
前記出力制御部は、前記コンテキストに基づいて、前記割り当てを動的に変更する、
前記（８）～（１１）のいずれかに記載の情報処理装置。
（１３）
前記出力制御部は、前記移動経路に基づいて、前記提示情報を出力させる前記出力端末および前記割り当てを決定する、
前記（１）～（１２）のいずれかに記載の情報処理装置。
（１４）
前記出力制御部は、前記移動経路に基づいて、前記提示情報を出力させる前記出力端末および前記割り当てを動的に変更する、
前記（１３）に記載の情報処理装置。
（１５）
前記出力制御部は、前記提示情報の一部が複数の前記出力端末により重複して出力されるよう前記割り当てを決定する、
前記（１）～（１４）のいずれかに記載の情報処理装置。
（１６）
前記出力制御部は、前記提示情報の一部が２つの異なる前記出力端末によりそれぞれ音声または画像として出力されるよう前記割り当てを決定する、
前記（１５）に記載の情報処理装置。
（１７）
前記移動経路を算出する経路算出部、
をさらに備える、
前記（１）～（１６）のいずれかに記載の情報処理装置。
（１８）
ユーザの状態または周囲の環境状態を認識する認識部、
をさらに備える、
前記（１）～（１７）のいずれかに記載の情報処理装置。
（１９）
プロセッサが、複数の出力端末による提示情報の出力を制御すること、
を含み、
前記制御することは、ユーザの移動経路に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定すること、
をさらに含む、
情報処理方法。
（２０）
コンピュータを、
複数の出力端末による提示情報の出力を制御する出力制御部、
を備え、
前記出力制御部は、ユーザの移動経路に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定する、
情報処理装置、
として機能させるためのプログラム。
１０ 情報処理端末
１１０ 出力部
１２０ 音声入力部
１３０ 撮像部
１４０ センサ部
１５０ サーバ通信部
２０ 情報処理装置
２１０ 認識部
２２０ 経路算出部
２３０ 出力制御部
２４０ 音声合成部
２５０ 記憶部
２６０ 端末通信部

Claims (18)

  1. 複数の出力端末による提示情報の出力を制御する出力制御部、
    を備え、
    前記出力制御部は、ユーザの移動経路及び前記出力端末が出力可能な情報量に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定する、
    情報処理装置。
  2. 前記出力制御部は、前記出力端末が備える表示部のサイズに基づいて前記出力可能な情報量を算出する、
    請求項１に記載の情報処理装置。
  3. 前記出力制御部は、前記出力端末が出力可能な最大音量に基づいて前記出力可能な情報量を算出する、
    請求項１または２に記載の情報処理装置。
  4. 前記出力制御部は、前記出力端末が出力可能な情報種別に基づいて前記割り当てを決定する、
    請求項１から３のいずれか一項に記載の情報処理装置。
  5. 前記情報種別は、少なくとも聴覚情報および視覚情報を含み、
    前記出力制御部は、前記聴覚情報を出力可能な前記出力端末に対し前記提示情報の少なくとも一部を音声として割り当て、前記視覚情報を出力可能な前記出力端末に対し前記提示情報の少なくとも一部を画像として割り当てる、
    請求項４に記載の情報処理装置。
  6. 前記出力制御部は、前記提示情報の出力に係るコンテキストに基づいて、前記割り当てを決定する、
    請求項１から５のいずれか一項に記載の情報処理装置。
  7. 前記コンテキストは、ユーザの状態を含み、
    前記出力制御部は、認識されたユーザの状態に基づいて前記割り当てを決定する、
    請求項６に記載の情報処理装置。
  8. 前記出力制御部は、認識されたユーザの移動速度に基づいて前記割り当てを決定する、
    請求項７に記載の情報処理装置。
  9. 前記コンテキストは、周囲の環境状態を含み、
    前記出力制御部は、認識されたユーザの状態に基づいて前記割り当てを決定する、
    請求項６から８のいずれか一項に記載の情報処理装置。
  10. 前記出力制御部は、前記コンテキストに基づいて、前記割り当てを動的に変更する、
    請求項６から９のいずれか一項に記載の情報処理装置。
  11. 前記出力制御部は、前記移動経路に基づいて、前記提示情報を出力させる前記出力端末および前記割り当てを決定する、
    請求項１から１０のいずれか一項に記載の情報処理装置。
  12. 前記出力制御部は、前記移動経路に基づいて、前記提示情報を出力させる前記出力端末および前記割り当てを動的に変更する、
    請求項１１に記載の情報処理装置。
  13. 前記出力制御部は、前記提示情報の一部が複数の前記出力端末により重複して出力されるよう前記割り当てを決定する、
    請求項１から１２のいずれか一項に記載の情報処理装置。
  14. 前記出力制御部は、前記提示情報の一部が２つの異なる前記出力端末によりそれぞれ音声または画像として出力されるよう前記割り当てを決定する、
    請求項１３に記載の情報処理装置。
  15. 前記移動経路を算出する経路算出部、
    をさらに備える、
    請求項１から１４のいずれか一項に記載の情報処理装置。
  16. ユーザの状態または周囲の環境状態を認識する認識部、
    をさらに備える、
    請求項１から１５のいずれか一項に記載の情報処理装置。
  17. プロセッサが、複数の出力端末による提示情報の出力を制御すること、
    を含み、
    前記制御することは、ユーザの移動経路及び前記出力端末が出力可能な情報量に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定すること、
    をさらに含む、
    情報処理方法。
  18. コンピュータを、
    複数の出力端末による提示情報の出力を制御する出力制御部、
    を備え、
    前記出力制御部は、ユーザの移動経路及び前記出力端末が出力可能な情報量に基づいて複数の前記出力端末のそれぞれに出力させる前記提示情報の割り当てを決定する、
    情報処理装置、
    として機能させるためのプログラム。
JP2019525082A 2017-06-12 2018-03-08 情報処理装置、情報処理方法、およびプログラム Active JP7151707B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017115264 2017-06-12
JP2017115264 2017-06-12
PCT/JP2018/009013 WO2018230056A1 (ja) 2017-06-12 2018-03-08 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2018230056A1 JPWO2018230056A1 (ja) 2020-04-09
JP7151707B2 true JP7151707B2 (ja) 2022-10-12

Family

ID=64660792

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019525082A Active JP7151707B2 (ja) 2017-06-12 2018-03-08 情報処理装置、情報処理方法、およびプログラム

Country Status (5)

Country Link
US (2) US11029909B2 (ja)
EP (1) EP3640770A4 (ja)
JP (1) JP7151707B2 (ja)
CN (1) CN110741330B (ja)
WO (1) WO2018230056A1 (ja)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010095264A1 (ja) 2009-02-23 2010-08-26 パイオニア株式会社 コンテンツ送信装置、コンテンツ出力システム、送信制御方法、送信制御プログラムおよび記録媒体

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5073221B2 (ja) * 2005-12-19 2012-11-14 株式会社リコー コンテンツ表示システムおよび情報表示装置
WO2011049251A1 (en) 2009-10-20 2011-04-28 Samsung Electronics Co., Ltd. Product providing apparatus, display apparatus, and method for providing gui using the same
US8880648B1 (en) * 2012-06-27 2014-11-04 Audible, Inc. Automated transition of content consumption across devices
RU2635046C2 (ru) * 2012-07-27 2017-11-08 Сони Корпорейшн Система обработки информации и носитель информации
US9491033B1 (en) * 2013-04-22 2016-11-08 Amazon Technologies, Inc. Automatic content transfer
EP2950550B1 (en) * 2014-05-28 2017-10-18 Advanced Digital Broadcast S.A. System and method for a follow me television function
WO2015186387A1 (ja) * 2014-06-03 2015-12-10 ソニー株式会社 情報処理装置、制御方法、およびプログラム
JP2016009214A (ja) * 2014-06-20 2016-01-18 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP2016045623A (ja) * 2014-08-21 2016-04-04 ソニー株式会社 情報処理装置および制御方法
JP6451227B2 (ja) * 2014-11-06 2019-01-16 富士ゼロックス株式会社 情報処理装置、情報処理システム、プログラム、及び記録媒体
JP2016177523A (ja) * 2015-03-19 2016-10-06 株式会社リコー 情報提供システム、情報提供方法及び情報提供プログラム
JP2016191657A (ja) * 2015-03-31 2016-11-10 パイオニア株式会社 情報処理装置、情報処理方法及び情報処理プログラム
JP6598020B2 (ja) 2015-04-16 2019-10-30 パナソニックＩｐマネジメント株式会社 情報通知方法及び音声出力装置
JP2016212585A (ja) * 2015-05-07 2016-12-15 ヤマハ株式会社 情報配信システム、携帯端末装置およびプログラム
KR20170010494A (ko) * 2015-07-20 2017-02-01 엘지전자 주식회사 이동 단말기 및 그 제어 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010095264A1 (ja) 2009-02-23 2010-08-26 パイオニア株式会社 コンテンツ送信装置、コンテンツ出力システム、送信制御方法、送信制御プログラムおよび記録媒体

Also Published As

Publication number Publication date
CN110741330A (zh) 2020-01-31
US11347462B2 (en) 2022-05-31
US11029909B2 (en) 2021-06-08
US20210271441A1 (en) 2021-09-02
JPWO2018230056A1 (ja) 2020-04-09
EP3640770A4 (en) 2020-07-01
WO2018230056A1 (ja) 2018-12-20
US20200225897A1 (en) 2020-07-16
CN110741330B (zh) 2022-02-15
EP3640770A1 (en) 2020-04-22

Similar Documents

Publication Publication Date Title
US11531518B2 (en) System and method for differentially locating and modifying audio sources
US10915291B2 (en) User-interfaces for audio-augmented-reality
JP6819672B2 (ja) 情報処理装置、情報処理方法、及びプログラム
CN108141696A (zh) 用于空间音频调节的系统和方法
CN105679302A (zh) 定向声音修改
JP7067484B2 (ja) 情報処理装置、情報処理方法、プログラム、および情報処理システム
WO2019107145A1 (ja) 情報処理装置、及び情報処理方法
JP6857024B2 (ja) 再生制御方法、システム、及び情報処理装置
JP2023542968A (ja) 定位されたフィードバックによる聴力増強及びウェアラブルシステム
CN103098449A (zh) 用户设备，服务器和操作条件设定系统
JP7243639B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP6151112B2 (ja) 再生装置、再生装置の制御方法、サーバ、および、システム
JP7070546B2 (ja) 情報処理装置および情報処理方法
JP7151707B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6146182B2 (ja) 情報提供装置、情報提供システム、及び情報提供プログラム
US11562638B2 (en) Electronic system and method for improving human interaction and activities
US10820132B2 (en) Voice providing device and voice providing method
WO2023281820A1 (ja) 情報処理装置、情報処理方法、記憶媒体
JPWO2018211750A1 (ja) 情報処理装置および情報処理方法
WO2019017033A1 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6927331B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP7173530B2 (ja) ナビゲーション装置およびナビゲーション方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210203

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220408

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220830

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220912

R151 Written notification of patent or utility model registration

Ref document number: 7151707

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151