JP2006178842A - Information presenting device - Google Patents

Information presenting device Download PDF

Info

Publication number
JP2006178842A
JP2006178842A JP2004373122A JP2004373122A JP2006178842A JP 2006178842 A JP2006178842 A JP 2006178842A JP 2004373122 A JP2004373122 A JP 2004373122A JP 2004373122 A JP2004373122 A JP 2004373122A JP 2006178842 A JP2006178842 A JP 2006178842A
Authority
JP
Japan
Prior art keywords
user
behavior
information
presentation
viewing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004373122A
Other languages
Japanese (ja)
Inventor
Tadaya Yamamoto
格也 山本
Keiji Sugiyama
圭司 杉山
Junichi Hirai
純一 平位
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2004373122A priority Critical patent/JP2006178842A/en
Publication of JP2006178842A publication Critical patent/JP2006178842A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an information presenting device without disturbing information viewing excessively in a state that both a user's behavioris made incompatible with the information viewing. <P>SOLUTION: This information presenting device for presenting information to a user is provided with a behavior information acquiring part 101 for acquiring behavior information about the user's behavior, a behavior significance estimating part 102 for estimating behavior significance showing significance to the user's behavior, a presentation information acquiring part 103 for acquiring presentation information to be presented to the user, a viewing significance estimating part 104 for estimating viewing significance showing significance to the matter that the users views the presentation information, a compatibility determining part 105 for determining whether both the user's behavior and the user's viewing the presentation information are attained, and a behavior changing part 109 for performing processing for making the user change his/her behavior when the both the user's behavior and viewing the presentation information are not determined to be attained. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、ユーザに情報を提示する情報提示装置に関する。   The present invention relates to an information presentation apparatus that presents information to a user.

携帯電話機等で受信した電子メールのテキストデータを音声で読み上げる音声読み上げ装置が知られている。このような音声読み上げ装置を車両に搭載してドライバーが使用する場合、ドライバーは、周囲の騒音等に気をとられて音声メッセージを聞き逃すときがある。   2. Description of the Related Art A speech reading apparatus that reads out text data of an electronic mail received by a mobile phone or the like by voice is known. When such a voice reading device is mounted on a vehicle and used by a driver, the driver sometimes misses a voice message because he / she is concerned about ambient noise and the like.

そこで、運転中に発生するノイズの大きさを検出して、そのノイズの大きさに応じてテキストデータを読み上げる速度を調整する音声読み上げ装置が提案されている(例えば、特許文献1参照)。この従来の音声読み上げ装置によれば、ノイズが大きいときにはテキストデータがゆっくりと読み上げられることになるため、ドライバーが音声メッセージを聞き逃すという問題をいくらか解決することができる。
特開2003−99080号公報
Therefore, a speech reading apparatus has been proposed that detects the magnitude of noise generated during driving and adjusts the speed of reading text data in accordance with the magnitude of the noise (see, for example, Patent Document 1). According to this conventional speech reading apparatus, text data is read out slowly when the noise is large, so that the problem that the driver misses the voice message can be solved somewhat.
JP 2003-99080 A

しかしながら、前記従来の音声読み上げ装置では、運転中に発生するノイズが大きくなると、音声メッセージの聞き取りが妨げられる。すなわち、ユーザの行動(運転)と、ユーザが提示情報を視聴すること(音声メッセージの聞き取り)とが両立しない状況になると、必ず、ユーザの行動が優先されて、ユーザが提示情報を視聴すること(以下「情報視聴」という)が妨げられるという課題がある。そのために、歩行中のように、必ずしも重要度の高い行動でない場合であっても、情報視聴が抑制され、重要な情報を聞き逃してしまうという問題もある。   However, in the conventional speech reading apparatus, if the noise generated during driving increases, listening to the voice message is hindered. That is, when the user's action (driving) and the user's viewing of the presented information (listening of the voice message) are incompatible, the user's action is always given priority and the user views the presented information. (Hereinafter referred to as “information viewing”) is hindered. Therefore, there is also a problem that information viewing is suppressed and important information is missed even when the action is not necessarily highly important, such as during walking.

本発明は、前記従来の課題を解決するもので、ユーザの行動と情報視聴とが両立しない状況において情報視聴が過度に妨げられることのない情報提示装置を提供することを目的とする。   SUMMARY OF THE INVENTION The present invention solves the above-described conventional problems, and an object thereof is to provide an information presentation device in which information viewing is not excessively hindered in a situation where user behavior and information viewing are not compatible.

上記目的を達成するために、本発明に係る情報提示装置は、ユーザに情報を提示する情報提示装置であって、ユーザの行動に関する行動情報を取得する行動情報取得手段と、ユーザの行動に対する重要度を示す行動重要度を推定する行動重要度推定手段と、ユーザに提示する提示情報を取得する提示情報取得手段と、ユーザが前記提示情報を視聴することに対する重要度を示す視聴重要度を推定する視聴重要度推定手段と、前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立するか否かを判定する両立判定手段と、前記両立判定手段によってユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させる処理を行う行動変更手段とを備えることを特徴とする。これによって、ユーザの行動と情報視聴とが両立しない状況においては、ユーザに行動を変更させることになるので、情報視聴が過度に妨げられない。   In order to achieve the above object, an information presentation apparatus according to the present invention is an information presentation apparatus that presents information to a user, and is an action information acquisition unit that acquires action information related to the user's action, and is important for the user's action. Action importance estimation means for estimating the degree of action importance indicating degree, presentation information acquisition means for acquiring presentation information to be presented to the user, and estimation of viewing importance indicating the importance of the user viewing the presentation information Viewing importance level estimation means, and based on the behavior importance level and the viewing importance level, a compatibility determination means for determining whether the user's behavior and the user viewing the presentation information are compatible, Action changing means for performing a process of changing the action of the user when the action of the user is determined to be incompatible with the user's viewing of the presentation information Characterized in that it comprises a. As a result, in a situation where the user's behavior and information viewing are not compatible, the user is allowed to change the behavior, and thus information viewing is not hindered excessively.

具体的には、前記両立判定手段は、前記行動重要度が第一の閾値より大きい値であり、且つ前記視聴重要度が第二の閾値より大きい値である場合、ユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定する。これによって、例えば、前記行動重要度と前記視聴重要度とが共に所定の値より大きい値である場合、ユーザに行動を変更させることになる。   Specifically, the compatibility determination means, when the action importance is a value greater than a first threshold and the viewing importance is a value greater than a second threshold, It is determined that viewing presentation information is not compatible. Thereby, for example, when both the action importance and the viewing importance are larger than a predetermined value, the user is allowed to change the action.

ここで、前記両立判定手段は、前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立する程度を示す両立度を決定し、前記行動変更手段は、前記両立度に基づいて、ユーザに行動を変更させるようにしてもよい。これによって、両立するか否かという2通りの判定でなく3通り以上の判定もできることとなり、3通り以上の態様で、ユーザに行動を変更させることも可能となる。   Here, the compatibility determination means determines a compatibility indicating the degree of compatibility between the user's behavior and the user viewing the presentation information based on the behavior importance and the viewing importance, The behavior changing means may cause the user to change the behavior based on the compatibility level. Accordingly, not only two determinations of whether or not both are compatible, but also three or more determinations can be made, and the user can change the behavior in three or more ways.

また、前記情報提示装置は、さらに、前記両立判定手段によってユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させるか、又は前記提示情報の提示法を変更するかを判定する変更判定手段と、前記変更判定手段によって前記提示情報の提示法を変更すると判定された場合、前記提示情報の提示法を変更する提示法変更手段と、前記提示法変更手段によって変更された提示法によって、ユーザに前記提示情報を提示する情報提示手段とを備えてもよい。これによって、ユーザの行動と情報視聴とが両立しない状況においては、ユーザに行動を変更させるか、又は提示情報の提示法を変更することになるので、情報視聴が過度に妨げられないだけでなく、ユーザの行動も過度に妨げられない。   The information presentation device may further cause the user to change the behavior when the compatibility determination means determines that the user's behavior and the user viewing the presentation information are not compatible, or the presentation information A change determination unit that determines whether to change the presentation method of the display method, a presentation method change unit that changes the presentation method of the presentation information when the change determination unit determines to change the presentation method of the presentation information, You may provide the information presentation means which presents the said presentation information to a user with the presentation method changed by the presentation method change means. As a result, in a situation where the user's behavior and information viewing are not compatible, the user is allowed to change the behavior or the presentation information presentation method is changed. The user's behavior is not excessively hindered.

また、前記情報提示装置は、さらに、ユーザの行動を変更することについての柔軟度を示す行動柔軟度を推定する行動柔軟度推定手段と、前記提示情報の視聴形態を変更することについての柔軟度を示す視聴柔軟度を推定する視聴柔軟度推定手段とを備え、前記変更判定手段は、前記行動柔軟度と前記視聴柔軟度とに基づいて、ユーザに行動を変更させるか、又は前記提示情報の提示法を変更するかを判定してもよい。これによって、ユーザに行動を変更させるか、又は提示情報の提示法を変更するかについては、行動柔軟度や視聴柔軟度という観点から判定されることになる。   In addition, the information presentation device further includes behavior flexibility estimation means for estimating behavior flexibility indicating flexibility for changing the user's behavior, and flexibility for changing the viewing mode of the presentation information. Viewing flexibility estimation means for estimating viewing flexibility, wherein the change determination means causes the user to change the behavior based on the behavior flexibility and the viewing flexibility, or the presentation information You may determine whether to change the presentation method. Accordingly, whether to change the behavior of the user or the method of presenting the presentation information is determined from the viewpoint of behavioral flexibility and viewing flexibility.

具体的には、前記変更判定手段は、前記行動柔軟度が前記視聴柔軟度よりも高い場合、ユーザに行動を変更させると判定し、前記視聴柔軟度が前記行動柔軟度よりも高い場合、前記提示情報の提示法を変更すると判定する。これによって、ユーザの行動と情報視聴のうち、より柔軟度の高い方が変更されるので、柔軟度の低い方が変更される不具合を回避することができる。   Specifically, the change determination unit determines that the user changes the behavior when the behavior flexibility is higher than the viewing flexibility, and when the viewing flexibility is higher than the behavior flexibility, It determines with changing the presentation method of presentation information. As a result, of the user's behavior and information viewing, the higher flexibility is changed, so that the problem that the lower flexibility is changed can be avoided.

ここで、前記両立判定手段は、前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立する程度を示す両立度を決定し、前記変更判定手段は、前記両立度と前記行動柔軟度と前記視聴柔軟度とに基づいて、ユーザに行動を変更させる程度を示す行動変更度と、前記提示情報の提示法を変更する程度を示す提示法変更度のうちの少なくとも1つを決定し、前記行動変更手段は、前記行動変更度に基づいて、ユーザに行動を変更させる処理をし、前記提示法変更手段は、前提示法変更度に基づいて、前記提示情報の提示法を変更してもよい。これによって、前記両立度と前記行動柔軟度と前記視聴柔軟度との組み合わせによって、ユーザに行動を変更させる程度や、前記提示情報の提示法を変更する程度を変えることができるので、必要最小限の程度で、ユーザに行動を変更させ、又は前記提示情報の提示法を変更することが可能となる。   Here, the compatibility determination means determines a compatibility indicating the degree of compatibility between the user's behavior and the user viewing the presentation information based on the behavior importance and the viewing importance, The change determination means is a behavior change degree indicating a degree of changing the behavior of the user based on the compatibility level, the behavior flexibility and the viewing flexibility, and a presentation indicating a degree of changing the presentation method of the presentation information. At least one of the law change degrees is determined, and the behavior changing unit performs a process of causing the user to change the behavior based on the behavior change degree, and the presentation method changing unit determines the previous presentation method change degree. Based on this, the presentation method of the presentation information may be changed. Accordingly, the combination of the compatibility level, the behavioral flexibility level, and the viewing flexibility level can change the degree to which the user changes the behavior and the degree to change the presentation method of the presentation information. It is possible to change the behavior of the user or change the method of presenting the presentation information.

また、前記行動柔軟度推定手段は、ユーザの行動について代替案の数が多い場合ほど、又は代替案を採った際にユーザに与える影響が小さい場合ほど、行動柔軟度が高いと推定する。このように代替案の数や変更に伴う影響力を考慮すれば、当該推定処理の精度を上げることができる。   In addition, the behavior flexibility estimation means estimates that the behavior flexibility is higher as the number of alternatives for the user's behavior is larger or the influence on the user when the alternative is taken is smaller. Thus, if the number of alternatives and the influence due to the change are taken into account, the accuracy of the estimation process can be increased.

また、前記視聴柔軟度推定手段は、前記提示情報の視聴形態について代替案の数が多い場合ほど、又は代替案を採った際にユーザに与える影響が小さい場合ほど、視聴柔軟度が高いと推定する。このように代替案の数や変更に伴う影響力を考慮すれば、当該推定処理の精度を上げることができる。   Further, the viewing flexibility estimation means estimates that the viewing flexibility is higher as the number of alternatives for the viewing mode of the presentation information is larger or when the influence on the user is smaller when the alternative is adopted. To do. Thus, if the number of alternatives and the influence due to the change are taken into account, the accuracy of the estimation process can be increased.

また、前記提示法変更手段は、前記提示情報の提示サイズ、提示位置、提示解像度、提示色、提示透明度、提示奥行き、提示音量、提示声種別、再生時間、再生状態、再生部分、再生粒度、の少なくとも1つについて提示法を変更してもよい。これによって、様々な提示法によって提示情報が提示されるので、ユーザの行動に適した方法で提示情報を提示することが可能となる。   In addition, the presentation method changing means includes the presentation information presentation size, presentation position, presentation resolution, presentation color, presentation transparency, presentation depth, presentation volume, presentation voice type, playback time, playback state, playback portion, playback granularity, You may change the presentation method about at least one of these. Thus, since the presentation information is presented by various presentation methods, it is possible to present the presentation information by a method suitable for the user's action.

また、前記行動変更手段は、ユーザに行動の変更を促す旨の情報を提示することによって、又はユーザの身体に刺激を与えることによって、ユーザに行動を変更させる。これによって、ユーザに行動の変更を促す旨の情報が提示され、又はユーザの身体に刺激が与えられるので、確実にユーザに行動を変更させることができる。   Further, the behavior changing means causes the user to change the behavior by presenting information indicating that the user is prompted to change the behavior, or by stimulating the user's body. As a result, information indicating that the user is prompted to change the behavior is presented or the user's body is stimulated, so that the user can be surely changed the behavior.

なお、本発明は、このような情報提示装置として実現することができるだけでなく、このような情報提示装置が備える特徴的な手段をステップとする情報提示方法として実現したり、それらのステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、CD−ROM等の記録媒体やインターネット等の伝送媒体を介して配信することができるのは言うまでもない。   The present invention can be realized not only as such an information presentation apparatus, but also as an information presentation method using characteristic means provided in such an information presentation apparatus as a step, or by performing these steps as a computer. It can also be realized as a program to be executed. Needless to say, such a program can be distributed via a recording medium such as a CD-ROM or a transmission medium such as the Internet.

また、ブロック図(図3)の各機能ブロックは典型的には集積回路であるLSIとして実現される。これらは個別に1チップ化されても良いし、一部又は全てを含むように1チップ化されても良い。ここでは、LSIとしたが、集積度の違いにより、IC、システムLSI、スーパーLSI、ウルトラLSIと呼称されることもある。   Each functional block in the block diagram (FIG. 3) is typically realized as an LSI which is an integrated circuit. These may be individually made into one chip, or may be made into one chip so as to include a part or all of them. The name used here is LSI, but it may also be called IC, system LSI, super LSI, or ultra LSI depending on the degree of integration.

また、集積回路化の手法はLSIに限るものではなく、専用回路又は汎用プロセサで実現してもよい。LSI製造後に、プログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを利用しても良い。   Further, the method of circuit integration is not limited to LSI's, and implementation using dedicated circuitry or general purpose processors is also possible. An FPGA (Field Programmable Gate Array) that can be programmed after the manufacture of the LSI or a reconfigurable processor that can reconfigure the connection and setting of the circuit cells inside the LSI may be used.

さらには、半導体技術の進歩又は派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてありえる。   Further, if integrated circuit technology comes out to replace LSI's as a result of the advancement of semiconductor technology or a derivative other technology, it is naturally also possible to carry out function block integration using this technology. Biotechnology can be applied.

言い換えれば、本発明に係る情報提示装置は、行動重要度が所定の値以上の行動と、視聴重要度が所定の値以上の提示情報の視聴とが時間的に重なる状況において、ユーザに行動を変更させる情報を提示し、提示情報の提示法を変更し、又は、ユーザに行動を変更させる情報を提示するとともに提示情報の提示法を変更することを特徴とする。   In other words, the information presentation apparatus according to the present invention performs an action on a user in a situation where an action having an action importance of a predetermined value or more overlaps with viewing of presentation information having an audience importance of a predetermined value or more. Information to be changed is presented, the presentation information presentation method is changed, or information for changing the behavior of the user is presented and the presentation information presentation method is changed.

また、本発明に係る情報提示装置は、行動重要度が所定の値以上の行動と、視聴重要度が所定の値以上の提示情報の視聴とが時間的に重なる状況において、行動柔軟度が所定の値以上である場合又は視聴柔軟度より大きい値である場合、ユーザに行動を変更させる処理を行うことを特徴とする。   Also, the information presentation device according to the present invention has a predetermined behavioral flexibility in a situation in which an action having an action importance of a predetermined value or more overlaps with viewing of presentation information having a view importance of a predetermined value or more. When the value is greater than or equal to the value or greater than the viewing flexibility, a process for causing the user to change the behavior is performed.

以上の説明から明らかなように、本発明に係る情報提示装置によれば、ユーザの行動と情報視聴とが両立しない状況においては、ユーザに行動を変更させることになるので、情報視聴は過度に妨げられない。よって、必ずしも重要でない行動のために重要な情報の視聴を逃してしまうことが回避され、ユーザは適切なタイミングで適切な情報を確実に入手することができる。   As is clear from the above description, according to the information presenting apparatus according to the present invention, in a situation where the user's behavior and information viewing are not compatible, the user is allowed to change the behavior, and thus information viewing is excessive. I can't interfere. Therefore, it is avoided that important information is missed due to an unimportant action, and the user can surely obtain appropriate information at an appropriate timing.

以下、本発明の実施の形態について図面を用いて詳細に説明する。
図1は、本発明に係るHMD(Head Mounted Display)をユーザが装着している状態を示す図である。このHMDは、ゴーグルやヘルメットのような形状の情報提示装置であって、ユーザに情報を提示するための各種制御をする計算機11と、LCD(Liquid Crystal Display)等の表示装置12と、ユーザの眼前に配置される光学素子(提示幕)13と、音声案内用のヘッドホン14と、当該HMDをユーザ1の頭部に装着するための装着部材15と、インターネット等から提示情報を受信するための受信機16とを備える。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
FIG. 1 is a diagram showing a state in which a user wears an HMD (Head Mounted Display) according to the present invention. The HMD is an information presentation device shaped like a goggle or a helmet, and includes a computer 11 that performs various controls for presenting information to the user, a display device 12 such as an LCD (Liquid Crystal Display), and a user's An optical element (presentation curtain) 13 disposed in front of the eyes, a headphone 14 for voice guidance, a mounting member 15 for mounting the HMD on the head of the user 1, and for receiving presentation information from the Internet or the like A receiver 16.

光学素子13の一方の面は凹状の非球面であり、その上にハーフミラー膜が塗布されて、表示装置12に表示された情報を反射して虚像を形成する。また、光学素子13の他方の面は凸状の非球面であり、外界を観察できるようになっているため、ユーザは、外界とオーバラップして表示装置12に表示された情報を視認することになる。   One surface of the optical element 13 is a concave aspherical surface, and a half mirror film is applied thereon to reflect information displayed on the display device 12 to form a virtual image. Further, since the other surface of the optical element 13 is a convex aspherical surface so that the outside world can be observed, the user can visually recognize the information displayed on the display device 12 so as to overlap the outside world. become.

図2は、本発明に係る別のHMDをユーザが装着している状態を示す図である。このHMDは、図1に示された受信機16に代えて、提示情報を予め格納した格納部18と、この格納部18を計算機11と接続するケーブル17とを備える。格納部18は例えばパーソナルコンピュータにより実現されてもよく、また、このパーソナルコンピュータはLAN(Local Area Network)やインターネット等に接続されていてもよい。   FIG. 2 is a diagram illustrating a state in which the user is wearing another HMD according to the present invention. The HMD includes a storage unit 18 that stores presentation information in advance and a cable 17 that connects the storage unit 18 to the computer 11 instead of the receiver 16 shown in FIG. The storage unit 18 may be realized by a personal computer, for example, and the personal computer may be connected to a LAN (Local Area Network), the Internet, or the like.

図3は、図1に示されたHMD(情報提示装置)の要部の機能ブロック図である。この情報提示装置は、ユーザに情報を提示する装置であって、機能的には、行動情報取得部101と、行動重要度推定部102と、提示情報取得部103と、視聴重要度推定部104と、両立判定部105と、変更判定部108と、行動柔軟度推定部106と、行動変更部109と、提示法変更部110と、情報提示部111とを備える。   FIG. 3 is a functional block diagram of a main part of the HMD (information presentation device) shown in FIG. This information presentation device is a device that presents information to the user. Functionally, the information presentation device 101, the behavior importance level estimation unit 102, the presentation information acquisition unit 103, and the viewing importance level estimation unit 104 are functionally presented. And a compatibility determination unit 105, a change determination unit 108, a behavior flexibility estimation unit 106, a behavior change unit 109, a presentation method change unit 110, and an information presentation unit 111.

行動情報取得部101は、行動情報を取得するカメラ、GPS(Global Positioning System)、加速度センサ、傾きセンサ、磁気センサ、電子タグセンサ等である。行動情報は、ユーザの行動に関する情報であり、具体的には、ユーザの現在位置、ユーザの移動の向きや速さ、ユーザの身体状態(頭や眼球など体の各部の位置、向き、姿勢、心拍数、体温など)、ユーザの行動状態に影響を与える周辺状況(歩行中の道の種別や状態、使用中の乗り物の種別や状態、身に付けているものの種別や状態、周囲に存在する物体・人・音・光景・空気・陽射しなどの種別やその状態)、過去の行動履歴、将来の行動予定(目的地や通勤経路)などに関する情報である。   The behavior information acquisition unit 101 is a camera, GPS (Global Positioning System), acceleration sensor, tilt sensor, magnetic sensor, electronic tag sensor, or the like that acquires behavior information. The behavior information is information related to the user's behavior. Specifically, the current position of the user, the direction and speed of the user's movement, the physical state of the user (the position, orientation, posture, and position of each part of the body such as the head and eyes) Heart rate, body temperature, etc.) and surrounding conditions that affect the user's behavioral state (type and state of the road while walking, type and state of the vehicle being used, type and state of what you are wearing, surroundings This is information on the type of object, person, sound, sight, air, sunlight, etc. and its state), past action history, future action schedule (destination and commuting route), and the like.

行動重要度推定部102は、行動情報に基づいて行動重要度を推定する。行動重要度は、ユーザの行動が情報視聴にどの程度適していないかを示す度合いである。注意力・判断力などの情報処理能力や、筋力・瞬発力などの身体的能力を必要とする行動ほど、行動重要度は高くなる。「1」から「5」までの5段階の数値で行動重要度を表した場合には、最も高い行動重要度を「5」とし、最も低い行動重要度を「1」とする(以下に説明する視聴重要度、両立度、行動柔軟度、視聴柔軟度についても同様)。   The behavior importance level estimation unit 102 estimates the behavior importance level based on the behavior information. The action importance is a degree indicating how unsuitable the user's action is for viewing information. The action importance becomes higher as the action requires information processing ability such as attention and judgment and physical ability such as muscle strength and instantaneous power. When the action importance level is represented by five levels from “1” to “5”, the highest action importance level is set to “5” and the lowest action importance level is set to “1” (described below). The same applies to viewing importance, compatibility, behavioral flexibility, and viewing flexibility).

提示情報取得部103は、提示情報を取得する通信I/F等である。提示情報は、ユーザに提示する情報であり、具体的には、放送や通信によって取得したテレビ番組やカメラ撮影画像などの動画像、テキスト、静止画像、メッセージ、信号などである。   The presentation information acquisition unit 103 is a communication I / F that acquires presentation information. The presentation information is information presented to the user, and specifically, is a moving image such as a TV program or a camera-captured image acquired by broadcasting or communication, text, a still image, a message, a signal, or the like.

視聴重要度推定部104は、提示情報に基づいて視聴重要度を推定する。視聴重要度は、ユーザにとって提示情報の視聴がどの程度重要であるかを示す度合いである。要点部分の情報やユーザが関心を持つ情報ほど、視聴重要度は高くなる。   The viewing importance level estimation unit 104 estimates the viewing importance level based on the presentation information. The viewing importance is a degree indicating how important viewing information is for the user. The importance of viewing increases as the information on the main points and the information that the user is interested in.

両立判定部105は、行動重要度と視聴重要度とに基づいて両立度を決定する。両立度は、ユーザの行動と情報視聴とを同時に行う際の障害の低さを示す度合いである。ユーザの行動と情報視聴とを同時に行うことによって、ユーザの行動について速度低下や失敗発生などの支障が実際に多く出る場合又は出る可能性が高くなる場合ほど、両立度は高くなる。同様に、ユーザの行動と情報視聴とを同時に行うことによって、情報視聴について内容の理解不足や見落としなどの支障が実際に多く出る場合又は出る可能性が高くなる場合ほど、両立度は高くなる。両立度は数値で表してもよいが、その数値が所定値以上の場合には「両立可能」で所定値未満の場合には「両立不能」というように、2つのレベルで表してもよい。   The compatibility determination unit 105 determines the compatibility based on the action importance and the viewing importance. The degree of compatibility is a degree indicating a low level of obstacle when simultaneously performing user behavior and information viewing. By simultaneously performing the user's action and information viewing, the degree of compatibility increases as the number of troubles such as a decrease in speed or failure of the user's action actually increases or increases. Similarly, when the user's action and information viewing are performed at the same time, the degree of compatibility increases as the number of troubles such as lack of understanding or oversight of the information viewing actually increases or becomes more likely to occur. The degree of compatibility may be expressed as a numerical value, but may be expressed in two levels, such as “compatible” when the numerical value is greater than or equal to a predetermined value and “incompatible” when the numerical value is less than the predetermined value.

行動柔軟度推定部106は、行動情報に基づいて行動柔軟度を推定する。行動柔軟度は、ユーザの行動変更のしやすさを示す度合いである。ユーザの行動について代替案の数が多い場合ほど、又は代替案を採った際にユーザに与える影響が小さい場合ほど、行動柔軟度は高くなる。   The behavior flexibility estimation unit 106 estimates the behavior flexibility based on the behavior information. The behavior flexibility is a degree indicating the ease of the user's behavior change. The greater the number of alternatives for the user's behavior, or the smaller the effect on the user when the alternative is taken, the higher the behavioral flexibility.

視聴柔軟度推定部107は、提示情報に基づいて視聴柔軟度を推定する。視聴柔軟度は、視聴形態の変更しやすさを示す度合いである。提示情報の視聴形態について代替案の数が多い場合ほど、又は代替案を採った際にユーザに与える影響が小さい場合ほど、視聴柔軟度は高くなる。   The viewing flexibility estimation unit 107 estimates the viewing flexibility based on the presentation information. The viewing flexibility is a degree indicating the ease of changing the viewing mode. The viewing flexibility increases as the number of alternatives regarding the viewing mode of the presented information increases, or as the influence on the user when adopting the alternative is small.

変更判定部108は、両立度と行動柔軟度と視聴柔軟度とに基づいて変更判定処理を行う。変更判定処理の内容は、ユーザの行動又は提示情報の提示法の一方のみを変更する前提で、どちらを変更するかについて判定してもよいし、あるいは、ユーザの行動と提示情報の提示法の両方を変更する前提で、どちらをどの程度変更するかについて判定してもよい。   The change determination unit 108 performs a change determination process based on the compatibility level, behavioral flexibility, and viewing flexibility. The content of the change determination process is based on the premise that only one of the user's behavior or the presentation information presentation method is changed. On the premise that both are changed, it may be determined how much of which is changed.

行動変更部109は、変更判定処理の結果に基づいて、ユーザに行動を変更させる処理を行う。行動を変更させる態様は限定されるものではない。すなわち、現在していない行動を開始させてもよいし、現在している行動を中止させてもよいし、開始する予定の行動を開始しなくさせてもよいし、中止する予定の行動を継続させてもよいし、現在又は将来の行動の程度(強弱や間隔など)を変更してもよい。行動を変更させる手法も限定されるものではない。すなわち、行動時に併用している機器の状態を変更してもよいし、メッセージや映像などユーザの心理状態に影響を与える情報を提示してもよいし、電気刺激や温度刺激などユーザの身体状態に影響を与える刺激を与えてもよい。   The behavior changing unit 109 performs processing for causing the user to change the behavior based on the result of the change determination processing. The mode of changing the behavior is not limited. That is, you may start an action that you are not currently doing, you may want to stop an action that you are currently doing, you may not want to start an action that is scheduled to start, or you can continue an action that is scheduled to be stopped It is also possible to change the degree of current or future action (strength, interval, etc.). The method for changing the behavior is not limited. In other words, the state of the device used at the time of action may be changed, information that affects the user's psychological state such as a message or video may be presented, and the user's physical state such as electrical stimulation or temperature stimulation You may give the stimulus which influences.

提示法変更部110は、変更判定処理の結果に基づいて、提示情報の提示法を変更する。ここでいう提示法には、表示方法(表示サイズ、表示位置、解像度、色、透明度、奥行きなど)、音声提示方法(音量、声の種別など)、再生方法(一時停止、早送り、スロー再生、コマ送り、ダイジェスト再生、要約再生、部分再生など)が含まれる。また、ここでいう提示法の変更には、提示情報の全部や一部を変換・要約・加工・追加・削除することが含まれる。   The presentation method changing unit 110 changes the presentation method of the presentation information based on the result of the change determination process. The presentation method here includes display method (display size, display position, resolution, color, transparency, depth, etc.), audio presentation method (volume, voice type, etc.), playback method (pause, fast forward, slow play, Frame advance, digest playback, summary playback, partial playback, etc.). The change of the presentation method here includes conversion, summarization, processing, addition, and deletion of all or part of the presentation information.

情報提示部111は、ユーザに提示情報を提示する表示装置等である。
以下、図1に示されたHMD(情報提示装置)を装着したユーザが電車内でテレビドラマを視聴している場面を想定して、本HMDの動作を説明する。なお、図4は、本HMDの動作を示すフローチャートであり、図5は、本HMDを装着したユーザが電車内でテレビドラマを視聴している様子を示す図である。
The information presentation unit 111 is a display device that presents presentation information to the user.
Hereinafter, the operation of the HMD will be described on the assumption that a user wearing the HMD (information presentation device) shown in FIG. 1 is watching a TV drama on a train. FIG. 4 is a flowchart showing the operation of the HMD, and FIG. 5 is a diagram showing a state where a user wearing the HMD is watching a TV drama on the train.

まず、行動情報取得部101は、行動情報を取得する(S1)。すなわち、HMDに搭載されたGPSによってユーザの現在位置を取得して、この現在位置(例えばA駅付近)と現在時刻(例えば18時)とに基づいて、ユーザの予定表から行動情報を取得する。図6は、ユーザの予定表の内容を示す図である。この図6に示されるように、18時に「A駅で各停電車から急行電車へ乗り換える」という予定が設定された予定表L1を行動情報取得部101が保持している場合には、この予定表L1から「電車乗り換え」を意味する行動情報を取得することになる。このような行動情報は、例えばインターネット上のサービスを利用して取得するようにしてもよい。   First, the behavior information acquisition unit 101 acquires behavior information (S1). That is, the user's current position is acquired by the GPS mounted on the HMD, and action information is acquired from the user's schedule based on the current position (for example, near station A) and the current time (for example, 18:00). . FIG. 6 is a diagram showing the contents of the user schedule. As shown in FIG. 6, when the action information acquisition unit 101 holds a schedule L1 in which a schedule “change from each black-out car to an express train at station A” at 18:00 is held, The action information meaning “train transfer” is acquired from the table L1. Such behavior information may be acquired using a service on the Internet, for example.

次に、行動重要度推定部102は、行動重要度を推定する(S2)。すなわち、「電車乗り換え」というユーザの行動がどの程度重要であるか(どの程度情報視聴に適していないか)を推定する。図7は、ユーザの行動と行動重要度とを予め対応付けた行動重要度リストの内部構成例を示す図である。この図7に示されるように、ユーザの行動と行動重要度とを予め対応付けた行動重要度リストL2を行動重要度推定部102が保持している場合には、「電車乗り換え」に対する行動重要度は「3」であると推定されることになる。   Next, the behavior importance level estimation unit 102 estimates the behavior importance level (S2). That is, it is estimated how important the user's action of “transfer train” is (to what extent it is not suitable for information viewing). FIG. 7 is a diagram illustrating an internal configuration example of an action importance list in which user actions and action importance are associated in advance. As shown in FIG. 7, when the behavior importance level estimation unit 102 holds a behavior importance level list L2 in which a user's behavior is associated with a behavior importance level in advance, the behavior importance for “train transfer” is determined. The degree will be estimated to be “3”.

行動重要度リストL2は予め作成されていてもよいし、行動重要度推定部102が当該リスト参照時に値を算出してもよい。値を算出する際には、足・腕・眼球などの体各部の状態や動きのセンシング情報、交差点・改札口・自転車など情報視聴するに不適切な場所や乗り物を集めたリスト、行動予定に対する進捗状態などを考慮するのが好ましい。   The behavior importance level list L2 may be created in advance, or the behavior importance level estimation unit 102 may calculate a value when referring to the list. When calculating values, it is necessary to detect the state of body parts such as feet, arms, and eyeballs, movement sensing information, intersections, ticket gates, bicycles, etc. It is preferable to consider the progress status.

一方、提示情報取得部103は、提示情報を取得する(S3)。ここでは、HMDによって再生中のテレビドラマの現シーンに関する情報を取得する。例えば、テレビドラマに付与されたメタデータを取得して、そのメタデータに記述されている情報から、再生中の現シーンがドラマの導入部なのか展開部なのかCMなのか中心部なのか最終部なのかを判定する。メタデータを用いた判定法としては、MPEG−7(Moving Picture Experts Group 7)に基づく記述を収めたXMLファイルにおいて、ドラマ番組に含まれる複数区間を定義するAudioVisualSegment要素のid属性値に記された文字列で判定する方法でもよいし、HighlightSegment要素内で参照されているかどうかで判定する方法でもよい。ここでは、ドラマAの「中心部」を再生中であったことが判明したと仮定して説明を続ける。   On the other hand, the presentation information acquisition unit 103 acquires presentation information (S3). Here, information on the current scene of the TV drama being played by the HMD is acquired. For example, the metadata given to a TV drama is acquired, and the current scene being reproduced is the introduction part, development part, CM, or central part of the current scene being reproduced from the information described in the metadata. It is determined whether it is a part. The determination method using metadata is described in the id attribute value of the AudioVisualSegment element that defines a plurality of sections included in a drama program in an XML file containing a description based on MPEG-7 (Moving Picture Experts Group 7). A determination method using a character string may be used, or a determination method may be used based on whether or not the character string is referenced in the High Segment Element element. Here, the description will be continued on the assumption that it was found that the “center” of drama A was being reproduced.

次に、視聴重要度推定部104は、視聴重要度を推定する(S4)。すなわち、ドラマAの「中心部」を視聴することがユーザにとってどの程度重要であるかを推定する。図8は、提示情報と視聴重要度とを予め対応付けた視聴重要度リストの内部構成例を示す図である。この図8に示されるように、提示情報(ドラマA)と視聴重要度とを予め対応付けた視聴重要度リストL3を視聴重要度推定部104が保持している場合には、ドラマAの「中心部」に対する視聴重要度は「3」であると推定されることになる。   Next, the viewing importance level estimation unit 104 estimates the viewing importance level (S4). That is, it is estimated how important it is for the user to view the “center” of the drama A. FIG. 8 is a diagram illustrating an internal configuration example of a viewing importance list in which presentation information and viewing importance are associated in advance. As shown in FIG. 8, when the viewing importance level estimation unit 104 holds a viewing importance level list L3 in which presentation information (drama A) and viewing importance levels are associated in advance, “ The viewing importance for the “center” is estimated to be “3”.

次に、両立判定部105は、ユーザの行動と情報視聴とが両立するか否かを判定する(S5)。例えば、行動重要度と視聴重要度のいずれもが3以上である場合には、ユーザの行動と情報視聴とが両立しない(以下、単に「両立不能である」という)と判定する。ここでは、行動重要度と視聴重要度はいずれも「3」であるため、両立不能であると判定されることになる。   Next, the compatibility determination unit 105 determines whether the user's action and information viewing are compatible (S5). For example, when both the action importance level and the viewing importance level are 3 or more, it is determined that the user's action and information viewing are not compatible (hereinafter simply referred to as “incompatible”). Here, since the action importance level and the viewing importance level are both “3”, it is determined that the compatibility is impossible.

両立不能であるか両立可能であるかを判定する方法は、行動重要度や視聴重要度が所定の値以上であるか否かによって判定する方法に限定されるものではない。例えば、行動重要度と視聴重要度とを入力値とする関数を定義して、その関数の出力値によって判定するようにしてもよい。あるいは、行動重要度や視聴重要度以外の情報(行動情報、提示情報、提示法を表した情報など)を用いて、両立不能であるか両立可能であるかを判定するようにしてもよい。   The method of determining whether or not both are compatible is not limited to the method of determining whether or not the behavioral importance and viewing importance are equal to or higher than a predetermined value. For example, a function having the action importance level and the viewing importance level as input values may be defined and determined based on the output value of the function. Or you may make it determine whether it is incompatible or compatible using information (behavior information, presentation information, information showing the presentation method, etc.) other than action importance and viewing importance.

ここで、行動柔軟度推定部106は、行動柔軟度を推定する(S6)。すなわち、「電車乗り換え」というユーザの行動を変更した場合の影響の小ささを推定する。図9は、ユーザの行動と行動柔軟度とを予め対応付けた行動柔軟度リストの内部構成例を示す図である。この図9に示されるように、ユーザの行動と行動柔軟度とを予め対応付けた行動柔軟度リストL4を行動柔軟度推定部106が保持している場合には、「電車乗り換え」に対する行動重要度は「3」であると推定されることになる。   Here, the behavior flexibility estimation unit 106 estimates the behavior flexibility (S6). That is, a small influence is estimated when the user's action of “train transfer” is changed. FIG. 9 is a diagram illustrating an internal configuration example of a behavior flexibility list in which user behavior and behavior flexibility are associated in advance. As shown in FIG. 9, when the behavior flexibility estimation unit 106 holds the behavior flexibility list L4 in which the user's behavior and the behavior flexibility are associated in advance, the behavior important for “train transfer” is important. The degree will be estimated to be “3”.

行動柔軟度リストL4は予め作成されていてもよいし、行動柔軟度推定部106が当該リスト参照時に値を算出してもよい。値を算出する際には、電車乗り換えの可否、電車乗り換えをしない場合における目的地までの到達可否、支払う増加運賃、目的地に到達する時刻の遅延、到着が遅れた場合の重大性のレベルなどを考慮するのが好ましい。ここでは、行動柔軟度推定部106が時刻表を保持しており、この時刻表を参照すればA駅で乗り換えなくても次の乗り換え駅で急行電車に追いつくことが判明する場面を想定している。すなわち、A駅で乗り換えなくても目的地への到達は遅れないため、行動柔軟度としては比較的大きい値「3」を算出している。   The behavior flexibility list L4 may be created in advance, or the behavior flexibility estimation unit 106 may calculate a value when referring to the list. When calculating the value, whether you can change trains, whether you can reach the destination if you do not change trains, the increased fare to pay, the delay in the time to reach the destination, the severity level when the arrival is delayed, etc. Is preferably taken into account. Here, it is assumed that the behavior flexibility estimation unit 106 holds a timetable, and if it is found that it can be found that it catches up to the express train at the next transfer station without referring to the timetable by referring to this timetable. Yes. That is, since the arrival at the destination is not delayed even if there is no transfer at station A, a relatively large value “3” is calculated as the behavior flexibility.

一方、視聴柔軟度推定部107は、視聴柔軟度を推定する(S7)。すなわち、ドラマAの「中心部」を視聴することを変更した場合の影響の少なさを推定する。図10は、提示情報と視聴柔軟度とを予め対応付けた視聴柔軟度リストの内部構成例を示す図である。この図10に示されるように、提示情報と視聴柔軟度とを予め対応付けた視聴柔軟度リストL5を視聴柔軟度推定部107が保持している場合には、ドラマAの「中心部」に対する視聴柔軟度は「2」であると推定されることになる。   On the other hand, the viewing flexibility estimation unit 107 estimates viewing flexibility (S7). That is, the influence of changing the viewing of the “center” of the drama A is estimated. FIG. 10 is a diagram illustrating an internal configuration example of a viewing flexibility list in which presentation information and viewing flexibility are associated in advance. As shown in FIG. 10, when the viewing flexibility estimation unit 107 holds the viewing flexibility list L5 in which the presentation information and the viewing flexibility are associated in advance, the “center” of the drama A The viewing flexibility is estimated to be “2”.

視聴柔軟度リストL5は予め作成されていてもよいし、視聴柔軟度推定部107が当該リスト参照時に値を算出してもよい。値を算出する際には、音声のみで提示した場合における内容理解の容易性、表示サイズや解像度を低下させた場合における被写体認識の容易性、一時停止の可否、一時停止してから再生を再開するまで内容を覚えておくことの容易性などを考慮するのが好ましい。ここでは、ドラマの「中心部」を音声のみで提示した場合、その内容は比較的理解しづらいため、視聴柔軟度としては比較的大きい値「2」を算出している。   The viewing flexibility list L5 may be created in advance, or the viewing flexibility estimation unit 107 may calculate a value when referring to the list. When calculating the value, it is easy to understand the content when presented only by voice, easy to recognize the subject when the display size or resolution is reduced, whether or not to pause, and resume playback after pausing It is preferable to consider the ease of remembering the contents until it is done. Here, when the “center” of the drama is presented only by voice, the content is relatively difficult to understand, so a relatively large value “2” is calculated as the viewing flexibility.

次に、変更判定部108は、ユーザに行動を変更させるか、又は提示情報の提示法を変更するかを判定する(S8)。例えば、「電車乗り換え」に対する行動柔軟度「3」と、ドラマAの「中心部」に対する視聴柔軟度「2」とを比較する。ここでは、視聴柔軟度「2」より行動柔軟度「3」の方が高いので、ユーザに行動を変更させると判定されることになる(S8で行動変更)。   Next, the change determination unit 108 determines whether to change the behavior of the user or to change the presentation method of the presentation information (S8). For example, the behavior flexibility “3” for “train transfer” is compared with the viewing flexibility “2” for “center” of drama A. Here, since the behavioral flexibility “3” is higher than the viewing flexibility “2”, it is determined that the user changes the behavior (behavior change in S8).

これによって、行動変更部109は、ユーザに行動を変更させる(S9)。図11は、テレビドラマの中心部がユーザに提示されている状態を示す図である。この図11(A)に示されるように、テレビドラマの中心部が提示幕13に提示されていた場合は、図11(B)に示されるように、現シーンに例えば「このまま各停に乗り続けてもOK」というメッセージMを重畳させてユーザに提示する。   Thereby, the behavior change unit 109 causes the user to change the behavior (S9). FIG. 11 is a diagram illustrating a state where the center of the TV drama is presented to the user. As shown in FIG. 11 (A), when the center of the TV drama is presented on the presentation curtain 13, as shown in FIG. The message M "OK even if continued" is superimposed and presented to the user.

このように、行動重要度と視聴重要度のいずれもが3以上である場合には、両立判定部105が両立不能であると判定する。ここでは、行動重要度と視聴重要度はいずれも「3」であるため、両立不能であると判定することになる。   Thus, when both the action importance level and the viewing importance level are 3 or more, the compatibility determination unit 105 determines that the compatibility is not possible. Here, since the action importance level and the viewing importance level are both “3”, it is determined that the compatibility is not possible.

このように両立不能であると判定されると、変更判定部108が行動柔軟度と視聴柔軟度とを比較して、視聴柔軟度より行動柔軟度の方が高い場合には行動変更部109がユーザに行動を変更させる。ここでは、視聴柔軟度「2」より行動柔軟度「3」の方が高いので、ユーザに行動を変更させることになる。   When it is determined that the compatibility is not possible in this way, the change determination unit 108 compares the behavior flexibility and the viewing flexibility, and if the behavior flexibility is higher than the viewing flexibility, the behavior change unit 109 Let the user change behavior. Here, since the behavioral flexibility “3” is higher than the viewing flexibility “2”, the user is allowed to change the behavior.

一方、行動柔軟度より視聴柔軟度の方が高い場合には、情報提示部111が提示情報の提示法を変更する(S8で提示法変更→S10)。この場合は、例えば、再生中のテレビドラマを一時停止させてCMを再生するようにし、ユーザが乗り換えを完了した頃にテレビドラマの再生を再開する。   On the other hand, when the viewing flexibility is higher than the behavior flexibility, the information presenting unit 111 changes the presentation information presentation method (presentation method change in S8 → S10). In this case, for example, the TV drama being played is paused to play the CM, and the TV drama is resumed when the user completes the transfer.

以上の説明から明らかなように、本発明に係る情報提示装置では、両立不能である状況において、行動柔軟度より視聴柔軟度の方が高い場合には提示情報の提示法を変更し、逆に、視聴柔軟度より行動柔軟度の方が高い場合にはユーザに行動を変更させるようにしているので、情報視聴が過度に妨げられることを防止するのはもちろん、ユーザの行動を過度に妨げられることも防止することができる。   As is clear from the above description, in the information presentation device according to the present invention, in the situation where compatibility is not possible, when the viewing flexibility is higher than the behavior flexibility, the presentation information presentation method is changed, and conversely When the behavioral flexibility is higher than the viewing flexibility, the user is allowed to change the behavior, so that the user's behavior is excessively prevented as well as preventing the information viewing from being excessively disturbed This can also be prevented.

よって、必ずしも重要でない行動のために重要な情報の視聴を逃してしまうことが回避され、ユーザは適切なタイミングで適切な情報を確実に入手することができる。また、必ずしも重要でない情報視聴のために重要な行動が制限されてしまうことが回避され、ユーザは適切なタイミングで適切な行動を確実にとることができる。   Therefore, it is avoided that important information is missed due to an unimportant action, and the user can surely obtain appropriate information at an appropriate timing. Moreover, it is avoided that important actions are restricted for viewing information that is not necessarily important, and the user can surely take appropriate actions at appropriate timing.

なお、ここでは、両立不能の場合には、ユーザに行動を変更させるか、又は提示情報の提示法を変更するかを判定することとしているが、本発明はこれに限定されるものではない。すなわち、両立不能の場合には、必ず、ユーザに行動を変更させるようにしてもよい。このように提示情報の提示法を変更しない構成によっても、情報視聴が過度に妨げられるという従来の課題は解決することができる。もちろん、この構成を採用する場合には、変更判定部108、提示法変更部110、及び情報提示部111は必ずしも必要でない。   Here, in the case where the compatibility is impossible, it is determined whether to change the behavior of the user or to change the presentation method of the presentation information, but the present invention is not limited to this. That is, when the compatibility is not possible, the user may be allowed to change the behavior. Thus, the conventional problem that information viewing is excessively hindered can be solved even by a configuration in which the presentation information presentation method is not changed. Of course, when this configuration is adopted, the change determination unit 108, the presentation method change unit 110, and the information presentation unit 111 are not necessarily required.

また、ここでは、行動柔軟度と視聴柔軟度とに基づいて、ユーザに行動を変更させるか、又は提示情報の提示法を変更するかを判定することとしているが、本発明はこれに限定されるものではない。例えば、行動重要度と視聴重要度とに基づいて、ユーザに行動を変更させるか、又は提示情報の提示法を変更するかを判定するようにしてもよい。この場合は、行動重要度より視聴重要度の方が高いときにはユーザに行動を変更させ、逆に、視聴重要度より行動重要度の方が高いときには提示情報の提示法を変更すればよい。もちろん、このように行動柔軟度や視聴柔軟度を用いない場に合は、行動柔軟度推定部106や視聴柔軟度推定部107は必ずしも必要でない。   Here, based on the behavior flexibility and viewing flexibility, it is determined whether to change the behavior of the user or to change the presentation method of the presentation information, but the present invention is not limited to this. It is not something. For example, you may make it determine whether a user changes action based on action importance and viewing importance, or changes the presentation method of presentation information. In this case, the user may change the behavior when the viewing importance is higher than the behavior importance, and conversely, the presentation information presentation method may be changed when the behavior importance is higher than the viewing importance. Of course, when the behavior flexibility and the viewing flexibility are not used, the behavior flexibility estimation unit 106 and the viewing flexibility estimation unit 107 are not necessarily required.

さらに、変更判定部108は、両立度と行動柔軟度と視聴柔軟度とに基づいて、ユーザに行動を変更させる程度を示す行動変更度や、提示情報の提示法を変更する程度を示す提示法変更度を決定してもよい。すなわち、両立度と行動柔軟度と視聴柔軟度との組み合わせによって、ユーザに行動を変更させる程度や、提示情報の提示法を変更する程度を変えてもよい。このようにすれば、例えば、行動柔軟度と視聴柔軟度とが同じ値である場合は、行動変更度と提示法変更度とを同じ値にすることによって、ユーザの行動と提示法の両方を同じ程度だけ変更することができる。また、行動柔軟度と視聴柔軟度とが異なる値である場合でも、主としてユーザに行動を変更させながら補完的に提示情報の提示法を変更する等、ユーザの行動と提示法の両方を必要最小限の程度で変更することができる。 さらに、図4のS2とS4の動作はどちらが先に行われてもよい。すなわち、S5の動作までにS2とS4の動作が完了していればよい。同様に、図4のS6とS7の動作はどちらが先に行われてもよい。すなわち、S8の動作までにS6とS7の動作が完了していればよい。もちろん、図4に示した各動作は、即時に次々と行われてもよいし、平行して行われてもよいし、時間をおいて行われてもよい。   Further, the change determination unit 108 is based on the compatibility level, the behavioral flexibility level, and the viewing flexibility level, and the behavioral change level indicating the degree to which the user changes the behavior and the presentation method indicating the degree to change the presentation method of the presentation information. The degree of change may be determined. That is, the degree to which the user changes the behavior and the degree to change the presentation method of the presentation information may be changed depending on the combination of the compatibility level, the behavior flexibility, and the viewing flexibility. In this way, for example, when the behavioral flexibility and the viewing flexibility are the same value, by setting the behavioral change degree and the presentation method change degree to the same value, both the user's behavior and the presentation method are set. It can be changed by the same amount. Even if the behavioral flexibility and the viewing flexibility are different values, both the user's behavior and the presentation method are minimally required, such as changing the presentation method of the presentation information complementarily while changing the behavior mainly by the user. It can be changed to a limited extent. Furthermore, either of the operations of S2 and S4 in FIG. 4 may be performed first. That is, it is sufficient that the operations of S2 and S4 are completed by the operation of S5. Similarly, either of the operations of S6 and S7 in FIG. 4 may be performed first. That is, it is sufficient that the operations of S6 and S7 are completed by the operation of S8. Of course, each operation shown in FIG. 4 may be performed immediately one after another, may be performed in parallel, or may be performed at intervals.

さらに、ここでは行動重要度・視聴重要度・行動柔軟度・視聴柔軟度を1や2などの整数値で表したが、本発明はこれに限定されるものではない。すなわち、これら重要度や柔軟度は、程度を示す情報であればよく、程度の分類でもよいし、小数などの数値でもよいし、あるいは、「20%の確率で1であり、80%の確率で2である」などのように確率を伴った表現形態でもよい。   Furthermore, although the action importance / viewing importance / behavior flexibility / viewing flexibility is represented by an integer value such as 1 or 2 here, the present invention is not limited to this. That is, the importance and flexibility may be information indicating the degree, may be a degree classification, may be a numerical value such as a decimal number, or may be “1 with 20% probability and 80% probability” An expression form with a probability such as “2” is also possible.

さらに、ここでは透過型のHMDを例示したが、本発明は、これに限定されるものではない。すなわち、カメラ等によって撮影された外界の画像を仮想画像と重畳させてLCD等の表示装置に表示する密閉型のHMDにも、本発明を適用することができる。また、情報提示部111は、ヘッドマウントディスプレイ、フェイスマウントディスプレイ、眼鏡型ディスプレイ、透過型ディスプレイ、網膜走査型ディスプレイ、携帯電話や携帯テレビやモバイル端末の情報提示部111、プロジェクターなどを含んでもよい。もちろん、HMDだけでなく、図3に示した各部を備えた装置である以上、本発明を適用することができる。   Furthermore, although the transmission type HMD is exemplified here, the present invention is not limited to this. That is, the present invention can also be applied to a sealed HMD that displays an image of the outside world photographed by a camera or the like on a display device such as an LCD while being superimposed on a virtual image. Further, the information presentation unit 111 may include a head-mounted display, a face-mounted display, a glasses-type display, a transmissive display, a retinal scanning display, an information presentation unit 111 of a mobile phone, a mobile TV or a mobile terminal, a projector, and the like. Of course, the present invention can be applied as long as the apparatus includes not only the HMD but also each unit shown in FIG.

さらに、図3における各部は、一台のコンピュータ上にあってもよいし、一台のコンピュータ上になくてもよい。例えば、提示法変更部110と情報提示部111とが別の機器にあってもよいし、提示情報取得部103がインターネット上のサーバ機器でもよい。また、複数のコンピュータ上に各部が分散していてもよいし、図3における各部(例えば情報提示部111)が一台のコンピュータ上に複数存在してもよい。複数ユーザで図3の各部を共有してもよいのはもちろんである。   Furthermore, each unit in FIG. 3 may be on one computer or not on one computer. For example, the presentation method change unit 110 and the information presentation unit 111 may be in different devices, and the presentation information acquisition unit 103 may be a server device on the Internet. Moreover, each part may be disperse | distributed on a some computer, and each part (for example, information presentation part 111) in FIG. 3 may exist in multiple numbers on one computer. Of course, each user in FIG. 3 may be shared by a plurality of users.

さらに、行動情報を管理する方法については特に言及しなかったが、この方法としては、行動情報取得部101自体が行動情報自体の全部や一部を保有する方法を採用してもよいし、行動情報を取得できるように行動情報の位置を保有する方法を採用してもよいし、行動情報の位置を保有している別の行動情報取得部の位置を保有する方法を採用してもよい。提示情報を管理する方法についても同様である。すなわち、提示情報取得部103自体が提示情報自体の全部や一部を保有する方法を採用してもよいし、提示情報を取得できるように提示情報の位置を保有する方法を採用してもよいし、提示情報の位置を保有している別の提示情報取得部の位置を保有する方法を採用してもよい。   Furthermore, although the method for managing the behavior information is not particularly mentioned, a method in which the behavior information acquisition unit 101 itself holds all or part of the behavior information itself may be adopted as this method. A method of holding the position of behavior information so that information can be acquired may be adopted, or a method of holding the position of another behavior information acquisition unit that holds the position of behavior information may be adopted. The same applies to the method of managing the presentation information. That is, the presentation information acquisition unit 103 itself may employ a method of retaining all or part of the presentation information itself, or a method of retaining the position of the presentation information so that the presentation information can be acquired. And the method of holding the position of another presentation information acquisition part which holds the position of presentation information may be employ | adopted.

本発明に係る情報提示装置は、ユーザに情報を提示する情報提示装置として、特に、ユーザの行動と情報視聴とが両立しない状況において情報視聴が過度に妨げられることのないHMD等として有用である。   The information presenting apparatus according to the present invention is useful as an information presenting apparatus that presents information to a user, particularly as an HMD that does not unduly hinder information viewing in a situation where user behavior and information viewing are not compatible. .

本発明に係るHMDをユーザが装着している状態を示す図である。It is a figure which shows the state which the user has mounted | worn with HMD which concerns on this invention. 本発明に係る別のHMDをユーザが装着している状態を示す図である。It is a figure which shows the state which the user has mounted | worn with another HMD which concerns on this invention. 本発明に係るHMDの要部の機能ブロック図である。It is a functional block diagram of the principal part of HMD concerning the present invention. 本発明に係るHMDの動作を示すフローチャートである。It is a flowchart which shows operation | movement of HMD which concerns on this invention. 本発明に係るHMDを装着したユーザが電車内でテレビドラマを視聴している様子を示す図である。It is a figure showing signs that a user wearing HMD concerning the present invention is watching a television drama in a train. ユーザの予定表の内容を示す図である。It is a figure which shows the content of a user's schedule. 行動重要度リストの内部構成例を示す図である。It is a figure which shows the internal structural example of an action importance list | wrist. 内部構成例を示す図である。It is a figure which shows an internal structural example. 行動柔軟度リストの内部構成例を示す図である。It is a figure which shows the internal structural example of an action flexibility list | wrist. 視聴柔軟度リストの内部構成例を示す図である。It is a figure which shows the internal structural example of a viewing-and-listening flexibility list. テレビドラマの中心部がユーザに提示されている状態を示す図である。It is a figure which shows the state by which the center part of a television drama is shown to the user.

符号の説明Explanation of symbols

101 行動情報取得部
102 行動重要度推定部
103 提示情報取得部
104 視聴重要度推定部
105 両立判定部
106 行動柔軟度推定部
107 視聴柔軟度推定部
108 変更判定部
109 行動変更部
110 提示法変更部
111 情報提示部

101 behavior information acquisition unit 102 behavior importance estimation unit 103 presentation information acquisition unit 104 viewing importance estimation unit 105 compatibility determination unit 106 behavior flexibility estimation unit 107 viewing flexibility estimation unit 108 change determination unit 109 behavior change unit 110 presentation method change Part 111 Information presentation part

Claims (15)

ユーザに情報を提示する情報提示装置であって、
ユーザの行動に関する行動情報を取得する行動情報取得手段と、
ユーザの行動に対する重要度を示す行動重要度を推定する行動重要度推定手段と、
ユーザに提示する提示情報を取得する提示情報取得手段と、
ユーザが前記提示情報を視聴することに対する重要度を示す視聴重要度を推定する視聴重要度推定手段と、
前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立するか否かを判定する両立判定手段と、
前記両立判定手段によってユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させる処理を行う行動変更手段と
を備えることを特徴とする情報提示装置。
An information presentation device for presenting information to a user,
Behavior information acquisition means for acquiring behavior information relating to user behavior;
An action importance estimation means for estimating an action importance level indicating an importance level of a user's action;
Presentation information acquisition means for acquiring presentation information to be presented to the user;
Viewing importance level estimation means for estimating the viewing importance level indicating the importance level for the user to view the presentation information;
Compatibility determination means for determining whether or not the user's action and the user viewing the presentation information are compatible based on the action importance and the viewing importance;
The information presentation comprising: a behavior changing means for performing a process of changing the behavior of the user when it is judged by the compatibility judging means that the user's behavior is not compatible with the user viewing the presentation information apparatus.
前記両立判定手段は、前記行動重要度が第一の閾値より大きい値であり、且つ前記視聴重要度が第二の閾値より大きい値である場合、ユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定する
ことを特徴とする請求項1記載の情報提示装置。
The compatibility determination means, when the action importance is a value greater than a first threshold and the viewing importance is a value greater than a second threshold, the user's action and the user views the presentation information. The information presenting apparatus according to claim 1, wherein the information presenting device is determined to be incompatible.
前記両立判定手段は、前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立する程度を示す両立度を決定し、
前記行動変更手段は、前記両立度に基づいて、ユーザに行動を変更させる処理を行う
ことを特徴とする請求項1記載の情報提示装置。
The compatibility determination means determines a compatibility level indicating a degree of compatibility between the user's behavior and the user viewing the presentation information based on the activity importance level and the viewing importance level,
The information presentation apparatus according to claim 1, wherein the behavior changing unit performs a process of causing the user to change a behavior based on the compatibility.
前記情報提示装置は、さらに、
前記両立判定手段によってユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させるか、又は前記提示情報の提示法を変更するかを判定する変更判定手段と、
前記変更判定手段によって前記提示情報の提示法を変更すると判定された場合、前記提示情報の提示法を変更する提示法変更手段と、
前記提示法変更手段によって変更された提示法によって、ユーザに前記提示情報を提示する情報提示手段と
を備えることを特徴とする請求項1記載の情報提示装置。
The information presentation device further includes:
When it is determined by the compatibility determination means that the user's action and the user viewing the presentation information are not compatible, it is determined whether the user should change the action or change the method of presenting the presentation information. Change determination means;
When it is determined by the change determination means to change the presentation method of the presentation information, a presentation method change means for changing the presentation information presentation method;
The information presentation apparatus according to claim 1, further comprising: an information presentation unit that presents the presentation information to a user by a presentation method changed by the presentation method change unit.
前記情報提示装置は、さらに、
ユーザの行動を変更することについての柔軟度を示す行動柔軟度を推定する行動柔軟度推定手段と、
前記提示情報の視聴形態を変更することについての柔軟度を示す視聴柔軟度を推定する視聴柔軟度推定手段とを備え、
前記変更判定手段は、前記行動柔軟度と前記視聴柔軟度とに基づいて、ユーザに行動を変更させるか、又は前記提示情報の提示法を変更するかを判定する
ことを特徴とする請求項4記載の情報提示装置。
The information presentation device further includes:
Behavioral flexibility estimation means for estimating behavioral flexibility indicating flexibility for changing a user's behavior;
Viewing flexibility estimation means for estimating viewing flexibility indicating flexibility for changing the viewing mode of the presentation information,
The change determination means determines whether to change the behavior of the user or to change the presentation method of the presentation information based on the behavior flexibility and the viewing flexibility. The information presentation device described.
前記変更判定手段は、前記行動柔軟度が前記視聴柔軟度よりも高い場合、ユーザに行動を変更させると判定し、前記視聴柔軟度が前記行動柔軟度よりも高い場合、前記提示情報の提示法を変更すると判定する
ことを特徴とする請求項5記載の情報提示装置。
The change determination means determines that the user changes the behavior when the behavior flexibility is higher than the viewing flexibility, and when the viewing flexibility is higher than the behavior flexibility, the presentation information presentation method The information presentation device according to claim 5, wherein the information presentation device is determined to be changed.
前記両立判定手段は、前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立する程度を示す両立度を決定し、
前記変更判定手段は、前記両立度と前記行動柔軟度と前記視聴柔軟度とに基づいて、ユーザに行動を変更させる程度を示す行動変更度と、前記提示情報の提示法を変更する程度を示す提示法変更度のうちの少なくとも1つを決定し、
前記行動変更手段は、前記行動変更度に基づいて、ユーザに行動を変更させる処理をし、
前記提示法変更手段は、前提示法変更度に基づいて、前記提示情報の提示法を変更する
ことを特徴とする請求項5記載の情報提示装置。
The compatibility determination means determines a compatibility level indicating a degree of compatibility between the user's behavior and the user viewing the presentation information based on the activity importance level and the viewing importance level,
The change determination means indicates a behavior change degree indicating a degree to which a user changes a behavior based on the compatibility level, the behavior flexibility, and the viewing flexibility, and a degree to change the presentation method of the presentation information. Determine at least one of the presentation method changes,
The behavior changing means performs a process of causing the user to change the behavior based on the behavior change degree,
The information presentation apparatus according to claim 5, wherein the presentation method changing unit changes a presentation method of the presentation information based on a previous presentation method change degree.
前記行動柔軟度推定手段は、ユーザの行動について代替案の数が多い場合ほど、又は代替案を採った際にユーザに与える影響が小さい場合ほど、行動柔軟度が高いと推定する
ことを特徴とする請求項5記載の情報提示装置。
The behavior flexibility estimation means estimates that the behavior flexibility is higher as the number of alternatives for the user's behavior is larger or the influence on the user when the alternative is taken is smaller. The information presentation apparatus according to claim 5.
前記視聴柔軟度推定手段は、前記提示情報の視聴形態について代替案の数が多い場合ほど、又は代替案を採った際にユーザに与える影響が小さい場合ほど、視聴柔軟度が高いと推定する
ことを特徴とする請求項5記載の情報提示装置。
The viewing flexibility estimation means estimates that the viewing flexibility is higher as the number of alternatives for the viewing mode of the presentation information is larger or the influence on the user when the alternative is adopted is smaller. The information presentation device according to claim 5.
前記提示法変更手段は、前記提示情報の提示サイズ、提示位置、提示解像度、提示色、提示透明度、提示奥行き、提示音量、提示声種別、再生時間、再生状態、再生部分、再生粒度、の少なくとも1つについて提示法を変更する
ことを特徴とする請求項4記載の情報提示装置。
The presentation method changing means includes at least a presentation size, a presentation position, a presentation resolution, a presentation color, a presentation transparency, a presentation depth, a presentation volume, a presentation voice type, a playback time, a playback state, a playback part, and a playback granularity of the presentation information. 5. The information presentation apparatus according to claim 4, wherein the presentation method is changed for one.
前記行動変更手段は、ユーザに行動の変更を促す旨の情報を提示することによって、又はユーザの身体に刺激を与えることによって、ユーザに行動を変更させる
ことを特徴とする請求項1記載の情報提示装置。
The information according to claim 1, wherein the behavior changing unit causes the user to change the behavior by presenting information that prompts the user to change the behavior or by stimulating the user's body. Presentation device.
ユーザに情報を提示する情報提示方法であって、
ユーザの行動に関する行動情報を取得する行動情報取得ステップと、
ユーザの行動に対する重要度を示す行動重要度を推定する行動重要度推定ステップと、
ユーザに提示する提示情報を取得する提示情報取得ステップと、
ユーザが前記提示情報を視聴することに対する重要度を示す視聴重要度を推定する視聴重要度推定ステップと、
前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立するか否かを判定する両立判定ステップと、
前記両立判定ステップにおいてユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させる処理を行う行動変更ステップと
を含むことを特徴とする情報提示方法。
An information presentation method for presenting information to a user,
A behavior information acquisition step for acquiring behavior information regarding the user's behavior;
An action importance estimation step for estimating an action importance level indicating an importance level of the user's action;
A presentation information acquisition step of acquiring presentation information to be presented to the user;
A viewing importance level estimation step for estimating a viewing importance level indicating a level of importance for the user to view the presentation information;
A compatibility determination step of determining whether or not the user's behavior and the user viewing the presentation information are compatible based on the behavior importance and the viewing importance;
An information presentation comprising: a behavior change step of performing a process of changing the behavior of the user when it is determined that the behavior of the user and the user viewing the presentation information are not compatible in the compatibility judgment step Method.
ユーザに情報を提示するためのプログラムであって、
ユーザの行動に関する行動情報を取得する行動情報取得ステップと、
ユーザの行動に対する重要度を示す行動重要度を推定する行動重要度推定ステップと、
ユーザに提示する提示情報を取得する提示情報取得ステップと、
ユーザが前記提示情報を視聴することに対する重要度を示す視聴重要度を推定する視聴重要度推定ステップと、
前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立するか否かを判定する両立判定ステップと、
前記両立判定ステップにおいてユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させる処理を行う行動変更ステップと
をコンピュータに実行させるためのプログラム。
A program for presenting information to a user,
A behavior information acquisition step for acquiring behavior information regarding the user's behavior;
An action importance estimation step for estimating an action importance level indicating an importance level of the user's action;
A presentation information acquisition step of acquiring presentation information to be presented to the user;
A viewing importance level estimation step for estimating a viewing importance level indicating a level of importance for the user to view the presentation information;
A compatibility determination step of determining whether or not the user's behavior and the user viewing the presentation information are compatible based on the behavior importance and the viewing importance;
A program for causing a computer to execute a behavior change step of performing a process of changing the behavior of the user when it is determined that the behavior of the user and the user viewing the presentation information are not compatible in the compatibility determination step.
ユーザに情報を提示するためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
ユーザの行動に関する行動情報を取得する行動情報取得ステップと、
ユーザの行動に対する重要度を示す行動重要度を推定する行動重要度推定ステップと、
ユーザに提示する提示情報を取得する提示情報取得ステップと、
ユーザが前記提示情報を視聴することに対する重要度を示す視聴重要度を推定する視聴重要度推定ステップと、
前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立するか否かを判定する両立判定ステップと、
前記両立判定ステップにおいてユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させる処理を行う行動変更ステップと
をコンピュータに実行させるためのプログラムを記録した記録媒体。
A computer-readable recording medium that records a program for presenting information to a user,
A behavior information acquisition step for acquiring behavior information regarding the user's behavior;
An action importance estimation step for estimating an action importance level indicating an importance level of the user's action;
A presentation information acquisition step of acquiring presentation information to be presented to the user;
A viewing importance level estimation step for estimating a viewing importance level indicating a level of importance for the user to view the presentation information;
A compatibility determination step of determining whether or not the user's behavior and the user viewing the presentation information are compatible based on the behavior importance and the viewing importance;
A program for causing a computer to execute a behavior change step of performing a process of changing the behavior of the user when it is determined that the behavior of the user and the user viewing the presentation information are not compatible in the compatibility determination step. Recorded recording medium.
ユーザに情報を提示する集積回路であって、
ユーザの行動に関する行動情報を取得する行動情報取得手段と、
ユーザの行動に対する重要度を示す行動重要度を推定する行動重要度推定手段と、
ユーザに提示する提示情報を取得する提示情報取得手段と、
ユーザが前記提示情報を視聴することに対する重要度を示す視聴重要度を推定する視聴重要度推定手段と、
前記行動重要度と前記視聴重要度とに基づいて、ユーザの行動とユーザが前記提示情報を視聴することとが両立するか否かを判定する両立判定手段と、
前記両立判定手段によってユーザの行動とユーザが前記提示情報を視聴することとが両立しないと判定された場合、ユーザに行動を変更させる処理を行う行動変更手段と
を備えることを特徴とする集積回路。

An integrated circuit that presents information to a user,
Behavior information acquisition means for acquiring behavior information relating to user behavior;
An action importance estimation means for estimating an action importance level indicating an importance level of a user's action;
Presentation information acquisition means for acquiring presentation information to be presented to the user;
Viewing importance level estimation means for estimating the viewing importance level indicating the importance level for the user to view the presentation information;
Compatibility determination means for determining whether or not the user's action and the user viewing the presentation information are compatible based on the action importance and the viewing importance;
An integrated circuit comprising: a behavior changing unit that performs a process of changing the behavior of the user when the behavior determining unit determines that the user's behavior is not compatible with the viewing of the presentation information by the user. .

JP2004373122A 2004-12-24 2004-12-24 Information presenting device Pending JP2006178842A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004373122A JP2006178842A (en) 2004-12-24 2004-12-24 Information presenting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004373122A JP2006178842A (en) 2004-12-24 2004-12-24 Information presenting device

Publications (1)

Publication Number Publication Date
JP2006178842A true JP2006178842A (en) 2006-07-06

Family

ID=36732898

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004373122A Pending JP2006178842A (en) 2004-12-24 2004-12-24 Information presenting device

Country Status (1)

Country Link
JP (1) JP2006178842A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010089989A1 (en) * 2009-02-05 2010-08-12 パナソニック株式会社 Information display device and information display method
WO2010103955A1 (en) * 2009-03-12 2010-09-16 ブラザー工業株式会社 Head-mounted display device, image control method, and image control program
JP2017516196A (en) * 2014-04-17 2017-06-15 マイクロソフト テクノロジー ライセンシング,エルエルシー Conversation detection
WO2017187708A1 (en) * 2016-04-26 2017-11-02 ソニー株式会社 Information processing device, information processing method, and program
WO2018109988A1 (en) * 2016-12-16 2018-06-21 シャープ株式会社 Display device, display control method and program
US10679648B2 (en) 2014-04-17 2020-06-09 Microsoft Technology Licensing, Llc Conversation, presence and context detection for hologram suppression

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2010089989A1 (en) * 2009-02-05 2012-08-09 パナソニック株式会社 Information display device and information display method
JP5286371B2 (en) * 2009-02-05 2013-09-11 パナソニック株式会社 Information display device and information display method
WO2010089989A1 (en) * 2009-02-05 2010-08-12 パナソニック株式会社 Information display device and information display method
WO2010103955A1 (en) * 2009-03-12 2010-09-16 ブラザー工業株式会社 Head-mounted display device, image control method, and image control program
JP2010211662A (en) * 2009-03-12 2010-09-24 Brother Ind Ltd Head mounted display device, method and program for controlling image
US10529359B2 (en) 2014-04-17 2020-01-07 Microsoft Technology Licensing, Llc Conversation detection
JP2017516196A (en) * 2014-04-17 2017-06-15 マイクロソフト テクノロジー ライセンシング,エルエルシー Conversation detection
US10679648B2 (en) 2014-04-17 2020-06-09 Microsoft Technology Licensing, Llc Conversation, presence and context detection for hologram suppression
WO2017187708A1 (en) * 2016-04-26 2017-11-02 ソニー株式会社 Information processing device, information processing method, and program
JPWO2017187708A1 (en) * 2016-04-26 2019-02-28 ソニー株式会社 Information processing apparatus, information processing method, and program
CN109074212A (en) * 2016-04-26 2018-12-21 索尼公司 Information processing unit, information processing method and program
US11017257B2 (en) 2016-04-26 2021-05-25 Sony Corporation Information processing device, information processing method, and program
CN109074212B (en) * 2016-04-26 2021-12-31 索尼公司 Information processing apparatus, information processing method, and program
JP7092028B2 (en) 2016-04-26 2022-06-28 ソニーグループ株式会社 Information processing equipment, information processing methods, and programs
WO2018109988A1 (en) * 2016-12-16 2018-06-21 シャープ株式会社 Display device, display control method and program

Similar Documents

Publication Publication Date Title
JP6966443B2 (en) Image display system, head-mounted display control device, its operation method and operation program
JP4268191B2 (en) Information presenting apparatus, information presenting method, program, and recording medium
JPWO2005122128A1 (en) Wearable information presentation device
US9852506B1 (en) Zoom and image capture based on features of interest
JP4927631B2 (en) Display device, control method therefor, program, recording medium, and integrated circuit
JP6391685B2 (en) Orientation and visualization of virtual objects
US9255813B2 (en) User controlled real object disappearance in a mixed reality display
JP5162928B2 (en) Image processing apparatus, image processing method, and image processing system
US8874760B2 (en) Systems and methods for accessing an interaction state between multiple devices
EP3352050A1 (en) Information processing device, information processing method, and program
CN108028957A (en) Information processor, information processing method and program
US8994613B1 (en) User-experience customization
US20150278737A1 (en) Automatic Calendar Event Generation with Structured Data from Free-Form Speech
CN104423584A (en) Wearable device and method of outputting content thereof
WO2016034952A1 (en) Activity based text rewriting using language generation
JP2006178842A (en) Information presenting device
WO2007072675A1 (en) Contents presentation device, and contents presentation method
JP2013034237A (en) Image processor, image processing method and image processing system
US20240119643A1 (en) Image processing device, image processing method, and computer-readable storage medium
CN107491172B (en) Somatosensory data acquisition method and device and electronic equipment
JP2006099216A (en) Annoying watching-prevention type information presentation device