JP7416204B2 - 情報提示装置、方法およびプログラム - Google Patents
情報提示装置、方法およびプログラム Download PDFInfo
- Publication number
- JP7416204B2 JP7416204B2 JP2022504810A JP2022504810A JP7416204B2 JP 7416204 B2 JP7416204 B2 JP 7416204B2 JP 2022504810 A JP2022504810 A JP 2022504810A JP 2022504810 A JP2022504810 A JP 2022504810A JP 7416204 B2 JP7416204 B2 JP 7416204B2
- Authority
- JP
- Japan
- Prior art keywords
- presentation
- information
- user
- visual field
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 49
- 230000000007 visual effect Effects 0.000 claims description 34
- 230000010365 information processing Effects 0.000 claims description 29
- 238000001514 detection method Methods 0.000 claims description 16
- 238000012545 processing Methods 0.000 claims description 7
- 230000006870 function Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 16
- 238000007726 management method Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 9
- 210000005252 bulbus oculi Anatomy 0.000 description 7
- 238000004891 communication Methods 0.000 description 7
- 230000036541 health Effects 0.000 description 7
- 230000002093 peripheral effect Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000013500 data storage Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005043 peripheral vision Effects 0.000 description 2
- 239000004984 smart glass Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000005180 public health Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Description
[一実施形態]
(構成例)
(1)システム
図1は、この発明の一実施形態に係る情報提示装置を備えるシステムの全体構成を示す図である。
図2および図3は、それぞれこの発明の一実施形態に係る情報提示装置として機能する情報処理装置のハードウェア構成およびソフトウェア構成を示すブロック図である。
上記注視点検出部313により検出されたユーザの現時点での注視点Pと、上記提示情報管理部311から通知された、これから提示しようとする内容情報の緊急度を示す値および提示頻度を示す値に基づいて、上記注視点Pを基準にした角度θを算出する。そして、表示デバイス1の表示領域内で、上記算出された角度θに対応する表示位置に決定する。なお、上記角度θは、緊急度を示す値と提示頻度を示す値の少なくとも一方に基づいて算出されるようにしてもよい。
これから提示しようとする情報の緊急度を示す値と、提示頻度を示す値と、過去に情報提示が行われたときの角度の少なくとも1つが与えられた際に、与えられた上記緊急度、提示頻度、角度の少なくとも1つが一致する情報を過去に提示したときのユーザの閲覧率を算出する。そして、算出された上記閲覧率を情報閲覧時のユーザの傾向性を示す情報として用いて、表示デバイス1の表示領域内における上記情報の表示位置を決定する。
過去に情報提示が行われたすべての提示位置の各々についてユーザの閲覧率を算出し、算出された上記情報提示位置ごとの閲覧率に基づいて、表示デバイス1の表示領域内における上記情報の表示位置を決定する。
次に、以上のように構成された情報処理装置3による情報提示動作を説明する。
本実施形態の情報処理装置3は、先に述べたように情報の提示位置の決定手法として、第1、第2および第3の手法を備えている。そこで、情報提示動作を上記決定手法ごとに分けて説明する。
図6は、第1の手法を用いた情報提示動作の処理手順の一例を示すシーケンス図である。
(1-1)提示情報の管理
例えば、ユーザが医療機関を受診するかまたは健康保健センタに健康相談に行き、医師や保健師から健康上のアドバイスを受けたとする。この場合、医療機関または健康保健センタのサーバ装置5から、上記ユーザの情報処理装置3に対し、健康管理に関するアドバイス情報が送信される。
第1の手法は、先に述べたように上記提示情報管理部311から送られた提示情報の緊急度および提示頻度を示す値に基づいて提示位置を決定するものである。
θ=w1 f1(α) +w2 f2(β) ・・・(1)
で表される。但し、f1(α) はαに反比例する関数、f2(β) はβに比例する関数であり、重み係数w1 ,w2 は緊急度および提示頻度に対する重要度に応じて任意に設定される。
提示制御部312は、上記算出された角度θに基づいて、表示デバイス1の表示領域内における提示情報の表示位置Jを決定する。そして、提示制御部312は、上記提示情報DB331から読み出された提示情報の内容を表すテキストデータを、上記表示位置Jを指定する情報と共に入出力I/F34を介して表示デバイス1へ出力し、当該表示デバイス1の表示領域のうち上記決定された表示位置Jに表示させる。
図9および図10は、第2の手法を用いた情報提示動作の処理手順の一例を示すシーケンス図である。なお、提示情報の管理処理については、(1-1)で述べた処理と同一であるため、同一符号を付して説明を省略する。
第2の手法は、これから提示しようとする情報の緊急度αと提示頻度β、過去に情報提示を行ったときの提示位置σk の、少なくとも1つが一致する情報を過去に提示したときのユーザの閲覧率ρに基づいて、提示位置を決定するものである。
先ず取得した上記閲覧履歴情報に基づいて、提示位置ごとのユーザの過去の閲覧率ρを算出する。この閲覧率ρの算出は、閲覧記録毎に当該情報をユーザが閲覧したか否かを判定することにより行われる。例えば、ユーザの閲覧記録の情報からユーザの閲覧の有無を判定し、また閲覧するまでの時間を閾値と比較して閾値を超えていれば閲覧しなかったと判定し、さらに閲覧していた時間を閾値と比較して閾値を超えていれば閲覧したと判定する。そして提示制御部312は、上記各判定結果の少なくとも一つに基づいて、情報提示位置ごとの提示情報に対する閲覧率ρ(α,β,σk )を算出する。
θ=w1 f1(α) +w2 f2(β) +w3 f3 (ρ(α,β,σk )) ・・・(3)
但し、w1 ,w2 ,w3 は重み係数を示している。
f3 (ρ(α,β,σk ))=argmaxσk (ρ(α,β,σk )) ・・・(4)
により計算する関数としてもよい。
θ=f3 (ρ(α,β,σk )) ・・・(5)。
提示制御部312は、上記算出された角度θに基づいて、表示デバイス1の表示領域内における情報の表示位置Jを決定する。そして、提示制御部312は、上記提示情報DB331から読み出された提示情報の内容を示すテキストデータを、上記表示位置Jを指定する情報と共に入出力I/F34を介して表示デバイス1へ出力し、当該表示デバイス1の表示領域のうち上記決定された表示位置Jに表示させる。
以上詳述したように一実施形態では、提示制御部312において、提示位置を決定する第1の手法に基づき、これから提示しようとする提示情報の緊急度αおよび提示頻度βに基づいて、ユーザの注視点Pを基準にした視線方向の角度θを算出し、表示デバイス1の表示領域内の上記算出された角度θに対応する位置に、上記提示情報の内容を表示するようにしている。従って、提示情報の内容を表示デバイス1の表示領域に割込んで表示する際に、当該提示情報の緊急度αおよび提示頻度βが考慮された位置に表示されることになる。このため、例えば提示頻度が低く緊急度の高い提示情報についてはユーザに確実に閲覧させることができ、反対に緊急度が比較的低く提示頻度が高い提示情報についてはユーザの周辺視野に表示されるからユーザの活動に及ぼす影響を軽減することが可能となる。
なお、この発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。例えば、情報提示装置の種類や構成、表示デバイスの種類やその構成、情報提示位置の決定処理の手順と内容、提示情報の種類やその生成方法等については、この発明の要旨を逸脱しない範囲で種々変形して実施できる。
2…入力デバイス
3…情報処理装置
4…ネットワーク
5…サーバ装置
6…カメラ
31…制御部
32…プログラム記憶部
33…データ記憶部
34…入出力I/F
35…通信I/F
36…バス
311…提示情報管理部
312…提示制御部
313…注視点検出部
331…提示情報DB
332…閲覧記録DB
Claims (8)
- ユーザの視野範囲に対応する表示領域を有する表示デバイスに情報を表示する情報提示装置であって、
提示内容を表す内容情報とその属性情報とを含む提示情報を記憶する第1の記憶媒体と、
前記ユーザの前記視野範囲内における注視点を検出する検出部と、
提示対象となる前記内容情報と共に記憶された前記属性情報と、検出された前記注視点とに基づいて、前記ユーザの前記視野範囲内における前記内容情報の提示位置を決定し、決定された前記提示位置に対応する前記表示デバイスの表示領域内の位置に、前記内容情報を表示させる提示制御部と
を具備し、
前記提示制御部は、前記属性情報に基づいて上記注視点を基準にした前記ユーザの視線方向の角度を算出し、前記表示デバイスの表示領域内の、前記算出された角度に対応する提示位置に前記内容情報を表示させる
情報提示装置。 - 前記属性情報は、前記内容情報の緊急度および提示頻度の少なくとも一方を含み、
前記提示制御部は、前記緊急度に応じて前記角度を算出することにより、前記緊急度が高いほど前記提示位置が前記注視点に近くなるように前記提示位置を決定し、前記提示頻度に応じて前記角度を算出することにより、前記提示頻度が低いほど前記提示位置が前記注視点に近くなるように前記提示位置を決定する、
請求項1に記載の情報提示装置。 - ユーザの視野範囲に対応する表示領域を有する表示デバイスに情報を表示する情報提示装置であって、
提示内容を表す内容情報を有する提示情報を記憶する第1の記憶媒体と、
前記内容情報の提示に対する前記ユーザの閲覧履歴を表す情報を記憶する第2の記憶媒体と、
前記ユーザの前記視野範囲内における注視点を検出する検出部と、
記憶された前記閲覧履歴を表す情報に基づいて、前記ユーザの視野範囲における過去の提示位置に対する前記ユーザの閲覧率に関する情報を求め、当該閲覧率に関する情報と、検出された前記注視点とに基づいて、前記ユーザの前記視野範囲内における前記内容情報の提示位置を決定し、決定された前記提示位置に対応する前記表示デバイスの表示領域内の位置に、前記内容情報を表示させる提示制御部と
を具備する情報提示装置。 - 前記提示情報は、前記内容情報の緊急度および提示頻度の少なくとも一方を含む属性情報をさらに有し、
前記提示制御部は、
これから提示しようとする前記内容情報の前記緊急度および提示頻度の少なくとも一方と、前記内容情報の過去の提示位置が与えられたとき、与えられた前記緊急度、前記提示頻度および前記提示位置の少なくとも1つが一致する情報提示が過去に行われたときの前記ユーザの閲覧率に関する情報を、前記閲覧履歴を表す情報から求め、
前記閲覧率に関する情報と、検出された前記注視点とに基づいて、前記ユーザの視野範囲内における前記内容情報の提示位置を決定し、
決定された前記提示位置に対応する前記表示デバイスの表示領域内の位置に、前記内容情報を表示させる
請求項3に記載の情報提示装置。 - 前記提示制御部は、
記憶された前記閲覧履歴を表す情報に基づいて、前記ユーザの視野範囲における過去の複数の提示位置に対する前記ユーザの閲覧率に関する情報をそれぞれ求め、
前記閲覧率に関する情報に基づいて、前記ユーザの視野範囲内における前記複数の提示位置の中から予め設定された条件を満たす提示位置を選択し、
選択された前記提示位置に対応する前記表示デバイスの表示領域内の位置に、前記内容情報を表示させる
請求項3に記載の情報提示装置。 - ユーザの視野範囲に対応する表示領域を有する表示デバイスに接続される情報処理装置が実行する情報提示方法であって、
前記ユーザの前記視野範囲内における注視点を検出する過程と、
提示内容を表す内容情報の属性を表す情報と、検出された前記注視点とに基づいて、前記ユーザの視野範囲内における前記内容情報の提示位置を決定する過程と、
決定された前記提示位置に対応する前記表示デバイスの表示領域内の位置に、前記内容情報を表示させる提示制御過程と
を具備し、
前記提示制御過程は、前記属性情報に基づいて上記注視点を基準にした前記ユーザの視線方向の角度を算出し、前記表示デバイスの表示領域内の、前記算出された角度に対応する提示位置に前記内容情報を表示させる
情報提示方法。 - ユーザの視野範囲に対応する表示領域を有する表示デバイスに接続される情報処理装置が実行する情報提示方法であって、
前記ユーザの前記視野範囲内における注視点を検出する過程と、
過去に提示された情報に対する前記ユーザの閲覧履歴を表す情報に基づいて、前記ユーザの視野範囲における過去の提示位置に対する前記ユーザの閲覧率に関する情報を求め、当該閲覧率に関する情報と、検出された前記注視点とに基づいて、前記ユーザの視野範囲内における前記内容情報の提示位置を決定する過程と、
決定された前記提示位置に対応する前記表示デバイスの表示領域内の位置に、前記内容情報を表示させる過程と
を具備する情報提示方法。 - 請求項1乃至5のいずれかに記載の情報提示装置が具備する各部の処理を、前記情報提示装置が備えるハードウェアプロセッサに実行させるプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2020/008902 WO2021176555A1 (ja) | 2020-03-03 | 2020-03-03 | 情報提示装置、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021176555A1 JPWO2021176555A1 (ja) | 2021-09-10 |
JP7416204B2 true JP7416204B2 (ja) | 2024-01-17 |
Family
ID=77613169
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022504810A Active JP7416204B2 (ja) | 2020-03-03 | 2020-03-03 | 情報提示装置、方法およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11934623B2 (ja) |
JP (1) | JP7416204B2 (ja) |
WO (1) | WO2021176555A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017104198A1 (ja) | 2015-12-14 | 2017-06-22 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2017138212A1 (ja) | 2016-02-08 | 2017-08-17 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2019244670A1 (ja) | 2018-06-18 | 2019-12-26 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10506374B2 (en) * | 2017-10-04 | 2019-12-10 | The Toronto-Dominion Bank | Dynamic notification engine for notification throttling based on contextual analysis |
US11656922B2 (en) * | 2018-01-29 | 2023-05-23 | Microsoft Technology Licensing, Llc | Personalized notification brokering |
-
2020
- 2020-03-03 WO PCT/JP2020/008902 patent/WO2021176555A1/ja active Application Filing
- 2020-03-03 US US17/908,496 patent/US11934623B2/en active Active
- 2020-03-03 JP JP2022504810A patent/JP7416204B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017104198A1 (ja) | 2015-12-14 | 2017-06-22 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2017138212A1 (ja) | 2016-02-08 | 2017-08-17 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2019244670A1 (ja) | 2018-06-18 | 2019-12-26 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JPWO2021176555A1 (ja) | 2021-09-10 |
US20230121643A1 (en) | 2023-04-20 |
US11934623B2 (en) | 2024-03-19 |
WO2021176555A1 (ja) | 2021-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110874129B (zh) | 显示系统 | |
US7738684B2 (en) | System and method for displaying images on a PACS workstation based on level of significance | |
US7576757B2 (en) | System and method for generating most read images in a PACS workstation | |
US9841811B2 (en) | Visually directed human-computer interaction for medical applications | |
US7573439B2 (en) | System and method for significant image selection using visual tracking | |
US8036917B2 (en) | Methods and systems for creation of hanging protocols using eye tracking and voice command and control | |
US7501995B2 (en) | System and method for presentation of enterprise, clinical, and decision support information utilizing eye tracking navigation | |
EP1643401B1 (en) | Method and apparatus for surgical operating room information display gaze detection and user prioritization for control | |
US20150213634A1 (en) | Method and system of modifying text content presentation settings as determined by user states based on user eye metric data | |
US20140099623A1 (en) | Social graphs based on user bioresponse data | |
Lee et al. | Designing socially acceptable hand-to-face input | |
US20150009117A1 (en) | Dynamic eye trackcing data representation | |
US10572632B2 (en) | Using augmented reality interface and real-time glucose data to control insulin delivery device | |
Ha et al. | Novel hybrid brain-computer interface for virtual reality applications using steady-state visual-evoked potential-based brain–computer interface and electrooculogram-based eye tracking for increased information transfer rate | |
Hwang et al. | Integration of eye tracking and lip motion for hands-free computer access | |
Singh et al. | Object acquisition and selection using automatic scanning and eye blinks in an HCI system | |
JP2014089650A (ja) | 電子問診装置、電子問診システム、電子問診装置の制御方法及び制御プログラム | |
JP7416204B2 (ja) | 情報提示装置、方法およびプログラム | |
Harutyunyan et al. | A SYSTEM FOR IMPROVING IT OFFICE EMPLOYEES HEALTH USING AN UNCONVENTIONAL USER INTERFACE | |
Biener et al. | Hold Tight: Identifying Behavioral Patterns During Prolonged Work in VR through Video Analysis | |
US20230046250A1 (en) | System and method for user interface management to provide an augmented reality-based therapeutic experience | |
US20230376107A1 (en) | Detecting unexpected user interface behavior using physiological data | |
WO2023114079A1 (en) | User interactions and eye tracking with text embedded elements | |
Matsuno | Detection of Voluntary Eye Movement for Analysis About Eye Gaze Behaviour in Virtual Communication | |
CN116547637A (zh) | 使用生理数据来检测用户与对象接触 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220713 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230104 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20230208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230725 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230906 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231205 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231218 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7416204 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |