JP2018151742A - 情報表示システム - Google Patents
情報表示システム Download PDFInfo
- Publication number
- JP2018151742A JP2018151742A JP2017046026A JP2017046026A JP2018151742A JP 2018151742 A JP2018151742 A JP 2018151742A JP 2017046026 A JP2017046026 A JP 2017046026A JP 2017046026 A JP2017046026 A JP 2017046026A JP 2018151742 A JP2018151742 A JP 2018151742A
- Authority
- JP
- Japan
- Prior art keywords
- user
- display area
- hand
- display
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 claims abstract description 65
- 238000012544 monitoring process Methods 0.000 claims description 118
- 208000013057 hereditary mucoepithelial dysplasia Diseases 0.000 description 26
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 19
- 238000000034 method Methods 0.000 description 16
- 230000000007 visual effect Effects 0.000 description 12
- 238000012545 processing Methods 0.000 description 8
- 210000003128 head Anatomy 0.000 description 5
- 239000012466 permeate Substances 0.000 description 5
- 239000011521 glass Substances 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000013481 data capture Methods 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 230000004304 visual acuity Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000004270 retinal projection Effects 0.000 description 1
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
請求項1の情報表示システムは、監視対象に関する情報である監視対象情報を取得可能な監視対象情報取得部と、ユーザが装着可能であってユーザの視界内に前記監視対象情報を表示可能な装着型ディスプレイと、ユーザの視界内にユーザの手が入っている場合においてその手が特定の形状であるときにユーザの操作が入力されていることを検出する操作検出部と、前記操作検出部で操作が検出された場合に、視界内における手の位置に基づいて前記監視対象情報を表示するための表示領域の位置を設定する、又は視界内における手のサイズに基づいて前記表示領域のサイズを設定する表示領域設定部と、前記表示領域設定部で設定された表示領域内に前記監視対象情報を表示する表示制御部と、を備える。
ここで、表示領域を操作する場合だけでなく通常の作業時にも、ユーザの視界内に手が入ることが想定される。この場合、ユーザが操作を意図していないにもかかわらず、視界内に手が入ったというだけで装着型ディスプレイに監視対象情報が表示されたり、表示領域の位置やサイズが変更されたりすると、かえってユーザの視界を妨げることになる。そこで、請求項2の情報表示システムにおいて、操作検出部は、操作時のユーザの手の形状を前記特定の形状として予め登録可能であって、ユーザの視界内に入っている手の形状が前記予め登録された手の形状に一致している場合にユーザの操作が入力されていることを検出する。
請求項3の情報表示システムにおいて、前記操作検出部は、ユーザの操作を検出していない状態においてユーザの視界内に手が入ってからその手の位置及び形状が所定期間変化しなかった場合に初めてユーザの操作が入力されたことを検出する。これによれば、表示部に監視対象情報が表示されていない状態から表示させる状態に移行する際に、操作検出部は、ユーザの操作の意図をより明確に検出することができる。したがって、例えば視界内を手が通過しただけのような場合に監視対象情報が表示されることをより確実に防ぐことができ、その結果、ユーザの視界を更に妨げ難く、より安全性の高い情報提示が可能になる。
請求項4の情報表示システムにおいて、前記表示領域設定部は、ユーザの視界内に入っているユーザの手の一部又は全部に重ねて前記表示領域を設定する。これによれば、ユーザは、例えば自己の手のひらを見る感覚で、監視対象情報を見ることができる。そのため、直感的な操作が可能になり、その結果、操作性の向上を図ることができる。
請求項5の情報表示システムにおいて、前記表示領域設定部は、前記操作検出部で検出された操作において、ユーザの手が視界内で大きくなった場合には前記表示領域を拡大し、ユーザの手が視界内で小さくなった場合には前記表示領域を縮小させる。そして、前記表示制御部は、前記表示領域が拡大された場合には前記表示領域に表示させる前記監視対象情報の情報量を増やし、前記表示領域が縮小された場合には前記表示領域に表示させる前記監視対象情報の情報量を減らす。
また、請求項6の情報表示システムにおいて、前記表示領域設定部は、前記操作検出部で検出された操作において、ユーザの手が視界内で大きくなった場合には前記表示領域を拡大し、ユーザの手が視界内で小さくなった場合には前記表示領域を縮小させる。そして、前記表示制御部は、前記表示領域が拡大された場合には前記表示領域に表示させる前記監視対象情報の表示態様を大きくし、前記表示領域が縮小された場合には前記表示領域に表示させる前記監視対象情報の表示態様を小さくする。
請求項7の情報表示システムにおいて、前記表示領域設定部は、前記操作検出部で検出されたユーザの手の位置に追従させて前記表示領域を移動させる。これによれば、ユーザは、自己の操作によって、監視対象情報の表示位置を任意の位置に変更することができる。例えばユーザは、監視対象情報が実景に重なっている場合等に、その監視対象情報を、実景と重ならないような見易い位置に移動させることができる。これにより、ユーザは、監視対象情報によって視界を妨げないようにすることがより容易にでき、その結果、ユーザの視界を更に妨げ難い情報提示が可能になる。
請求項8の情報表示システムにおいて、前記表示制御部は、前記表示領域内を不透明に表示する。これによれば、表示領域内に表示された監視対象情報が、表示領域の後ろの実景に紛れ込む事を防ぐことができ、その結果、監視対象情報をより見易くすることができる。
請求項9の情報表示システムにおいて、操作検出部は、前記装着型ディスプレイに取り付けられたカメラを介して、ユーザの視界内にある手の位置及び形状に関する情報を取得することができる。この場合、装着型ディスプレイに取り付けられたカメラの撮像範囲は、ユーザの視界と共に動く。このため、本構成によれば、カメラで取得したユーザの手の位置及び形状を、ユーザの実際の視界内における手の位置及び形状に極力近づけることができる。これにより、ユーザの視界内で実際に行われる操作を、表示部内における表示領域の操作に正確に反映することができる。その結果、更に直感的な操作が可能になって、より安全性が高くユーザの視界を妨げ難い情報提示が可能になる。
図1及び図2に示すように、情報表示システム10は、監視対象である少なくとも1台この場合2台のロボット11と、各ロボット11に対応して設けられたロボットコントローラ12と、安全装置13と、いわゆるヘッドマウントディスプレイと称される頭部装着型ディスプレイ20(以下、HMD20と称する)と、ディスプレイ制御装置30と、を含んで構成されている。なお、監視対象としては、ロボット11に限られない。
例えば制御部31、監視対象情報取得部32、視界情報取得部33、監視対象識別部34、操作検出部35、表示領域設定部36、及び表示制御部37を、それぞれ安全装置13側又はHMD20側に分散させて設けても良い。
監視対象であるロボット11は、特定の場所に固定されているものに限られず、例えば自走可能な構成であってもよい。更に、監視対象は、ロボットに限られず、例えばフォークリフト等のように人が運転する有人搬送車や、自動で走行可能な無人搬送車等の移動体等であっても良い。
Claims (9)
- 監視対象に関する情報である監視対象情報を取得可能な監視対象情報取得部と、
ユーザが装着可能であってユーザの視界内に前記監視対象情報を表示可能な装着型ディスプレイと、
ユーザの視界内にユーザの手が入っている場合においてその手が特定の形状であるときにユーザの操作が入力されていることを検出する操作検出部と、
前記操作検出部で操作が検出された場合に、視界内における手の位置に基づいて前記監視対象情報を表示するための表示領域の位置を設定する、又は視界内における手のサイズに基づいて前記表示領域のサイズを設定する表示領域設定部と、
前記表示領域設定部で設定された表示領域内に前記監視対象情報を表示する表示制御部と、
を備える情報表示システム。 - 前記操作検出部は、操作時のユーザの手の形状を前記特定の形状として予め登録可能であって、ユーザの視界内に入っている手の形状が前記予め登録された手の形状に一致している場合にユーザの操作が入力されていることを検出する、
請求項1に記載の情報表示システム。 - 前記操作検出部は、ユーザの操作を検出していない状態においてユーザの視界内に手が入ってからその手の位置及び形状が所定期間変化しなかった場合に初めてユーザの操作が入力されたことを検出する、
請求項1又は2に記載の情報表示システム。 - 前記表示領域設定部は、ユーザの視界内に入っているユーザの手の一部又は全部に重ねて前記表示領域を設定する、
請求項1から3のいずれか一項に記載の情報表示システム。 - 前記表示領域設定部は、前記操作検出部で検出された操作において、ユーザの手が視界内で大きくなった場合には前記表示領域を拡大し、ユーザの手が視界内で小さくなった場合には前記表示領域を縮小させ、
前記表示制御部は、前記表示領域が拡大された場合には前記表示領域に表示させる前記監視対象情報の情報量を増やし、前記表示領域が縮小された場合には前記表示領域に表示させる前記監視対象情報の情報量を減らす、
請求項1から4のいずれか一項に記載の情報表示システム。 - 前記表示領域設定部は、前記操作検出部で検出された操作において、ユーザの手が視界内で大きくなった場合には前記表示領域を拡大し、ユーザの手が視界内で小さくなった場合には前記表示領域を縮小させ、
前記表示制御部は、前記表示領域が拡大された場合には前記表示領域に表示させる前記監視対象情報の表示態様を大きくし、前記表示領域が縮小された場合には前記表示領域に表示させる前記監視対象情報の表示態様を小さくする、
請求項1から4のいずれか一項に記載の情報表示システム。 - 前記表示領域設定部は、前記操作検出部で検出されたユーザの手の位置に追従させて前記表示領域を移動させる、
請求項1から6のいずれか一項に記載の情報表示システム。 - 前記表示制御部は、前記表示領域内を不透明に表示する、
請求項1から7のいずれか一項に記載の情報表示システム。 - 前記操作検出部は、前記装着型ディスプレイに取り付けられたカメラを介して、ユーザの視界内にある手の位置及び形状に関する情報を取得することができる、
請求項1から8のいずれか一項に記載の情報表示システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017046026A JP6834620B2 (ja) | 2017-03-10 | 2017-03-10 | 情報表示システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017046026A JP6834620B2 (ja) | 2017-03-10 | 2017-03-10 | 情報表示システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018151742A true JP2018151742A (ja) | 2018-09-27 |
JP6834620B2 JP6834620B2 (ja) | 2021-02-24 |
Family
ID=63681696
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017046026A Active JP6834620B2 (ja) | 2017-03-10 | 2017-03-10 | 情報表示システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6834620B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019096324A (ja) * | 2017-11-27 | 2019-06-20 | オイヒナー ゲゼルシャフト ミット ベシュレンクテル ハフツング プルス コンパニー コマンディートゲゼルシャフトEUCHNER GmbH + Co. KG | 安全システム |
JP2020166040A (ja) * | 2019-03-28 | 2020-10-08 | ファナック株式会社 | 制御システム |
JP2020198997A (ja) * | 2019-06-07 | 2020-12-17 | トヨタ自動車株式会社 | 訓練装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005056059A (ja) * | 2003-08-01 | 2005-03-03 | Canon Inc | 撮像部を備えた頭部搭載型ディスプレイを用いた入力装置および方法 |
JP2006506737A (ja) * | 2002-11-19 | 2006-02-23 | モトローラ・インコーポレイテッド | 身体中心的な仮想対話型装置および方法 |
WO2011135968A1 (ja) * | 2010-04-28 | 2011-11-03 | 新日鉄ソリューションズ株式会社 | 情報処理システム、情報処理方法及びプログラム |
JP2013172432A (ja) * | 2012-02-23 | 2013-09-02 | Panasonic Corp | 機器制御装置、機器制御方法、機器制御プログラム、及び集積回路 |
WO2014128752A1 (ja) * | 2013-02-19 | 2014-08-28 | 株式会社ブリリアントサービス | 表示制御装置、表示制御プログラム、および表示制御方法 |
-
2017
- 2017-03-10 JP JP2017046026A patent/JP6834620B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006506737A (ja) * | 2002-11-19 | 2006-02-23 | モトローラ・インコーポレイテッド | 身体中心的な仮想対話型装置および方法 |
JP2005056059A (ja) * | 2003-08-01 | 2005-03-03 | Canon Inc | 撮像部を備えた頭部搭載型ディスプレイを用いた入力装置および方法 |
WO2011135968A1 (ja) * | 2010-04-28 | 2011-11-03 | 新日鉄ソリューションズ株式会社 | 情報処理システム、情報処理方法及びプログラム |
JP2013172432A (ja) * | 2012-02-23 | 2013-09-02 | Panasonic Corp | 機器制御装置、機器制御方法、機器制御プログラム、及び集積回路 |
WO2014128752A1 (ja) * | 2013-02-19 | 2014-08-28 | 株式会社ブリリアントサービス | 表示制御装置、表示制御プログラム、および表示制御方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019096324A (ja) * | 2017-11-27 | 2019-06-20 | オイヒナー ゲゼルシャフト ミット ベシュレンクテル ハフツング プルス コンパニー コマンディートゲゼルシャフトEUCHNER GmbH + Co. KG | 安全システム |
JP7446709B2 (ja) | 2017-11-27 | 2024-03-11 | オイヒナー ゲゼルシャフト ミット ベシュレンクテル ハフツング プルス コンパニー コマンディートゲゼルシャフト | 安全システム |
JP2020166040A (ja) * | 2019-03-28 | 2020-10-08 | ファナック株式会社 | 制御システム |
CN111752221A (zh) * | 2019-03-28 | 2020-10-09 | 发那科株式会社 | 控制系统 |
JP6997129B2 (ja) | 2019-03-28 | 2022-01-17 | ファナック株式会社 | 制御システム |
US11480940B2 (en) | 2019-03-28 | 2022-10-25 | Fanuc Corporation | Control system |
CN111752221B (zh) * | 2019-03-28 | 2024-02-20 | 发那科株式会社 | 控制系统 |
JP2020198997A (ja) * | 2019-06-07 | 2020-12-17 | トヨタ自動車株式会社 | 訓練装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6834620B2 (ja) | 2021-02-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6645142B2 (ja) | ロボット安全システム | |
US10175492B2 (en) | Systems and methods for transition between augmented reality and virtual reality | |
CN107015638B (zh) | 用于向头戴式显示器用户报警的方法和装置 | |
US10489981B2 (en) | Information processing device, information processing method, and program for controlling display of a virtual object | |
JP6598617B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP5564300B2 (ja) | ヘッドマウント型拡張現実映像提示装置及びその仮想表示物操作方法 | |
US20160314624A1 (en) | Systems and methods for transition between augmented reality and virtual reality | |
JP6399692B2 (ja) | ヘッドマウントディスプレイ、画像表示方法及びプログラム | |
EP3163407B1 (en) | Method and apparatus for alerting to head mounted display user | |
JP2014071756A (ja) | 作業補助システムおよびプログラム | |
JP2017094466A (ja) | ロボットモニタシステム | |
JP6834620B2 (ja) | 情報表示システム | |
US20190019308A1 (en) | Image display device | |
US10684480B2 (en) | Information display system | |
JP5895792B2 (ja) | 作業補助システムおよびプログラム | |
WO2021221341A1 (ko) | 증강 현실 장치 및 그 제어 방법 | |
JP2016208331A (ja) | 作業支援システム | |
JP7078568B2 (ja) | 表示装置、表示制御方法、及び表示システム | |
JP2018156391A (ja) | 情報表示システム | |
JP2022122936A (ja) | 情報表示システム | |
JP6872948B2 (ja) | 作業支援システムおよび作業支援方法 | |
JP6817643B2 (ja) | 情報処理装置 | |
JP6958018B2 (ja) | 情報表示システム | |
KR102337907B1 (ko) | 증강 현실 스마트 글래스 장치 | |
JP6876639B2 (ja) | 表示制御装置、表示制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200207 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200925 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201006 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201204 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210118 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6834620 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |