JP2015118556A5 - - Google Patents

Download PDF

Info

Publication number
JP2015118556A5
JP2015118556A5 JP2013261710A JP2013261710A JP2015118556A5 JP 2015118556 A5 JP2015118556 A5 JP 2015118556A5 JP 2013261710 A JP2013261710 A JP 2013261710A JP 2013261710 A JP2013261710 A JP 2013261710A JP 2015118556 A5 JP2015118556 A5 JP 2015118556A5
Authority
JP
Japan
Prior art keywords
input device
physical user
display
see
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013261710A
Other languages
Japanese (ja)
Other versions
JP2015118556A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2013261710A priority Critical patent/JP2015118556A/en
Priority claimed from JP2013261710A external-priority patent/JP2015118556A/en
Publication of JP2015118556A publication Critical patent/JP2015118556A/en
Publication of JP2015118556A5 publication Critical patent/JP2015118556A5/ja
Pending legal-status Critical Current

Links

Claims (10)

シースルーディスプレイ及び外向きイメージセンサーを備えるシースルーディスプレイデバイスにおいて、コントロールデバイスのための操作情報を提供する方法であって、
シースルーディスプレイを介して見ることができる物理的シーンのイメージを取得するステップと、
前記物理的シーン内のコントロールデバイスを検出するステップであって、前記コントロールデバイスは、前記シースルーディスプレイデバイスとは別個の関連するコンピューティングデバイスを制御するように構成される物理的なユーザー作動可能な入力デバイスを含む、ステップと、
前記コントロールデバイスの前記物理的なユーザー作動可能な入力デバイスの機能に関する情報を取り出すステップであって、前記物理的なユーザー作動可能な入力デバイスの機能は、前記関連するコンピューティングデバイスのための制御命令を含む、ステップと、
前記物理的なユーザー作動可能な入力デバイスの機能に関連するイメージデータによって前記コントロールデバイスの前記物理的なユーザー作動可能な入力デバイスの外観を拡張するイメージを前記シースルーディスプレイに表示するステップと、
前記物理的なユーザー作動可能な入力デバイスの機能の変化を検出するステップと、
前記物理的なユーザー作動可能な入力デバイスの外観を拡張する更新されたイメージを表示するステップであって、前記更新されたイメージは、前記物理的なユーザー作動可能な入力デバイスの機能の変化に関連する更新された情報を提供する、ステップと
を含む方法。 In a see-through display device comprising a see-through display and an outward-facing image sensor, a method for providing operational information for a control device comprising:
Obtaining an image of a physical scene that can be viewed through a see-through display;
Detecting a control device in the physical scene , wherein the control device is configured to control an associated computing device separate from the see-through display device. Including devices, steps ;
Retrieving information regarding the function of the physical user-activatable input device of the control device, the function of the physical user-actuable input device comprising control instructions for the associated computing device Including steps , and
And displaying the images to extend the appearance of the physical user actuatable input device of the control device by the image data associated with the physical user actuatable input device function to the see-through display,
Detecting a change in function of the physical user-actuable input device;
Displaying an updated image that enhances the appearance of the physical user-actuable input device, the updated image being associated with a change in functionality of the physical user-actuable input device. Providing updated information to include a step . 前記イメージは前記物理的なユーザー作動可能な入力デバイスの機能に関連するグラフィック要素を含み、前記グラフィック要素は前記シースルーディスプレイ上で前記物理的なユーザー作動可能な入力デバイスの上に表示される請求項１に記載の方法。 The image includes a graphic element associated with a function of the physical user-actuable input device , the graphic element being displayed on the see-through display on the physical user-actuable input device. The method according to 1. 前記イメージは前記物理的なユーザー作動可能な入力デバイスを記述するテキスト情報を有するテキストボックスを含む請求項１に記載の方法。 The method of claim 1, wherein the image includes a text box having text information describing the physical user-activatable input device . 前記テキストボックスの選択を受け取るステップと、それに応答して前記シースルーディスプレイデバイス上にさらなる情報を表示するステップとをさらに含む請求項３に記載の方法。   4. The method of claim 3, further comprising receiving a selection of the text box and displaying further information on the see-through display device in response. 前記イメージはアニメーションを含む請求項１に記載の方法。   The method of claim 1, wherein the image comprises an animation. 前記情報を取り出すステップは、前記コントロールデバイス及びネットワークベースのサービスのうちの１つ又は複数から前記情報を取り出すステップを含む請求項１に記載の方法。   The method of claim 1, wherein retrieving the information comprises retrieving the information from one or more of the control device and a network-based service. 携帯型シースルーディスプレイデバイスであって、
イメージセンサーと、
シースルーディスプレイと、
論理サブシステムと、
前記シースルーディスプレイを介して見ることができる物理的シーンのイメージを取得し、
前記物理的シーン内のコントロールデバイスを検出し、前記コントロールデバイスは、前記携帯型シースルーディスプレイデバイスとは別個の関連するコンピューティングデバイスを制御するように構成される物理的なユーザー作動可能な入力デバイスを含み、
前記コントロールデバイスの前記物理的なユーザー作動可能な入力デバイスの機能に関する情報を取り出し、前記物理的なユーザー作動可能な入力デバイスの機能は、前記関連するコンピューティングデバイスのための制御命令を含み、
前記シースルーディスプレイ上に、前記コントロールデバイスの前記物理的なユーザー作動可能な入力デバイスの外観を拡張するイメージを表示し、前記イメージは前記物理的なユーザー作動可能な入力デバイスの機能に関連し、
前記物理的なユーザー作動可能な入力デバイスの機能の変化を検出し、
前記物理的なユーザー作動可能な入力デバイスの外観を拡張する更新されたイメージを表示し、前記更新されたイメージは、前記物理的なユーザー作動可能な入力デバイスの機能の変化に関連する更新された情報を提供する
ための前記論理サブシステムによって実行可能な命令を含むデータ保持サブシステムと
を備える携帯型シースルーディスプレイデバイス。 A portable see-through display device,
An image sensor,
See-through display,
A logical subsystem;
Obtaining an image of a physical scene that can be viewed through the see-through display;
Detecting a control device in the physical scene, the control device comprising a physical user-actuable input device configured to control an associated computing device separate from the portable see-through display device Including
Retrieving information regarding the function of the physical user-activatable input device of the control device, the function of the physical user-activatable input device comprising control instructions for the associated computing device;
Displaying an image on the see-through display that enhances the appearance of the physical user-actuable input device of the control device, the image relating to the function of the physical user-actuable input device ;
Detecting a change in function of the physical user-actuable input device ;
Displaying an updated image extending the appearance of the physical user-actuable input device, the updated image being updated in relation to a change in functionality of the physical user-actuable input device; portable see-through display device and a data holding subsystem containing instructions executable by the logic subsystem for that provides information. 前記命令は、前記コントロールデバイスにより制御されるアプリケーションの現在の状態の変化を検出することにより、前記物理的なユーザー作動可能な入力デバイスの機能の変化を検出するように実行可能である請求項７に記載のデバイス。 8. The instructions are executable to detect a change in function of the physical user-activatable input device by detecting a change in the current state of an application controlled by the control device. Device described in. 前記命令は、前記物理的シーン内のキーボードを検出し、前記キーボードによって制御されるアプリケーションに従って前記キーボードのキーの外観を拡張するイメージを前記シースルーディスプレイ上に表示するように実行可能である請求項７に記載のデバイス。 8. The instructions are executable to detect a keyboard in the physical scene and display an image on the see-through display that enhances the appearance of keys of the keyboard according to an application controlled by the keyboard. Device described in. 前記コントロールデバイスの選択された物理的なユーザー作動可能な入力デバイスにおいて前記シースルーディスプレイデバイスのユーザーの視線を検出するように構成される内向きセンサーをさらに備え、前記命令は、別の入力デバイスではなく前記選択された物理的なユーザー作動可能な入力デバイスの外観を拡張するイメージを表示するようにさらに実行可能である請求項７に記載のデバイス。 Further comprising an inward sensor configured to detect a user's line of sight of the see-through display device at a selected physical user-activatable input device of the control device, wherein the instructions are not separate input devices The device of claim 7, further operable to display an image that enhances an appearance of the selected physical user-activatable input device.
JP2013261710A 2013-12-18 2013-12-18 Augmented reality overlay for control devices Pending JP2015118556A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013261710A JP2015118556A (en) 2013-12-18 2013-12-18 Augmented reality overlay for control devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013261710A JP2015118556A (en) 2013-12-18 2013-12-18 Augmented reality overlay for control devices

Publications (2)

Publication Number Publication Date
JP2015118556A JP2015118556A (en) 2015-06-25
JP2015118556A5 true JP2015118556A5 (en) 2017-01-05

Family

ID=53531216

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013261710A Pending JP2015118556A (en) 2013-12-18 2013-12-18 Augmented reality overlay for control devices

Country Status (1)

Country Link
JP (1) JP2015118556A (en)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6740584B2 (en) * 2015-09-15 2020-08-19 セイコーエプソン株式会社 Display system, display device control method, and program
CN108604131A (en) * 2016-03-04 2018-09-28 新日铁住金系统集成株式会社 Display system, information processing unit, information processing method and program
JP6095191B1 (en) * 2016-07-15 2017-03-15 ブレイニー株式会社 Virtual reality system and information processing system
US10255658B2 (en) 2016-08-09 2019-04-09 Colopl, Inc. Information processing method and program for executing the information processing method on computer
JP6140871B1 (en) * 2016-08-09 2017-05-31 株式会社コロプラ Information processing method and program for causing computer to execute information processing method
JP6719776B2 (en) * 2017-02-08 2020-07-08 ブレイニー株式会社 Virtual reality system
JP6631573B2 (en) * 2017-03-23 2020-01-15 京セラドキュメントソリューションズ株式会社 Display device and display system
JP6535699B2 (en) * 2017-05-19 2019-06-26 株式会社コロプラ INFORMATION PROCESSING METHOD, INFORMATION PROCESSING PROGRAM, AND INFORMATION PROCESSING APPARATUS
JP6389305B1 (en) * 2017-07-21 2018-09-12 株式会社コロプラ Information processing method, computer, and program
JP2019185613A (en) * 2018-04-16 2019-10-24 トヨタ自動車株式会社 Component information providing method
JP2019023869A (en) * 2018-08-03 2019-02-14 株式会社コロプラ Information processing method, computer, and program
JP7277151B2 (en) * 2019-01-21 2023-05-18 キヤノン株式会社 image forming device
WO2020202345A1 (en) * 2019-03-29 2020-10-08 本田技研工業株式会社 Assistance method and assistance system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011106797A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Projection triggering through an external marker in an augmented reality eyepiece
US9213405B2 (en) * 2010-12-16 2015-12-15 Microsoft Technology Licensing, Llc Comprehension and intent-based content for augmented reality displays
JP5316556B2 (en) * 2011-02-02 2013-10-16 ブラザー工業株式会社 Information processing apparatus, information processing program, and information processing system
JP5787099B2 (en) * 2012-11-06 2015-09-30 コニカミノルタ株式会社 Guidance information display device

Similar Documents

Publication Publication Date Title
JP2015118556A5 (en)
USD730393S1 (en) Display screen or portion thereof with icon
USD797756S1 (en) Display panel with a changeable graphical user interface for an electronic personal training device
USD709518S1 (en) Display screen with an animated graphical user interface
JP2015512106A5 (en)
USD709082S1 (en) Display screen with an animated graphical user interface
JP2006209759A5 (en)
WO2014122535A3 (en) System for organizing and displaying information on a display device
JP2014533866A5 (en)
JP2015520900A5 (en)
JP2018535568A5 (en)
JP2012517054A5 (en)
ATE528710T1 (en) GRAPHIC USER INTERFACE FOR A BACKUP INTERFACE
JP2016522469A5 (en)
JP2009037584A5 (en)
JP2013540316A5 (en)
GB2503363A (en) Configuration of overlays on a display screen in a computing device with touch-screen user interface
JP2014021565A5 (en)
JP2017054201A5 (en)
WO2014176370A3 (en) Method for user input from alternative touchpads of a computerized system
USD814498S1 (en) Display screen with animated graphic user interface
JP2008059231A5 (en)
FI2787465T3 (en) Method for transmitting hidden messages and electronic device thereof
BR112021004393A2 (en) selection interface with synchronized suggestion elements
WO2014164965A3 (en) Multilayered icon, graphical user interfaces, and methods for displaying and manipulation of information