CN108986766B - 信息显示终端以及信息显示方法 - Google Patents
信息显示终端以及信息显示方法 Download PDFInfo
- Publication number
- CN108986766B CN108986766B CN201810766525.4A CN201810766525A CN108986766B CN 108986766 B CN108986766 B CN 108986766B CN 201810766525 A CN201810766525 A CN 201810766525A CN 108986766 B CN108986766 B CN 108986766B
- Authority
- CN
- China
- Prior art keywords
- image
- information
- display
- user
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 230000000007 visual effect Effects 0.000 claims abstract description 6
- 238000012545 processing Methods 0.000 claims description 36
- 238000003384 imaging method Methods 0.000 claims description 35
- 238000004891 communication Methods 0.000 claims description 14
- 239000003550 marker Substances 0.000 claims 6
- 238000010586 diagram Methods 0.000 description 20
- 238000001514 detection method Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000009471 action Effects 0.000 description 4
- 239000000470 constituent Substances 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000011895 specific detection Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/02—Networking aspects
- G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明提供一种信息显示终端以及信息显示方法。在可穿戴的信息显示终端中,在用户需要的时机以易于识别的形式来显示与对象有关的信息。针对视野方向进行摄像,从摄像得到的第1图像检测第1对象,从网络取得与第1对象相关的关联信息,生成与关联信息相关的第2图像。从第1图像检测与第1对象不同的第2对象,将所述第2对象作为显示触发,在第1对象和第2对象接近的情况下显示第2图像。
Description
本申请是申请号为201480072277.3(PCT/JP2014/050513)、申请日为2014年1月15日(递交日为2016年7月5日)、发明名称为“信息显示终端、信息显示系统以及信息显示方法”的发明专利申请的分案申请。
技术领域
本发明涉及信息显示终端、信息显示系统以及信息显示方法。
背景技术
关于与使用护目镜型、眼镜型的头戴式显示器对预定的信息进行显示的所谓可穿戴的信息显示终端有关的信息显示方法,提出了各种方法。
在例如专利文献1中,记载了根据用户的状况而以摘要模式和详细模式来切换信息的显示模式的方法。另外,在例如专利文献2中记载了如下方法:将由用户经由输入单元针对根据当前位置或者对象物(对象)信息而确定的现实世界的状况赋予的信息,与通过摄像单元摄像得到的信息进行合成来显示。
专利文献1:日本特开2007-163634号公报
专利文献2:日本特开2011-28763号公报
发明内容
眼镜型等的可穿戴的信息显示终端相对智能手机等便携终端的不同点在于,在取得预定的信息时,在便携终端中用户必须主动地去看便携终端的显示内容,相对于此,在可穿戴的信息显示终端中,只要处于动作状态,用户就能够在视野内被动地确认信息显示。但是,在所述可穿戴的信息显示终端中,与用户的想法无关地开始和结束信息的显示,所以即使在不特别必要的情况下也进行信息的显示等,根据状况,用户有时感到烦扰。
在上述专利文献1记载的以往技术中,根据用户是否正在步行、是否正在注视显示影像、或者是否正在说话等状况,切换信息的显示模式,但并未特别考虑如何判断是否为用户希望显示与任意的对象有关的信息的时机(timing),如何开始或者结束与该对象有关的信息的显示。
另外,在上述专利文献2记载的以往技术中,将由用户赋予的与对象有关的信息与通过摄像单元摄像得到的信息进行合成来显示,但同样地,并未特别考虑如何在有效的时机开始或者结束与该对象有关的信息的显示。
本发明是鉴于这些课题而完成的,其目的在于提供一种在可穿戴的信息显示终端等中适时地开始或者结束与对象有关的信息的显示、并且以用户易于识别的形式来显示所述信息的信息显示终端以及信息显示方法。
上述课题例如通过权利要求书记载的发明来实现。
根据本发明,具有如下效果:能够适时地开始或者结束与对象有关的信息的显示,另外能够以用户易于识别的形式来显示信息,能够提高例如可穿戴的信息显示终端中的用户的便利性。
附图说明
图1是示出信息显示终端的结构的一个例子的框图。
图2是示出用户佩戴了信息显示终端时的一个例子的示意图。
图3是第1实施方式中的动作流程图。
图4A是示出第1实施方式中的关联信息显示的一个例子的第1图。
图4B是示出第1实施方式中的关联信息显示的一个例子的第2图。
图5是示出网络上的系统结构的框图。
图6是第2实施方式中的动作流程图。
图7是示出显示触发登记时的显示例的图。
图8A是示出第2实施方式中的关联信息显示的一个例子的第1图。
图8B是示出第2实施方式中的关联信息显示的一个例子的第2图。
图9是第3实施方式中的动作流程图。
图10A是示出第3实施方式中的关联信息显示的一个例子的第1图。
图10B是示出第3实施方式中的关联信息显示的一个例子的第2图。
图11是第4实施方式中的动作流程图。
图12A是示出第4实施方式中的关联信息显示的一个例子的第1图。
图12B是示出第4实施方式中的关联信息显示的一个例子的第2图。
(符号说明)
101、504:信息显示终端;102:控制部;103:摄像部;104:图像处理部;105:显示控制部;106:声音输入输出部;107:声音处理部;108:通信处理部;109:通信输入输出部;110:位置检测部;111:传感器输入输出部;112:各种传感器;201:用户;202、401、701、801、1001、1201:摄像区域;203:图像区域;402、802、1002、1202:预定对象;406、805、1007、1210:关联信息的图像;407、804、1209:显示触发;501:因特网;502:个人计算机;503:便携终端;505:服务器;506:存储设备;702:登记框;1006:注视点;1206、1207、1208:候选标志。
具体实施方式
以下,使用附图,说明本发明的实施方式。
实施例1
图1是示出信息显示终端101的结构的一个例子的框图。使用其来说明第1实施方式。
101是信息显示终端,102是对信息显示终端101整体进行控制的控制部,103是摄像部,104是图像处理部,105是显示控制部,106是与麦克风、耳机相当的声音输入输出部,107是声音处理部,108是通信处理部,109是通信输入输出部,110是以GPS(GlovalPositioning System,全球定位系统)为首的位置检测部,111是传感器输入输出部,112是各种传感器。
通信输入输出部109通过无线通信而与网络连接。在本实施方式中,说明信息显示终端101直接与因特网等连接而取得信息的情况。但是,也可以构成为所述信息终端通过Bluetooth(蓝牙)(注册商标)等近距离无线通信而与作为其他装置的信息终端(智能手机等)进行通信,进行与因特网等的连接和主要的处理。
信息显示终端101是至少具备摄像部103以及显示控制部105的头戴式显示器。作为各种传感器112,能够搭载以如下传感器为代表的多个传感器:倾斜传感器、加速度传感器等对用户的姿势、活动进行检测的传感器;视线传感器、温度传感器等对用户的身体状态进行检测的传感器;压敏传感器、静电电容传感器等对用户的指示输入进行探测的被用作输入输出I/F的传感器。
图2是示出用户佩戴了信息显示终端101时的一个例子的示意图。对与图1共同的构成要素附加了同一符号。
201示意性地表示用户,202示意性地表示由摄像部103摄影的第1图像的区域,203示意性地表示通过显示控制部105显示的第2图像的区域。另外,所述第2图像的区域不限于由203示出的尺寸或者范围,也可以是宽阔地覆盖视野的区域。另外,关于信息显示终端101的形态,只要是佩戴于头部且配置了在用户201的视野内投射例如与信息对应的光来显示信息的显示控制部105以及能够对用户201的视野方向进行摄像的摄像部103的形态即可。也可以是例如眼镜型、护目镜型、佩戴到单眼的类型、佩戴到双眼的类型等,不限于在图2中作为一个例子示出那样的形式。
由图像处理部104解析由摄像部103摄像的区域202的第1图像,并检测其中包含的预定的对象。将表示检测出的该对象的特征的信息、例如表示与后述的图案相关的特征的信息,经由通信处理部108发送到网络,与此对应地,将从网络取得的与所述对象有关的信息供给到图像处理部104。图像处理部104根据该信息,生成所述第2图像并供给到显示控制部105。显示控制部105将所述第2图像显示到区域203。
显示控制部105将图像显示到在例如与区域203相当的位置处设置的半透半反镜(half mirror)、或者将第2图像直接投影到用户201的视网膜上来显示,但是作为头戴式显示器至少是透射型,在不显示第2图像的情况下,区域203不遮挡用户201的视野。
图3是第1实施方式中的动作流程图。
图4A和图4B是示出第1实施方式中的关联信息显示的一个例子的图,示出了用户的视野。
使用图3、图4A、图4B,详细说明本实施方式中的信息显示终端101的动作。在本实施方式中,说明特别是用户在店铺内等物色商品的情况下信息显示终端101将与预定的对象有关的关联信息显示为第2图像的情况。
首先,在步骤301中开始处理。也可以通过传感器112中的压敏传感器等的触摸输入、来自声音输入输出部106的用户的声音输入而开始整体的处理。另外,也可以根据由位置检测部110检测到的位置信息、或者通过摄像部103摄像的图像来识别用户处于特定的店铺内,而自动地进行。
接下来,在步骤302中,进行预定对象的检测。具体而言,图像处理部104针对由摄像部103持续地摄像的图像进行图像识别,所切出的多个对象与预定图案的形状、颜色或者其变形预测值取得匹配等,检测预定对象。所述预定图案既可以是与店铺信息对应的默认的图案(例如“西服”等体裁),也可以与店铺信息关联起来而从因特网等取得该图案。
另外,在用户决定期望的商品的情况下,也可以预先指定商品名、型号、体裁等,从因特网上的服务器、其他公开信息,取得预定图案,并进行更具体的预定对象检测。另外,在步骤302中检测的预定对象不限于是单一的对象,也有在摄像区域内同时检测多个的情况。
如果检测到预定对象,则在步骤303中取得关于该预定对象的关联信息。具体而言,通过通信处理部108,从因特网等经由通信输入输出部109而取得与所述预定对象有关的信息。从通过摄像部103摄像的预定对象的图像,根据商品标签等而能够确定商品名、型号等的情况下,也可以根据它们来取得关联信息。
接下来,在步骤304中进行显示触发的判定。显示触发是用于使基于关联信息的所述第2图像的显示开始的特定的对象,在该情况下将“手”设为显示触发。即便在步骤302中检测到预定对象,并在步骤303中取得了该预定对象的关联信息,只要所述显示触发未被摄像部103所摄像且被图像处理部104所识别,就不进行所述第2图像的显示。另外,图像处理部104识别“手”的方法是与步骤302中的对象的识别同样的方法。
例如,如图4A所示,即便在摄像区域401中402至405分别被检测为预定对象,也由于在摄像区域401内不存在显示触发,所以不进行所述第2图像的显示(步骤304的“否”)。
另一方面,如图4B所示,在摄像区域401内识别出作为显示触发的特定对象407,判断为接近预定对象时(步骤304的“是”),在步骤305中,由图像处理部104生成基于所确定的预定对象402的关联信息的所述第2图像。而且,所述第2图像按照可识别为与预定对象402关联的信息的形式,通过显示控制部105而被显示。
在该情况下,作为第2图像406而显示的内容是与预定对象402有关的商品信息。此处,与该商品有关的评价信息、价格行情信息等按照易于被用户识别的形式而被显示。另外,关于所显示的内容,只要是对于用户而言有用的信息即可,没有特别限定。另外,摄像区域401的虚线只是为了便于说明而示出,并非是在用户的视野内显示的线。
在步骤306中,持续地进行所述显示触发的判定,在识别出显示触发的期间进行所述关联信息的显示。另外,在显示触发的位置被变更,预定对象被变更的情况下,切换到与变更后的预定对象有关的第2图像(步骤306的“是”)。另外,在摄像区域401中无法识别出作为显示触发的特定对象407的情况下,在步骤307中结束所述第2图像的显示,再次返回到步骤302的预定对象的检测(步骤306的“否”)。
图5是示出网络上的系统结构的框图。使用图5,简单地说明经由通信处理部108取得所述关联信息。
信息显示终端101通过上述结构,从因特网501取得预定对象402的关联信息。由不特定的第三人使用例如个人计算机502、便携终端503、信息显示终端504等,经由因特网501发送该信息,通过例如服务器505而储存到存储设备506。信息显示终端101发送对从摄像部103摄像的图像检测出的预定对象402进行识别的信息,服务器505从在存储设备506中储存的信息中,将与预定对象402关联的信息提供给信息显示终端101。
另外,服务器505预先针对预定的店铺、预定的地域等汇集信息,并面向信息显示终端提供信息。相反地,在特定的服务器505未汇集关联信息的情况下,信息显示终端101还能够从与因特网连接的多个服务器所公开的信息中,检索并取得与预定对象402关联的信息。
如以上那样,根据本发明的第1实施方式,在可穿戴的信息显示终端中,针对预定对象的关联信息,利用例如使手接近对象这样的显示触发,来进行所述第2图像的显示开始或者结束。由此,能够在反映了用户的想法或者行动(例如将商品拿到手中=想看与商品关联的信息)的时机以及期间进行所述第2图像的显示。用户在佩戴了信息显示终端的状态下能够自由地使用双手,在选择对象时无需操作信息显示终端101自身,便利性提高。另外,不会在不需要的时机显示所述第2图像或者同时显示针对多个对象的信息,所以具有能够避免成为对于用户而言烦扰的显示这样的效果。
实施例2
接下来,使用图6至图8B,说明信息显示终端101的第2实施方式。关于信息显示终端101的结构,基本上与上述图1的情况相同,所以使用对图1的各构成要素附加的编号来进行说明。另外,与第1实施方式同样地,说明特别是用户在店铺内等物色商品的情况下信息显示终端101针对预定的对象将关联信息显示为第2图像的情况。
图6是第2实施方式中的动作流程图。
图7是示出显示触发登记时的显示例的图。
在本实施方式中特征性的点在于,用户能够登记上述显示触发。图6示出了显示触发登记时的动作流程,图7示出了显示触发登记时的用户的视野。
首先,在步骤601中,开始处理。作为处理开始,能够通过压敏传感器等的触摸输入、利用声音输入的用户指示来进行。接下来,在步骤602中,显示用于登记显示触发的框。具体而言,图像处理部104生成表示登记框的图像,显示控制部105如图7那样,在摄像部103的摄像区域701的范围内、即在用户的视野方向上,显示登记框702。
在步骤603中,用户使希望登记为显示触发的特定对象收敛于登记框702内。在该情况下,将“手掌”设为特定对象703。接下来,在步骤604中,从由摄像部103摄像的图像,图像处理部104识别出在登记框702的范围内存在特定对象703时,向用户询问是否将该对象登记为显示触发。关于向用户的询问,既可以如图7所示通过文字的显示来进行,也可以通过从声音输入输出部106的声音输出来进行。
如果通过用户的指示输入而进行了登记指示(步骤604的“是”),则将特定对象703作为显示触发而存储到信息显示终端101内的存储器(未图示)。另外,该存储器也可以设置成可从控制部102或者图像处理部104访问、或者由它们所内置。之后,在步骤606中结束处理。另外,也可以在步骤604中在图像处理部104识别出存在特定对象703的阶段,生成表示特定对象703的轮廓的图像并由显示控制部105进行显示,并且从声音输入输出部106输出声音,对用户通知识别出特定对象703。
图8A和图8B是示出第2实施方式中的关联信息显示的一个例子的图。此处,与第1实施方式的情况同样地,使用图8A和图8B来说明如下情况:用户在店铺内等物色商品的情况下,信息显示终端101针对预定的对象将关联信息显示为第2图像。此处,设为在步骤605中作为特定对象703而登记了“手掌”。
动作流程基本上与图3的情况相同,所以省略详细的说明。在上述步骤304的显示触发的判定中,如图8A所示在摄像区域801内存在预定对象802,从因特网等取得了关联信息,但特定对象803是“手背”,未被识别为所登记的显示触发,所以不进行关联信息的显示。关于与所登记的显示触发的一致判定,在图像处理部104中与对象的形状、颜色、或者它们的变形预测值等取得匹配等来进行判断。在图8B中,特定对象804是“手掌”,在图6的步骤605中,被判断为已登记的显示触发。
而且,在步骤305中,通过图像处理部104,将根据显示触发而确定的预定对象802的关联信息生成为第2图像805。而且,通过显示控制部105,将所述第2图像805以可识别为与预定对象802关联的信息的形式进行显示。
与上述同样地,作为第2图像805而显示的内容只要是作为与预定对象802有关的商品信息对于用户而言有用的信息即可,没有特别地限定。另外,摄像区域701以及801的虚线只是为便于说明而示出的线,并非是在用户的视野内显示的线。
如以上那样,根据本发明的第2实施方式,在可穿戴的信息显示终端中,通过将特定的对象登记为显示触发,能够进行与用户的意图对应的所述第2图像的显示开始或者结束。与实施方式1的情况同样地,用户在佩戴了信息显示终端的状态下能够自由地使用双手,在选择对象时无需操作信息显示终端101自身,另外能够根据用户的期望来适宜地变更显示触发,所以便利性提高。
作为本实施方式的变形例,考虑根据所登记的显示触发来进行图3的步骤301中的处理开始的实施方式。即,作为信息显示终端101的动作,首先在步骤301中持续地仅进行显示触发的判定。然后,是根据由摄像部103摄像的图像而判定为在图像处理部104中识别的对象与所登记的显示触发一致的情况下,进行步骤302以后的动作的实施方式。在本实施方式的例子中,能够通过在摄像区域401中示出“手掌”来进行一连串的动作。动作的开始变得简单,所以还具有能够提高用户的便利性这样的效果。
实施例3
接下来,使用图9、图10A和图10B,说明信息显示终端101的第3实施方式。关于信息显示终端101的结构,基本上与上述图1的情况相同,所以使用对图1的各构成要素附加的编号来进行说明。另外,在本实施方式中也与上述实施方式同样地,说明特别是用户在店铺内等物色商品的情况下信息显示终端101针对预定的对象将关联信息显示为第2图像那样的情况。
图9是第3实施方式中的动作流程图。
图10A和图10B是示出第3实施方式中的关联信息显示的一个例子的图,示出了用户的视野。
关于步骤901至步骤903的动作,与上述图3中的步骤301至步骤303的动作相同,省略详细的说明。如果在步骤901中开始处理,则在步骤902中检测预定对象,在步骤903中从因特网等取得与所述预定对象有关的关联信息。另外,在步骤902中检测的预定对象不限于单一,而也有在摄像区域内同时检测多个的情况。
接下来,在步骤904中,进行用户的视线判定。关于佩戴信息显示终端101的用户的视线,通过在传感器112中包括的视线传感器而检测其注视点。关于视线传感器,已知例如上述专利文献1记载的利用了红外线的方法、利用了CMOS(Complementary Metal-OxideSemiconductor,互补金属氧化物半导体)传感器的方法等。在注视点未处于与所述检测出的预定对象相关的范围的情况下(步骤904的“否”),不进行与所述关联信息相关的第2图像的显示。例如,如图10A所示,即使在摄像区域1001中将1002至1005分别检测为预定对象,在注视点1006与任一个预定对象都不相关的情况下,不进行与关联信息相关的第2图像的显示。
另一方面,如图10B那样,在注视点1006与预定对象1002相关时,在其状态持续了预定时间(例如3秒)以上的情况下(步骤904的“是”),在步骤905中将该预定对象1002的关联信息通过图像处理部104生成为第2图像1007,并以可识别为与预定对象1002关联的信息的形式,通过显示控制部105进行显示。被显示为第2图像1007的内容与上述实施例同样地是与预定对象1002有关的商品信息,以用户易于识别的形式,显示了与该商品有关的评价信息、价格行情信息等。
另外,所显示的内容只要是对于用户而言有用的信息即可,没有特别地限定。另外,摄像区域1001的虚线以及注视点1006的标志只是为便于说明而示出的,并非在用户的视野内显示。其中,关于注视点1006的标志,还能够设置显示为图像的模式而使用户能够识别,在该情况下标志的形状不限于注视点1006的形状。
在步骤906中,持续地进行视线判定,在注视点1006处于与预定对象1002或者第2图像1007相关的范围的期间,显示第2图像1007(步骤906的“是”)。其原因为,在显示了第2图像1007的时间点,注视点1006移动到第2图像1007侧。另外,在注视点1006脱离了与预定对象1002或者第2图像1007相关的范围的情况、或者脱离持续预定时间(例如3秒)以上的情况下,结束第2图像1007的显示(步骤906的“否”),再次返回到步骤902的预定对象的检测。
如以上那样,根据第3实施方式,在可穿戴的信息显示终端101中,针对预定对象的关联信息,根据用户的注视点进行第2图像的显示开始或者结束,从而能够在反映了用户的想法或者行动(例如关注商品=想看与商品关联的信息)的时机以及期间进行图像的显示。与上述实施方式的情况同样地,用户在佩戴信息显示终端101的状态下能够自由地使用双手,在选择对象时无需操作信息显示终端101自身,便利性提高。另外,避免在不需要的时机显示第2图像、或者同时显示针对多个对象的信息,所以具有能够避免成为对于用户而言烦扰的显示这样的效果。
实施例4
接下来,使用图11、图12A和图12B,说明信息显示终端101的第4实施方式。关于信息显示终端101的结构,基本上与上述图1的情况相同,所以使用对图1的各构成要素附加的编号来进行说明。另外,在本实施方式中也与上述实施方式同样地,说明特别是用户在店铺内等物色商品的情况下信息显示终端101针对预定的对象将关联信息显示为第2图像那样的情况。
图11是第4实施方式中的动作流程图。
图12A和图12B是示出第4实施方式中的关联信息显示的一个例子的图,示出了用户的视野。
关于步骤1101至步骤1103的动作,与上述图3中的步骤301至步骤303的动作相同,省略详细的说明。如果在步骤1101中开始处理,则在步骤1102中检测预定对象,在步骤1103中从因特网等取得与所述预定对象有关的关联信息。另外,在本实施方式中,说明在步骤1102中在摄像区域内同时检测多个预定对象的情况。
如果检测到多个预定对象而取得关联信息,则在步骤1104中进行候选标志的显示。候选标志是指,在检测到的预定对象中作为关联信息取得了有效的信息的情况下所显示的标志。例如,图12A示出了如下情况:在步骤1102中在摄像区域1201内将1202至1205检测为预定对象,在步骤1103中针对1202、1204、1205取得了有效的关联信息。1206至1208是候选标志,通过图像处理部104而生成为图像,并通过显示控制部105,以与相应的预定对象的一部分重叠的方式显示。另外,关于候选标志,只要是用户能够识别的程度的大小且能够判别与哪个预定对象关联的标志,则其形状不限于图12A所示的形状。
接下来,在步骤1105中,进行显示触发的判定。在该情况下,与上述实施例同样地,将“手”设为显示触发。在图12A中,在摄像区域1201中不存在显示触发,所以仅显示候选标志1206、1207、1208,不进行与各预定对象的关联信息相关的第2图像的显示。
另一方面,如图12B那样,作为显示触发的特定对象1209在摄像区域1201内被识别,并被判断为接近预定对象1202时,在步骤1106中,根据显示触发确定的预定对象1202的关联信息通过图像处理部104而被生成为第2图像1210,并作为替代候选标志1206的图像而通过显示控制部105被显示。
在该情况下,预定对象1202接近其他对象1203至1205。因此,以与预定对象1202的一部分重叠的方式显示第2图像1210。由此,明确了第2图像1210是与哪个对象相关的显示。另外,即使在其他实施方式中,为了明确第2图像是与哪个对象相关的图像,将所述第2图像以与所关联的对象重叠一部分的方式进行显示即可。
与上述实施方式同样地,作为第2图像1210而显示的内容是与预定对象1202有关的商品信息,以用户易于识别的形式显示了与该商品有关的评价信息、价格行情信息等。另外,所显示的内容只要是对于用户而言有用的信息即可,没有特别地限定。另外,候选标志1207以及1208是未选择相应对象的状态,所以持续原样地显示为候选标志。另外,摄像区域1201的虚线只是为便于说明而示出的线,并非是在用户的视野内显示的线。
在步骤1107中,持续地进行所述显示触发的判定,在识别出显示触发的期间,进行所述关联信息的显示(步骤1107的“是”)。另外,在显示触发的位置被变更,接近显示触发的预定对象变更的情况下,将关于变更后的预定对象的候选标志切换为与关联信息相关的第2图像的显示。另外,关于变更前的预定对象,从与关联信息相关的第2图像再次切换为候选标志显示。在摄像区域1201中无法识别作为显示触发的特定对象1209的情况下(步骤1107的“否”),在步骤1108中结束与所述关联信息相关的第2图像显示,返回到步骤1102的预定对象的检测。但是,关于在摄像区域1201内已显示的候选标志,继续显示。
如以上那样,根据第4实施方式,在可穿戴的信息显示终端101中,在预定对象的关联信息显示之前显示候选标志,由此用户能够识别可预先显示关联信息的对象是哪个。关于关联信息自身,使用显示触发来进行第2图像的显示开始或者结束,所以能够在反映了用户的想法或者行动的时机以及期间进行第2图像的显示。用户在佩戴信息显示终端101的状态下能够自由地使用双手,能够一边识别可针对哪个对象显示关联信息、一边进行第2图像的显示。而且,具有如下效果:在选择对象时无需操作信息显示终端101自身,便利性提高。
作为本实施方式的变形例,考虑针对图12A中的候选标志1206至1208的大小或者颜色,通过相应的关联信息的内容的有效性来附加差异的实施方式。在显示候选标志的时间点,已取得各关联信息,所以在例如附加信息的量多的情况、或者是用户事先指定的商品的情况下等,增大显示标志或者设为红色系的框。由此,能够使用户在事先更容易识别。
另外,在本实施方式中,关于显示候选标志的动作,说明了与第1实施方式组合那样的情况,但还能够与其他实施方式组合来实施。
在以上说明的所有实施方式中,说明了特别是用户在店铺内、特别是在服装店内物色商品的情况下信息显示终端针对预定的对象将关联信息显示为第2图像那样的情况。但是,应用情景不限于此,也能够应用于其他类型的店铺、室外中的信息显示等。另外,说明了作为显示触发主要使用“手”的情况,但也能够指定其他来作为显示触发。
另外,本发明不限于上述实施方式,而包括各种变形例。例如,上述实施例是为了易于理解地说明本发明而详细说明的例子,不限于一定具备所说明的所有结构的例子。而且,上述的各功能、处理部等既可以利用硬件实现它们的一部分或者全部,也可以通过处理器解释并执行用于实现各个功能的程序而利用软件来实现。另外,控制线、信息线示出说明方面认为必要的部分,未必示出所有控制线、信息线。
Claims (4)
1.一种信息显示终端,在使用者的视野方向上显示信息,其特征在于,具有:
通信处理部,进行用于从网络取得信息的通信;
摄像部,针对所述视野方向进行摄像;
图像处理部,从所述摄像部摄像得到的第1图像检测第1对象,将经由所述通信处理部从所述网络取得的所述第1对象的关联信息作为第2图像来生成;
显示控制部,在所述视野方向上显示所述第2图像;
视线传感器,检测所述使用者的注视点;以及
控制部,控制所述信息显示终端的构成要素的动作,
在从所述网络取得了所述第1对象的关联信息的情况下,所述控制部使所述图像处理部生成预定的标志图像,
所述控制部控制所述显示控制部使得将所述预定的标志图像重叠显示于取得了所述关联信息的第1对象的一部分,
所述控制部判定所述视线传感器检测到的所述使用者的注视点在与所述第1对象重叠的位置处是否存在预定时间以上,
所述控制部在判定为存在预定时间以上的情况下,控制所述显示控制部使得显示所述第2图像来替代重叠显示于所述第1对象的一部分的所述预定的标志图像,
所述控制部在所述使用者的注视点存在于与所述第2图像重叠的范围的期间,控制所述显示控制部使得继续显示所述第2图像。
2.根据权利要求1所述的信息显示终端,其特征在于,
所述控制部控制所述显示控制部使得与所述第1对象的一部分重叠地进行所述第2图像的显示。
3.一种信息显示方法,在使用者的视野方向上显示信息,其特征在于,
针对所述视野方向进行摄像,
从摄像得到的第1图像,检测第1对象,
从网络取得与该第1对象相关的关联信息,
在从所述网络取得了所述第1对象的关联信息的情况下生成预定的标志图像,
将所述预定的标志图像重叠显示于取得了所述关联信息的第1对象的一部分,
生成与所述关联信息相关的第2图像,
检测所述使用者的注视点,
判定所述使用者的注视点在与所述第1对象重叠的位置处是否存在预定时间以上,
在判定为存在预定时间以上的情况下,显示所述第2图像来替代重叠显示于所述第1对象的一部分的所述预定的标志图像,
在所述使用者的注视点存在于与所述第2图像重叠的范围的期间,继续显示所述第2图像。
4.根据权利要求3所述的信息显示方法,其特征在于,
与所述第1对象的一部分重叠地进行所述第2图像的显示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810766525.4A CN108986766B (zh) | 2014-01-15 | 2014-01-15 | 信息显示终端以及信息显示方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2014/050513 WO2015107625A1 (ja) | 2014-01-15 | 2014-01-15 | 情報表示端末、情報表示システム及び情報表示方法 |
CN201480072277.3A CN105874528B (zh) | 2014-01-15 | 2014-01-15 | 信息显示终端、信息显示系统以及信息显示方法 |
CN201810766525.4A CN108986766B (zh) | 2014-01-15 | 2014-01-15 | 信息显示终端以及信息显示方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480072277.3A Division CN105874528B (zh) | 2014-01-15 | 2014-01-15 | 信息显示终端、信息显示系统以及信息显示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108986766A CN108986766A (zh) | 2018-12-11 |
CN108986766B true CN108986766B (zh) | 2021-08-17 |
Family
ID=53542549
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810766525.4A Active CN108986766B (zh) | 2014-01-15 | 2014-01-15 | 信息显示终端以及信息显示方法 |
CN201480072277.3A Active CN105874528B (zh) | 2014-01-15 | 2014-01-15 | 信息显示终端、信息显示系统以及信息显示方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480072277.3A Active CN105874528B (zh) | 2014-01-15 | 2014-01-15 | 信息显示终端、信息显示系统以及信息显示方法 |
Country Status (4)
Country | Link |
---|---|
US (2) | US10386637B2 (zh) |
JP (1) | JP6312712B2 (zh) |
CN (2) | CN108986766B (zh) |
WO (1) | WO2015107625A1 (zh) |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6312712B2 (ja) * | 2014-01-15 | 2018-04-18 | マクセル株式会社 | 情報表示端末、情報表示システム及び情報表示方法 |
US11030778B2 (en) * | 2014-03-31 | 2021-06-08 | Healthy.Io Ltd. | Methods and apparatus for enhancing color vision and quantifying color interpretation |
WO2015155841A1 (ja) * | 2014-04-08 | 2015-10-15 | 日立マクセル株式会社 | 情報表示方法および情報表示端末 |
JP6421543B2 (ja) * | 2014-10-17 | 2018-11-14 | セイコーエプソン株式会社 | 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム |
CN104699250B (zh) * | 2015-03-31 | 2018-10-19 | 小米科技有限责任公司 | 显示控制方法及装置、电子设备 |
US10317994B2 (en) * | 2015-06-05 | 2019-06-11 | International Business Machines Corporation | Initiating actions responsive to user expressions of a user while reading media content |
JP6791167B2 (ja) * | 2015-12-14 | 2020-11-25 | ソニー株式会社 | 情報処理装置、携帯型装置の制御方法、およびプログラム |
JP2018005091A (ja) * | 2016-07-06 | 2018-01-11 | 富士通株式会社 | 表示制御プログラム、表示制御方法および表示制御装置 |
WO2018033137A1 (zh) * | 2016-08-19 | 2018-02-22 | 北京市商汤科技开发有限公司 | 在视频图像中展示业务对象的方法、装置和电子设备 |
CN107105188A (zh) * | 2017-05-23 | 2017-08-29 | 北京小米移动软件有限公司 | 通信处理方法及装置 |
US11335044B2 (en) * | 2017-06-28 | 2022-05-17 | Optim Corporation | Display system of a wearable terminal, display method of the wearable terminal, and program |
CN107358639B (zh) * | 2017-07-25 | 2022-08-30 | 上海传英信息技术有限公司 | 一种基于智能终端的照片展示方法及照片展示系统 |
JP6853152B2 (ja) * | 2017-09-26 | 2021-03-31 | 株式会社Nttドコモ | 情報処理装置、端末装置および情報処理システム |
JP6601480B2 (ja) * | 2017-12-05 | 2019-11-06 | 日本電気株式会社 | 情報処理システム、情報処理装置、制御方法、及びプログラム |
JP2019111625A (ja) * | 2017-12-25 | 2019-07-11 | カシオ計算機株式会社 | 情報処理装置、ロボット、情報処理方法及びプログラム |
JP6876639B2 (ja) * | 2018-02-05 | 2021-05-26 | Kddi株式会社 | 表示制御装置、表示制御方法及びプログラム |
WO2020053913A1 (ja) * | 2018-09-10 | 2020-03-19 | 株式会社ウフル | ウェアラブル端末表示システム、方法、プログラム及びウェアラブル端末 |
CN109472225A (zh) * | 2018-10-26 | 2019-03-15 | 北京小米移动软件有限公司 | 会议控制方法及装置 |
JP6589038B1 (ja) * | 2018-12-19 | 2019-10-09 | 株式会社メルカリ | ウェアラブル端末、情報処理端末、プログラム及び商品情報表示方法 |
JP7157871B2 (ja) * | 2019-03-08 | 2022-10-20 | 株式会社Nttドコモ | 関連情報出力装置 |
JP7078568B2 (ja) * | 2019-03-19 | 2022-05-31 | 株式会社日立製作所 | 表示装置、表示制御方法、及び表示システム |
KR20220017474A (ko) * | 2019-06-07 | 2022-02-11 | 가부시키가이샤 한도오따이 에네루기 켄큐쇼 | 복합 디바이스 |
JP7364686B2 (ja) * | 2019-11-15 | 2023-10-18 | マクセル株式会社 | 表示装置、および表示方法 |
JP7114564B2 (ja) * | 2019-12-27 | 2022-08-08 | マクセル株式会社 | ヘッドマウントディスプレイ装置 |
WO2022065383A1 (ja) * | 2020-09-24 | 2022-03-31 | 株式会社Jvcケンウッド | 表示システム、表示方法及びプログラム |
JP7309830B2 (ja) * | 2020-10-01 | 2023-07-18 | 株式会社東芝 | 電子機器及び表示方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6346929B1 (en) * | 1994-04-22 | 2002-02-12 | Canon Kabushiki Kaisha | Display apparatus which detects an observer body part motion in correspondence to a displayed element used to input operation instructions to start a process |
CN101263442A (zh) * | 2005-09-14 | 2008-09-10 | 格瑞德Ippte有限公司 | 信息输出装置 |
WO2011038527A1 (zh) * | 2009-09-29 | 2011-04-07 | 阿尔卡特朗讯 | 一种注视点检测方法及其装置 |
US20110158478A1 (en) * | 2008-09-11 | 2011-06-30 | Brother Kogyo Kabushiki Kaisha | Head mounted display |
CN103488745A (zh) * | 2013-09-22 | 2014-01-01 | 宇龙计算机通信科技(深圳)有限公司 | 获取信息的方法及终端 |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6014117A (en) * | 1997-07-03 | 2000-01-11 | Monterey Technologies, Inc. | Ambient vision display apparatus and method |
US6346962B1 (en) * | 1998-02-27 | 2002-02-12 | International Business Machines Corporation | Control of video conferencing system with pointing device |
JP4631987B2 (ja) | 1998-10-19 | 2011-02-16 | ソニー株式会社 | 情報処理端末、情報処理システム及び情報処理方法 |
JP2000194726A (ja) * | 1998-10-19 | 2000-07-14 | Sony Corp | 情報処理装置及び方法、情報処理システム並びに提供媒体 |
US20030210228A1 (en) * | 2000-02-25 | 2003-11-13 | Ebersole John Franklin | Augmented reality situational awareness system and method |
JP4875843B2 (ja) | 2004-10-20 | 2012-02-15 | オリンパス株式会社 | 情報端末装置 |
JP5036177B2 (ja) * | 2005-12-12 | 2012-09-26 | オリンパス株式会社 | 情報表示装置 |
JP5119636B2 (ja) * | 2006-09-27 | 2013-01-16 | ソニー株式会社 | 表示装置、表示方法 |
JP5092357B2 (ja) * | 2006-11-07 | 2012-12-05 | ソニー株式会社 | 撮像表示装置、撮像表示方法 |
JP5195537B2 (ja) | 2009-03-09 | 2013-05-08 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
JP5272827B2 (ja) * | 2009-03-18 | 2013-08-28 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
JP5402293B2 (ja) * | 2009-06-22 | 2014-01-29 | ソニー株式会社 | 頭部装着型ディスプレイ、及び、頭部装着型ディスプレイにおける画像表示方法 |
JP2011166589A (ja) | 2010-02-12 | 2011-08-25 | Aplix Corp | 携帯端末および情報提示方法 |
WO2011122654A1 (ja) * | 2010-03-30 | 2011-10-06 | 新日鉄ソリューションズ株式会社 | 情報処理装置、情報処理方法及びプログラム、情報処理装置、空きスペース案内システム、空きスペース案内方法及びプログラム、画像表示システム、画像表示方法及びプログラム |
JP5651386B2 (ja) * | 2010-06-23 | 2015-01-14 | ソフトバンクモバイル株式会社 | 眼鏡型表示装置 |
KR101830679B1 (ko) * | 2010-07-29 | 2018-02-22 | 삼성디스플레이 주식회사 | 표시 패널 검사 장치 및 그 방법 |
US8493353B2 (en) * | 2011-04-13 | 2013-07-23 | Longsand Limited | Methods and systems for generating and joining shared experience |
US20130083007A1 (en) * | 2011-09-30 | 2013-04-04 | Kevin A. Geisner | Changing experience using personal a/v system |
US9268410B2 (en) * | 2012-02-10 | 2016-02-23 | Sony Corporation | Image processing device, image processing method, and program |
JP5884576B2 (ja) * | 2012-03-16 | 2016-03-15 | セイコーエプソン株式会社 | 頭部装着型表示装置および頭部装着型表示装置の制御方法 |
JP5966510B2 (ja) * | 2012-03-29 | 2016-08-10 | ソニー株式会社 | 情報処理システム |
US9430876B1 (en) * | 2012-05-10 | 2016-08-30 | Aurasma Limited | Intelligent method of determining trigger items in augmented reality environments |
US9389420B2 (en) * | 2012-06-14 | 2016-07-12 | Qualcomm Incorporated | User interface interaction for transparent head-mounted displays |
IN2015DN02046A (zh) * | 2012-09-21 | 2015-08-14 | Sony Corp | |
US20140240225A1 (en) * | 2013-02-26 | 2014-08-28 | Pointgrab Ltd. | Method for touchless control of a device |
JP6224327B2 (ja) * | 2013-03-05 | 2017-11-01 | 任天堂株式会社 | 情報処理システム、情報処理装置、情報処理方法、および情報処理用プログラム |
JP5962547B2 (ja) * | 2013-03-08 | 2016-08-03 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
US9245388B2 (en) * | 2013-05-13 | 2016-01-26 | Microsoft Technology Licensing, Llc | Interactions of virtual objects with surfaces |
JPWO2014188565A1 (ja) * | 2013-05-23 | 2017-02-23 | パイオニア株式会社 | 表示制御装置 |
US9235051B2 (en) * | 2013-06-18 | 2016-01-12 | Microsoft Technology Licensing, Llc | Multi-space connected virtual data objects |
US10045091B1 (en) * | 2013-09-30 | 2018-08-07 | Cox Communications, Inc. | Selectable content within video stream |
WO2015072604A1 (ko) * | 2013-11-15 | 2015-05-21 | 엘지전자(주) | 투명 디스플레이 장치와 그의 제어방법 |
JP6312712B2 (ja) * | 2014-01-15 | 2018-04-18 | マクセル株式会社 | 情報表示端末、情報表示システム及び情報表示方法 |
WO2015155841A1 (ja) * | 2014-04-08 | 2015-10-15 | 日立マクセル株式会社 | 情報表示方法および情報表示端末 |
US20170046879A1 (en) * | 2014-04-30 | 2017-02-16 | Robert Paul Severn | Augmented reality without a physical trigger |
-
2014
- 2014-01-15 JP JP2015557613A patent/JP6312712B2/ja active Active
- 2014-01-15 CN CN201810766525.4A patent/CN108986766B/zh active Active
- 2014-01-15 CN CN201480072277.3A patent/CN105874528B/zh active Active
- 2014-01-15 US US15/106,894 patent/US10386637B2/en active Active
- 2014-01-15 WO PCT/JP2014/050513 patent/WO2015107625A1/ja active Application Filing
-
2019
- 2019-07-11 US US16/508,486 patent/US10656424B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6346929B1 (en) * | 1994-04-22 | 2002-02-12 | Canon Kabushiki Kaisha | Display apparatus which detects an observer body part motion in correspondence to a displayed element used to input operation instructions to start a process |
CN101263442A (zh) * | 2005-09-14 | 2008-09-10 | 格瑞德Ippte有限公司 | 信息输出装置 |
US20110158478A1 (en) * | 2008-09-11 | 2011-06-30 | Brother Kogyo Kabushiki Kaisha | Head mounted display |
WO2011038527A1 (zh) * | 2009-09-29 | 2011-04-07 | 阿尔卡特朗讯 | 一种注视点检测方法及其装置 |
CN103488745A (zh) * | 2013-09-22 | 2014-01-01 | 宇龙计算机通信科技(深圳)有限公司 | 获取信息的方法及终端 |
Also Published As
Publication number | Publication date |
---|---|
US10656424B2 (en) | 2020-05-19 |
US20190331927A1 (en) | 2019-10-31 |
CN105874528B (zh) | 2018-07-20 |
JPWO2015107625A1 (ja) | 2017-03-23 |
CN105874528A (zh) | 2016-08-17 |
US10386637B2 (en) | 2019-08-20 |
WO2015107625A1 (ja) | 2015-07-23 |
US20160320622A1 (en) | 2016-11-03 |
CN108986766A (zh) | 2018-12-11 |
JP6312712B2 (ja) | 2018-04-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108986766B (zh) | 信息显示终端以及信息显示方法 | |
US10495878B2 (en) | Mobile terminal and controlling method thereof | |
US11023038B2 (en) | Line of sight detection adjustment unit and control method | |
CN104115100B (zh) | 头戴式显示器、用于控制头戴式显示器的程序及控制头戴式显示器的方法 | |
JP5564300B2 (ja) | ヘッドマウント型拡張現実映像提示装置及びその仮想表示物操作方法 | |
JP5870929B2 (ja) | 情報処理システム、情報処理装置および情報処理方法 | |
KR20110109883A (ko) | 정보 처리 장치, 정보 처리 방법 및 프로그램 | |
JP6606312B2 (ja) | 情報処理装置、情報処理方法、および情報処理プログラム | |
US10445577B2 (en) | Information display method and information display terminal | |
KR20150135847A (ko) | 글래스 타입 단말기 및 이의 제어방법 | |
WO2019187487A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US20180316911A1 (en) | Information processing apparatus | |
JP6714632B2 (ja) | 情報表示端末及び情報表示方法 | |
JP2014023127A (ja) | 情報表示装置、情報表示方法、制御プログラム、および記録媒体 | |
JP6076304B2 (ja) | 物品情報提供装置、物品情報提供システム、物品情報提供方法及び物品情報提供プログラム | |
JP5651639B2 (ja) | 情報処理装置、情報表示装置、情報処理方法およびプログラム | |
JP2011086049A (ja) | 保全用携帯端末装置 | |
US11137600B2 (en) | Display device, display control method, and display system | |
JP6319220B2 (ja) | 透過型ウェアラブル端末、データ処理装置、及びデータ処理システム | |
JP6029616B2 (ja) | 物品情報提供装置、物品情報提供システム、物品情報提供方法及び物品情報提供プログラム | |
JP2020177534A (ja) | 透過型ウェアラブル端末 | |
JP2016051276A (ja) | 電子機器及び情報表示プログラム | |
WO2022244052A1 (ja) | ヘッドマウントディスプレイ装置 | |
WO2016051483A1 (ja) | 情報表示端末および情報表示方法 | |
JP2015109080A (ja) | 情報処理装置、情報表示装置、情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: Kyoto Japan Patentee after: MAXELL, Ltd. Address before: Kyoto Japan Patentee before: MAXELL HOLDINGS, Ltd. |
|
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20220621 Address after: Kyoto Japan Patentee after: MAXELL HOLDINGS, Ltd. Address before: Kyoto, Japan Patentee before: MAXELL, Ltd. |