CN104062759B - 信息显示系统、信息显示方法、以及头戴式显示装置 - Google Patents

信息显示系统、信息显示方法、以及头戴式显示装置 Download PDF

Info

Publication number
CN104062759B
CN104062759B CN201410108493.0A CN201410108493A CN104062759B CN 104062759 B CN104062759 B CN 104062759B CN 201410108493 A CN201410108493 A CN 201410108493A CN 104062759 B CN104062759 B CN 104062759B
Authority
CN
China
Prior art keywords
information
user
head
mounted display
label
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410108493.0A
Other languages
English (en)
Other versions
CN104062759A (zh
Inventor
木村总志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN104062759A publication Critical patent/CN104062759A/zh
Application granted granted Critical
Publication of CN104062759B publication Critical patent/CN104062759B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

在提供AR-SNS服务的信息显示系统中,对信息的公开设置限制。在信息显示系统中,信息装置具备:对象信息存储部,其存储信息装置的公开的对象亦即对象信息;以及抽取部,其基于与头戴式显示装置的使用者有关的信息亦即使用者信息,从对象信息存储部抽取对象信息,头戴式显示装置具备:信息生成部,其使用从信息装置获取的对象信息来生成用于向使用者提供增强现实感的附加提示用信息;以及图像显示部,其将生成的附加提示用信息作为虚像使使用者视觉确认。

Description

信息显示系统、信息显示方法、以及头戴式显示装置
技术领域
本发明涉及利用了头戴式显示装置的信息显示系统。
背景技术
已知有安装于观察者的头部来使用,从而在观察者的视野区域形成虚像的头戴式显示装置(例如,参照专利文献1以及专利文献2)。该头戴式显示装置也称为头戴式显示器(HMD:Head Mounted Display),有安装了头戴式显示装置的状态下遮断使用者的视野的非透射式头戴式显示装置、和安装了头戴式显示装置的状态下不遮断使用者的视野的透射式头戴式显示装置。
另一方面,已知有使用计算机对现实环境附加提示信息的被称为增强现实感(AR,Augmented Reality)的技术。作为实现增强现实感的方法,已知有利用图像识别的方法、和基于直通(pass-through)方式的方法。利用图像识别的方法的情况下,通过对例如利用WEB照相机等拍摄的外景的图像进行图像识别来生成附加提示用信息。基于直通方式的方法的情况下,使用例如通过GPS等获取的当前位置信息、和例如通过电子罗盘等获取的方位信息来生成附加提示用信息。在非透射式头戴式显示装置中,外景的图像与如上述那样生成的附加提示用信息重叠而成的图像显示于液晶显示器。由此,使用者能够亲身感受增强现实感。在透射式头戴式显示装置中,仅如上述那样生成的附加提示用信息显示于液晶显示器。使用者经由液晶显示器视觉确认作为虚像显示的附加提示用信息、和透过眼前的透镜观察到的实际的外景双方,从而能够亲身感受增强现实感。
而且,近年来,已知有利用了这样的增强现实感的社交网络服务(SNS,SocialNetworking Service)。以下,也将利用了增强现实感的社交网络服务称为“AR-SNS服务”。提供AR-SNS服务的服务器具有存储从各种客户端装置发送过来的标签(成为公开的对象的文本、图像等)的存储部。AR-SNS服务的客户端装置针对服务器,发送能够确定使用者的当前位置和使用者的朝向的信息(具体而言,是外景的图像,或者,当前位置信息和方位信息)。服务器基于从客户端装置接收的信息,从存储部抽取与该当前位置对应的标签,并向客户端装置发送。客户端装置使用从服务器接收的标签生成附加提示用信息,并显示。
专利文献1:日本特开平10-307698号公报
专利文献2:日本特开2011-134054号公报
在提供上述那样的AR-SNS服务的信息显示系统中,为了仅对特定的使用者公开标签,存在对信息的公开设置限制的迫切期望。另外,在提供上述那样的AR-SNS服务的信息显示系统中,实际情况为从各种各样的使用者发送过来并累积于服务器的标签的内容好坏混杂,其中也包含诽谤中伤这样的信息。存在诽谤中伤类的标签给予无意中看到的其他的使用者不适、给予特定的人物、店铺等损害这样的问题。因此,存在对信息显示系统中的信息的累积设置限制这样的迫切期望。
发明内容
本发明是为了解决上述的课题的至少一部分而完成的,能够作为以下的方式实现。
(1)根据本发明的一方式,提供具备信息装置、和使使用者视觉确认虚像的头戴式显示装置的信息显示系统。在该信息显示系统中,上述信息装置具备:对象信息存储部,其存储上述信息装置的公开的对象亦即对象信息;抽取部,其基于与上述头戴式显示装置的上述使用者有关的信息亦即使用者信息,从上述对象信息存储部抽取上述对象信息;以及发送部,其向上述头戴式显示装置发送抽取的上述对象信息,上述头戴式显示装置具备:信息获取部,其对上述信息装置发送上述使用者信息,并且从上述信息装置获取上述对象信息;信息生成部,其使用获取的上述对象信息来生成用于向上述使用者提供增强现实感的附加提示用信息;以及图像显示部,其将生成的上述附加提示用信息作为上述虚像使上述使用者视觉确认。根据该方式的信息显示系统,信息装置基于与头戴式显示装置的使用者有关的信息亦即使用者信息,从对象信息存储部抽取对象信息,并向头戴式显示装置发送。然后,头戴式显示装置使用获取的对象信息来生成附加提示用信息,并将生成的附加提示用信息作为虚像使使用者视觉确认。这样,通过使用使用者信息,在提供AR-SNS服务的信息显示系统中,能够对信息的公开设置限制。
(2)在上述方式的信息显示系统中,也可以在上述对象信息存储部中与上述对象信息相对应地存储有抽取该对象信息时的条件亦即抽取许可条件,上述抽取部在从上述头戴式显示装置接收的上述使用者信息满足上述抽取许可条件的情况下,抽取该对象信息。根据该方式的信息显示系统,信息装置的抽取部能够仅对发送了满足抽取许可条件的使用者信息的头戴式显示装置的使用者公开对象信息。另外,在信息装置的对象信息存储部中,抽取许可条件与对象信息相对应地存储,所以能够按照每个对象信息,细致地设置公开的限制。
(3)在上述方式的信息显示系统中,上述使用者信息也可以包含通过上述使用者设定的账户名、通过上述使用者设定的认证信息、上述使用者的邮件地址、上述头戴式显示装置的网络地址、上述头戴式显示装置的MAC地址、从上述使用者利用的服务的提供商提供的账户名、以及从上述使用者利用的服务的提供商提供的认证信息中的至少一个。根据该方式的信息显示系统,信息装置的抽取部能够基于各种各样的使用者信息,从对象信息存储部抽取对象信息。
(4)在上述方式的信息显示系统中,也可以在在上述信息装置中,在上述对象信息存储部中还与上述对象信息相对应地存储有用于决定上述对象信息的显示顺序的顺序信息;上述抽取部从上述对象信息存储部抽取上述对象信息和上述顺序信息;上述发送部向上述头戴式显示装置发送抽取的上述对象信息和上述顺序信息,在上述头戴式显示装置中,上述信息生成部接收到多个上述对象信息的情况下,使上述对象信息以按照上述顺序信息的顺序重叠而生成上述附加提示用信息。根据该方式的信息显示系统,信息装置向头戴式显示装置发送对象信息和用于决定对象信息的显示顺序的顺序信息。头戴式显示装置在接收到多个对象信息的情况下,使对象信息以按照顺序信息的顺序重叠而生成附加提示用信息。这样,信息装置在向头戴式显示装置发送多个对象信息的情况下,能够使用顺序信息来指定在附加提示用信息中使哪个对象信息显示于上层,即、使哪个对象信息容易被使用者视觉确认。
(5)在上述方式的信息显示系统中,也可以是上述信息装置还具备:更新许可条件存储部,其存储用于许可上述对象信息存储部的更新的更新许可条件;以及更新部,其在从上述头戴式显示装置接收的接收信息满足上述更新许可条件的情况下,使用上述接收信息更新上述对象信息存储部,上述头戴式显示装置还具备:更新要求部,其对上述信息装置发送用于更新上述对象信息存储部的信息。根据该方式的信息显示系统,信息装置的更新部在从头戴式显示装置接收的接收信息满足更新许可条件的情况下,使用接收信息来更新对象信息存储部。因此,能够将累积于对象信息存储部的信息限定于满足更新许可条件的信息。其结果,在提供AR-SNS服务的信息显示系统中,能够对信息的累积设置限制。
(6)在上述方式的信息显示系统中,也可以在上述信息装置中,在上述更新许可条件存储部与上述更新许可条件相对应地存储有确定限制上述对象信息存储部的更新的限制区域的限制区域信息;上述更新部求出与上述接收信息所包含的上述头戴式显示装置的当前位置信息对应的上述限制区域信息,并在上述接收信息满足与求出的上述限制区域信息相对应的上述更新许可条件的情况下,使用上述接收信息更新上述对象信息存储部,在上述头戴式显示装置中,上述更新要求部发送用于更新上述对象信息存储部的信息和表示上述头戴式显示装置的当前位置的上述当前位置信息。根据该方式的信息显示系统,在信息装置的更新许可条件存储部中,与更新许可条件相对应地存储有用于确定限制对象信息存储部的更新的限制区域的限制区域信息。因此,信息装置的更新部能够按照每个限制区域应用更新许可条件。其结果,在提供AR-SNS服务的信息显示系统中,能够按照每个限制区域细致地对信息的累积设置限制。
(7)在上述方式的信息显示系统中,也可以是上述更新许可条件包含指定许可上述对象信息存储部的更新的上述使用者的条件、指定上述对象信息存储部的更新时间的条件、以及不许可上述对象信息存储部的更新的主旨的条件中的至少一个。根据该方式的信息显示系统,信息装置的更新部能够使用指定许可对象信息存储部的更新的使用者的条件,以“使用者”为单位限制针对对象信息存储部的信息的累积。另外,信息装置的更新部能够使用指定对象信息存储部的更新时间的条件,以“时间”为单位限制针对对象信息存储部的信息的累积。另外,信息装置的更新部能够使用不许可对象信息存储部的更新的主旨的条件,限制所有针对对象信息存储部的信息的累积。
(8)根据本发明的一方式,提供使使用者视觉确认虚像的头戴式显示装置。该头戴式显示装置具备:信息获取部,其获取基于与上述头戴式显示装置的上述使用者有关的信息亦即使用者信息抽取的信息亦即对象信息;信息生成部,其使用获取的上述对象信息生成用于向上述使用者提供增强现实感的附加提示用信息;以及图像显示部,其将生成的上述附加提示用信息作为上述虚像使上述使用者视觉确认。根据该方式的头戴式显示装置,能够获取基于与头戴式显示装置的使用者有关的信息亦即使用者信息抽取的信息亦即对象信息,并使用获取的对象信息生成用于向使用者提供增强现实感的附加提示用信息,并且作为虚像使使用者视觉确认。其结果,在作为AR-SNS服务的客户端装置的头戴式显示装置中,能够对信息的公开设置限制。
(9)根据本发明的一方式,提供使使用者视觉确认虚像的头戴式显示装置。该头戴式显示装置具备:对象信息存储部,其存储上述头戴式显示装置的公开的对象亦即对象信息;抽取部,其基于与上述使用者有关的信息亦即使用者信息,从上述对象信息存储部抽取上述对象信息;信息生成部,其使用抽取的上述对象信息来生成用于向上述使用者提供增强现实感的附加提示用信息;以及图像显示部,其将生成的上述附加提示用信息作为上述虚像使上述使用者视觉确认。根据该方式的头戴式显示装置,能够提供对信息的公开设置了限制的提供AR-SNS服务的头戴式显示装置。
上述的本发明的各方式具有的多个构成要素并不都是必须的,为了解决上述的课题的一部分或者全部,或者,为了实现本说明书所记载的效果的一部分或者全部,能够适当地对上述多个构成要素的一部分的构成要素,进行变更、删除、与新的构成要素的替换、限定内容的一部分的删除。另外,为了解决上述的课题的一部分或者全部,或者,为了实现本说明书所记载的效果的一部分或者全部,也能够将上述的本发明的一方式所包含的技术的特征的一部分或者全部与上述的本发明的其他的方式所包含的技术的特征的一部分或者全部组合,作为本发明的独立的一方式。
例如,本发明的一方式能够作为具备了对象信息存储部、抽取部、发送部、信息获取部、信息生成部、以及图像显示部六个要素中的一部分或者全部的要素的系统实现。即,该系统可以具有对象信息存储部,也可以不具有。另外,该系统可以具有抽取部,也可以不具有。另外,该系统可以具有发送部,也可以不具有。另外,该系统可以具有信息获取部,也可以不具有。另外,该系统可以具有信息生成部,也可以不具有。另外,该系统可以具有图像显示部,也可以不具有。这样的系统例如能够作为具备信息装置和头戴式显示装置的信息显示系统实现,但也能够作为信息显示系统以外的其他的方式(例如,头戴式显示装置单体的方式、作为信息装置单体的方式)实现。上述的技术的特征的一部分或者全部均能够应用于各方式的装置。
此外,本发明能够以各种方式实现,例如,能够以信息显示系统以及信息显示方法、信息装置、头戴式显示装置、用于实现这些装置、方法、或者系统的功能的计算机程序、记录了该计算机程序的记录介质等方式实现。
附图说明
图1是表示本发明的一实施方式中的信息显示系统的概略结构的说明图。
图2是表示标签表格的一个例子的说明图。
图3是表示更新条件表格的一个例子的说明图。
图4是表示本发明的一实施方式中的头戴式显示装置的概略结构的说明图。
图5是功能性地表示头戴式显示器的构成的框图。
图6是表示使用者所视觉确认的虚像的一个例子的说明图。
图7是表示限制公开处理的顺序的流程图。
图8是用于说明限制公开处理的步骤S104的说明图。
图9是表示通过限制公开处理的步骤S112而使用者所视觉确认的虚像的一个例子的说明图。
图10是表示标签表格的其他的例子的说明图。
图11是表示限制更新处理的顺序的流程图。
图12是用于说明限制更新处理的步骤S204的说明图。
图13是功能性地表示第2实施方式中的头戴式显示器的构成的框图。
图14是表示变形例中的头戴式显示器的外观的构成的说明图。
具体实施方式
A.第1实施方式:
A-1.信息显示系统的构成:
图1是表示本发明的一实施方式中的信息显示系统的概略结构的说明图。信息显示系统1000具备头戴式显示装置100、和服务器300。头戴式显示装置100是安装于头部的显示装置,也称为头戴式显示器(Head Mounted Display,HMD)。本实施方式的头戴式显示器100是使用者在视觉确认虚像的同时也能够直接视觉确认外景的光学透射式的头戴式显示装置。服务器300是针对头戴式显示器100提供利用了增强现实感(AR,Augmented Reality)的社交网络服务(SNS,Social Networking Service)的装置。以下,也将利用了增强现实感的社交网络服务称为“AR-SNS服务”。此外,服务器300相当于权利要求书中的“信息装置”。
头戴式显示器100经由通信载体BS以无线通信与网络INT连接。服务器300以有线通信与网络INT连接。其结果,服务器300与头戴式显示器100彼此通过网络INT连接。通信载体BS包括收发天线、无线基站、交换局。
提供AR-SNS服务的服务器300具有存储从各种客户端装置发送过来的标签信息(将成为公开的对象的文本、图像等的标签与和标签相关联的位置信息相对应的信息)的存储部。所谓的客户端装置是指作为服务器300提供的AR-SNS服务的客户端的装置,除了图1所示的头戴式显示器100,例如,还有个人计算机、智能手机。以下,对使用了头戴式显示器100作为客户端装置的情况进行说明。
作为客户端装置的头戴式显示器100针对服务器300发送能够确定使用者的当前位置和使用者的朝向的信息。所谓的能够确定使用者的当前位置和使用者的朝向的信息,具体而言,是外景的图像,或者,是当前位置信息和方位信息。服务器300基于从头戴式显示器100接收的信息,从存储部抽取与该当前位置相对应的标签,并向头戴式显示器100发送。头戴式显示器100使用从服务器300接收的标签来生成附加提示用信息,并显示。由此,头戴式显示器100的使用者能够将与自身的当前位置对应的标签作为虚像而视觉确认。
A-2.信息装置(服务器)的构成:
服务器300具备ROM310、RAM320、通信部330、CPU340、以及存储部350。服务器300具备的各部通过总线相互连接。通信部330经由网络INT与头戴式显示器100等其他的设备进行通信。CPU340通过将储存于ROM310、存储部350的计算机程序在RAM320展开并执行,作为抽取部342、更新部344发挥作用。
抽取部342成为限制公开处理的控制主体。限制公开处理是抽取部342从存储标签信息的存储部(标签表格352)抽取标签,并使抽取的标签显示于头戴式显示器100的处理。更新部344成为限制更新处理的控制主体。限制更新处理是接收从头戴式显示器100发送过来的信息,并在接收信息满足条件的情况下,使用该接收信息更新存储标签信息的存储部(标签表格352)的处理。
存储部350例如由ROM、RAM、DRAM、硬盘等构成。在存储部350储存有标签表格352、更新条件表格354。
图2是表示标签表格352的一个例子的说明图。标签表格352是用于存储(累积)服务器300的成为公开的对象的信息的存储部。标签表格352包括标识符、标签、位置信息、以及抽取许可条件。标识符储存有用于唯一地识别标签的信息。
在标签储存有在AR-SNS服务中成为公开的对象的信息。作为成为公开的对象的信息,例如,有文本文件、应用程序数据文件、包括静止图像以及动态图像的图像文件、声音文件等。文本文件是包含通过字符等字符码表示的数据的文件。应用程序数据文件是包含通过文档创建软件等任意的软件(应用程序)创建的数据的文件。图像文件是包含静止图像、动态图像的数据的文件。声音文件是包含声音数据的文件。在本实施方式中,也将通过上述那样的文本文件、应用程序数据文件、图像文件、声音文件表示的内容(content)称为“标签”。此外,在标签可以储存文件本身,也可以储存表示文件在服务器300的存储部350中储存的位置的文件路径。
在位置信息储存有用于确定与标签相关联的现实世界中的位置的信息。在本实施方式中,现实世界中的位置通过纬度和经度的组合来确定。
在抽取许可条件储存有在限制公开处理中,抽取部342抽取标签时使用的条件(换句话说,为了许可标签的公开所使用条件)。在本实施方式中,抽取许可条件包括指定许可标签的公开的使用者的条件、和指定标签的公开日期和时刻的条件。作为指定许可标签的公开的使用者的条件,例如,有指定使用者信息的内容的条件(标签信息T2以及T6)、和指定密码(认证信息)的内容的条件(标签信息T10)等。此外,所谓的使用者信息是与头戴式显示器100的使用者有关的信息。作为指定标签的公开日期和时刻的条件,例如,有指定标签的公开开始日与公开结束日的范围的条件(标签信息T1)、指定标签的公开开始时刻与公开结束时刻的范围的条件(标签信息T8)、指定标签的公开日与公开时刻双方的条件(标签信息T9)等。另外,在图2的例子中,抽取许可条件也包括无限制地(换句话说,针对所有的使用者在所有的日期和时刻)许可标签的公开的主旨的条件(标签信息T3~T5、T7)。
此外,也总称标识符、标签、位置信息为“标签信息”。标签相当于权利要求书中的“对象信息”,标签表格352相当于权利要求书中的“对象信息存储部”。
在图2的例子中,根据标签信息T1,可知标识符为001、通过文本文件A表示的标签与现实世界中的通过纬度XX.XXXX、经度XXX.XXXX确定的位置相关联。另外,可知标签信息T1的标签在2013年2月21日到2013年2月26日的期间许可公开。同样地,根据标签信息T2,可知标识符为002、通过文本文件B表示的标签与现实世界中的通过纬度XX.XXXX、经度XXX.XXXX确定的位置相关联。另外,可知标签信息T2的标签在用于识别头戴式显示器100的使用者的使用者信息为“XXX”的情况下,许可公开。同样地,根据标签信息T3,可知标识符为003、通过声音文件A表示的标签与现实世界中的通过纬度XX.XXXX、经度XXX.XXXX确定的位置相关联。另外,可知标签信息T3的标签无限制地许可公开。此外,在图2中,使用“X”表示标签信息T1~T10的纬度经度(位置信息)、和构成使用者信息、密码的字符串。图2中的“X”是指任意的字符串,实际上插入各自不同的字符串。
图3是表示更新条件表格354的一个例子的说明图。更新条件表格354是存储用于许可标签表格352的更新的更新许可条件的存储部。更新条件表格354包括限制区域信息、和更新许可条件。
在限制区域信息储存有确定现实世界中的、限制标签表格352的更新的限制区域的信息。在本实施方式中,现实世界中的区域通过进行了范围指定的纬度、和进行了范围指定的经度的组合来确定。
在更新许可条件储存有在限制更新处理中,更新部344为了许可标签表格352的更新而使用的条件。在本实施方式中,更新许可条件包括指定许可标签表格352的更新的使用者的条件、指定标签表格352的更新日期和时刻的条件、以及不许可标签表格352的更新的主旨的条件。作为指定许可标签表格352的更新的使用者的条件,例如,有指定使用者信息的内容的条件(条件C1)、指定密码(认证信息)的内容的条件(条件C6)等。作为指定标签表格352的更新日期和时刻的条件,例如,有指定标签表格352能够更新的日期(开始日)与不能够更新的日期(结束日)的范围的条件(条件C7)、指定标签表格352能够更新的时刻(开始时刻)与不能够更新的时刻(结束时刻)的范围的条件(条件C4)、以及指定标签表格352能够更新的日期和能够更新的时刻双方的条件(条件C3)等。作为不许可标签表格352的更新的主旨的条件,例如,有条件C2、C5。
根据以上,可知限制区域信息作为用于确定更新许可条件的有效区域的信息使用。此外,更新条件表格354相当于权利要求书中的“更新许可条件存储部”。
在图3的例子中,根据条件C1,可知在现实世界中的由纬度从XX.XXXX到XX.XXXX的范围,并且,经度从XXX.XXXX到XXX.XXXX的范围确定的区域中,在用于识别头戴式显示器100的使用者的使用者信息为“XXX”的情况下,许可标签表格352的更新。同样地,根据条件C2,可知在现实世界中的由纬度从XX.XXXX到XX.XXXX的范围,并且,经度从XXX.XXXX到XXX.XXXX的范围确定的区域中,无论在何种情况下,均不许可标签表格352的更新。同样地,根据条件C3,可知在现实世界中的由纬度从XX.XXXX到XX.XXXX的范围,并且,经度从XXX.XXXX到XXX.XXXX的范围确定的区域中,在从2013年4月2日的10:00到12:00的期间,许可标签表格352的更新。此外,在图3中,使用“X”表示条件C1~C7的纬度经度(限制区域信息)、和构成使用者信息、密码的字符串。图3中的“X”是指任意的字符串,实际上插入各自不同的字符串。
A-3.头戴式显示装置(头戴式显示器)的构成:
图4是表示本发明的一实施方式中的头戴式显示装置的概略结构的说明图。头戴式显示器100具备在安装于使用者的头部的状态下使使用者视觉确认虚像的图像显示部20、和控制图像显示部20的控制部(控制器)10。
图像显示部20是安装于使用者的头部的安装体,在本实施方式中具有眼镜形状。图像显示部20包括右保持部21、右显示驱动部22、左保持部23、左显示驱动部24、右光学图像显示部26、以及左光学图像显示部28。右光学图像显示部26以及左光学图像显示部28分别以在使用者安装了图像显示部20时位于使用者的右眼以及左眼前的方式配置。右光学图像显示部26的一端与左光学图像显示部28的一端在使用者安装了图像显示部20时的与使用者的眉间对应的位置相互连接。
右保持部21是从右光学图像显示部26的另一端亦即端部ER延伸到使用者安装了图像显示部20时的与使用者的侧头部对应的位置设置的部件。同样地,左保持部23使从左光学图像显示部28的另一端亦即端部EL延伸到使用者安装了图像显示部20时的与使用者的侧头部对应的位置设置的部件。右保持部21以及左保持部23如眼镜的脚丝(镜腿)那样,将图像显示部20保持于使用者的头部。
右显示驱动部22配置于右保持部21的内侧,换句话说,配置于使用者安装了图像显示部20时的与使用者的头部对置的一侧。另外,左显示驱动部24配置于左保持部23的内侧。此外,以下,也将右保持部21以及左保持部23仅总称为“保持部”,也将右显示驱动部22以及左显示驱动部24仅总称为“显示驱动部”,也将右光学图像显示部26以及左光学图像显示部28仅总称为“光学图像显示部”。
显示驱动部包括液晶显示器(Liquid Crystal Display,以下称为“LCD”)241、242、投射光学系统251、252等(参照图5)。后述显示驱动部的构成的详细内容。作为光学部件的光学图像显示部包括导光板261、262(参照图5)和调光板。导光板261、262由透光性的树脂材料等形成,将从显示驱动部输出的图像光导向使用者的眼睛。调光板是薄板状的光学元件,以覆盖图像显示部20的表侧(与使用者的眼睛的一侧相反的一侧)的方式配置。调光板保护导光板261、262,并抑制导光板261、262的损伤、污渍的附着等。另外,通过调整调光板的透光率,能够调整进入使用者的眼睛的外光量进而调整虚像的视觉确认的难易。此外,调光板能够省略。
图像显示部20还具有用于将图像显示部20连接于控制部10的连接部40。连接部40包括与控制部10连接的主体线48、主体线48分为两根的右线42以及左线44、以及设于分支点的连结部件46。右线42从右保持部21的延伸方向的前端部AP插入到右保持部21的框体内,与右显示驱动部22连接。同样地,左线44从左保持部23的延伸方向的前端部AP插入到左保持部23的框体内,与左显示驱动部24连接。在连结部件46设有用于连接耳机插头30的插孔。右耳机32以及左耳机34从耳机插头30延伸。
图像显示部20与控制部10经由连接部40进行各种信号的传输。在主体线48中的与连结部件46相反的一侧的端部和控制部10分别设有相互嵌合的连接器(省略图示),通过主体线48的连接器与控制部10的连接器的嵌合/嵌合解除,控制部10与图像显示部20连接、分开。右线42、左线44、以及主体线48例如能够采用金属线缆、光纤。
控制部10是用于控制头戴式显示器100的装置。控制部10包括点灯部12、触摸板14、十字键16、以及电源开关18。点灯部12通过其发光状态通知头戴式显示器100的动作状态(例如,电源的接通/断开等)。作为点灯部12,例如,能够使用LED(Light EmittingDiode:发光二极管)。触摸板14检测在触摸板14的操作面上的接触操作,并输出与检测内容对应的信号。作为触摸板14,能够采用静电式、压力检测式、光学式等各种触摸板。十字键16检测针对与上下左右方向对应的键的按下操作,并输出与检测内容对应的信号。电源开关18通过检测开关的滑动操作,切换头戴式显示器100的电源的状态。
图5是功能性地表示头戴式显示器100的构成的框图。控制部10具备输入信息获取部110、存储部120、电源130、无线通信部132、GPS模块134、CPU140、接口180、发送部(Tx)51以及52,各部通过未图示的总线相互连接。
输入信息获取部110例如获取与针对触摸板14、十字键16、电源开关18等的操作输入对应的信号。存储部120由ROM、RAM、DRAM、硬盘等构成。存储部120储存有用户信息122。在用户信息122预先存储有与头戴式显示器100的使用者有关的信息。与使用者有关的信息例如包括通过使用者设定的账户名(网名)、通过使用者设定的密码等认证信息、使用者的姓名、使用者的住址、使用者的电话号码、使用者的邮件地址、头戴式显示器100的网络地址(例如IP地址)、头戴式显示器100的MAC地址、从使用者利用的各种服务的提供商提供的账户名、从使用者利用的各种服务的提供商提供的密码等认证信息中的至少一部分信息。此外,从使用者利用的各种服务的提供商提供的账户名、密码(认证信息)包括提供之后未变更的、和在提供后通过使用者变更的双方。
电源130向头戴式显示器100的各部供给电力。作为电源130,例如能够使用二次电池。无线通信部132根据无线LAN、蓝牙等规定的无线通信标准,与其他的设备之间进行无线通信。GPS模块134通过接收来自GPS卫星的信号,检测出自身的当前位置。
CPU140通过读出储存于存储部120的计算机程序并执行,作为操作系统(ОS)150、图像处理部160、声音处理部170、显示控制部190、标签获取部142、信息生成部144、更新要求部146发挥作用。标签获取部142在限制公开处理中,从服务器300获取标签。信息生成部144在限制公开处理中,使用从服务器300接收的标签,生成用于向头戴式显示器100的使用者提供增强现实感的附加提示用信息。更新要求部146在限制更新处理中,针对服务器300发送用于更新标签表格352的信息。此外,标签获取部142相当于权利要求书中的“信息获取部”。
图像处理部160基于经由接口180、无线通信部132输入的内容(影像)生成信号。然后,图像处理部160经由连接部40将生成的信号供给至图像显示部20。用于向图像显示部20供给的信号在模拟形式和数字形式的情况下不同。模拟形式的情况下,图像处理部160生成并发送时钟信号PCLK、垂直同步信号VSync、水平同步信号HSync、以及图像数据Data。具体而言,图像处理部160获取内容所包含的图像信号。获取的图像信号例如为动态图像的情况下,一般是由每一秒三十张帧图像构成的模拟信号。图像处理部160从获取的图像信号分离垂直同步信号VSync、水平同步信号HSync等同步信号,并根据这些同步信号的周期,通过PLL电路等生成时钟信号PCLK。图像处理部160使用A/D转换电路等将分离了同步信号的模拟图像信号转换为数字图像信号。图像处理部160将转换后的数字图像信号作为RGB数据的图像数据Data按每一帧储存于存储部120内的DRAM。另一方面,在数字形式的情况下,图像处理部160生成并发送时钟信号PCLK、和图像数据Data。具体而言,内容为数字形式的情况下,与图像信号同步地输出时钟信号PCLK,所以不需要垂直同步信号VSync以及水平同步信号HSync的生成、和模拟图像信号的A/D转换。此外,图像处理部160也可以针对储存于存储部120的图像数据Data,执行分辨率转换处理、亮度、彩度的调整这样的各种色调修正处理、梯形失真修正处理等图像处理。
图像处理部160分别经由发送部51、52发送生成的时钟信号PCLK、垂直同步信号VSync、水平同步信号HSync和储存于存储部120内的DRAM的图像数据Data。此外,也将经由发送部51发送的图像数据Data称为“右眼用图像数据Data1”,将经由发送部52发送的图像数据Data称为“左眼用图像数据Data2”。发送部51、52作为用于控制部10与图像显示部20之间的串行传输的收发器发挥作用。
显示控制部190生成控制右显示驱动部22以及左显示驱动部24的控制信号。具体而言,显示控制部190通过控制信号,独立地控制利用右LCD控制部211的右LCD241的驱动打开/关闭、利用右背光灯控制部201的右背光灯221的驱动打开/关闭、利用左LCD控制部212的左LCD242的驱动打开/关闭、利用左背光灯控制部202的左背光灯222的驱动打开/关闭等,从而控制利用右显示驱动部22以及左显示驱动部24的各个的图像光的生成以及射出。例如,显示控制部190使右显示驱动部22以及左显示驱动部24双方生成图像光、或者仅使一方生成图像光、或者使双方均不生成图像光。另外,显示控制部190分别经由发送部51以及52发送针对右LCD控制部211和左LCD控制部212的控制信号。另外,显示控制部190分别发送针对右背光灯控制部201和左背光灯控制部202的控制信号。
声音处理部170获取内容所包含的声音信号,并对获取的声音信号进行放大,向与连结部件46连接的右耳机32内的未图示的扬声器以及左耳机34内的未图示的扬声器供给。此外,例如,采用了Dolby(注册商标)系统的情况下,进行针对声音信号的处理,从右耳机32以及左耳机34分别输出例如改变了频率等的不同的声音。
接口180是用于针对控制部10连接成为内容的供给源的各种外部设备OA的接口。作为外部设备ОA,例如有个人计算机PC、移动电话终端、游戏终端等。作为接口180,例如,能够使用USB接口、Micro USB接口、存储卡接口等。
图像显示部20具备右显示驱动部22、左显示驱动部24、作为右光学图像显示部26的右导光板261、作为左光学图像显示部28的左导光板262、以及九轴传感器66。
九轴传感器66是检测加速度(三轴)、角速度(三轴)、地磁(三轴)的运动传感器。九轴传感器66设于图像显示部20,所以图像显示部20安装于使用者的头部时,作为检测使用者的头部的动作的动作检测部发挥作用。此处,所谓的头部的动作包括头部的速度、加速度、角速度、朝向、朝向的变化。
右显示驱动部22包括接收部(Rx)53、作为光源发挥作用的右背光灯(BL)控制部201以及右背光灯(BL)221、作为显示元件发挥作用的右LCD控制部211以及右LCD241、以及右投射光学系统251。此外,也将右背光灯控制部201、右LCD控制部211、右背光灯221、右LCD241总称为“图像光生成部”。
接收部53作为用于控制部10与图像显示部20之间的串行传输的接收器发挥作用。右背光灯控制部201基于输入的控制信号来驱动右背光灯221。右背光灯221例如是LED、电致发光(EL)等发光体。右LCD控制部211基于经由接收部53输入的时钟信号PCLK、垂直同步信号VSync、水平同步信号HSync、右眼用图像数据Data1,来驱动右LCD241。右LCD241是矩阵状地配置了多个像素的透射式液晶面板。右LCD241通过驱动配置为矩阵状的各像素位置的液晶,使透过右LCD241的光的透过率变化,从而使从右背光灯221照射的照明光向表示图像的有效的图像光调制。此外,在本实施方式中采用了背光方式,但也可以使用前光方式、反射方式射出图像光。
右投射光学系统251由使从右LCD241射出的图像光成为并行状态的光束的准直透镜构成。作为右光学图像显示部26的右导光板261使从右投射光学系统251输出的图像光沿规定的光路反射并导向使用者的右眼RE。光学图像显示部只要使用图像光在使用者的眼前形成虚像则能够使用任意的方式,例如,可以使用衍射光栅,也可以使用半透光反射膜。
左显示驱动部24具有与右显示驱动部22相同的构成。即,左显示驱动部24包括接收部(Rx)54、作为光源发挥作用的左背光灯(BL)控制部202以及左背光灯(BL)222、作为显示元件发挥作用的左LCD控制部212以及左LCD242、以及左投射光学系统252。
图6是表示使用者所视觉确认的虚像的一个例子的说明图。图6(A)例示了普通的显示处理中的使用者的视野VR。如上述那样,导向头戴式显示器100的使用者的双眼的图像光在使用者的视网膜成像,从而使用者视觉确认虚像VI。在图6(A)的例子中,虚像VI是头戴式显示器100的OS的待机画面。另外,使用者透过右光学图像显示部26以及左光学图像显示部28确认外景SC。这样,本实施方式的头戴式显示器100的使用者对于视野VR中显示了虚像VI的部分,能够观察虚像VI、和虚像VI的背后的外景SC。另外,对于视野VR中未显示虚像VI的部分,能够透过光学图像显示部直接观察外景SC。
图6(B)例示了限制公开处理中的使用者的视野VR。在限制公开处理中,头戴式显示器100的信息生成部144使用通过标签获取部142获取的标签,生成用于扩张使用者感知的外景SC的附加提示用信息。后述附加提示用信息的生成方法。此外,所谓的“扩张外景SC”是指针对使用者看见的现实环境、即外景SC附加、删除、强调、衰减信息。信息生成部144向图像处理部160发送生成的附加提示用信息。在接收了附加提示用信息的图像处理部160中,执行图5所说明的显示处理。由此,使用者能够将附加提示用信息作为虚像VI视觉确认。在图6(B)的例子中,虚像VI包括以重叠在外景SC所包含的现实的山上的方式显示的对话框形状的标签TA1、和在外景SC所包含的树前显示的笔记本形状的标签TA2以及TA3。由此,使用者能够得到在外景SC上附加了对话框、笔记本形状的标签的感觉。
A-4.限制公开处理:
图7是表示限制公开处理的顺序的流程图。限制公开处理是抽取部342从存储标签信息的存储部(标签表格352)抽取标签,并使抽取的标签显示于头戴式显示器100的处理。此外,在图7中,以一对一的关系记载头戴式显示器100和服务器300。但是,头戴式显示器100与服务器300也可以是多对一的关系,也可以是多对多的关系。
头戴式显示器100的标签获取部142对服务器300发送包含了当前位置信息、方位信息、使用者信息的标签获取要求(步骤S102)。此处,信息生成部144能够使用通过GPS模块134(图5)检测出的控制部10的位置信息作为当前位置信息。信息生成部144能够使用通过九轴传感器66所包含的地磁传感器(图5)检测出的图像显示部20的朝向作为方位信息。信息生成部144能够使用储存于用户信息122(图5)的信息作为使用者信息。
图8是用于说明限制公开处理的步骤S104的说明图。在图8中,将标签表格352的标签标在按照与标签相对应的位置信息的位置。在图7的步骤S104中,接收了标签获取要求的服务器300的抽取部342抽取显示范围内的标签。具体而言,抽取部342执行以下的顺序a1~a3。
(a1)抽取部342根据标签获取要求所包含的当前位置信息,确定使用者的位置D1(图8)。
(a2)抽取部342根据标签获取要求所包含的方位信息,确定使用者的朝向D2(图8)。
(a3)抽取部342从标签表格352抽取具有从使用者的位置D1朝向使用者的朝向D2延伸的规定的范围SA所包含的位置信息的标签。
上述顺序a1~a3的结果,在图8的例子中,抽取标签信息T5、T6、T7、T8。此外,顺序a3中的“规定的范围SA”能够任意地决定。但是,为了提供没有不协调感的增强现实感,优选使规定的范围SA与使用者的视野的范围一致。
在图7的步骤S106中,抽取了显示范围内的标签的抽取部342进一步抽取符合抽取许可条件的标签。具体而言,抽取部342分别对所有在步骤S104抽取的标签执行以下的顺序b1~b4。
(b1)参照在标签表格352中,与标签相对应的抽取许可条件。
(b2)抽取许可条件为指定许可标签的公开的使用者的条件的情况下,抽取部342判定标签获取要求所包含的使用者信息是否满足抽取许可条件。使用者信息满足抽取许可条件的情况下,抽取部342将该标签作为抽取对象的标签。使用者信息不满足抽取许可条件的情况下,抽取部342放弃该标签。
(b3)抽取许可条件为指定标签的公开日期和时刻的条件的情况下,抽取部342判定当前的日期和时刻是否满足抽取许可条件。此外,抽取部342能够从CPU340内部的系统时钟获取当前的时间。当前的日期和时刻满足抽取许可条件的情况下,抽取部342将该标签作为抽取对象的标签。当前的日期和时刻不满足抽取许可条件的情况下,抽取部342放弃该标签。
(b4)抽取许可条件为无限制地许可标签的公开的主旨的条件的情况下,抽取部342将该标签作为抽取对象的标签。
例如,步骤S102的发送标签获取要求的发送日期和时刻为2013年2月26日的22:00,标签获取要求所包含的使用者信息为“XXXXX”的情况下,上述顺序b1~b4的结果,在步骤S104抽取的标签信息T5、T6、T7、T8的全部成为抽取对象。另一方面,步骤S102的发送标签获取要求的发送日期和时刻为2013年2月26日的17:00,标签获取要求所包含的使用者信息为“XX”的情况下,上述顺序b1~b4的结果,在步骤S104抽取的标签信息中,仅T5、T7成为抽取对象。
在图7的步骤S108中,通信部330向头戴式显示器100发送通过抽取部342抽取的标签。此外,在步骤S108中通信部330不仅发送标签,也可以发送包含标识符、位置信息的标签信息。
在步骤S110中,接收了标签的头戴式显示器100的标签获取部142使信息生成部144生成附加提示用信息。具体而言,信息生成部144执行以下的顺序c1~c4。
(c1)信息生成部144使通过标签获取部142获取的标签存储于存储部120。
(c2)信息生成部144生成表示向存储于存储部120的标签的链接的图标。图标也可以根据标签的种类、头戴式显示器100的使用者的设定而变更。
(c3)信息生成部144生成在任意的位置配置顺序c2中生成的图标,且在其他的部分配置了黑色的虚拟数据的附加提示用信息。此外,标签获取部142与标签一起获取了与该标签相对应的位置信息的情况下,信息生成部144也可以基于获取的位置信息、使用者的当前位置信息以及方位信息,决定配置图标的位置。
(c4)通过标签获取部142获取的标签有多个的情况下,信息生成部144反复执行顺序c1~c3。而且,信息生成部144生成将生成的多个附加提示用信息作为各层的合成图像,并将生成的合成图像作为(最终的)附加提示用信息。
在图7的步骤S112中,信息生成部144使生成的附加提示用信息显示。详细如图6(B)所说明的那样。
图9是表示通过限制公开处理的步骤S112而使用者所视觉确认的虚像的一个例子的说明图。在图9的例子中,虚像VI包括显示于外景SC所包含的摩天轮上的标签TA5、显示于外景SC所包含的门的侧面的标签TA6、显示于外景SC所包含的门的中央附近的标签TA7、以及显示于外景SC所包含的过山车的标签TA8。另外,虚像VI(附加提示用信息)中的各标签的位置以及大小根据以使用者的当前位置信息D1以及方位信息D2为基准的、各标签的位置信息的变化(图8)决定。即,在图8中与使用者的当前位置信息D1的附近相对应的标签TA7在虚像VI的中心附近较大地显示,在图8中与使用者的当前位置信息D1的远处相对应的标签TA5、标签TA8在虚像VI的端部较小地显示。这样一来,头戴式显示器100的使用者能够靠直觉把握标签相对应的位置。
如以上,根据第1实施方式的限制公开处理,服务器300(信息装置)的抽取部342基于与头戴式显示器100(头戴式显示装置)的使用者有关的信息亦即使用者信息,从标签表格352(对象信息存储部)抽取标签(对象信息),并向头戴式显示器100发送。而且,头戴式显示器100使用获取的标签生成附加提示用信息,并将生成的附加提示用信息作为虚像VI使使用者视觉确认。这样,服务器300的抽取部342能够仅对发送了满足抽取许可条件的使用者信息的头戴式显示器100的使用者公开标签。因此,在提供AR-SNS服务的信息显示系统中,能够对信息的公开设置限制。
并且,服务器300(信息装置)的抽取部342能够使用指定许可标签的公开的使用者的条件,以“使用者”为单位限制信息显示系统1000中的标签的公开。另外,服务器300的抽取部342能够使用指定标签的公开日期和时刻的条件,以“日期和时刻”为单位限制信息显示系统1000中的标签的公开。
并且,在服务器300(信息装置)的标签表格352(对象信息存储部)中,抽取许可条件与标签(对象信息)相对应地存储,所以能够按照每个标签细致地设置公开的限制。
A-4-1.标签表格352的变更:
图10是表示标签表格352的其他的例子的说明图。图10(A)是表示标签表格352的第1变更的说明图。与图2所示的标签表格352的不同在于除了标识符、标签、位置信息、抽取许可条件,还具备重要度的点。在重要度储存有标签的重要度。重要度的值例如能够在使用者将标签信息上传至标签表格352时设定。例如,在图10(A)的例子中,可知标签信息T1的重要度为“高”。同样地,可知标签信息T2的重要度为“中”、标签信息T3的重要度为“紧急”。此外,重要度可以使用图10那样的表现方法,也可以使重要度与字母、数字相对应。重要度相当于权利要求书中的“顺序信息”。
重要度用于决定在头戴式显示器100中显示标签的顺序。在限制公开处理(图7)的步骤S108中,服务器300的抽取部342向头戴式显示器100发送抽取的标签和与抽取的标签相对应的重要度。在步骤S110中,头戴式显示器100的信息生成部144使接收的标签以按照接收的重要度的顺序重叠,生成附加提示用信息。具体而言,信息生成部144在生成附加提示用信息的顺序c4中,生成将生成的多个附加提示用信息作为各层的合成图像时,将通过重要度高的标签生成的附加提示用信息配置于上层。
图10(B)是表示标签表格352的第2变更的说明图。与图2所示的标签表格352的不同在于除了标识符、标签、位置信息、抽取许可条件,还具备同意数的点。在同意数储存有针对标签的来自使用者的评价。同意数的值例如在阅览了标签的使用者进行了按下按钮等某种操作的情况下自动加一。即,可知同意数的值越大同意该标签的使用者的数目越多。例如,在图10(B)的例子中,可知标签信息T1的同意数“8”。同样地,可知标签信息T2的同意数为“15”、标签信息T3的同意数为“243”。此外,同意数可以使用图10那样的表现方法,也可以使同意数与字母、数字相对应。同意数相当于权利要求书中的“顺序信息”。
同意数用于决定在头戴式显示器100中显示标签的顺序。在限制公开处理(图7)的步骤S108中,服务器300的抽取部342向头戴式显示器100发送抽取的标签和与抽取的标签相对应的同意数。在步骤S110中,头戴式显示器100的信息生成部144使接收的标签以按照接收的同意数的顺序重叠,生成附加提示用信息。具体而言,信息生成部144在生成附加提示用信息的顺序c4中,生成将生成的多个附加提示用信息作为各层的合成图像时,将由同意数多的标签生成的附加提示用信息配置于上层。
如以上,根据使用了标签表格352的第1以及第2变更的限制公开处理,服务器300(信息装置)向头戴式显示器100(头戴式显示装置)发送标签(对象信息)和用于决定标签的显示顺序的重要度或者同意数(顺序信息)。在头戴式显示器100中,接收了多个标签的情况下,使标签以按照顺序信息的顺序重叠而生成附加提示用信息。这样,服务器300在向头戴式显示器100发送多个标签的情况下,能够使用顺序信息指定在附加提示用信息中使哪个标签显示于上层,即、使哪个标签容易被使用者视觉确认。
A-5.限制更新处理:
图11是表示限制更新处理的顺序的流程图。限制更新处理是接收从客户端装置(头戴式显示器100)发送过来的信息,并在接收信息满足条件的情况下,使用该接收信息更新存储标签信息的存储部(标签表格352)的处理。此外,在图11中,以一对一的关系记载头戴式显示器100和服务器300。但是,头戴式显示器100与服务器300也可以为多对一的关系,也可以为多对多的关系。
头戴式显示器100的更新要求部146针对服务器300发送包括当前位置信息、标签、使用者信息的标签写入要求(步骤S202)。对于当前位置信息和使用者信息与图7的步骤S102相同。另外,标签为通过头戴式显示器100的使用者指定的成为公开的对象的信息,包括文本文件、应用程序数据文件、包括静止图像、动态图像的图像文件、声音文件等。
图12是用于说明限制更新处理的步骤S204的说明图。在图12中,以虚线表示由更新条件表格354的限制区域信息指定的限制区域(即、更新许可条件的有效区域)。另外,将标签表格352的标签标在按照与标签相对应的位置信息的位置。在图12的步骤S204中,接收了标签写入要求的服务器300的更新部344判定发送了标签写入要求的头戴式显示器100的位置是否包含于限制区域。具体而言,更新部344执行以下的顺序d1、d2。
(d1)更新部344根据标签写入要求所包含的当前位置信息,确定使用者的位置D1(图12)。
(d2)更新部344判定使用者的位置D1是否在更新条件表格354的限制区域信息所规定的限制区域C1~C7的范围内(图12)。
头戴式显示器100的位置不在限制区域C1~C7的范围内的情况下,更新部344将接收的标签写入标签表格352(步骤S206)。具体而言,更新部344使用标签写入要求所包含的标签,更新标签表格352的标签。同样地,更新部344使用标签写入要求所包含的当前位置信息更新标签表格352的位置信息,并使用系统地分配的唯一的标识符更新标识符。此外,标签写入要求包括标签的抽取许可条件的情况下,更新部344更新标签表格352的抽取许可条件。
另一方面,头戴式显示器100的位置包含在限制区域C1~C7的范围内的情况下,更新部344将接收的标签中,符合更新许可条件的标签写入标签表格352(步骤S208)。具体而言,更新部344执行以下的顺序e1~e4。
(e1)参照在更新条件表格354中,与头戴式显示器100所在的限制区域(在上述顺序d2求出的)相对应的更新许可条件。
(e2)更新许可条件为指定许可标签表格352的更新的使用者的条件的情况下,更新部344判定标签写入要求所包含的使用者信息是否满足更新许可条件。使用者信息满足更新许可条件的情况下,更新部344将接收的标签写入要求所包含的标签写入标签表格352。详细与步骤S206相同。使用者信息不满足更新许可条件的情况下,更新部344放弃该标签写入要求。
(e3)更新许可条件为指定标签表格352的更新日期和时刻的条件的情况下,更新部344判定当前的日期和时刻是否满足更新许可条件。此外,更新部344能够从CPU340内部的系统时钟获取当前的日期和时刻。当前的日期和时刻满足更新许可条件的情况下,更新部344将接收的标签写入要求所包含的标签写入标签表格352。详细与步骤S206相同。当前的日期和时刻不满足更新许可条件的情况下,更新部344放弃该标签写入要求。
(e4)更新许可条件为不许可标签表格352的更新的主旨的条件的情况下,更新部344放弃该标签写入要求。
在图11的步骤S210中,更新部344向头戴式显示器100发送处理结果。接收了处理结果的头戴式显示器100的更新要求部146生成用于向使用者通知处理结果的通知画面,并向图像处理部160发送。通过图像处理部160完成图5所说明的显示处理,从而头戴式显示器100的使用者能够将通知画面作为虚像VI视觉确认。
如以上,根据第1实施方式的限制更新处理,服务器300(信息装置)的更新部344在从头戴式显示器100(头戴式显示装置)接收的标签写入要求(接收信息)满足更新许可条件的情况下,使用标签写入要求更新标签表格352(对象信息存储部)。因此,能够将在标签表格352累积的标签(信息)限定为满足更新许可条件的信息。其结果,在提供AR-SNS服务的信息显示系统1000中,能够对信息的累积设置限制。
并且,服务器300(信息装置)的更新部344能够使用指定许可标签表格352(对象信息存储部)的更新的使用者的条件,以“使用者”为单位限制针对标签表格352的信息的累积。另外,服务器300的更新部344能够使用指定标签表格352的更新日期和时刻的条件,以“日期和时刻”为单位限制针对标签表格352的信息的累积。另外,服务器300的更新部344能够使用不许可标签表格352的更新的主旨的条件,限制所有针对标签表格352的信息的累积。
并且,在服务器300(信息装置)的更新条件表格354(更新条件存储)中,与更新许可条件相对应地存储有用于确定限制标签表格352(对象信息存储部)的更新的限制区域的限制区域信息。因此,服务器300的更新部344能够按照每个限制区域应用更新许可条件。其结果,在提供AR-SNS服务的信息显示系统1000中,能够按照每个限制区域细致地对信息的累积设置限制。
B.第2实施方式:
在本发明的第2实施方式中,对仅利用单一的头戴式显示装置实施信息显示系统的构成进行说明。以下,仅对具有与第1实施方式不同的构成以及动作的部分进行说明。此外,在图中对与第1实施方式相同的构成部分附加与先前说明的第1实施方式相同的附图标记,并省略其详细的说明。
B-1.信息显示系统的构成:
第2实施方式的信息显示系统具备头戴式显示器。与图1所示的第1实施方式的不同在于不具备服务器300的点。
B-2.头戴式显示装置(头戴式显示器)的构成:
图13是功能性地表示第2实施方式中的头戴式显示器100a的构成的框图。与图5所示的第1实施方式的不同在于代替控制部10而具备控制部10a的点。控制部10a代替存储部120而具备存储部120a,代替CPU140而具备CPU140a。
存储部120a除了用户信息122,还具备标签表格124和更新条件表格126。标签表格124的构成与图2所示的标签表格352相同。更新条件表格126的构成与图3所示的更新条件表格354相同。
CPU140a除了OS150、图像处理部160、声音处理部170、显示控制部190、标签获取部142、信息生成部144、更新要求部146,还具备抽取部148、和更新部149。抽取部148的功能以及动作与图1所示的抽取部342相同。只是,抽取部148参照标签表格124。更新部149的功能以及动作与图1所示的更新部344相同。只是,更新部149参照更新条件表格126,并将标签表格124作为更新对象。
B-3.限制公开处理:
第2实施方式中的限制公开处理与图7所示的“A-4.限制公开处理”相同。但是,第2实施方式中的限制公开处理的控制主体为抽取部148。
B-4.限制更新处理:
第2实施方式中的限制更新处理与图11所示的“A-5.限制更新处理”相同。但是,第2实施方式中的限制公开处理的控制主体为更新部149。
如以上,在第2实施方式中也能够得到与第1实施方式相同的效果。另外,根据上述第2实施方式,能够在单一的头戴式显示器100a(头戴式显示装置)中,对使用者提供与第1实施方式的信息显示系统1000相同的服务。
C.变形例:
在上述实施方式中,可以将通过硬件实现的构成的一部分置换为软件,相反地,也可以将通过软件实现的构成的一部分置换为硬件。另外,也能够进行以下那样的变形。
·变形例1:
在上述实施方式中,例示了信息显示系统的构成。但是,信息显示系统的构成在不脱离本发明的主旨的范围内能够任意地决定,例如,能够进行构成要素的追加、删除、转换等。
例如,信息显示系统构成为具备头戴式显示器、和服务器,但是,头戴式显示器和服务器也可以是多对一的关系,可也以是多对多的关系。另外,接受AR-SNS服务的提供的客户端装置也可以是头戴式显示器以外的各种装置,例如,个人计算机、智能手机、移动电话、汽车导航系统、PDA(Personal Digital Assistant:个人数字处理)等。
例如,记载了服务器所具备的抽取部、更新部等功能部通过CPU将储存于ROM、硬盘的计算机程序展开于RAM并执行从而实现。但是,这些功能部也可以使用为了实现该功能而设计的ASIC(ApplicationSpecific Integrated Circuit:专用集成电路)构成。
·变形例2:
在上述实施方式中,例示了头戴式显示器的构成。但是,头戴式显示器的构成能够在不脱离本发明的主旨的范围内任意地决定,例如,能够进行各构成部的追加、删除、转换等。
上述实施方式中的针对控制部、和图像显示部的构成要素的分配仅是一个例子,能够采用各种方式。例如,也可以为以下那样的方式。(i)将CPU、存储器等的处理功能搭载于控制部,图像显示部仅搭载显示功能的方式,(ii)对控制部与图像显示部双方搭载CPU、存储器等的处理功能的方式,(iii)将控制部与图像显示部一体化的方式(例如,图像显示部包含控制部而作为眼镜型的可穿戴计算机发挥作用的方式),(iv)代替控制部而使用智能手机、便携式游戏机的方式,(v)使控制部和图像显示部成为能够无线通信并且能够无线供电的构成从而废除连接部(线)的方式。
在上述实施方式中,为了方便说明,控制部具备发送部,图像显示部具备接收部。但是,上述实施方式的发送部以及接收部均具备能够进行双方向通信的功能,能够作为收发部发挥作用。另外,例如,图5所示的控制部经由有线的信号传输路与图像显示部连接。但是,控制部和图像显示部也可以通过经由了无线LAN、红外线通信、Bluetooth(注册商标)等无线的信号传输路的连接进行连接。
例如,能够任意地变更图5所示的控制部、图像显示部的构成。具体而言,例如,也可以构成为从控制部省略触摸板,仅利用十字键进行操作。另外,控制部可也以具备操作棒等其他的操作用接口。另外,控制部也可以作为能够连接键盘、鼠标等设备的构成,从键盘、鼠标接受输入。另外,例如,也可以除了触摸板、十字键的操作输入,还获取脚踏开关(通过使用者的脚进行操作的开关)的操作输入。例如,也可以在图像显示部设置红外线传感器等视线检测部,之后检测使用者的视线,并获取与视线的动作相对应的指令的操作输入。例如,也可以使用照相机检测使用者的动作,并获取与动作相对应的指令的操作输入。动作检测时,能够将使用者的指尖、使用者的手上戴的戒指、使用者手持的医疗器具等作为用于动作检测的标记。若能够获取脚踏开关、视线的操作输入,则即使在使用者难以放开手的作业中,输入信息获取部也能够获取来自使用者的操作输入。
例如,头戴式显示器为双眼型透射式头戴式显示器,但也可以为单眼型头戴式显示器。另外,也可以构成为在使用者佩戴了头戴式显示器的状态下遮断外景的透过的非透射式头戴式显示器。
图14是表示变形例中的头戴式显示器的外观的构成的说明图。图14(A)的例子的情况下,与图1所示的头戴式显示器100的不同在于图像显示部20b代替右光学图像显示部26而具备右光学图像显示部26b的点、和代替左光学图像显示部28而具备左光学图像显示部28b的点。右光学图像显示部26b形成为比第1实施方式的光学部件小,配置于头戴式显示器的佩戴时的使用者的右眼的斜上方。同样地,左光学图像显示部28b形成为比第1实施方式的光学部件小,配置于头戴式显示器的佩戴时的使用者的左眼的斜上方。图14(B)的例子的情况下,与图1所示的头戴式显示器100的不同在于图像显示部20c代替右光学图像显示部26而具备右光学图像显示部26c的点、和代替左光学图像显示部28而具备左光学图像显示部28c的点。右光学图像显示部26c形成为比第1实施方式的光学部件小,配置于头戴式显示器的佩戴时的使用者的右眼的斜下方。左光学图像显示部28c形成为比第1实施方式的光学部件小,配置于头戴式显示器的佩戴时的使用者的左眼的斜下方。这样,光学图像显示部配置于使用者的眼睛的附近即可。另外,形成光学图像显示部的光学部件的大小也任意,能够作为光学图像显示部仅覆盖使用者的眼睛的一部分的方式,换句话说,光学图像显示部并不完全地覆盖使用者的眼睛的方式的头戴式显示器实现。
例如,记载了图像处理部、显示控制部、标签获取部、信息生成部、更新要求部、抽取部、更新部、声音处理部等功能部通过CPU将储存于ROM、硬盘的计算机程序展开于RAM并执行从而实现。但是,这些功能部也可以使用为了实现该功能而设计的ASIC(ApplicationSpecific Integrated Circuit:专用集成电路)构成。
例如,在上述实施方式中,为如眼镜那样佩戴图像显示部的头戴式显示器,但图像显示部也可以是普通的平面型显示器装置(液晶显示器装置、等离子显示器装置、有机EL显示器装置等)。在这种情况下,控制部与图像显示部之间的连接可以是经由有线的信号传输路的连接,也可以是经由无线的信号传输路的连接。这样一来,也能够将控制部作为普通的平面型显示器装置的遥控器利用。
另外,作为图像显示部,也可以代替如眼镜那样佩戴的图像显示部,例如采用如帽子那样佩戴的图像显示部等其他的形状的图像显示部。另外,耳机也可以采用耳挂式、头戴式,也可以省略。另外,例如,也可以构成为安装于汽车、飞机等车辆的平视显示器(HUD,Head-Up Display)。另外,例如,也可以构成为内置于安全帽等身体防护具的头戴式显示器。
例如,在上述实施方式中,使用二次电池作为电源,但作为电源并不限定于二次电池,能够使用各种电池。例如,也可以使用一次电池、燃料电池、太阳电池、热电池等。
例如,在上述实施方式中,使用背光灯、背光灯控制部、LCD、LCD控制部构成图像光生成部。但是,上述的方式仅是例示。图像光生成部也可以与这些构成部一起,或者代替这些构成部具备用于实现其他的方式的构成部。例如,图像光生成部也可以构成为具备有机EL(有机电致发光,Organic Electro-Luminescence)的显示器、和有机EL控制部。另外,例如,图像生成部也能够代替LCD而使用数字微镜设备等。另外,例如,也能够对激光视网膜投影型头戴式显示装置应用本发明。
·变形例3:
在上述实施方式中,示出了标签表格(对象信息存储部)以及更新条件表格(更新许可条件存储部)的一个例子。但是,这些表格的详细内容仅是一个例子,能够进行各种变更。例如,能够进行字段的追加、删除、变更。另外,这些表格也可以分割为多个表格进行规范化。此外,所谓的“字段”是指数据库字段(将数据输入到记录时的基本单位)。
例如,在标签表格中,抽取许可条件与标签一对一地相对应地存储,但抽取许可条件也可以与多个标签相关联地存储。
例如,在标签表格中,也可以具备图2所示的字段以外的其他的字段。例如,也可以具备表示标签的用途的“用途”字段。另外,也可以设置使用了用途字段的新的抽取许可条件。
例如,在更新条件表格中,也可以具备图3所示的字段以外的其他的字段。例如,也可以具备规定能够更新标签表格的设备的种类的“设备种类”字段。
图2所例示的抽取许可条件的内容,以及,图3所例示的更新许可条件的内容仅是一个例子,能够进行各种变形。作为抽取许可条件的“指定许可标签的公开的使用者的条件”,例如,也可以使用使用者的身高超过规定的阈值的情况这样的条件。该情况下,构成为头戴式显示器内置高度计,且在限制公开处理(图7)的步骤S102中,头戴式显示器能够与标签获取要求一起发送高度计的测量值。这样一来,能够根据使用者的身高改变标签的显示。另外,根据使用者的身高能够推断该使用者是成人还是儿童。另外,例如,也可以使用使用者的脉搏、体温等超过规定的阈值的情况这样的条件。该情况下,构成为头戴式显示器内置脉搏计、体温计,且在限制公开处理(图7)的步骤S102中,头戴式显示器能够与标签获取要求一起发送脉搏计、体温计的测量值。这样一来,能够根据使用者的健康状态改变标签的显示。
·变形例4:
在上述实施方式中,示出了用户信息的一个例子。但是,用户信息能够进行各种变形。例如,可以省略一部分的项目,也可以进一步追加其他的项目。
例如,作为认证信息使用了密码,但作为认证信息能够采用签名、指纹认证所使用的指纹读取信息、手掌静脉认证所使用的静脉读取信息、声纹认证所使用的声纹读取信息、视网膜认证所使用的视网膜读取信息、数字证书、一次性密码等各种信息。
·变形例5:
在上述实施方式(图7)中,示出了限制公开处理的一个例子。但是,上述限制公开处理的顺序仅是一个例子,能够进行各种变形。例如,也可省略一部分的步骤,也可以进一步追加其他的步骤。另外,也可以变更执行的步骤的顺序。
例如,在限制公开处理中,例示基于根据头戴式显示器的当前位置信息和方位信息抽取标签的直通方式的AR-SNS服务进行了说明。但是,即使在对头戴式显示器的使用者的视野方向的图像进行图像识别来抽取标签的图像识别的方法中,也能够执行限制公开处理。该情况下,服务器的抽取部代替当前位置信息和方位信息,而接收使用者的视野方向的图像,并基于接收的视野方向的图像,从标签表格抽取标签。而且,抽取部能够使用与抽取的标签相对应的抽取许可条件,进行相同的处理。
例如,在步骤S110中,头戴式显示器的信息生成部也可以根据标签的重要度、标签的同意数来变更在附加提示用信息的生成顺序c1~c4中的顺序c2中生成的图标的颜色。
在步骤S112中,列举了信息生成部生成附加提示用信息的方法的一个例子。但是,上述说明的方法(以使用者的当前位置信息D1以及方位信息D2为基准变更附加提示用信息中的各标签的位置以及大小的方法)仅是一个例子,能够进行各种变更。例如,针对图像显示部设置拍摄使用者的视野方向的外景(外部的景色),并获取外景图像的照相机。信息生成部也可以对通过照相机获取的外景图像进行图像识别,决定配置标签的位置和标签的大小。该情况下,信息生成部例如也可以对建筑物的门或门扇进行图像识别,并对与门或门扇重叠的位置,或者,处于门或门扇的附近的位置配置标签。另外,信息生成部例如也可以对路标或店铺的招牌进行图像识别,并对与标志或招牌重叠的位置,或者,处于标志或招牌的附近的位置配置标签。另外,信息生成部也可以对山、大厦和天空的边界进行图像识别,并对与该边界重叠的位置,或者,处于边界的附近的位置配置标签。
例如,为具备对图像显示部或者控制部能够进行近距离无线通信或者中距离无线通信的无线通信接口的构成。该无线通信接口读取内置于外界的门扇、门、拱门等的近距离无线通信芯片或者中距离无线通信芯片所存储的信息。在步骤S112中,信息生成部也可以根据无线通信接口的读取结果,变更附加提示用信息中的标签的显示的有无、标签的位置、标签的大小等。这样一来,外界的门扇、门、拱门等的所有者(以下,仅称为所有者)在不想公开标签的情况下使该主旨存储于芯片即可,欲限定地公开标签的情况下也使该主旨存储于芯片即可。即,能够以所有者的意向简单地限制标签的公开的可否。
·变形例6:
在上述实施方式中,示出了限制更新处理的一个例子。但是,上述限制更新处理的顺序仅是一个例子,能够进行各种变形。例如,可以省略一部分的步骤,也可以进一步追加其他的步骤。另外,也可以变更执行的步骤的顺序。
例如,也可以省略步骤S210的处理结果的发送步骤、和步骤S212的处理结果的显示步骤。
例如,在上述实施方式的限制更新处理中,未提及将不能够写入标签的位置(更新条件表格的更新许可条件设定为“不许可”的位置)通知给头戴式显示器的使用者的处理。但是,服务器也可以基于头戴式显示器的当前位置信息,向头戴式显示器通知进入到不能够写入标签的位置、不能够写入标签的位置较近以及其方向等。通知的方式可以使其作为标签显示,也可以以声音进行引导。
·变形例7:
本发明并不限定于上述的实施方式、实施例、变形例,能够在不脱离其主旨的范围内利用各种构成实现。例如,为了解决上述的课题的一部分或者全部,或者,实现上述的效果的一部分或者全部,能够适当地进行交换、组合与发明的概要一栏所记载的各方式中的技术的特征对应的实施方式、实施例、变形例中的技术的特征。另外,若该技术的特征在本说明书中未作为必须的特征进行说明,则能够适当地删除。
符号说明
10…控制部(控制器),12…点灯部,14…触摸板,16…十字键,18…电源开关,20…图像显示部,21…右保持部,22…右显示驱动部,23…左保持部,24…左显示驱动部,26…右光学图像显示部,28…左光学图像显示部,30…耳机插头,32…右耳机,34…左耳机,40…连接部,42…右线,44…左线,46…连结部件,48…主体线,51…发送部,52…发送部,53…接收部,54…接收部,110…输入信息获取部,100…头戴式显示器(头戴式显示装置),120…存储部,122…用户信息,124…标签表格(对象信息存储部),126…更新条件表格(更新许可条件存储部),130…电源,140…CPU,142…标签获取部(信息获取部),144…信息生成部(信息生成部),146…更新要求部,148…抽取部(抽取部),149…更新部(更新部),160…图像处理部,170…声音处理部,180…接口,190…显示控制部,201…右背光灯控制部,202…左背光灯控制部,211…右LCD控制部,212…左LCD控制部,221…右背光灯,222…左背光灯,241…右LCD,242…左LCD,251…右投射光学系统,252…左投射光学系统,261…右导光板,262…左导光板,300…服务器(信息装置),330…通信部,340…CPU,342…抽取部(抽取部),344…更新部(更新部),350…存储部,352…标签表格(对象信息存储部),354…更新条件表格(更新许可条件存储部),1000…信息显示系统,PCLK…时钟信号,VSync…垂直同步信号,HSync…水平同步信号,Data…图像数据,Data1…右眼用图像数据,Data2…左眼用图像数据,OA…外部设备,PC…个人计算机,SC…外景,RE…右眼,LE…左眼,VI…虚像,ER…端部,EL…端部,AP…前端部,VR…视野,C1~C7…条件,T1~T10…标签信息,TA5~TA8…标签。

Claims (11)

1.一种信息显示系统,其特征在于,为具备信息装置、和使使用者视觉确认虚像的头戴式显示装置的信息显示系统,
所述信息装置具备:
对象信息存储部,其存储所述信息装置的公开的对象亦即对象信息;
抽取部,其基于与所述头戴式显示装置的所述使用者有关的信息亦即使用者信息,从所述对象信息存储部抽取所述对象信息;以及
发送部,其向所述头戴式显示装置发送抽取的所述对象信息,
所述头戴式显示装置具备:
信息获取部,其对所述信息装置发送所述使用者信息,并且从所述信息装置获取所述对象信息;
信息生成部,其使用获取的所述对象信息来生成用于向所述使用者提供增强现实感的附加提示用信息;以及
图像显示部,其将生成的所述附加提示用信息作为所述虚像使所述使用者视觉确认,
在所述信息装置中,
在所述对象信息存储部中还与所述对象信息相对应地存储有用于决定所述对象信息的显示顺序的顺序信息;
所述抽取部从所述对象信息存储部抽取所述对象信息和所述顺序信息;
所述发送部向所述头戴式显示装置发送抽取的所述对象信息和所述顺序信息,
在所述头戴式显示装置中,
所述信息生成部在获取到多个所述对象信息的情况下,使所述对象信息以按照所述顺序信息的顺序重叠而生成所述附加提示用信息。
2.根据权利要求1所述的信息显示系统,其特征在于,
在所述对象信息存储部中与所述对象信息相对应地存储有抽取该对象信息时的条件亦即抽取许可条件,
所述抽取部在从所述头戴式显示装置接收的所述使用者信息满足所述抽取许可条件的情况下,抽取该对象信息。
3.根据权利要求1所述的信息显示系统,其特征在于,
所述使用者信息包含通过所述使用者设定的账户名、通过所述使用者设定的认证信息、所述使用者的邮件地址、所述头戴式显示装置的网络地址、所述头戴式显示装置的MAC地址、从所述使用者利用的服务的提供商提供的账户名、以及从所述使用者利用的服务的提供商提供的认证信息中的至少一个。
4.根据权利要求2所述的信息显示系统,其特征在于,
所述使用者信息包含通过所述使用者设定的账户名、通过所述使用者设定的认证信息、所述使用者的邮件地址、所述头戴式显示装置的网络地址、所述头戴式显示装置的MAC地址、从所述使用者利用的服务的提供商提供的账户名、以及从所述使用者利用的服务的提供商提供的认证信息中的至少一个。
5.根据权利要求1~4中的任意一项所述的信息显示系统,其特征在于,
所述信息装置还具备:
更新许可条件存储部,其存储用于许可所述对象信息存储部的更新的更新许可条件;以及
更新部,其在从所述头戴式显示装置接收的接收信息满足所述更新许可条件的情况下,使用所述接收信息来更新所述对象信息存储部,
所述头戴式显示装置还具备:
更新要求部,其对所述信息装置发送用于更新所述对象信息存储部的信息。
6.根据权利要求5所述的信息显示系统,其特征在于,
在所述信息装置中,
在所述更新许可条件存储部中与所述更新许可条件相对应地存储有确定限制所述对象信息存储部的更新的限制区域的限制区域信息;
所述更新部求出与所述接收信息所包含的所述头戴式显示装置的当前位置信息对应的所述限制区域信息,并在所述接收信息满足与求出的所述限制区域信息相对应的所述更新许可条件的情况下,使用所述接收信息来更新所述对象信息存储部,
在所述头戴式显示装置中,
所述更新要求部发送用于更新所述对象信息存储部的信息和表示所述头戴式显示装置的当前位置的所述当前位置信息。
7.根据权利要求5所述的信息显示系统,其特征在于,
所述更新许可条件包含指定许可所述对象信息存储部的更新的所述使用者的条件、指定所述对象信息存储部的更新时间的条件、以及不许可所述对象信息存储部的更新的主旨的条件中的至少一个。
8.根据权利要求6所述的信息显示系统,其特征在于,
所述更新许可条件包含指定许可所述对象信息存储部的更新的所述使用者的条件、指定所述对象信息存储部的更新时间的条件、以及不许可所述对象信息存储部的更新的主旨的条件中的至少一个。
9.一种信息显示方法,其特征在于,为使用了信息装置、和使使用者视觉确认虚像的头戴式显示装置的信息显示方法,具备:
(a)所述头戴式显示装置对所述信息装置发送与所述头戴式显示装置的所述使用者有关的信息亦即使用者信息的工序;
(b)所述信息装置基于接收的所述使用者信息,抽取所述信息装置的公开的对象亦即对象信息的工序;
(c)所述信息装置向所述头戴式显示装置发送抽取的所述对象信息的工序;
(d)所述头戴式显示装置从所述信息装置获取所述对象信息的工序;
(e)使用获取的所述对象信息生成用于向所述使用者提供增强现实感的附加提示用信息的工序;以及
(f)将生成的所述附加提示用信息作为所述虚像使所述使用者视觉确认的工序,
在上述工序(b)中,抽取所述对象信息和与所述对象信息相对应而用于决定所述对象信息的显示顺序的顺序信息;
在上述工序(c)中,向所述头戴式显示装置发送抽取的所述对象信息和所述顺序信息,
在上述工序(e)中,在获取到多个所述对象信息的情况下,使所述对象信息以按照所述顺序信息的顺序重叠而生成所述附加提示用信息。
10.一种头戴式显示装置,其特征在于,为使使用者视觉确认虚像的头戴式显示装置,具备:
信息获取部,其获取基于与所述头戴式显示装置的所述使用者有关的信息亦即使用者信息来抽取的信息亦即对象信息;
信息生成部,其使用获取的所述对象信息来生成用于向所述使用者提供增强现实感的附加提示用信息;以及
图像显示部,其将生成的所述附加提示用信息作为所述虚像使所述使用者视觉确认,
所述信息生成部在获取到多个所述对象信息的情况下,使所述对象信息以按照顺序信息的顺序重叠而生成所述附加提示用信息,该顺序信息与所述对象信息相对应而用于决定所述对象信息的显示顺序。
11.一种头戴式显示装置,其特征在于,为使使用者视觉确认虚像的头戴式显示装置,具备:
对象信息存储部,其存储所述头戴式显示装置的公开的对象亦即对象信息;
抽取部,其基于与所述使用者有关的信息亦即使用者信息,从所述对象信息存储部抽取所述对象信息;
信息生成部,其使用抽取的所述对象信息来生成用于向所述使用者提供增强现实感的附加提示用信息;以及
图像显示部,其将生成的所述附加提示用信息作为所述虚像使所述使用者视觉确认,
在所述对象信息存储部中还与所述对象信息相对应地存储有用于决定所述对象信息的显示顺序的顺序信息;
所述抽取部从所述对象信息存储部抽取所述对象信息和所述顺序信息;
所述信息生成部在被抽取多个所述对象信息的情况下,使所述对象信息以按照所述顺序信息的顺序重叠而生成所述附加提示用信息。
CN201410108493.0A 2013-03-22 2014-03-21 信息显示系统、信息显示方法、以及头戴式显示装置 Active CN104062759B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-059623 2013-03-22
JP2013059623A JP6160154B2 (ja) 2013-03-22 2013-03-22 頭部装着型表示装置を利用した情報表示システム、頭部装着型表示装置を利用した情報表示方法、および、頭部装着型表示装置

Publications (2)

Publication Number Publication Date
CN104062759A CN104062759A (zh) 2014-09-24
CN104062759B true CN104062759B (zh) 2018-01-05

Family

ID=51550548

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410108493.0A Active CN104062759B (zh) 2013-03-22 2014-03-21 信息显示系统、信息显示方法、以及头戴式显示装置

Country Status (3)

Country Link
US (1) US9824496B2 (zh)
JP (1) JP6160154B2 (zh)
CN (1) CN104062759B (zh)

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015158747A (ja) * 2014-02-21 2015-09-03 ソニー株式会社 制御装置、情報処理装置、制御方法、情報処理方法、情報処理システム、およびウェアラブル機器
CN106464797B (zh) * 2014-06-03 2019-06-11 索尼公司 获得标记有修正的图像方向的数字图像的方法和电子装置
JPWO2016013269A1 (ja) * 2014-07-22 2017-04-27 ソニー株式会社 画像表示装置及び画像表示方法、並びにコンピューター・プログラム
US9881422B2 (en) * 2014-12-04 2018-01-30 Htc Corporation Virtual reality system and method for controlling operation modes of virtual reality system
JP2016138908A (ja) 2015-01-26 2016-08-04 セイコーエプソン株式会社 表示システム、可搬型表示装置、表示制御装置、表示方法
JP2016139168A (ja) 2015-01-26 2016-08-04 セイコーエプソン株式会社 表示システム、可搬型表示装置、表示制御装置、表示方法
US9784976B2 (en) * 2015-02-04 2017-10-10 Seiko Epson Corporation Head mounted display, information processing apparatus, image display apparatus, image display system, method for sharing display of head mounted display, and computer program
US9558760B2 (en) * 2015-03-06 2017-01-31 Microsoft Technology Licensing, Llc Real-time remodeling of user voice in an immersive visualization system
KR101716326B1 (ko) 2015-09-08 2017-03-14 클릭트 주식회사 가상현실영상 전송방법, 재생방법 및 이를 이용한 프로그램
US10452860B2 (en) * 2015-11-09 2019-10-22 Toshiba Client Solutions CO., LTD. System, electronic apparatus and method
US20170153698A1 (en) * 2015-11-30 2017-06-01 Nokia Technologies Oy Method and apparatus for providing a view window within a virtual reality scene
US20190034733A1 (en) * 2016-01-12 2019-01-31 Suncorporation Image display device
JP6824279B2 (ja) 2016-02-18 2021-02-03 アップル インコーポレイテッドApple Inc. インサイドアウト方式のポジション、ユーザボディ、及び環境トラッキングを伴うバーチャルリアリティ及びミックスドリアリティ用ヘッドマウントディスプレイ
JP6711033B2 (ja) * 2016-03-08 2020-06-17 富士通株式会社 表示制御方法、通信装置、表示制御プログラムおよび表示制御装置
JP6702785B2 (ja) * 2016-04-25 2020-06-03 株式会社ゼンリンデータコム ウェアラブル端末、プログラム及び情報処理方法
WO2018008394A1 (ja) * 2016-07-05 2018-01-11 ソニー株式会社 情報処理システム、記録媒体、および情報処理方法
JP2018005091A (ja) * 2016-07-06 2018-01-11 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置
WO2018011988A1 (ja) * 2016-07-15 2018-01-18 ブレイニー株式会社 仮想現実システム、及び、情報処理システム
CN106484099B (zh) * 2016-08-30 2022-03-08 广州大学 内容重放装置、具有该重放装置的处理系统及方法
CN106791620A (zh) * 2016-12-05 2017-05-31 西南石油大学 基于ar技术和地理信息技术的埋地管线巡检方法及装置
JP6816492B2 (ja) * 2016-12-14 2021-01-20 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置
US11024064B2 (en) * 2017-02-24 2021-06-01 Masimo Corporation Augmented reality system for displaying patient data
CN111010865B (zh) 2017-02-24 2023-07-25 梅西莫股份有限公司 用于显示医疗监测数据的系统
WO2018208616A1 (en) 2017-05-08 2018-11-15 Masimo Corporation System for pairing a medical system to a network controller by use of a dongle
TWI658376B (zh) * 2017-05-12 2019-05-01 宏碁股份有限公司 模擬攜帶式裝置之感測訊號的虛擬實境系統、虛擬實境系統之控制方法、頭戴式顯示裝置、主機、攜帶式裝置
US20190079288A1 (en) * 2017-09-13 2019-03-14 Htc Corporation Head mounted display system and image display method thereof
CN107608509A (zh) * 2017-09-14 2018-01-19 国家电网公司 一种vr控制器及巡检头戴设备
US11074292B2 (en) * 2017-12-29 2021-07-27 Realwear, Inc. Voice tagging of video while recording
TWI664438B (zh) * 2018-03-09 2019-07-01 Industrial Technology Research Institute 擴增實境裝置
CN110244459B (zh) 2018-03-09 2021-10-08 财团法人工业技术研究院 增强现实装置
US10665028B2 (en) * 2018-06-04 2020-05-26 Facebook, Inc. Mobile persistent augmented-reality experiences
TWI691891B (zh) * 2018-09-07 2020-04-21 財團法人工業技術研究院 多重目標物資訊顯示方法及裝置
CN111260792A (zh) * 2018-12-03 2020-06-09 广东虚拟现实科技有限公司 虚拟内容显示方法、装置、终端设备及存储介质
JP7453490B2 (ja) * 2019-01-21 2024-03-21 株式会社アルファコード ユーザ属性推定装置およびユーザ属性推定方法
WO2021235316A1 (ja) * 2020-05-21 2021-11-25 ソニーグループ株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2022110509A (ja) * 2021-01-18 2022-07-29 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
WO2024043526A1 (ko) * 2022-08-25 2024-02-29 삼성전자 주식회사 디지털 아이템에 대응되는 가상 이미지를 제공하는 방법 및 증강 현실 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102592178A (zh) * 2010-12-07 2012-07-18 卡西欧计算机株式会社 信息显示系统、信息显示装置、信息提供装置以及存储介质
CN102714691A (zh) * 2009-12-18 2012-10-03 松下电器产业株式会社 信息显示装置、显示控制用集成电路、显示控制程序及显示控制方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW362207B (en) 1997-05-08 1999-06-21 Shimadzu Corp Display system
JP3928211B2 (ja) 1997-05-08 2007-06-13 株式会社島津製作所 表示システム
JP4329264B2 (ja) * 2000-12-27 2009-09-09 セイコーエプソン株式会社 アクセス権限レベル制御装置及び方法
JP2006099227A (ja) * 2004-09-28 2006-04-13 Olympus Corp 情報重畳表示システム
JP4705355B2 (ja) * 2004-10-04 2011-06-22 株式会社日立製作所 無線タグのデータ表示システム、携帯型コンピュータおよび無線タグのデータ表示方法
JP5074827B2 (ja) * 2007-06-01 2012-11-14 キヤノン株式会社 画像提示装置及び方法
EP2378392B1 (en) * 2008-12-25 2016-04-13 Panasonic Intellectual Property Management Co., Ltd. Information displaying apparatus and information displaying method
JP5207145B2 (ja) 2009-12-24 2013-06-12 ブラザー工業株式会社 ヘッドマウントディスプレイ
US8908043B2 (en) * 2010-04-12 2014-12-09 Symbol Technologies, Inc. System and method for location-based operation of a head mounted display
JP5651372B2 (ja) * 2010-05-18 2015-01-14 株式会社Nttドコモ 投稿情報制御装置、投稿情報制御システム及び投稿情報制御方法
JP5638365B2 (ja) * 2010-06-08 2014-12-10 株式会社ソニー・コンピュータエンタテインメント コンテンツ保護システム
JP5676982B2 (ja) * 2010-08-31 2015-02-25 キヤノン株式会社 画像生成装置、画像生成方法、及びプログラム
US8723886B2 (en) * 2010-09-08 2014-05-13 Navteq B.V. Generating a multi-layered geographic image and the use thereof
JP5674441B2 (ja) * 2010-12-02 2015-02-25 新日鉄住金ソリューションズ株式会社 情報処理システム、その制御方法及びプログラム
JP5859843B2 (ja) * 2010-12-24 2016-02-16 新日鉄住金ソリューションズ株式会社 情報処理装置、情報処理方法、及びプログラム
JP5776201B2 (ja) * 2011-02-10 2015-09-09 ソニー株式会社 情報処理装置、情報共有方法、プログラム及び端末装置
US9275254B2 (en) * 2011-03-22 2016-03-01 Fmr Llc Augmented reality system for public and private seminars
WO2013028813A1 (en) * 2011-08-23 2013-02-28 Microsoft Corporation Implicit sharing and privacy control through physical behaviors using sensor-rich devices
US9092600B2 (en) * 2012-11-05 2015-07-28 Microsoft Technology Licensing, Llc User authentication on augmented reality display device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102714691A (zh) * 2009-12-18 2012-10-03 松下电器产业株式会社 信息显示装置、显示控制用集成电路、显示控制程序及显示控制方法
CN102592178A (zh) * 2010-12-07 2012-07-18 卡西欧计算机株式会社 信息显示系统、信息显示装置、信息提供装置以及存储介质

Also Published As

Publication number Publication date
JP2014186434A (ja) 2014-10-02
US20140285521A1 (en) 2014-09-25
CN104062759A (zh) 2014-09-24
US9824496B2 (en) 2017-11-21
JP6160154B2 (ja) 2017-07-12

Similar Documents

Publication Publication Date Title
CN104062759B (zh) 信息显示系统、信息显示方法、以及头戴式显示装置
JP6476643B2 (ja) 頭部装着型表示装置、情報システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム
US20220188539A1 (en) Eyewear including sign language to speech translation
CN104469464B (zh) 图像显示装置、控制图像显示装置的方法、计算机程序以及图像显示系统
JP6209906B2 (ja) 頭部装着型表示装置、頭部装着型表示装置を制御する方法、画像表示システム
CN107076992A (zh) 适应于环境的头戴式显示装置
CN103869470B (zh) 显示装置及其控制方法、头戴式显示装置及其控制方法
US20160225189A1 (en) Head mounted display, information processing apparatus, image display apparatus, image display system, method for sharing display of head mounted display, and computer program
US8963956B2 (en) Location based skins for mixed reality displays
JP6492451B2 (ja) 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
JP6705124B2 (ja) 頭部装着型表示装置、情報システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム
US10949055B2 (en) Display system, display apparatus, control method for display apparatus
JP6492419B2 (ja) 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム、画像表示システム、および、情報処理装置
CN104423583A (zh) 头部佩戴型显示装置、控制头部佩戴型显示装置的方法、图像显示系统及信息处理装置
US20210375301A1 (en) Eyewear including diarization
JP2016142887A (ja) 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
CN106537404B (zh) 根据头戴式装置中的应用认证状态来控制硬件资源的性能或精度
US11783582B2 (en) Blindness assist glasses
JP6634697B2 (ja) 頭部装着型表示装置
US11551688B1 (en) Wearable speech input-based vision to audio interpreter
JP6229381B2 (ja) 頭部装着型表示装置、頭部装着型表示装置を制御する方法、画像表示システム、情報処理装置
JP2016091348A (ja) 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
JP6828235B2 (ja) 頭部装着型表示装置、頭部装着型表示装置の表示を共有する方法、コンピュータープログラム
JP6500382B2 (ja) 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
JP6394174B2 (ja) 頭部装着型表示装置、画像表示システム、頭部装着型表示装置を制御する方法、および、コンピュータープログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant