CN113728621A - 头戴式信息处理装置 - Google Patents

头戴式信息处理装置 Download PDF

Info

Publication number
CN113728621A
CN113728621A CN201980095249.6A CN201980095249A CN113728621A CN 113728621 A CN113728621 A CN 113728621A CN 201980095249 A CN201980095249 A CN 201980095249A CN 113728621 A CN113728621 A CN 113728621A
Authority
CN
China
Prior art keywords
content
key
head
information processing
registration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980095249.6A
Other languages
English (en)
Inventor
高见泽尚久
秋山仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maxell Ltd filed Critical Maxell Ltd
Publication of CN113728621A publication Critical patent/CN113728621A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39—Control of the bit-mapped memory
    • G09G5/393—Arrangements for updating the contents of the bit-mapped memory
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39—Control of the bit-mapped memory
    • G09G5/395—Arrangements specially adapted for transferring the contents of the bit-mapped memory to the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/66—Transforming electric information into light information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Dermatology (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

提供一种能够提高用户的便利性的头戴式信息处理装置。因此，密钥内容对信息登记部(211)在接收到来自用户的指示时或者装置停止时即事件发生时，将事件发生时的内容的状态与从事件发生时的摄像机(111)的图像得到的登记密钥对应起来，作为密钥内容对信息(216)保存于存储器(128)。密钥内容对恢复部(212)在装置启动时基于密钥内容对信息(216)判断装置启动时的摄像机(111)的图像与登记密钥是否匹配，在匹配的情况下，恢复与匹配的登记密钥相对应的内容的状态。

Description

头戴式信息处理装置
技术领域
本发明涉及一种在被穿戴于用户的头部的状态下借助视觉或者听觉向用户提供各种信息的头戴式信息处理装置。
背景技术
在专利文献1中示出了一种头戴式显示器装置，其显示利用拍摄车辆的周围的多个摄像机拍摄到的影像，其中，根据穿戴头戴式显示器装置的乘员的头部的动作来切换所显示的影像。
现有技术文献
专利文献
专利文献1：日本特开2018-129732号公报
发明内容
发明要解决的问题
头戴式信息处理装置也被称为HMD(Head Mounted Display，头戴式显示器)，能够在被穿戴于用户的头部的状态下在显示部中显示增强现实(AR)的信息、虚拟现实(VR)的信息。在头戴式信息处理装置中，近年来，能够使现实世界和虚拟世界实时且无缝地融合，从而使用户进行宛如在现场存在虚拟的物体那样的体验。另外，这样的头戴式信息处理装置以利用了AR、VR的内容为代表，搭载有很多内容。
用户在选择搭载于头戴式信息处理装置的各种内容的情况下，在穿戴了头戴式信息处理装置之后，需要一边观察显示部中显示的菜单等一边使用遥控器等进行选择操作。其结果，需要费事儿地寻找遥控器和进行选择操作，因此用户的便利性有可能降低。特别是，在菜单的层次较深的情况下，可能需要寻找目标的内容，因此便利性更加降低。另外，在进行这样的选择操作时，由于该行为本身，可能使用户对内容的沉浸感减弱。
本发明是鉴于这样的情况而完成的，其目的之一在于提供一种能够提高用户的便利性的头戴式信息处理装置。
本发明的上述目的以及其他目的和新的特征将根据本说明书的描述和所附附图变得明确。
用于解决问题的方案
对在本申请中公开的发明中的代表性的技术方案的概要进行简单说明，如下所述。
代表性的头戴式信息处理装置是在被穿戴于用户的头部的状态下借助视觉或者听觉向用户提供各种信息的装置，具备显示预定的图像的显示部、拍摄装置外部的图像的摄像机、存储器、执行内容的内容执行部以及控制内容执行部的内容控制部。内容控制部具备密钥内容对信息登记部和密钥内容对恢复部。密钥内容对信息登记部在事件发生时，将事件发生时的内容的状态与从事件发生时的摄像机的图像得到的登记密钥对应起来，作为密钥内容对信息保存到存储器，所述事件发生时是接收到来自用户的指示时或者装置停止时。在装置启动时，密钥内容对恢复部基于密钥内容对信息，判断是否有装置启动时的摄像机的图像与登记密钥的匹配，在有匹配的情况下，恢复与所匹配的登记密钥相对应的内容的状态。
发明的效果
若简单地说明由在本申请中公开的发明中的代表性的技术方案得到的效果，则在头戴式信息处理装置中能够提高用户的便利性。
附图说明
图1是表示本发明的实施方式1的头戴式信息处理装置的概略结构例的框图。
图2是表示图1中的CPU周围的主要部分的结构例的框图。
图3是表示图2中的密钥内容对信息登记部的动作例的流程图。
图4是表示图2中的密钥内容对恢复部的动作例的流程图。
图5是表示图2中的密钥内容对信息的结构例的概略图。
图6的(a)、图6的(b)以及图6的(c)是表示与图5相对应的头戴式信息处理装置的使用状况的一例的示意图。
图7的(a)、图7的(b)以及图7的(c)是表示与图5相对应的头戴式信息处理装置的使用状况的另一例的示意图。
图8的(a)和图8的(b)是表示图2中的密钥内容对信息的另一结构例的概略图。
图9的(a)和图9的(b)是说明在图2中用户对登记密钥的使用例的图。
图10的(a)是说明在图2中用户对登记密钥的另一使用例的图，图10的(b)是表示与图10的(a)相对应的密钥内容对信息的结构例的概略图。
图11是说明在本发明的实施方式2的头戴式信息处理装置中，图2的密钥内容对恢复部的动作例的图。
图12的(a)、(b)、(c)以及(d)是说明在本发明的实施方式3的头戴式信息处理装置中，图2的密钥内容对恢复部的动作例的图。
图13的(a)、(b)、(c)以及(d)是说明在本发明的实施方式3的头戴式信息处理装置中，图2的密钥内容对恢复部的另一动作例的图。
图14是表示本发明的实施方式5的头戴式信息处理装置周围的概略结构例的框图。
附图标记说明
100：头戴式信息处理装置(HMD)；111：摄像机；112：右眼视线检测器；113：左眼视线检测器；114：振动发生器；115：刺激发生器；116：外周音麦克风；117：发声音麦克风；118：耳机；119：操作输入接口；120：显示器(显示部)；121：深度传感器；122：加速度传感器；123：陀螺仪传感器；124：地磁传感器；125：CPU；126：程序；127：信息数据；128：存储器；129：生物体传感器；132：非接触式传感器；140：总线；150：天线；151：通信接口；201：各种传感器；205：内容控制部；206：内容执行部；210：候选密钥提取部；211：密钥内容对信息登记部；212：密钥内容对恢复部；215：密钥设定信息；216：密钥内容对信息；601：用户；602：时钟；603：日历；604：动作再现内容；605：文档制作内容；902：服务器装置；903：通信接口；904：天线；905：CPU；906：程序；907：信息数据；908：存储器；910：通信网络；920：总线；1001、1002：接入点装置。
具体实施方式
以下，基于附图详细地说明本发明的实施方式。需要说明的是，在用于说明实施方式的所有图中，原则上对相同的构件标注相同的附图标记，并省略了其重复的说明。
(实施方式1)
《头戴式信息处理装置的概略》
图1是表示本发明的实施方式1的头戴式信息处理装置的概略结构例的框图。图1的头戴式信息处理装置100在被穿戴于用户的头部的状态下借助视觉或者听觉向用户提供各种信息。在说明书中，也将头戴式信息处理装置100称为HMD100。HMD100具备摄像机111、外周音麦克风116、发声音麦克风117、耳机118、操作输入接口119、显示器(显示部)120、CPU(Central Processing Unit)125、存储器128、天线150以及通信接口151。
另外，该HMD100具备振动发生器114、刺激发生器115以及各种传感器。各种传感器包括右眼视线检测器112、左眼视线检测器113、非接触式传感器132、深度传感器121、加速度传感器122、陀螺仪传感器123、地磁传感器124以及生物体传感器129等。这些各构成部分别经由总线140相互连接。
显示器(显示部)120例如是液晶面板等，以AR或者VR的图像等为代表，显示预定的图像。摄像机111例如设于用户的双眼的前方，拍摄装置外部的图像(例如用户前方的风景)。所拍摄的图像作为现实空间的图像而由显示器120显示。右眼视线传感器112和左眼视线传感器113分别检测右眼和左眼的视线。检测用户的视线的技术通常已知为眼动追踪。例如，在利用角膜反射的眼动追踪中，向面部照射红外线LED(Light Emitting Diode)并利用红外线摄像机进行拍摄，将通过红外线LED的照射产生的反射光在角膜上的位置(角膜反射)作为基准点，基于瞳孔相对于角膜反射的位置的位置来检测视线。
振动发生器114根据来自CPU125的指示产生振动。振动发生器114例如通过将由CPU125生成的向用户的通知信息转换为振动，从而对用户进行识别度更高的通知。刺激发生器115例如以电刺激等为代表而产生预定的刺激。外周音麦克风116例如被穿戴于用户的耳部附近，收集在装置外部产生的周围音并转换为声音信号。发声音麦克风117收集来自用户的发声声音并将其转换为声音信号。耳机118将装置内部的声音信号转换为声音(声波)并向用户播放。耳机118既可以是气导音型，也可以是骨导音(骨传导)型。
操作输入接口119代表性地是遥控器等，接收用户输入的各种操作输入信号。操作输入接口119也可以能够经由通信接口151接收各种操作输入信号。非接触式传感器132例如通过所照射的红外线被对象物反射而返回的时间来判断距离，或利用与对象物之间的电磁感应或者与对象物之间的电容变化等来判断与对象物之间的距离，检测靠近HMD100的对象物。深度传感器121以面的方式测定到物体的距离。深度传感器部121例如有利用了红外线、激光等的反射的传感器，但也可以通过其他方式实现，诸如根据利用安装位置不同的多个摄像机拍摄的图像的视差来获得距离信息等。
加速度传感器122通过检测HMD100的加速度而检测HMD100的运动、振动、冲击等。陀螺仪传感器123通过检测旋转方向的角速度而检测HMD100的纵向、横向、倾斜的姿态。地磁传感器124通过检测地球的磁力而检测HMD100所朝向的方向。因而，若使用陀螺仪传感器123或者地磁传感器124，进而根据情况组合使用加速度传感器122，则能够检测HMD100(以及穿戴着HMD100的用户)的姿态。生物体传感器129例如通过检测以虹膜或者视网膜等为代表的用户的生物体信息而判断各用户。
存储器128例如是闪速存储器和工作用的RAM等，存储程序126和各种信息数据127。程序126包括OS(Operating System，操作系统)以及在该OS上动作的各种内容用程序等。信息数据127中包括在程序126中使用的各种参数等。CPU125通过执行存储于存储器128的程序126，从而向用户提供所期望的内容，另外，控制整个HMD100的动作。CPU125也可以包括GPU(Graphics Processing Unit，图形处理单元)等各种运算处理专用处理器。
通信接口151例如经由天线150进行近距离无线通信。作为近距离无线通信的方式，例如可列举出电子标签、Bluetooth(注册商标)、IrDA(Infrared Data Association，红外线数据标准协会)、Zigbee(注册商标)、HomeRF(Home Radio Frequency，注册商标)、无线LAN(IEEE802.11a，IEEE802.11b，IEEE802.11g)等。
《CPU周围的主要部分的详细情况》
图2是表示图1中的CPU周围的主要部分的结构例的框图。在图2中，CPU125具备内容控制部205和内容执行部206。通过CPU125执行存储于存储器128的程序126，在CPU125上安装内容控制部205和内容执行部206。内容执行部206根据用户的请求等执行各种内容。内容控制部205控制内容执行部206。需要说明的是，内容控制部205和内容执行部206不限于由CPU125进行的程序处理(软件)，根据情况，也可以通过FPGA(Field Programmable GateArray，现场可编程门阵列)、各种加速器等硬件、或者硬件和软件的组合来安装。
内容控制部205具备候选密钥提取部210、密钥内容对信息登记部211、密钥内容对恢复部212。候选密钥提取部210基于摄像机111的图像、各种传感器201的检测结果、通信接口151的接收数据中的至少任一个而提取候选密钥。此时，预先通过存储器128内的密钥设定信息215确定将摄像机111的图像、各种传感器201的检测结果、通信接口151的接收数据中的哪个作为候选密钥。需要说明的是，各种传感器包含右眼视线检测器112、左眼视线检测器113、非接触式传感器132、深度传感器121、加速度传感器122、陀螺仪传感器123、地磁传感器124以及生物体传感器129等。
在事件发生时，密钥内容对信息登记部211使候选密钥提取部210提取候选密钥，从该候选密钥中确定事件发生时的密钥。以摄像机图像为例，候选密钥例如相当于摄像机图像所包含的单个或者多个对象。密钥内容对信息登记部211将该单个或者多个对象中的1个对象(单个或者多个候选密钥中的1个密钥)确定为事件发生时的密钥。
然后，密钥内容对信息登记部211将事件发生时的内容执行部206的内容的状态与事件发生时的密钥对应起来，作为密钥内容对信息216保存到存储器128。在说明书中，将由该密钥内容对信息登记部211确定的事件发生时的、作为密钥内容对信息216而被保存的密钥称为登记密钥。事件发生时是指，接收到装置停止信号(例如，电源断开信号等)POFF时即装置停止时，或者借助用户输入信号CMD而接收到来自用户的预定的指示时。
另一方面，密钥内容对恢复部212在接收到装置启动信号(例如，电源接通信号等)PON时即装置启动时，使候选密钥提取部210提取候选密钥。然后，密钥内容对恢复部212基于密钥内容对信息216判断是否有所提取的候选密钥与登记密钥的匹配，在有匹配的情况下，恢复与该登记密钥相对应的内容的状态。
在此，作为HMD100的装置停止时，代表性地可列举出(A)用户从头上摘下HMD100时、(B)在用户将HMD100穿戴到头上的状态下断开电源时、(C)用户从头上摘下HMD100之后放置到某处而断开电源时等。电源断开未必意味着电源切断，有时也意味着向睡眠模式的转移。(A)例如通过使用HMD100的面部侧的非接触式传感器来检测。在从头上摘下HMD100的情况下，根据HMD100，存在自动将电源断开的情况，或者自动向睡眠模式转移的情况。(C)与(A)的情况不同，对象是不会自动断开电源(或者不向睡眠模式转移)的HMD100。
用户输入信号CMD例如根据遥控器等的中断按钮或者借助画面上的菜单的中断指示等而被发出，起到诸如书签、指南、还原点的作用。另外，内容的状态表示内容的类别，或者除了该内容的类别之外还表示内容上的执行状态。内容的类别例如是用于区别电影等动作再现内容、角色扮演等游戏内容、观光等体验内容、文档制作内容、聊天室内容等的信息。在该情况下，密钥内容对信息登记部211例如保存去往内容的文件路径等作为密钥内容对信息216中的内容的状态即可。密钥内容对恢复部212基于该文件路径等启动内容即可。
另一方面，内容上的执行状态例如表示动作再现内容上的再现位置、游戏内容、体验内容上的进展位置、文档制作内容上的文档文件名、聊天室内容中的参加者的环境等。在该情况下，密钥内容对信息登记部211例如适当地保存去往内容的文件路径、去往各种设定文件的文件路径、去往文档文件的文件路径、或者CPU的参数值(寄存器值、计数器值)等作为密钥内容对信息216中的内容的状态即可。密钥内容对恢复部212基于该所保存的各种信息，除启动内容之外，还恢复该内容上的执行状态即可。
《密钥内容对信息登记部和密钥内容对恢复部的详细情况》
图3是表示图2中的密钥内容对信息登记部的动作例的流程图。图4是表示图2中的密钥内容对恢复部的动作例的流程图。在此，以密钥(候选密钥和登记密钥)为摄像机111的图像的情况为例进行说明。在图3中，密钥内容对信息登记部211在接收到事件信号(装置停止信号POFF或者用户输入信号CMD)时(步骤S101)，执行步骤S102的处理。在步骤S102中，密钥内容对信息登记部211从内容执行部206获取事件发生时的内容的状态(e)。
接下来，密钥内容对信息登记部211基于事件发生时的摄像机111的图像，使候选密钥提取部210提取候选密钥，并从其中确定登记密钥(E)(步骤S103)。接下来，密钥内容对信息登记部211将在步骤S102中获取的内容的状态(e)与在步骤S103中确定的登记密钥(E)建立对应关系，并作为密钥内容对信息216而保存到存储器128(步骤S104)，结束处理。
另一方面，在图4中，密钥内容对恢复部212在接收到装置启动信号时(步骤S201)，执行步骤S202的处理。在步骤S202中，密钥内容对恢复部212判断在存储器128中是否保存有密钥内容对信息216。在没有保存密钥内容对信息216的情况下，密钥内容对恢复部212在显示器120上显示装置启动后的规定的初始画面(例如菜单画面等)(步骤S211)，结束处理。
另一方面，当在步骤S202中保存有密钥内容对信息216的情况下，密钥内容对恢复部212基于装置启动时的摄像机111的图像，使候选密钥提取部210提取候选密钥(E’)(步骤S203)。接下来，密钥内容对恢复部212从存储器128依次读取密钥内容对信息216内的登记密钥(E)(步骤S204)，并且判断是否有该登记密钥(E)与在步骤S203中提取的候选密钥(E’)(换言之，摄像机图像)的匹配(步骤S205)。
当在步骤S205中无匹配的情况下，密钥内容对恢复部212在步骤S211中显示规定的初始画面，结束处理。另一方面，当在步骤S205中有匹配的情况下，密钥内容对恢复部212基于密钥内容对信息216获取与所匹配的登记密钥(E)相对应的内容的状态(步骤S206)。然后，密钥内容对恢复部212基于装置停止时设定、初始设定(步骤S207、S208)，启动对应的内容(步骤S209)，或者在此基础上还恢复该内容上的执行状态(步骤S210)，结束处理。
在该例中，能够在装置停止时供用户任意地选择是恢复图2的说明中所述的内容的类别，还是恢复内容上的执行状态(步骤S207)，或者对每个内容在初始设定中固定地确定(步骤S208)。这些装置停止时的信息或者初始设定时的信息保存于存储器128。例如，在视频再现内容的情况下，用户能够在装置停止时任意地选择是使视频从最初再现还是使视频从中断位置再现，也能够在初始设定中固定地确定。需要说明的是，该确定方法并不特别限定于装置停止时的用户设定或者初始设定，能够使用各种各样的方法。
图5是表示图2中的密钥内容对信息的结构例的概略图。图6的(a)、图6的(b)以及图6的(c)是表示与图5相对应的头戴式信息处理装置的使用状况的一例的示意图，图7的(a)、图7的(b)以及图7的(c)是表示与图5相对应的头戴式信息处理装置的使用状况的另一例的示意图。
在图6的(a)中，穿戴着HMD100的用户601如图6的(c)所示那样使用HMD100的视频再现内容604来欣赏电影“登山”，在其中途的再现时间“1：10：15”朝向时钟602方向，同时对HMD100指示装置停止(例如将电源断开)。此时，如图6的(b)所示，摄像机111拍摄时钟602。另一方面，在图7的(a)中，穿戴了HMD100的用户601使用HMD100的文档制作内容605进行文档制作，在保存了该文档文件之后一边朝向日历603方向一边对HMD100指示装置停止。此时，如图7的(b)所示，摄像机111拍摄日历603。
其结果，图5的密钥内容对信息216a将作为内容的状态(内容上的执行状态)的电影“登山”的再现时间“1：10：15”与作为登记密钥的时钟602对应起来并保存。另外，图5的密钥内容对信息216a将作为内容的状态(内容上的执行状态)的文档制作内容605上的文档文件与作为登记密钥的日历603对应起来并保存。
由此，在用户601之后穿戴HMD100、并在朝向时钟602的方向的同时指示装置启动(例如将电源接通)时，HMD100从再现时间“1：10：15”开始自动地再现电影“登山”。其结果，用户601不用特别地进行选择操作，就能够接着上次恢复进行电影欣赏。另外，在用户601穿戴HMD100、并在朝向日历603的方向的同时指示装置启动时，HMD100自动地启动文档制作内容605上的预定的文档文件。其结果，用户601不用特别地进行选择操作，就能够接着上次恢复进行文档制作。
需要说明的是，在此，为了简化说明，将时钟602和日历603确定为登记密钥，但在实用上，例如也可以将设于起居室的沙发、设于书房的书架等确定为登记密钥。作为具体的使用例，设想用户在起居室使用HMD100欣赏电影欣赏到中途，之后在书房中使用HMD100进行文档制作进行到中途的情况。在该情况下，当用户之后在起居室一边看沙发一边启动HMD100的情况下，自动地再现电影的后续内容，当在书房一边看书架一边启动HMD100的情况下，自动地构建能够进行后续的文档制作的环境。
在此，作为由密钥内容对信息登记部211确定的登记密钥，例如可列举出直接使用摄像机111的整个图像的方式、或者检测摄像机111的图像的中心部所包含的1个对象来使用的方式等。在前述的图5、图6、图7的例子中，使用后者的方式。在后者的方式的情况下，密钥内容对信息登记部211例如使候选密钥提取部210从装置停止时的摄像机图像整体中提取单个或者多个对象作为候选密钥。然后，密钥内容对信息登记部211从所提取的单个或者多个对象(候选密钥)中将摄像机图像的中心部所包含的1个对象确定为登记密钥，保存为密钥内容对信息216。
此时，候选密钥提取部210通过进行以边缘检测、角落检测为代表的图像处理、或者使用人工智能(AI)的图像处理等，提取摄像机图像整体所包含的单个或者多个对象的信息(例如，其形状、种类、特征点等)。该提取出的单个或者多个对象的信息(形状、种类、特征点等)中的1个对象的信息成为登记密钥。另外，在后者的方式的情况下，密钥内容对恢复部212例如使候选密钥提取部210从装置启动时的摄像机图像整体中提取单个或者多个候选密钥(在该例中为对象的信息)。然后，例如在所提取的单个或者多个候选密钥(换言之摄像机图像)中包含登记密钥的情况下，密钥内容对恢复部212判断为有匹配，在不包含登记密钥的情况下判断为无匹配。
另一方面，在前者的方式的情况下，密钥内容对恢复部212例如比较被保存为登记密钥的摄像机图像整体和装置启动时拍摄到的摄像机图像整体(换言之1个候选密钥)，根据其一致率是否为基准值以上来判断候选密钥与登记密钥是否有匹配。在该情况下，能够谋求处理的容易化等，但特别是由于摄像机图像的比例尺等的影响，无有匹配的判断结果的精度有可能降低。因而，在有无匹配的判断结果的精度的观点中，期望的是使用后者的方式。
《密钥的各种变形例》
图8的(a)和图8的(b)是表示图2中的密钥内容对信息的另一结构例的概略图。在图8的(a)中示出代替摄像机111的图像而使用图2的各种传感器201的检测结果作为登记密钥的例子。在图8的(b)中示出使用摄像机111的图像和各种传感器201的检测结果的组合作为登记密钥的例子。
在图8的(a)所示的密钥内容对信息216b中，以在从头上摘下的状态下能够进行电源的接通/断开的HMD100为例，基于图2的密钥设定信息215将登记密钥设定为HMD100的姿态(例如，反扣、右侧朝下放置等)。例如，若用户在反扣HMD100的状态下将电源接通，则HMD100自动地再现电影“登山”。HMD100的姿态例如由陀螺仪传感器123、地磁传感器124等检测，作为其检测结果的传感器输出值等成为密钥(候选密钥和登记密钥)。
在图8的(b)所示的密钥内容对信息216c中，登记密钥设定为HMD100的姿态(例如，反扣)和摄像机图像(例如，时钟)的组合。例如，若用户将HMD100反扣，并在该状态下将摄像机111的方向朝向时钟而将电源接通，则HMD100自动地再现电影“登山”。另一方面，在用户将HMD100的右侧朝下，并在该状态下使摄像机111的方向朝向时钟并将电源接通，则HMD100自动地启动文档文件。像这样，若使用摄像机图像和传感器检测结果的组合，则能够增加能够使用的登记密钥的数量，或者提高密钥是否有匹配的判断的可靠性(精度)。
图9的(a)和图9的(b)是说明在图2中用户对登记密钥的使用例的图。特别地，在用户601在HMD100上使用VR的内容的情况下，由于现实的视野全部被阻挡，因此有时难以对摘下HMD100时朝向哪里留下印象。因此，例如通过将装置停止时用户601朝向的墙壁的方向设为登记密钥，能够扩大登记密钥的有效范围。
在图9的(a)和图9的(b)的例子中，将房间的4面的墙壁中的任意墙壁确定为登记密钥。由此，用户601不用在意精细的方向，通过在大致朝向4面的墙壁中的任意墙壁的状态下摘下HMD100，并存储该墙壁的方向，就能够确定登记密钥。其结果，用户601对登记密钥的处理变得容易。另外，若分别用上半部分、下半部分等对4面的墙壁进行细分化，则还能够在保持处理容易性的同时增加密钥的数量。
需要说明的是，在使用这样的方式的情况下，登记密钥例如基于作为地磁传感器124等的检测结果的传感器输出值来确定。其中，此时，例如，以东北～西北的范围(即预定的传感器输出值范围)为墙壁V，西北～西南的范围为墙壁W的方式，登记密钥具有一定程度的有效范围。在装置启动时，若经由候选密钥提取部210得到传感器输出值(候选密钥)，则判断该传感器输出值(候选密钥)与传感器输出值范围(登记密钥)是否有匹配。当传感器输出值范围(登记密钥)内包含传感器输出值(候选密钥)的情况下，该传感器输出值范围(登记密钥)有匹配。
图10的(a)是说明在图2中用户对登记密钥的另一使用例的图，图10的(b)是表示与图10的(a)相对应的密钥内容对信息的结构例的概略图。在图10的(a)和图10的(b)的例子中，作为登记密钥，代替摄像机图像而使用图2的通信接口151的接收数据。具体而言，该接收数据例如是信标的识别信息。如前所述，通信接口151进行近距离无线通信。
通常而言，进行近距离无线通信的装置定期地输出包含本装置的识别信息的信标。例如，无线LAN的接入点装置定期地输出SSID(Service Set Identifier，服务集标识符)作为信标的识别信息。因此，HMD100能够通过经由通信接口151接收信标的识别信息，而使用该信标的识别信息确定登记密钥。
在图10的(a)中，用户601在来自接入点装置1001的SSID#1的接收区域内，使用HMD100执行内容A，并在其中途对HMD100指示装置停止。之后，用户601移动场所，在来自接入点装置1002的SSID#2的接收区域内，使用HMD100执行内容B，并在其中途对HMD100指示装置停止。
其结果，图10的(b)的密钥内容对信息216d包括内容A与作为登记密钥的SSID#1的对应关系和内容B与作为登记密钥的SSID#2的对应关系。之后，若用户601在SSID#1的接收区域内启动HMD100，则密钥内容对恢复部212判断由候选密钥提取部210提取的候选密钥(在此，使通信接口151的接收数据“SSID#1”)与保存于图10的(b)的登记密钥是否有匹配。在该情况下，登记密钥“SSID#1”有匹配，因此密钥内容对恢复部212自动地启动对应的内容A。同样地，若用户601在SSID#2的接收区域内启动HMD100，则密钥内容对恢复部212自动地启动内容B。
像这样，在针对每个场所分别设置不同的信标发送器(在图10的(a)的例子中为接入点装置)的情况下，用户601能够根据启动HMD100的场所，恢复不同的内容的状态。作为场所的单位，例如可列举出房间单位、建筑物单位、地区单位等。另外，除了像这样在每个场所设置信标发送器的情况之外，还能够适用于用户自身携带信标发送器的情况。在该情况下，在持有信标发送器的用户在某个内容的状态下停止了HMD的情况下，若持有相同信标发送器的相同或者不同的用户之后启动HMD，则恢复该停止时的内容的状态。
另外，在此，作为登记密钥，使用了通信接口151的接收数据，但根据情况，也能够将摄像机111的图像或者各种传感器201的检测结果与其组合。例如，在组合摄像机111的图像的情况下，即使是相同的内部装饰的房间，只要房间本身不同，就能够利用信标的识别信息来区别登记密钥，在此基础上，能够针对每个房间利用摄像机111的图像来区别登记密钥。
作为其他登记密钥的使用例，可列举出如下方法：用户在利用摄像机拍摄到要再现的内容的包的状态下对HMD指示装置停止，下次在能够利用摄像机拍摄该包的状态下对HMD指示装置启动。另外，可列举出将利用右眼视线检测器112和左眼视线检测器113检测到的视线的位置设为登记密钥的方法。例如，用户当在再现预定的内容的过程中以观看画面右上的状态指示了装置停止的情况下，下次若以观看画面右上的状态指示装置启动，则能够自动地再现该预定的内容。而且，在HMD100具备GPS接收机的情况下，也能够将GPS信息确定为登记密钥。
《由多个用户使用HMD的情况的应对》
在由多个用户使用HMD100的情况下，例如通过将摄像机111的图像和各种传感器201的检测结果的组合设为登记密钥，能够对每个用户独立地确定登记密钥。具体而言，作为各种传感器201，例如使用检测以虹膜或者视网膜等为代表的用户的生物体信息的生物体传感器129即可。另外，根据情况，也能够根据由生物体传感器129获取的血流、脉搏等的图案来区别用户，或根据能够由加速度传感器122或者陀螺仪传感器123检测到的穿戴时的习惯来区别用户。
《实施方式1的主要效果》
以上，通过使用实施方式1的头戴式信息处理装置(HMD)，代表性地，能够提高用户的便利性。具体而言，用户无需费事儿地通过遥控器等执行选择操作，就能够接着上次停止时的状态使用HMD。另外，此时，HMD能够不是例如在电影欣赏、文档制作之后继续文档制作那样直接继续上次停止时的状态，而是如电影欣赏、文档制作之后继续电影欣赏那样一边利用登记密钥区别内容一边继续上次停止时的状态。而且，用户不用进行选择操作这样的多余的操作就继续上次停止时的状态，因此能够持续针对内容的沉浸感。
(实施方式2)
《所期望的内容未启动的情况的应对》
图11是说明在本发明的实施方式2的头戴式信息处理装置中，图2的密钥内容对恢复部的动作例的图。在前述的实施方式1中，以在登记密钥有匹配的情况下启动所期望的内容为前提，但根据密钥是否有匹配的判断精度、用户对登记密钥的判断错误等，在一些情况下，有时会启动错误的内容。因此，密钥内容对恢复部212在恢复内容的状态之后，判断在预定期间内是否从用户接收到取消指示，在接收到取消指示的情况下，停止当前的内容，在显示器(显示部)120上显示装置启动后的规定的初始画面。
在图11的例子中，HMD100在装置启动时在用户601期待内容1的启动的状态下启动了内容2。因此，用户601在之后的预定期间内，例如通过摇头等发出取消指示。密钥内容对恢复部212接受该取消指示，在显示器(显示部)120上显示装置启动后的规定的初始画面(例如，菜单画面等)。需要说明的是，由陀螺仪传感器123检测摇头的动作。
取消指示的方法当然不限于此，例如包含遥控器的取消按钮等，能够使用各种各样的方法。另外，密钥内容对恢复部212在此显示了规定的初始画面，但在某些情况下，也可以使用诸如依次再现登记于密钥内容对信息216的内容，并每次再现时判断有无用户的取消指示的方法。
《实施方式2的主要效果》
以上，通过使用实施方式2的头戴式信息处理装置(HMD)，除实施方式1所述的各种效果之外，还能够应对启动了错误的内容的情况，能够提高用户的便利性。
(实施方式3)
《匹配有多个登记密钥的情况的应对》
图12的(a)、图12的(b)、图12的(c)以及图12的(d)是说明在本发明的实施方式3的头戴式信息处理装置中，图2的密钥内容对恢复部的动作例的图。在此，假定在存储器128保存有图5所示那样的密钥内容对信息216a的情况。在图12的(a)和图12的(b)中，穿戴HMD100的用户601在利用摄像机111拍摄时钟602和日历603这两者的状态下指示装置启动。
在该情况下，密钥内容对恢复部212使用候选密钥提取部210提取时钟602和日历603这两个对象作为候选密钥。如图5的密钥内容对信息216a所示，这两个候选密钥作为登记密钥保存到存储器128。像这样，当在装置启动时的摄像机111的图像中包括多个登记密钥的情况下，如图12的(c)或者图12的(d)所示，密钥内容对恢复部212在显示器(显示部)120上显示内容的选择画面。该选择画面是用于供用户选择与多个登记密钥相对应的多个内容的状态中的任意一个的画面，例如是显示各内容的缩略图等的画面。
由此，即使在装置停止时的摄像机图像与装置启动时的摄像机图像之间产生某种程度的位置偏移或者比例尺偏移等的情况下，用户601也能够可靠地启动所期望的内容。需要说明的是，作为选择画面中的用户的选择方法，除了利用遥控器等进行操作的方法之外，例如可列举出使头或者视线朝向指定时间的方法、或者一边使头或者视线转向一边按下遥控器等的确定按钮等的方法等。头或者视线的方向由陀螺仪传感器123、地磁传感器124、或者各视线检测器(112、113)检测。
另外，通过图12的方式，还能够应对用户601没有清楚地记住登记密钥的情况。具体而言，例如在用户601没有在选择画面上进行选择操作的情况下，密钥内容对恢复部212与用户601环视周围的动作(进而，摄像机图像的变化)联动地，依次判断有无各摄像机图像与登记密钥的匹配。然后，密钥内容对恢复部212针对每个摄像机图像依次显示图12的(d)所示那样的选择画面。需要说明的是，根据情况，利用图12的方式，例如也可以使用始终显示图12的(d)所示那样的选择画面并供用户选择的方式，而不是在装置启动时自动地启动内容。
图13的(a)、图13的(b)、图13的(c)以及图13的(d)是说明在本发明的实施方式3的头戴式信息处理装置中，图2的密钥内容对恢复部的另一动作例的图。在图13的(c)和图13的(d)中，与图12的(c)和图12的(d)的情况不同，对选择画面上的各内容的缩略图进行加权。
具体而言，密钥内容对恢复部212通过在装置启动时的摄像机111的图像中对更靠近中心部的登记密钥进行大的加权，来显示进行加权后的选择画面。作为加权的方法，可列举出如图13的(c)所示，越是加权大的登记密钥，将对应的缩略图显示得越大的方法，或者如图13的(d)所示，越是加权大的登记密钥，越是将对应的缩略图显示在前面的方法等。
《实施方式3的主要效果》
以上，通过使用实施方式3的头戴式信息处理装置(HMD)，除了实施方式1所述的各种效果之外，还能够应对有多个登记密钥匹配的情况，能够提高用户的便利性。另外，用户能够将一定程度地接近的对象确定为登记密钥，因此能够缓解确定登记密钥时的制约，能够提高用户的便利性。
(实施方式4)
《登记密钥的记忆辅助》
特别地，在使用非透射型的VR用的HMD100的情况下，用户有时难以记住在装置停止时朝向哪个方向(换言之，摄像机111的摄像方向)。因此，图2的密钥内容对信息登记部211也可以在装置停止时将摄像机111的图像在显示器120上显示一定时间。由此，用户能够清晰地记住登记密钥。
具体而言，密钥内容对信息登记部211例如在显示器120上交替多次显示内容执行部206的图像和摄像机111的图像等，在短时间内连续地显示这两者的图像。由此，用户对这两个图像的关联性具有强烈的印象，能够更清晰地记住登记密钥。另外，此时，用户能够在显示器120中显示摄像机111的图像之后，通过移动头部来明确地选择被确定为登记密钥的对象。
《实施方式4的主要效果》
以上，通过使用实施方式4的头戴式信息处理装置(HMD)，除实施方式1所述的各种效果之外，还能够进行用户记住登记密钥时的辅助，因此能够提高用户的便利性。
(实施方式5)
《头戴式信息处理装置的概略》
图14是表示本发明的实施方式5的头戴式信息处理装置周围的概略结构例的框图。在图14中，除了图1所示那样的头戴式信息处理装置(HMD)100之外，还示出经由通信网络910连接到该HMD100的服务器装置902。服务器装置902具备经由总线920相互连接的通信接口903、CPU905以及存储器908。通信接口903经由天线904和通信网络910与HMD100的通信接口151进行通信。存储器908中保存有程序906和信息数据907。
在此，图2所示的HMD100内的密钥内容对信息登记部211在事件发生时将所生成的密钥内容对信息216经由通信接口151向装置外部的服务器装置902发送，保存到服务器装置902的存储器908。另一方面，密钥内容对恢复部212在装置启动时经由通信接口151从服务器装置902获取密钥内容对信息216，保存到本装置的存储器128。
《实施方式5的主要效果》
以上，通过使用实施方式5的头戴式信息处理装置(HMD)，除实施方式1所述的各种效果之外，还能够进一步提高用户的便利性。具体而言，密钥内容对信息216保存在服务器装置902上，因此用户例如即使在使用同一机型的其他HMD100的情况下，也能够使用登记密钥。
需要说明的是，与HMD100的各种内容相对应的程序的保存目的地不限于本装置的存储器128，也可以是服务器装置902的存储器908。在该情况下，HMD100通过流传输、下载从服务器装置902适当地获取所期望的程序906。由此，例如，能够减少HMD100的存储器容量等。
需要说明的是，本发明并不限定于上述实施方式，包括各种各样的变形例。例如，上述实施方式是为了容易理解地说明本发明而详细说明的内容，并不一定限定于具备所说明的所有结构。另外，能够将某个实施方式的结构的一部分置换为其他实施方式的结构，另外，也能够在某个实施方式的结构中添加其他实施方式的结构。另外，对于各实施方式的结构的一部分，能够进行其他结构的追加、削除、置换。
另外，上述各结构、功能、处理部、处理手段等也可以通过例如在集成电路中进行设计等而由硬件实现它们的一部分或者全部。另外，上述各结构、功能等也可以通过处理器解释、执行用于实现各个功能的程序而由软件实现。实现各功能的程序、表、文件等信息能够存放于存储器、硬盘、SSD(Solid State Drive，固态硬盘)等记录装置，或者IC卡、SD卡、DVD等记录介质。
另外，控制线、信息线示出了在说明上被认为必要的部分，在产品上未必示出全部的控制线、信息线。实际上也可以认为几乎所有结构都相互连接。

Claims (19)

1.一种头戴式信息处理装置，其在被穿戴于用户的头部的状态下借助视觉或者听觉向用户提供各种信息，其中，
该头戴式信息处理装置具备：
显示部，其用于显示预定的图像；
摄像机，其用于拍摄装置外部的图像；
存储器；
内容执行部，其用于执行内容；以及
内容控制部，其用于控制所述内容执行部，
所述内容控制部具有：
密钥内容对信息登记部，其在事件发生时，将所述事件发生时的所述内容的状态与从所述事件发生时的所述摄像机的图像得到的登记密钥对应起来，作为密钥内容对信息保存到所述存储器，所述事件发生时是接收到来自所述用户的指示时或者装置停止时；以及
密钥内容对恢复部，其在装置启动时，基于所述密钥内容对信息，判断是否有所述装置启动时的所述摄像机的图像与所述登记密钥的匹配，在有匹配的情况下，恢复与所匹配的所述登记密钥相对应的所述内容的状态。
2.根据权利要求1所述的头戴式信息处理装置，其中，
所述密钥内容对信息登记部将在所述事件发生时执行的所述内容的类别作为所述事件发生时的所述内容的状态而保存到所述存储器，
所述密钥内容对恢复部启动与所述登记密钥相对应的所述内容。
3.根据权利要求2所述的头戴式信息处理装置，其中，
所述密钥内容对信息登记部除了在所述事件发生时执行的所述内容的类别之外还将所述内容上的执行状态作为所述事件发生时的所述内容的状态而保存到所述存储器，
所述密钥内容对恢复部除了启动与所述登记密钥相对应的所述内容之外，还恢复所述内容上的执行状态。
4.根据权利要求1所述的头戴式信息处理装置，其中，
当在恢复了所述内容的状态之后在预定期间内接收到来自所述用户的取消指示的情况下，所述密钥内容对恢复部在所述显示部上显示装置启动后的规定的初始画面。
5.根据权利要求1所述的头戴式信息处理装置，其中，
所述密钥内容对信息登记部将所述事件发生时的所述摄像机的图像的中心部所包含的1个对象的信息作为所述登记密钥保存到所述存储器，
当所述装置启动时的所述摄像机的图像中包含多个所述登记密钥的情况下，所述密钥内容对恢复部使所述显示部显示选择画面，该选择画面用于供所述用户选择与多个所述登记密钥相对应的多个所述内容的状态中的任意一个内容的状态。
6.根据权利要求5所述的头戴式信息处理装置，其中，
所述密钥内容对恢复部通过在所述装置启动时的所述摄像机的图像中对更靠近中心部的所述登记密钥进行大的加权，来显示进行加权后的所述选择画面。
7.根据权利要求1所述的头戴式信息处理装置，其中，
该头戴式信息处理装置还具备用于检测各种状态的传感器，
所述内容控制部使用所述摄像机的图像和所述传感器的检测结果的组合作为所述登记密钥。
8.根据权利要求7所述的头戴式信息处理装置，其中，
所述传感器是用于检测所述用户的生物体信息的生物体传感器。
9.根据权利要求7所述的头戴式信息处理装置，其中，
所述传感器是用于检测所述头戴式信息处理装置的姿态的传感器。
10.根据权利要求1所述的头戴式信息处理装置，其中，
该头戴式信息处理装置还具备与装置外部进行无线通信的通信接口，
在所述事件发生时，所述密钥内容对信息登记部将所述密钥内容对信息经由所述通信接口保存到装置外部的服务器装置，
在所述装置启动时，所述密钥内容对恢复部经由所述通信接口从所述服务器装置获取所述密钥内容对信息。
11.一种头戴式信息处理装置，其在被穿戴于用户的头部的状态下借助视觉或者听觉向用户提供各种信息，其中，
该头戴式信息处理装置具备：
显示部，其用于显示预定的图像；
传感器，其用于检测各种状态；
存储器；
内容执行部，其用于执行内容；以及
内容控制部，其用于控制所述内容执行部，
所述内容控制部具有：
密钥内容对信息登记部，其在事件发生时，将所述事件发生时的所述内容的状态与从所述事件发生时的所述传感器的检测结果得到的登记密钥对应起来，作为密钥内容对信息保存到所述存储器，所述事件发生时是接收到来自所述用户的指示时或者装置停止时；以及
密钥内容对恢复部，其在装置启动时，基于所述密钥内容对信息，判断是否有所述装置启动时的所述传感器的检测结果与所述登记密钥的匹配，在有匹配的情况下，恢复与所匹配的所述登记密钥相对应的所述内容的状态。
12.根据权利要求11所述的头戴式信息处理装置，其中，
所述密钥内容对信息登记部将在所述事件发生时执行的所述内容的类别作为所述事件发生时的所述内容的状态而保存到所述存储器，
所述密钥内容对恢复部启动与所述登记密钥相对应的所述内容。
13.根据权利要求12所述的头戴式信息处理装置，其中，
所述密钥内容对信息登记部除了在所述事件发生时执行的所述内容的类别之外还将所述内容上的执行状态作为所述事件发生时的所述内容的状态而保存到所述存储器，
所述密钥内容对恢复部除了启动与所述登记密钥相对应的所述内容之外，还恢复所述内容上的执行状态。
14.根据权利要求11所述的头戴式信息处理装置，其中，
所述传感器是用于检测所述头戴式信息处理装置的姿态的传感器。
15.一种头戴式信息处理装置，其在被穿戴于用户的头部的状态下借助视觉或者听觉向用户提供各种信息，其中，
该头戴式信息处理装置具备：
显示部，其用于显示预定的图像；
存储器；
通信接口，其用于与装置外部进行无线通信；
内容执行部，其用于执行内容；以及
内容控制部，其用于控制所述内容执行部，
所述内容控制部具有：
密钥内容对信息登记部，其在事件发生时，将所述事件发生时的所述内容的状态与从所述事件发生时的利用所述通信接口接收的接收数据得到的登记密钥对应起来，作为密钥内容对信息保存到所述存储器，所述事件发生时是接收到来自所述用户的指示时或者装置停止时；以及
密钥内容对恢复部，其在装置启动时，基于所述密钥内容对信息，判断有无所述装置启动时的利用所述通信接口接收的接收数据与所述登记密钥的匹配，在有匹配的情况下，恢复与所匹配的所述登记密钥相对应的所述内容的状态。
16.根据权利要求15所述的头戴式信息处理装置，其中，
所述密钥内容对信息登记部将在所述事件发生时执行的所述内容的类别作为所述事件发生时的所述内容的状态而保存到所述存储器，
所述密钥内容对恢复部启动与所述登记密钥相对应的所述内容。
17.根据权利要求16所述的头戴式信息处理装置，其中，
所述密钥内容对信息登记部除了在所述事件发生时执行的所述内容的类别之外还将所述内容上的执行状态作为所述事件发生时的所述内容的状态而保存到所述存储器，
所述密钥内容对恢复部除了启动与所述登记密钥相对应的所述内容之外，还恢复所述内容上的执行状态。
18.根据权利要求15所述的头戴式信息处理装置，其中，
利用所述通信接口接收的接收数据是信标的识别信息。
19.根据权利要求15所述的头戴式信息处理装置，其中，
该头戴式信息处理装置还具备用于拍摄装置外部的图像的摄像机，
所述内容控制部使用利用所述通信接口接收的接收数据和所述摄像机的图像的组合作为所述登记密钥。
CN201980095249.6A 2019-04-09 2019-04-09 头戴式信息处理装置 Pending CN113728621A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/015501 WO2020208717A1 (ja) 2019-04-09 2019-04-09 ヘッドマウント情報処理装置

Publications (1)

Publication Number Publication Date
CN113728621A true CN113728621A (zh) 2021-11-30

Family

ID=72751889

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980095249.6A Pending CN113728621A (zh) 2019-04-09 2019-04-09 头戴式信息处理装置

Country Status (4)

Country Link
US (2) US12019937B2 (zh)
JP (3) JP7286760B2 (zh)
CN (1) CN113728621A (zh)
WO (1) WO2020208717A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114999030A (zh) * 2022-05-25 2022-09-02 杭州萤石软件有限公司 解锁方法、系统、电子设备及存储介质

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000023065A (ja) * 1998-06-29 2000-01-21 Dainippon Printing Co Ltd 視線入力付きゴーグル型ディスプレイ
JP2005065214A (ja) * 2003-07-30 2005-03-10 Sanyo Electric Co Ltd コンテンツ再生装置
EP1930871B1 (en) * 2005-09-29 2019-11-13 Nikon Corporation Content reproduction system
JP2007259343A (ja) * 2006-03-24 2007-10-04 Toshiba Corp 再生制御装置および再生制御方法
US7599789B2 (en) * 2006-05-24 2009-10-06 Raytheon Company Beacon-augmented pose estimation
JP5026294B2 (ja) 2008-01-29 2012-09-12 京セラ株式会社 コンテンツ再生装置
JP5428174B2 (ja) * 2008-03-24 2014-02-26 株式会社ニコン ヘッドマウントディスプレイ装置
JP5277801B2 (ja) * 2008-09-04 2013-08-28 カシオ計算機株式会社 画像再生装置及びプログラム
US20120212406A1 (en) * 2010-02-28 2012-08-23 Osterhout Group, Inc. Ar glasses with event and sensor triggered ar eyepiece command and control facility of the ar eyepiece
US20110239142A1 (en) * 2010-03-25 2011-09-29 Nokia Corporation Method and apparatus for providing content over multiple displays
CN103329075B (zh) * 2011-01-06 2017-12-26 TiVo解决方案有限公司 用于基于手势控制的方法和装置
KR102247817B1 (ko) * 2014-09-11 2021-05-04 삼성전자 주식회사 락스크린 제공 방법 및 장치
JP5767386B1 (ja) * 2014-12-15 2015-08-19 株式会社コロプラ ヘッドマウントディスプレイシステム、ヘッドマウントディスプレイへ表示するための方法、及びプログラム
JP2016115329A (ja) * 2015-05-22 2016-06-23 株式会社コロプラ ヘッドマウントディスプレイシステム、ヘッドマウントディスプレイへ表示するための方法、及びプログラム
KR20170051013A (ko) * 2015-11-02 2017-05-11 엘지전자 주식회사 테더링 형 hmd 및 그 hmd의 제어 방법
KR20170059163A (ko) * 2015-11-20 2017-05-30 삼성전자주식회사 전자 장치 및 그의 동작 방법
KR20170060485A (ko) * 2015-11-24 2017-06-01 삼성전자주식회사 표시 모드에 따른 콘텐트를 표시하기 위한 전자 장치 및 방법
WO2017142977A1 (en) * 2016-02-15 2017-08-24 Meta Company Apparatuses, methods and systems for tethering 3-d virtual elements to digital content
US10754417B2 (en) * 2016-11-14 2020-08-25 Logitech Europe S.A. Systems and methods for operating an input device in an augmented/virtual reality environment
US11487353B2 (en) * 2016-11-14 2022-11-01 Logitech Europe S.A. Systems and methods for configuring a hub-centric virtual/augmented reality environment
JP2018129732A (ja) 2017-02-09 2018-08-16 三菱自動車工業株式会社 車両用映像表示装置
KR102330829B1 (ko) * 2017-03-27 2021-11-24 삼성전자주식회사 전자 장치에서 증강현실 기능 제공 방법 및 장치
KR102555443B1 (ko) * 2017-05-01 2023-07-12 매직 립, 인코포레이티드 콘텐츠를 공간 3d 환경에 매칭
JP6271794B1 (ja) * 2017-05-18 2018-01-31 株式会社プランネット・アソシエイツ アプリケーション層マルチキャスト配信方法
US11314399B2 (en) * 2017-10-21 2022-04-26 Eyecam, Inc. Adaptive graphic user interfacing system
JP2019105885A (ja) * 2017-12-08 2019-06-27 セイコーエプソン株式会社 頭部装着型表示装置、情報処理装置、情報処理システム、及び頭部装着型表示装置の制御方法
WO2019143117A1 (en) * 2018-01-18 2019-07-25 Samsung Electronics Co., Ltd. Method and apparatus for adjusting augmented reality content
US11748679B2 (en) * 2019-05-10 2023-09-05 Accenture Global Solutions Limited Extended reality based immersive project workspace creation

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114999030A (zh) * 2022-05-25 2022-09-02 杭州萤石软件有限公司 解锁方法、系统、电子设备及存储介质

Also Published As

Publication number Publication date
US12019937B2 (en) 2024-06-25
JP7286760B2 (ja) 2023-06-05
US20240303018A1 (en) 2024-09-12
US20220137908A1 (en) 2022-05-05
JP7425245B2 (ja) 2024-01-30
JP2024050643A (ja) 2024-04-10
WO2020208717A1 (ja) 2020-10-15
JP2023111925A (ja) 2023-08-10
JPWO2020208717A1 (zh) 2020-10-15

Similar Documents

Publication Publication Date Title
US11699271B2 (en) Beacons for localization and content delivery to wearable devices
US12067687B2 (en) Cross reality system with simplified programming of virtual content
US11520399B2 (en) Interactive augmented reality experiences using positional tracking
CN110506249B (zh) 信息处理设备、信息处理方法和记录介质
WO2019205868A1 (zh) 相机姿态追踪过程的重定位方法、装置、设备及存储介质
US20240303018A1 (en) Head mounted processing apparatus
CN109145847B (zh) 识别方法、装置、穿戴式设备及存储介质
CN112245912B (zh) 虚拟场景中的声音提示方法、装置、设备及存储介质
US11915453B2 (en) Collaborative augmented reality eyewear with ego motion alignment
WO2022072168A1 (en) Augmented reality gaming using virtual eyewear beams
CN112711335A (zh) 虚拟环境画面的显示方法、装置、设备及存储介质
US20240264662A1 (en) Head mounted information processing apparatus and head mounted display system
WO2021176947A1 (ja) 情報処理装置、及び情報処理方法
CN111344776B (zh) 信息处理装置、信息处理方法和程序
US20230297447A1 (en) Information processing system, information processing method, and information processing terminal
KR20230070308A (ko) 웨어러블 장치를 이용한 제어가능한 장치의 위치 식별
WO2023233488A1 (ja) 情報処理装置および情報処理方法
JP7538886B2 (ja) 画像表示装置および画像表示方法
KR20170133755A (ko) 전자 디바이스 및 전자 디바이스를 위한 방법
KR20160027813A (ko) 글래스형 단말기

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination