CN107005668A - 信息处理装置 - Google Patents

信息处理装置 Download PDF

Info

Publication number
CN107005668A
CN107005668A CN201580068772.1A CN201580068772A CN107005668A CN 107005668 A CN107005668 A CN 107005668A CN 201580068772 A CN201580068772 A CN 201580068772A CN 107005668 A CN107005668 A CN 107005668A
Authority
CN
China
Prior art keywords
information processor
information
control unit
unit
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580068772.1A
Other languages
English (en)
Other versions
CN107005668B (zh
Inventor
浅山徹哉
太田义则
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107005668A publication Critical patent/CN107005668A/zh
Application granted granted Critical
Publication of CN107005668B publication Critical patent/CN107005668B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0181Adaptation to the pilot/driver
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0492Change of orientation of the displayed image, e.g. upside-down, mirrored
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/14Solving problems related to the presentation of information to be displayed

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

[问题]如果在与预定方向不同的方向上附接HMD,则在一些情况下可能难以使用HMD。要解决的问题是提供一种信息处理装置,其置放在人体的头部上并且能够保持可用性而不管附接方向如何。[解决方案]一种置放在人体的头部上的信息处理装置,包括:操作检测单元,其检测关于信息处理装置执行的操作;和控制单元,其基于信息处理装置的姿势来决定与由操作检测单元检测到的操作对应要进行的动作。

Description

信息处理装置
技术领域
本公开涉及信息处理装置。
背景技术
近来,正在进行与头戴的信息处理装置有关的技术开发。这种信息处理装置例如被称为头置式显示器(HMD),并且包括对佩戴HMD的用户显示图像的功能。
例如,专利文献1公开了一种头置式图像显示装置,其设有目镜透镜和将发出的图像光导向用户的眼睛的导光单元,所述装置通过移动目镜透镜或导光单元来调节发出的图像光的射角。
另外,通常是根据在预定方向上附接HMD的假定来设计HMD。例如,如专利文献1中公开的单眼用的HMD是根据将HMD附接在用户的头部右侧或左侧的假定设计的。
引用列表
专利文献
专利文献1:JP 2012-63638A
发明内容
技术问题
然而,采用如专利文献1中所公开的相关技术的HMD,如果将HMD附接在与预定方向不同的方向上,则由HMD提供的用户接口将会与附接侧不相适应,从而使得在一些情况下使用HMD有困难。因此,本公开提出一种新的改进型信息处理装置,其置放在人体的头部上并且能够保持可用性而不管附接方向如何。
问题的解决方案
根据本公开,提供了一种置放在人体的头部上的信息处理装置,包括:操作检测单元,其检测关于所述信息处理装置执行的操作;和控制单元,其基于所述信息处理装置的姿势来决定与由所述操作检测单元检测到的操作对应要进行的动作。
发明的有益效果
根据如上所述的本公开内容,提供了一种信息处理装置,其置放在人体的头部上并且能够保持可用性而不管附接方向如何。要注意的是,上述效果不一定是限制性的。与上述效果一起或代替上述效果的是,可实现本说明书中描述的任一种效果或可由本说明书领会的其它效果。
附图说明
图1是示出根据本公开的第一实施方案的信息处理装置和一副眼镜的示意性物理配置的实例的俯视图。
图2是示出根据本实施方案的信息处理装置和一副眼镜的示意性物理配置的实例的透视图。
图3是示出根据本实施方案的图像处理装置的示意功能配置的实例的框图。
图4A是示出其中将根据本实施方案的信息处理装置附接到一副眼镜的左框架情况下的实例的图示。
图4B是示出其中将根据本实施方案的信息处理装置附接到一副眼镜的右框架情况下的实例的图示。
图5是概念性地示出由根据本实施方案的信息处理装置处理的流程图。
图6是示出根据本实施方案的变形例的信息处理装置和一副眼镜的示意性物理配置的实例的俯视图。
图7是示出根据本实施方案的变形例的信息处理装置和一副眼镜的示意性物理配置的实例的透视图。
图8A是示出根据本公开的第二实施方案的信息处理装置中特定图像的显示位置的反转控制的实例的图示。
图8B是示出根据本实施方案的信息处理装置中特定图像的显示位置的反转控制的实例的图示。
图9是概念性地示出由根据本实施方案的信息处理装置处理的流程图。
图10A是示出根据本实施方案的变形例的信息处理装置中特定图像的插入方向的反转控制的实例的图示。
图10B是示出根据本实施方案的变形例的信息处理装置中特定图像的插入方向的反转控制的实例的图示。
图11是示出根据本公开的信息处理装置的硬件配置的说明图。
具体实施方式
在下文中,将参考附图详细描述本公开的优选实施方案。在本说明书和附图中,用相同的附图标记表示具有基本上相同功能和结构的结构元件,并省略对这些结构元件的重复说明。
在下文中,将按以下顺序进行描述。
1.根据相关技术的信息处理装置的问题
2.第一实施方案(对应于操作的动作的分配控制的实例)
3.第二实施方案(显示图像的显示模式控制的实例)
4.根据本公开的实施方案的信息处理装置的硬件配置
5.结论
<1.根据相关技术的信息处理装置的问题>
首先,将描述相关技术的头置式信息处理装置中的问题。
相关技术的头置式信息处理装置(在下文中也称为HMD)设置有图像显示功能和操作功能。具体地,作为图像显示功能,相关技术的HMD将图像投射到单独设置的显示屏上面,或者透过透镜直接朝用户的眼睛发出图像光,使得用户将图像识别为虚像。还有,作为操作功能,相关技术的HMD包括接受用户操作的操作单元。由于这个原因,相关技术的HMD能够作出诸如显示通过用户对操作单元进行操作所选择的图像的动作。
在这一点上,相关技术的HMD典型地是根据在预定方向上置放HMD的假定设计的。例如,在单眼用的HMD的情况下,HMD是根据将HMD附接到使用者的眼睛之一的假定设计的。由于这个原因,如果将HMD置放在与预定不同的方向上,则操作单元的位置成为不是设计所预期的位置,并且HMD的可操作性可能会降低。
因此,本公开提出一种信息处理装置,其置放在人体头上并且能够保持可用性而不管附接方向如何。在下文中,将详细描述这种信息处理装置。要注意的是,为了方便起见,将通过附加对应于实施方案的数字,如信息处理装置100-1和信息处理装置100-2,来区分相应的装置,如根据第一和第二实施方案的信息处理装置100。
<2.第一实施方案(对应于操作的动作的分配控制的实例)>
以上如此描述了根据相关技术的信息处理装置的问题。接下来,将描述根据本公开的第一实施方案的信息处理装置100-1。在本实施方案中,信息处理装置100-1基于信息处理装置100-1的姿势来控制与操作对应进行的动作的分配。
<2-1.装置的配置>
(装置的物理配置)
首先,将参考图1和2描述信息处理装置100-1和一副眼镜200的物理配置。图1是示出根据本公开的第一实施方案的信息处理装置100-1和眼镜200的示意性物理配置的实例的俯视图,而图2是示出根据本实施方案的信息处理装置100-1和眼镜200的示意性物理配置的实例的透视图。
如图1和2中所示,信息处理装置100-1设有主单元102、臂104、透镜镜筒106、目镜透镜108、附接单元110和操作单元112。
主单元102连接到臂104和眼镜200。具体地,主单元102的纵长边缘连结到臂104,并且主单元102的一个侧面经由附接单元110附接到眼镜200。例如,如图1中所示,主单元102沿眼镜200的框架附接。要注意的是,主单元102可设有如图2中所示的操作单元112。
此外,主单元102包括用于控制信息处理装置100-1的动作的内置控制板。具体地,主单元102包括控制板,所述控制板包括诸如中央处理单元(CPU)和随机存取存储器(RAM)的部件,并且使用信号线等经由臂104连接到透镜镜筒106。
此外,主单元102包括用于指定信息处理装置100-1的姿势的内置传感器。具体地,主单元102包括内置加速度传感器。要注意,代替加速度传感器的是,主单元102也可设有角速度传感器、地磁传感器或相机传感器。例如,可由通过相机传感器获得的图像来估计信息处理装置100-1的姿势。此外,代替传感器的是,主单元102也可设有通信单元,其自外部装置接收使得主单元102能够指定信息处理装置100-1的姿势的信息。
臂104连接主单元102和透镜镜筒106,并且支撑透镜镜筒106。具体地,臂104分别连结到主单元102的一端和透镜镜筒106的一端,并且固定透镜镜筒106。还有,臂104包括用于将从主单元102提供的图像相关数据传送到透镜镜筒106的内置信号线。
透镜镜筒106将投射的图像光投射到目镜透镜上面。具体地,透镜镜筒106包括投射单元、导光单元和反射单元,其中投射单元朝导光单元投射图像光,导光单元将入射的图像光导向反射单元,并且反射单元朝目镜透镜反射到达的图像光。要注意的是,根据投射的图像光的图像是经由臂104从主单元102提供的。
目镜透镜108将图像放大。具体地,目镜透镜将从透镜镜筒106发出的图像光折射以放大根据图像光的图像。
附接单元110将主单元102固定到眼镜200。具体地,附接单元110将主单元102的一个侧面固定到眼镜200的框架。
操作单元112接受关于信息处理装置100-1的用户操作。具体地,操作单元112将用户操作转换成信息处理装置100-1的输入。例如,如图2中所示,可将操作单元112多个地设置在主单元102的侧面上,并且可布置在水平方向和垂直方向上。要注意的是,虽然图2示出操作单元112A至112D像按钮一样,但操作单元112不限于此,可以是各种形式中的任一种。例如,操作单元112也可以是诸如触摸板的输入装置。
(装置的功能配置)
接下来,将参考图3描述信息处理装置100-1的功能配置。图3是示出根据本实施方案的图像处理装置100-1的示意功能配置的实例的框图。
如图3中所示,信息处理装置100-1设有操作检测单元120、姿势信息获取单元122、控制单元124、存储单元126和投射单元128。
操作检测单元120检测对信息处理装置100-1执行的用户操作。具体地,操作检测单元120接收通过操作单元112转换的输入,并基于接收的输入来检测执行的用户操作。随后,操作检测单元120生成指示检测到的用户操作的信息(在下文中也称为用户操作信息),并将生成的用户操作信息提供给控制单元124。
姿势信息获取单元122获取与信息处理装置100-1的姿势有关的信息。具体地,姿势信息获取单元122获取依据信息处理装置100-1的姿势的反转而变化的信息。例如,姿势信息获取单元122自加速度传感器获取指示信息处理装置100-1的加速度的信息(在下文中也称为加速度信息)。要注意的是,姿势信息获取单元122将所获取的加速度信息提供给控制单元124。
控制单元124控制信息处理装置100-1的整体动作。具体地,控制单元124控制对应于用户操作的动作的执行、图像的显示等。例如,控制单元124使信息处理装置100-1的相应结构元件执行对应于由操作检测单元120检测到的用户操作的动作。还有,控制单元124基于这种用户操作决定用以投射的图像。
此外,基于信息处理装置100-1的姿势,控制单元124决定与由操作检测单元120检测到的操作对应进行的动作(在下文中也称为动作决定过程)。具体地,控制单元124基于由姿势信息获取单元122获取的依据信息处理装置100-1的姿势的反转而变化的信息进行动作决定过程。
更具体地,控制单元124相对于基准方向依据由姿势信息获取单元122获取的加速度信息中包括的重力加速度的方向进行动作决定过程。另外,将参考图4A和4B进一步详细描述动作决定过程。图4A是示出其中将根据本实施方案的信息处理装置100-1附接到眼镜200的左框架情况下的实例的图示,而图4B是示出将根据本实施方案的信息处理装置100-1附接到眼镜200的右框架情况下的实例的图示。
首先,控制单元124检测在基准方向上的重力加速度的值。例如,基准方向是如图4A中所示的Z轴方向,且控制单元124检测在Z轴方向上的重力加速度的值。
接下来,控制单元124依据重力加速度的检测值的符号重新组织要检测的每个用户操作与每个动作之间的对应关系。具体地,控制单元124重新组织与同动作关联的操作有关的位置的对应关系,使得关联的动作被垂直和水平地反转。
例如,当如图4A中所示置放信息处理装置100-1时,例如检测到9.8m/s2为重力加速度的值。当检测到重力加速度的正值时,例如依据存储单元126中存储的某种对应关系,控制单元124可将例如动作1、动作2、动作3和动作4分别分配给由操作检测单元120检测到的相应用户操作中的每一者,其分别在操作单元112A至112D中的每一者上执行(在下文中也称为操作单元112A至112D上的用户操作)。
其间,例如当如图4B中所示置放信息处理装置100-1时,检测到-9.8m/s2为重力加速度的值。当检测到重力加速度的负值时,例如依据存储单元126中存储的另一种对应关系,控制单元124将例如动作3、动作4、动作1和动作2分别分配给操作单元112A至112D上的相应用户操作中的每一者。
回到参考图3对信息处理装置100-1的配置的描述,存储单元126存储与通过控制单元124控制有关的信息。具体地,存储单元126存储指示操作与动作之间的对应关系以及要投射的图像的信息。
投射单元128投射图像光。具体地,投射单元128基于来自控制单元124的指令投射对应于存储单元126中存储的图像的图像光。要注意的是,也可由外部装置经由通信获取对应于要投射的图像光的图像,并且也可通过控制单元124将其改变。
<2-2.由装置处理>
接下来,将参考图5描述根据本实施方案的信息处理装置100-1的处理。图5是概念性地示出由根据本实施方案的信息处理装置100-1处理的流程图。
首先,信息处理装置100-1检测重力加速度(步骤S302)。具体地,姿势信息获取单元122从加速度传感器获取加速度信息,并且控制单元124基于获取的加速度信息和基准方向检测重力加速度的值。
接下来,信息处理装置100-1确定检测到的重力加速度的方向是否是与基准方向相同的方向(步骤S304)。具体地,例如控制单元124确定重力加速度的检测值是否是某一值,如9.8m/s2或-9.8m/s2。要注意的是,控制单元124也可确定重力加速度的检测值的符号。
如果确定重力加速度的方向与基准方向是相同的方向,则信息处理装置100-1依据某种对应关系分配动作(步骤S306)。具体地,如果确定重力加速度的检测值为例如9.8m/s2,则控制单元124依据存储单元126中存储的操作与动作之间的某种对应关系将动作分配给操作。
如果确定重力加速度的方向与基准方向不同,则信息处理装置100-1依据另一种对应关系分配动作(步骤S308)。具体地,如果确定重力加速度的检测值为例如-9.8m/s2,则控制单元124依据存储单元126中存储的同重力加速度的值为9.8m/s2时的情况不同的操作与动作之间的对应关系将动作分配给操作。
按这种方式,根据本公开的第一实施方案,信息处理装置100-1检测关于信息处理装置100-1执行的操作,并且基于信息处理装置100-1的姿势决定与检测到的操作对应要进行的动作。由于这个原因,可依据信息处理装置100-1的姿势或换言之附接方向将用户要执行以便获得所需动作结果的操作标准化,从而使得有可能保持信息处理装置100-1的可用性而不管附接方向如何,无需让用户进行诸如改变设置的工作。
还有,信息处理装置100-1获取依据信息处理装置100-1的姿势的反转而变化的信息,并基于所获取的依据这种反转而变化的信息作出关于动作的上述决定。一般地,如果物体的姿势被反转,则物体的可操作性往往发生变化,但是根据本实施方案,由于是依据信息处理装置100-1的姿势的反转决定将动作分配给操作,因此有可能使可操作性的降低最小化。
还有,上述依据反转而变化的信息包括指示重力加速度的信息,并且信息处理装置100-1基于重力加速度相对于基准方向的方向作出关于动作的上述决定。由于这个原因,例如通过使用诸如加速度传感器的现有设备来检测信息处理装置100-1的姿势的反转,有可能使信息处理装置100-1的增加成本和提高的复杂性最小化。
还有,作为关于动作的上述决定,信息处理装置100-1重新组织每个操作与每个动作之间的对应关系。由于这个原因,通过不新增或取消对应于操作的动作,用户能够很容易地掌握对应关系中的变化的细节,从而使得有可能保持针对用户的可用性。
还有,信息处理装置100-1重新组织与同动作关联的操作有关的位置的上述对应关系,使得关联的动作被垂直和水平地反转。由于这个原因,在反转信息处理装置100-1的附接方向之前和之后进行将动作分配给操作以符合用户对操作的直观期望,从而使得有可能保持和提高可操作性。
<2-3.变形例>
前述内容如此描述了本公开的第一实施方案。然而,本实施方案不限于前述实例。在下文中,将描述本实施方案的变形例。
作为本实施方案的变形例,信息处理装置100-1还可以包括使得能够调节图像显示位置的机构。具体地,透镜镜筒106和臂104在保持活动性的同时连结。将参考图6和7描述根据本变形例的信息处理装置100-1的配置。图6是示出根据本实施方案的变形例的信息处理装置100-1和眼镜200的示意性物理配置的实例的俯视图,而图7是示出根据本实施方案的变形例的信息处理装置100-1和眼镜200的示意性物理配置的实例的透视图。
透镜镜筒106连结到臂104,以便容许在与臂104连结的位置处围绕水平方向和垂直方向为轴旋转。例如,如图7中所示,透镜镜筒106连结到臂104,以便容许在透镜镜筒106与臂104之间连结的位置处在箭头方向上旋转一定角度。例如,透镜镜筒106可从基准位置围绕长边方向为轴旋转大约-5度至5度,以及围绕短边方向为轴旋转大约-10度至10度。
还有,可通过旋转臂104来调节显示位置。具体地,臂104连结到主单元102,以便容许在与臂104连结的位置处围绕水平方向为轴旋转。例如,如图7中所示,臂104连结到主单元102,以便容许在臂104与主单元102之间连结的位置处围绕臂104的短边方向为轴在箭头方向上旋转一定角度。
按这种方式,根据本实施方案的变形例,透镜镜筒106和臂104以及臂104和主单元104在保持活动性的同时连结。由于这个原因,有可能通过调节每个单元的位置而改变图像显示位置,因此吸收个体差异。另外,通过调节透镜镜筒106和臂104两者的位置有可能进行精细调节,并且可提高用户可用性。
<3.第二实施方案(显示图像的显示模式控制的实例)>
上述内容如此描述了根据本公开的第一实施方案的信息处理装置100-1。接下来,将描述根据本公开的第二实施方案的信息处理装置100-2。在本实施方案中,信息处理装置100-2依据信息处理装置100-2的姿势反转警示图像等的显示模式。
<3-1.装置的配置>
首先,将描述信息处理装置100-2的配置。要注意的是,对于与第一实施方案的配置基本上相同的配置的部分的描述将予以简化或省略。
(装置的功能配置)
控制单元124基于信息处理装置100-2的姿势进行图像显示反转控制。具体地,当反转信息处理装置100-2的姿势时,控制单元124控制显示器,使得显示屏垂直反转。例如,当由通过姿势信息获取单元122获取的加速度信息检测到的重力加速度的方向改变时,控制单元124使投射单元128投射对应于垂直反转图像的图像光。
此外,控制单元124充当显示控制单元,并且基于信息处理装置100-2的姿势,使用在其上显示特定图像的显示屏上的垂直方向为轴将显示优先级比其它图像高的特定图像的显示模式反转。具体地,控制单元124使用显示屏的垂直方向为轴将特定图像的显示位置反转。另外,将参考图8A和8B进一步详细描述显示控制处理。图8A和8B是示出根据本实施方案的信息处理装置100-2中特定图像的显示位置的反转控制的实例的图示。
首先,控制单元124发出用以显示特定图像的指令。具体地,控制单元124使特定图像显示在比显示屏上的别的位置更接近佩戴信息处理装置100-2的用户的视野的中心的位置处。例如,控制单元124例如使特定的图像在显示屏10上,如用于引起用户注意的图像20,如图8A中所示(在下文中也称为警示图像)。例如,在其中信息处理装置100-2置放在用户的头部上的状态下,警示图像20被显示在邻近用户的鼻子的位置处。
随后,如果信息处理装置100-2的姿势被反转,则控制单元124使用显示屏的垂直方向为轴将特定图像的显示位置反转。例如,控制单元124基于加速度信息确定重力加速度的方向是否已经改变,并且在确定重力加速度的方向已经改变的情况下,控制单元124使用在显示屏10的中心的垂直方向为轴将警示图像20的显示位置反转,如图8B中所示。
要注意的是,控制单元124也可以在对应于重力加速度的值的位置处显示警示图像20。例如,如果重力加速度的值为9.8m/s2,则控制单元124在邻近用户视野的中心的位置处显示警示图像20,如图8A中所示。另外,也可将警示图像20显示在对应于重力加速度的符号的位置处。
<3-2.由装置处理>
接下来,将参考图9描述根据本实施方案的信息处理装置100-2的处理。图9是概念性地示出由根据本实施方案的信息处理装置100-2处理的流程图。要注意的是,对于与第一实施方案中的处理基本上相同的处理的描述将予以简化或省略。
首先,信息处理装置100-2检测重力加速度(步骤S402),并确定检测到的重力加速度的方向是否已经改变(步骤S404)。具体地,控制单元124确定重力加速度的检测值的符号是否已经改变。
如果确定重力加速度的方向已经改变,则信息处理装置100-2将特定图像的显示模式反转(步骤S406)。具体地,如果确定重力加速度的检测值的符号已经改变,则控制单元124使用在显示屏的中心的垂直方向为轴将警示图像的显示位置反转。
按这种方式,根据本公开的第二实施方案,基于信息处理装置100-2的姿势的反转,信息处理装置100-2使用在其上显示特定图像的显示屏上的垂直方向为轴将显示优先级比其它图像高的特定图像的显示模式反转。由于这个原因,可与信息处理装置100-2的姿势中的变化对应将对用户重要的图像的显示模式标准化,从而使得有可能保持和提高针对用户的可用性,无需让用户进行诸如改变设置的工作。
此外,信息处理装置100-2使用在显示屏的中心的垂直方向为轴将特定图像的显示位置反转。由于这个原因,从用户的视野中心到特定图像的显示位置的距离在信息处理装置100-2的姿势反转之前和之后没有变化,从而使得有可能将由于信息处理装置100-2的附接方向改变而使用户关于显示图像出现不适感的情况最小化。
此外,上述特定图像的显示位置包括比显示屏上的别的位置更接近佩戴信息处理装置100-2的用户的视野的中心的位置。由于这个原因,将特定图像的显示保持在用户容易发现的位置,从而使得有可能将用户忽视特定图像的情况最小化。
此外,上述特定图像包括用于引起用户注意的图像。由于这个原因,即使信息处理装置100-2的附接方向改变,也有可能使用户的注意力降低最小化。
<3-3.变形例s>
前述内容如此描述了本公开的第二实施方案。然而,本实施方案不限于前述实例。在下文中,将描述本实施方案的变形例。
作为本实施方案的变形例,信息处理装置100-2还可依据信息处理装置100-2的姿势改变特定图像向显示屏当中的插入方向。具体地,如果信息处理装置100-2的姿势被反转,则控制单元124使用显示屏的垂直方向为轴将特定图像向显示屏当中的插入方向反转。此外,将参考图10进一步详细描述根据本变形例的处理。图10A和10B是示出根据本实施方案的变形例的信息处理装置100-2中特定图像的插入方向的反转控制的实例的图示。
首先,控制单元124发出用以向显示屏当中插入特定图像以进行显示的指令。具体地,控制单元124在从佩戴信息处理装置100-2的用户的视野的外部朝向其内部的方向上插入特定图像。例如,控制单元124显示特定的图像,如图10A中所示的警示图像20,其例如从显示屏10的左侧向右侧或换言之从用户视野的外部朝中心移动。
随后,如果信息处理装置100-2的姿势被反转,则控制单元124使用显示屏的垂直方向为轴将特定图像的显示位置反转。例如,控制单元124基于加速度信息确定重力加速度的方向是否已经改变,并且在确定重力加速度的方向已经改变的情况下,控制单元124使用在显示屏10上的垂直方向为轴将图像20的插入方向反转,如图10B中所示。
要注意的是,类似于控制特定图像的显示位置,控制单元124也可从对应于重力加速度的值的方向插入警示图像20,或者从对应于重力加速度的符号的方向插入警示图像20。
按这种方式,根据本实施方案的变形例,信息处理装置100-2使用在显示屏的中心的垂直方向为轴,将特定图像向显示屏当中的插入方向反转。由于这个原因,即使信息处理装置100-2的附接方向改变,通过给用户以特定图像的插入方向没有变化的印象,也有可能使出现用户不适感的情况最小化。
此外,上述特定图像的插入方向包括从佩戴信息处理装置100-2的用户的视野的外部朝向其内部的方向。由于这个原因,通过给予用户一种进入用户头脑中的信息的感觉,用户有可能读取由特定图像指示的信息而没有不适感。
<4.根据本公开的实施方案的信息处理装置的硬件配置>
前述内容如此描述了根据本公开的实施方案的信息处理装置100。由上述信息处理装置100进行的处理是通过下述信息处理装置100的软件与硬件之间的协作实现的。
图11是示出根据本公开的信息处理装置100的硬件配置的说明图。如图11中所示,信息处理装置100配有中央处理单元(CPU)132、只读存储器(ROM)134、随机存取存储器(RAM)136、桥接器138、总线140、接口142、输入装置144、输出装置146、存储装置148、连接端口150和通信装置152。
CPU 132起到计算处理装置和控制装置的作用,并且与各种程序协同以实现信息处理装置100内部的操作检测单元120和控制单元124的动作。还有,CPU 132可以是微处理器。ROM 134存储信息,如由CPU 132所使用的程序或计算参数。RAM 136临时存储信息,如在通过CPU 132执行期间使用的程序或在这种执行期间酌情改变的参数。信息处理装置100内部的存储单元126的一部分由ROM 134和RAM 136实现。CPU 132,ROM 134和RAM 136通过由CPU总线等构成的内部总线互连。
输入装置144是信息处理装置100的操作单元112的实例,并且由用户借以输入信息的输入构件组成,如鼠标、键盘、触控面板、按钮、麦克风、开关或控制杆和例如基于来自用户的输入生成输入信号并输出到CPU 132的输入控制电路。通过操作输入装置144,信息处理装置100的用户能够输入各种数据,并指示信息处理装置100例如执行处理动作。
输出装置146例如向诸如液晶显示器(LCD)装置、有机发光二极管(OLED)装置或灯等的装置输出。此外,输出装置146也可输出来自诸如扬声器或耳机的装置的声音。
存储装置148是用以存储数据的装置。存储装置148可包括存储媒体、将数据记录于存储媒体的记录装置、从存储媒体读出数据的读出装置、删除记录于存储媒体的数据的删除装置等。存储装置148存储由CPU 132执行的程序和各种数据。
连接端口150是例如用于连接信息处理装置100外部的装置或外围设备的总线。还有,连接端口150可以是通用串行总线(USB)端口。
通信装置152是例如由连接到网络的通信装置构成的通信接口。还有,通信装置1525可以是支持无线局域网(LAN)的通信装置或支持长期演进(LTE)的通信装置。
<5.结论>
如上所述,根据本公开的第一实施方案,可依据信息处理装置100-1的姿势或换言之附接方向将用户要执行以便获得所需动作结果的操作标准化,从而使得有可能保持信息处理装置100-1的可用性而不管附接方向如何,无需让用户进行诸如改变设置的工作。还有,根据本公开的第二实施方案,可与信息处理装置100-2的姿势中的变化对应将对用户重要的图像的显示模式标准化,从而使得有可能保持和提高针对用户的可用性,无需让用户进行诸如改变设置的工作。
上文已参考附图描述了本公开的优选实施方案,而本公开不限于上述实例。本领域技术人员可在所附权利要求的范围内进行各种改动和变形,并且应当理解的是,它们将自然属于本公开的技术范围内。
例如,前述实施方案描述了在主单元102中设置加速度传感器的实例,但本技术不限于这种实例。具体地,如果将臂104设置成容许旋转,则也可将加速度传感器设置在透镜镜筒106中。例如,如果臂104能够旋转大约180度,则可改变用户置放的位置而无需整体反转信息处理装置100。在这种情况下,通过在透镜镜筒106中设置加速度传感器,有可能检测到信息处理装置100的置放位置已经改变。
此外,前述实施方案描述了这样的实例,其中显示方法是朝用户的眼睛投射的方法,但具体地可以是其中图像光的投射宽度小于光瞳直径的光瞳分割透视法、棱镜法、全息图法或一些其它的显示方法。还有,显示方法也可以是别的方法,如将图像光投射到与信息处理装置100分开设置的显示面上面。
此外,前述实施方案描述了其中信息处理装置100是单眼用的HMD的实例,但信息处理装置100也可以是双眼用的装置。
此外,前述实施方案描述了其中将操作单元112设置在与主单元102连接到附接单元110的侧面相反的侧面上的实例,但也可将操作单元112设置在主单元102的顶面或底面上。例如,操作单元112可以是包括触摸传感器的输入装置,并且可分别设置在主单元102的顶面和底面上。随后,控制单元124可依据信息处理装置100的姿势决定将相应动作分配给在顶面和底面上的操作单元112上执行的相应操作,或换言之,重新组织动作。
此外,也可将动作分配给使用多个操作单元112执行的操作。例如,可将使屏显示返回的动作分配给诸如操作主体的滑动的操作,其在诸如顶面和底面上设置的触摸板的相应操作单元112中的每一者上以相同的定时执行。在这种情况下,通过使用操作单元112的组合执行操作,有可能增加操作模式或换言之动作模式的数目。
此外,前述第二实施方案描述了控制单元124重新组织动作相对于操作的对应关系的实例,但控制单元124也可从现有的对应关系中取消已分配的动作,或者通过增加新动作将另外的动作分配给操作。
此外,前述第一实施方案描述了控制单元124依据重力加速度的值来控制操作与动作之间的对应关系的实例,但控制单元124也可类似于前述第二实施方案依据重力加速度的方向变化来修改这种对应关系。
此外,前述第二实施方案描述了其中显示模式受控的特定图像是警示图像20的实例,但特定图像也可以是向用户呈现有用信息的图像。具体地,特定图像可以是诸如用于引导体育运动中的用户运动的引导图像、指示诸如用户状态或表现的信息的图像或指示外部环境的图像的图像。例如,当打高尔夫球时,特定图像可以是摆动引导图像、得分图像、指示绿地状态的图像或指示温度、湿度和风向的图像。
此外,前述第二实施方案描述了其中插入方向从视野的外部转到其中心的实例,但也可依据要显示的图像的类型或属性来决定插入方向。例如,分类为文本串的图像可总是从右侧插入,而分类为文本串且文本具体为阿拉伯语的图像则可总是从左侧插入。
进一步地,本说明书中描述的效果仅为说明性或示例性效果,并不是限制性的。也就是说,与上述效果一起或代替上述效果的是,根据本公开的技术可实现本领域技术人员从本说明书的描述中可显而易见的其它效果。
另外,本技术也可配置如下。
(1)
一种置放在人体的头部上的信息处理装置,包括:
操作检测单元,其检测关于信息处理装置执行的操作;和
控制单元,其基于信息处理装置的姿势来决定与由操作检测单元检测到的操作对应要进行的动作。
(2)
根据(1)的信息处理装置,其中
存在多个操作和多个动作,且
作为决定,控制单元重新组织操作中的每一者与动作中的每一者之间的对应关系。
(3)
根据(2)的信息处理装置,其中
控制单元重新组织与同动作关联的操作有关的位置的对应关系,使得关联的动作被垂直和水平地反转。
(4)
根据(1)至(3)中任一项的信息处理装置,进一步包括:
获取单元,其获取依据信息处理装置的姿势的反转而变化的信息,其中
控制单元基于由获取单元获取的依据反转而变化的信息作出决定。
(5)
根据(4)的信息处理装置,其中
依据反转而变化的信息包括指示重力加速度的重力信息,且
控制单元依据由重力信息指示的重力加速度相对于基准方向的方向作出决定。
(6)
根据(1)至(5)中任一项的信息处理装置,进一步包括:
显示控制单元,其基于信息处理装置的姿势的反转,使用在其上显示特定图像的显示屏上的垂直方向为轴,将显示优先级比其它图像高的特定图像的显示模式反转。
(7)
根据(6)的信息处理装置,其中
显示控制单元使用在显示屏的中心的垂直方向为轴将特定图像的显示位置反转。
(8)
根据(7)的信息处理装置,其中
显示位置包括比显示屏上的别的位置更接近佩戴信息处理装置的用户的视野的中心的位置。
(9)
根据(6)至(8)中任一项的信息处理装置,其中
显示控制单元使用在显示屏的中心的垂直方向为轴,将特定图像向显示屏当中的插入方向反转。
(10)
根据(9)的信息处理装置,其中
插入方向包括从佩戴信息处理装置的用户的视野的外部朝向其内部的方向。
(11)
根据(6)至(10)中任一项的信息处理装置,其中
特定图像包括用于引起用户注意的图像。
附图标记列表
100 信息处理装置
102 主单元
104 臂
106 透镜镜筒
108 目镜透镜
110 附接单元
112 操作单元
120 操作检测单元
122 姿势信息获取单元
124 控制单元
126 存储单元
128 投射单元。

Claims (11)

1.一种置放在人体的头部上的信息处理装置,包括:
操作检测单元,其检测关于所述信息处理装置执行的操作;和
控制单元,其基于所述信息处理装置的姿势来决定与由所述操作检测单元检测到的操作对应要进行的动作。
2.根据权利要求1所述的信息处理装置,其中
存在多个所述操作和多个所述动作,且
作为所述决定,所述控制单元重新组织所述操作中的每一者与所述动作中的每一者之间的对应关系。
3.根据权利要求2所述的信息处理装置,其中
所述控制单元重新组织与同所述动作关联的所述操作有关的位置的对应关系,使得所述关联的动作被垂直和水平地反转。
4.根据权利要求1所述的信息处理装置,进一步包括:
获取单元,其获取依据所述信息处理装置的所述姿势的反转而变化的信息,其中
所述控制单元基于由所述获取单元获取的依据反转而变化的所述信息作出所述决定。
5.根据权利要求4所述的信息处理装置,其中
依据反转而变化的所述信息包括指示重力加速度的重力信息,且
所述控制单元依据由所述重力信息指示的所述重力加速度相对于基准方向的方向作出所述决定。
6.根据权利要求1所述的信息处理装置,进一步包括:
显示控制单元,其基于所述信息处理装置的所述姿势的反转,使用在其上显示特定图像的显示屏上的垂直方向为轴,将显示优先级比其它图像高的所述特定图像的显示模式反转。
7.根据权利要求6所述的信息处理装置,其中
所述显示控制单元使用在所述显示屏的中心的垂直方向为轴将所述特定图像的显示位置反转。
8.根据权利要求7所述的信息处理装置,其中
所述显示位置包括比所述显示屏上的别的位置更接近佩戴所述信息处理装置的用户的视野的中心的位置。
9.根据权利要求6所述的信息处理装置,其中
所述显示控制单元使用在所述显示屏的中心的垂直方向为轴,将特定图像向显示屏当中的插入方向反转。
10.根据权利要求9所述的信息处理装置,其中
所述插入方向包括从佩戴所述信息处理装置的用户的视野的外部朝向其内部的方向。
11.根据权利要求6所述的信息处理装置,其中
所述特定图像包括用于引起用户注意的图像。
CN201580068772.1A 2014-12-25 2015-10-21 信息处理装置 Expired - Fee Related CN107005668B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014262137 2014-12-25
JP2014-262137 2014-12-25
PCT/JP2015/079668 WO2016103880A1 (ja) 2014-12-25 2015-10-21 情報処理装置

Publications (2)

Publication Number Publication Date
CN107005668A true CN107005668A (zh) 2017-08-01
CN107005668B CN107005668B (zh) 2020-09-22

Family

ID=56149917

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580068772.1A Expired - Fee Related CN107005668B (zh) 2014-12-25 2015-10-21 信息处理装置

Country Status (4)

Country Link
US (1) US10380779B2 (zh)
JP (1) JP6635048B2 (zh)
CN (1) CN107005668B (zh)
WO (1) WO2016103880A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110660205A (zh) * 2019-08-30 2020-01-07 视联动力信息技术股份有限公司 报警信息处理方法、装置、电子设备及可读存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017049762A (ja) * 2015-09-01 2017-03-09 株式会社東芝 システム及び方法
JP2020034997A (ja) * 2018-08-27 2020-03-05 Dynabook株式会社 電子機器、ウェアラブル機器および設定方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004233776A (ja) * 2003-01-31 2004-08-19 Nikon Corp ヘッドマウントディスプレイ
WO2009087992A1 (ja) * 2008-01-07 2009-07-16 Ntt Docomo, Inc. 情報処理装置及びプログラム
US20100007608A1 (en) * 2006-07-25 2010-01-14 Nikon Corporation Output device
CN103380625A (zh) * 2011-06-16 2013-10-30 松下电器产业株式会社 头戴式显示器及其位置偏差调整方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004061519A1 (ja) 2002-12-24 2004-07-22 Nikon Corporation ヘッドマウントディスプレイ
KR101196275B1 (ko) * 2003-12-26 2012-11-06 가부시키가이샤 니콘 니어 아이 디스플레이 장치, 헤드폰, 및 이들을 구비한시스템
JP2013236214A (ja) * 2012-05-08 2013-11-21 Nikon Corp 頭部装着型情報提示装置
JP5921427B2 (ja) 2012-12-27 2016-05-24 キヤノン株式会社 撮像制御装置及びその制御方法
JP6112878B2 (ja) 2013-01-28 2017-04-12 オリンパス株式会社 ウェアラブル型表示装置及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004233776A (ja) * 2003-01-31 2004-08-19 Nikon Corp ヘッドマウントディスプレイ
US20100007608A1 (en) * 2006-07-25 2010-01-14 Nikon Corporation Output device
WO2009087992A1 (ja) * 2008-01-07 2009-07-16 Ntt Docomo, Inc. 情報処理装置及びプログラム
CN103380625A (zh) * 2011-06-16 2013-10-30 松下电器产业株式会社 头戴式显示器及其位置偏差调整方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110660205A (zh) * 2019-08-30 2020-01-07 视联动力信息技术股份有限公司 报警信息处理方法、装置、电子设备及可读存储介质

Also Published As

Publication number Publication date
JP6635048B2 (ja) 2020-01-22
CN107005668B (zh) 2020-09-22
US20180025519A1 (en) 2018-01-25
JPWO2016103880A1 (ja) 2017-10-05
US10380779B2 (en) 2019-08-13
WO2016103880A1 (ja) 2016-06-30

Similar Documents

Publication Publication Date Title
JP6074494B2 (ja) 形状認識装置、形状認識プログラム、および形状認識方法
EP3014392B1 (en) Web-like hierarchical menu display configuration for a near-eye display
CN109564749A (zh) 图像显示系统、以及头戴式显示器的控制装置及其工作方法和工作程序
US9911214B2 (en) Display control method and display control apparatus
CN106716303B (zh) 稳定交互射线的运动
CN110199267A (zh) 利用数据压缩进行实时图像转换的无缺失的高速缓存结构
JP6534292B2 (ja) ヘッドマウントディスプレイ、及び、ヘッドマウントディスプレイの制御方法
CN104793733B (zh) 姿势识别方法和设备,信息处理设备
CN107667328A (zh) 用于在增强和/或虚拟现实环境中跟踪手持设备的系统
CN106415510A (zh) 数据处理方法及其电子设备
CN106575039A (zh) 具有确定用户眼镜特性的眼睛跟踪设备的平视显示器
CN101543451A (zh) 眼部肌肉锻炼装置和眼部肌肉锻炼方法
CN109002164A (zh) 头戴显示设备的显示方法、装置及头戴显示设备
CN107005668A (zh) 信息处理装置
WO2014077462A1 (en) Apparatus for measuring eye rotation angle for setting length of corridor of progressive lens and method thereof
CN103955273B (zh) 一种通过操作系统实现用户姿态检测的移动终端和方法
KR20190038296A (ko) 화상 표시 시스템, 화상 표시 방법 및 화상 표시 프로그램
CN110915200A (zh) 头戴式显示器
JP2016200753A (ja) 画像表示装置
JP2016207042A (ja) プログラム及び記録媒体
CN109977836A (zh) 一种信息采集方法及终端
CN103927011B (zh) 实现用户姿态检测的操作系统运行装置和应用程序模块
US10083675B2 (en) Display control method and display control apparatus
CN113692551A (zh) 用于确定在自然视觉姿势下人的头部的经定向的3d表示的方法
JP2016005007A (ja) ヘッドマウントディスプレイおよび画像処理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200922

CF01 Termination of patent right due to non-payment of annual fee