CN110347239A - 电子装置、电子装置的控制方法和计算机可读介质 - Google Patents

电子装置、电子装置的控制方法和计算机可读介质 Download PDF

Info

Publication number
CN110347239A
CN110347239A CN201910266551.5A CN201910266551A CN110347239A CN 110347239 A CN110347239 A CN 110347239A CN 201910266551 A CN201910266551 A CN 201910266551A CN 110347239 A CN110347239 A CN 110347239A
Authority
CN
China
Prior art keywords
image
electronic device
processing
display
case
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910266551.5A
Other languages
English (en)
Inventor
芝上玄志郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kato Corp
Original Assignee
Kato Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kato Corp filed Critical Kato Corp
Publication of CN110347239A publication Critical patent/CN110347239A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供一种电子装置、电子装置的控制方法和计算机可读介质。根据本发明的电子装置包括：显示控制单元，其被配置为控制显示装置以显示图像的一部分；以及检测单元，其被配置为检测所述显示装置的姿势变化，其中，所述显示控制单元在所检测到的姿势变化是俯仰或横摆的情况下，进行与根据所述姿势变化来改变所显示的图像的一部分的位置有关的第一处理，以及在所检测到的姿势变化是侧倾的情况下，进行与所述图像的再现有关的第二处理，所述第二处理不同于所述第一处理。

Description

电子装置、电子装置的控制方法和计算机可读介质
技术领域
本发明涉及电子装置、电子装置的控制方法和计算机可读介质，并且更特别地涉及用于显示具有宽视频图像范围的图像的控制方法。
背景技术
近年来，能够拍摄具有比人类的视角宽的视频图像范围的图像(诸如全方位图像和全天球图像等)的摄像设备已经变得普遍。此外，已知有如下的方法：利用该方法，通过将具有这种宽视频图像范围的图像的一部分显示在显示单元上、并且跟随设备的姿势的变化而改变显示单元上所显示的视频图像范围(显示范围)的位置，来进行具有高的沉浸感和临场感的显示(日本特开2015-125502)。用户可以通过将设备安装在头部上来获得更高的沉浸感和临场感。
发明内容
然而，再现相关处理(与再现有关的处理)不仅仅是根据设备的姿势的变化来改变显示范围的位置的显示位置改变处理。此外，在设备安装在头部上的情况下，除非将设备从头部移除以使得能够操作显示单元的状态，否则用户不能进行不是显示位置改变处理的再现相关处理所用的操作，这是不方便的。
因此，本发明使得能够在设备安装在头部上以确保高的沉浸感和临场感等的状态下进行不是显示位置改变处理的再现相关处理所用的操作的电子装置、电子装置的控制方法和计算机可读介质。
根据本发明的一种电子装置，包括：显示控制单元，其被配置为控制显示装置以显示图像的一部分；以及检测单元，其被配置为检测所述显示装置的姿势变化，其中，所述显示控制单元在所检测到的姿势变化是俯仰或横摆的情况下，进行与根据所述姿势变化来改变所显示的图像的一部分的位置有关的第一处理，以及在所检测到的姿势变化是侧倾的情况下，进行与所述图像的再现有关的第二处理，所述第二处理不同于所述第一处理。
根据本发明的一种电子装置的控制方法，所述控制方法包括：将图像的一部分显示在显示装置上；检测所述显示装置的姿势变化；以及在所检测到的姿势变化是俯仰或横摆的情况下，进行与根据所述姿势变化来改变所显示的图像的一部分的位置有关的第一处理，以及在所检测到的姿势变化是侧倾的情况下，进行与所述图像的再现有关的第二处理，所述第二处理不同于所述第一处理。
根据本发明的一种计算机可读介质，其存储程序，所述程序使计算机用作根据上述的电子装置的各单元。
根据本发明，可以在设备安装在头部上以确保高的沉浸感和临场感等的状态下，进行不是显示位置改变处理的再现相关处理所用的操作。
通过以下参考附图对典型实施例的说明，本发明的更多特征将变得明显。
附图说明
图1A示出根据本实施例的电子装置的结构的示例，图1B示出根据本实施例的电子装置的外观的示例，并且图1C示出使得能够安装根据本实施例的电子装置的头戴式适配器的外观的示例；
图2A～2D示出根据本实施例的转动方向的示例；
图3是示出根据本实施例的VR显示处理的示例的流程图；
图4A～4C示出根据本实施例的显示状态的示例；
图5A和5B示出根据本实施例的设置项的示例；以及
图6是示出根据本实施例的显示设备控制处理的示例的流程图。
具体实施方式
以下将参考附图来说明本发明的优选实施例。图1A示出作为可以使用本发明的显示控制设备的示例的电子装置100的结构的示例。电子装置100可以使用诸如智能电话等的显示设备构成。
在图1A中，CPU 101、存储器102、非易失性存储器103、图像处理单元104、显示单元105、操作单元106、存储介质I/F 107、外部I/F 109和通信I/F 110连接至内部总线150。音频输出单元112和姿势检测单元113也连接至内部总线150。连接至内部总线150的单元能够经由内部总线150彼此交换数据。
CPU 101是控制整个电子装置100的控制单元，并且由至少一个处理器构成。存储器102例如包括RAM(使用半导体元件的易失性存储器等)。CPU 101根据例如非易失性存储器103中所存储的程序，通过使用存储器102作为工作存储器来控制电子装置100的各单元。非易失性存储器103存储图像数据、音频数据、其它数据和CPU 101进行工作所用的各种程序等。非易失性存储器103由闪速存储器或ROM构成。
在CPU 101的控制下，图像处理单元104对非易失性存储器103或存储介质108中所存储的图像、经由外部I/F 109所获取到的视频信号和经由通信I/F 110所获取到的图像等进行图像处理。图像处理单元104所进行的图像处理包括A/D转换处理、D/A转换处理、图像数据编码处理、压缩处理、解码处理、放大/缩小处理(调整大小)、降噪处理和颜色转换处理等。另外，进行针对全方位图像或者在不是全方位的情况下具有宽范围数据的宽范围图像的诸如全景扩展、映射处理和转换等的各种类型的图像处理。图像处理单元104可以由用于进行特定图像处理的专用电路块构成。此外，根据图像处理的类型，CPU 101可以在无需使用图像处理单元104的情况下根据程序进行图像处理。
在CPU 101的控制下，显示单元105显示图像以及构成GUI(图形用户界面)的GUI图像等。CPU 101根据程序生成显示控制信号，并且控制电子装置100的各单元，以生成要显示在显示单元105上的视频信号并将该视频信号输出至显示单元105。显示单元105基于所输出的视频信号来显示视频图像。电子装置100自身的结构可以包括直到用于输出要显示在显示单元105上的视频信号的接口为止的单元，并且显示单元105可以由外部监视器(头戴式显示器等)构成。
操作单元106是用于接收用户操作的输入装置，其中该操作单元包括诸如键盘等的字符信息输入装置、鼠标或触摸面板等的指点装置、按钮、拨盘、操纵杆、触摸传感器、以及触摸板等。触摸面板是被配置成以平面图叠加在显示单元105上并且被配置为输出与所接触的位置相对应的坐标信息的输入装置。
诸如存储卡、CD和DVD等的存储介质108可以装载到存储介质I/F 107中，并且在CPU 101的控制下从所装载的存储介质108读取数据或者向存储介质108中写入数据。外部I/F 109是用于经由有线线缆或无线地与外部装置相连接、并且用于输入和输出视频信号和音频信号的接口。通信I/F 110是用于与外部装置和因特网(NET)111等进行通信以发送和接收诸如文件和命令等的各种数据的接口。
音频输出单元112输出运动图像和音乐数据的声音、操作声音、传入声音和各种通知声音等。音频输出单元112包括用于连接耳机等的音频输出端子112a以及扬声器112b，但也可以通过无线通信等输出音频。
姿势检测单元113检测(感测)电子装置100(显示单元105)相对于重力方向的姿势。基于姿势检测单元113所检测到的姿势，可以判断电子装置100是横向、纵向、向上、向下还是倾斜保持。可以通过判断电子装置100是向上、向下还是倾斜姿势来检测该电子装置是正沿侧倾方向转动、正沿俯仰方向转动、还是正沿横摆方向转动。也可以检测相对于各转动方向的转动角度。可以使用加速度传感器、陀螺仪传感器、地磁传感器和方向传感器等至少之一作为姿势检测单元113，并且可以组合使用多个这样的传感器。在显示单元105是外部监视器的情况下，姿势检测单元113设置在显示单元105处，并且在电子装置100处设置有用于获取姿势检测单元113的检测结果的接口。
操作单元106包括触摸面板106a。CPU 101可以检测触摸面板106a上的以下操作或状态。
-没有正触摸触摸面板106a的手指或笔新触摸触摸面板106a的事实，即触摸的开始(以下称为“触及”)。
-手指或笔正触摸触摸面板106a的状态(以下称为“触摸持续”)。
-手指或笔在触摸触摸面板106a的同时正在移动的事实(以下称为“触摸移动”)。
-已触摸触摸面板106a的手指或笔与触摸面板106a分离的事实，即触摸的结束(以下称为“触摸停止”)。
-没有触摸触摸面板106a的状态(以下称为“未触摸”)。
在检测到触及时，同时检测到触摸持续。在触及之后，只要没有检测到触摸停止，通常继续检测到触摸持续。即使在检测到触摸移动时，同时也检测到触摸持续。即使检测到触摸持续，只要触摸位置没有移动，也就不会检测到触摸移动。在检测到已触摸触摸面板的所有手指和笔的触摸停止的情况下，检测到未触摸。
将这些操作/状态以及手指或笔正在触摸面板106a上触摸的位置的坐标经由内部总线通知至CPU 101，并且CPU 101基于所通知的信息来判断在触摸面板106a上进行了哪种操作(触摸操作)。关于触摸移动，还可以基于位置坐标的变化，针对触摸面板106a上的各垂直分量和水平分量判断手指或笔在触摸面板106a上移动的移动方向。在检测到进行了预定距离以上的触摸移动的情况下，判断为进行了滑动操作。将在手指正在触摸面板106a上触摸的同时使该手指在触摸面板106a上快速移动一定距离、然后使手指分离的操作称为轻拂(flick)。换句话说，轻拂是在触摸面板106a上快速追踪以拂过手指的操作。在检测到按预定速度以上进行了预定距离以上的触摸移动、然后检测到触摸停止的情况下，可以判断为进行了轻拂(可以判断为在滑动操作之后发生了轻拂)。此外，将同时触摸多个点(例如，两个点)并使触摸位置彼此靠近的触摸操作称为捏合(pinch-in)，并且将使触摸位置彼此远离的触摸操作称为分开(pinch-out)。将分开和捏合统称为捏分(pinch)操作(或简称为捏分)。触摸面板106a可以是从以下类型中选择的任何类型：电阻膜型、电容型、表面声波型、红外型、电磁感应型、图像识别型或光学传感器型等。存在由于与触摸面板的接触而检测到存在触摸的方法、以及由于手指或笔接近触摸面板而检测到存在触摸的方法，并且可以使用这些方法中的任意方法。
图1B示出电子装置100的外观的示例。显示单元105显示图像和各种信息。如上所述，显示单元105是与触摸面板106a一体地构成的，并且可以检测向显示单元105的显示面的触摸操作。如图所示，操作单元106包括操作单元106b、106c、106d和106e。操作单元106b是用于接收将电子装置100的电源切换成接通和断开的操作的电源按钮。操作单元106c和操作单元106d是用于增大和减小从音频输出单元112输出的音频的音量的音量按钮。操作单元106e是用于在显示单元105上显示主画面的主按钮。
图1C示出作为可以安装电子装置100的VR(虚拟现实)护目镜的头戴式适配器的外观图的示例。电子装置100也可以通过安装在VR护目镜上而用作头戴式显示器。插入口120用于插入电子装置100。可以将整个电子装置100插入VR护目镜中，使得显示单元105的显示面面向用于使VR护目镜固定至用户的头部的头带130侧(即，用户侧)。通过以这种方式安装已安装有电子装置100的VR护目镜，用户可以在VR护目镜安装在头部上的状态下，在无需用手把持电子装置100的情况下，观看电子装置100的显示单元105。在这种情况下，在用户移动头部或全身时，电子装置100的姿势也改变。姿势检测单元113检测此时电子装置100的姿势的变化，并且CPU 101基于姿势变化来进行以下将说明的VR显示(VR显示处理)。在这种情况下，利用姿势检测单元113检测电子装置100的姿势等同于检测用户的头部的姿势(用户的视线正在面向的方向)。
电子装置100可以在显示单元105上进行VR图像(VR内容)的VR显示。
假定VR图像是适合于进行VR显示的图像。假定VR图像包括全方位照相机(全天球照相机)所拍摄到的全方位图像(全天球图像)、以及具有比可以在显示单元105上一次显示的显示范围宽的视频图像范围(有效视频图像范围)的全景图像。此外，假定不仅照相机所拍摄到的图像而且甚至使用计算机图形(CG)所创建的图像都包括在VR图像(VR内容)中，只要可以VR显示所创建的图像即可。VR图像不仅包括静止图像，而且还包括运动图像和实时取景图像(从照相机基本上实时地获取到的图像)。VR图像具有在上下方向(垂直角度、从天顶起的角度、仰角、俯角、高度角)上最大为360度并且在左右方向(水平角度、方位角度)上最大为360度的视野的视频图像范围(有效视频图像范围)。此外，还假定VR图像包括如下的图像，这些图像在上下方向上小于360度且在左右方向上小于360度，但具有比利用通常照相机可以拍摄到的视场角宽的视场角(视野范围)、或者具有比在显示单元105处可以一次显示的显示范围宽的视频图像范围(有效视频图像范围)。例如，能够拍摄具有左右方向(水平角度、方位角度)为360度且以天顶为中心的垂直角度为210度的视野(视场角)的被摄体的图像的全天球照相机所拍摄到的图像也是VR图像。也就是说，如下的图像是VR图像，该图像具有在上下方向和左右方向各自上为180度(±90度)以上的视野的视频图像范围、以及比人类一次可以观看的范围宽的视频图像范围。在对该VR图像进行VR显示的情况下，通过改变左右转动方向上的姿势，可以在左右方向(水平转动方向)上观看无缝的全方位视频图像。在上下方向(垂直转动方向)上，在从正上方(天顶)观看时可以在±105度的范围内观看无缝的全方位图像，但从正上方起超过105度的范围变为不存在视频图像的空白区域。VR图像也可以说是“视频图像范围至少是虚拟空间(VR空间)的一部分的图像”。
VR显示是如下的显示方法，其中在该显示方法中，显示VR图像中的、与姿势检测单元113所检测到的电子装置100的姿势相对应的视野范围的视频图像，并且可以改变显示范围。在电子装置100安装在VR护目镜上观看该电子装置100的情况下，显示与用户的面部的姿势相对应的视野范围的视频图像。例如，假定在VR图像中，显示具有在特定时间点处以左右方向上为0度(特定方向、例如向北)和上下方向上为90度(从天顶起的90度、即水平)为中心的视野范围(视场角)。在电子装置100的姿势从该状态反转的情况下(例如，在显示面从向南姿势改变到向北姿势的情况下)，显示范围改变为同一VR图像中的、具有以左右方向上为180度(相反姿势、例如向南)和上下方向上为90度(水平)为中心的视角的视频图像。在用户观看VR护目镜上所安装的电子装置100时，在用户使面部从北指向南(即，转向背面)的情况下，电子装置100上所显示的视频图像从北向的视频图像改变为南向的视频图像。利用这种VR显示，可以向用户提供该用户视觉上处于VR图像中(在VR空间内)的感觉。利用这种VR显示器观看VR图像的方法(观看向用户提供该用户视觉上处于VR图像中(在VR空间内)的感觉的VR图像的方法)被称为“VR观看”。
图2A示出电子装置100的转动方向的示例。在图2A中，x轴是沿电子装置100的左右方向的轴，y轴是沿电子装置100的上下方向的轴，并且z轴是沿电子装置100的前后方向的轴。x轴、y轴和z轴相互垂直。电子装置100的初始(基准)姿势是例如在佩戴VR护目镜的人面向前方的状态下的姿势。
如图2A所示，电子装置100的转动包括作为绕x轴的转动的“俯仰”、作为绕y轴的转动的“横摆”和作为绕z轴的转动的“侧倾”。上述的俯仰方向是俯仰的转动方向、即绕x轴的转动方向，横摆方向是横摆的转动方向、即绕y轴的转动方向，并且侧倾方向是侧倾的转动方向、即绕z轴的转动方向。
例如，在佩戴VR护目镜的人从面部指向前方的状态使面部指向上侧或下侧的情况下，发生电子装置100的俯仰。在佩戴VR护目镜的人从面部指向前方的状态使面指向左侧或右侧的情况下，发生电子装置100的横摆。在佩戴VR护目镜的人从面部指向前方的状态使头部向左侧或右侧倾斜的情况下，发生电子装置100的侧倾。在本实施例中，将逆时针侧倾描述为“左侧倾”并且将顺时针侧倾描述为“右侧倾”。
图2B～2D示出VR空间的转动方向的示例。在图2B～2D中，X轴是沿VR空间的左右方向的轴，Y轴是沿VR空间的上下方向的轴，并且Z轴是沿VR空间的前后方向的轴。VR空间的转动可以是作为绕X轴的转动的“俯仰”(图2B)、作为绕Y轴的转动的“横摆”(图2C)和作为绕Z轴的转动的“侧倾”(图2D)。
在认为VR空间中的电子装置100的姿势固定的情况下，响应于电子装置100的俯仰，在VR空间中发生沿与电子装置100的俯仰方向相反的方向的俯仰。响应于电子装置100的横摆，在VR空间中发生沿与电子装置100的横摆方向相反的方向的横摆。响应于电子装置100的侧倾，在VR空间中发生沿与电子装置100的侧倾方向相反的方向的侧倾。例如，在发生电子装置100的右侧倾时，生成VR空间的左侧倾。
图3示出在电子装置100中进行的VR显示处理的流程图。通过将非易失性存储器103中所记录的程序在存储器102中展开并通过CPU 101执行该程序来实现该处理。在电子装置100的电源接通、在存储介质108上所记录的图像和从通信目的地获取到的图像中选择VR图像、并且将该VR图像的一部分的范围显示在VR视图中的情况下，开始图3的处理。要显示的图像不必是VR图像。在将图像的一部分的范围作为显示范围显示在显示单元105上的情况下，该图像的一部分的范围可能不显示在VR视图中。
在步骤S301中，CPU 101将存储器102中所存储的各参数(各判断所要使用的各参数)初始化为零。在本实施例中，CPU 101按预定时间间隔判断电子装置100的状态是俯仰状态、横摆状态、第一左侧倾状态、第二左侧倾状态、第一右侧倾状态、第二右侧倾状态还是停止状态。此外，在步骤S301中，将俯仰状态计数值、横摆状态计数值、第一左侧倾状态计数值、第二左侧倾状态计数值、第一右侧倾状态计数值和第二右侧倾状态计数值初始化为零。
俯仰状态是在发生电子装置100沿俯仰方向转动了第二角度以上的俯仰之后的状态。例如，佩戴VR护目镜的人正在面部向上的状态、以及佩戴VR护目镜的人正在面部向下的状态等。横摆状态是在发生电子装置100沿横摆方向转动了第二角度以上的横摆之后的状态。例如，佩戴VR护目镜的人正在面向左侧的状态、以及佩戴VR护目镜的人正在面向右侧的状态等。第一左侧倾状态是在发生转动角度为第一角度以上且小于第三角度的左侧倾之后的状态，并且第二左侧倾状态是在发生转动角度为第三角度以上的左侧倾之后的状态。第一左侧倾状态和第二左侧倾状态是例如佩戴VR护目镜的人的头部向左侧倾斜的状态。第一右侧倾状态是在发生转动角度为第一角度以上且小于第三角度的右侧倾之后的状态，并且第二右侧倾状态是在发生转动角度为第三角度以上的右侧倾之后的状态。第一右侧倾状态和第二右侧倾状态是例如佩戴VR护目镜的人的头部向右侧倾斜的状态。停止状态是与俯仰状态、横摆状态、第一左侧倾状态、第二左侧倾状态、第一右侧倾状态和第二右侧倾状态不同的状态。例如，在停止状态下，佩戴VR护目镜的人正在面向前方。
在本实施例中，使用比第一角度小的角度作为第二角度。结果，俯仰状态和横摆状态比第一左侧倾状态、第二左侧倾状态、第一右侧倾状态和第二右侧倾状态更容易判断。
俯仰状态计数值是表示俯仰状态的持续时间的计数值，并且横摆状态计数值是表示横摆状态的持续时间的计数值。第一左侧倾状态计数值是表示第一左侧倾状态的持续时间的计数值，并且第二左侧倾状态计数值是表示第二左侧倾状态的持续时间的计数值。第一右侧倾状态计数值是表示第一右侧倾状态的持续时间的计数值，并且第二右侧倾状态计数值是表示第二右侧倾状态的持续时间的计数值。
在步骤S302中，CPU 101判断要显示的VR图像是否是运动图像(VR运动图像)。在判断为VR运动图像的情况下，处理进入步骤S303。否则(在判断为VR静止图像的情况下)，处理进入步骤S304。
在步骤S303和S304中，CPU 101在显示单元105上显示与多个再现相关的处理操作(与VR图像400的再现有关的处理)中的不同于显示位置改变处理的处理有关的显示项。具体地，在步骤S303中，CPU 101将运动图像所用的设置项的显示项显示在显示单元105上。在步骤S304中，CPU 101将静止图像所用的设置项的显示项显示在显示单元105上。
图4A示出步骤S303或S304之后的显示单元105的显示状态的示例。在显示单元105上，显示VR图像400，并且在VR图像400上显示显示项401～406。显示项401和402是显示表示电子装置100在侧倾方向上的转动角度(侧倾角度)的计量器407的指示器。显示项403～406是表示与显示位置改变处理不同的再现相关处理的设置项的项。
图5A示出运动图像所用的设置项的示例。在图5A所示的示例中，通过步骤S303的处理，将表示VR运动图像的停止的项显示为图4A的显示项404，并且将表示VR运动图像的再现的项显示为显示项406。将表示VR运动图像的快退的项显示为显示项403，并且将表示VR运动图像的快进的项显示为显示项405。
图5B示出静止图像所用的设置项的示例。在图5B所示的示例中，通过步骤S304的处理，将如下的项显示为图4A的显示项404，其中该项表示VR静止图像的缩小、以及多个VR静止图像并排显示的多图像再现。将如下的项显示为显示项406，其中该项表示VR静止图像的放大、以及显示一个VR静止图像的单图像再现。将表示使所显示的VR静止图像切换到先前的VR静止图像的图像后退的项显示为显示项403，并且将表示使所显示的VR静止图像切换到下一VR静止图像的图像前进的项显示为显示项405。
在步骤S305中，CPU 101根据姿势检测单元113所检测到的电子装置100的侧倾角度来将图4A所示的计量器407显示在指示器401或指示器402上。在左侧倾状态(发生了左侧倾之后的状态)下，计量器407显示在指示器401上，并且在右侧倾状态(发生了右侧倾之后的状态)下，计量器407显示在指示器402上。侧倾角越大，计量器407显示得越高。在电子装置100的初始姿势(侧倾角度为0°)的情况下，不显示计量器407。在侧倾角为50°的情况下，计量器407的高度变为最大。
在步骤S306中，CPU 101基于姿势检测单元113的检测结果来判断电子装置100的状态。判断电子装置100的状态是俯仰状态、横摆状态、第一左侧倾状态、第二左侧倾状态、第一右侧倾状态、第二右侧倾状态还是停止状态。
在步骤S307中，CPU 101根据步骤S306的判断结果来判断电子装置100的状态是否是俯仰状态或横摆状态。在判断为俯仰状态或横摆状态的情况下，处理进入步骤S308。否则，处理进入步骤S312。
在步骤S308中，CPU 101将侧倾状态计数值(第一左侧倾状态计数值、第二左侧倾状态计数值、第一右侧倾状态计数值和第二右侧倾状态计数值)清零。
在步骤S309中，CPU 101将俯仰状态计数值或横摆状态计数值向上计数1。在电子装置100的状态是俯仰状态的情况下，对俯仰状态计数值进行向上计数，并且在电子装置100的状态是横摆状态的情况下，对横摆状态计数值进行向上计数。
在步骤S310中，CPU 101判断在步骤S309中向上计数得到的计数值(俯仰状态计数值或横摆状态计数值)是否至少为第一阈值。在判断为该计数值至少为第一阈值的情况下，处理进入步骤S311。否则，处理进入步骤S305。因此，在俯仰状态或横摆状态的持续时间达到第一阈值时间时，处理进入步骤S311。
在步骤S311中，CPU 101进行根据电子装置100的姿势变化来改变VR图像的显示范围的位置的显示位置改变处理。
在步骤S307中没有判断为俯仰状态或横摆状态的情况下，在步骤S312中，CPU 101将俯仰状态计数值和横摆状态计数值清零。
在步骤S313中，CPU 101根据步骤S306的判断结果来判断电子装置100的状态是否是转动角度至少为第一角度的侧倾状态。在判断为转动角度至少为第一角度的侧倾状态(第一左侧倾状态、第二左侧倾状态、第一右侧倾状态或第二右侧倾状态)的情况下，处理进入步骤S314。否则(在判断为停止状态的情况下)，处理进入步骤S315。第一角度是例如15°。
在步骤S314中，CPU 101进行显示设备控制处理。以下将说明该显示设备控制处理。
在步骤S315中，CPU 101将侧倾状态计数值(第一左侧倾状态计数值、第二左侧倾状态计数值、第一右侧倾状态计数值和第二右侧倾状态计数值)清零。
图6示出显示设备控制处理(图3的步骤S314)的流程图。
在步骤S601中，CPU 101根据图3中的步骤S306的判断结果来判断电子装置100的状态是否是转动角度至少为第一角度的右侧倾状态。在判断为转动角度至少为第一角度的右侧倾状态(第一右侧倾状态或第二右侧倾状态)的情况下，处理进入步骤S602。否则(在判断为第一左侧倾状态或第二左侧倾状态的情况下)，处理进入步骤S612。
在步骤S602中，CPU 101将第一左侧倾状态计数值和第二左侧倾状态计数值清零。
在步骤S603中，CPU 101根据图3中的步骤S306的判断结果来判断电子装置100的侧倾角度是否小于第三角度。也就是说，CPU 101判断电子装置100的状态是否是第一右侧倾状态。在判断为侧倾角度小于第三角度的情况下(在电子装置100的状态是第一右侧倾状态的情况下)，处理进入步骤S604。否则(在电子装置100的状态是第二右侧倾状态的情况下)，处理进入步骤S608。第三角度是例如30°。
在步骤S604中，CPU 101将第二右侧倾状态计数值清零。
在步骤S605中，CPU 101将第一右侧倾状态计数值向上计数1。
在步骤S606中，CPU 101判断第一右侧倾状态计数值是否至少为第二阈值。在判断为第一右侧倾状态计数值至少为第二阈值的情况下，处理进入步骤S607。否则，处理进入图3的步骤S305。因此，在第一右侧倾状态的持续时间达到第二阈值时间时，处理进入步骤S607。
在步骤S607中，CPU 101进行与第一右侧倾状态相对应的设置项的再现相关处理。这里，假定使用图5A和5B的设置项。在VR运动图像的情况下进行再现，并且在VR静止图像的情况下进行图像前进。
在本实施例中，使用比俯仰状态计数值或横摆状态计数值(在步骤S310中使用的第一阈值)的阈值大的值作为侧倾状态计数值的阈值(在步骤S606等中使用的第二阈值)。因此，CPU 101以比选择设置项时的反应速度快的反应速度进行显示范围的位置的改变以及多图像显示(多图像再现)的图像的选择等。此外，可以抑制诸如设置项的误选择(无意选择)等的故障。
在步骤S603中判断为侧倾角度至少为第三角度(电子装置100的状态为第二右侧倾状态)的情况下，在步骤S608中，CPU 101将第一右侧倾状态计数值清零。
在步骤S609中，CPU 101将第二右侧倾状态计数值向上计数1。
在步骤S610中，CPU 101判断第二右侧倾状态计数值是否至少为第二阈值。在判断为第二右侧倾状态计数值至少为第二阈值的情况下，处理进入步骤S611。否则，处理进入图3的步骤S305。因此，在第二右侧倾状态的持续时间达到第二阈值时间时，处理进入步骤S611。
在步骤S611中，CPU 101进行与第二右侧倾状态相对应的设置项的再现相关处理。在VR运动图像的情况下，进行快进，并且在VR静止图像的情况下，进行放大/单图像再现。此时，显示单元105的显示状态是如图4B所示的显示状态。在图4B中，计量器407显示在指示器402上并到达显示项405的位置。从这样的显示状态，用户可以直观地掌握进行了快进、放大或单图像再现等。
在步骤S601中没有判断为右侧倾状态的情况下(在判断为第一左侧倾状态或第二左侧倾状态的情况下)，在步骤S612中，CPU 101将第一右侧倾状态计数值和第二右侧倾状态计数值清零。
在步骤S613中，CPU 101根据图3中的步骤S306的判断结果来判断电子装置100的侧倾角度是否小于第三角度。也就是说，CPU 101判断电子装置100的状态是否是第一左侧倾状态。在判断为侧倾角度小于第三角度(电子装置100的状态是第一左侧倾状态)的情况下，处理进入步骤S614。否则(在电子装置100的状态是第二左侧倾状态的情况下)，处理进入步骤S618。
在步骤S614中，CPU 101将第二左侧倾状态计数值清零。
在步骤S615中，CPU 101将第一左侧倾状态计数值向上计数1。
在步骤S616中，CPU 101判断第一左侧倾状态计数值是否至少为第二阈值。在判断为第一左侧倾状态计数值至少为第二阈值的情况下，处理进入步骤S617。否则，处理进入图3的步骤S305。因此，在第一左侧倾状态的持续时间达到第二阈值时间时，处理进入步骤S617。
在步骤S617中，CPU 101进行与第一左侧倾状态相对应的设置项的再现相关处理。在VR运动图像的情况下，进行停止，并且在VR静止图像的情况下，执行图像后退。
在步骤S613中判断为侧倾角至少为第三角度(电子装置100的状态是第二左侧倾状态)的情况下，在步骤S618中，CPU 101将第一左侧倾状态计数值清零。
在步骤S619中，CPU 101将第二左侧倾状态计数值向上计数1。
在步骤S620中，CPU 101判断第二左侧倾状态计数值是否至少为第二阈值。在判断为第二左侧倾状态计数值至少为第二阈值的情况下，处理进入步骤S621。否则，处理进入图3的步骤S305。因此，在第二左侧倾状态的持续时间达到第二阈值时间时，处理进入步骤S621。
在步骤S621中，CPU 101进行与第二左侧倾状态相对应的设置项的再现相关处理。在VR运动图像的情况下，进行快退，并且在VR静止图像的情况下，进行缩小/多图像再现。此时，显示单元105的显示状态是如图4C所示的状态。在图4C中，计量器407显示在指示器401上并到达显示项403的位置。从这样的显示状态，用户可以直观地掌握进行快退、缩小或多图像再现等。
如上所述，根据本实施例，在将图像的一部分的范围作为显示范围显示在显示单元上时，在所检测到的姿势变化是俯仰或横摆的情况下，根据该姿势变化来进行用于改变显示范围的位置的显示位置改变处理。此外，在所检测到的姿势变化是侧倾的情况下，进行不同于显示位置改变处理的再现相关处理。结果，可以在设备(显示单元)安装在头部上以确保高的沉浸感和临场感的状态下进行与再现有关的操作。
被描述为由CPU 101进行的上述各种控制操作可以由一个硬件进行，或者整个设备的控制可以通过多个硬件(例如，多个处理器和电路)分担处理来进行。
尽管已经参考本发明的优选实施例详细说明了本发明，但本发明不限于这些具体实施例，并且在没有偏离本发明的主旨的范围内的各种实施例也包括在本发明中。此外，上述各实施例仅仅示出本发明的一个实施例，并且可以适当地组合这些实施例。
响应于侧倾而执行的再现相关处理(要显示的设置项)可以是预先登记在电子装置100中的固定处理，或者可以是任意可改变的。可以响应于侧倾而进行与再现、停止、快进、快退、放大、缩小、单图像再现、多图像再现、图像前进和图像后退不同的再现相关处理。例如，可以响应于侧倾而执行将所显示的运动图像切换到下一文件的运动图像的文件前进、或者将所显示的运动图像切换到前一文件的运动图像的文件后退等。
已经说明了第一阈值(第一阈值时间)小于第二阈值(第二阈值时间)的示例，但第一阈值可以等于第二阈值或者可以大于第二阈值。第一阈值和第二阈值可以大于零。已经说明了第二角度小于第一角度的示例，但第二角度可以等于第一角度或者可以大于第一角度。第一角度和第二角度可以大于零。
已经说明了在发生侧倾的情况下显示范围的位置不改变的示例，但CPU 101可以在发生侧倾的情况下进行显示位置改变处理。已经说明了在俯仰状态和横摆状态下没有检测到侧倾状态、并且不进行不同于显示位置改变处理的再现相关处理的示例，但在俯仰状态和横摆状态下可能检测到侧倾状态。此外，在俯仰状态和横摆状态下检测到侧倾状态的情况下，可以进行不同于显示位置改变处理的再现相关处理。
已经说明了在检测到右侧倾状态的情况下、进行与检测到左侧倾状态的情况不同的处理作为再现相关处理的示例，但在检测到右侧倾状态的情况下和在检测到左侧倾状态的情况下，再现相关处理可以相同。已经说明了在检测到转动角度小于第三角度的侧倾的情况下、进行与在检测到转动角度至少为第三转动角度的侧倾的情况下进行的处理不同的处理作为再现相关处理的示例，但这样的过程并非限制性的。在检测到转动角度小于第三角度的侧倾的情况下和在检测到转动角度至少为第三转动角度的侧倾的情况下，再现相关处理可以相同。
用于显示与不同于显示位置改变处理的再现相关处理有关的显示项的定时不限于上述定时(图3中的步骤S303或步骤S304)。例如，在检测到侧倾状态的情况下，CPU 101可以进行用以将与不同于显示位置改变处理的再现相关处理有关的显示项显示在显示单元105上的控制。CPU 101可以进行用以在显示项未显示的状态下检测到侧倾状态的情况下显示显示项的控制，并且可以在显示显示项的状态下检测到侧倾状态的情况下进行不同于显示位置改变处理的再现相关处理。在检测到侧倾状态的情况下，CPU 101可以进行用以显示显示项的控制，并且还可以进行不同于显示位置改变处理的再现相关处理。
电子装置100可以获取与电子装置100(显示单元105)的移动有关的检测结果。此外，在检测到沿预定方向(前方向、后方向、右方向和左方向等)的滑动移动的情况下，CPU101可以进行不同于显示位置改变处理的再现相关处理。例如，在佩戴VR护目镜的人向前、向后、向左或向右移动的情况下，沿与人的移动方向相同的方向的滑动移动被检测为电子装置100的滑动移动。
在上述实施例中，说明了将本发明应用于诸如智能电话等的电子装置100的示例，但本发明不限于该示例，并且可以应用于可被控制成显示图像的一部分的任何电子装置。无需说明，本发明还可应用于头戴式显示器(HMD)，而不是智能电话。此外，本发明也可应用于个人计算机、PDA、移动电话终端、便携式图像查看器、配备有显示器的打印机设备、以及数字相框等。另外，本发明可以应用于音乐播放器、游戏机、电子书阅读器、平板终端、智能电话、投影设备、包括显示器的家用电子装置、以及车载设备等。
其它实施例
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (15)

1.一种电子装置，包括：
显示控制单元，其被配置为控制显示装置以显示图像的一部分；以及
检测单元，其被配置为检测所述显示装置的姿势变化，
其中，所述显示控制单元在所检测到的姿势变化是俯仰或横摆的情况下，进行与根据所述姿势变化来改变所显示的图像的一部分的位置有关的第一处理，以及在所检测到的姿势变化是侧倾的情况下，进行与所述图像的再现有关的第二处理，所述第二处理不同于所述第一处理。
2.根据权利要求1所述的电子装置，其中，
所述图像是VR图像，以及
所述图像的所述一部分显示在VR视图中。
3.根据权利要求1或2所述的电子装置，其中，
在所检测到的姿势变化是侧倾的情况下，所述显示控制单元不进行所述第一处理。
4.根据权利要求1或2所述的电子装置，其中，
在所检测到的姿势变化是俯仰或横摆的情况下，所述显示控制单元不进行所述第二处理。
5.根据权利要求1或2所述的电子装置，其中，
所述第二处理是静止图像的图像前进、静止图像的图像后退、静止图像的放大、静止图像的缩小、运动图像的文件前进、运动图像的文件后退、运动图像的快进、运动图像的快退、运动图像的再现、或者运动图像的再现的停止。
6.根据权利要求1或2所述的电子装置，其中，
所述显示控制单元在检测到俯仰或横摆的姿势的持续时间达到第一时间的情况下进行所述第一处理，以及在检测到侧倾的姿势的持续时间达到第二时间的情况下进行所述第二处理，
所述第一时间短于所述第二时间。
7.根据权利要求1或2所述的电子装置，其中，
在所述显示装置以第一轴为中心转动了至少第一角度时，检测到作为侧倾的姿势变化，以及
在所述显示装置以与所述第一轴垂直的第二轴或第三轴为中心转动了至少第二角度时，检测到作为俯仰或横摆的姿势变化，所述第二角度小于所述第一角度。
8.根据权利要求1或2所述的电子装置，其中，
所述显示控制单元进行与所检测到的作为侧倾的姿势变化的方向相对应的所述第二处理。
9.根据权利要求1或2所述的电子装置，其中，
所述显示控制单元进行与所检测到的作为侧倾的姿势变化的角度相对应的所述第二处理。
10.根据权利要求1或2所述的电子装置，其中，
在所检测到的姿势变化是侧倾的情况下，所述显示控制单元控制所述显示装置以显示与所述第二处理有关的显示项。
11.根据权利要求10所述的电子装置，其中，
在所检测到的姿势变化是侧倾并且所述显示项未显示在所述显示装置上的情况下，所述显示控制单元控制所述显示装置以显示所述显示项，以及
在所检测到的姿势变化是侧倾并且所述显示项显示在所述显示装置上的情况下，所述显示控制单元进行所述第二处理。
12.根据权利要求10所述的电子装置，其中，
在所检测到的姿势变化是侧倾的情况下，所述显示控制单元控制所述显示装置以显示所述显示项、并且还进行所述第二处理。
13.根据权利要求1或2所述的电子装置，其中，
所述电子装置是具有所述显示装置的头戴式显示器。
14.一种电子装置的控制方法，所述控制方法包括：
将图像的一部分显示在显示装置上；
检测所述显示装置的姿势变化；以及
在所检测到的姿势变化是俯仰或横摆的情况下，进行与根据所述姿势变化来改变所显示的图像的一部分的位置有关的第一处理，以及在所检测到的姿势变化是侧倾的情况下，进行与所述图像的再现有关的第二处理，所述第二处理不同于所述第一处理。
15.一种计算机可读介质，其存储程序，所述程序使计算机用作根据权利要求1至13中任一项所述的电子装置的各单元。
CN201910266551.5A 2018-04-04 2019-04-03 电子装置、电子装置的控制方法和计算机可读介质 Pending CN110347239A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018072212A JP7210153B2 (ja) 2018-04-04 2018-04-04 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
JP2018-072212 2018-04-04

Publications (1)

Publication Number Publication Date
CN110347239A true CN110347239A (zh) 2019-10-18

Family

ID=67991508

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910266551.5A Pending CN110347239A (zh) 2018-04-04 2019-04-03 电子装置、电子装置的控制方法和计算机可读介质

Country Status (4)

Country Link
US (1) US11036287B2 (zh)
JP (1) JP7210153B2 (zh)
CN (1) CN110347239A (zh)
DE (1) DE102019108520A1 (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090021589A1 (en) * 2005-12-28 2009-01-22 Sony Corporation Deviation detector, deviation corrector and imaging device
JP2009098676A (ja) * 2007-09-28 2009-05-07 Nikon Corp 制御装置及びヘッドマウントディスプレイ装置
US20090303204A1 (en) * 2007-01-05 2009-12-10 Invensense Inc. Controlling and accessing content using motion processing on mobile devices
CN102129314A (zh) * 2010-01-19 2011-07-20 索尼公司 信息处理设备、操作预测方法和操作预测程序
CN103959135A (zh) * 2011-11-28 2014-07-30 谷歌公司 基于头部角度触发的动作
JP2014197066A (ja) * 2013-03-29 2014-10-16 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
JP2016110319A (ja) * 2014-12-04 2016-06-20 ソニー株式会社 表示制御装置、表示制御方法およびプログラム
US20160209658A1 (en) * 2014-05-30 2016-07-21 Sony Computer Entertainment America Llc Head Mounted Device (HMD) System Having Interface With Mobile Computing Device for Rendering Virtual Reality Content
CN106125902A (zh) * 2015-05-07 2016-11-16 松下知识产权经营株式会社 显示控制方法和头戴式显示器
US20170124769A1 (en) * 2014-07-28 2017-05-04 Panasonic Intellectual Property Management Co., Ltd. Augmented reality display system, terminal device and augmented reality display method
CN107710105A (zh) * 2015-07-08 2018-02-16 索尼互动娱乐股份有限公司 操作输入装置和操作输入方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009122476A (ja) 2007-11-16 2009-06-04 Nikon Corp 制御装置、ヘッドマウントディスプレイ装置、プログラム及び制御方法
JP2015125502A (ja) 2013-12-25 2015-07-06 ソニー株式会社 画像処理装置及び画像処理方法、表示装置及び表示方法、コンピューター・プログラム、並びに画像表示システム
CN105895124A (zh) 2015-12-03 2016-08-24 乐视网信息技术（北京）股份有限公司 播放控制方法、设备、系统以及客户端设备
JP6306083B2 (ja) 2016-05-06 2018-04-04 株式会社コロプラ 仮想空間を提供する方法、プログラム、および記録媒体
JP6236691B1 (ja) 2016-06-30 2017-11-29 株式会社コナミデジタルエンタテインメント 端末装置、及びプログラム
WO2018097632A1 (en) 2016-11-25 2018-05-31 Samsung Electronics Co., Ltd. Method and device for providing an image
WO2018150831A1 (ja) 2017-02-16 2018-08-23 ソニー株式会社 情報処理装置、情報処理方法及び記録媒体
JP6582302B2 (ja) 2017-03-13 2019-10-02 株式会社コナミデジタルエンタテインメント 表示制御装置及びプログラム

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090021589A1 (en) * 2005-12-28 2009-01-22 Sony Corporation Deviation detector, deviation corrector and imaging device
US20090303204A1 (en) * 2007-01-05 2009-12-10 Invensense Inc. Controlling and accessing content using motion processing on mobile devices
JP2009098676A (ja) * 2007-09-28 2009-05-07 Nikon Corp 制御装置及びヘッドマウントディスプレイ装置
CN102129314A (zh) * 2010-01-19 2011-07-20 索尼公司 信息处理设备、操作预测方法和操作预测程序
CN103959135A (zh) * 2011-11-28 2014-07-30 谷歌公司 基于头部角度触发的动作
JP2014197066A (ja) * 2013-03-29 2014-10-16 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
US20160209658A1 (en) * 2014-05-30 2016-07-21 Sony Computer Entertainment America Llc Head Mounted Device (HMD) System Having Interface With Mobile Computing Device for Rendering Virtual Reality Content
US20170124769A1 (en) * 2014-07-28 2017-05-04 Panasonic Intellectual Property Management Co., Ltd. Augmented reality display system, terminal device and augmented reality display method
JP2016110319A (ja) * 2014-12-04 2016-06-20 ソニー株式会社 表示制御装置、表示制御方法およびプログラム
CN106125902A (zh) * 2015-05-07 2016-11-16 松下知识产权经营株式会社 显示控制方法和头戴式显示器
CN107710105A (zh) * 2015-07-08 2018-02-16 索尼互动娱乐股份有限公司 操作输入装置和操作输入方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
孟祥旭等: "《智能CAD与数字娱乐新进展》", 30 September 2006, 山东大学出版社, pages: 68 - 70 *

Also Published As

Publication number Publication date
JP2019184689A (ja) 2019-10-24
US11036287B2 (en) 2021-06-15
DE102019108520A1 (de) 2019-10-10
US20190310702A1 (en) 2019-10-10
JP7210153B2 (ja) 2023-01-23

Similar Documents

Publication Publication Date Title
US11231845B2 (en) Display adaptation method and apparatus for application, and storage medium
CN107517372B (zh) 一种vr内容拍摄方法、相关设备及系统
CN105335001B (zh) 具有弯曲显示器的电子设备以及用于控制其的方法
CN103513894B (zh) 显示设备、远程控制设备及其控制方法
JP6046729B2 (ja) 全方向ジェスチャー入力
CN108499105A (zh) 在虚拟环境中进行视角调整的方法、装置及存储介质
CN107710105B (zh) 操作输入装置和操作输入方法
CN108292146A (zh) 虚拟现实中的激光指示器交互和缩放
US20120208639A1 (en) Remote control with motion sensitive devices
EP2538309A2 (en) Remote control with motion sensitive devices
JP7005161B2 (ja) 電子機器及びその制御方法
CN108245893A (zh) 三维虚拟环境中虚拟对象的姿态确定方法、装置及介质
CN108474950B (zh) Hmd设备及其控制方法
US11845007B2 (en) Perspective rotation method and apparatus, device, and storage medium
US20090104993A1 (en) Electronic game controller with motion-sensing capability
US20140132725A1 (en) Electronic device and method for determining depth of 3d object image in a 3d environment image
CN110308832A (zh) 显示控制设备及其控制方法和存储介质
EP2341412A1 (en) Portable electronic device and method of controlling a portable electronic device
CN114144753A (zh) 图像处理装置、图像处理方法和记录介质
WO2018192455A1 (zh) 一种生成字幕的方法及装置
JP7005160B2 (ja) 電子機器及びその制御方法
KR102278229B1 (ko) 전자기기 및 그 제어 방법
CN110347239A (zh) 电子装置、电子装置的控制方法和计算机可读介质
US11960660B2 (en) Terminal device, virtual object manipulation method, and virtual object manipulation program
CN111782053B (zh) 模型编辑方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination