CN111381750B - 电子装置及其控制方法和计算机可读存储介质 - Google Patents
电子装置及其控制方法和计算机可读存储介质 Download PDFInfo
- Publication number
- CN111381750B CN111381750B CN201911367630.1A CN201911367630A CN111381750B CN 111381750 B CN111381750 B CN 111381750B CN 201911367630 A CN201911367630 A CN 201911367630A CN 111381750 B CN111381750 B CN 111381750B
- Authority
- CN
- China
- Prior art keywords
- image
- display
- content
- range
- electronic device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Abstract
本发明涉及一种电子装置及其控制方法和计算机可读存储介质。所述电子装置包括:控制单元,用于进行控制,使得在第二画面上进行同一内容的循环滚动显示,所述循环滚动显示涉及:根据第一操作,在不使指示符滚动的情况下使通过平板显示正显示的VR内容在第一方向上滚动,并且使VR内容中的与第一方向上的滚动量相对应的图像区域从矩形区域中的第二方向的端部起在第一方向上顺次显示,以及使得即使在进行第一操作的情况下,也不在第一画面上进行循环滚动显示;以及生成单元,用于基于由指示符表示的区域,来生成VR内容中的包括比第一视频范围窄的第二视频范围的已编辑VR内容。
Description
技术领域
本发明涉及电子装置及其控制方法。
背景技术
近年来,能够拍摄包含具有比人类视场角(viewing angle)更宽的范围的视频的VR(虚拟现实)图像(诸如全向图像或全天球图像等)的摄像设备越来越普遍。另一方面,已引入了专用于前方180度的图像格式,并且从VR图像中裁剪180度图像的需求正在增加。
日本特开2016-123127提出了用于提取VR图像中的进行了触摸操作的部分区域、进行失真校正、并将校正后的部分区域重叠显示在画面上的方法。
日本特开2014-165523提出了用于通过改变裁剪框的大小或者通过在保持裁剪框固定的同时改变图像的倍率来指定图像的裁剪区域的设置的方法。
在从VR图像中裁剪180度的裁剪区域的情况下,用户可以通过进行将360度的有效视频范围容纳到矩形中的平板显示来全景地观看整个VR图像。然而,在平板显示的状态下指定180度的裁剪区域的情况下,存在难以将平板显示上的端部区域指定为裁剪中心的问题。
发明内容
考虑到上述,本发明的目的是提供一种电子装置及其控制方法,其使得能够在平板显示上从VR图像中裁剪具有较窄范围的VR图像的情况下,将平板显示的画面的端部附近的区域指定为裁剪中心。
为了解决上述的问题,本发明的电子装置包括至少一个存储器和至少一个处理器,其用作:显示控制单元,其被配置为进行控制,使得:在第一画面上进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且在第二画面上在通过平板显示正显示于矩形区域中的所述VR内容上显示用于表示从所述VR内容要裁剪的区域的指示符;切换单元,其被配置为根据来自用户的对裁剪范围的设置指示来将所述第一画面切换到所述第二画面;控制单元,其被配置为进行控制,使得:在所述第二画面上进行同一内容的循环滚动显示,所述循环滚动显示涉及:根据第一操作,在不使所述指示符滚动的情况下使通过平板显示正显示的所述VR内容在第一方向上滚动,并且根据所述VR内容的滚动,使所述VR内容中的与所述第一方向上的滚动量相对应的图像区域从所述矩形区域中的作为与所述第一方向相反的方向的第二方向的端部起在所述第一方向上顺次显示,以及即使在进行所述第一操作的情况下,也不在所述第一画面上进行所述循环滚动显示;以及生成单元,其被配置为基于所述第二画面上的由所述指示符表示的区域,来生成所述VR内容中的包括比所述第一视频范围窄的第二视频范围的已编辑VR内容。
一种电子装置的控制方法,包括以下步骤:进行控制,使得:在第一画面上进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且在第二画面上在通过平板显示正显示于矩形区域中的所述VR内容上显示用于表示从所述VR内容要裁剪的区域的指示符;根据来自用户的对裁剪范围的设置指示来将所述第一画面切换到所述第二画面;进行控制,使得:在所述第二画面上进行同一内容的循环滚动显示,所述循环滚动显示涉及:根据第一操作,在不使所述指示符滚动的情况下使通过平板显示正显示的所述VR内容在第一方向上滚动,并且根据所述VR内容的滚动,使所述VR内容中的与所述第一方向上的滚动量相对应的图像区域从所述矩形区域中的作为与所述第一方向相反的方向的第二方向的端部起在所述第一方向上顺次显示,以及即使在进行所述第一操作的情况下,也不在所述第一画面上进行所述循环滚动显示;以及基于所述第二画面上的由所述指示符表示的区域,来生成所述VR内容中的包括比所述第一视频范围窄的第二视频范围的已编辑VR内容。
一种存储有程序的计算机可读存储介质,所述程序使得计算机用作上述的电子装置的各个单元。
通过以下参考附图对典型实施例的说明,本发明的更多特征将变得明显。
附图说明
图1是显示控制设备的框图;
图2是显示控制设备的外观图;
图3是示出从VR图像向180度图像的裁剪处理的流程图;
图4是示出裁剪方向设置处理的流程图;
图5是示出VR显示中的端部区域确认处理的流程图;
图6A~6C表示在进行从VR图像向180度图像的裁剪处理时的显示示例;
图7A~7E表示在通过右滚动改变裁剪方向时的显示示例;
图8A~8E表示在通过左滚动改变裁剪方向时的显示示例;
图9A和9B表示VR显示中的端部区域确认方法的显示示例;以及
图10A~10D表示用以显示VR图像的各种方式的示例。
具体实施方式
以下将参考附图来说明本发明的优选实施例。图1是示出作为电子装置的示例的显示控制设备100的结构示例的框图。CPU 101、存储器102、非易失性存储器103、图像处理单元104、显示器105、操作单元106、记录介质I/F 107、外部I/F 109和通信I/F 110连接至内部总线150。另外,音频输出单元112和姿势检测单元113也连接至内部总线150。连接至内部总线150的各个单元被配置成能够经由内部总线150彼此交换数据。
CPU 101是用于控制整个显示控制设备100的控制单元,并且由至少一个处理器或一个电路构成。存储器102例如由RAM(诸如使用半导体元件的易失性存储器等)构成。CPU101根据非易失性存储器103中所存储的程序通过例如使用存储器102作为工作存储器,来控制显示控制设备100的各个单元。非易失性存储器103存储图像数据和音频数据、其它数据、以及使得CPU 101能够工作的各种程序等。非易失性存储器103例如由闪速存储器或ROM构成。CPU 101执行显示控制设备100中所包括的各个单元(即,显示控制单元、控制单元、生成单元和边界显示单元)的处理。
在CPU 101的控制下,图像处理单元104对非易失性存储器103或记录介质108中所存储的图像、经由外部I/F 109获取到的视频信号、以及经由通信I/F 110获取到的图像等进行各种类型的图像处理。图像处理单元104所进行的图像处理包括A/D转换处理和D/A转换处理、以及图像数据的编码处理、压缩处理、解码处理、放大/缩小处理(调整大小)、降噪处理和颜色转换处理等。图像处理单元104还进行全向图像或者作为尽管不是全向但具有宽范围的视频的宽范围图像的VR图像的各种图像处理(诸如全景展开、映射处理和转换等)。图像处理单元104可以由用于进行特定图像处理的专用电路块构成。另外,根据图像处理的类型,CPU 101可以在不使用图像处理单元104的情况下根据程序进行图像处理。
显示器105在CPU 101的控制下显示图像和构成GUI(图形用户界面)的GUI画面等。CPU 101控制显示控制设备100的各个单元,以便根据程序生成显示控制信号,并且生成要显示在显示器105上的视频信号并将该视频信号输出至显示器105。显示器105基于所生成并输出的视频信号来显示视频。可选地,显示控制设备自身的组件可以被限制成直到用于输出显示器105所要显示的视频信号的接口为止,并且显示器105可以由外部监视器(诸如电视机或HMD等)构成。
操作单元106是用于接受用户操作的输入装置,其示例包括诸如键盘等的字符信息输入装置、诸如鼠标或触摸面板等的指点装置、按钮、拨盘、操纵杆、触摸传感器、以及触摸垫。在这种情况下,触摸面板106a是指以平面方式被配置成与显示器105重叠并且根据所触摸的位置来输出坐标信息的输入装置。
作为存储卡、CD或DVD等的记录介质108可安装至记录介质I/F 107上并可从记录介质I/F 107拆卸。在CPU 101的控制下,记录介质I/F 107从所安装的记录介质108读取数据并向该记录介质108写入数据。外部I/F 109是使用有线线缆或以无线方式连接至外部装置以进行视频信号和音频信号的输入和输出的接口。通信I/F 110是用于与外部装置和网络(因特网)111等进行通信以发送和接收诸如文件和命令等的各种类型的数据的接口。
音频输出单元112输出运动图像和音乐数据的音频、键盘点击声、铃声、以及各种通知声音等。尽管假定音频输出单元112包括耳机等要连接至的(后面要说明的)音频输出端子112a、以及(后面要说明的)扬声器112b,但可选地,音频输出单元112可以通过无线电通信等将音频数据输出至外部扬声器。
姿势检测单元113检测显示控制设备100相对于重力方向的姿势(倾斜)、或者显示控制设备100相对于横摆方向、俯仰方向和侧倾方向上的各个轴的姿势。基于姿势检测单元113所检测到的姿势,可以判断显示控制设备100是水平地保持、垂直地保持、指向上方、指向下方、还是采取倾斜姿势。另外,可以判断显示控制设备100在诸如横摆方向、俯仰方向或侧倾方向等的转动方向上的倾斜的有无或大小、以及显示控制设备100是否已在转动方向上转动。可以使用加速度传感器、陀螺仪传感器、地磁传感器、朝向传感器和高度传感器等其中之一、或者多个这些传感器的组合作为姿势检测单元113。
操作单元106包括触摸面板106a。CPU 101能够检测针对触摸面板106a的以下操作或者触摸面板106a的以下状态。
·先前未触摸触摸面板106a的手指或触笔新触摸触摸面板106a的状态,或者换句话说,触摸的开始(以下称为触及(touch-down))
·触摸面板106a正被手指或触笔触摸的状态(以下称为触摸持续(touch-on))
·手指或触笔在与触摸面板106a触摸的同时正在移动的状态(以下称为触摸移动(touch-move))
·先前触摸触摸面板106a的手指或触笔从触摸面板106a分离的状态,或者换句话说,触摸的结束(以下称为触摸停止(touch-up))
·什么也没有正触摸触摸面板106a的状态(以下称为未触摸(touch-off))
在检测到触及时,同时检测到触摸持续。通常,在触及之后,除非检测到触摸停止,否则继续检测到触摸持续。在检测到触摸移动时,同时同样检测到触摸持续。即使在检测到触摸持续时,除非触摸位置移动,否则未检测到触摸移动。在检测到先前触摸的所有手指或触笔的触摸停止时,检测到未触摸。
经由内部总线向CPU 101通知上述的操作或状态、以及手指或触笔正触摸触摸面板106a的位置坐标,并且基于所通知的信息,CPU 101判断在触摸面板106a上进行了何种操作(触摸操作)。关于触摸移动,还可以基于位置坐标的变化针对触摸面板106a上的垂直分量和水平分量各自来判断正在触摸面板106a上移动的手指或触笔的移动方向。假定在检测到预定距离以上的触摸移动的情况下,判断为进行了滑动操作。
将涉及在保持手指触摸触摸面板106a的同时使手指在触摸面板106a上快速移动了一定距离、然后松开手指的操作称为轻拂。换句话说,轻拂是手指快速划过触摸面板106a仿佛在触摸面板106a上拂过一样的操作。在检测到以预定速度以上触摸移动了预定距离以上之后检测到触摸停止的情况下,可以判断为进行了轻拂(可以判断为在滑动操作之后发生了轻拂)。
此外,将涉及同时触摸多个位置(例如,两个点)并使各个触摸位置彼此靠近的触摸操作称为捏合,而将各个触摸位置彼此远离的触摸操作称为分开。将分开和捏合统称为捏分操作(或简称为捏分)。作为触摸面板106a,可以使用采用包括电阻膜方式、电容方式、表面声波方式、红外方式、电磁感应方式、图像识别方式和光学传感器方式的各种方式中的任何方式的触摸面板。可以采用在与触摸面板接触时检测到触摸的方式和在手指或触笔接近触摸面板时检测到触摸的方式中的任何方式。
图2是作为电子装置的示例的显示控制设备100的外观图。显示控制设备100是诸如智能电话等的显示设备。显示器105是用于显示图像和各种类型的信息的显示单元。显示器105是与触摸面板106a一体地构造的,并且被配置为能够检测对显示器105的显示面的触摸操作。显示控制设备100能够在显示器105上进行VR图像(VR内容)的VR显示。例如,可以经由通信I/F 110获取到数字照相机(全向照相机;全天球照相机)所拍摄到的VR图像(可以接收到通过无线通信所传送的VR图像)并将该VR图像记录在记录介质108中。可以在显示器105上进行以这种方式记录在记录介质108中的VR图像的VR显示(VR视图中的显示)。可选地,通过将记录有数字照相机所拍摄到的VR图像的记录介质直接连接至记录介质I/F 107、从该记录介质读取VR图像、并且重放所读取的VR图像,可以在显示器105上进行VR显示(VR视图中的显示)。可选地,可以通过经由SNS等获取连接至网络的服务器设备等上所记录的VR图像(共享VR图像)来进行VR显示。在本实施例中,操作单元106包括触摸面板106a以及操作单元106b、106c、106d和106e。操作单元106b是用于接受用以在显示控制设备100的电源的接通和断开之间进行切换的操作的电源按钮。操作单元106c和操作单元106d是用于增大和减小从音频输出单元112输出的音频的音量的音量按钮。操作单元106e是用于使主画面显示在显示器105上的主按钮。音频输出端子112a是作为用于向耳机或外部扬声器等输出音频信号的端子的耳机插孔。扬声器112b是用于输出音频的内置在主体中的扬声器。
显示控制设备100能够在显示器105上进行VR图像(VR内容)的VR显示。假定VR图像是可以进行VR显示(以“VR视图”显示模式的显示)的图像。假定VR图像包括全向照相机(全天球照相机)所拍摄到的全向图像(全天球图像)、以及具有比在显示单元上可以一次显示的显示范围更宽的视频范围(更宽的有效视频范围)的全景图像。VR图像除包括静止图像之外,还包括运动图像和实时取景图像(从照相机近似实时地获取到的图像)。VR图像具有与在垂直方向(垂直角度、从天顶起的角度、仰角、俯角、高度角或俯仰角)上为360度且在水平方向(水平角度、方位角度或横摆角)上为360度的视场相对应的最大视频范围(最大有效视频范围)。另外,假定VR图像包括如下的图像:即使在这些图像的视场在垂直方向上小于360度且在水平方向上小于360度的情况下,这些图像也具有比通常照相机可以拍摄的视角(angle of view)更宽的视角(更宽的视场范围)、或者具有比在显示单元上可以一次显示的显示范围更宽的视频范围(更宽的有效视频范围)。例如,全天球照相机所拍摄到的图像是一种VR图像,该全天球照相机能够拍摄与在水平方向上(水平角度或方位角度)为360度且在以天顶为中心的垂直方向上为210度的视场(视角)相对应的被摄体。另外,例如,如下的照相机所拍摄到的图像是一种VR图像,该照相机能够拍摄与在水平方向上(水平角度或方位角度)为180度且在以水平方向为中心的垂直方向上为180度的视场(视角)相对应的被摄体。换句话说,如下的图像是一种VR图像,该图像具有与在垂直方向和水平方向这两者上都为160度(±80度)以上的视场相对应的视频范围、并且具有比人类一次可以从视觉上识别的范围宽的视频范围。通过进行VR图像的VR显示(以“VR视图”显示模式的显示),沿水平转动方向改变显示设备(用于显示VR图像的显示设备)的姿势使得能够观看在水平方向(水平转动方向)无缝的全向视频。在垂直方向(垂直转动方向)上,尽管可以在相对于正上方(天顶)的±105度的范围内观看无缝的全向视频,但从正上方起超过105度的范围成为不存在视频的空白区域。VR图像可被描述为“视频范围是虚拟空间(VR空间)的至少一部分的图像”。
VR显示(VR视图)是指如下的显示方法(显示模式),该显示方法(显示模式)显示VR图像中的与显示设备的姿势相对应的视场范围的视频,并且在该显示方法(显示模式)中,可以改变显示范围。在穿戴并观看作为显示设备的头戴式显示器(HMD)的情况下,要显示与用户的头部的朝向相对应的视场范围的视频。例如,假定正显示具有VR图像中的在某个时间点处以水平方向上的0度(诸如北等的特定朝向)且垂直方向上的90度(从天顶起的90度、或者换句话说水平)为中心的视场角(视角)的视频。在显示设备的姿势的前后从该状态反转时(例如,在显示面从面向南改变为面向北时),显示范围改变为具有同一VR图像中的以水平方向上的180度(诸如南等的相反朝向)且垂直方向上的90度(水平)为中心的视场角的视频。这意味着,在用户正在观看HMD的情况下,在用户将他/她的头部从朝北转向朝南时(换句话说,在用户转身时),HMD上所显示的视频也从北向的视频改变为南向的视频。这种VR显示使得能够向用户提供仿佛用户从视觉上存在于VR图像的内部(VR空间内部)的感觉(沉浸感)。安装至VR护目镜(头戴式适配器)的智能电话可被视为是一种HMD。
应当注意,VR图像的显示方法不限于上述的方法。可以采用如下的配置:代替姿势变化,根据针对触摸面板或方向按钮等的用户操作而使显示范围移动(滚动)。可以采用如下的配置:即使在通过VR显示来显示(以“VR视图”显示模式来显示)VR图像的情况下,除了根据姿势变化来改变显示范围之外,还可以根据针对触摸面板的触摸移动、针对鼠标等的拖动操作、或者方向按钮的按下等来改变显示范围。
在本实施例中,将说明如下的操作和处理:从具有与在垂直方向和水平方向这两者上都为360度的最大视场相对应的视频范围(有效视频范围)的VR图像中,裁剪具有与在垂直方向和水平方向这两者上都为180度的视场相对应的视频范围(有效视频范围)的VR图像。应当注意,在以下的说明中,具有与在垂直方向和水平方向这两者上都为360度的最大视场相对应的视频范围(有效视频范围)的VR图像将被称为360度的VR图像。另外,具有与在垂直方向和水平方向这两者上都为180度的视场相对应的视频范围(有效视频范围)的VR图像将被称为180度的VR图像。从概念上,从360度的VR图像中裁剪180度的VR图像的处理是从与360度相对应的视频已被整体映射到的虚拟球体裁剪半球的处理。如在本实施例中所述的裁剪不是裁剪通常的矩形图像(平面图像)的处理,而是裁剪即使在裁剪之后也可作为VR图像(可被映射到球体上并且在VR视图中观看的图像)观看的图像的处理。由于裁剪之后的图像具有与在垂直方向和水平方向这两者上都为180度的视场相对应的有效视频范围,因此在将裁剪之后的图像映射到球体上时,将映射与半球相对应的有效视频(诸如拍摄图像等)。剩余的半球变成要以单色填充、或者利用预定图案填充、或者被映射了某种补充视频的无效视频范围。在VR视图中观看这样的所裁剪的VR图像的情况下,用户可以在宽度为180度的前方范围(从中心起在垂直方向和水平方向这两者上都为90度的范围)中从视觉上识别出该图像。进行这样的裁剪处理的原因包括以下。
第一,可以减少图像的数据量。所裁剪的180度的VR图像与360度的VR图像相比具有更小的数据量。因此,可以防止用于保存VR图像的记录介质的容量受到压迫。另外,可以减少发送和接收期间的通信数据量以及显示期间的处理负荷,并且成比例地,可以产生包括处理速度或响应速度的提高以及电力消耗的降低的效果。
第二,可以删除不需要的被摄体。例如,在拍摄具有与360度的视场相对应的有效视频范围的VR图像的大多数情况下,拍摄者他/她自己不可避免地包括在VR图像中。然而,在拍摄者希望拍摄的对象是风景等而不是拍摄者他/她自己的情况下,拍摄者他/她自己是不需要的被摄体并且构成无意的存在。包括无意视频防止了观看者将他或她的注意力集中于拍摄者认为是主题的诸如风景等的视频上。另外,经常包括诸如路人的面部和路过车辆的牌照等的要隐藏的信息,并且在许多情况下,从隐私和安全的角度来看,不期望包括这样的信息。通过进行裁剪处理以裁剪拍摄者所期望的范围并丢弃其它不需要范围的视频,可以避免这样的问题。
第三,可以减轻在VR视图中观看VR图像的用户的身体负担。在VR视图中观看360度的VR图像时,甚至在观看VR图像的用户的后方也存在视频。尽管观看者可以通过简单地转动他或她的头部来大致全景地观看与前方180度相对应的视频,但为了观看后方,观看者必须扭转他或她的躯干或者改变他或她的站立方向,由此给观看者带来相对较高的身体负担。这种向后看的身体运动不适合在坐着时观看,除非观看者在转椅中。相比之下,由于可以通过简单地转动某人的头部来大致全景地观看180度的VR图像,因此在观看VR图像时对观看者施加的身体负担相对较小。如果通过引导显示或表示超过180度的范围是无效区域的显示来使得观看者知晓VR图像是180度的VR图像,则观看者甚至不会试图向后看。因此,可以防止观看者被迫进行诸如向后看等的身体运动。
第四,可以根据180度的VR图像所用的记录格式等来显示360度的VR图像。在360度的VR图像的记录格式不同于180度的VR图像所用的记录格式的情况下,通过仅支持观看180度的VR图像的再现设备(再现应用软件)不能观看360度的VR图像。然而,通过从360度的VR图像中裁剪180度的VR图像来生成180度的VR图像,这使得能够通过仅支持观看180度的VR图像的再现设备观看VR图像。另外,在支持观看180度的VR图像和观看360度的VR图像这两者的情况下,必须进行用于在用于观看180度的VR图像的模式和用于观看360度的VR图像的模式之间进行切换的切换操作,切换操作可能是麻烦的。然而,通过从360度的VR图像中裁剪180度的VR图像来生成180度的VR图像,这使得能够在不必切换到180度的VR图像所用的显示模式的情况下,连续地切换并观看多个VR图像。此外,设想如下的显示模式(双目VR视图),该显示模式显示由被安装成面向同一方向且分开了与视差相对应的距离的两个照相机单元拍摄到的右眼用的180度的VR图像和左眼用的180度的VR图像这两个180度的VR图像,以使得可以立体地观看这两个180度的VR图像。通过从360度的VR图像中裁剪右眼用的180度的VR图像和左眼用的180度的VR图像并预先记录这些180度的VR图像,也可以在这种双目VR视图中观看180度的VR图像。
尽管在本实施例中将说明通过从360度的VR图像中裁剪180度的VR图像来生成180度的VR图像的示例,但本实施例也可应用于针对具有其它视场角的VR图像的处理,只要这些处理用于裁剪具有比裁剪之前的VR图像的有效视频范围窄的有效视频范围的VR图像即可。换句话说,裁剪之前的VR图像不限于360度的VR图像,并且裁剪之后的VR图像不限于180度的VR图像。
在以下所述的各处理中,将说明通过显示各种触摸按钮并且接受针对这些各种触摸按钮的触摸操作作为用户操作来推进处理的示例。具体地,接受针对各种触摸按钮的指示的触摸操作可以是从与触摸按钮相对应的触摸响应区域的触摸停止、或者针对与触摸按钮相对应的触摸响应区域的触及。另外,作为通过对后面要说明的触摸按钮的操作而要接受的指示所描述的各指示不限于此,并且可以通过其它用户操作来接受。例如,用于接受指示的用户操作可以是针对各物理按钮的操作、通过使用方向键并按下输入键来选择显示项的操作、使用鼠标来选择显示项的操作、或者语音命令等。
以下将参考图3到图8A~8E来说明本发明的实际示例的操作。
图3是示出显示控制设备100的从360度的VR图像向180度的图像的裁剪处理的示例的流程图。在CPU 101将非易失性存储器103中所存储的程序在存储器102上展开并执行该程序时,实现该流程图的处理。
在接通显示控制设备100的电源、并且从记录介质108上所记录的图像和从通信目的地获取到的图像中选择VR图像(VR内容)时,可以开始图3所示的处理。
在S301中,CPU 101从存储介质108或经由通信I/F的通信目的地加载要作为显示对象的VR图像。CPU 101获取作为VR图像的属性信息所附加的表示视频范围(有效视频范围)的信息,并且通过有效视频范围容纳到矩形中的平板显示来显示VR图像。在S301中在显示器105上进行平板显示的VR图像的有效视频范围是第一有效视频范围的示例。尽管在VR视图中通过将VR图像映射到虚拟球体上来显示该VR图像,但在平板显示中,通过利用等距圆柱投影等将整个VR图像容纳到矩形中来显示该VR图像。因此,在矩形的端部附近的部分等中,与在VR视图中显示被摄体的情况相比,被摄体失真得更多。
表示有效视频范围的信息是指描述VR图像中所包括的有效视频在垂直方向和水平方向上的角度范围的信息。表示有效视频范围的信息可以是使得能够指定VR图像的有效视频范围的信息,并且可以是由视角、视场角、方位角、仰角、俯角、高度角或球面角等表示的角度信息、或者诸如垂直和水平的像素数或坐标等的位置信息。
可选地,表示有效视频范围的信息可以是用于拍摄VR图像的照相机的型号信息(可以通过指定型号来指定可拍摄范围)、以及与拍摄期间的变焦有关的信息等。在CPU 101获取到表示有效视频范围的信息时,CPU 101还基于与垂直360度和水平360度的差来识别(计算)无效视频范围(非视频范围)。相反,可以从VR图像的属性信息获取表示无效视频范围的信息,并且可以从表示无效视频范围的信息计算有效视频范围,或者可以从VR图像的属性信息获取表示有效视频范围的信息和表示无效视频范围的信息这两者。
图6A示出S301中的平板显示的显示示例(第一画面上的显示示例)。由于图像使用等距圆柱投影,因此不同于实际被摄体,图像发生失真。用户可以通过涉及选择裁剪按钮602的按钮操作来转变为VR图像601的裁剪模式。裁剪按钮602是用于从用户接受用于设置裁剪范围的指示的操作按钮。另外,可以显示用于转变为VR视图的指示图标。根据针对该指示图标的操作,可以关于相同图像进行从平板显示向VR视图的转变。应当注意,在S301中的平板显示期间、在VR图像601的显示区域上进行触摸移动的情况下,假定将VR图像601切换到另一图像(切换到按诸如文件名的顺序等的预定顺序的下一图像或前一图像的显示)。S301中的平板显示是用户为了识别作为显示对象或编辑对象的图像所使用的画面。在通过触摸移动要切换图像的情况下,尽管VR图像601在触摸移动的方向上滑动(滚动)以跟随触摸移动,但在图6A所示的VR图像601的端部的外侧显示用黑色等着色的非图像区域或者切换之后的图像。换句话说,不同于图4所示的裁剪方向设置处理中的滚动,不进行妨碍识别出端部的循环滚动。
在S302中,CPU 101判断是否进行了针对裁剪按钮602的触摸操作,或者换句话说是否发出了针对触摸面板106a的用以设置裁剪范围的指示。在发出了用以设置裁剪范围的指示的情况下,CPU 101进入S303,而在未发出用以设置裁剪范围的指示的情况下,CPU 101结束处理。在CPU 101进入S303的情况下,转变为设置用于按180度裁剪VR图像的裁剪范围的模式。
在S303中,CPU 101显示用于选择是否进行天顶校正的选择画面,接收已输入至触摸面板106a的与天顶校正有关的参数,并且在希望进行天顶校正时进行天顶校正。图6B示出S303中所显示的用于选择是否进行天顶校正的选择画面的显示示例。通过进行选择裁剪按钮602的按钮操作来显示图6B所示的天顶校正选择对话框603。天顶校正选择对话框603包括按钮604和按钮605。根据用户选择按钮604的按钮操作,在VR图像的裁剪处理之前执行天顶轴的校正。可选地,在选择按钮605的情况下,在VR图像的裁剪处理之前不执行天顶轴的校正。
在S304中,CPU 101将裁剪所用的UI显示在显示器105上。换句话说,根据来自用户的用以设置裁剪范围的指示,将S301中所述的显示画面切换到裁剪所用的UI画面(切换控制)。图6C示出S304中所显示的裁剪所用的UI的显示示例(第二画面的显示示例)。裁剪区域框606是表示要从VR图像中裁剪的180度的区域的指示符。裁剪区域框606显示在矩形区域中通过平板显示正显示的VR图像上(VR内容上)。应当注意,裁剪区域框606不是特别表示准确的裁剪范围,而是仅仅表示粗略范围。非裁剪区域608表示未包括在要裁剪的180度的区域中的区域。
用户选择裁剪确定(完成)按钮611的按钮操作使得将由裁剪区域框606包围的裁剪区域607设置为裁剪区域。选择天顶裁剪按钮612的按钮操作使得将以天顶方向(VR内容的上方向)为中心的180度的区域设置为裁剪区域。选择天底裁剪按钮613的按钮操作使得将以天底方向(VR内容的下方向)为中心的180度的区域设置为裁剪区域。返回按钮609的按钮操作使得显示图6A中的平板显示的画面。基于所设置的裁剪区域,CPU 101可以生成具有比裁剪之前的有效视频范围窄的有效视频范围的已编辑VR内容。以这种方式,CPU 101不在垂直方向上滚动VR内容,并且垂直方向上的VR内容的裁剪通过用户的按钮操作(不涉及滚动操作的操作)来进行。
在S305中,CPU 101判断是否针对显示器105上通过平板显示正显示的VR图像的显示区域中的裁剪区域607的内侧的中央区域检测到了触及。裁剪区域607的内侧的中央区域是相对于表示裁剪区域607的左右边界的裁剪区域框606的左右部分的预定宽度以上的内侧区域。在检测到针对中央区域的触及的情况下,CPU 101进入S306,而在未检测到针对中央区域的触及的情况下,CPU 101进入S307。
在S306中,CPU 101进行裁剪方向设置处理。应当注意,基于由图6C所示的裁剪区域框606包围的区域来设置裁剪方向(要裁剪的图像的范围)。要裁剪的区域的有效视频范围是第二有效视频范围的示例。CPU 101进行控制,使得至少由图6C所示的裁剪区域框606包围的区域的中央和要裁剪的实际有效视频范围(第二有效视频范围)的中央彼此一致或近似一致。然而,由于在平板显示上叠加示出的裁剪区域框606没有准确地表示半球的裁剪边界,因此由裁剪区域框606表示的范围和要裁剪的实际有效视频范围(第二有效视频范围)不完全彼此一致。例如,可以使由裁剪区域框606包围的区域的范围大于要裁剪的实际有效视频范围(180度)。后面将参考图4来说明裁剪方向设置处理。
在S307中,CPU 101进行VR端部区域确认处理。后面将参考图5来说明VR端部区域确认处理。
在S308中,CPU 101判断是否进行了针对裁剪确定按钮611的触摸操作,或者换句话说,是否发出了裁剪指示。在发出了裁剪指示的情况下,CPU 101进入S309,而在未发出裁剪指示的情况下,CPU 101结束处理。
在S309中,CPU 101在S306中所设置的裁剪方向上在180度的范围内裁剪图像,并且将所裁剪的图像以VR 180度格式保存在记录介质108中。换句话说,CPU 101将所裁剪的VR图像记录在记录介质108中。
将说明在S309中要记录的所裁剪的VR图像(可以在VR视图中显示的图像文件)。在所裁剪的VR图像是静止图像的情况下,生成并记录单个文件,其中该单个文件以多图片格式存储通过利用等距圆柱投影使裁剪范围内的图像变形并将变形后的图像容纳到矩形中而创建的多个图像。在裁剪之前的360度的VR图像(原始图像)被显示为通常平面图像而不是VR视图的情况下,获得诸如图10A所示的图像等的在矩形中通过等距圆柱投影所绘制的图像。在S301中以这种方式显示图像。在通过参考图4所述的处理从原始图像中裁剪180度的范围时,在180度的范围被显示为通常的平面图像而不是VR视图的情况下,记录诸如图10B所示的图像等的在近似正方形中通过等距圆柱投影所绘制的图像。这样,通过复制裁剪范围内的图像所获得的同一图像的两个图像即使在不存在视差的情况下,也被分别作为右眼用图像和左眼用图像记录在同一文件中。可选地,可以从裁剪之前的一个360度的VR图像中裁剪并生成两个180度的范围,以便具有伪视差(换句话说,使得左眼用图像和右眼用图像的范围彼此略微不同)。例如,所裁剪的静止图像的VR图像的文件名是“123456.vr.jpg”,并且在扩展名“.jpg”之前描述由三个字符构成的字符串“.vr”。在VR视图中再现并显示以这种方式保存为静止图像文件的图像时,图10B所示的图像被映射到半球上并被显示。图10D示出在双目VR视图中再现并显示所裁剪的静止图像的VR图像文件的示例(在显示器105未安装在VR护目镜上的状态下的显示器105上的显示示例)。
在所裁剪的VR图像是运动图像的情况下,生成并记录运动图像文件,其中该运动图像文件具有水平地(并排地)布置在单个运动图像的视频内的通过将裁剪范围内的图像映射到球体或椭圆体的内部而不是通过等距圆柱投影所获得的视频(运动图像)。这样,通过复制裁剪范围内的图像所获得的同一图像的两个图像即使在不存在视差的情况下,也被分别水平地布置并被记录为右眼用图像和左眼用图像。在这样的运动图像被显示为通常的平面图像而不是VR视图时,如图10C所示显示运动图像。可选地,可以从裁剪之前的一个360度的VR图像中裁剪并生成两个180度的范围,以便具有伪视差(换句话说,使得左眼用图像和右眼用图像的范围彼此略微不同)。例如,所裁剪的运动图像的VR图像的文件名是“123456.vr.mp4”,并且在扩展名“.mp4”之前描述由三个字符构成的字符串“.vr”。所裁剪的运动图像的VR图像文件当在双目VR视图中再现并显示时的给定帧的显示示例(在显示器105未安装在VR护目镜上的状态下的显示器105上的显示示例)与图10D所示的示例相同。
图4是示出图3所示的S306的裁剪方向设置处理的示例的流程图。在CPU 101将非易失性存储器103中所存储的程序在存储器102上展开并执行该程序时,实现裁剪方向设置处理。
在S401中,CPU 101判断是否针对触摸面板106a输入了右滚动。右滚动的输入是向右滚动图像的操作,并且与向右方向上的滚动指示相对应。右滚动的输入例如是向右移动的触摸移动或向左滑动滚动条(未示出)的操作。在输入了右滚动的情况下,CPU 101进入S402,而在未输入右滚动的情况下,CPU 101进入S404。
在S402中,在CPU 101接收到来自用户的右滚动的输入的情况下,CPU 101使图像向右滚动(滑动)。CPU 101根据从显示器105的左端向着右方的滚动,顺次显示显示器105的与向右滚动量相对应的图像区域。应当注意,裁剪区域框606在画面上的位置是固定的,并且即使在输入了滚动的情况下该位置也不滚动。
在S403中,CPU 101通过使排除与滚动量相对应的右侧的图像区域以外的向左方向侧的区域向右移动该滚动量,来显示该区域。换句话说,CPU 101使在显示器105的矩形区域中通过平板显示所显示的VR内容向右滚动。另外,根据该滚动,CPU 101将VR内容中的与向右滚动量相对应的图像区域从矩形区域中的向右方向的相反方向上的左端起向着右方顺次显示。
图7A~7E示出根据在S402和S403中进行的滚动的显示示例。图7B所示的右滚动701表示针对图7A的向右方向上的滚动输入。在输入了右滚动701的情况下,执行图4所示的S402和S403的处理。例如,假定在S401中用户已向着显示器105的右端侧滚动了滚动量D1。在S402中,CPU 101将由虚线包围且与滚动量(D1)相对应的图像区域7011从显示器105的左端向着右方顺次显示。接着,在S403中,CPU 101通过使由点划线包围且排除了与滚动量(D1)相对应的图像区域7011以外的左侧区域7012向右移动滚动量(D1),来显示该左侧区域7012。一旦执行了这些处理,则显示器105改变到图7C所示的状态。用户选择裁剪确定(完成)按钮611的按钮操作使得将由裁剪区域框606包围的裁剪区域702设置为裁剪区域。
图7D所示的右滚动703表示针对图7C的向右方向上的滚动输入。在输入了右滚动703的情况下,以与输入了右滚动701的情况相同的方式执行图4所示的S402和S403的处理,并且显示器105改变到图7E所示的状态。用户选择裁剪确定(完成)按钮611的按钮操作使得将由裁剪区域框606包围的裁剪区域704设置为裁剪区域。
如上所述,在S402和S403中进行的滚动涉及向右滚动图像的情况下,将一直滚动到右侧的显示区域外并且消失的部分以从显示区域的左端向着右方顺次进入该显示区域的方式显示。另外,可以通过重复输入右滚动来在不会到达端部的情况下实现无限滚动。换句话说,可以实现不会使用户知晓诸如VR图像601的左端和右端等的边界的同一内容的循环滚动显示。因此,在图6A所示的显示示例中位于显示区域的端部的部分现在可以位于裁剪区域框606的中央。另外,可以发出用以使以该位置为中心的无缝的180度的区域(具有以该位置为中心的90度的圆周的范围)成为裁剪之后的VR图像的指示。应当注意,由于循环滚动显示使得能够将VR图像的任意朝向指定为中央,因此滚动显示不必是无限循环的,并且可以使得能够进行至少一次循环。
在S404中,CPU 101判断针对触摸面板106a是否输入了向着与向右方向的相反侧的左滚动。左滚动的输入是使图像向左滚动的操作,并且与向左方向上的滚动指示相对应。左滚动的输入例如是向左移动的触摸移动或者使滚动条(未示出)向着右方滑动的操作。在输入了左滚动的情况下,CPU 101进入S405,而在未输入左滚动的情况下,CPU 101进入S407。
在S405中,在CPU 101从用户接收到左滚动的输入的情况下,CPU 101使图像向着左方滚动(滑动)。CPU 101使显示器105的与向左滚动量相对应的图像区域根据该滚动而从显示器105的右端向着左方顺次显示。应当注意,裁剪区域框606在画面上的位置是固定的,并且即使在输入了滚动的情况下该位置也不滚动。
在S406中,CPU 101通过使排除与滚动量相对应的左侧的图像区域以外的向右方向侧的区域向左移动该滚动量,来显示该区域。换句话说,CPU 101使在显示器105的矩形区域中通过平板显示所显示的VR内容向左滚动。另外,根据该滚动,CPU 101将VR内容中的与向左滚动量相对应的图像区域从矩形区域中的向左方向的相反方向上的右端起向着左方顺次显示。
图8A~8E示出根据S402和S403中所进行的滚动的显示示例。图8B所示的左滚动801表示针对图8A的向左方向上的滚动输入。在输入了左滚动801的情况下,执行图4所示的S405和S406的处理。例如,假定在S404中用户已与图7B相反地向着显示器105的左端侧滚动了滚动量D2。在S405中,CPU 101将由虚线包围且与滚动量(D2)相对应的图像区域8011从显示器105的右端向着左方顺次显示。接着,在S406中,CPU 101通过使由点划线包围且排除了与滚动量(D2)相对应的图像区域8011以外的左侧区域8012向左移动滚动量(D2),来显示该左侧区域8012。一旦执行了这些处理,则显示器105改变到图8C所示的状态。用户选择裁剪确定(完成)按钮611的按钮操作使得将由裁剪区域框606包围的裁剪区域802设置为裁剪区域。
图8D所示的左滚动803表示针对图8C的向左方向上的滚动输入。在输入了左滚动803的情况下,以与输入了左滚动801的情况相同的方式执行图4所示的S405和S406的处理,并且显示器105改变到图8E所示的状态。用户选择裁剪确定(完成)按钮611的按钮操作使得将由裁剪区域框606包围的裁剪区域804设置为裁剪区域。
如上所述,在S404和S405中进行的滚动涉及向左滚动图像的情况下,将一直滚动到左侧的显示区域外并且消失的部分以从显示区域的右端向着左方顺次进入该显示区域的方式显示。另外,可以通过重复输入左滚动来在不会到达端部的情况下实现无限滚动。换句话说,可以实现不会使用户知晓诸如VR图像601的左端和右端等的边界的同一内容的循环滚动显示。因此,在图6A所示的显示示例中位于显示区域的端部的部分现在可以位于裁剪区域框606的中央。另外,可以发出用以使以该位置为中心的无缝的180度的区域(具有以该位置为中心的90度的圆周的范围)成为裁剪之后的VR图像的指示。
在S407中,CPU 101判断是否进行了针对复位按钮610的触摸操作,或者换句话说是否接受了裁剪方向的复位指示的操作。在发出了复位指示的情况下,CPU 101进入S408,而在未发出复位指示的情况下,CPU 101进入S409。复位裁剪方向位置是在图3所示的S304的处理期间所设置的裁剪方向的设置。在S408中,CPU 101将裁剪方向设置为初始位置。
在S409中,CPU 101判断是否进行了针对裁剪确定按钮611的触摸操作,或者换句话说是否接受了裁剪方向的确定指示的操作。在发出了裁剪方向的确定指示的情况下,CPU101结束处理,而在未发出裁剪方向的确定指示的情况下,CPU 101进入S401。假定:在S409中判断为“是”的情况下,在S308中也判断为“是”。换句话说,在本实施例中,裁剪方向的确定指示和裁剪指示是相同指示。然而,裁剪方向的确定指示和裁剪指示可被配置为通过单独的操作来进行。例如,可以响应于裁剪方向的确定指示的发出来进行表示裁剪之后的VR图像的范围的预览显示,随后,可以根据裁剪指示的发出来生成所裁剪的VR图像的图像文件。
应当注意,可以通过S401~S406中所述的水平方向上的滚动来指定裁剪之前的VR图像中的裁剪之后的VR图像的范围的朝向。将裁剪之后的VR图像的仰/俯角固定到从天顶到天底的具有以水平方向(从天顶起的90度的方向;在天顶校正之后为从校正之后的天顶起的90度的方向)为中心的仰/俯角180度的范围。因此,可以防止指定裁剪范围的麻烦。另外,可以将裁剪之后的VR图像设置为从用户观看VR图像的视点起的以正面(水平方向)为中心的180度,并且被配置成使得在VR图像中不包括超过天顶的背面侧范围或超过天底的背面侧范围。因此,可以防止在VR视图中观看VR图像时以不舒服的姿势(诸如向后弓着背以向后看等)观看。
在触摸天顶裁剪按钮612的情况下,不论由裁剪区域框606表示的范围(用户所指定的朝向)如何,裁剪范围都被设置为以天顶(在天顶校正之后为从校正之后的天顶起的90度的方向)为中心的所有方向上的90度的范围。这表示在对虚拟球体进行垂直等分的情况下的上侧的半球范围。另外,在触摸天底裁剪按钮613的情况下,不论由裁剪区域框606表示的范围(用户所指定的朝向)如何,裁剪范围都被设置为以天底(在天顶校正之后为从校正之后的天底起的90度的方向)为中心的所有方向上的90度的范围。这表示在对虚拟球体进行垂直等分的情况下的下侧的半球范围。在触摸天顶裁剪按钮612或天底裁剪按钮613的情况下,假定还发出了裁剪指示、并且进行直到图3所示的S309中的已裁剪的VR图像的文件生成为止的处理。因此,可以防止生成通过对角地切割裁剪之前的虚拟球体等而产生的半球的不自然裁剪。换句话说,可以容易地生成提供地平线上方的整个天空的全景视图的裁剪之后的VR图像、或者提供如从天花板看到的整个房间的全景视图或如从桌子上方看到的桌子上的所有盘子的全景视图的VR图像。
图5是示出图3所示的S307的VR端部区域确认处理的示例的流程图。在CPU 101将非易失性存储器103中所存储的程序在存储器102上展开并执行该程序时,实现VR端部区域确认处理。VR端部区域确认处理是通过对要裁剪的区域的边界和包括这样的边界的区域进行VR显示来使得用户能够确认要裁剪的VR图像的端部区域的处理。
在S501中,CPU 101判断作为裁剪范围的端部的确认指示、是否触摸了正显示的VR图像的显示区域中的、裁剪区域607的左端区域和右端区域而不是前面所述的中央区域。左端区域和右端区域是指作为裁剪区域607的左右边界的、包括裁剪区域框606的左边的从左边起的预定宽度内的区域(左端区域)和包括裁剪区域框606的右边的从右边起的预定宽度内的区域(右端区域)。在触摸了左端区域和右端区域的情况下,CPU 101进入S502,而在未触摸左端区域和右端区域的情况下,CPU 101结束处理。裁剪范围的端部的确认指示不限于此。例如,可以显示用于发出裁剪范围的端部的确认指示的图标,并且可以触摸该图标以发出裁剪范围的端部的确认指示。可选地,也可以触摸正显示的VR图像的显示区域中的、裁剪区域框606的左边的左侧或裁剪区域框606的右边的右侧,以发出裁剪范围的端部的确认指示。
在S502中,CPU 101读取S301中所获取到的VR图像。另外,CPU 101获取作为VR图像的属性信息所附加的表示视频范围(有效视频范围)的信息。表示有效视频范围的信息是指描述VR图像中所包括的有效视频在垂直方向和水平方向上的角度范围的信息。表示有效视频范围的信息可以是使得能够指定VR图像的有效视频范围的信息,并且可以是视角、视场角、方位角、仰角、水平像素数、或者诸如坐标等的位置信息。可选地,表示有效视频范围的信息可以是用于拍摄VR图像的照相机的型号信息(可以通过指定型号来指定可拍摄范围)、以及与拍摄期间的变焦有关的信息等。
在CPU 101获取到表示有效视频范围的信息时,CPU 101还基于与垂直360度和水平360度的差来识别(计算)无效视频范围(非视频范围)。相反,可以从VR图像的属性信息获取表示无效视频范围的信息,并且可以从表示无效视频范围的信息计算有效视频范围,或者可以从VR图像的属性信息获取表示有效视频范围的信息和表示无效视频范围的信息这两者。
在S503中,CPU 101判断是否触摸了前面所述的右端区域。在触摸了右端区域的情况下,CPU 101进入S504,而在未触摸右端区域的情况下,CPU 101进入S505。
在S504中,CPU 101基于VR图像中的裁剪区域框606的范围内的显示范围来进行在S502中获取到的VR图像的右端区域的显示处理。VR图像的原始数据(原始图像)是如下的图像,该图像由于使用例如等距圆柱投影而失真、并且是采用使得能够将各像素的位置与球体的表面上的坐标相关联的格式的图像。将VR图像的原始图像映射到球体上,并且裁剪并显示该球体的一部分。换句话说,S504中所显示的图像是通过裁剪并放大VR图像的一部分所获得的图像,并且是去除(或减少)了原始图像的失真的图像。在这种情况下,CPU 101将所显示的VR图像的有效范围设置为以由裁剪区域框606包围的区域的中央线为中心的向左右两者的90度的朝向的范围(总共180度)以及从天顶到天底的仰/俯角的范围。CPU 101将其它范围设置为在有效范围的外部(无效范围、在裁剪范围的外部的排除范围)。通过将右侧端部区域显示成以有效范围和无效范围之间的边界线为中心,CPU 101使得能够确认右侧的有效范围与无效范围之间的边界线上的端部的状态。
在S505中,CPU 101基于VR图像中的裁剪区域框606的范围内的显示范围来进行在S502中获取到的VR图像的左端区域的显示处理。使用与S504中的显示方法相同的显示方法。在这种情况下,通过将左端区域显示成以有效范围和无效范围之间的边界线为中心,CPU 101使得能够确认左侧的有效范围与无效范围之间的边界线上的端部的状态。
在S506中,基于从触摸面板106a通知的信息,CPU 101判断是否检测到触摸移动。在检测到触摸移动的情况下,CPU 101进入S507,而在未检测到触摸移动的情况下,CPU 101进入S508。
在S507中,CPU 101根据通过触摸移动的滑动操作的方向(触摸移动的方向)来改变VR图像的显示范围。例如,在判断为触摸移动的方向是向左方向的情况下,通过使VR图像的显示范围向左偏移(滑动)与该触摸移动相对应的量,用户能够在体验到仿佛移动整个VR图像的操作感的同时进行操作。此时,裁剪范围的外部的区域在显示器105上的显示位置是固定的。因此,通过触摸移动使在裁剪范围的外部的区域和要在裁剪范围的内部的显示范围之间的相对关系偏移,并且针对裁剪之前的VR图像的裁剪范围(裁剪方向)改变。以这种方式,可以通过在确认裁剪范围的边界的同时细微地调整要容纳到裁剪范围中的区域的范围来设置裁剪范围。
在S508中,CPU 101判断针对触摸面板106a是否进行了裁剪指示的操作。在发出了裁剪指示的情况下,CPU 101进入S509,而在未发出裁剪指示的情况下,CPU 101使处理进入S510。
在S509中,CPU 101在S508中所设置的裁剪方向上在180度的范围内裁剪图像,并且将该图像以VR 180度格式保存在记录介质108中。所生成的图像与S309中所述的图像相同。
在S510中,基于从触摸面板106a通知的信息,CPU 101判断通过对返回按钮的触摸操作是否发出了返回指示。在发出了返回指示的情况下,CPU 101使处理进入S511,而在未发出返回指示的情况下,CPU 101使处理返回S506。
在S511中,CPU 101读取在S502中获取到的VR图像,获取作为VR图像的属性信息所附加的表示视频范围(有效视频范围)的信息,并且通过将有效视频范围容纳到矩形中的平板显示来显示VR图像。在S507中改变了显示范围的情况下,基于与改变之后的显示范围的中央有关的信息来设置通过平板显示要显示的图像的中心位置。在显示之后,CPU 101结束VR端部区域确认处理。
现在将参考图9A和9B来说明VR端部区域确认处理的端部确认显示。该显示是在图5所示的S504和S505中进行的显示。
图9A是示出在进行VR图像的VR显示的情况下显示右端侧的状态的图。图9A例如是通过触摸裁剪区域框606的右侧的框上方的位置或者触摸图6C所示的右侧的非裁剪区域608而显示的。触摸裁剪区域框606的右侧的框上方的位置或者触摸右侧的非裁剪区域608是用户的“确认指示”的示例。确认指示是在由裁剪区域框606包围的区域中将边界或包括该边界的区域指定为确认对象的操作。通过VR显示(VR视图)显示右侧有效范围901和无效范围902。VR显示(VR视图)是映射到虚拟球体上并且已从平板显示变形的显示模式。因此,可以以校正了失真的形状准确地确认平板显示中的失真部分。无效范围902可以在被黑色、白色或图案显示掩蔽的状态下显示。在大致中央显示边界使得能够确认VR图像的右侧边界线的状态。在无效范围902上配置返回按钮903和裁剪按钮904,这使得用户能够确认包括VR图像的右侧有效范围901和右侧边界线的区域并且识别边界。
图9B是示出在进行VR图像的VR显示的情况下显示左端侧的状态的图。图9B是通过例如触摸裁剪区域框606的左侧的框上方的位置或者触摸图6C所示的左侧的非裁剪区域608(确认指示)而显示的。通过VR显示来显示左侧有效范围905和无效范围906。无效范围906可以在被黑色、白色或图案显示掩蔽的状态下显示。在大致中央显示边界使得能够确认VR图像的左侧边界线的状态。以与图9A相同的方式,将返回按钮903和裁剪按钮904布置在无效范围906上,这使得用户能够确认包括左侧有效范围905和VR图像的左侧边界线的区域并且识别边界。
尽管已经说明了触摸裁剪区域框606的框上方的位置或非裁剪区域608作为来自用户的确认指示的示例,但确认指示不限于此。例如,CPU 101可以将用于在由裁剪区域框606的框包围的区域中指定作为确认对象的边界的图标显示在触摸面板106a上。通过触摸该图标,用户可以在图9A或9B所示的画面上确认包括边界的区域并且识别该边界。图9A或9B所示的画面表示为了使用户确认与边界有关的信息并识别该边界的目的而显示的虚拟信息。
根据上述的实施例,在从平板显示进行VR图像的180度裁剪时,平板显示上的图像端部的方向可被设置为裁剪之后的中央区域。
另外,在VR图像不处于裁剪编辑状态的情况下,还可以通过利用左右滚动馈送图像来提高用户可操作性。
应当注意,作为CPU 101所要进行的控制的上述各种控制可以由一个硬件来执行,或者多个硬件(例如,多个处理器或电路)可以通过分担处理来控制整个设备。
另外,尽管已经基于本发明的优选实施例详细说明了本发明,但应当理解,本发明不限于特定实施例,并且不构成背离本发明的范围的各种模式也包括在本发明中。此外,上述实施例仅仅表示本发明的示例,并且该实施例也可以与其它实施例组合。
此外,尽管在以上呈现的实施例中已经说明了将本发明应用于智能电话的示例,但本发明不限于该示例,并且可以应用于能够在显示单元上显示VR图像的任何设备。例如,本发明可以应用于个人计算机、PDA、移动电话终端、移动图像查看器、配备有显示器的打印机设备、数字相框、音乐播放器、游戏装置、电子书阅读器和视频播放器等。本发明还可应用于数字照相机、电视设备、投影设备、平板终端、AI扬声器、家用电器、车载设备和医疗设备等。
在平板显示上从VR图像中裁剪具有较窄范围的VR图像的情况下,可以将平板显示的画面端部附近的区域指定为裁剪中心。
根据上述的实施例,公开了以下的结构。具体地,
(A1)一种电子装置,包括:
显示控制单元,其被配置为进行控制,使得:在第一画面上进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且在第二画面上在通过平板显示正显示于矩形区域中的所述VR内容上显示用于表示从所述VR内容要裁剪的区域的指示符;
切换单元,其被配置为根据来自用户的对裁剪范围的设置指示来将所述第一画面切换到所述第二画面;
控制单元,其被配置为进行控制,使得:
在所述第二画面上进行同一内容的循环滚动显示,所述循环滚动显示涉及:根据第一操作,在不使所述指示符滚动的情况下使通过平板显示正显示的所述VR内容在第一方向上滚动,并且根据所述VR内容的滚动,使所述VR内容中的与所述第一方向上的滚动量相对应的图像区域从所述矩形区域中的作为与所述第一方向相反的方向的第二方向的端部起在所述第一方向上顺次显示,以及
即使在进行所述第一操作的情况下,也不在所述第一画面上进行所述循环滚动显示;以及
生成单元,其被配置为基于所述第二画面上的由所述指示符表示的区域,来生成所述VR内容中的包括比所述第一视频范围窄的第二视频范围的已编辑VR内容。
(A2)根据(A1)所述的电子装置,其中,
所述控制单元使得通过平板显示正显示的所述VR内容中的由所述指示符表示的范围的中央和所述第二视频范围的中央彼此一致或近似一致。
(A3)根据(A1)或(A2)所述的电子装置,其中,
所述指示符表示比所述矩形区域窄的范围。
(A4)根据(A1)至(A3)中任一项所述的电子装置,其中,
所述第一方向是相对于所述VR内容的向右方向或向左方向。
(A5)根据(A1)至(A4)中任一项所述的电子装置,其中,
根据所述第二画面上的所述第一方向上的所述循环滚动显示,所述第二视频范围的朝向在所述第一视频范围被映射到虚拟球体上的情况下改变。
(A6)根据(A1)至(A5)中任一项所述的电子装置,其中,
所述控制单元在所述第二画面上不进行与所述第一方向垂直的第三方向上的滚动。
(A7)根据(A1)至(A6)中任一项所述的电子装置,其中,
根据所述第二画面上的所述VR内容的滚动,所述第二视频范围的仰角或俯角在所述第一视频范围被映射到虚拟球体上的情况下不改变。
(A8)根据(A1)至(A7)中任一项所述的电子装置,其中,
所述第一操作是涉及触摸所述矩形区域并且使触摸的位置在所述第一方向上移动的滑动操作。
(A9)根据(A1)至(A8)中任一项所述的电子装置,其中,
在从用户接受所述设置指示的情况下,所述控制单元向用户确认是否要进行天顶校正。
(A10)根据(A1)至(A9)中任一项所述的电子装置,其中,
所述控制单元通过不涉及滚动操作的操作,来接受用以进行以所述VR内容的天顶为中心的裁剪或以所述VR内容的天底为中心的裁剪的指示。
(A11)根据(A1)至(A10)中任一项所述的电子装置,还包括:
记录单元,其被配置为生成并记录用于存储所述生成单元所生成的已编辑VR内容的文件。
(A12)根据(A11)所述的电子装置,其中,
所述记录单元生成用于存储基于所述第二视频范围的多个图像的一个静止图像文件。
(A13)根据(A12)所述的电子装置,其中,
在所述静止图像文件的文件名中,在扩展名之前描述了字符串“.vr”。
(A14)根据(A11)至(A13)中任一项所述的电子装置,其中,
所述记录单元生成布置有基于所述第二视频范围的多个运动图像的一个运动图像文件。
(A15)根据(A14)所述的电子装置,其中,
在所述运动图像文件的文件名中,在扩展名之前描述了字符串“.vr”。
(A16)一种电子装置的控制方法,包括以下步骤:
进行控制,使得:在第一画面上进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且在第二画面上在通过平板显示正显示于矩形区域中的所述VR内容上显示用于表示从所述VR内容要裁剪的区域的指示符;
根据来自用户的对裁剪范围的设置指示来将所述第一画面切换到所述第二画面;
进行控制,使得:在所述第二画面上进行同一内容的循环滚动显示,所述循环滚动显示涉及:根据第一操作,在不使所述指示符滚动的情况下使通过平板显示正显示的所述VR内容在第一方向上滚动,并且根据所述VR内容的滚动,使所述VR内容中的与所述第一方向上的滚动量相对应的图像区域从所述矩形区域中的作为与所述第一方向相反的方向的第二方向的端部起在所述第一方向上顺次显示,以及即使在进行所述第一操作的情况下,也不在所述第一画面上进行所述循环滚动显示;以及
基于所述第二画面上的由所述指示符表示的区域,来生成所述VR内容中的包括比所述第一视频范围窄的第二视频范围的已编辑VR内容。
(A17)一种程序,其使得计算机用作根据(A1)至(A15)中任一项所述的电子装置的各个单元。
(A18)一种存储有程序的计算机可读存储介质,所述程序使得计算机用作根据(A1)至(A15)中任一项所述的电子装置的各个单元。
在从VR图像中裁剪180度的裁剪区域的情况下,用户可以通过进行用于将360度的有效视频范围容纳到矩形中的平板显示来全景地观看整个VR图像。然而,在平板显示的状态下指定诸如180度的裁剪区域等的部分范围的情况下,存在难以将平板显示的端部区域指定为裁剪中心的问题。特别地,存在如下问题:在期望确认要实际裁剪的画面端部的状态的情况下,难以在裁剪之前确认该状态。考虑到这些问题,上述的实施例还公开了以下的结构,使得可以更准确地确认VR图像的平板显示上所显示的部分范围的端部的状态。具体地,
(B1)一种电子装置,包括:
显示控制单元,其被配置为进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且显示用于表示从正进行所述平板显示的所述VR内容中要裁剪的区域的指示符;
接受单元,其被配置为从用户接受基于所述区域的比所述第一视频范围窄的第二视频范围的边界的确认指示;以及
边界显示单元,其被配置为进行控制,使得根据所述确认指示,将全向VR内容中的包括所述第二视频范围的边界的范围以相对于所述平板显示发生了变形的第二显示模式进行显示,以使得能够识别出所述边界。
(B2)根据(B1)所述的电子装置,其中,
所述第二显示模式是涉及用于通过映射在虚拟球体上来进行显示的显示模式。
(B3)根据(B1)或(B2)所述的电子装置,其中,
所述接受单元接受用以裁剪所述第二视频范围的裁剪指示,以及
所述电子装置还包括生成单元,所述生成单元被配置为根据所述裁剪指示来生成包括所述第二视频范围的已编辑VR内容。
(B4)根据(B3)所述的电子装置,还包括:
记录单元,其被配置为生成并记录用于存储所述生成单元所生成的已编辑VR内容的文件。
(B5)根据(B4)所述的电子装置,其中,
所述记录单元生成用于存储基于所述第二视频范围的多个图像的一个静止图像文件。
(B6)根据(B5)所述的电子装置,其中,
在所述静止图像文件的文件名中,在扩展名之前描述字符串“.vr”。
(B7)根据(B4)至(B6)中任一项所述的电子装置,其中,
所述记录单元生成布置有基于所述第二视频范围的多个运动图像的一个运动图像文件。
(B8)根据(B7)所述的电子装置,其中,
在所述运动图像文件的文件名中,在扩展名之前描述字符串“.vr”。
(B9)根据(B1)至(B8)中任一项所述的电子装置,其中,
所述确认指示是用户在由所述指示符包围的区域中指定作为确认对象的边界的操作。
(B10)根据(B1)至(B9)中任一项所述的电子装置,其中,
所述边界显示单元显示所述VR内容中的包括所述第二视频范围的边界并且比所述第二视频范围窄的范围。
(B11)一种电子装置的控制方法,包括以下步骤:
进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且显示用于表示从正进行所述平板显示的所述VR内容中要裁剪的区域的指示符;
从用户接受基于所述区域的比所述第一视频范围窄的第二视频范围的边界的确认指示;以及
进行控制,使得根据所述确认指示,将全向VR内容中的包括所述第二视频范围的边界的范围以相对于所述平板显示发生了变形的第二显示模式进行显示,以使得能够识别出所述边界。
(B12)一种程序,其使得计算机用作根据(B1)至(B10)中任一项所述的电子装置的各个单元。
(B13)一种存储有程序的计算机可读存储介质,所述程序使得计算机用作根据(B1)至(B10)中任一项所述的电子装置的各个单元。
其它实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。
Claims (17)
1.一种电子装置,包括:
显示控制单元,其被配置为进行控制,使得:在第一画面上进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且在第二画面上在通过平板显示正显示于矩形区域中的所述VR内容上显示用于表示从所述VR内容要裁剪的区域的指示符;
切换单元,其被配置为根据来自用户的对裁剪范围的设置指示来将所述第一画面切换到所述第二画面;
控制单元,其被配置为进行控制,使得:
在所述第二画面上进行同一内容的循环滚动显示,所述循环滚动显示涉及:根据第一操作,在不使所述指示符滚动的情况下使通过平板显示正显示的所述VR内容在第一方向上滚动,并且根据所述VR内容的滚动,使所述VR内容中的与所述第一方向上的滚动量相对应的图像区域从所述矩形区域中的作为与所述第一方向相反的方向的第二方向的端部起在所述第一方向上顺次显示,以及
即使在进行所述第一操作的情况下,也不在所述第一画面上进行所述循环滚动显示;以及
生成单元,其被配置为基于所述第二画面上的由所述指示符表示的区域,来生成所述VR内容中的包括比所述第一视频范围窄的第二视频范围的已编辑VR内容。
2.根据权利要求1所述的电子装置,其中,
所述控制单元使得通过平板显示正显示的所述VR内容中的由所述指示符表示的范围的中央和所述第二视频范围的中央彼此一致或近似一致。
3.根据权利要求1所述的电子装置,其中,
所述指示符表示比所述矩形区域窄的范围。
4.根据权利要求1所述的电子装置,其中,
所述第一方向是相对于所述VR内容的向右方向或向左方向。
5.根据权利要求1所述的电子装置,其中,
根据所述第二画面上的所述第一方向上的所述循环滚动显示,所述第二视频范围的朝向在所述第一视频范围被映射到虚拟球体上的情况下改变。
6.根据权利要求1所述的电子装置,其中,
所述控制单元在所述第二画面上不进行与所述第一方向垂直的第三方向上的滚动。
7.根据权利要求1所述的电子装置,其中,
根据所述第二画面上的所述VR内容的滚动,所述第二视频范围的仰角或俯角在所述第一视频范围被映射到虚拟球体上的情况下不改变。
8.根据权利要求1所述的电子装置,其中,
所述第一操作是涉及触摸所述矩形区域并且使触摸的位置在所述第一方向上移动的滑动操作。
9.根据权利要求1所述的电子装置,其中,
在从用户接受所述设置指示的情况下,所述控制单元向用户确认是否要进行天顶校正。
10.根据权利要求1所述的电子装置,其中,
所述控制单元通过不涉及滚动操作的操作,来接受用以进行以所述VR内容的天顶为中心的裁剪或以所述VR内容的天底为中心的裁剪的指示。
11.根据权利要求1所述的电子装置,还包括:
记录单元,其被配置为生成并记录用于存储所述生成单元所生成的已编辑VR内容的文件。
12.根据权利要求11所述的电子装置,其中,
所述记录单元生成用于存储基于所述第二视频范围的多个图像的一个静止图像文件。
13.根据权利要求12所述的电子装置,其中,
在所述静止图像文件的文件名中,在扩展名之前描述了字符串“.vr”。
14.根据权利要求11所述的电子装置,其中,
所述记录单元生成布置有基于所述第二视频范围的多个运动图像的一个运动图像文件。
15.根据权利要求14所述的电子装置,其中,
在所述运动图像文件的文件名中,在扩展名之前描述了字符串“.vr”。
16.一种电子装置的控制方法,包括以下步骤:
进行控制,使得:在第一画面上进行涉及用于将VR内容的第一视频范围容纳到矩形中的平板显示,并且在第二画面上在通过平板显示正显示于矩形区域中的所述VR内容上显示用于表示从所述VR内容要裁剪的区域的指示符;
根据来自用户的对裁剪范围的设置指示来将所述第一画面切换到所述第二画面;
进行控制,使得:在所述第二画面上进行同一内容的循环滚动显示,所述循环滚动显示涉及:根据第一操作,在不使所述指示符滚动的情况下使通过平板显示正显示的所述VR内容在第一方向上滚动,并且根据所述VR内容的滚动,使所述VR内容中的与所述第一方向上的滚动量相对应的图像区域从所述矩形区域中的作为与所述第一方向相反的方向的第二方向的端部起在所述第一方向上顺次显示,以及即使在进行所述第一操作的情况下,也不在所述第一画面上进行所述循环滚动显示;以及
基于所述第二画面上的由所述指示符表示的区域,来生成所述VR内容中的包括比所述第一视频范围窄的第二视频范围的已编辑VR内容。
17.一种存储有程序的计算机可读存储介质,所述程序使得计算机用作根据权利要求1至15中任一项所述的电子装置的各个单元。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018248283A JP7278773B2 (ja) | 2018-12-28 | 2018-12-28 | 電子機器及びその制御方法 |
JP2018248299A JP7187307B2 (ja) | 2018-12-28 | 2018-12-28 | 電子機器及びその制御方法 |
JP2018-248299 | 2018-12-28 | ||
JP2018-248283 | 2018-12-28 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111381750A CN111381750A (zh) | 2020-07-07 |
CN111381750B true CN111381750B (zh) | 2023-08-01 |
Family
ID=71121797
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911367630.1A Active CN111381750B (zh) | 2018-12-28 | 2019-12-26 | 电子装置及其控制方法和计算机可读存储介质 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10937217B2 (zh) |
CN (1) | CN111381750B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4005201A1 (en) * | 2019-07-28 | 2022-06-01 | Google LLC | Methods, systems, and media for rendering immersive video content with foveated meshes |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2004017188A1 (en) * | 2002-08-14 | 2004-02-26 | Besdi Pty Ltd | Small device with improved interface |
CN101252644A (zh) * | 2007-02-20 | 2008-08-27 | 佳能株式会社 | 便携式电子装置 |
JP2018007041A (ja) * | 2016-07-01 | 2018-01-11 | マクセルホールディングス株式会社 | 撮像装置、表示装置、及び撮像表示システム |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5796426A (en) * | 1994-05-27 | 1998-08-18 | Warp, Ltd. | Wide-angle image dewarping method and apparatus |
US20090295789A1 (en) * | 2008-06-03 | 2009-12-03 | Amlogic, Inc. | Methods for Dynamically Displaying Digital Images on Digital Display Devices |
JP6292754B2 (ja) | 2013-02-21 | 2018-03-14 | キヤノン株式会社 | 表示制御装置及びその制御方法 |
KR102119659B1 (ko) * | 2013-09-23 | 2020-06-08 | 엘지전자 주식회사 | 영상표시장치 및 그것의 제어 방법 |
US20160119551A1 (en) * | 2014-10-22 | 2016-04-28 | Sentry360 | Optimized 360 Degree De-Warping with Virtual Cameras |
CN108141511B (zh) * | 2015-09-30 | 2019-12-03 | 富士胶片株式会社 | 图像处理装置、摄像装置、图像处理方法以及有形介质 |
JP6145738B2 (ja) | 2016-03-03 | 2017-06-14 | パナソニックIpマネジメント株式会社 | 表示装置及びコンピュータプログラム |
KR20170126295A (ko) * | 2016-05-09 | 2017-11-17 | 엘지전자 주식회사 | 헤드 마운티드 디스플레이 장치 및 그것의 제어방법 |
US10754529B2 (en) * | 2016-10-28 | 2020-08-25 | Adobe Inc. | Facilitating editing of virtual-reality content using a virtual-reality headset |
-
2019
- 2019-12-23 US US16/725,963 patent/US10937217B2/en active Active
- 2019-12-26 CN CN201911367630.1A patent/CN111381750B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2004017188A1 (en) * | 2002-08-14 | 2004-02-26 | Besdi Pty Ltd | Small device with improved interface |
CN101252644A (zh) * | 2007-02-20 | 2008-08-27 | 佳能株式会社 | 便携式电子装置 |
JP2018007041A (ja) * | 2016-07-01 | 2018-01-11 | マクセルホールディングス株式会社 | 撮像装置、表示装置、及び撮像表示システム |
Also Published As
Publication number | Publication date |
---|---|
US20200211246A1 (en) | 2020-07-02 |
CN111381750A (zh) | 2020-07-07 |
US10937217B2 (en) | 2021-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3226537A1 (en) | Mobile terminal and method for controlling the same | |
US11683464B2 (en) | Electronic device, control method, and non-transitorycomputer readable medium | |
JP7005161B2 (ja) | 電子機器及びその制御方法 | |
EP3591499B1 (en) | Electronic device, control method for electronic device, program, and computer readable medium | |
US20190306491A1 (en) | Display control apparatus and control method | |
KR102477993B1 (ko) | 표시 제어장치, 촬상 장치, 제어 방법 및 컴퓨터 판독 가능한 매체 | |
US11706378B2 (en) | Electronic device and method of controlling electronic device | |
US11079898B2 (en) | Electronic device for controlling display of VR image, control method of electronic device, and non-transitory computer readable medium | |
CN111381750B (zh) | 电子装置及其控制方法和计算机可读存储介质 | |
US11100903B2 (en) | Electronic device and control method for controlling a display range on a display | |
JP2021174317A (ja) | 電子機器及びその制御方法 | |
JP7187307B2 (ja) | 電子機器及びその制御方法 | |
JP7005160B2 (ja) | 電子機器及びその制御方法 | |
JP7278773B2 (ja) | 電子機器及びその制御方法 | |
US11558599B2 (en) | Electronic apparatus, control method for electronic apparatus, and non-transitory computer-readable storage medium | |
US11252328B2 (en) | Electronic device and method for controlling the same | |
JP7210153B2 (ja) | 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体 | |
JP2020205554A (ja) | 表示制御装置、その制御方法、プログラムおよび記憶媒体 | |
JP2020043387A (ja) | 画像処理装置、画像処理方法、プログラム、及び、記憶媒体 | |
JP2020108100A (ja) | 電子機器及びその制御方法 | |
JP2020108098A (ja) | 電子機器及びその制御方法 | |
JP2020107270A (ja) | 電子機器及びその制御方法 | |
JP2020108099A (ja) | 電子機器及びその制御方法 | |
JP2020106758A (ja) | 電子機器及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |