CN118075440A - 电子装置及其控制方法和计算机可读存储介质 - Google Patents
电子装置及其控制方法和计算机可读存储介质 Download PDFInfo
- Publication number
- CN118075440A CN118075440A CN202311573744.8A CN202311573744A CN118075440A CN 118075440 A CN118075440 A CN 118075440A CN 202311573744 A CN202311573744 A CN 202311573744A CN 118075440 A CN118075440 A CN 118075440A
- Authority
- CN
- China
- Prior art keywords
- image
- images
- display
- electronic device
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 238000003860 storage Methods 0.000 title claims abstract description 12
- 230000008859 change Effects 0.000 claims description 37
- 238000012937 correction Methods 0.000 claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 87
- 230000008569 process Effects 0.000 description 61
- 238000001514 detection method Methods 0.000 description 19
- 230000033001 locomotion Effects 0.000 description 17
- 230000006870 function Effects 0.000 description 16
- 238000003384 imaging method Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 11
- 230000004044 response Effects 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 8
- 210000003811 finger Anatomy 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000003825 pressing Methods 0.000 description 6
- 230000004888 barrier function Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000004091 panning Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 238000002360 preparation method Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 238000005520 cutting process Methods 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000001681 protective effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- WHXSMMKQMYFTQS-UHFFFAOYSA-N Lithium Chemical compound [Li] WHXSMMKQMYFTQS-UHFFFAOYSA-N 0.000 description 1
- 229910005580 NiCd Inorganic materials 0.000 description 1
- 229910005813 NiMH Inorganic materials 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 238000004898 kneading Methods 0.000 description 1
- 229910052744 lithium Inorganic materials 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
- G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Controls And Circuits For Display Device (AREA)
- Studio Devices (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明提供电子装置及其控制方法和计算机可读存储介质。电子装置包括:获得单元,其被配置为获得顺次拍摄的多个VR图像;以及生成单元,其被配置为从所述多个VR图像中的各个VR图像,生成该VR图像的基准方向被校正为该VR图像中存在特定被摄体的方向的VR图像。
Description
技术领域
本发明涉及电子装置、电子装置的控制方法和计算机可读存储介质。
背景技术
对于将全方位图像保存在网络上的服务器上以使得其他用户能够通过他们的显示装置观看(并共享)该图像,已知用于使得该全方位图像的共享者能够使观看者在特定方向上观看的技术。
此外,日本特开2019-121918公开了如下技术:进行控制以在播放运动图像时根据显示单元的姿态来改变显示区域,使得不管姿态的变化如何,主被摄体都显示在显示单元上。
然而,当共享诸如VR运动图像等的顺次拍摄的多个VR图像时,不管显示单元的姿态如何,都难以在共享者想要示出的部分正被设置在显示区域中的情况下顺次回放该多个VR图像。
发明内容
本发明提供能够在显示共享者想要示出的部分的同时顺次回放多个VR图像的电子装置。
根据本发明的电子装置包括:获得单元,其被配置为获得顺次拍摄的多个VR图像;以及生成单元,其被配置为从所述多个VR图像中的各个VR图像,生成该VR图像的基准方向被校正为该VR图像中存在特定被摄体的方向的VR图像。
通过参考附图对以下示例性实施例的描述,本发明的进一步特征将变得明显。
附图说明
图1A至图1C是根据本实施例的数字照相机的外部视图和框图;
图2A至图2D是显示控制装置的外部视图和框图以及VR护目镜的外部视图;
图3A和图3B是控制器的外部视图;
图4是示出图像共享处理的示例的流程图;
图5A至图5F是图像共享处理中的画面的示例;
图6是图像回放处理的示例的流程图;
图7是选择图像回放处理的示例的流程图;以及
图8A至图8F是图像回放处理中的画面的示例。
具体实施方式
现在参照附图描述本发明的实施例。图1A是作为电子装置的示例的数字照相机100(摄像装置)的前立体图(外部视图)。图1B是数字照相机100的后立体图(外部视图)。数字照相机100是用于拍摄全方位图像的照相机(全方位照相机)。
挡板102a是拍摄区域为数字照相机100的前方的前照相机部所用的保护窗。例如,前照相机部可以是用于拍摄数字照相机100的前侧横向和纵向180度以上的宽范围的广角照相机部。挡板102b是拍摄区域为数字照相机100的后方的后照相机部所用的保护窗。例如,后照相机部可以是用于拍摄数字照相机100的后侧横向和纵向180度以上的宽范围的广角照相机部。
显示单元(显示器)28显示各种类型的信息。快门按钮61是用于指示图像拍摄的操作单元(操作构件)。模式切换开关60是用于在各种模式之间切换的操作单元。连接I/F 25是用于将连接线缆连接到数字照相机100的连接器,并且诸如智能电话、个人计算机或电视机等的外部装置使用连接线缆连接到数字照相机100。操作单元70可以是用于从用户接收各种操作的各种开关、按钮、拨盘和触摸传感器等。电源开关72是用于切换开启/关闭(ON/OFF)电源的按钮。
发光单元21是诸如发光二极管(LED)等的发光构件,并且使用发光图案和发光颜色向用户通知数字照相机100的各种状态。固定部40例如可以是三脚架螺丝孔,并且用于使用诸如三脚架等的固定工具来固定和安装数字照相机100。
图1C是示出数字照相机100的配置示例的框图。挡板102a覆盖前照相机部的摄像系统(摄像透镜103a、快门101a和摄像单元22a等),以防止摄像系统被污染或损坏。摄像透镜103a是包括变焦透镜和调焦透镜的透镜组,并且是广角透镜。快门101a具有用于调整入射到摄像单元22a上的被摄体光量的光圈功能。摄像单元22a是用于将光学图像转换成电信号的摄像元件(摄像传感器),其可以是CCD或CMOS。A/D转换器23a将从摄像单元22a输出的模拟信号转换成数字信号。可替代地,可以省略挡板102a,可以使摄像透镜103a的外表面暴露,并且摄像透镜103a可以防止摄像系统的其他部分(快门101a和摄像单元22a)被污染或损坏。
挡板102b覆盖后照相机部的摄像系统(摄像透镜103b、快门101b和摄像单元22b等),以防止摄像系统被污染或损坏。摄像透镜103b是包括变焦透镜和调焦透镜的透镜组,并且是广角透镜。快门101b具有用于调整入射到摄像单元22b上的被摄体光量的光圈功能。摄像单元22b是用于将光学图像转换成电信号的摄像元件,其可以是CCD或CMOS。A/D转换器23b将从摄像单元22b输出的模拟信号转换成数字信号。可替代地,可以省略挡板102b,可以使摄像透镜103b的外表面暴露,并且摄像透镜103b可以防止摄像系统的其他部分(快门101b和摄像单元22b)被污染或损坏。
摄像单元22a和摄像单元22b拍摄虚拟现实(VR)图像。VR图像是可以以VR显示的图像(可以在“VR视图”显示模式下显示)。VR图像包括例如由全方位摄像机拍摄的全方位图像、以及具有比显示单元上可以一次显示的显示区域更宽的视频图像区域(有效视频图像区域)的全景图像。VR图像不仅包括静止图像,还包括运动图像和实时取景图像(从照相机大致实时获得的图像)。VR图像具有上下方向(垂直角度、相对于天顶的角度、仰角、俯角、高度角、纵摇角)上最大360度和左右方向(水平角度、方位角度、横摆角)上最大360度的视场的视频图像区域(有效视频图像区域)。
VR图像还包括即使当角度在上下方向上小于360度以及在左右方向上小于360度时也具有比通常照相机可以拍摄到的视角更宽的宽视角(视场区域)的图像,或者具有比显示单元上可以一次显示的显示区域更宽的视频图像区域(有效视频图像区域)。例如,能够拍摄具有左右方向(水平角度、方位角度)上360度和以天顶为中心的210度的垂直角度的视场(视角)的被摄体的全方位照相机所拍摄的图像是VR图像的一个类型。例如,能够拍摄具有左右方向(水平角度、方位角度)上180度和以水平方向为中心的180度的垂直角度的视场(视角)的被摄体的照相机所拍摄的图像是VR图像的一个类型。也就是说,具有上下方向和左右方向上160度(±80度)以上的视场的视频图像区域并且具有比人类能够一次视觉感知到的区域更宽的视频图像区域的图像是VR图像的一个类型。
当这样的VR图像以VR显示(以“VR视图”显示模式显示)时,用户可以通过改变显示装置(用于显示VR图像的显示装置)在左右转动方向上的姿态,来在左右方向(水平转动方向)上观看无缝的全方位视频图像。在上下方向(垂直转动方向)上,可以在相对于正上方(天顶)±105度的范围内观看无缝的全方位视频图像。然而,相对于正上方超过105度的区域是没有视频图像的空白区域。VR图像也可以被描述为“视频图像区域至少是虚拟空间(VR空间)的一部分的图像”。
VR显示(VR视图)是可以改变显示区域的显示方法(显示模式)。VR显示显示VR图像中与显示装置的姿态相对应的视场区域的视频图像。当用户穿戴头戴式显示器(HMD)作为观看用的显示装置时,显示与用户的面部朝向相对应的视场区域的视频图像。例如,假设在特定时间点在VR图像中显示以左右方向上0度(诸如北等的特定方向)和上下方向上90度(相对于天顶90度,即水平)为中心的视场角(视角)的视频图像。然后,当显示装置的姿态从该状态反转时(例如,当显示面的朝向从南改变到北时),显示区域被改变为在同一VR图像内以左右方向上180度(诸如南等的相反方向)和上下方向上90度(水平)为中心的视场角的视频图像。在用户观看HMD的情形下,当用户将他或她的面部从北转向南(即,面朝后)时,显示在HMD上的视频从北的视频图像改变为南的视频图像。这样的VR显示可以向用户提供如同他或她在视觉上存在于VR图像中(在VR空间内)一样的感觉(沉浸感)。附接到VR护目镜(头戴式适配器)的智能电话可以被认为是HMD的一个类型。
VR图像的显示方法不限于上述。代替姿态的改变,可以通过用户对触摸面板或方向按钮的操作来移动显示区域。在VR显示中(在“VR视图”显示模式中),除响应于姿态改变而改变显示区域之外,还可以响应于触摸面板上的触摸移动(touch-move)、鼠标的拖动操作以及按压方向按钮等来改变显示区域。
图像处理单元24对从A/D转换器23a和23b接收到的数据或者来自存储器控制单元15的数据进行预定处理(例如,像素插值、诸如缩小等的大小调整以及颜色转换)。图像处理单元24还使用拍摄图像数据来进行预定的计算处理。系统控制单元50基于由图像处理单元24获得的计算结果来进行曝光控制和距离测量控制。这使得能够进行例如诸如通过镜头(TTL)自动调焦(AF)处理、自动曝光(AE)处理和预闪光(FE)处理等的处理。图像处理单元24还使用拍摄图像数据来进行预定的计算处理,并且基于所获得的计算结果来进行TTL自动白平衡(AWB)处理。此外,图像处理单元24对从A/D转换器23a和23b获得的两个图像(两个鱼眼图像;两个广角图像)进行基本的图像处理。通过进行图像拼接来生成单个VR图像,该图像拼接用于将经过了基本图像处理的两个图像进行合成。在实时取景中的VR显示期间或在回放期间,图像处理单元24还进行图像剪切、放大和失真校正等来以VR显示VR图像,并且进行渲染以在存储器32中的预定存储区域(VRAM)中绘制处理结果。
在图像拼接中,图像处理单元24使用两个图像之一作为基准图像,并且另一图像作为比较图像,通过进行模式匹配来计算各个区域中的基准图像和比较图像之间的偏差量,并且根据各个区域中的偏差量来检测两个图像被拼接的位置。图像处理单元24通过考虑所检测到的拼接位置以及各个光学系统透镜的特性的几何变换来校正各个图像的失真,并且将各个图像转换成以全方位格式(全方位图像格式)的图像。图像处理单元24通过对两个全方位图像进行合成(混合)来生成一个全方位图像(VR图像)。所生成的全方位图像可以是例如使用等量矩形投影的图像,并且全方位图像中各个像素的位置可以与球体(VR空间)的表面坐标相关联。
来自A/D转换器23a和23b的输出数据经由图像处理单元24和存储器控制单元15或者在不经过图像处理单元24的情况下经由存储器控制单元15被写入存储器32。存储器32存储由摄像单元22a和22b获得并由A/D转换器23a和23b转换成数字数据的图像数据、以及要从连接I/F 25输出到外部显示器的图像数据。存储器32具有足以存储预定数量的静止图像以及预定持续时间的运动图像和音频的存储容量。
存储器32还用作用于显示图像的存储器(视频存储器)。存储在存储器32中的图像显示数据可以从连接I/F 25被输出到外部显示器。由摄像单元22a和22b拍摄的、由图像处理单元24生成并存储在存储器32中的VR图像被顺次传送到外部显示器以进行显示,从而实现作为电子取景器的功能并能够进行实时取景显示(LV显示)。在下文中,显示在实时取景显示器中的图像被称为实时取景图像(LV图像)。实时取景显示(远程LV显示)也可以通过将累积在存储器32中的VR图像传送到经由通信单元54无线连接的外部装置(诸如智能电话等)并在外部装置上显示该VR图像来实现。
非易失性存储器56是电可擦除/可记录记录介质,诸如电可擦除可编程只读存储器(EEPROM)等。非易失性存储器56记录用于系统控制单元50的操作的常数、程序和其他数据。本文中的程序是用于执行各种类型的处理的计算机程序。
系统控制单元50是包括至少一个处理器或电路的控制单元,并且控制整个数字照相机100。系统控制单元50通过执行非易失性存储器56中所记录的程序来进行本实施例的各种类型的处理。例如,系统存储器52可以是随机存取存储器(RAM)。系统控制单元50将诸如用于系统控制单元50的操作的常数和变量以及从非易失性存储器56读取的程序等的数据加载到系统存储器52中。系统控制单元50还通过控制存储器32、图像处理单元24和存储器控制单元15来进行显示控制。系统计时器53是用于测量用于各种控制的时间以及内置时钟的时间的时间测量单元。
模式切换开关60、快门按钮61和操作单元70用于向系统控制单元50输入各种操作指示。模式切换开关60可以将系统控制单元50的操作模式切换到静止图像记录模式、运动图像拍摄模式、回放模式和通信连接模式等中的任何一个模式。静止图像记录模式中所包括的模式是自动拍摄模式、自动场景判断模式、手动模式、光圈优先模式(Av模式)、快门速度优先模式(Tv模式)和程序AE模式。其他可用模式包括构成用于不同图像拍摄场景的拍摄设置的各种场景模式以及自定义模式。模式切换开关60使得用户能够直接切换到这些模式中的任何一个模式。可替代地,在使用模式切换开关60临时切换到拍摄模式的列表画面之后,用户可以使用其他操作构件来选择显示单元28上所显示的多个模式之一以切换模式。以类似的方式,运动图像拍摄模式也可以包括多个模式。
快门按钮61包括第一快门开关62和第二快门开关64。在快门按钮61的操作期间,第一快门开关62通过半按压(拍摄准备指示)而接通,并生成第一快门开关信号SW1。响应于第一快门开关信号SW1,系统控制单元50开始自动调焦(AF)处理、自动曝光(AE)处理、自动白平衡(AWB)处理和预闪光(FE)处理等的拍摄准备操作。
第二快门开关64通过全按压(拍摄指示)而在快门按钮61的操作完成时接通,并生成第二快门开关信号SW2。响应于第二快门开关信号SW2,系统控制单元50开始从从摄像单元22a和22b读取信号起直到将图像数据写入记录介质90为止的一系列拍摄处理操作。
应当注意,快门按钮61不限于可以在全按压和半按压两个阶段中操作的操作构件,并且可以是仅在一个阶段中按压的操作构件。在这种情况下,通过在一个阶段中按压按钮来连续进行拍摄准备操作和拍摄操作。这与全按压能够进行半按压和全按压的快门按钮时(大致同时生成第一快门开关信号SW1和第二快门开关信号SW2时)的操作相同。
通过选择并操作显示单元28上所显示的各种功能图标或选项,操作单元70被分配用于各个场景的适当功能,并且由此用作各种功能按钮。功能按钮的示例包括结束按钮、返回按钮、图像滚动按钮、跳过按钮、景深按钮和属性改变按钮。例如,当按压菜单按钮时,显示单元28显示可以进行各种设置的菜单画面。用户可以通过在观看显示单元28上所显示的菜单画面的同时操作操作单元70来直观地进行各种设置。
电源控制单元80包括电池检测电路、DC-DC转换器、以及用于在要通电的块之间切换的切换电路等,并且检测是否安装了电池、电池的类型、以及剩余电池电量等。附加地,电源控制单元80基于检测结果和来自系统控制单元50的指示来控制DC-DC转换器,并在所需的时间段内向包括记录介质90的各个单元供给所需的电压。例如,电源单元30可以包括一次电池(诸如碱性电池或锂电池等)、二次电池(诸如NiCd电池、NiMH电池或Li电池等)或AC适配器。
记录介质I/F 18是与可以是存储卡或硬盘的记录介质90的接口。记录介质90可以是用于记录拍摄图像的存储卡,并且包括例如半导体存储器、光盘或磁盘。记录介质90可以是从数字照相机100可拆卸的可交换记录介质,或者是内置在数字照相机100中的记录介质。
通信单元54向例如通过无线或线缆连接的外部装置传输视频信号和音频信号并从该外部装置接收视频信号和音频信号。通信单元54可以连接到无线局域网(LAN)或因特网,并且可以经由网络与网络上的外部装置(例如,服务器)进行通信。通信单元54还可以经由蓝牙(Bluetooth(注册商标))或蓝牙低能耗与外部装置进行通信。通信单元54可以传输由摄像单元22a和22b拍摄的图像(包括LV图像)以及记录在记录介质90上的图像,并且可以从外部装置接收图像数据和各种其他类型的信息。
姿态检测单元55检测数字照相机100相对于重力方向的姿态。根据姿态检测单元55所检测到的姿态,可以进行摄像单元22a、22b所拍摄的图像是在水平保持数字照相机100时拍摄的图像还是在垂直保持数字照相机100时拍摄的图像的判断。对于由摄像单元22a、22b拍摄的图像,也可以判断在拍摄图像时数字照相机100相对于横摆、纵摇和侧倾方向的三个轴方向(转动方向)倾斜的程度。
系统控制单元50可以将与姿态检测单元55所检测到的姿态相对应的朝向信息添加到摄像单元22a、22b所拍摄的VR图像的图像文件中,并且(在改变图像的朝向以校正倾斜之后)记录转动后的图像。加速度传感器、陀螺仪传感器、地磁传感器、方向传感器和高度传感器等中的一个传感器或这些传感器的任意组合可以用作姿态检测单元55。可以利用用于形成姿态检测单元55的加速度传感器、陀螺仪传感器或方向传感器等来检测数字照相机100的运动(诸如平摇、俯仰、抬升或数字照相机是否静止)。
麦克风20收集围绕数字照相机100的声音,该声音被记录为作为运动图像的VR图像(VR运动图像)的声音。连接I/F 25是连接到HDMI(注册商标)线缆或USB线缆等的连接插头,其用于连接到外部装置并传输和接收视频图像。
图2A是显示控制装置200的前立体图。显示控制装置200是电子装置的示例,并且可以是例如智能电话或平板终端。显示器205是用于显示图像和各种类型信息的显示单元。显示器205与触摸面板206a一体地配置,使得可以检测显示器205的显示面上的触摸操作。显示控制装置200能够在显示器205上以VR显示的VR图像(VR内容)。操作构件206b是用于接收用于在开启和关闭之间切换显示控制装置200的电源的操作的电源按钮。操作构件206c和206d是用于增加或减少从连接到音频输出端子212a的扬声器212b、耳机或外部扬声器输出的声音的音量的音量按钮。操作构件206e是用于在显示器205上显示主画面的主画面按钮。音频输出端子212a是耳机插孔,并且是用于向耳机或外部扬声器输出音频信号的端子。扬声器212b是用于输出声音的内置扬声器。
图2B是显示控制装置200的后立体图。摄像单元215是能够拍摄物理空间的图像的照相机。
图2C是示出显示控制装置200的配置的示例的框图。CPU 201、存储器202、非易失性存储器203、图像处理单元204、显示器205、操作单元206、记录介质I/F 207、外部I/F 209和通信I/F 210连接到内部总线250。附加地,音频输出单元212、姿态检测单元213、自身位置/周围环境估计单元214、以及摄像单元215也连接到内部总线250。连接到内部总线250的单元可以经由内部总线250彼此交换数据。
CPU 201是用于控制整个显示控制装置200的控制单元,并且包括至少一个处理器或电路。例如,存储器202可以是RAM(使用半导体元件的易失性存储器)。根据存储在非易失性存储器203中的程序,例如,CPU 201使用存储器202作为工作存储器来控制显示控制装置200的各个单元。非易失性存储器203存储图像数据、音频数据、其他数据以及包括用于操作CPU 201的各种程序的各种类型的信息。非易失性存储器203可以是闪速存储器或只读存储器(ROM)。
在CPU 201的控制下,图像处理单元204对非易失性存储器203或记录介质208中所存储的图像、经由外部I/F 209获得的视频信号或经由通信I/F 210获得的图像进行各种类型的图像处理。各种类型的图像处理包括A/D转换、D/A转换、图像数据编码、图像数据压缩、图像数据解码、图像数据放大和缩小(大小调整)、图像数据降噪和图像数据颜色转换。各种类型的图像处理还包括作为全方位图像或宽区域图像的VR图像的全景拼接、映射和转换,该宽区域图像不是全方位的但包括宽区域的视频图像。图像处理单元204可以是用于进行特定图像处理的专用电路块。根据图像处理的类型,CPU 201可以根据程序来进行图像处理,而不涉及图像处理单元204。
显示器205在CPU 201的控制下显示图像以及构成图形用户接口(GUI)的GUI画面。CPU 201根据程序来生成显示控制信号,并控制显示控制装置200的各个单元以生成要在显示器205上显示的视频信号,并将该视频信号输出到显示器205。显示器205基于所生成并输出的视频信号来显示视频图像。应当注意,显示控制装置200自身固有的配置可以仅包括用于输出要在显示器205上显示的视频信号的接口,并且显示器205可以是外部监视器(例如,电视机或头戴式显示器)。
操作单元206包括用于接收用户操作的各种输入单元。例如,操作单元206包括字符信息输入装置(例如,键盘)、指点装置(例如,鼠标或触摸面板)、按钮、拨盘、操纵杆、触摸传感器和触摸板。在本实施例中,操作单元206包括触摸面板206a、操作构件206b、206c、206d和206e以及姿势检测单元206f。
诸如存储卡、CD或DVD等的记录介质208可以以可拆卸的方式附接到记录介质I/F207。在CPU 201的控制下,记录介质I/F 207从所附接的记录介质208读取数据和向所附接的记录介质208写入数据。记录介质208是用于存储包括要在显示器205上显示的图像的各种数据的存储单元。
外部I/F 209是通过有线或无线连接到外部装置以输入和输出视频信号和音频信号的接口。通信I/F 210是用于与外部装置或因特网211进行通信以发送和接收诸如文件和命令等的各种数据的接口。通信I/F 210还可以与控制器216进行通信。
音频输出单元212输出由显示控制装置200播放的运动图像或音乐数据的音频、操作声音、铃声和各种通知声音。音频输出单元212包括用于连接耳机或外部扬声器的音频输出端子212a和扬声器212b,但是音频输出单元112可以通过无线通信向外部扬声器输出音频数据。
姿态检测单元213检测显示控制装置200相对于重力方向的姿态(倾斜)、以及显示控制装置200相对于横摆、纵摇和侧倾方向的各个轴的姿态,并将姿态信息通知给CPU 201。根据姿态检测单元213所检测到的姿态,可以判断显示控制装置200是水平保持、垂直保持、向上朝向、向下朝向还是处于倾斜姿态。还可以判断显示控制装置200是否在包括横摆、纵摇和侧倾方向的转动方向上倾斜、倾斜程度以及显示控制装置200是否已经在该转动方向上转动。加速度传感器、陀螺仪传感器、地磁传感器、方向传感器和高度传感器等中的一个传感器或这些传感器的任意组合可以用作姿态检测单元213。
自身位置/周围环境估计单元214估计下面描述的显示控制装置200或VR护目镜230的自身位置和周围环境。
自身位置是显示控制装置200或VR护目镜230在预定空间范围内的位置。自身位置由用于表示坐标系中的位置的三个参数来表示,该坐标系使原点位于预定区域的空间中的预定位置处,并且由在预定位置处彼此以直角相交的X、Y和Z轴的三个轴来定义。可以进一步使用表示姿态(朝向)的三个参数来表示自身位置。
周围环境包括障碍物区域。障碍物区域是存在于显示控制装置200或VR护目镜230周围的、作为保持显示控制装置200的用户或穿戴VR护目镜230的用户的障碍物的物体的区域。例如,障碍物区域由用于表示坐标系中的位置的多组三个参数来表示,该坐标系使原点位于预定区域的空间中的预定位置处,并且由在预定位置处彼此以直角相交的X、Y和Z轴的三个轴来定义。
摄像单元215是能够拍摄物理空间的图像的照相机。通过拍摄物理空间所获得的图像可以用于各种类型的检测处理,并且例如由姿势检测单元206f和自身位置/周围环境估计单元214使用。通过拍摄物理空间所获得的图像可以显示在显示器205上。
操作单元206包括触摸面板206a。触摸面板206a是叠加在显示器205上并且具有二维配置的输入装置,并且根据触摸位置来输出坐标信息。CPU 201可以检测触摸面板206a上的以下操作或状态。
-由先前未与触摸面板206a接触的操作构件(手指或触笔)在触摸面板206a上的新触摸,换句话说,触摸的开始(在下文中被称为触及(touch-down))
-触摸面板206a正被操作构件触摸的状态(在下文中被称为触摸持续(touch-on))
-操作构件在与触摸面板206a接触的同时进行移动(在下文中被称为触摸移动)
-先前与触摸面板206a接触的操作构件与触摸面板206a分离,换句话说,触摸结束(在下文中被称为触摸停止(touch-up))
-触摸面板206a未被任何东西触摸的状态(在下文中被称为未触摸(touch-off))
当检测到触及时,同时检测到触摸持续。通常,在触及后,继续检测到触摸持续,除非检测到触摸停止。在检测到触摸移动时,同时检测到触摸持续。即使在检测到触摸持续时,除非触摸位置移动,否则也不会检测到触摸移动。在针对所接触的所有操作构件检测到触摸停止时,检测到未触摸。
经由内部总线将这些操作和状态以及由操作构件触摸的触摸面板206a的位置坐标通知给CPU 201。根据通知信息,CPU 201判断对触摸面板206a进行了什么类型的操作(触摸操作)。对于触摸移动,还可以根据位置坐标的变化,针对触摸面板106a上的垂直分量和水平分量中的各个分量来判断在触摸面板206a上移动的操作构件的移动方向。当检测到预定距离以上的触摸移动时,判断为进行了滑动操作。
涉及在保持操作构件与触摸面板206a接触的同时将操作构件在触摸面板206a上快速移动特定距离、然后释放操作构件的操作被称为轻拂。换句话说,轻拂是操作构件快速追踪触摸面板206a的表面如同在触摸面板206a处拂过一样的操作。当检测到以预定速度以上进行了预定距离以上的触摸移动之后检测到触摸停止时,可以做出进行了轻拂的判断(可以做出在滑动操作之后发生了轻拂的判断)。
此外,涉及同时触摸多个位置(例如,两个点)并使触摸位置彼此靠近的触摸操作被称为捏合(pinch-in),而触摸位置彼此远离的触摸操作被称为捏分(pinch-out)。捏分和捏合被统称为捏操作(或被简称为捏)。触摸面板206a可以采用包括电阻系统、电容系统、表面声波系统、红外系统、电磁感应系统、图像识别系统和光学传感器系统的各种系统中的任何触摸面板系统。触摸面板可以使用当与触摸面板进行接触时检测到触摸的系统或者当操作构件接近触摸面板时检测到触摸的系统中的任一个。
操作单元206包括姿势检测单元206f。在CPU 201的控制下,姿势检测单元106f从摄像单元215所获得的图像(物理空间的图像)中检测用户(例如,用户的手)的姿势。CPU201根据所检测到的姿势来进行各种类型的处理(控制)。
图2D是可以附接显示控制装置200的VR护目镜(头戴式适配器)230的外部视图。通过将显示控制装置200附接到VR护目镜230,显示控制装置200也可以用作头戴式显示器。插口231是用于插入显示控制装置200的开口。整个显示控制装置200可以插入到VR护目镜230中,其中显示器205的显示面面向用于将VR护目镜230固定到用户的头部的头带232(即,朝向用户)。在用户在头部穿戴安装有显示控制装置200的VR护目镜230时无需用手保持显示控制装置200的状态下,用户可以在视觉上感知显示器205。在这种情况下,当用户移动头部或整个身体时,显示控制装置200的姿态也会改变。此时,姿态检测单元213检测显示控制装置200的姿态变化,并且CPU 201基于该姿态变化来进行用于VR显示(在“VR视图”显示模式下的显示)的处理。在这种情况下,姿态检测单元213对显示控制装置200的姿态的检测等同于对用户的头部姿态(用户的视线指向的方向)的检测。VR显示(VR视图)是可以改变显示区域的显示方法(显示模式)。VR显示显示VR图像中与显示控制装置200的姿态相对应的视场区域的视频图像。
应当注意,显示控制装置200自身可以是能够在没有VR护目镜的情况下安装在头部上头戴式显示器。显示控制装置200能够检测用户的视线或面部表情,并且用户能够通过视线或面部表情来操作显示控制装置200。
图3A是作为可以与显示控制装置200进行通信的控制器216的示例的控制器340和350的外部视图。控制器340是由用户用左手操作的握持型控制器。用户用左手握持控制器340的保持部341,并用左手的手指(例如拇指)操作布置在操作面342上的操作构件。控制器340将用户所进行的操作通知给显示控制装置200。控制器350是由用户用右手操作的握持型控制器,并且具有与控制器340相同的配置(例如,控制器340是左右反转的配置)。
图3B示出也可以用作控制器216的控制器360。控制器360是穿戴在用户手指上进行操作的指环型控制器。控制器360包括穿戴在用户的手指363上的指环部361和操作构件362。操作构件362例如可以是按钮、转动拨盘或光学触控板。光学触控板是一种可以检测手指接触或接近的操作构件。
图4是示出显示控制装置200的图像共享处理的流程图。当记录在非易失性存储器203中的程序(例如,用于进行记录介质208上所记录的VR图像的VR显示和共享处理的特定应用程序)被加载到存储器202中并由CPU 201执行时,进行图像共享处理。例如,当用户进行用于在显示器205上显示图像列表的操作时,CPU 201开始图像共享处理,以共享VR图像。
显示控制装置200具有进行VR图像的VR显示的功能。当进行VR显示时,显示作为VR图像的部分区域的显示区域。显示控制装置200还具有如下功能:将记录在记录介质208上的VR图像的图像文件传输到网络上的服务器等,使得其他用户可以观看该VR图像。在下文中,用于将VR图像传输到外部装置使得其他用户可以观看该VR图像的功能被称为共享功能。
当使用VR图像的共享功能时,用户可以指定图像被传输至的外部装置(目的地)、以及所共享的VR图像的显示区域(作为从VR空间的中心到显示区域的中心的方向的显示方向)等。显示控制装置200将包括与指定显示区域(显示方向)相关的朝向信息的附加信息作为元数据与VR图像一起传输到例如外部装置。当其他用户访问外部装置上的VR图像(共享的图像)并将其以VR显示时,在VR显示开始时显示与所传输的朝向信息相对应的显示区域。
当图像共享处理开始时,在步骤S401处,CPU 201获得记录介质208上所存储的图像数据列表。在步骤S402处,CPU 201指示显示器205基于所获得的列表来显示记录介质208上所存储的图像数据的缩略图图像列表。
图5A是在显示控制装置200的显示器205上显示缩略图图像列表的画面的示例。在显示器205上显示(布置)多个缩略图图像502。在步骤S403处,CPU 201判断是否对操作单元206进行了选择操作,以选择列表中的所显示的缩略图图像之一。如果选择了缩略图图像,则CPU 201进行到步骤S407,以进行与选择操作所选择的缩略图图像相对应的VR图像的共享处理。如果尚未选择缩略图图像,则处理进行到步骤S404。
在步骤S404处,CPU 201判断用户是否对操作单元206进行了任何其他操作(除图像选择之外的操作)。如果进行了任何其他操作,则处理进行到步骤S405。如果尚未进行其他操作,则处理进行到步骤S406。在步骤S405处,CPU 201进行与在步骤S404处进行的其他操作相对应的处理(其他处理)。其他操作的示例包括用于滚动画面显示以显示缩略图图像列表中未显示的缩略图图像的滚动操作、以及用于复制或删除与缩略图图像相对应的VR图像的操作等。
在步骤S406处,CPU 201判断是否对操作单元206进行了用于结束图像列表显示的结束操作。如果进行了结束操作,则图4所示的图像共享处理结束。如果尚未进行结束操作,则处理返回到步骤S402。
从步骤S407到步骤S422的处理是用于共享与在步骤S403处选择的缩略图图像相对应的VR图像的处理的示例。在步骤S407处,CPU 201从记录介质208读取并获得与所选择的缩略图图像相对应的VR图像。
在步骤S408处,CPU 201在显示器205上显示在步骤S407处获得的VR图像的基准区域。基准区域是在基准方向面向前方的状态下显示在显示器205上的区域。具体地,CPU 201从所获得的VR图像的图像文件的附加信息中提取朝向信息(例如,在拍摄VR图像时由摄像装置等生成并与该VR图像一起记录的朝向信息)。在下文中,由该朝向信息表示的朝向(用于VR显示的朝向;显示方向)被称为基准方向。例如,基准方向可以是摄像装置的镜头的光轴的方向。CPU 201将与显示器205的大小相对应地显示的并且以所获得的VR图像的基准方向所表示的位置为中心的区域确定为显示区域(基准区域)。CPU 201在显示器205上显示所确定的显示区域的图像。
图5B是在显示控制装置200的显示器205上显示从图5A中的缩略图图像列表中选择的VR图像的画面的示例。显示器205显示VR图像510。显示器205还显示用于指示在外部装置和社交网络服务(SNS)上共享VR图像510的共享按钮511。
在步骤S409处,CPU 201判断是否对操作单元206进行了用于改变VR显示的显示方向的改变操作(改变指示)。用户可以通过操作操作单元206来发出改变指示,或者可以通过其他种方法来发出改变指示。例如,如图5B所示,用户可以通过对触摸面板206a进行箭头512的方向上的触摸移动操作来发出改变指示,或者可以通过改变显示控制装置200的姿态来发出改变指示。如果进行了改变操作,则处理进行到步骤S410。如果尚未进行改变操作,则处理进行到步骤S411。
在步骤S410处,CPU 201根据步骤S409处的改变操作来改变显示器205上所显示的VR图像510的显示区域。图5C示出在图5B所示的画面上通过在箭头512的方向上进行触摸移动操作而改变了显示区域的画面的示例。
在步骤S411处,CPU 201判断是否存在用于将正被显示为共享图像的VR图像传输到外部装置的共享指示。例如,用户可以通过对触摸面板206a上的共享按钮511进行触摸来指示VR图像的共享。如果存在共享指示,则处理进行到步骤S412。如果不存在共享指示,则处理进行到步骤S420。
在步骤S412处,CPU 201指示显示器205显示共享菜单画面。图5D是共享菜单画面的示例。当在图5B或图5C的状态下触摸共享按钮511时,显示器205的显示画面转变到图5D的画面。在图5D中,在VR图像510上叠加显示共享菜单画面520。共享菜单画面520包括按钮521、522和523。
按钮521(“共享”)是用于指示在步骤S408处显示的基准方向(基准区域)的显示的按钮。按钮522(“在该方向上共享”)是用于指示显示在步骤S410处已经改变的显示方向(显示区域)的按钮。按钮523(“共享期望的被摄体”)是用于指示显示包括用户所指定的被摄体的显示方向(显示区域)的按钮。当VR图像510是包括多个帧的VR运动图像时,显示按钮523。
在步骤S413处,CPU 201判断是否选择了用于指示在包括用户所指定的被摄体的显示方向上进行显示的按钮523。如果选择了按钮523,则处理进行到步骤S414。如果按钮523尚未被选择,并且按钮521或按钮522已经被选择,则处理进行到步骤S419。
在步骤S414处,CPU 201显示被摄体选择画面。图5E是被摄体选择画面的示例。显示器205在VR图像510上叠加显示用于表示运动图像的回放位置的进度条530以及用于表示当前回放位置的滑块531。
在步骤S415处,CPU 201判断用户是否进行了选择要向观看者示出的特定被摄体的操作。选择被摄体的操作例如包括在触摸面板206a上触摸显示有期望的被摄体的区域的操作、或者移动手指以包围期望的被摄体的操作。在图5E中,用户所选择(指定)的特定被摄体由包围该被摄体的被摄体选择框532指示。
如果用户进行了选择被摄体的操作,则处理进行到步骤S416。如果用户尚未选择被摄体,则CPU 201返回到步骤S415并等待,直到CPU 201接收到来自用户的被摄体选择操作为止。当用户即使在经过了预定时间之后也没有选择被摄体时,CPU 201可以进行到步骤S419的处理。
在步骤S416处,CPU 201判断是否将在步骤S415处选择的被摄体确定为特定被摄体。CPU 201显示用于用户确定所选择的被摄体作为特定被摄体的确认画面。图5F是确认画面的示例。显示器205显示VR图像510上所叠加的确认画面540、“是”按钮541和“否”按钮542。如果用户按压(轻击)“是”按钮541以确认所选择的被摄体,则处理进行到步骤S417。如果用户按压(轻击)“否”按钮542,则CPU 201返回到步骤S415并等待直到CPU 201接收到来自用户的被摄体选择操作为止。
在步骤S417处,基于在步骤S415处选择的被摄体的数据,CPU 201从VR运动图像的各个帧中检测被摄体。CPU 201针对VR运动图像的各个帧,生成帧的基准方向与被摄体的检测位置的方向之间的角度差作为基准方向的校正数据。帧基准方向是在拍摄到VR运动图像时针对各个帧而设置的,并且是至显示区域中心的方向。帧基准方向作为附加信息被添加到VR运动图像文件。
在步骤S418处,基于在步骤S417处生成的校正数据,CPU 201改变(校正)VR运动图像的各个帧的基准方向。CPU 201通过校正VR运动图像的各个帧的基准方向并对该图像进行重新编码来生成VR运动图像文件,并将该文件存储在记录介质208上。通过校正VR运动图像的各个帧的基准方向并对该图像进行重新编码,CPU 201可以生成校正后的VR运动图像,使得特定被摄体在初始状态下被追踪并且被顺次回放。初始状态是在通过用户的操作、或显示控制装置200的姿态改变等而改变显示方向(显示区域)之前的状态。CPU 201可以用基准方向被校正的校正后的VR运动图像来替换原始VR运动图像,或者生成校正后的VR运动图像作为与原始VR运动图像不同的数据,并将其存储在记录介质208上。此外,校正数据可以与VR运动图像的文件相关联地被存储在记录介质208上,或者可以被添加到VR运动图像的文件并被存储。
在步骤S419处,CPU 201将在步骤S418处生成的VR运动图像文件(图像数据)传输到外部装置,并将图像数据作为共享图像来共享。当在步骤S413处选择了按钮521(“共享”)时,CPU 201将图像数据传输到外部装置等,而不改变拍摄时所设置的基准方向。此外,当在步骤S413处选择了按钮522(“在该方向上共享”)时,CPU 201将各个帧的基准方向校正为正在显示的显示方向(当前显示方向),并将图像数据传输到外部装置等。正在显示的显示方向是用户通过触摸移动操作等改变了显示区域之后的当前显示方向。
在步骤S420处,CPU 201判断是否对操作单元206进行了任何其他操作(除共享指示之外的操作)。如果进行了任何其他操作,则处理进行到步骤S421。如果尚未进行其他操作,则处理进行到步骤S422。在步骤S421处,CPU 201根据在步骤S420处进行的其他操作来进行处理(其他处理)。其他操作的示例包括用于调整图像的颜色和亮度等的编辑操作以及剪切出VR图像的一部分的操作。
在步骤S422处,CPU 201判断是否进行了用于结束用于共享在步骤S403处选择的VR图像的处理的结束操作。如果进行了结束操作,则处理进行到S404。如果尚未进行结束操作,则处理返回到步骤S409。
图6是显示控制装置200的图像回放处理的示例的流程图。图7是从列表中所显示的图像中选择的图像的选择图像回放处理的示例的流程图。图6和图7示出用于将图4的图像共享处理中所生成的VR图像作为共享图像与其他图像一起在社交网络服务(SNS)上进行观看的处理的示例。可以使用显示控制装置200来进行图像回放处理和选择图像回放处理。
当记录在非易失性存储器203中的程序(例如,用于进行记录介质208上所记录的VR图像的VR显示的特定应用程序)被加载到存储器202中并由CPU 201执行时,进行图6和图7的处理。例如,当用户进行在显示器205上显示共享图像列表以播放所共享的VR图像的操作时,CPU 201开始图像回放处理。
当图像回放处理开始时,在步骤S601处,CPU 201获得记录介质208上所存储的图像数据列表。在步骤S602处,CPU 201获得与从记录介质208读取的图像中的VR图像的基准方向相关的信息。与VR图像的基准方向相关的信息可以作为元数据被添加到VR图像的图像数据文件,或者可以被存储在与图像数据文件相关联的单独文件中。在步骤S603处,CPU201显示在步骤S601处获得的图像(共享图像)的列表。
图8A是在显示控制装置200的显示器205上显示在步骤S601处获得的图像列表的画面的示例。显示器205显示SNS时间线700。时间线700包括在垂直方向上布置并显示的静止图像701和全方位静止图像702。用户可以通过在箭头710a所指示的方向上对触摸面板206a进行触摸移动滚动操作来滚动时间线700中的图像。
在静止图像701和702上,叠加作为用于表示图像类型的GUI对象的对象701a和对象702a。对象701a(“STILL”)表示图像是静止图像(其不是VR图像)。对象702a(“360°STILL”)表示图像是VR图像(在该示例中是全方位图像)的静止图像。
在步骤S604处,CPU 201判断是否对操作单元206进行了选择操作,以选择列表中所显示的图像之一。如果选择了图像,则处理进行到步骤S605。如果尚未选择图像,则处理进行到步骤S606。
在步骤S606处,CPU 201判断是否对所显示的图像列表进行了滚动操作。如果进行了滚动操作,则处理进行到步骤S607。如果尚未进行滚动操作,则处理进行到步骤S615。
在步骤S607处,CPU 201判断时间线700中所包括的图像列表中的显示在显示器205上的图像是否是VR运动图像。如果显示在显示器205上的图像是VR运动图像,则处理进行到步骤S611。如果显示在显示器205上的图像不是VR运动图像,则处理进行到步骤S608。
在步骤S608处,CPU 201判断是否正在进行滚动操作。如果正在进行滚动操作,则处理进行到步骤S609。如果未正在进行滚动操作,则处理进行到步骤S614。
在步骤S609处,CPU 201使显示方向改变操作(预定操作)无效。也就是说,CPU 201进行控制,使得在正在进行滚动图像列表的操作时接收到用户的显示方向改变操作的情况下,显示区域不会根据显示方向改变操作而改变。显示方向改变操作被无效,这是因为在用户正在观看并滚动时间线700中的图像列表时,VR图像的显示区域被控制为处于VR图像的共享者想要示出的方向上。
显示方向改变操作的示例包括通过对触摸面板206a上的VR图像的触摸移动操作来改变显示区域的操作、以及改变显示控制装置200的姿态的操作。当用户改变显示控制装置200的姿态时,CPU 201进行控制,以根据姿态检测单元213所检测到的显示控制装置200的位置和姿态来改变VR图像的显示区域。
在步骤S610处,当通过对时间线700(图像列表)的滚动操作来显示静止VR图像时,CPU 201例如在显示器205的横向方向上平摇VR图像的显示区域。通过进行平摇显示,CPU201使得用户能够知道正在显示的图像是VR图像,并且可以改变显示区域。
图8B是在对时间线700的滚动操作期间在显示器205上显示作为全方位图像的静止图像702的情形下的画面示例。当响应于在箭头710b的方向上的触摸移动滚动操作而在显示器205上显示静止图像702时,CPU 201显示以静止图像702中的基准方向为中心的显示区域,然后进行显示区域在箭头711的方向上移动的平摇显示。静止VR图像的基准方向可以是拍摄时所设置的方向,或者可以是用户(共享者)所指定的方向。通过进行平摇显示,显示控制装置200可以示出VR图像共享者想要观看者看到的方向,并且还向用户表示所显示的图像是VR图像。
在步骤S610处的处理中,CPU 201进行控制以自动改变显示区域。因此,响应于用户的操作的显示区域的附加改变将会导致显示区域的改变处理的重叠。为了避免由于重叠显示区域改变处理而导致视点的意外移动,在步骤S609处,CPU 201使用户的显示区域改变操作无效。当显示在显示器205上的图像不是VR图像时,CPU 201不需要进行步骤S609和S610的处理。
在步骤S611处,CPU 201自动开始播放VR运动图像。图8C是在通过在箭头710b的方向上的触摸移动滚动操作而使时间线700从图8B的状态进一步向下滚动的情形下的画面示例。在滚动之后的画面上,作为全方位图像的运动图像703被显示在显示器205上。
显示器205显示运动图像703上所叠加的对象703a和进度条703b。对象703a(“360°MOVIE”)是用于表示图像类型的GUI对象,并且表示运动图像703是VR图像(在该示例中是全方位图像)的运动图像。进度条703b表示运动图像703的回放位置。
图8D是在通过在箭头710b的方向上的触摸移动滚动操作而使时间线700从图8C的状态进一步向下滚动的情形下的画面示例。进度条703b表示运动图像703的自动回放已经从图8C所示的状态进行。
被摄体712是在步骤S416处确定的特定被摄体,并且在运动图像703的各个帧中,基准方向被校正为存在被摄体712的方向。对于运动图像703的各个帧,CPU 201确定以基准方向为中心的显示区域,从而播放以被摄体712为中心的运动图像。
在步骤S612处,CPU 201判断是否正在进行VR运动图像的自动回放。如果正在进行自动回放,则处理进行到步骤S613。如果未正在进行自动回放,则处理进行到步骤S614。
在步骤S613处,CPU 201以与步骤S609相同的方式使显示方向改变操作无效。根据在图4的步骤S417和步骤S418处校正的基准方向,CPU 201确定各个帧的显示区域并回放VR运动图像。也就是说,CPU 201将各个帧的基准方向校正为VR运动图像的共享者想要观看者看到的方向(例如,存在特定被摄体的方向),从而将用于VR运动图像回放的显示区域改变为共享者想要示出的区域。如果在正在播放VR运动图像时响应于用户操作进一步改变显示区域,则显示区域的改变处理将重叠。为了避免由于重叠显示区域改变处理而导致视点的意外移动,CPU 201使用户的显示区域改变操作无效,直到VR运动图像的回放结束为止。
步骤S614取消步骤S609和S613处的显示方向改变操作的无效。也就是说,当接收到来自用户的显示方向改变操作时,CPU 201响应于用户操作而改变VR图像的显示区域。
步骤S615和S616分别与图4所示的图像共享处理的步骤S409和S410相同。
在步骤S617处,CPU 201判断是否对操作单元206进行了任何其他操作(除显示方向改变操作之外的操作)。如果进行了任何其他操作,则处理进行到步骤S618。如果尚未进行其他操作,则处理进行到步骤S619。在步骤S618处,CPU 201根据在步骤S617处进行的其他操作来进行处理(其他处理)。其他操作的示例包括对其他人发布的内容发布评论的操作以及选择反应图标的操作。
在步骤S619处,CPU 201判断是否进行了用于结束图6所示的图像回放处理的结束操作。如果进行了结束操作,则图像回放处理结束。如果尚未进行结束操作,则处理返回到步骤S601。
图7是示出图6的步骤S605处的选择图像回放处理的细节的流程图。从步骤S620到步骤S626的处理是用于在步骤S604处对参照图8A至图8D描述的从图像列表中选择的图像进行单独播放并显示的单个回放处理。
图8E是用于播放从图8D所示的图像列表中选择的运动图像703的画面的示例。例如,当用户通过触摸操作等从图像列表中选择期望的共享图像时,CPU 201切换到用于单独显示所选择的共享图像的图8E的画面。显示器205单独显示运动图像703,并进一步显示进度条703d。显示器205还显示返回按钮713和VR显示按钮714。返回按钮713是用于返回到图8D所示的图像列表的按钮(项)。VR显示按钮714是用于对显示器205上所显示的图像进行VR显示的按钮(项)。
在步骤S620处,CPU 201开始回放在步骤S604处选择的图像。在步骤S621处,CPU201判断VR显示按钮714是否已经被操作(选择)。如果VR显示按钮714已经被操作,则处理进行到步骤S627。如果VR显示按钮714尚未被操作,则处理进行到步骤S622。
在步骤S622处,CPU 201判断是否对操作单元206进行了用于改变VR显示的显示方向的改变操作(改变指示)。如果进行了改变操作,则处理进行到步骤S623。如果尚未进行改变操作,则处理进行到步骤S624。在步骤S623处,CPU 201根据步骤S622处的改变操作来改变显示器205上所显示的VR图像的显示区域。
在步骤S624处,CPU 201判断是否对操作单元206进行了任何其他操作(除显示方向改变操作之外的操作)。如果进行了任何其他操作,则处理进行到步骤S625。如果尚未进行其他操作,则处理进行到步骤S626。其他操作的示例包括用于调整图像的颜色和亮度等的编辑操作。在步骤S625处,CPU 201根据在步骤S624进行的其他操作来进行处理(其他处理)。
在步骤S626处,CPU 201判断是否进行了用于结束图7所示的选择图像回放处理的结束操作。例如,用于结束选择图像回放处理的操作可以是返回按钮713的选择操作。如果进行了结束操作,则选择图像回放处理结束,并且处理进行到图6中的步骤S606。如果尚未进行结束操作,则处理返回到步骤S621。
从步骤S627到步骤S632的处理是以VR播放并显示VR图像以供用VR护目镜230观看的处理。在步骤S627处,CPU 201以VR播放并显示VR图像。
图8F是用于以VR播放并显示VR图像的画面的示例。显示器205显示左眼图像723a和右眼图像723b。显示器205还显示返回按钮715和单个回放按钮716。返回按钮715是用于结束VR显示并返回到图8D所示的图像列表的按钮(项)。单个回放按钮716是用于结束显示器205上所显示的图像的VR显示并返回到步骤S622的按钮(项)。
步骤S628和S629分别类似于步骤S622和S623。为了以VR播放并显示VR图像,CPU201在接收到用于改变VR显示的显示方向的改变操作(包括改变显示控制装置200的姿态的操作)时,改变显示器205上所显示的VR图像的显示区域。
在步骤S630处,CPU 201判断是否对操作单元206进行了任何其他操作(除显示方向改变操作之外的操作)。如果进行了任何其他操作,则处理进行到步骤S631。如果尚未进行其他操作,则处理进行到步骤S632。其他操作的示例包括使用参照图3A描述的控制器340和350在进度条上移动用于表示VR运动图像的回放位置的滑块的操作。在这种情况下,图8F的画面可以如图8E那样显示进度条。在步骤S631处,CPU 201根据在步骤S630处进行的其他操作来进行处理(其他处理)。
在步骤S632处,CPU 201判断是否进行了用于结束VR图像的VR显示的结束操作。用于结束VR显示的结束操作的示例包括返回按钮715或单个回放按钮716的选择操作。如果进行了结束操作,则处理进行到步骤S622。应当注意,如果进行了结束操作,则CPU 201可以进行到步骤S606。如果尚未进行结束操作,则处理返回到步骤S628。
VR图像不限于上下方向上360度和左右方向上360度的全方位图像,并且可以是上下方向和左右方向上180度以下的图像。此外,符合VR180格式的图像可以与叠加在该图像上的用于表示符合该格式的GUI对象一起显示。
图4中的步骤S417和S418的处理示出用于使用所生成的校正数据来校正VR运动图像的基准方向并进行重新编码的处理的示例,但是该处理不限于此。例如,显示控制装置200可以将校正数据存储为与VR运动图像文件分开的文件,并且可以将校正数据文件和VR运动图像文件彼此关联地记录在记录介质208上。在这种情况下,在步骤S419处,显示控制装置200可以将基准方向未改变的原始VR运动图像文件以及相应的校正数据文件传输到外部装置。然后,当在图6的步骤S611处播放VR运动图像时,显示控制装置200使用校正数据以在校正原始VR运动图像的各个帧的基准方向的同时播放VR运动图像。
此外,当在图4的步骤S412处显示共享菜单时,显示控制装置200可以使得用户能够选择多个共享目的地。显示控制装置200可以使得用户能够针对作为VR运动图像的传输目的地的各个共享目的地,选择按钮521(“共享”)、按钮522(“在该方向上共享”)和按钮523(“共享期望的被摄体”)的共享方法之一。
此外,在图4的步骤S417处,对于用户所指定的特定被摄体未被检测到(不存在)的帧,显示控制装置200可以根据在其他帧中检测到的特定被摄体的位置来改变基准方向。例如,其他帧可以是在未检测到被摄体的帧之前或之后的帧。紧前在VR图像中检测到的被摄体不再被检测到的原因包括被摄体转身并且其诸如面部等的显著特征不再被检测到的情形、以及被摄体移开并且变得不可检测到的情形。通过采用在最近的帧中检测到的被摄体的位置,即使对于未检测到被摄体的帧,显示控制装置200也可以适当地校正基准方向。
要在步骤S415处追踪的特定被摄体不限于独特的人或动物,并且可以由诸如人、动物、汽车或飞机等的追踪对象的类型来指定。附加地,特定被摄体可以由独特被摄体和追踪对象类型来指定。通过独特被摄体和追踪对象类型的组合来指定特定被摄体,这提高了检测特定被摄体时的精度。
在图4的步骤S419处,当校正后的VR图像(VR运动图像的图像数据)被传输到外部装置并被共享时,可以用共享的VR图像的基准方向覆盖记录介质208上所保持的原始VR图像的基准方向。
可以循环播放在图6的步骤S611处自动回放的VR运动图像。改变显示方向的操作被无效,直到正被自动播放的运动图像通过对时间线700的滚动操作而被隐藏为止。可替代地,当回放完成一次时,显示控制装置200可以取消显示方向改变操作的无效,并且在第二次和随后的回放期间,响应于用户的显示方向改变操作来改变显示区域。在步骤S611处,仅可以自动播放由操作按钮523共享的VR运动图像(“共享期望的被摄体”)。
此外,即使在图4的步骤S407处获得的图像是静止VR图像时,也可以显示按钮523(“共享期望的被摄体”)。具体地,当获得通过连续拍摄(连拍)或以预定时间间隔的间隔拍摄而顺次拍摄的多个静止VR图像作为一组静止图像时,显示控制装置200可以显示按钮523。
在图6的从步骤S607到步骤S614的处理中,当显示在显示器205上的图像是VR运动图像时进行的用于显示方向改变操作的处理与在图像是静止图像(包括除VR图像以外的图像)时进行的处理不同。本发明不限于此,并且可以以与静止图像等相同的方式响应于显示方向改变操作来处理持续时间为预定数量的秒以下的VR运动图像(短运动图像)。例如,由于短运动图像的回放在预定数量的秒的持续时间内结束,因此在对时间线700的滚动操作期间,用户的显示方向改变操作被无效,但是可以在滚动操作结束之后取消无效。
作为根据本发明的电子装置的示例的显示控制装置200可以被配置为与VR护目镜230集成的壳体。附加地,显示控制装置200可以与数字照相机100一体地配置。
在上述实施例中,显示控制装置200将顺次拍摄的多个VR图像(包括VR运动图像、通过间隔拍摄或连续拍摄而拍摄的多个VR图像)各自的基准方向校正为存在共享者想要示出的特定被摄体的方向。通过校正基准方向,在追踪共享者所指定的特定被摄体的同时,以初始状态顺次回放校正后的VR图像。此外,与通过剪切出特定被摄体所生成的运动图像不同,用户可以以与原始VR图像相同的方式改变根据本实施例的校正后的VR图像的显示区域。
上面详细描述了本发明的一些优选实施例,但是本发明不限于这些特定实施例,并且本发明范围内的各种实施例也包括在本发明中。前述实施例仅仅是本发明的例示性实施例,并且可以适当地组合这些实施例。
本发明还可以通过进行以下处理来实现。也就是说,用于实现上述实施例的功能的软件(程序)经由网络或各种存储介质被供给到系统或装置。系统或设备的计算机(或CPU和MPU等)将所供给的程序读取到存储器中并执行该程序。在这种情况下,这些程序以及存储有该程序的存储介质构成了本发明。
被描述为正由CPU 201和系统控制单元50进行的各种控制(处理)可以由单个硬件进行,或者可以由分担该处理的多个硬件进行。
根据本发明,可以在显示共享者想要示出的部分的同时顺次回放多个VR图像。
其他实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然已经参考示例性实施例描述了本发明,但是应当理解,本发明不限于所公开的示例性实施例。所附权利要求书的范围符合最广泛的解释,以涵盖所有这样的修改以及等同的结构和功能。
Claims (19)
1.一种电子装置,包括:
获得单元,其被配置为获得顺次拍摄的多个VR图像;以及
生成单元,其被配置为从所述多个VR图像中的各个VR图像,生成该VR图像的基准方向被校正为该VR图像中存在特定被摄体的方向的VR图像。
2.根据权利要求1所述的电子装置,其中,所述生成单元针对所述多个VR图像中的各个VR图像,基于该VR图像的所述基准方向与该VR图像中存在所述特定被摄体的方向之间的差,来生成用于校正该VR图像的所述基准方向的校正数据,并且使用所述校正数据来校正所述多个VR图像中的各个VR图像的所述基准方向。
3.根据权利要求2所述的电子装置,还包括传输单元,所述传输单元被配置为向外部装置传输所述多个VR图像和所述校正数据,或者向所述外部装置传输所述多个VR图像中的各个VR图像的所述基准方向被所述生成单元进行了校正的多个VR图像。
4.根据权利要求2所述的电子装置,还包括存储单元,所述存储单元被配置为进行控制使得将所述多个VR图像和所述校正数据进行关联并存储在记录介质上。
5.根据权利要求1至4中任一项所述的电子装置,其中,所述获得单元获得包括分别与所述多个VR图像相对应的多个帧的VR运动图像。
6.根据权利要求1至4中任一项所述的电子装置,其中,所述特定被摄体由用户指定。
7.根据权利要求1至4中任一项所述的电子装置,其中,所述生成单元校正所述多个VR图像中的各个VR图像的所述基准方向,并生成多个校正后的VR图像作为与所述多个VR图像不同的数据。
8.根据权利要求1至4中任一项所述的电子装置,其中,所述生成单元校正所述多个VR图像中的各个VR图像的所述基准方向,并存储所述多个VR图像作为替换。
9.根据权利要求1至4中任一项所述的电子装置,还包括指示单元,所述指示单元被配置为基于用户的操作,指示是基于存在所述特定被摄体的方向来校正所述VR图像的所述基准方向,还是根据用户所指定的方向来校正所述VR图像的所述基准方向。
10.根据权利要求9所述的电子装置,其中,所述指示单元基于用户的操作,针对所述VR图像的各个传输目的地,指示是基于存在所述特定被摄体的方向来校正所述VR图像的所述基准方向,还是基于用户所指定的方向来校正所述VR图像的所述基准方向。
11.根据权利要求1至4中任一项所述的电子装置,其中,所述生成单元针对不存在所述特定被摄体的VR图像,基于其他VR图像中所检测到的所述特定被摄体的位置来校正所述VR图像的所述基准方向。
12.根据权利要求1至4中任一项所述的电子装置,还包括:
切换单元,其被配置为在以列表显示多个共享图像和单独显示所述多个共享图像中的一个共享图像之间进行切换;以及
显示控制单元,其被配置为控制所述多个共享图像各自的显示区域的变化,
其中,所述显示控制单元被配置为:
在所述共享图像是所述生成单元所生成的多个校正后的VR图像并且所述共享图像被单独显示的状态下,在正在进行所述共享图像的回放期间,进行控制使得即使在从用户接收到用于改变显示方向的预定操作的情况下也不会基于所述预定操作改变所述显示区域;以及
在以列表显示所述多个共享图像并且正在进行用户对所述多个共享图像的列表的滚动操作的状态下,进行控制使得即使在接收到所述预定操作的情况下也不会基于所述预定操作改变所述显示区域。
13.根据权利要求12所述的电子装置,其中,所述预定操作是改变所述电子装置的姿态的操作。
14.根据权利要求12所述的电子装置,其中,所述显示控制单元进行控制,以在所述共享图像是所述生成单元所生成的多个校正后的VR图像并且所述共享图像被单独以VR显示的情况下,基于所述预定操作来改变所述显示区域。
15.根据权利要求1至4中任一项所述的电子装置,其中,所述多个VR图像是连续拍摄的多个图像。
16.根据权利要求1至4中任一项所述的电子装置,其中,所述多个VR图像是以预定时间间隔拍摄的多个图像。
17.根据权利要求1至4中任一项所述的电子装置,其中,所述VR图像是具有比显示单元上能够一次显示的显示区域更宽的区域的图像。
18.一种电子装置的控制方法,所述控制方法包括:
获得顺次拍摄的多个VR图像;以及
从所述多个VR图像中的各个VR图像,生成该VR图像的基准方向被校正为该VR图像中存在特定被摄体的方向的VR图像。
19.一种计算机可读存储介质,其存储有程序,所述程序用于使计算机执行根据权利要求18所述的电子装置的控制方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022187220A JP2024075939A (ja) | 2022-11-24 | 2022-11-24 | 電子機器および電子機器の制御方法 |
JP2022-187220 | 2022-11-24 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118075440A true CN118075440A (zh) | 2024-05-24 |
Family
ID=91096150
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311573744.8A Pending CN118075440A (zh) | 2022-11-24 | 2023-11-23 | 电子装置及其控制方法和计算机可读存储介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240176411A1 (zh) |
JP (1) | JP2024075939A (zh) |
CN (1) | CN118075440A (zh) |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7050078B2 (en) * | 2002-12-19 | 2006-05-23 | Accenture Global Services Gmbh | Arbitrary object tracking augmented reality applications |
TW201128516A (en) * | 2010-02-12 | 2011-08-16 | Utw Technologies Corp | An instinctive operating method and an electronic device using the same |
KR102576654B1 (ko) * | 2016-10-18 | 2023-09-11 | 삼성전자주식회사 | 전자 장치 및 그의 제어 방법 |
US11756259B2 (en) * | 2019-04-17 | 2023-09-12 | Rakuten Group, Inc. | Display controlling device, display controlling method, program, and non-transitory computer-readable information recording medium |
JP6818092B2 (ja) * | 2019-06-25 | 2021-01-20 | 株式会社コロプラ | ゲームプログラム、ゲーム方法、および情報端末装置 |
JP7399779B2 (ja) * | 2020-04-07 | 2023-12-18 | シャープ株式会社 | 操作装置、表示制御方法、及び表示制御プログラム |
WO2022186646A1 (ko) * | 2021-03-05 | 2022-09-09 | 삼성전자 주식회사 | 이미지 생성을 위한 전자 장치 및 전자 장치의 동작 방법 |
JP2022137826A (ja) * | 2021-03-09 | 2022-09-22 | 株式会社Mawari | 3dオブジェクトのストリーミング方法、装置、及びプログラム |
JP2023169914A (ja) * | 2022-05-18 | 2023-12-01 | キヤノン株式会社 | 画像処理装置、画像処理方法及びコンピュータプログラム |
US20230388641A1 (en) * | 2022-05-24 | 2023-11-30 | Canon Kabushiki Kaisha | Image capture control device, image capture device, image capture control method, and non-transitory computer-readable storage medium |
US20240022821A1 (en) * | 2022-07-12 | 2024-01-18 | Canon Kabushiki Kaisha | Imaging system, and control apparatus and imaging apparatus constituting same |
-
2022
- 2022-11-24 JP JP2022187220A patent/JP2024075939A/ja active Pending
-
2023
- 2023-10-23 US US18/491,970 patent/US20240176411A1/en active Pending
- 2023-11-23 CN CN202311573744.8A patent/CN118075440A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
JP2024075939A (ja) | 2024-06-05 |
US20240176411A1 (en) | 2024-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110691187B (zh) | 电子装置、电子装置的控制方法和计算机可读介质 | |
JP7094815B2 (ja) | 表示制御装置、表示制御装置の制御方法、プログラム、記憶媒体 | |
CN111385470B (zh) | 电子设备、电子设备的控制方法和计算机可读介质 | |
US11295530B2 (en) | Electronic apparatus for playing back a virtual reality video image and control method therefor | |
KR102477993B1 (ko) | 표시 제어장치, 촬상 장치, 제어 방법 및 컴퓨터 판독 가능한 매체 | |
US11380075B2 (en) | Electronic apparatus for playing back a virtual reality video image and control method therefor | |
JP2021174317A (ja) | 電子機器及びその制御方法 | |
JP7267764B2 (ja) | 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体 | |
US20240176411A1 (en) | Electronic device and method for controlling electronic device | |
US20240345407A1 (en) | Electronic device and method for controlling electronic device | |
JP2021069045A (ja) | 表示制御装置、表示制御方法、プログラムおよび記憶媒体 | |
JP2020129340A (ja) | 電子機器、電子機器の制御方法、プログラム | |
US20230283844A1 (en) | Information processing apparatus, control method of information processing apparatus, non-transitory computer readable medium, and system | |
JP7336200B2 (ja) | 電子機器及びその制御方法 | |
JP7086762B2 (ja) | 表示制御装置 | |
JP7443100B2 (ja) | 電子機器、電子機器の制御方法、プログラムおよび記憶媒体 | |
JP2024152327A (ja) | 電子機器および電子機器の制御方法 | |
JP2023121126A (ja) | 電子機器、電子機器の制御方法、プログラム | |
CN116634121A (zh) | 电子装置、电子装置的控制方法和存储介质 | |
JP2024132468A (ja) | 表示制御装置、表示制御方法、プログラム | |
GB2617673A (en) | Electronic device, method for controlling electronic device, and program | |
JP2020205554A (ja) | 表示制御装置、その制御方法、プログラムおよび記憶媒体 | |
CN118509704A (zh) | 电子装置、电子装置的控制方法和计算机可读介质 | |
CN118828175A (zh) | 电子装置及其控制方法、计算机可读介质和计算机程序产品 | |
CN110881102A (zh) | 图像处理设备、图像处理方法和计算机可读介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |