CN110691187A - 电子装置、电子装置的控制方法和计算机可读介质 - Google Patents

电子装置、电子装置的控制方法和计算机可读介质 Download PDF

Info

Publication number
CN110691187A
CN110691187A CN201910604127.7A CN201910604127A CN110691187A CN 110691187 A CN110691187 A CN 110691187A CN 201910604127 A CN201910604127 A CN 201910604127A CN 110691187 A CN110691187 A CN 110691187A
Authority
CN
China
Prior art keywords
image
display
instruction
display range
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910604127.7A
Other languages
English (en)
Other versions
CN110691187B (zh
Inventor
小川诚司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN110691187A publication Critical patent/CN110691187A/zh
Application granted granted Critical
Publication of CN110691187B publication Critical patent/CN110691187B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种电子装置、电子装置的控制方法和计算机可读介质。所述电子装置包括：接收单元，其被配置为接收：(i)用于将从存储单元读出并发送到外部装置的图像的范围的一部分指定为显示范围的第一指示，以及(ii)用于将存储单元中存储的图像发送到外部装置的第二指示；控制单元，其被配置为根据第二指示将所述存储的图像和与由第一指示指定的显示范围有关的信息发送到外部装置，并将该信息与存储的图像相关联；以及显示控制单元，其被配置为在该信息与所述存储的图像相关联的情况下，基于关联的信息显示显示范围，其中该显示范围用于指定所述存储的图像的范围的一部分以供观看。

Description

电子装置、电子装置的控制方法和计算机可读介质
技术领域
本发明涉及电子装置。
背景技术
近年来，摄像装置已经能够在比正常人类视觉更宽的视角上拍摄图像。例如，这种装置能够拍摄全方位图像和全球面(spherical)图像。还已知一种在显示单元上显示这种宽视角图像的一部分并且在装置的姿势改变之后改变显示单元上显示的图像的范围(显示范围)以便提供更高的沉浸感和更高的存在感的方法。
日本特开2017-182548公开了用于将球面图像存储在网络上的服务器中并使其它用户能够在他们自己的显示装置上观看(共享)球面图像的系统。日本特开2017-182548中公开的系统使其它用户能够在他们自己的用户终端上观看球面图像的预定区域/部分。
发明内容
当显示服务器上的球面图像时，球面图像的范围的一部分被显示为显示范围。也就是说，例如，可以显示示出球面图像的观看范围的一部分的球面图像的一部分。优选地，将球面图像发送到服务器并存储球面图像的用户可以指定球面图像中的用户特别希望引起关注的范围(关注范围)作为显示范围。以这种方式，当显示服务器上的球面图像时，可以使用指定的关注范围作为显示范围。还可以与其它用户共享指定的关注范围。
然而，当显示与服务器不同的装置(例如，自身装置)上的球面图像的关注范围时，需要指定关注范围作为显示范围。
本发明提供了使装置能够使用与外部设备(例如服务器)相同的显示范围的技术。以这种方式，该装置和外部装置可以显示具有相同显示范围的图像。
本发明的第一方面提供了一种电子装置，包括：通信单元，其被配置为与外部装置通信；接收单元，其被配置为接收：(i)用于将从存储单元读出并发送到所述外部装置的图像的范围的一部分指定为显示范围的第一指示，以及(ii)用于将所述存储单元中存储的图像发送到所述外部装置的第二指示；控制单元，其被配置为根据所述第二指示将所述存储的图像和与由所述第一指示指定的显示范围有关的信息发送到所述外部装置，并将与所述指定的显示范围有关的信息与所述存储的图像相关联；以及显示控制单元，其被配置为在与所述指定的显示范围有关的信息与所述存储的图像相关联的情况下，基于相关联的信息来显示用于指定所述存储的图像的范围的一部分以用于观看的显示范围。
本发明的第一方面提供了一种电子装置的控制方法，所述控制方法包括：与外部装置通信；接收：(i)用于将从存储单元读出并发送到所述外部装置的图像的范围的一部分指定为显示范围的第一指示，以及(ii)用于将所述存储单元中存储的图像发送到所述外部装置的第二指示；根据所述第二指示，将所述存储的图像和与由所述第一指示指定的显示范围有关的信息发送到所述外部装置；将与所述指定的显示范围有关的信息与所述存储的图像相关联；以及在与所述指定的显示范围有关的信息与所述存储的图像相关联的情况下，基于相关联的信息来显示用于指定所述存储的图像的范围的一部分以用于观看的显示范围。
本发明的第三方面提供了使计算机用作上述电子装置的各单元的程序。本发明在其第四方面提供了存储使计算机用作上述电子装置的各单元的程序的计算机可读介质。
根据本发明，当显示与外部装置(例如服务器)不同的装置上的图像时，可以有助于显示与显示外部装置上的图像时的显示范围相同的显示范围。
根据参考附图对典型实施例的以下描述，本发明的其它特征将变得明显。下面描述的本发明的每个实施例可以单独实现或者作为多个实施例的组合实现。而且，来自不同实施例的特征可以在必要的情况下或者在来自各个实施例的元件或特征的组合在单个实施例中有益的情况下组合。
附图说明
图1A和1B是根据实施例的数字照相机的外观图；
图1C是根据实施例的数字照相机的框图；
图2A是根据实施例的显示装置的外观图；
图2B是根据实施例的显示装置的框图；
图2C是根据实施例的VR护目镜的外观图；
图3A和3B是示出根据本实施例的显示装置的处理的流程图；以及
图4A至4E是示出根据本实施例的显示画面的示例的图。
具体实施方式
参考附图说明本发明的优选实施例。图1A是数字照相机100(摄像装置)的正面立体图(外观图)。图1B是数字照相机100的背面立体图(外观图)。数字照相机100是用于拍摄全方位图像(球面图像)的照相机(全方位照相机或球面照相机)。
挡板102a是用于拍摄范围是数字照相机100的前方的前照相机单元的保护窗。前照相机单元例如是拍摄范围是数字照相机100的前侧的向上、向下、左和右方向上180度或更大的宽范围的广角照相机单元。挡板102b是用于拍摄范围是数字照相机100的后方的后照相机单元的保护窗。后照相机单元例如是拍摄范围在数字照相机100的后侧的向上、向下、左和右方向上180度或更大的宽范围的广角照相机单元。
显示单元28显示图像和各种信息。快门按钮61是用于进行拍摄指示的操作单元(操作构件)。模式转换开关60是用于切换各种模式的操作单元。连接I/F 25是用于将连接线缆连接到数字照相机100的连接器。诸如智能电话、个人计算机和电视装置等的外部装置使用连接线缆连接到数字照相机100。操作单元70是从用户接收各种操作的各种开关、按钮、拨盘或触摸传感器等。电源开关72是用于切换电源的接通/断开的推式按钮。
发光单元(发光构件)21是发光二极管(LED)等。发光单元21以发光图案或发光颜色向用户通知数字照相机100的各种状态。固定部40例如是三脚架螺纹构件孔。固定部40用于利用诸如三脚架等的固定仪器来固定和设置数字照相机100。
图1C是示出数字照相机100的结构示例的框图。
挡板102a覆盖前照相机单元的摄像系统(拍摄透镜103a、快门101a、摄像单元22a等)从而防止摄像系统的污染和破损。拍摄透镜103a是包括变焦透镜和调焦透镜的透镜组，并且是广角透镜。快门101a是具有用于调整摄像单元22a上的被摄体光的入射量的光圈功能的快门。摄像单元22a是利用用于将光学图像转换为电信号的CCD或CMOS元件等配置成的摄像元件。A/D转换器23a将从摄像单元22a输出的模拟信号转换为数字信号。可以不设置挡板102a以暴露拍摄透镜103a的外表面。可以通过拍摄透镜103a防止其它摄像系统(快门101a和摄像单元22a)的污染和破损。
挡板102b覆盖后照相机单元的拍摄系统(拍摄透镜103b、快门101b、摄像单元22b等)，从而防止摄像系统的污染和破损。拍摄透镜103b是包括变焦透镜和调焦透镜的透镜组，并且是广角透镜。快门101b是具有用于调整摄像单元22b上的被摄体光的入射量的光圈功能的快门。摄像单元22b是利用用于将光学图像转换为电信号的CCD或CMOS元件等配置成的摄像元件。A/D转换器23b将从摄像单元22b输出的模拟信号转换为数字信号。可以不设置挡板102b以暴露拍摄透镜103b的外表面。可以通过拍摄透镜103b防止其它摄像系统(快门101b和摄像单元22b)的污染和破损。
由摄像单元22a和摄像单元22b拍摄VR(虚拟现实)图像。VR图像是可以被VR显示的图像。VR图像包括由全方位照相机(球面照相机)拍摄的全方位图像(球面图像)和具有比显示单元上可以一次显示的显示范围更宽的视频范围(有效视频范围)的全景图像。VR图像不仅包括静止图像，还包括运动图像和实时取景图像(从照相机基本上实时地拍摄的图像)。VR图像具有上下方向(垂直角度、从天顶起的角度、仰角、俯角和高度角)360度和左右方向(水平角度和方位角度)360度的最大视野的视频范围(有效视频范围)。
即使视角或视频范围在上下方向上小于360度并且在左右方向上小于360度、但VR图像包括具有比普通照相机可拍摄的视角更宽的视角(视野范围)或比显示单元上可以一次显示的显示范围更宽的视频范围(有效视频范围)的图像。例如，能够拍摄左右方向(水平角度和方位角度)360度且以方位(azimuth)为中心的垂直角度210度的视野(视角)的被摄体的球面照相机所拍摄到的图像是一种VR图像。例如，能够拍摄左右方向(水平角度和方位角度)180度且以水平方向为中心的垂直角度180度的视野(视角)的被摄体的照相机所拍摄到的图像是一种VR图像。也就是说，如下的图像是一种VR图像，该图像具有在上下方向和左右方向上分别为160度(±80度)以上的视野的视频范围，并且具有比人类从视觉上一次可识别的范围更宽的视频范围。
在对VR图像进行VR显示(以“VR观看”显示模式显示)的情况下，可以通过改变显示装置(显示VR图像的显示装置)在左右转动方向上的姿势来观看在左右方向(水平转动方向)上无缝的全方位视频。在上下方向(垂直转动方向)上，当从正上方(天顶)观看时可以观看到±105度范围内的无缝全方位图像。然而，当从正上方观看时±105度范围外的范围是不存在视频的空白区域。VR图像也可被视为“视频范围是虚拟空间(VR空间)的至少一部分的图像”。
VR显示(VR观看)是能够改变显示范围的显示方法(显示模式)，其中在该显示范围内在VR图像中显示与显示装置的姿势相对应的视野范围的一部分(显示范围；显示区域)内的视频。在用户佩戴作为显示装置的头戴式显示器(HMD)并观看视频的情况下，显示与用户的面部的方向相对应的视野范围内的视频。例如，可以在VR图像中在特定时间点处显示以左右方向上的0度(特定方向；例如北)和上下方向上的90度(从天顶起的90度、即水平)为中心的视角(观看的角度)的视频。在显示装置的姿势反转(例如，显示面从南改变为北)的情况下，在同一VR图像中，显示范围改变为以左右方向上的180度(相反方向，例如南)和上下方向上的90度(水平)为中心的视角的视频。在用户正在观看HMD时，如果用户使面部从北转向南(即，转向背面)，则HMD上所显示的视频从北向的视频改变为南向的视频。利用这种VR显示，可以从视觉上向用户提供仿佛该用户存在于VR图像(VR空间)内的现场的感觉。安装至VR护目镜(头戴式适配器)的智能电话被视为一种HMD。
VR图像的显示方法不限于上述显示方法。可以根据触摸面板上的用户操作或方向按钮等而不是姿势改变来移动(滚动)显示范围。在VR显示期间(在VR观看模式期间)，可以进行用于根据姿势改变来改变显示范围的处理和用于根据触摸面板上的触摸移动操作或者对诸如鼠标等的操作构件的拖动操作来改变显示范围的处理两者。
图像处理单元24对从A/D转换器23a和A/D转换器23b接收到的数据或者从存储器控制单元15接收到的数据进行预定的处理(诸如像素插值或缩小等的调整大小处理、颜色转换处理等)。图像处理单元24使用所拍摄到的图像数据来进行预定的运算处理。系统控制单元50基于图像处理单元24所获得的运算操作结果来进行曝光控制和测距控制。因此，进行TTL(通过镜头)方式的AF(自动调焦)处理、AE(自动曝光)处理和EF(闪光灯预发光)处理。图像处理单元24还使用所拍摄到的图像数据来进行预定的运算处理，并且基于所获得的运算操作结果来进行TTL方式的AWB(自动白平衡)处理。图像处理单元24对从A/D转换器23a和A/D转换器23b获得的两个图像(鱼眼图像)施加基本图像处理并对施加了基本图像处理的图像进行用于合成两个图像的接合(joined)图像处理，以生成单个VR图像。在实时取景的VR显示期间或在再现期间，图像处理单元24进行VR显示VR图像所用的图像分割处理、放大处理或失真校正等，并进行用于在存储器32中的预定存储区域中绘制处理结果的渲染。
在接合图像处理中，图像处理单元24使用两个图像中的一个作为参考图像并且使用另一个作为比较图像，利用图案匹配处理针对每个区域计算参考图像和比较图像之间的偏移量，并基于针对每个区域的移位量检测接合两个图像的接合位置。考虑检测到的接合位置和光学系统的透镜特性，图像处理单元24利用几何变换校正图像的失真。因此，图像被转换为球面摄像类型的图像。图像处理单元24合成(混合)两个球面摄像类型的图像以生成一个球面图像(VR图像)。所生成的球面图像是通过使用例如等距圆柱投影获得的图像。球面图像的像素的位置可以与球体(VR空间)的表面的坐标相关联。
来自A/D转换器23a和23b的输出数据经由图像处理单元24和存储器控制单元15或经由存储器控制单元15写入存储器32中。存储器32存储由摄像单元22a和22b获得的并由A/D转换器23a和23b转换成数字数据的图像数据，以及要从连接I/F 25输出到外部显示装置的图像数据。存储器32具有足以存储预定数量的静止图像以及预定时间的运动图像和声音的存储容量。
存储器32还用作图像显示所用的存储器(视频存储器)。存储器32中所存储的图像显示所用的数据可以从连接I/F 25输出至外部显示器。利用摄像单元22a和22b拍摄、由图像处理单元24生成、且累积在存储器32中的VR图像被顺次传送至外部显示器并显示在外部显示器上。因此，可以实现电子取景器的功能并且可以实现实时取景显示(LV显示)。在以下说明中，实时取景显示所显示的图像被称为实时取景图像(LV图像)。类似地，也可以通过将存储器32中所累积的VR图像顺次传送至经由通信单元54无线连接的外部装置(智能电话等)并且显示该VR图像来实现实时取景显示(远程LV显示)。
非易失性存储器56是用作电气可擦除可记录的记录介质的存储器。例如，非易失性存储器56是EEPROM。系统控制单元50的操作所用的常数和程序等记录在非易失性存储器56中。程序是指用于执行本实施例中的以下说明的各种流程图的计算机程序。
系统控制单元50是包括至少一个处理器或电路的控制单元并控制整个数字照相机100。系统控制单元50执行以上说明的非易失性存储器56中所记录的程序，以实现以下说明的本实施例中的各种处理。系统存储器52例如是RAM。系统控制单元50的操作所用的常数和变量、以及从非易失性存储器56读出的程序等在系统存储器52中展开。系统控制单元50控制存储器32、图像处理单元24和存储器控制单元15等，由此还进行显示控制。系统计时器53是用于测量各种控制所使用的时间并测量内置时钟的时间的计时单元。
模式转换开关60、快门按钮61、操作单元70，以及电源开关72用于向系统控制单元50输入各种操作指示。
模式转换开关60将系统控制单元50的操作模式切换为静止图像记录模式、运动图像拍摄模式、再现模式和通信连接模式等中的任一个。作为静止图像记录模式中所包括的模式，存在自动拍摄模式、自动场景判别模式、手动模式、光圈优先模式(Av模式)、快门速度优先模式(Tv模式)和程序AE模式(P模式)。存在作为针对各个拍摄场景的拍摄设置的各种场景模式、以及自定义模式等。用户可以使用模式转换开关60将操作模式直接切换到上述模式中的任一个。可选地，模式转换开关60可以被配置为一次显示摄像模式的列表画面，之后使用其它操作构件选择地将操作模式切换到显示单元28上所显示的列表画面中的多个模式中的任一个。类似地，在运动图像拍摄模式中可以包括多个模式。
快门按钮61包括第一快门开关62和第二快门开关64。第一快门开关62在操作中途(即，通过快门按钮61的所谓的半按下(拍摄准备指示))接通并生成第一快门开关信号SW1。系统控制单元50根据第一快门开关信号SW1而开始诸如AF(自动调焦)处理、AE(自动曝光)处理、AWB(自动白平衡)处理或EF(闪光灯预发光)处理等的拍摄准备操作。第二快门开关64在操作完成(即，通过快门按钮61的所谓的全按下(拍摄指示))时接通并生成第二快门开关信号SW2。系统控制单元50根据第二快门开关信号SW2开始从自摄像单元22a和22b的信号读出到将图像数据写入记录介质150中的一系列拍摄处理操作。
快门按钮61不限于能够进行全按下和半按下这两级的操作的操作构件，而且可以是能够进行仅一级的按下的操作构件。在这种情况下，根据一级的按下连续地进行拍摄准备操作和拍摄处理。这是与在能够半按下和全按下的快门按钮被全按下的情况下进行的操作相同的操作(在基本上同时生成第一快门开关信号SW1和第二快门开关信号SW2的情况下进行的操作)。
通过选择和操作显示单元28上所显示的各种功能图标和选项来针对各场景向操作单元70分配适当功能。操作单元70用作各种功能按钮。作为功能按钮，存在例如结束按钮、返回按钮、图像馈送按钮、跳转按钮、限制按钮、属性改变按钮、以及INFO按钮。例如，在按下菜单按钮时，在显示单元28上显示各种可设置的菜单画面。用户可以通过在观看显示单元28上所显示的菜单画面的同时操作操作单元70来直观地进行各种设置。
电源开关72是用于切换电源的接通/断开的推式按钮。电源控制单元80利用电池检测电路、DC-DC转换器、以及切换要通电的块的开关电路等配置成。电源控制单元80进行电池安装的存在或不存在、电池的类型和电池剩余电力的检测。电源控制单元80基于检测结果和系统控制单元50的指示控制DC-DC转换器，并在必要时段内向包括记录介质150的单元提供必要的电压。电源单元30由诸如碱性电池或锂电池等的一次电池、诸如NiCd电池、NiMH电池或Li电池等的二次电池、以及AC适配器等配置成。
记录介质I/F 18是与诸如存储卡或硬盘等的记录介质150的接口。记录介质150是用于记录所拍摄到的图像的诸如存储卡等的记录介质。记录介质150利用半导体存储器、光盘或磁盘等配置成。记录介质150可以是可拆卸地安装至数字照相机100的可更换记录介质，或者可以是内置在数字照相机100中的记录介质。
通信单元54与通过无线方式或有线线缆连接的外部装置进行视频信号和声音信号等的发送和接收。通信单元54可连接至无线LAN(局域网)和因特网。通信单元54可以经由网络与网络上的外部装置(服务器等)建立通信。通信单元54还可以通过蓝牙(Bluetooth，注册商标)和蓝牙低功耗(Bluetooth Low Energy)与外部装置建立通信。通信单元54可以发送摄像单元22a和22b所拍摄到的图像(包括LV图像)以及记录介质150中所记录的图像。通信单元54可以从外部装置接收图像和其它各种信息。
姿势检测单元55检测数字照相机100相对于重力方向的姿势。系统控制单元50可以基于姿势检测单元55所检测到的姿势来判别摄像单元22a和22b所拍摄到的图像是通过水平地保持数字照相机100所拍摄到的图像还是通过垂直地保持数字照相机100所拍摄到的图像。系统控制单元50可以判别在数字照相机100拍摄到利用摄像单元22a和22b所拍摄的图像的情况下作为数字照相机100的倾斜方向的诸如横摆方向、俯仰方向、和侧倾方向等的转动方向，并且还可以判别倾斜的量。系统控制单元50可以将与姿势检测单元55所检测到的姿势相对应的方向信息添加至摄像单元22a和22b所拍摄到的VR图像的图像文件、并且转动图像(调整图像的方向以校正倾斜)并记录图像。作为姿势检测单元55，可以使用诸如加速度传感器、陀螺仪传感器、地磁传感器、方位传感器和高度传感器等的多个传感器中的单个传感器或两个以上传感器的组合。姿势检测单元55还可以使用配置有姿势检测单元55的加速度传感器、陀螺仪传感器和方位传感器等来检测数字照相机100的运动(平摇、纵摇、抬起和是否静止等)。
麦克风20收集作为运动图像的VR图像(VR运动图像)的声音所记录的数字照相机100周围的声音。连接I/F 25是与用于将数字照相机100连接至外部装置以发送和接收视频的HDMI(注册商标)线缆或USB线缆等的连接插头。
图2A是作为根据本实施例的电子装置的示例的显示装置200的外观图。可以使用智能手机等来配置显示装置200。当用户指示拍摄图像时，上述数字照相机100生成球面图像并将包括球面图像的图像数据的图像文件记录在记录介质150中。当显示所记录的球面图像时，系统控制单元50生成包括用于指定指向用作显示范围的中心的位置的方向(从由球面图像所形成的VR空间的中心朝向显示范围的中心的方向)的信息的附加信息。系统控制单元50将该附加信息记录在记录介质150中作为图像文件的元数据。例如，系统控制单元50使用各种传感器在拍摄球面图像期间检测数字照相机100的方向，并基于检测结果生成方向信息。具体地，系统控制单元50生成表示方位角与前照相机单元和后照相机单元中的一个(例如，前摄像机单元)的光轴一致并且仰角是水平方向的角度的位置的信息作为方向信息。显示装置200基于附加信息中所包括的方向信息确定球面图像的显示开始期间的显示范围。
显示单元205显示图像和各种信息。显示单元205与触摸面板206a一体地配置，并且可以检测显示单元205的显示面上的触摸操作。显示装置200可以在显示单元205上VR显示由数字照相机100等生成的VR图像(VR内容)。操作单元206b是接收用于切换显示装置200的电源的接通和断开的操作的电源按钮。操作单元206c和206d是用于增大和减小从声音输出单元212输出的声音的音量的音量按钮。操作单元206e是用于使显示单元205显示主画面的主按钮。声音输出端子212a是耳机插孔，并且是用于将声音信号输出到耳机和外部扬声器等的端子。扬声器212b是发出声音的主体内置扬声器。
图2B是示出显示装置200的配置示例的框图。CPU 201、存储器202、非易失性存储器203、图像处理单元204、显示单元205、操作单元206、记录介质I/F 207、外部I/F 209和通信I/F 210连接至内部总线250。声音输出单元212和姿势检测单元213也连接至内部总线250。连接至内部总线250的单元能够经由内部总线250彼此交换数据。
CPU 201是控制整个显示装置200并且利用至少一个处理器或电路配置成的控制单元。存储器202例如利用RAM(使用半导体元件的易失性存储器等)配置成。CPU 201根据例如非易失性存储器203中所存储的程序，使用存储器202作为工作存储器来控制显示装置200的单元。在非易失性存储器203中存储有图像数据和声音数据、其它数据、以及CPU 201工作所用的各种程序等。非易失性存储器203例如利用闪速存储器或ROM配置成。
图像处理单元204基于CPU 201的控制对非易失性存储器203和记录介质208中所存储的图像、经由外部I/F 209获取的图像信号和经由通信I/F 210获取的图像等施加各种图像处理。图像处理单元204所进行的图像处理包括A/D转换处理、D/A转换处理、以及针对图像数据的编码处理、压缩处理、解码处理、放大处理/缩小处理(调整大小)、降噪处理和颜色转换处理。图像处理单元204还对全方位图像或尽管不是全方位图像但是是具有宽范围的数据的宽范围图像的VR图像进行诸如全景展开、映射处理和转换等的各种图像处理。图像处理单元204可以利用用于施加特定图像处理的专用电路块配置成。根据图像处理的类型，CPU 201可以在无需使用图像处理单元204的情况下根据程序来施加图像处理。
显示单元205基于CPU 201的控制来显示图像或者构成GUI(图形用户界面)的GUI画面等。CPU 201根据程序来生成显示控制信号，并且控制显示装置200的单元以生成要显示在显示单元205上的图像信号并将该图像信号输出至显示单元205。显示单元205基于所生成的图像信号来显示图像。根据本实施例的电子装置中所包括的组件最多是用于输出要显示在显示单元205上的图像信号的接口。显示单元205可以利用外部监视器(电视机、HMD等)配置成。
操作单元206是包括诸如键盘等的字符信息输入装置、诸如鼠标或触摸面板等的指示装置、按钮、拨盘、操纵杆、触摸传感器或触摸板的用于接收用户操作的输入装置。在本实施例中，操作单元206包括触摸面板206a以及操作单元206b、206c、206d和206e。
诸如存储卡、CD或DVD等的记录介质208可拆卸地安装至记录介质I/F207。记录介质I/F 207基于CPU 201的控制来进行从所安装的记录介质208的数据的读出和向记录介质208的数据的写入。例如，作为记录介质208，可以安装记录由数字照相机100生成的球面图像的记录介质150。在这种情况下，可以从记录介质208读出VR图像的图像信号并显示在显示单元205上。外部I/F 209是通过有线线缆或无线连接至外部装置以进行视频信号和声音信号的输入和输出的接口。通信I/F 210是用于与外部装置和因特网211等进行通信以发送和接收诸如文件和命令等的各种数据的接口。
声音输出单元212输出运动图像和音乐数据的声音、操作声音、铃声以及各种通知声音等。声音输出单元212包括与耳机等连接的声音输出端子212a、以及扬声器212b。然而，声音输出单元212可以通过无线通信等进行声音输出。
姿势检测单元213检测显示装置200相对于重力方向的姿势。系统控制单元50可以基于姿势检测单元213所检测到的姿势来判别显示装置200是否水平保持、垂直保持、指向上、指向下以及设置成倾斜姿势等。系统控制单元50可以判别例如显示装置200在诸如横摆方向、俯仰方向或侧倾方向等的转动方向上的倾斜的存在或不存在以及幅度或者显示装置200是否在该转动方向上转动。作为姿势检测单元213，可以使用加速度传感器、陀螺仪传感器、地磁传感器、方位传感器和高度传感器等的多个传感器中的单个传感器或两个以上传感器的组合。在根据本实施例的电子装置是与显示装置分离的装置的情况下(在显示单元205是外部监视器的情况下)，可以在显示装置而不是电子装置中设置姿势检测单元213。
如以上所述，操作单元206包括触摸面板206a。触摸面板206a是平面地配置为叠加在显示单元205上并且被配置为输出与触摸位置相对应的坐标信息的输入装置。CPU 201可以检测如下所述的触摸面板206a上的操作或者触摸面板206a的状态。
·没有触摸触摸面板206a的手指或笔新触摸触摸面板206a，即触摸的开始(以下称为触及)。
·手指或笔正触摸触摸面板206a的状态(以下称为触摸持续)。
·手指或笔在保持触摸触摸面板206a的同时正在移动(以下称为触摸移动)。
·触摸触摸面板206a的手指或笔与触摸面板206a分离，即触摸的结束(以下称为触摸停止)。
·没有任何事物触摸触摸面板206a的状态(以下称为未触摸)。
在检测到触及时，同时检测到触摸持续。在触及之后，除非检测到触摸停止，否则通常继续检测到触摸持续。在检测到触摸移动的情况下，同时检测到触摸持续。即使检测到触摸持续，如果触摸位置没有移动，则也不会检测到触摸移动。在检测到触摸触摸面板206a的所有手指或笔与触摸面板206a分离的情况下，检测到未触摸。
将这些操作和状态以及手指或笔在触摸面板206a上的触摸的位置坐标通过内部总线250通知至CPU 201。CPU 201基于所通知的信息来判断在触摸面板206a上进行了哪种操作(触摸操作)。关于触摸移动，还可以基于位置坐标的变化针对触摸面板206a上的各个垂直分量和水平分量判断手指或笔在触摸面板206a上移动的移动方向。在检测到预定距离以上的触摸移动的情况下，CPU 201判断为进行了滑动操作。
用于使手指在保持触摸触摸面板206a的同时快速移动一定距离、并且在移动手指时使手指与触摸面板206a分离的操作称为轻拂(flick)。换句话说，轻拂是用于在触摸面板206a上快速追踪仿佛用手指拂过触摸面板206a的操作。在检测到预定速度以上的预定距离以上的触摸移动、并且在该触摸移动期间检测到触摸停止的情况下，CPU 201可以判断为进行了轻拂(判断为在滑动操作之后进行了轻拂)。
此外，用于同时触摸多个部位(例如，两个点)并使这多个部位的触摸位置彼此靠近的触摸操作称为捏合(pinch-in)。使这些触摸位置彼此远离的触摸操作称为分开(pinch-out)。分开和捏合统称为捏分(pinch)操作(或简称为捏分)。作为触摸面板206a，可以使用诸如以下等的各种类型中的任何类型的触摸面板：电阻膜型、电容型、表面声波型、红外型、电磁感应型、图像识别型和光学传感器型等。存在用于根据与触摸面板的接触而检测出触摸了触摸面板的类型、以及用于根据手指或笔向触摸面板的接近而检测出触摸了触摸面板的类型。可以使用这些类型中的任一类型。
图2C是可安装显示装置200的VR护目镜(头戴式适配器)230的外观图。显示装置200还可以通过安装到VR护目镜230而用作头戴式显示器。插入口231是用于插入显示装置200的插入口。整个显示装置200可以以显示单元205的显示面指向用于将VR护目镜230固定至用户的头部(即，用户侧)的头带232的一侧来插入VR护目镜230中。在安装有显示装置200的VR护目镜230佩戴在头部上的状态下，用户可以在不用手保持显示装置200的情况下在视觉上识别显示单元205。在这种情况下，当用户移动头部或整个身体时，显示装置200的姿势也改变。姿势检测单元213检测此时的显示装置200的姿势改变。CPU 201基于姿势改变进行VR显示所用的处理。在这种情况下，姿势检测单元213检测显示装置200的姿势等同于检测用户的头部的姿势(用户的视线所指的方向)。
图3A是包括显示装置200的图像再现处理(下面说明)的再现相关处理的流程图。通过CPU 201在存储器202中加载非易失性存储器203中记录的程序(例如，记录介质208中记录的VR图像的VR显示所用的特定应用程序)并执行加载的程序来实现再现相关处理。在操作电源按钮206b并且接通显示装置200的电源的情况下，CPU 201初始化标志和控制变量等，然后开始再现相关处理。
显示装置200具有进行VR图像的VR显示的功能。当进行VR显示时，显示装置200显示作为VR图像的一部分的显示范围。显示装置200具有将记录介质208中记录的VR图像(私有图像)的图像文件发送到网络上的服务器等并使其它用户能够观看VR图像的功能。在以下说明中，将VR图像发送到外部装置以使其它用户能够观看VR图像的功能被称为共享功能。在以下说明中，从记录介质208接收并在显示装置200上显示的VR图像被称为私有图像。通过共享功能发送到诸如服务器等的外部装置并保持在外部装置中的图像在以下说明中被称为共享图像。
当使用VR图像的共享功能时，用户可以指定图像的发送目的地(目的地)处的外部装置，以及共享VR图像的显示范围(作为从VR空间的中心朝向显示范围的中心的方向的显示方向)等。显示装置200将包括与指定的显示范围有关的方向信息(显示方向)的附加信息作为元数据与VR图像一起发送到外部装置。当其它用户访问外部装置上的VR图像(共享图像)并进行该VR图像的VR显示时，在开始VR显示期间显示与发送的方向信息相对应的显示范围。
当开始再现相关处理时，在步骤S301中，CPU 201获取记录介质208中存储的图像数据的列表。随后，在步骤S302中，CPU 201基于所获取的列表指示显示单元205进行记录介质208中存储的图像数据的缩略图图像的列表显示。图4A是缩略图图像的列表显示的画面示例。在列表画面401上显示(布置)多个缩略图图像402。随后，在步骤S303中，CPU 201判断是否对操作单元206进行了用于选择缩略图图像(例如，多个缩略图图像中的任何一个)的选择操作。当进行了选择操作时，CPU 201进入步骤S304。否则，CPU 201进入步骤S305。在步骤S304中，CPU 201进行与根据选择操作选择的缩略图图像相对应的私有图像的图像再现处理。下面说明图像再现处理。
在步骤S305中，CPU 201判断是否对操作单元206进行了其它操作。当进行了操作时，CPU 201进入步骤S306。否则，CPU 201进入步骤S307。在步骤S306中，CPU 201进行与所进行的操作相对应的处理(其它处理)。CPU 201进入步骤S307。例如，根据触摸面板206a上的捏合操作来对要显示的缩略图图像进行放大或缩小等。在步骤S307中，CPU 201判断是否对操作单元206进行了结束操作(再现相关处理的结束操作)。当进行了结束操作时，CPU201结束再现相关处理。否则，CPU 201返回到步骤S303。
图3B是步骤S307中的图像再现处理的流程图。图像再现处理还通过CPU 201在存储器202中加载非易失性存储器203中记录的程序并执行加载的程序来实现。
当开始图像再现处理时，在步骤S308中，CPU 201检测与所选择的缩略图图像相对应的图像文件(私有图像的图像文件)，并从记录介质208读出该图像文件。作为示例，读出图4B所示的球面图像(VR图像)的图像文件。VR图像403包括被摄体404、405、406和407。
随后，在步骤S309中，CPU 201在显示单元205上显示读出的VR图像403的参考范围(预定的显示范围)。具体地，CPU 201从读出的图像文件的附加信息中提取方向信息(例如，当利用摄像装置等拍摄VR图像403时所生成的、并与VR图像403一起记录的方向信息)。在以下说明中，由方向信息(VR显示所用的方向；显示方向)表示的方向称为参考方向。CPU 201基于参考方向将读出的VR图像403中的、以由参考方向表示的位置为中心并且具有与显示单元205的尺寸相对应的尺寸的范围确定为显示范围(参考范围)，并将该显示范围的图像显示在显示单元205上。图4C是当参考方向指向被摄体404时在步骤S309中显示在显示单元205上的画面示例。在画面408上，显示作为VR图像403的范围的一部分的显示范围，使得被摄体404位于中心。此外，在画面408上，显示共享按钮409，该共享按钮409用于进行共享VR图像403的共享指示。
随后，在步骤S310中，CPU 201判断是否进行用于改变VR显示的显示方向的改变指示(改变操作)。改变指示也被视为“用于指定私有图像(记录介质208中记录的VR图像403)的范围的一部分作为显示范围的指示”或“用于改变显示范围的指示”。当进行改变指示时，CPU 201进入步骤S311。否则，CPU 201进入步骤S312。在步骤S311中，CPU 201根据改变指示来改变显示方向以改变在显示单元205上显示的显示范围。CPU 201进入步骤S312。图4D是在显示方向从图4C所示的状态改变之后在显示单元205上显示的画面示例。在画面410上，显示作为VR图像403的范围的一部分的显示范围，使得被摄体405和406位于中心。用户可以通过对操作单元206进行操作来进行改变指示，或者可以通过其它方法进行改变指示。例如，用户可以通过在触摸面板206a上进行触摸移动操作来进行改变指示，或者可以通过改变显示装置200的姿势来进行改变指示。在本实施例中，当进行改变指示时，CPU 201存储与改变之后的显示方向有关的方向信息。
在步骤S312中，CPU 201判断是否存在用于将显示的VR图像(私有图像)发送到外部装置作为共享图像的共享指示。在本实施例中，用户可以通过例如以与触摸共享按钮409相同的方式触摸触摸面板206a来进行共享指示。当进行共享指示时，CPU 201进入步骤S313。否则，CPU 201进入步骤S317。在步骤S313中，CPU 201指示显示单元205显示发送菜单画面。图4E是发送菜单画面的示例。当用户在图4C或图4D的状态下触摸共享按钮409时，显示单元205的显示画面转换到图4E所示的画面。在图4E中，发送菜单画面411叠加显示在VR图像403上。发送菜单画面411包括按钮412和413。按钮412是用于指示发送与步骤S309中显示的参考方向(参考范围)有关的方向信息的按钮。按钮413是用于指示发送与步骤S311中的改变之后的显示方向(显示范围)有关的方向信息的按钮。
随后，在步骤S314中，CPU 201判断在指定了任何显示方向之后是否进行了用于发送VR图像的操作。具体地，CPU 201判断是否进行了用于选择按钮413的操作。当选择了按钮413时，CPU 201进入步骤S315。当选择了按钮412时，CPU 201进入步骤S316。当进行了共享指示时，CPU 201可以省略步骤S313和S314中的处理，并且从步骤S312进入步骤S315。
在步骤S315中，CPU 201将与显示的显示方向(显示范围)有关的方向信息与显示的VR图像(私有图像)相关联。具体地，CPU 201将包括在VR图像403的图像文件中的方向信息(与参考方向有关的方向信息)更新为与显示的显示方向(当前显示方向)有关的方向信息。也就是说，CPU 201更新记录介质208中记录的VR图像403的图像文件的元数据中包括的方向信息，使得显示的显示方向变为参考方向。因此，当再次指示再现VR图像403时，在步骤S309中，在显示单元205上显示以更新后的参考方向所表示的位置为中心的显示范围。被显示的显示方向例如是步骤S311中的改变之后的显示方向。当不进行步骤S311中的处理时，可以省略步骤S315中的处理。在步骤S315之后，CPU 201进入步骤S316。
在步骤S316中，CPU 201使用通信I/F 210将显示的VR图像和与显示的显示方向有关的方向信息发送到外部装置。具体地，CPU 201从记录介质208读出显示的VR图像的图像文件(包括更新后的方向信息的图像文件)，并将图像文件发送到外部装置。发送到外部装置的VR图像(共享图像)可以经由网络由各种显示装置显示。在共享图像的显示开始期间，显示与发送到并保留在外部装置中的方向信息相对应的参考方向(参考范围)的图像。可以单独发送显示的VR图像和与显示的显示方向有关的方向信息。
随后，在步骤S317中，CPU 201判断是否对操作单元206进行了其它操作。当进行了操作时，CPU 201进入步骤S318。否则，CPU 201进入步骤S319。在步骤S318中，CPU 201进行与所进行的操作相对应的处理(其它处理)。CPU 201进入步骤S319。例如，根据触摸面板206a上的捏合操作来对要显示的VR图像进行放大或缩小等。在步骤S319中，CPU 201判断是否对操作单元206进行了结束操作(图像再现处理的结束操作)。在进行了结束操作的情况下，CPU 201进入步骤S320。否则，CPU 201返回到步骤S310。在步骤S320中，CPU 201指示显示单元205进行缩略图图像的列表显示。因此，显示单元205的显示画面返回到缩略图图像的列表画面。CPU 201进入图3A中的步骤S305。
如上所述，根据本实施例，当共享图像和方向信息被发送到外部装置时，与发送到外部装置的方向信息相同的方向信息与和共享图像相对应的私有图像相关联。因此，改善了私有图像的可视性。具体地，当显示私有图像时，可以容易地(无需用户进行用于改变显示范围的操作)显示与显示共享图像的显示范围相同的显示范围。
用于将指定的显示方向(显示范围)与私有图像相关联的处理不必是私有图像的参考方向的更新。可以在不改变相关联的参考方向的情况下，将指定的显示方向额外与私有图像相关联。可以在不更新已经添加到私有图像的方向信息的情况下，将与指定的显示方向有关的新方向信息额外添加到私有图像。当多个显示方向与一个VR图像(私有图像或共享图像)相关联时，在VR图像的显示期间，自动地或根据用户操作选择并显示关联的多个显示方向中的任何一个。
上面说明了一个示例，其中指定一个显示方向并通知给外部装置。然而，可以指定多个显示方向并通知给外部装置。也就是说，可以将共享图像和与多个显示方向有关的方向信息发送到外部装置。关于多个显示方向中的每一个显示方向，可以将与该显示方向有关的方向信息和共享图像的组合发送到外部装置。可以将共享图像和与多个显示方向有关的方向信息的一个组合发送到外部装置。
当指定多个显示方向时，指定的多个显示方向中的至少任何一个可以与私有图像相关联。指定的显示方向可以不与私有图像相关联。在诸如第一或最后定时等的特征定时处指定的显示方向可以与私有图像相关联。因此，当向外部装置通知多个显示方向时，可以预期私有图像的可视性的提高。
可以进一步获取能够识别生成私有图像的装置(照相机等)的信息(识别信息)。识别信息可以包括或可以不包括在私有图像的元数据中。当进行共享指示时，CPU 201可以根据识别信息判断指定的显示方向是否与私有图像相关联。例如，CPU 201可以判断为显示方向仅与由特定照相机拍摄的图像相关联。因此，可以抑制不必要信息(不适当信息；非预期信息)与除了由特定照相机拍摄的图像之外的图像的关联。
作为用于使用指定的且关联的显示方向的应用，可以仅假设特定应用。在这种情况下，可以使用仅在特定应用中使用的信息区域(元数据区域)将指定的显示方向与私有图像相关联。其它应用中使用的信息区域也可能无法编辑。特定应用可以是仅与由特定照相机拍摄的图像相对应的应用。仅在特定应用中使用的信息区域可以是仅存在于由特定照相机生成的图像文件中的信息区域。当不存在关联目标信息区域时，可以不关联改变的显示方向。因此，可以防止由除特定应用之外的应用进行非预期的显示，并且防止不必要的信息与除由特定照相机拍摄的图像之外的图像相关联。
当指定的显示方向与私有图像相关联时，可以进行预定的通知(预定的引导显示等)。例如，可以向用户通知进行关联。可以与用户确认是否进行关联。当用户指示进行关联时，可以进行关联。当用户指示不进行关联时，可以不进行关联。当指定的显示方向和参考方向之间的差等于或小于阈值时，指定的显示方向可以不与私有图像相关联。
当私有图像被包括在相册(数字相册)中时，可以根据共享指示生成私有图像的副本。根据共享指示，私有图像和副本中的一个可以与指定的显示方向相关联并且留在相册中，并且私有图像和副本中的另一个可以在不被删除且没有与指定的显示方向相关联的情况下从相册中排除。因此，可以适当地观看留在相册中的图像和从相册中排除的图像中的每一个。具体地，关于留在相册中的图像，可以容易地显示与显示共享图像的方向相同的显示方向。关于从相册中排除的图像，可以容易地显示在拍摄期间所关联的参考方向。
作为由CPU 201进行的控制的以上所述的各种控制可以由一个硬件进行。多个硬件(例如，多个处理器或电路)可以共享处理以进行整个装置的控制。
以上基于本发明的优选实施例详细说明了本发明。然而，本发明不限于这些具体实施例。在不脱离本发明的主旨的范围内的各种形式也包括在本发明中。此外，以上说明的实施例仅表示本发明的实施例。也可以适当组合这些实施例。
在上面说明的实施例中，说明了将本发明应用于显示装置的示例。然而，本发明不限于该示例，并且可应用于能够控制装置之间的通信的电子装置。例如，本发明可应用于个人计算机、PDA、蜂窝电话终端、便携式图像观看器、打印机装置、数字相框、音乐播放器、游戏机、电子书阅读器和视频播放器。本发明还可应用于电视装置、投影装置、平板终端、智能电话、AI扬声器、家用电气装置、车载装置和医疗装置等。
其它实施例
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然已经参考典型实施例描述了本发明，但是应该理解，本发明不限于所公开的典型实施例。所附权利要求的范围应被赋予最广泛的解释，以包含所有这些修改和等同的结构和功能。

Claims (18)

1.一种电子装置，包括：
通信单元，其被配置为与外部装置通信；
接收单元，其被配置为接收：(i)用于将从存储单元读出并发送到所述外部装置的图像的范围的一部分指定为显示范围的第一指示，以及(ii)用于将所述存储单元中存储的图像发送到所述外部装置的第二指示；
控制单元，其被配置为根据所述第二指示将所述存储的图像和与由所述第一指示指定的显示范围有关的信息发送到所述外部装置，并将与所述指定的显示范围有关的信息与所述存储的图像相关联；以及
显示控制单元，其被配置为在与所述指定的显示范围有关的信息与所述存储的图像相关联的情况下，基于相关联的信息来显示用于指定所述存储的图像的范围的一部分以用于观看的显示范围。
2.根据权利要求1所述的电子装置，其中，
所述控制单元通过更新所述存储的图像的附加信息，将与所述指定的显示范围有关的信息与所述存储的图像相关联。
3.根据权利要求1或2所述的电子装置，其中，
在没有接收到所述第一指示的情况下，所述控制单元被配置为：如果接收到所述第二指示，则将所述存储的图像和与预定的显示范围有关的信息发送到所述外部装置。
4.根据权利要求1或2所述的电子装置，其中，
所述显示控制单元被配置为：
如果与所述指定的显示范围有关的信息与所述存储的图像不关联，则显示预定的显示范围，以及
如果与所述指定的显示范围有关的信息与所述存储的图像相关联，则显示所述指定的显示范围。
5.根据权利要求1或2所述的电子装置，其中，
在没有接收到所述第一指示的情况下，所述控制单元被配置为：即使接收到所述第二指示，也不进行用于将与所述指定的显示范围有关的信息与所述存储的图像相关联的处理。
6.根据权利要求1或2所述的电子装置，还包括：获取单元，其被配置为获取能够识别生成所述存储的图像的装置的信息，
其中，在接收到所述第二指示的情况下，所述控制单元被配置为根据所述获取单元所获取的信息来判断与所述指定的显示范围有关的信息是否与所述存储的图像相关联。
7.根据权利要求1或2所述的电子装置，其中，
所述控制单元被配置为将与所述指定的显示范围有关的信息与所述存储的图像相关联，作为将由特定应用使用并且不被其它应用使用的信息。
8.根据权利要求1或2所述的电子装置，其中，
在所述第一指示指定多个显示范围的情况下，所述控制单元被配置为根据所述第二指示将所述存储的图像和与所述多个显示范围有关的信息发送到所述外部装置。
9.根据权利要求8所述的电子装置，其中，
在所述第一指示指定所述多个显示范围的情况下，所述控制单元被配置为：根据所述第二指示，针对所述多个显示范围中的各显示范围、将与该显示范围有关的信息和所述存储的图像发送到所述外部装置。
10.根据权利要求1或2所述的电子装置，其中，
在所述第一指示指定多个显示范围的情况下，所述控制单元被配置为：即使接收到所述第二指示，也不将与所述指定的显示范围有关的信息与所述存储的图像相关联。
11.根据权利要求1或2所述的电子装置，其中，
所述存储的图像包括在相册中，
所述电子装置还包括：生成单元，其被配置为根据所述第二指示生成所述存储的图像的副本，以及
所述控制单元被配置为：根据所述第二指示，(i)将所述存储的图像和所述副本中的一方留在所述相册中，同时将所述存储的图像和所述副本的所述一方与和所述指定的显示范围有关的信息相关联，以及(ii)从所述相册中移除所述存储的图像和所述副本中的另一方，而不将所述存储的图像和所述副本中的所述另一方与和所述指定的显示范围有关的信息相关联。
12.根据权利要求1或2所述的电子装置，其中，
在所述指定的显示范围和预定的显示范围之间的差等于或小于阈值的情况下，所述控制单元被配置为：即使接收到所述第二指示，也不将与所述指定的显示范围有关的信息与所述存储的图像相关联。
13.根据权利要求1或2所述的电子装置，其中，
在所述第一指示指定多个显示范围的情况下，所述控制单元被配置为根据所述第二指示将与所述多个显示范围中的任一个显示范围有关的信息与所述存储的图像相关联。
14.根据权利要求1或2所述的电子装置，其中，
所述控制单元被配置为在将与所述指定的显示范围有关的信息与所述存储的图像相关联时，进行预定的通知。
15.根据权利要求1或2所述的电子装置，其中，
所述接收单元被配置为接收用于改变由所述显示控制单元显示的图像的显示范围的指示，以及
根据所述第一指示，将与根据改变指示而改变的显示范围相对应的显示范围指定成作为发送到所述外部装置的图像的范围的一部分的显示范围。
16.根据权利要求1或2所述的电子装置，其中，
所述图像是球面图像，并且所述图像具有360度视野的视频范围。
17.一种电子装置的控制方法，所述控制方法包括：
与外部装置通信；
接收：(i)用于将从存储单元读出并发送到所述外部装置的图像的范围的一部分指定为显示范围的第一指示，以及(ii)用于将所述存储单元中存储的图像发送到所述外部装置的第二指示；
根据所述第二指示，将所述存储的图像和与由所述第一指示指定的显示范围有关的信息发送到所述外部装置；
将与所述指定的显示范围有关的信息与所述存储的图像相关联；以及
在与所述指定的显示范围有关的信息与所述存储的图像相关联的情况下，基于相关联的信息来显示用于指定所述存储的图像的范围的一部分以用于观看的显示范围。
18.一种计算机可读介质，其存储用于使计算机用作根据权利要求1至15中任一项所述的电子装置的各单元的程序。
CN201910604127.7A 2018-07-05 2019-07-05 电子装置、电子装置的控制方法和计算机可读介质 Active CN110691187B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-128100 2018-07-05
JP2018128100A JP7258482B2 (ja) 2018-07-05 2018-07-05 電子機器

Publications (2)

Publication Number Publication Date
CN110691187A true CN110691187A (zh) 2020-01-14
CN110691187B CN110691187B (zh) 2022-02-18

Family

ID=67314592

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910604127.7A Active CN110691187B (zh) 2018-07-05 2019-07-05 电子装置、电子装置的控制方法和计算机可读介质

Country Status (4)

Country Link
US (1) US11050925B2 (zh)
EP (1) EP3591499B1 (zh)
JP (1) JP7258482B2 (zh)
CN (1) CN110691187B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115209181A (zh) * 2022-06-09 2022-10-18 咪咕视讯科技有限公司 一种基于环绕视角的视频合成方法、控制器及存储介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11733039B2 (en) * 2018-10-02 2023-08-22 Maxell, Ltd. Information processing apparatus
US10897573B2 (en) * 2018-11-21 2021-01-19 Ricoh Company, Ltd. Image capturing system, terminal and computer readable medium which correct images
JP7267764B2 (ja) 2019-02-08 2023-05-02 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
CN116848494A (zh) * 2021-03-22 2023-10-03 株式会社和冠 控制器及追踪系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1944685A2 (en) * 2007-01-11 2008-07-16 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US20120092348A1 (en) * 2010-10-14 2012-04-19 Immersive Media Company Semi-automatic navigation with an immersive image
CN104079733A (zh) * 2013-03-25 2014-10-01 富士施乐株式会社 电子装置、控制装置及控制方法
CN104285203A (zh) * 2012-05-09 2015-01-14 佳能株式会社 信息处理设备、用于控制信息处理设备的方法以及存储介质
CN104469132A (zh) * 2013-09-23 2015-03-25 Lg电子株式会社 移动终端和该移动终端的控制方法
CN106488305A (zh) * 2015-08-31 2017-03-08 Lg电子株式会社 数字设备及其控制方法
CN106941631A (zh) * 2015-11-20 2017-07-11 联发科技股份有限公司 摘要视频产生方法和视频数据处理系统
US20170316806A1 (en) * 2016-05-02 2017-11-02 Facebook, Inc. Systems and methods for presenting content

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5990941A (en) * 1991-05-13 1999-11-23 Interactive Pictures Corporation Method and apparatus for the interactive display of any portion of a spherical image
JP2007043225A (ja) * 2005-07-29 2007-02-15 Univ Of Electro-Communications 撮像画像処理装置及び撮像画像処理方法
JP5236039B2 (ja) 2010-06-01 2013-07-17 キヤノン株式会社 映像処理装置及びその制御方法
US10284776B2 (en) 2011-11-07 2019-05-07 Sony Interactive Entertainment Inc. Image generation apparatus and image generation method
EP2608062A1 (en) 2011-12-23 2013-06-26 Thomson Licensing Method of automatic management of images in a collection of images and corresponding device
US9754159B2 (en) 2014-03-04 2017-09-05 Gopro, Inc. Automatic generation of video from spherical content using location-based metadata
CN106716985B (zh) * 2014-09-08 2019-07-30 富士胶片株式会社 摄像控制装置、摄像控制方法、及相机系统
JP5920507B1 (ja) * 2015-03-10 2016-05-18 株式会社リコー 画像処理システム、画像処理方法およびプログラム
JP2017059902A (ja) * 2015-09-14 2017-03-23 株式会社リコー 情報処理装置、プログラム、画像処理システム
US10977764B2 (en) * 2015-12-29 2021-04-13 Dolby Laboratories Licensing Corporation Viewport independent image coding and rendering
JP2017182548A (ja) 2016-03-31 2017-10-05 株式会社リコー 画像管理システム、画像管理方法、画像通信システム及びプログラム
JP6304300B2 (ja) 2016-04-14 2018-04-04 株式会社リコー 送信装置、通信方法、プログラムおよび受信装置
US10462466B2 (en) * 2016-06-20 2019-10-29 Gopro, Inc. Systems and methods for spatially selective video coding
JP2018005634A (ja) 2016-07-04 2018-01-11 株式会社リコー 画面共有システム、画面共有方法、端末装置、及び画面共有プログラム
US10638039B2 (en) * 2016-12-28 2020-04-28 Ricoh Company, Ltd. Apparatus, system, and method of controlling image capturing, and recording medium
CN108632589A (zh) * 2017-03-15 2018-10-09 株式会社理光 信息处理装置、摄像系统以及记录介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1944685A2 (en) * 2007-01-11 2008-07-16 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US20120092348A1 (en) * 2010-10-14 2012-04-19 Immersive Media Company Semi-automatic navigation with an immersive image
CN104285203A (zh) * 2012-05-09 2015-01-14 佳能株式会社 信息处理设备、用于控制信息处理设备的方法以及存储介质
CN104079733A (zh) * 2013-03-25 2014-10-01 富士施乐株式会社 电子装置、控制装置及控制方法
CN104469132A (zh) * 2013-09-23 2015-03-25 Lg电子株式会社 移动终端和该移动终端的控制方法
CN106488305A (zh) * 2015-08-31 2017-03-08 Lg电子株式会社 数字设备及其控制方法
CN106941631A (zh) * 2015-11-20 2017-07-11 联发科技股份有限公司 摘要视频产生方法和视频数据处理系统
US20170316806A1 (en) * 2016-05-02 2017-11-02 Facebook, Inc. Systems and methods for presenting content

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115209181A (zh) * 2022-06-09 2022-10-18 咪咕视讯科技有限公司 一种基于环绕视角的视频合成方法、控制器及存储介质
CN115209181B (zh) * 2022-06-09 2024-03-22 咪咕视讯科技有限公司 一种基于环绕视角的视频合成方法、控制器及存储介质

Also Published As

Publication number Publication date
US20200014843A1 (en) 2020-01-09
EP3591499A1 (en) 2020-01-08
JP2020010130A (ja) 2020-01-16
CN110691187B (zh) 2022-02-18
EP3591499B1 (en) 2023-03-22
US11050925B2 (en) 2021-06-29
JP7258482B2 (ja) 2023-04-17

Similar Documents

Publication Publication Date Title
CN110691187B (zh) 电子装置、电子装置的控制方法和计算机可读介质
CN111385470B (zh) 电子设备、电子设备的控制方法和计算机可读介质
US10924789B2 (en) Display control apparatus, control method for display control apparatus, and non-transitory computer readable medium
US11295530B2 (en) Electronic apparatus for playing back a virtual reality video image and control method therefor
CN110881097B (zh) 显示控制设备、控制方法和计算机可读介质
US11079898B2 (en) Electronic device for controlling display of VR image, control method of electronic device, and non-transitory computer readable medium
JP2021174317A (ja) 電子機器及びその制御方法
JP7267764B2 (ja) 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
US11380075B2 (en) Electronic apparatus for playing back a virtual reality video image and control method therefor
CN110708459B (zh) 显示控制设备、显示控制方法和计算机可读介质
US11252328B2 (en) Electronic device and method for controlling the same
US20240176411A1 (en) Electronic device and method for controlling electronic device
CN110881102B (zh) 摄像设备、摄像设备的控制方法和计算机可读介质
JP7512055B2 (ja) 電子機器及びその制御方法
JP2020205554A (ja) 表示制御装置、その制御方法、プログラムおよび記憶媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant