CN112887663A - 图像显示方法、图像通信系统、摄影装置、以及存储介质 - Google Patents

图像显示方法、图像通信系统、摄影装置、以及存储介质 Download PDF

Info

Publication number
CN112887663A
CN112887663A CN202011340082.6A CN202011340082A CN112887663A CN 112887663 A CN112887663 A CN 112887663A CN 202011340082 A CN202011340082 A CN 202011340082A CN 112887663 A CN112887663 A CN 112887663A
Authority
CN
China
Prior art keywords
image
display
angle
smartphone
photographing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011340082.6A
Other languages
English (en)
Inventor
加藤喜永
角田直规
福井良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2020191841A external-priority patent/JP2022007898A/ja
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of CN112887663A publication Critical patent/CN112887663A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H04N23/662—Transmitting camera control signals through networks, e.g. control via the Internet by using master/slave camera arrangements for affecting the control of camera image capture, e.g. placing the camera in a desirable condition to capture a desired image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/665—Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明旨在提供一种便于让窄角图像的阅览者掌握拍摄场所或拍摄状况的图像显示方法、图像通信系统、摄影装置、以及存储介质。本发明的图像显示方法中，显示控制部(37)以指定时间(t0‑t1)显示最初用智能手机(3)拍摄的作为平面图象的窄角图像(P)，接着在以联动摄影方式用全天球摄影装置(1)获得作为等距柱形映射图像的广角图像(EC1)内，使得显示范围(DR)移动，渐次显示多个不同的指定区域图像(Q11)。

Description

图像显示方法、图像通信系统、摄影装置、以及存储介质
技术领域
本发明涉及一种图像显示方法、图像通信系统、摄影装置、以及存储介质。
背景技术
智能手机的拍摄视角相比于全天球(360°)摄影装置的拍摄视角相对狭窄。近年来，用相对狭窄视角拍摄窄角图像的智能手机等窄角摄影装置，来显示用全天球摄影装置等广角摄影装置拍摄的作为等距柱形映射图像的广角图像，可以加大拍摄以及显示范围。另一方面，现有技术如专利文献1(JP特开2018-169601号公报)公开了一种摄影系统，其为了确保广角图像和窄角图像开始拍摄时机一致，使得广角摄影装置和窄角摄影装置的其中一个摄影装置随着另一个摄影装置执行摄影开始操作而开始摄影。
但是，现实中往往存在这样的问题，也就是相对窄角的图像的阅览者光凭看到该窄角图像中呈现的被摄体等，很难掌握拍摄的场所或拍摄时的状况。
发明内容
鉴于上述问题，本发明旨在提供一种便于让窄角图像的阅览者掌握拍摄场所或拍摄状况的图像显示方法。
为了达到上述目的，本发明提供的图像显示方法，其特征在于，包括以下步骤，取得步骤，从第二摄影装置取得由该第二摄影装置拍摄的、视角大于由第一摄影装置拍摄的第一图像的第二图像的数据；以及显示控制步骤，在显示装置上连续显示所述第一图像和所述第二图像。
本发明的效果在于，便于让窄角图像的阅览者掌握拍摄场所或拍摄状况。
附图说明
图1中，(a)是全天球摄影装置的左侧视图，(b)是全天球摄影装置的后视图，(c)是全天球摄影装置的俯视图，(d)是全天球摄影装置的仰视图。
图2是使用全天球摄影装置时的示意图。
图3中，(a)是用全天球摄影装置拍摄的半球图像(前方)，(b)是用全天球摄影装置拍摄的半球图像(后方)，(c)是用等距柱形图法显示的图像。
图4中，(a)是把等距柱形映射图像覆盖在球上的状态的示意图，(b)是全天球图像的示意图。
图5是将全天球图像作为三维立体球时的假想照相机以及显示区域的位置的示意图。
图6中，(a)是图5的立体图，(b)是在窄角摄影装置的显示器上显示指定区域的图像的示意图。
图7是指定区域信息与指定区域T的图像之间关系的示意图。
图8是第一实施方式涉及的图像通信系统的示意图。
图9是全天球摄影装置的硬件结构模块图。
图10是智能手机的硬件结构模块图。
图11是第一实施方式涉及的图像通信系统的功能结构模块图。
图12是第一实施方式涉及的联动摄影处理的时序图。
图13中，(a)是拍摄开始时的智能手机画面的示意图、(b)是联动开始时的智能手机画面的示意图。
图14是表示第一实施方式涉及的指定区域图像显示处理的流程图。
图15是等距柱形映射图像与指定区域图像之间关系的示意图。
图16中，(a)是平面图像显示时间和等距柱形映射图像的指定区域图像的显示时间的示意图，(b)是智能手机上显示的平面图像的示意图，(c)是在智能手机上显示正距柱形映射像图像的指定区域图像的示意图。
图17是第一实施方式涉及的联动摄影处理的变形例的时序图。
图18是本发明第二实施方式涉及的图像通信系统的示意图。
图19是图像管理服务器的硬件结构模块图。
图20是第二实施方式涉及的图像通信系统的功能结构模块图。
图21是第二实施方式涉及的文件数据通信处理的序列图。
图22是相对于窄角图像数据的对照处理的流程图。
具体实施方式
以下利用附图说明本发明的实施方式。
·实施方式的概要
以下先概述实施方式。
首先利用图1～图6说明全天球图像的生成方法。
在此，先用图1描述全天球摄影装置1的外观。全天球摄影装置1是用于获得全天球(360°)全景图像的原始摄影图像的数码像机。图1是全天球摄影装置的外观图，其中，(a)是全天球摄影装置的左视图，(b)是特殊拍摄装置的后视图，图1(c)是全天球摄影装置的俯视图，(d)是全天球摄影装置的仰视图。
如图1的(a)、(b)、(c)、(d)所示，全天球摄影装置1上部的正面(正前方)和背后(后方)分别设有鱼眼型透镜102a、102b。全天球摄影装置1的内部设有后述的摄像元件(图像传感器)103a、103b，摄像元件(图像传感器)103a、103b分别通过透镜102a、102b来拍摄被摄体或风景，获得半球图像(视角为180°以上)。全天球摄影装置1的正前方和后方设有快门按钮115a。全天球摄影装置1的侧面设有电源按钮115b、Wi-Fi(Wireless Fidelity)按钮115c、以及摄影模式切换按钮115d。电源按钮115b和Wi-Fi按钮115c每当受到按动时进行ON/OFF切换。摄影模式切换按钮115d每当受到按动时，在静态图像摄影模式和动态图像摄影模式之间切换。快门按钮115a、电源按钮115b、Wi-Fi按钮115c、以及摄影模式切换按钮115d是操作部分115中的一部分按钮，而操作部115并不局限于这些按钮。
全天球摄影装置1底部150的中间设有用于将全天球摄影装置1安装到相机三脚架上或普通摄影装置3上的三脚架螺纹孔151。底部150左侧设有Micro USB(UniversalSerial Bus)端子152。底部150的右侧设有HDMI(High-Definition MultimediaInterface:高清晰度多媒体接口)端子153。HDMI是注册商标。
接着，用图2描述全天球摄影装置1的使用状况。图2是全天球摄影装置如何使用的示意图。例如如图2所示，用户手持全天球摄影装置1拍摄其周围的被摄体。在这种情况下，图1所示的摄像元件103a以及摄像元件103b，分别拍摄用户周围的被摄体，因此可以得到两个半球图像。
接着，参考图3和图4，概述用全天球摄影装置1拍摄的图像来制作等距柱形映射图像EC和全天球图像CE的处理。图3是全天球摄影装置1拍摄的图像的示意图，其中，(a)中为全天球摄影装置1拍摄的半球图像(前方)，(b)表示全天球摄影装置1拍摄的半球图像(后方)，(c)是利用等距柱形映射法表示的图像(以下，称为等距柱形映射图像)。图4是全天球图像的示意图，其中，(a)显示用等矩柱形映射图像覆盖球体的状态，(b)是全天球图像。
如图3中的(a)所示，摄像元件103a所得到的图像被后述的鱼眼透镜102a形成为弯曲的半球图像(前方)。同时，如图3的(b)所示，摄像元件103a所得到的图像被后述的鱼眼透镜102b形成为弯曲的半球状像(后方)。而且，半球图像(前方)和转动180度的半球图像(后方)通过全天球摄影装置1合成，形成如图3的(c)所示的等距柱形映射图像EC。
而后利用OpenGLES(Open Graphics Library for Embedded Systems)，如图4的(a)所示，用等距柱形映射方式将图像覆盖到球面上，生成图4的(b)所示的全天球图像CE。这样，全天球图像CE被显示为让等距柱形映射方式面向球体中心的图像。OpenGLES是用于将二维数据和三维数据可视化而使用的图形库。全天球图像CE既可以是静画也可以是动画。在本实施方式中，如果未明确说明，用“图像”表示时包含“静画”和“动画”两者。
如上所述，全天球图像CE如同覆盖似地贴在球面上，因而在人的视觉中会有不协调的感觉。对此，如果将天球图像CE的一部分指定区域(以下称为指定区域图像)作为弯曲比较少的平面图像来显示，可以避免人视觉中的不协调感觉。对此，以下将用图5和图6进行说明。
图5是把全天球图像作为三维立体球体显示时假想照像机以及指定区域的位置的示意图。假想照相机IC的位置相当于观看作为三维立体球所显示的全天球图像CE的用户的视点位置。图6中，(a)是图5的立体图，(b)是显示器上指定区域的示意图。图6的(a)是图4所示的全天球图像CE被贴在三维立体球体CS上显示。如此生成的全天球图像CE如果被贴在立体球体CS上，则如图5所示，假想照相机IC位于全天球图像CE的内部。全天球图像CE中的指定区域T是假想照相机IC的摄影区域，可以通过表示全天球图像CE的假想空间中的假想照相机IC的摄影方向和视角的指定区域信息来确定。
图6中，(a)所示的指定领域图像Q如(b)所示，在指定的显示器上被作为假想照相机IC的摄影领域的图像来显示。图6的(b)所示的图像是根据初始设定(默认值)的指定领域信息所表示的指定领域图像。以下，用假想照相机IC的拍摄方向(θ，φ)和视角(α)进行说明。在此，摄影方向也称为视线方向。
接着，用图7说明指定区域信息和指定区域T的图像之间的关系。图7是指定区域信息与指定区域T的图像之间关系的示意图。如图7所示，“θ”表示假想照相机IC拍摄方向上的平移角度、“φ”表示假想照相机IC拍摄方向上的倾斜角度、“α”表示视角(Angle)。另外，“W”表示指定区域T的宽度，“H”表示指定区域H的高度。也就是说，改变假想照相机IC的姿势，让以拍摄方向(θ，φ)表示的假想照相机IC的关注点成为假想照相机IC的摄影区域，即指定区域T的中心点CP。指定区域图像Q是全球图像CE中的指定区域T的图像。f是从假想照相机IC到中心点CP的距离。L是指定区域T的任意顶点到中心点CP的距离(2L为对角线)。在图7中，一般下式(1)所示的三角函数成立。
L/f＝tan(α/2) (1)
·第一实施方式
以下用图8～图17对本发明的第一实施方式进行说明。
《图像通信系统的构成》
首先，用图8简要说明第一实施方式涉及的图像通信系统构成。图8是第一实施方式涉及的图像通信系统的概略示意图。
如图8所示，本实施方式的图像通信系统1000包括全天球摄影装置1以及智能手机3。全天球摄影装置1和智能手机3可以利用Wi-Fi、蓝牙(注册商标)、NFC(Near FieldCommunication)等近距离技术进行无线通信。另外，全天球摄影装置1和智能手机3可以不用无线通信，而是用USB(Universal Serial Bus)电缆等进行有线通信。
其中，全天球摄影装置1如上所述，是拍摄被摄体和风景等，获得成为等距柱形映射图像来源的两个半球图像的特殊数码相机。全天球摄影装置1是一例广角摄影装置。广角摄影装置还包括用于得到一般广角平面图像(2D全景图像等)的摄影装置，如单反相机、袖珍数码相机、智能手机、平板电脑等。但本实施方式主要对作为获得等距柱形映射图像的数码相机的全天球摄影装置1进行说明。
等距柱形映射图像是一例广角图像。广角图像包括等距柱形映射图像和上述一般广角平面图像。在此，广角图像一般是使用广角镜头拍摄的图像，是能够拍摄比人的视觉所感受到的更宽范围的镜头所拍摄的图像。虽然一般拍摄的图像意味着用35mm胶片换算的焦距镜头为35mm以下的镜头拍摄的图像，但本实施方式的广角图像比用智能手机3拍摄的图像(窄角图像)视角更大。
另一方面，智能手机3是用户A使用的配备有移动操作系统(Operating System)的手机。智能手机3配备了后述的CMOS313等摄像元件，可拍摄被摄体等。智能手机3的拍摄范围小于全天球摄影装置1的拍摄范围。在这个意义上，全天球摄影装置1是一例广角摄影装置，智能手机3是一例窄角拍摄装置。窄角摄影装置除了智能手机3外，还包括PC、智能手表、安装了显示应用程序的显示器、游戏机、导航装置、可穿戴终端等。
智能手机3通过无线通信等接收全天球摄影装置1拍摄被摄体等后创建的等距柱形映射图像EC的数据，显示该等距柱形映射图像EC的指定区域T，即指定区域图像Q。从这个意义上来说，智能手机3既是一例通信终端也是一例显示装置。
《实施方式的硬件构成》
接下来用图9和图10详述本实施方式的全天球摄影装置1及智能手机3的硬件构成。
<全天球摄影装置硬件构成>
首先用图9说明全球摄影装置1的硬件构成。图9是全天球摄影装置1的硬件结构模块图。以下，用两个摄影元件的全天球(全方位)摄影装置作为全天球摄影装置1，但是摄像元件也可以有两个以上。另外，全球摄影装置1并不必须是全方位摄影专用的装置，也可以在普通的数码相机等上安装后设的全方位摄影单元，使其实质上与全天球摄影装置1具有相同功能。
如图9所示，全天球摄影装置1包括摄像部101、图像处理部104、摄像控制部105、麦克风108、音频处理部109、CPU(Central Processing Unit)部111、ROM(Read Only Memory)112、SRAM(Static Random Access Memory)113、DRAM(Dynamic Random Access Memory)114、操作部115、网络I/F 116、通信部117、天线117a、电子罗盘118、陀螺传感器119、加速度传感器120以及端子121。
其中，摄像部101具有用于各个半球图像的成像且具有180°以上视角的广角透镜(所谓的鱼眼透镜)102a和102b、以及与各个广角透镜对置的两个摄像元件103a、103b。摄像元件103a、103b具有用于将用鱼眼透镜102a、102b形成的光学图像转换为电信号图像数据输出的CMOS(Complementary Metal Oxide Semiconductor)或CCD(Charge CoupledDevice)传感器之类的图像传感器、用于生成这些图像传感器的水平或垂直同步信号或像素时钟等定时生成电路、该摄像元件的动作所需要的各种指令和参数被设定了的寄存器群等。
摄像部101的摄像元件103a、103b以并行I/F总线分别与图像处理部104连接，同时，还以串行I/F总线(I2C总线等)与摄像控制部105连接。图像处理部104、摄像控制部105以及音频处理部109经由总线110与CPU111连接。进而，总线110上也连接了ROM112、SRAM113、DRAM114、操作部115、网络I/F116、通信部117、以及电子罗盘118等。
图像处理部104通过并行I/F总线获取摄像元件103a、103b输出的图像数据，各图像数据经过规定的处理后，实行这些图像数据的合成处理，生成图3(c)所示的等距柱形映射图像的数据。
摄像控制部105通常以摄像控制部105为主装置、以摄像元件103a、103b为从动装置，用I2C总线，对摄像元件103a、103b的寄存器群设定指令等。从CPU111接受所需指令等。此外，摄像控制部105也同样利用I2C总线，取入摄像元件103a、103b的寄存器群的状态数据等，并将该状态数据送往CPU111。
摄像控制部105还在操作部115的快门按钮受到按动时，向摄像元件103a和103b发出图像数据输出指示。不同的全天球摄影装置1具有不同的功能，有些全天球摄影装置1具有显示屏(例如智能手机3的显示器318)预览显示功能或对应动画显示的功能。在这种情况下，来自摄像元件103a和103b的图像数据以规定帧速(帧/分钟)连续输出。
摄像控制部105还具有下述同步控制部的功能，用于与CPU111联动，使得摄像元件103a和103b的图像数据的输出时刻同步。虽然本实施方式中的全天球摄影装置1上没有设置显示器，但也可以设置显示部。
麦克风108用于将声音转换为音频(信号)数据。音频处理部109通过I/F总线从麦克风108取得输出的音频数据，对音频数据实施指定处理。
CPU111在控制整个全天球摄影装置1的动作的同时，还实施其他必要的处理。ROM112保存用于CPU111的各种程序。SRAM113和DRAM114是工作存储器，用于保存CPU111执行的程序和处理期间的数据等。DRAM114专用于保存图像处理部104处理过程中的图像数据或处理完毕的等距柱形映射图像的数据。
操作部115是快门按钮115a等的操作按钮的总称。用户通过操作操作部115，输入各种摄影模式和摄影条件等。
网络I/F116是与诸如SD卡等外部介质或个人计算机等的接口(USB I/F等)的总称。无论无线还是有线均可用来作为网络I/F116。保存在DRAM114中的等距柱形映射图像的数据可以通过网络I/F116保存到外部介质中，或者根据需要经由网络I/F116送往智能手机3等外部终端(装置)。
通信部117利用Wi-Fi、NFC、蓝牙(Bluetooth)等的短程无线通信技术，经由设于全天球摄影装置1的天线117a，与智能手机3等外部终端(装置)通信。通过通信部117也可以向智能手机5等外部终端(装置)发送等距柱形映射图像的数据。
电子罗盘118用于根据地球的磁性计算全天球摄影装置1的方位，输出方位信息。该方位信息是遵循Exif文件的一例相关信息(元数据)，用于摄影图像的图像补偿处理等各种图像处理。在此，相关信息包含图像的拍摄日期、以及图像数据的数据容量的各种数据。
陀螺仪传感器119是用于检测伴随全天球摄影装置1的移动而产生的角度变化(Roll，Pitch，Yaw)的传感器。角度的变化是遵循Exif的一例信息(元数据)，用于摄影图像的图像补偿等图像处理。
加速度传感器120是用于检测三轴向加速度的传感器。全天球摄影装置1根据加速度传感器120检测到的加速度，求出装置本身(全天球摄影装置1)的姿势(相对于重力方向的角度)。通过同时设置陀螺传感器119和加速度传感器120，可以提高全天球摄影装置1的图像补偿精度。
端子121是Micro USB用凹形端子，在有线通信时使用。
<智能手机硬件构成>
其次，用图10详述智能手机的硬件构成。图10是智能手机的硬件结构模块图。
如图10所示，智能手机3具备CPU301、ROM302、RAM303、EEPROM304、CMOS传感器305、摄像元件I/F306、加速度方位传感器307、介质I/F309、GPS接收部311。
其中，CPU301控制智能手机3整体的操作。ROM302存储CPU301或IPL等用于驱动CPU301的程序。RAM303用于作为CPU301的工作区域。EEPROM304按照CPU301的控制，执行智能手机用程序等各种数据的读取或写入。CMOS(Complementary Metal OxideSemiconductor)传感器305在CPU301的控制下拍摄被摄体(主要是自拍像)而获得图像数据的一种内置型摄像器件。除了CMOS传感器以外，也可以是CCD(Charge Coupled Device)传感器等摄像器件。摄像元件接口(I/F)306是用于控制CMOS传感器305的驱动电路。加速度/方位传感器307是用于检测地磁的电子磁罗盘或陀螺罗盘、加速度传感器等的各种传感器。介质I/F(接口)309用于控制闪存等存储介质308的数据读取或写入(存储)。GPS接收部311用于从GPS卫星接收GPS信号。
智能手机3还具备远程通信电路312、CMOS传感器313、摄像元件I/F314、麦克风315、扬声器316、音频输入输出I/F317、显示器318、外设连接I/F319、近程通信电路320、近程通信电路320的天线320a、以及触摸屏321。
其中，远程通信电路312是用于借助于通信网络100与其它设备进行通信的电路。CMOS传感器313是一种在CPU301的控制下拍摄被摄体而得到图像数据的一种内置型摄影装置。摄像元件I/F314是用于控制CMOS传感器512的驱动电路。麦克风315是用于将语音转换为电信号的内置型电路。扬声器316是将电信号转换为物理振动生成音乐或声音等内置型电路。音频输入输出I/F317是在CPU301的控制下根据麦克风315和扬声器316之间的用于处理音频信号输入输出的电路。显示器318是一种用于显示被摄体的图像或各种图标等的液晶或有机EL(Electro Luminescence)等的显示装置。外设连接I/F319是用于连接各种外设的接口。近程通信电路320是NFC(Near Field Communication)或蓝牙(注册商标)等的通信电路。触摸屏321是一种输入装置，通过用户按动显示器318，操作智能手机3。
智能手机3还具备总线510。总线510是用于CPU 501等的各构成要素电连接的地址总线或数据总线等。
《实施方式的功能构成》
接下来用图9～图11说明本实施方式的功能构成。图11是第一实施方式涉及的图像通信系统1000的功能结构模块图。
<全天球摄影装置的功能构成>
如图11所示，全部天球摄影装置1具有受理部12、摄影部13、录音部14、判断部15、图像及声音处理部16、通信部18、以及存储及读取处理部19。这些部是由图9所示的各构成要素的任何一个要素，按照从SRAM113展开到DRAM114上的摄影装置用程序的CPU111指令来运行而实现的功能或装置。
全天球摄影装置1具有图9所示的ROM112、SRAM113以及包括DRAM114的存储部1000。
全天球摄影装置1的各项功能构成
其次，使用图9和图11详述全球摄影装置1的各项功能构成。
全天球摄影装置1的受理部12主要是通过CPU111对图9所示的操作部115的处理来实现，接受用户的操作输入。
摄影部13主要通过CPU111对图9所示的摄像单元101、图像处理单元104、以及摄像控制单元105的处理来实现，拍摄风景等，获取拍摄图像数据。该摄影图像数据是图3的(a)和(b)所示的两个半球图像数据。
录音部14主要通过CPU111对图9所示的处理单元109的处理来实现，采集全天球摄影装置1周围的声音。
判断部15通过CPU111的处理来实现，进行各种判断。
图像及声音处理部16通过CPU111对图像处理单元104的处理来实现，根据图3的(a)、(b)所示的两个半球图像，制作如图3的(c)所示的等距柱形映射图像EC。图像及声音处理部16通过CPU111对声音处理单元109的处理来实现，基于录音得到的音频信号作成音频数据。
通信部18主要是通过CPU111对通信部117的处理来实现的，用远程无线通信与后述的智能手机3的通信部38进行数据通信。在有线通信的情况下，通信部18通过CPU111对端子121的处理来实现，接收智能手机3的供电，同时进行数据通信。
存储及读取处理部19主要通过图9所示的CPU111的处理实现，在存储部1000中进行各种数据(或者信息)的存储和读取。
<智能手机的功能构成>
接下来用图10和图11详述智能手机3的功能构成。如图11所示，智能手机3有收发部31、受理部32、摄影部33、录音部34、判断部35、图像及声音处理部36、显示控制部37、通信部38以及存储及读取处理部39。这些部是通过从图10中所示的各个构成要素中的任意一个要素按照从EEPROM304展开到RAM303上的智能手机3用程序的CPU301命令来运行，所实现的功能或装置。
另外，智能手机3具有图10所示的RAM303和包括EEPROM304的存储部3000。
智能手机的各项功能构成
智能手机3的收发部31主要通过CPU301对远距离通信电路312的处理来实现，通过互联网等通信网络，与其他装置(如后述的图像管理服务器5)进行各种数据(或信息)的收发。
受理部32主要通过CPU301对触摸面板321的处理来实现，从用户接受各种选择或输入。
摄影部33主要通过CPU301经由摄影元件I/F306对CMOS传感器305，或经由摄像元件I/F314对CMOS313进行的处理而实现，拍摄被摄体等，获得摄影图像数据。该摄影图像是上述窄角图像的一个例子。
录音部34主要是CPU301通过输入输出I/F317对麦克风315的处理来实现的，收录智能手机3周围的声音。
判断部35主要是通过CPU301的处理实现的，进行各种判断。判断内容以下详述。
图像及声音处理部36通过CPU111的处理实现，通过摄像元件I/F306对从CMOS传感器305，或者通过摄像元件I/F314从CMOS313获得的图像进行图像处理。图像及声音处理部36还对从全天球摄影装置1发送的等距柱形映射图像EC进行图像处理。进而，图像及声音处理部36通过CPU111的处理来实现，根据麦克风315收录的音频信号制作音频数据。此外，图像及声音处理部36将全天球摄影装置1传送的音频数据转换为音频信号，通过音频输入输出I/F317从扬声器316输出声音。
显示控制部37主要通过CPU301的处理来实现，在显示器318上显示各种图像。具体处理以下详述。
通信部38主要是通过CPU301对近程通信电路320的处理来实现的，与全天球摄影装置1的通信部18进行数据通信。在有线通信的情况下，通信部38通过CPU301对外部设备连接I/F319的处理，借助于电缆向全天球摄影装置1供电以及进行图像数据等通信。
存储及读取处理部39主要通过CPU301的处理而实现，在存储部3000中进行各种数据(或者信息)的存储和读取。
《实施方式的处理或动作》
<联动摄影处理>
首先用图12说明智能手机3和全天球摄影装置1的联动摄影处理。图12是第一实施方式涉及的联动摄影处理的时序图。图13中，(a)是摄影开始时的一例智能手机画面的示意图，(b)是联动开始时的一例智能手机画面的示意图。在此，设定图12所示的处理之前，智能手机3和全天球摄影装置1之间已经通过Wi-Fi和蓝牙建立了通信连接。
首先如图13的(a)所示，用户A将智能手机3的CMOS传感器313朝向被摄体后，如图13的(a)所示，显示控制部37在显示器318上显示摄影准备画面，表示将要拍摄(摄影监控)的影像。该摄影准备画面上，显示器318的下方具有摄影开始按钮331。然后，用户A通过按动摄影开始按钮331，智能手机3的受理部32接受摄影开始(S1)。据此，摄影部33拍摄被摄体等，图像及声音处理部36制作窄角图像数据(S2)。通过该摄影所制作的窄角图像数据由存储及读取处理部39保存到存储部3000中。在这种情况下，录音部34还通过收录声音，作成与窄角图像数据相关联的音频数据。
显示控制部37在显示器318的上部和中央部显示拍摄后的图像，同时在显示318的下部显示表示“使用这张图像”按钮341和“重新拍摄”按钮342的确认画面(S3)。“使用这张图像”按钮341是用户A把当前正在显示的图像用于与全部天球摄影装置1的联动摄影时按动的按钮。而“重新拍摄”按钮342是用户A不把当前正在显示的图像用于全部天球摄影装置1的联动拍摄，而是要重新返回图13的(a)的拍摄准备画面时按动的按钮。“使用这张图像”按钮341的显示文字也可以不是“使用这张图像”，只要可以表示联动拍摄即可。
其次，在用户A按下“使用这张图像”按钮341的情况下，智能手机3的受理部32接受联动摄影(S4)。而后，智能手机3的摄影部33等待规定时间(S5)。例如，规定时间为3秒。此外，在处理步骤S2的摄影过程中，如果用户A本身是被摄体，则用户A可以利用该待机时间，重置全天球摄影装置1或者设定从智能手机3换为全部天球摄影装置1的准备时间。例如，如果智能手机3和全天球拍摄装置1相距较远时，用户A用智能手机3拍摄特定的拍摄对象后，在3秒内用户A背向全天球摄影装置1，使全天球摄影装置1不拍摄用户A的脸部。
其次，智能手机3的通信部38利用蓝牙向全天球摄影装置1发送表示拍摄开始请求的摄影请求信息(S6)。由此，全天球摄影装置1的通信部18接收摄影请求信息。而且，在全天球摄影装置1中，通过摄影部13拍摄风景等获得两个半球图像数据，图像及声音处理部16根据两个半球图像数据作成作为等距柱形映射图像数据的广角图像数据(S7)。
其次，全天球摄影装置1的通信部18利用Wi-Fi向智能手机3发送在步骤S7得到的广角图像数据(S8)。据此，智能手机3的通信部38接收广角图像数据。在步骤S6的收发中使用的蓝牙是一例第一通信方式，在步骤S8的收发中利用的Wi-Fi是一例第二通信方式。
通过上述步骤S4～S8的处理，智能手机3可以获得其本身无法通过摄影得到的广角图像数据。通过智能手机3和全天球拍摄装置1之间的摄影联动处理，可以是智能手机3和全天球拍摄装置1的拍摄时间同步。
其次，智能手机3的图像及声音处理部36将在步骤S2得到的窄角图像数据和在步骤S8中得到的广角图像数据保存在同一个电子文件中，存储及读取处理部39把该电子文件的数据保存在存储部3000中(S9)。而后，智能手机3对显示器318进行窄角图像和广角图像的显示处理(S10)。
<显示处理>
在此，用图14和图16详述步骤S1的显示处理。图14是第一实施方式涉及的指定领域图像显示处理的流程图。图15是等距柱形映射图像与指定区域图像之间关系的示意图。图16中，(a)是平面图像显示时间和等距柱形映射图像中的指定区域即指定区域图像的显示时间的示意图，(b)是智能手机上显示的平面图像的示意图，(c)是智能手机上显示的正距柱形映射像图像中的指定区域图像的示意图。
首先，智能手机3的存储及读取处理部39读取在上述步骤S9中保存到存储部3000中的电子文件的数据(S31)。在此，用图15说明保存在电子文件中的等距柱形映射图像与表示该等距柱形映射图像中的指定区域的指定区域图像之间的关系。图15是等距柱形映射图像与指定区域图像之间关系的示意图。如图15所示，作为一例广角图像的等距柱形映射图像EC1，用假想照相机IC的摄影方向的平移角度θ表示(参见图7)从始端BE1到终端TE1的范围，全部范围为0≤θ<360。然后，指定区域图像Q1是作为等距柱形映射图像EC1显示在显示器318上的显示范围DR的最初的指定区域。如此，作为广角图像的等距柱形映射图像EC1显示到显示器318上的显示范围DR所表示的指定区域图像Q11可以用平移角度θ表示。
然后返回图14，存储及读取处理部39读取存储部3000中保存的显示设定信息(S32)。该显示设定信息包括窄角图像的显示时间、广角图像在显示器318上的可显示范围、以及显示范围DR在广角图像中移动到最后所有不同的指定区域图像均显示完毕所需的显示时间。用户A等可以通过智能手机3预先设定该显示设定信息。在这种情况下，为了确保窄角图像显示之后广角图像中的指定区域图像显示到最后，只有在输入大于0秒的时间时，智能手机3才会接受显示时间。例如显示设定信息设定，窄角图像的显示时间为1.0秒，广角图像的可显示范围为360度、显示范围DR在广角图像中移动到最后，所有不同的指定区域图像显示完毕所需显示时间为1.8秒。
其次，如图16的(b)所示，显示控制部37在显示器318上以指定时间显示与在步骤S31读取的电子文件内的窄角图像相关的平面图像P(窄角图像)的全部(步骤S33)。所述指定时间为上述窄角图像的显示时间(如1.0秒)。在此情况下，如图16的(a)所示，作为平面图像P的窄角图像从t0显示到t1(例如1.0秒)。
其次，存储及读取处理部39读取存储部3000中保存的指定领域T(参见图6的(a))的指定领域信息(S34)。该指定区域信息表示指定区域T的中心点CP以及视角α(参见图7)。指定区域T及视角α可以由用户A等在智能手机3中预先设定。
其次，显示控制部37计算任意指定区域T中的指定领域图像的显示持续时间(S35)。例如，显示控制部37根据在步骤S32读取的显示设定信息，以1.8秒/360度＝0.005秒(5毫秒)求出显示持续时间。据此，显示范围DR以0.005秒间隔，每次移动1°，渐次显示不同的指定区域图像Q11。
而后，显示控制部37如图16的(c)所示，用与作为平面图像P的窄角图像相同的纵横比，在显示器318上显示最初的显示范围DR内的指定区域图像Q11(S36)。在这种情况下，如图16的(a)所示，在显示范围DR的移动方向上的后端r11位于作为等距柱形映射图像EC1的广角图像的始端BE1。
而后，显示控制部37在上述求出的显示持续时间(例如0.005秒)之后，在广角图像内以指定角度(例如θ＝1°)移动显示范围DR，在显示器318上显示显示范围DR内的指定区域图像Q11(S37)。移动方向为图16的(a)中的箭头方向(向右)。在此，箭头方向平行于全天球图像的赤道。
而后，判断部35判断显示范围DR移动方向上的前端a11是否到达作为等距柱形映射图像的广角图像的终端TE1(S38)。如果没有到达(S38的否)，则返回步骤S37的处理，显示控制部37在上述求出的显示持续时间之后，重新在广角图像内移动指定角度，以在显示器318上移动显示范围DR，在显示器318上显示移动后的显示范围DR内的指定区域图像Q11。通过反复执行步骤S37、S38的处理，在图16的(a)中，显示范围DR沿着箭头方向移动，最终，显示范围DR的前端a11到达作为等距柱形映射图像EC11的广角图像的终端TE1。
而后，在显示范围DR的前端a11到达作为等距柱形映射图像EC11的广角图像的终端TE1时(S38的是)，步骤S10的显示处理结束，同时，图12所示的联动摄影处理全部结束。这样，显示控制部37通过显示范围DR的移动跨越广角图像整个区域，从而显示了多个不同的指定区域图像。另外，显示控制部37也可以在广角图像的一部分区域内移动显示范围DR。
<本实施方式的主要效果>
如上所述，本实施方式的显示控制部37如图16所示，最初在指定时间内显示用智能手机3拍摄的窄角图像，继而在用全天球摄影装置1联动摄影拍摄的广角图像内，移动显示范围DR，陆续显示出多个不同的指定区域图像。由此，具有如下效果，即对于仅凭阅览窄角图像中呈现的被摄体等无法了解是在什么场所或什么状况下拍摄的图像，窄角图像的阅览者可以通过观看陆续显示出来的一个一个不同的指定区域图像，来容易地掌握拍摄的场所和状况。
而且，显示控制部37并没有将等距柱形映射图像EC1内的各指定区域T作为动画的帧数据来进行动画播放，而是一边移动一边显示用等距柱形映射图像EC1内的指定区域T所表示的指定区域图像。这样，本实施方式可以在不进行影像的编码处理的情况下，将等距柱形映射图像EC1内的各指定领域T如同动画一般地连续显示，因此具有减轻编码处理所带来的负荷的效果。
《变形例》
以下用图17说明图12所示的第一实施方式涉及的联动摄影处理的变形例。图17是第一实施方式涉及的联动摄影处理的变形例的时序图。图12中在智能手机3与全部天球摄影装置1一方联动而开始摄影，对此在图17中，全部天球摄影装置1一方与智能手机3联动而开始摄影。对此将在以下详述。在图12所示的处理之前，智能手机3和全天球摄影装置1之间通过Wi-Fi和蓝牙建立通信连接。
首先，全天球摄影装置1受理部12接受用户A启动摄影(S11)。据此，摄影部13拍摄风景等而获得两个半球图像数据，图像及声音处理部16根据两个半球图像数据制作作为等距柱形映射图像数据的广角图像数据(S12)。在这种情况下，也可以通过录音部14收录声音制作声音数据，与广角图像数据相关联。
其次，全天球摄影装置1的摄影部13以规定时间待机。规定时间例如为3秒。另外，在处理步骤S12的摄影过程中，当用户A本身成为被摄体时，用户A可以利用该待机期间，设定重置智能手机3或从全部天球摄影装置1改为智能手机3的准备时间。
其次，全天球摄影装置1的通信部18利用蓝牙发送请求智能手机3开始拍摄的摄影请求信息(S14)。因此，智能手机3的通信部38收到拍摄请求信息。而后，智能手机3中的摄影部33拍摄被摄体等，图像及声音处理部36制作窄角图像数据(S15)。
接着，全天球摄影装置1的通信部18利用Wi-Fi向智能手机3发送在步骤S12得到的广角图像数据(S16)。据此，智能手机3的通信部38收到广角图像数据。在步骤S14的收发中使用的蓝牙是第一通信方式的一个例子，在步骤S16的收发中使用的Wi-Fi是第二通信方式的一个例子。
通过上述步骤S1-S16的处理，智能手机3可以获得自己无法通过拍摄得到的广角图像数据。通过智能手机3和全天球拍摄装置1之间进行摄影的联动处理，可以让拍摄时间同步。
其次，智能手机3的图像和声音处理部36将在步骤S15得到的窄角图像数据和在步骤S16得到的广角图像数据保存在一个电子文件中，存储及读取处理部39保存在存储部3000中(S17)。而后，智能手机3执行在显示器318上显示窄角图像和广角图像的处理(S18)。另外，步骤S18的处理与图12的步骤S18以及图14的处理相同，因此省略说明。
<变形例的主要效果>
如上所述，根据第一实施方式的变形例，在用户A视觉认知到远离智能手机3的场所，可以从全部天球摄影装置1向智能手机3发送广角图像数据。如果以船内宴会拍摄为例，用户A将智能手机3交规船舱内的其他人并作出摄影范围的指示，其本人拿着全天球摄影装置1走出船舱。然后，用户A在其所要的拍摄时间点(例如，船通过大桥的时刻)拍摄船外的风景。这样，用户A可以一边观看风景等待拍摄时机，一边以全天球摄影装置1的拍摄为契机，使得远处的智能手机执行联动拍摄。在此，用户A把全天球拍摄装置1拿到船舱外，相反，也可以把全天球摄影装置1放在船舱内，而将智能手机3携带到船舱外。这种情况下，由于在船舱外获得窄角图像数据，因此，不是周围所有风景，而是对于需要确认用户脑海中的一部分场景(例如从船舱外看到的船舱内宴会的场景)进行拍摄的情况下有效。
·第二实施方式
以下用图18～图22说明本发明的第二实施方式。
《图像通信系统的构成》
首先，使用图18简述第二实施方式涉及的图像通信系统20000的构成。图18是第二实施方式涉及的图像通信系统的示意图。第二实施方式的图像通信系统20000相对于图8所示的图像通信系统10000的构成，增加了图像管理服务器5及访问点7。
在第一实施方式中，智能手机3与全天球摄影装置1通过Wi-Fi进行数据通信。对此，在第二实施方式中，为了中继智能手机3和图像管理服务器3之间的数据收发，另行增添接入点7。智能手机3通过将与全部天球摄影装置1的通信切换到接入点7，可以与图像管理服务器5进行数据通信。因此，图像管理服务器5可以通过接入点7与智能手机3进行数据通信。图像管理服务器5由计算机构成。图像管理服务器5既可以用单台计算机构成，也可用多台计算机构成。
《实施方式的硬件构成》
其次，用图19详述本实施方式的图像管理服务器5的硬件构成。摄影装置1和智能手机3的硬件构成与第一实施方式相同，在此省略说明。接入点7是通用的普通接入点，因此省略硬件结构的说明。
<图像管理服务器的硬件构成>
图19是图像管理服务器5的硬件结构模块图。图像管理服务器5由计算机构建，如图19所示，具备CPU501、ROM502、RAM503、HD504、HDD(Hard Disk Drive)控制器505、显示器506、外设连接I/F(接口)508、网络I/F509、总线510、键盘511、指向装置512、DVD-RW(Digital Versatile Disk Rewritable)驱动器514以及介质I/F516。
其中，CPU501控制整个图像管理服务器5的运行。ROM502中保存用于IPL等用于驱动CPU501的程序。RAM503可用作CPU501的工作区。HD504保存程序等各种数据。HDD控制器505按照CPU501的控制来控制对HD504的各种数据的读取或写入。显示器506显示光标、菜单、窗口、文字或图像等各种信息。外设连接I/F508是连接各种外部设备的接口。在这种情况下的外部设备例如为USB(Universal Serial Bus)存储器和打印机等。网络I/F509是利用通信网络100进行数据通信的接口。总线510是用电连接图5所示的CPU501等各个构成要素的地址总线和数据总线等。
键盘511是一种输入装置，具备用于输入文字、数值、各种指示等的多个键。指向装置512是一种用来进行各种指示的选择或执行、处理对象的选择、光标的移动等的输入装置。DVD-RW驱动器514作为一例可装卸的记录介质，控制各种数据在DVD-RW513的读取或写入。除了DVD-RW，也可以是DVD-R和蓝光光盘等。介质I/F516控制闪存等记录介质515的数据读取或写入(存储)。
《实施方式的功能构成》
接下来用图20说明本实施方式的功能构成。图20是第二实施方式涉及的图像通信系统的功能结构模块图。摄影装置1和智能手机3的功能构成与第一实施方式相同，因此对同样的功能构成赋予相同符号，并省略说明。接入点7是通用的普通接入点，因此省略功能构成的说明。
<图像管理服务器的功能构成>
用图20详述图像管理服务器5的功能构成。图20是第二实施方式涉及的图像通信系统20000的功能结构模块图。
如图20所示，图像管理服务器5具有收发部51、判断部55、计算部56以及存储及读取处理部59。这些部是通过图19所示的各个构成要素的某一个要素按照从HD504展开到RAM503上的摄影装置用程序的CPU111的指令运行所实现的功能或者装置。
图像管理服务器5还具有图19所示的ROM502和由HD504所构建的存储部5000。
图像通信系统的各功能构成
其次，用图19和图20详述摄影装置1的各项功能构成。
图像管理服务器5的收发部51主要通过CPU501对网络I/F510的处理来实现，通过互联网等通信网络，与其他装置(例如智能手机3)进行各种数据(或者信息)的收发。
判断部55主要通过CPU501的处理来实现，进行后述的各种判断。
计算部56主要通过CPU501的处理来实现，进行后述的各种计算。
存储及读取处理部59主要通过CPU501的处理而实现，在存储部5000中进行各种数据(或信息)的读取和保存。
《实施方式的处理或动作》
用图21说明第二实施方式的处理或者运行。图21是第二实施方式涉及的文件数据的通信处理时序图。以下说明第二实施方式中相当于第一实施方式的步骤S9(或者S17)和步骤S10(或者S18)之间的处理。
首先，在步骤S9(或S17)的处理之后，智能手机3的通信部38向接入点7发送请求连接的连接请求信息(S101)。为此，接入点7接收到连接请求信息。
然后，接入点7向智能手机3发送表示允许连接的连接许可信息(S102)。因此，智能手机3的通信部38收到连接许可信息。通过步骤S101、S102的处理，智能手机3的Wi-Fi连接对象从全天球摄影装置1切换到接入点7。
其次，智能手机3的通信部38经由接入点7，向图像管理服务器5发送上述步骤S2(或者S15)取得的狭窄角图像数据(S103)。由此，图像管理服务器5的收发部51收到窄角图像数据。
而后，图像管理服务器5执行窄角图像数据的对照处理(S104)。在此，用图22详述对照处理。图22是窄角摄影数据对照处理流程图。
如图22所示，图像管理服务器5的判断部55判断存储部5000中保存的电子文件是否尚存需要对照的电子文件(S131)。如果有(S131的是)，存储及读取处理部59读取文件中包含的窄角摄影数据(S132)。
其次，计算部56对比拍摄后在步骤S103的处理中收到的窄角摄影数据以及在步骤S132的处理中读取的窄角摄影数据，求出汉明距离(Hamming distance)(S133)。计算该距离有各种方法，在此，将众所周知的Average Hash作为在步骤S103中收到的窄角图像数据的特征量，计算部56如下计算求出64bit特征量(哈希值)的距离。(1)将窄角拍摄数据转换为灰度数据。(2)缩小图像以使灰度数据成为64(8x8)像素。(3)对全像素求出平均值。(4)对于各像素值，如果在平均值以上则为1、小于平均值则为0，求出64位列(哈希值)。(5)对需要对照的两个窄角图像数据求出得到的哈希值的汉明距离。
而后，判断部55对比步骤S133的处理中求出的距离L1和之前的对照所得到的最小距离L0，判断距离L1是否小于最小距离L0(S134)。如果距离L1小于最小距离L0(S134的是)，则存储及读取处理部59将距离L1作为最小距离更新，与在步骤S132中读取的窄角图像数据的文件名组成一组一时性保存在存储部3000中(S135)。然后返回S131的处理。而如果通过上述步骤S134的处理，距离L1为最小距离L0以上(S134的否)，则返回到步骤S131的处理。
另一方面，通过上述步骤S131的处理，存储部5000所保存的电子文件中没有需要对照的电子文件(S131的否)，则存储及读取处理部59读取在上述步骤S135的处理中被一时性保存的文件名的电子文件数据(S136)。
至此，图21的步骤S104的处理结束。
然后，图像管理服务器5的收发部51将通过步骤S136的处理读取的电子文件经由接入点发送到智能手机3(S105)。由此，智能手机3的通信部38收到电子文件数据。
其次，智能手机3的存储及读取处理部39将通过步骤S105收到的电子文件数据保存在存储部3000中(S106)。
而后，智能手机3的存储及读取处理部39读取上述步骤S9中保存的电子文件数据(S107)。而后，通信部38通过接入点7将步骤S17中读取的电子文件数据发送到图像管理服务器5(S108)。因此，图像管理服务器5的收发部51收到电子文件数据。
接着，图像管理服务器5的存储及读取处理部59将在步骤S108中收到的电子文件数据保存到存储部5000中(S109)。通过该步骤S107、S108的处理，可以始终将图像管理服务器5管理的电子文件数据保持为最新状态。
接着，智能手机3的通信部38向全天球摄影装置1发送请求连接的连接请求信息(S110)。由此，全天球摄影图像1的收发部11收到连接请求信息。
而后，全天球摄影装置1向智能手机3发送表示允许连接的连接许可信息(S111)。由此，智能手机3的通信部38收到连接许可信息。通过该步骤S110，S111的处理，Wi-Fi的连接对象从接入点7返回到全天球摄影装置1，用户A可立即执行下一个联动摄影。
<本实施方式的主要效果>
如上所述，本实施方式不仅能够发挥第一实施方式的效果，同时，由于用图像管理服务器5管理电子文件数据，因此具有即便是在图像数据的容量大或数据多的情况下，也不会对智能手机3的存储部3000存储容量造成压迫的作用。
《变形例》
第一实施方式(或第二实施方式)中的步骤S10(或S18)的显示处理，在执行图14所示流程的处理时，也可以改变电子文件反复两次。具体来说，也可以把在步骤S9(或者S17)中保存的电子文件和在步骤S106中保存的电子文件数据分别作为第一次电子文件和第二次电子文件。这样，显示控制部36可以在显示器318上显示之前拍摄的电子文件数据之后，继续显示过去类似的电子文件数据。因此，能够唤起用户过去的记忆，让拍摄的情景留下更加深刻印象。
在图21的步骤S104的处理中，图像管理服务器5也可以对位置信息进行对照。在这种情况下，智能手机3在步骤S2(或S15)拍摄时，通过GPS接收部311获得位置信息。位置信息包括摄影位置的纬度和经度。由此，在步骤S9(或S17)的处理中，存储和读取处理部39在窄角图像数据中嵌入位置信息进行保存。该格式可以使用众所周知的Exif(ExchangeableImage File format)。在这种情况下，在图21的步骤S13的处理中，除了窄角图像数据外，通信部38还发送位置信息。在图22的步骤S132的处理中，除了窄角图像数据外，存储和读取处理部59还读取位置信息。而后，在步骤S133的处理中，计算部46求出位置信息所表示的坐标(摄影纬度、摄影经度)之间的欧几里德距离等。据此，起到帮助用户回忆过去在同一个或附近的场所如何拍摄的效果。位置信息也可以通过设置在全部天球摄影装置1中的GPS接收部311来获得。
虽然第二实施方式得通信部38通过接入点7与图像管理服务器5进行通信，但是收发部31也可以通过互联网等通信网络与图像管理服务器5进行通信。
·补充
在上述步骤S5、S13中，设规定时间可以改变。在这种情况下，用户A通过操作智能手机3，由受理部32接受设定时间。
另外，也可以没有步骤S5、S13的处理。也就是说，用户A按动图13的(b)的图像使用按钮341后，没有待机时间立刻开始步骤S6的处理。该处理在规定时间可变的情况下，将设定时间设为0也同样可以进行。
在上述实施方式中，智能手机3和全天球摄影装置1各自拍摄后，智能手机3自动地把两者的摄影数据作为一个电子文件保存到存储部3000中(S9，S17)，但是本发明并不受此限制。例如，智能手机3和全天球拍摄装置1分别拍摄后，用户A把拍摄得到的图像数据(包括声音数据)分别放入PC等装置，用PC等合并到一个文件中后，从PC等传送到智能手机3的存储部3000中。
上述实施方式中的各项功能可以通过一个或多个处理电路实现。在此，本实施方式中的"处理电路"包括通过电子线路安装的处理器那样的通过软件执行各项功能的处理器，或设计为执行上述各项功能的ASIC(Application Specific Integrated Circuit)、DSP(digital Signal Processor)、FPGA(Field Programmable Gate Array)、SOC(Systemon a Chip)、GPU以及传统的回路模块等设备。
互联网等通信网络还包括通过块链构建的网络。
在第一实施方式中，如图8所示，图像通信系统是由全部天球摄影装置1和智能手机3构成的，但本发明并不受此限制。例如，图像通信系统也可以包括智能手机中安装的用于实现显示控制部37和通信部38的程序以及全部天球摄影装置1构成。
全天球摄影装置1是广角摄影装置的一个例子，广角摄影装置是摄影装置的一例。在这种情况下，智能手机是窄角拍摄装置的一个例子，窄角摄影装置是其他摄影装置的一个例子。
图12的步骤S5中的待机时间可以由用户设定在智能手机3中。例如，如果将待机时间设为0秒，则不存在待机时间，智能手机3和全天球拍摄装置1同时拍摄。同样，图17的步骤S13的待机时间也可以由用户直接设定到全天球摄影装置1中，还可以由用户利用蓝牙等从智能手机3间接设定。
图12的步骤S6、S8和图15的步骤S14、S16可以使用蓝牙和Wi-Fi之中任意一方。
在图12的步骤S9中，存储及读取处理部39在保存电子文件数据的情况下，也可以不执行步骤S10的处理，而是由显示控制部37在显示器318上显示将要接受的文件名的用户界面。之后，通过用户A操作，读取所需的电子文件数据，供智能手机3进行步骤S10的显示处理。这样，不仅在拍摄时，用户随时都能构确认显示内容。
如图16所示，显示控制部37在待机时间t1之后，从窄角图像切换到指定区域图像，但本发明不限于此。例如，在用户A对智能手机3进行触摸等操作输入之前，显示控制部37持续显示窄角图像。然后，用户A操作输入后，在触摸等操作输入持续期间(保持触摸状态期间)，显示控制部37进行指定区域图像的移动显示。然后，当用户A的操作输入结束后，显示控制部37再显示广角图像。这种显示方法可以让用户A随时切换窄角图像和广角图像的显示。
如图16所示，显示控制部37在显示窄角图像之后显示广角图像中的指定区域图像Q11，但本发明并不受此限制。例如，显示控制部37在作为广角图像的等距柱形映射图像EC1内显示了整个指定区域T中的指定区域图像Q11之后再显示作为窄角图像的平面图像P，改变显示的前后顺序。
进而，虽然上述实施方式中显示控制部37执行了第一显示模式，即在窄角图像之后显示广角图像的指定区域图像的一连串显示模式，但本发明并不受此限制。例如，显示控制部37可以执行第二显示模式，即反复执行窄角图像之后显示广角图像的指定区域图像的一连串处理。另外还有第三显示模式，即显示控制部37在窄角图像之后显示广角图像的指定区域图像，而后，再次显示一次窄角图像。着中国显示模式可供摄影者可以重新确认当时自己的表情、情绪等。显示控制部37可以在显示器318上显示用来选择上述各显示模式的画面，供用户A选择。在这种情况下，受理部32接受用户A的选择，显示控制部37用选定的显示模式进行显示。
此外，可以在处理步骤S10(或者S18)的处理之前、处理之后，或处理前前后，显示控制部37可以转换成小行星形式显示。由于小行星形式能够显示全天球图像的整体图像，因此可以包括指定区域T的显示范围以外的区域，对最终整体确认具有效果。
用户A拥有全天球摄影装置1后，需要在智能手机3上安装用于建立Wi-Fi和蓝牙无线通信连接的设定、以及实现图12、图17以及图21的处理的软件的安装作业。为省去该操作，可以通过如下处理来减轻拥有全天球摄影装置1后的设置时间。具体来说，在全天球摄影装置1的存储部1000中预先保存无线通信的连接设定和实现图12、图17、或图21的处理的特定软件。然后，用USB电缆等有线电缆连接全天球摄影装置1和智能手机3，通过智能手机3访问全天球拍摄装置1的存储部1000，取得上述特定软件。另外，作为变形例，在步骤S8、S16中，全天球摄影装置1直接将广角图像数据送往智能手机3，但在此发送之前，全部天球摄影装置1的存储·读取部19可以将广角图像数据保存到存储部1000中。
另外，在第一实施方式和变形例中的电子文件数据的保存(S9，S17)时，智能手机3可以向第二实施方式的图像管理服务器5上传相同的电子文件，在图像管理服务器5中进行数据的备份。
·其他
上述各实施方式、变形例以及补充的内容，公开了如下本发明的各个方面。
1.一种摄影装置，其特征在于，具备，取得部，用于从第二摄影装置取得由该第二摄影装置拍摄的、视角大于由第一摄影装置拍摄的第一图像的第二图像的数据；以及显示控制部，用于在显示装置上连续显示所述第一图像和所述第二图像。
2.根据1所述的摄影装置，其特征在于，所述显示控制部把所述第二图像中的指定区域作为该第二图像显示在所述显示装置上的显示范围，显示该指定区域的图像，即指定区域图像。
3.根据2所述的摄影装置，其特征在于，所述显示控制部使得所述第二图像中的显示范围移动，用以在所述显示装置上显示不同的所述指定区域图像。
4.根据3所述的摄影装置，其特征在于，所述显示控制部使得所述第二图像中的显示范围的移动跨越所述第二图像的整个区域以显示不同的所述指定区域图像。
5.根据2至4中任意一个方面所述的摄影装置，其特征在于，所述显示控制部在所述第一图像显示之后显示所述指定区域图像。
6.根据5所述的摄影装置，其特征在于，所述显示控制部在所述第一图像持续显示指定时间之后显示所述指定区域图像。
7.根据2至4中任意一个方面所述的摄影装置，其特征在于，所述显示控制部在所述指定区域图像显示之后显示所述第一图像。
8.根据1至7中任意一个方面所述的摄影装置，其特征在于，具备，受理部，用于接受所述摄影装置的摄影开始；以及，请求部，用于向所述第二摄影装置提出开始摄影的请求。
9.一种图像通信系统，其特征在于，具备，1～8中的任何一个方面所述的摄影装置以及所述第二摄影装置。
10.根据9所述的图像通信系统，其特征在于，所述第二摄影装置在受理了该第二摄影装置开始拍摄时，向所述第一摄影装置提出开始拍摄的请求。
11.根据9或10中所述的图像通信系统，其特征在于，进一步具有图像管理服务器，该图像管理服务器用来把所述第一图像的数据以及所述第二图像的数据保存在一个电子文件中管理，所述第一摄影装置从所述图像管理服务器中取得所述电子文件的数据。
12.一种显示方法，用来显示拍摄得到的第一图像，该第一图像是视角相对狭窄的窄角图像，其特征在于，执行，取得步骤，从其他摄影装置取得第二图像的数据，该第二图像是拍摄得到的、视角大于所述第一图像的广角图像；以及显示控制步骤，在显示装置上连续显示所述第一图像和所述第二图像。
13.一种程序，供计算机执行12所述的显示方法。
符号说明
1全球摄影装置(广角摄影装置的一个例子；广角摄影装置是其他摄影装置的一个例子)，3智能手机(窄角摄影装置的一个例子；窄角摄影装置是摄影装置的一个例子)，5图像管理服务器，12受理部，13摄影部，14录音部，15判断部，16图像处理部，19存储部，31收发部，32受理部，33摄影部，34录音部，35判断部，36图像即声音处理部，37显示控制部，38通信部(取得部的一个例子，请求部的一个例子)，39存储及读取处理部，51收发部，55判断部，56计算部；59存储及读取处理部，318显示器(显示装置的一个例子)，1000、3000、5000存储部，10000、20000图像通信系统。

Claims (14)

1.一种图像显示方法，其特征在于，包括以下步骤，
取得步骤，从第二摄影装置取得由该第二摄影装置拍摄的、视角大于由第一摄影装置拍摄的第一图像的第二图像的数据；以及，
显示控制步骤，在显示装置上连续显示所述第一图像和所述第二图像。
2.根据权利要求1所述的图像显示方法，其特征在于，在所述显示控制步骤中，把所述第二图像中的指定区域作为该第二图像显示在所述显示装置上的显示范围，显示该指定区域的图像，即指定区域图像。
3.根据权利要求2所述的图像显示方法，其特征在于，在所述显示控制步骤中，使得所述显示范围移动，用以在所述显示装置上显示不同的所述指定区域图像。
4.根据权利要求3所述的图像显示方法，其特征在于，在所述显示控制步骤中，使得所述显示范围的移动跨越所述第二图像的整个区域，用以在所述显示装置上显示不同的所述指定区域图像。
5.根据权利要求2至4中任意一项所述的图像显示方法，其特征在于，在所述显示控制步骤中，在所述第一图像显示之后，显示所述指定区域图像。
6.根据权利要求5所述的图像显示方法，其特征在于，在所述显示控制步骤中，所述第一图像持续显示指定时间之后显示所述指定区域图像。
7.根据权利要求2至4中任意一项所述的图像显示方法，其特征在于，在所述显示控制步骤中，所述指定区域图像显示之后显示所述第一图像。
8.根据权利要求1至7中任意一项所述的图像显示方法，其特征在于，包括，
受理步骤，接受所述第一摄影装置的摄影开始；以及，
请求步骤，当受理了所述第一摄影装置的摄影开始时，向所述第二摄影装置提出开始摄影的请求。
9.一种图像通信系统，其特征在于，包括，
用于实现权利要求1～8中的任何一项所述的图像显示方法的程序；以及
所述第二摄影装置。
10.根据权利要求9所述的图像通信系统，其特征在于，所述第二摄影装置在受理了该第二摄影装置开始拍摄时，向所述第一摄影装置提出开始拍摄的请求。
11.根据权利要求9或10所述的图像通信系统，其特征在于，
进一步具有图像管理服务器，该图像管理服务器用来把所述第一图像的数据以及所述第二图像的数据保存在一个电子文件中管理，
所述第一摄影装置从所述图像管理服务器中取得所述电子文件的数据。
12.一种摄影装置，其特征在于，具备，
取得部，用于取得由另一台摄影装置拍摄的视角大于由所述摄影装置拍摄的第一图像的第二图像的数据；以及，
显示控制部，用于在显示装置上连续显示所述第一图像和所述第二图像。
13.一种存储介质，其中保存用于实现权利要求1至8中任意一项所述的图像显示方法的程序。
14.一种摄影装置，其中具备保存程序的存储装置和处理器，通过所述处理器执行所述程序，所述摄影装置实现权利要求1至8中任意一项所述的图像显示方法。
CN202011340082.6A 2019-11-29 2020-11-25 图像显示方法、图像通信系统、摄影装置、以及存储介质 Pending CN112887663A (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2019216518 2019-11-29
JP2019-216518 2019-11-29
JP2020-162981 2020-09-29
JP2020162981 2020-09-29
JP2020-191841 2020-11-18
JP2020191841A JP2022007898A (ja) 2019-11-29 2020-11-18 プログラム、画像通信システム、表示方法、及び撮影装置

Publications (1)

Publication Number Publication Date
CN112887663A true CN112887663A (zh) 2021-06-01

Family

ID=73554288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011340082.6A Pending CN112887663A (zh) 2019-11-29 2020-11-25 图像显示方法、图像通信系统、摄影装置、以及存储介质

Country Status (3)

Country Link
US (1) US11533430B2 (zh)
EP (1) EP3829159A1 (zh)
CN (1) CN112887663A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11478715B1 (en) * 2020-02-12 2022-10-25 Electronic Arts Inc. User-controllable model-driven matchmaking

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103248815A (zh) * 2012-02-07 2013-08-14 奥林巴斯映像株式会社 摄像装置、摄像方法
CN106375637A (zh) * 2015-07-21 2017-02-01 Lg电子株式会社 移动终端及其控制方法
CN108632589A (zh) * 2017-03-15 2018-10-09 株式会社理光 信息处理装置、摄像系统以及记录介质
WO2019082925A1 (en) * 2017-10-27 2019-05-02 Ricoh Company, Ltd. IMAGE PROCESSING APPARATUS, IMAGE CAPTURE SYSTEM, IMAGE PROCESSING METHOD, AND RECORDING MEDIUM

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5316805B2 (ja) * 2009-03-16 2013-10-16 株式会社リコー 車載カメラ装置の画像調整装置及び車載カメラ装置
JP5347890B2 (ja) 2009-10-09 2013-11-20 ソニー株式会社 画像処理装置および方法、並びにプログラム
EP2648406B1 (en) * 2012-04-04 2018-08-22 Axis AB Method for switching viewing modes in a camera
US10303945B2 (en) * 2012-12-27 2019-05-28 Panasonic Intellectual Property Corporation Of America Display method and display apparatus
JP6228392B2 (ja) * 2013-05-31 2017-11-08 任天堂株式会社 パノラマ画像表示プログラム、パノラマ画像表示装置、パノラマ画像表示システム、および、パノラマ画像表示方法
JP6726931B2 (ja) * 2015-03-20 2020-07-22 キヤノン株式会社 画像処理装置およびその方法、並びに、画像処理システム
WO2018066347A1 (ja) * 2016-10-03 2018-04-12 富士フイルム株式会社 内視鏡システム及びその作動方法
CN108259717A (zh) 2016-12-28 2018-07-06 株式会社理光 联动装置、摄影系统、摄影方法
JP2018169601A (ja) 2017-03-30 2018-11-01 株式会社リコー 連携装置、撮影システム、撮影方法、及びプログラム
US10789671B2 (en) 2016-12-28 2020-09-29 Ricoh Company, Ltd. Apparatus, system, and method of controlling display, and recording medium
JP2018110384A (ja) 2016-12-28 2018-07-12 株式会社リコー 画像処理装置、撮影システム、画像処理方法、及びプログラム
JP7013272B2 (ja) 2018-02-13 2022-01-31 キヤノン株式会社 画像処理装置
JP7326774B2 (ja) 2019-03-06 2023-08-16 株式会社リコー 画像処理システム、撮像装置、情報処理装置、画像処理方法及びプログラム
CN111726520B (zh) 2019-03-20 2021-12-10 株式会社理光 摄影装置、摄影系统、图像处理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103248815A (zh) * 2012-02-07 2013-08-14 奥林巴斯映像株式会社 摄像装置、摄像方法
CN106375637A (zh) * 2015-07-21 2017-02-01 Lg电子株式会社 移动终端及其控制方法
CN108632589A (zh) * 2017-03-15 2018-10-09 株式会社理光 信息处理装置、摄像系统以及记录介质
WO2019082925A1 (en) * 2017-10-27 2019-05-02 Ricoh Company, Ltd. IMAGE PROCESSING APPARATUS, IMAGE CAPTURE SYSTEM, IMAGE PROCESSING METHOD, AND RECORDING MEDIUM

Also Published As

Publication number Publication date
EP3829159A1 (en) 2021-06-02
US20210168285A1 (en) 2021-06-03
US11533430B2 (en) 2022-12-20

Similar Documents

Publication Publication Date Title
US10979751B2 (en) Communication management apparatus, method and computer-readable storage medium for generating image data identification information communication
JP6756269B2 (ja) 通信端末、画像通信システム、通信方法、及びプログラム
US10721116B2 (en) Communication terminal, method for controlling display of image, and non-transitory computer-readable storage medium
JP6186775B2 (ja) 通信端末、表示方法、及びプログラム
CN111726520B (zh) 摄影装置、摄影系统、图像处理方法
JP2018129716A (ja) 画像処理装置、画像処理システム、画像処理方法及びプログラム
US20190306458A1 (en) Communication management system, communication system, and communication method
US20200186407A1 (en) Communication terminal, image network system, display method, and program
CN111279387A (zh) 图像处理设备，图像捕获系统，图像处理方法和记录介质
JP2019057264A (ja) 画像処理装置、撮影システム、画像処理方法、及びプログラム
JP6816465B2 (ja) 画像表示システム、通信システム、画像表示方法、及びプログラム
US11250540B2 (en) Image processing apparatus, image capturing system, image processing method, and recording medium
JP2018056889A (ja) 表示端末、表示方法、及びプログラム
US11533430B2 (en) Image capturing device with display control, image communication system, and method for display control, and recording medium
US11700455B2 (en) Image capturing device, image communication system, and method for display control
JP2018026642A (ja) 画像管理システム、画像通信システム、画像管理方法、及びプログラム
JP7017045B2 (ja) 通信端末、表示方法、及びプログラム
JP2018157538A (ja) プログラム、撮像システム、情報処理装置
JP2017162014A (ja) 通信端末、画像通信システム、表示方法、及びプログラム
JP2020109955A (ja) 撮影装置、撮影システム、画像処理方法、及びプログラム
JP2022007898A (ja) プログラム、画像通信システム、表示方法、及び撮影装置
JP2017041205A (ja) 画像管理システム、画像通信システム、画像管理方法、及びプログラム
JP7358938B2 (ja) 通信端末、画像通信システム、表示方法、及びプログラム
JP7484237B2 (ja) 撮影装置、撮影システム、画像処理方法、及びプログラム
CN117729320B (zh) 图像显示方法、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210601