CN105308946A - 信息处理装置、成像装置、信息处理方法以及程序 - Google Patents
信息处理装置、成像装置、信息处理方法以及程序 Download PDFInfo
- Publication number
- CN105308946A CN105308946A CN201480032018.8A CN201480032018A CN105308946A CN 105308946 A CN105308946 A CN 105308946A CN 201480032018 A CN201480032018 A CN 201480032018A CN 105308946 A CN105308946 A CN 105308946A
- Authority
- CN
- China
- Prior art keywords
- imaging device
- candidate
- installment state
- state
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 609
- 230000010365 information processing Effects 0.000 title claims description 8
- 238000003672 processing method Methods 0.000 title description 3
- 238000009434 installation Methods 0.000 claims abstract description 45
- 230000015572 biosynthetic process Effects 0.000 claims description 112
- 238000000034 method Methods 0.000 claims description 95
- 238000004891 communication Methods 0.000 claims description 32
- 230000003287 optical effect Effects 0.000 claims description 25
- 238000001514 detection method Methods 0.000 claims description 12
- 230000006870 function Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 6
- 238000005755 formation reaction Methods 0.000 description 108
- 230000008569 process Effects 0.000 description 60
- 238000010586 diagram Methods 0.000 description 28
- 239000011521 glass Substances 0.000 description 20
- 238000005516 engineering process Methods 0.000 description 16
- 238000012545 processing Methods 0.000 description 16
- 230000008859 change Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 230000000386 athletic effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001144 postural effect Effects 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
Abstract
一种系统,基于多个成像装置中的每一个的当前安装状态之间的关系来建议与所述多个成像装置中的每一个对应的候选安装状态;并且基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态来输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
Description
对相关申请的交叉引用
本申请要求于2013年6月11日提交的日本优先权专利申请JP2013-122989的权益,其全部内容通过引用被结合于此。
技术领域
本公开涉及信息处理装置、成像装置、信息处理方法以及程序。
背景技术
根据专利文献1中所公开的技术,由一个成像装置捕获的一个捕获图像被显示在这一成像装置的显示单元上,以与由其它成像装置捕获的其它捕获图像对比。根据这种技术,这一成像装置的用户可以调整这一成像装置的安装位置,使得捕获图像中的一些被叠加在彼此之上。
引用列表
专利文献
专利文献1:JP2011-172093A
发明内容
技术问题
但是,在这种技术中,由于捕获图像仅仅被显示为与其它捕获图像对比,因此用户需要花相当长的时间来安装多个成像装置。由于这个原因,所以对用于为多个成像装置的安装状态建议候选的技术存在需求。
问题的解决方案
根据本公开的实施例,提供了一种系统,该系统:基于多个成像装置中的每一个的当前安装状态之间的关系,建议与所述多个成像装置中的每一个对应的候选安装状态;以及基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态,输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
安装状态可以与所述多个成像装置中的每一个的位置和安装姿势中的至少一个对应。
安装姿势可以与所述多个成像装置中的每一个的成像表面的光轴的方向和所述多个成像装置中的每一个相对于光轴的旋转角度对应。
根据本公开的另一个实施例,提供了包括计算机程序指令的非暂态计算机可读介质,其中当计算机程序指令被系统执行时使得系统:基于多个成像装置中的每一个的当前安装状态之间的关系,建议与所述多个成像装置中的每一个对应的候选安装状态;以及基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态,输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
根据本公开的另一个实施例,提供了一种方法,包括:基于多个成像装置中的每一个的当前安装状态之间的关系,通过电路建议与所述多个成像装置中每一个对应的候选安装状态;以及基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态,通过电路输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
发明的有益效果
根据上述本公开的实施例,由于建议了作为用于多个成像装置的安装状态的候选的候选状态,因此用户可以容易地理解成像装置的候选状态。
附图说明
图1是示出根据本公开的第一实施例的信息处理装置的功能框图。
图2是示出根据第一实施例的信息处理装置的硬件配置的示图。
图3是示出成像装置的功能框图。
图4是示出成像装置硬件配置的示图。
图5是示出由信息处理装置执行的处理的概述的流程图。
图6是示出由信息处理装置执行的处理的例子的流程图。
图7是示出成像装置的安装位置例子的平面图。
图8是示出由信息处理装置显示的图像的例子的解释性示图。
图9是示出由信息处理装置显示的图像的例子的解释性示图。
图10是示出由信息处理装置显示的图像的例子的解释性示图。
图11是示出由信息处理装置执行的处理的例子的流程图。
图12是示出成像装置的安装位置的例子的平面图。
图13是示出由信息处理装置显示的图像的例子的解释性示图。
图14是示出成像装置的安装位置例子的平面图。
图15是示出由信息处理装置显示的图像的例子的解释性示图。
图16是示出由信息处理装置显示的图像的例子的解释性示图。
图17是示出由信息处理装置显示的图像的例子的解释性示图。
图18是示出由信息处理装置显示的图像的例子的解释性示图。
图19是示出由信息处理装置显示的图像的例子的解释性示图。
图20是示出由信息处理装置显示的图像的例子的解释性示图。
图21是示出由信息处理装置显示的图像的例子的解释性示图。
图22是示出由信息处理装置显示的图像的例子的解释性示图。
图23是示出由信息处理装置显示的图像的例子的解释性示图。
图24是示出由信息处理装置显示的图像的例子的解释性示图。
图25是示出由信息处理装置显示的图像的例子的解释性示图。
图26是示出由信息处理装置显示的图像的例子的解释性示图。
图27是示出由信息处理装置显示的图像的例子的解释性示图。
图28是示出由信息处理装置显示的图像的例子的解释性示图。
图29是示出根据本公开的第二实施例的信息处理装置的功能框图。
图30是示出由信息处理装置显示的图像的例子的解释性示图。
具体实施方式
在下文中,将参考附图详细描述本公开的优选实施例。贯穿本说明书和附图,具有基本上相同功能配置的组成元件被赋予相同的标号并且重复的描述将被省略。
此外,描述将以以下次序进行。
1.现有技术的回顾
2.第一实施例(其中信息处理装置不参与成像的例子)
2-1.信息处理装置的配置
2-2.成像装置的配置
2-3.由信息处理装置执行的处理的概述
2-4.由信息处理装置执行的处理的例子
2-5.各种显示例子
3.第二实施例(其中信息处理装置参与成像的例子)
3-1.成像装置的配置
3-2.由成像装置执行的处理的例子
<1.现有技术的回顾>
本发明人已通过回顾本公开的现有技术构想了根据本实施例的信息处理装置和成像装置。因此,将首先描述现有技术。
当用户与多个成像装置(例如,相机)合作执行拍摄(成像)时,用户需要适当地布置成像装置。这里,与多个成像装置合作执行拍摄的例子包括全景成像和多视点成像。当用户利用多个成像装置执行全景成像时,用户必须调整成像装置的安装位置和安装姿势以重叠由成像装置获得的捕获图像(图片)。这里,成像装置的安装位置是例如成像装置的中心点的3维坐标。成像装置的安装姿势是例如成像装置的成像表面的光轴方向和当光轴是旋转轴时成像装置的旋转角度。例如,光轴的方向被表示为水平地朝向光轴并且从图像传感器朝向透镜的中心的矢量。例如,当成像装置被水平地维持时,成像装置的旋转角度被假定为0度。
此外,在多视点成像中,在许多情况下,当成像装置被安装在相同间隔处时,每个捕获图像容易通过后阶段的图像合成处理进行处理。而且,无论在全景成像还是多视点成像中,在一些情况下,成像装置优选地被水平安装而没有倾斜。因此,用户需要适当地预先调整成像装置的安装位置和安装姿势然后执行拍摄。
作为调整成像装置的安装位置和安装姿势的方法,可以举例说明在每个成像装置的显示单元上显示捕获图像并且在将捕获图像彼此对比的同时调整成像装置的安装位置和安装姿势的方法。但是,需要花很多时间和精力来执行这种方法。而且,以这种方法,当利用捕获图像生成全景图像时,在一些情况下一个捕获图像不与其它捕获图像重叠(即,失败)。在一些情况下,用户通过执行编辑破裂的捕获图像的操作来使得这个捕获图像与其它捕获图像一致。例如,当捕获图像由于成像装置的倾斜而破裂(rupture)时,用户在一些情况下可以通过旋转捕获图像来使得这个捕获图像与其它捕获图像一致。但是,用户需要执行单独的操作,诸如编辑操作。此外,当破裂的捕获图像即使通过编辑操作也不与其它捕获图像一致时,用户需要再次执行拍摄。此外,当成像装置不包括显示单元时,这个方法不能被采用。例如,安装在用户的身体(例如,头)上的小型相机等可以作为不包括显示单元的成像装置的例子。
在专利文献1中所公开的技术中,一个成像装置的显示单元显示由这一成像装置捕获的一个捕获图像,使得这一捕获图像与由其它成像装置捕获的其它捕获图像进行对比。根据这种技术,这一成像装置的用户可以调整这一成像装置的安装位置和安装姿势,使得捕获图像中的一些彼此重叠。
但是,当对比成像装置的捕获图像时,用户仍然必须调整每个成像装置的安装位置和安装姿势。而且,这种技术是当成像装置的数量相对较小(例如,两个)时被实现的。但是,当成像装置的数量大时,难以实现这种技术。这是因为难以同时在成像装置的显示单元上显示许多成像图像,因为成像装置的显示单元的尺寸是有限的。此外,这种技术的目的是允许用户重叠一些捕获图像。即,这种技术可以被应用到重叠一些捕获图像的成像处理。但是,例如,在多视点成像的方法中,还存在不重叠捕获图像的方法。与没有执行成像的视点对应的图像(即,内插图像),是基于在靠近这个视点的视点处捕获的捕获图像产生的。因此,专利文献1的技术不适用于这种类型的多视点成像。
如上所述,需要用户花很多时间和精力来调整成像装置的安装位置和安装姿势。此外,根据工作水平,存在其中多个成像装置被预先安装在特定安装位置和安装姿势的情况,如在例如运动装备中安装的成像装置中。但是,这种技术只适用于可以在特定地点处拍摄特定场景的情况,例如,拍摄处于运动姿势的比赛。由于这个原因,需要用户花很多时间和精力来调整成像装置的安装位置和安装姿势。因此,对用于为多个成像装置的安装状态建议候选的技术存在需求。这里,安装状态是包括成像装置的安装位置和安装姿势中的至少一个的概念。
<2.第一实施例(其中信息处理装置10不参与成像的例子)>
接着,将描述本公开的第一实施例。在第一实施例中,信息处理装置10不参与成像。即,信息处理装置10执行成像装置20的候选状态等的建议。
(2-1.信息处理装置的配置)
首先,将参考图1和2描述信息处理装置10的配置。如在图1中所示出的,信息处理装置10包括输入单元11、通信单元12、建议单元13、候选状态获取单元(获取单元)14a和建议侧控制单元(控制单元)14。信息处理装置10可以是用户可携带的装置(所谓的移动计算机)或者可以是固定装置。其中用户可携带的装置的例子包括智能电话、智能平板、可穿戴装置(例如,其中电子装置被安装在眼镜上的装置)以及笔记本类型的PC。固定装置的例子包括台式PC。信息处理装置10优选地是用户可携带的装置。这是因为用户在这种情况下可以了解更多样化的地点作为成像装置20(参见图3)的安装状态的候选。信息处理装置10可以包括成像单元。
输入单元11从用户接收输入操作,并且响应于输入操作将操作信息输出到建议侧控制单元14。通信单元12执行与每个成像装置20的通信。通信单元12可以执行与除成像装置20之外的其它通信装置的通信。通信单元12将可通过通信获得的信息输出到建议侧控制单元14。建议单元13建议各种信息,诸如每个成像装置20的当前安装状态和每个成像装置20的安装状态的候选(即,候选状态)。建议单元13被划分为显示单元13a和音频输出单元13b。显示单元13a显示信息,并且音频输出单元13b以音频的方式输出信息。即,信息的建议通过例如屏幕显示和音频输出中的至少一个来执行。候选状态获取单元14a检测(计算)每个成像装置的当前安装状态并获取(计算和确定)候选状态。建议侧控制单元14不仅控制整个信息处理装置10,而且还执行各种信息的建议控制等。此外,建议侧控制单元14可以获取候选状态。即,建议侧控制单元14可以具有候选状态获取单元14a的功能。
信息处理装置10的每个功能都是由例如在图2中示出的硬件配置实现的。当然,该硬件配置是例子,并且任何配置只要可以实现信息处理装置10的每个功能,该配置就可以被实现。
如在图2中所示出的,信息处理装置10包括输入装置100、输出(建议)装置101、CPU102、GPU103、通信装置104、存储装置105和总线106作为硬件配置。输入装置100是被配置为接收来自用户的输入操作的装置,并且其例子包括触摸面板、鼠标和键盘。输出装置101是被配置为建议各种信息的装置,并且其例子包括显示器和扬声器。CPU102读取存储在存储装置105中的程序并执行该程序。GPU103例如通过读取存储在存储装置105中的程序并执行该程序来生成和显示图像。通信装置104包括例如Wifi和NFC,并且执行与每个成像装置20以及其它通信装置的通信。存储装置105存储程序,该程序使得信息处理装置10实现输入单元11、通信单元12、建议单元13、候选状态获取单元(获取单元)14a和建议侧控制单元14。程序的例子包括对象和音频识别程序、成像装置位置计算程序、成像装置姿势识别程序以及用户界面(UI)程序。此外,程序的其它例子包括用于同步多个图片和同步多个音频的程序、拍摄模式判定程序、成像装置布置候选计算程序和成像装置检测和通信程序。当然,程序不限于此。程序可以从另一个通信装置经由通信网络获取。总线106电连接硬件配置。
(2-2.成像装置的配置)
接着,将参考图3和4描述成像装置20的配置。成像装置20包括成像单元31、通信单元32、建议单元33、位置检测单元34和成像侧控制单元35。成像装置20是例如相机,但是本公开的实施例不限于此。任何装置都可以用作成像装置20,只要该装置具有成像功能。例如,成像装置20可以是具有成像功能的智能电话或智能平板。此外,成像装置20可以不包括建议单元33和位置检测单元34。
成像单元31通过执行成像(拍摄)来生成捕获图像,并且将捕获图像输出到成像侧控制单元35。通信单元32执行与信息处理装置10的通信。通信单元32可以执行与其它通信装置的通信。通信单元32将可通过通信获得的信息输出到成像侧控制单元35。例如,建议单元33建议各种信息,诸如捕获图像和各种音频。信息的建议通过例如屏幕显示和音频输出中的至少一个来执行。位置检测单元34生成用于计算(检测)成像装置20的当前安装状态的传感器信息,并且将关于结果的传感器信息输出到成像侧控制单元35。成像侧控制单元35不仅执行整个成像装置20的控制,而且还执行例如响应于来自信息处理装置10的请求将传感器信息等发送到信息处理装置10的处理。
成像装置20的每个功能都是通过例如在图4中示出的硬件配置实现的。当然,该硬件配置是例子,并且任何配置只要可以实现信息处理装置20的每个功能,该配置就可以被实现。
如在图4中所示出的,成像装置20包括透镜200、透镜驱动电路201、图像传感器202、AFE电路203、图像处理电路204、扬声器驱动电路205、扬声器206、显示器207以及通信电路208作为硬件配置。此外,成像装置20包括麦克风209、音频处理电路210、RAM211、各种传感器212、CPU213、GPU214、介质(存储介质)215和总线216作为其它单元。
透镜200在图像传感器202上会聚从成像装置20的外部入射的光。透镜驱动电路201调整透镜200的位置。图像传感器202利用来自透镜200的光生成捕获图像。模拟前端(AFE)电路203将由图像传感器202生成的捕获图像转换为数字信息,并且将该数字信息输出到图像处理电路204。图像处理电路204对捕获图像执行各种处理。扬声器驱动电路205控制扬声器206的驱动。扬声器206输出各种音频。显示器207显示各种信息,诸如捕获图像。通信电路208包括例如Wifi和NFC,并且执行与信息处理装置10的通信。通信电路208可以执行与另一个通信装置的通信。麦克风209从用户等获取音频,并且将音频作为音频信息输出到音频处理电路210。此外,音频信息可以是用于计算成像装置20的当前安装状态的传感器信息。
音频处理电路210对音频信息执行各种处理。RAM211用作CPU213的工作区域。各种传感器212包括配置为生成用于计算成像装置20的当前安装状态的传感器信息的传感器。具体而言,各种传感器212包括测距传感器、GPS传感器、红外传感器以及陀螺仪传感器。这种传感器信息可以提供给CPU213。CPU213读取存储在介质等中的程序并执行该程序。GPU214通过读取存储在介质等中的程序并执行该程序来生成和显示图像,如同在CPU213中那样。介质215是各种记录介质(ROM,外部存储介质等),并且存储例如程序,该程序使得成像装置20实现成像单元31、通信单元32、建议单元33、位置检测单元34和成像侧控制单元35。总线216电连接硬件配置。在以下的描述中,为了使多个成像装置20彼此区分,这些成像装置被称为成像装置21至29。
(2-3.由信息处理装置执行的处理的概述)
接着,将参考图5中示出的流程图描述由信息处理装置10执行的处理的概述。此外,在以下的描述中,建议侧控制单元14获取(计算)候选状态,但是候选状态获取单元14a可以获取(计算)候选状态。在步骤S10中,用户安装单个成像装置20或多个成像装置20。成像装置20的安装状态(安装位置、安装姿势等)优选地在考虑以下要描述的成像阵型的情况下确定,但是可以以任何方式来确定。
接着,信息处理装置10计算成像装置20的当前安装状态。具体而言,例如,建议侧控制单元14使得通信单元12将指示对发送传感器信息的请求的请求信息发送到每个成像装置20。每个成像装置20的通信单元32将请求信息输出到成像侧控制单元35。成像侧控制单元35将请求信息输出到位置检测单元34,然后位置检测单元34将传感器信息输出到成像侧控制单元35。成像侧控制单元35使得通信单元32将传感器信息发送到信息处理装置10,然后信息处理装置10的通信单元12将传感器信息输出到建议侧控制单元14。此外,当由用户决定安装状态时,成像装置20可以将传感器信息发送到信息处理装置10。作为决定安装状态的方法,例如,可以举例说明以下方法:在成像装置20中准备安装状态决定按钮,并且当安装状态决定按钮被按下时,判定安装状态被决定,但是,本公开的实施例不限于此。当成像装置20的安装状态与候选状态一致时,建议侧控制单元14可以自动地决定安装状态。
建议侧控制单元14基于从每个成像装置20提供的传感器信息来计算每个成像装置20的当前安装状态,并得到安装的成像装置20的数量。对基于每条传感器信息的具体计算方法没有被特别限制。
此外,计算当前安装状态的方法不限于这种方法。例如,当安装多个成像装置20时,信息处理装置10可以从成像装置20获取捕获图像,并基于捕获图像之间的视差等计算成像装置20的当前安装状态。
此外,只要成像装置20能够与信息处理装置10通信,作为与信息处理装置10的通信目标的成像装置20就没有被特别限制,但是本公开的实施例会限定于一些方法。例如,信息处理装置10可以检测在信息处理装置10的可通信范围内的成像装置20、建议成像装置20的列表、并让用户从成像装置20的列表中选择期望的成像装置20。此外,当成像装置20构成给定的网络时,建议侧控制单元14可以建议网络的列表并让用户从网络的列表中选择期望的网络。此外,可以给成像装置20分配标识信息,并且建议侧控制单元14可以被配置为只与具有预定标识信息的成像装置20通信。
在步骤S20中,信息处理装置10基于成像装置20的当前安装状态为成像装置20的安装状态计算候选,即,候选状态(即,获取候选状态)。具体处理如下。例如,建议侧控制单元14首先确定成像阵型(候选阵型)。这里,成像阵型指当成像装置20执行成像时的阵型。成像阵型的例子包括在图16中示出的360度全景成像阵型和在图15中示出的串联形多视点成像阵型(其中多个成像装置20被串联布置的阵型)。成像阵型的其它例子包括在图8中示出的环形多视点成像阵型(其中多个成像装置20被布置为环绕被摄体的阵型)和在图17中示出的堆成像阵型。
根据多视点成像阵型捕获的捕获图像被用于例如自由视点显示装置、3D显示装置、街道视图以及360度显示装置。根据360度全景成像阵型捕获的捕获图像被用于例如生成全景图像或时间片图像。
例如,建议侧控制单元14可以让用户选择成像阵型。当建议侧控制单元14让用户选择成像阵型时,例如,建议侧控制单元14向建议单元13建议成像阵型的列表。用户从该列表中选择期望的成像阵型。
另一方面,建议侧控制单元14可以基于成像装置20的当前安装状态确定成像阵型。例如,当每个成像装置20的光轴以给定点为中心朝向外部时,建议侧控制单元14确定360度全景成像阵型作为成像阵型。
此外,当成像装置20被串联布置,并且成像装置20的光轴正交于成像装置20的行时,建议侧控制单元14确定串联形多视点成像阵型作为成像阵型。此外,当成像装置20环绕给定被摄体并且成像装置20的光轴朝向该被摄体时,建议侧控制单元14确定环形多视点成像阵型作为成像阵型。
这里,建议侧控制单元14如下确定环形多视点成像阵型的被摄体。例如,建议侧控制单元14将通常在从成像装置20提供的捕获图像中绘出的被摄体确定为环形多视点成像阵型的被摄体。当然,被摄体确定方法不限于此。例如,由于用户倾向于小心地安装初步的成像装置20,因此,建议侧控制单元14可以从初始安装的成像装置20中获取捕获图像,并选择在捕获图像的中心处绘出的对象作为被摄体。
此外,建议侧控制单元14可以向建议单元13建议捕获图像的列表,并且可以让用户选择被摄体。此外,建议侧控制单元14可以将在捕获图像中的一个的中心处绘出的被摄体确定为多视点成像阵型的被摄体。此外,建议侧控制单元14可以存储算法,该算法将特定对象(例如,人物)确定为被摄体,并且可以根据该算法来确定被摄体。建议侧控制单元14可以使成像装置20侧来确定被摄体。在这种情况下,成像装置20可以根据与以上相同的处理来确定被摄体。
此外,当成像装置20可以在垂直方向上进行堆积时,建议侧控制单元14将堆成像阵型确定为成像阵型。此外,可以选择预设的成像阵型作为成像阵型,或者可以基于当前安装状态生成任何成像阵型。例如,建议侧控制单元14可以计算穿过当前安装位置的近似曲线,并且可以将这个近似曲线确定为安装结构。
随后,建议侧控制单元14确定构成成像阵型的成像装置20的数量。建议侧控制单元14可以让用户确定成像装置20的数量,或者可以基于成像装置20的当前安装状态和成像阵型来确定成像装置20的数量。
例如,当成像阵型是环形多视点成像阵型时,建议侧控制单元14基于成像装置20的当前安装状态来计算环形多视点成像阵型的半径。例如,建议侧控制单元14计算各个成像装置20和被摄体之间的距离,并将距离的平均值设置为环形多视点成像阵型的半径。然后,建议侧控制单元14可以将环形多视点成像阵型的周长除以相邻成像装置20之间的距离,并将通过该除法获得的值设置为成像装置20的数量。当成像阵型是360度全景成像阵型时,建议侧控制单元14可以根据相同的方法确定成像装置20的数量。此外,当成像阵型是串联形多视点成像阵型时,建议侧控制单元14可以将预设的距离除以相邻成像装置20之间的距离,并且可以将通过该除法获得的值设置为成像装置20的数量。此外,建议侧控制单元14可以预先为每个成像阵型设置成像装置20的数量。特别地,当成像阵型是环形多视点成像阵型或360度全景成像阵型时,建议侧控制单元14可以为每个成像阵型的半径设置成像装置20的数量。在这种情况下,建议侧控制单元14可以根据以上相同的方法计算成像阵型的半径,并基于计算结果确定成像装置20的数量。
随后,建议侧控制单元14基于成像阵型和成像装置20的数量确定成像装置20的候选状态。这里,在候选状态中,成像装置20的安装位置(在下文中也称为“候选位置”)可以被确定为使得成像装置20在成像阵型中被布置为相同的间隔。当然,任何间隔都可以用作成像装置20之间的间隔。在这种情况下,成像装置20之间的间隔可以由用户来确定,或者可以基于成像装置20的视野角和捕获图像之间的重叠状态来确定。例如,成像装置20的视野角越大,成像装置20和其它成像装置20之间的间隔可以被设定得越大。此外,可以使用多个安装间隔设置方法,或者可以将优先级与这种确定标准关联。例如,可以准备基于视野角设置成像装置20之间的安装间隔的设置方法、和将成像装置20布置为相同间隔的设置方法。然后,当成像装置20的视野被确定时,可以执行排定前面的设置方法的优先次序的处理。此外,可以为每个成像阵型改变设置方法。
另一方面,在候选状态中,成像装置20的姿势(在下文中也称为“候选姿势”)可以按如下进行设置。例如,光轴的方向可以被确定为使得成像装置20构成成像阵型。成像装置20的旋转角度可以基本上是0度(成像装置20被水平地维持的角度),但是也可以使用其它的值。例如,可以由用户设置任何旋转角度。
在步骤S30中,建议侧控制单元14建议候选状态。建议侧控制单元14可以将当前安装状态连同候选状态一起显示。这里,候选状态和当前安装状态可以以各种形式进行建议。建议侧控制单元14可以根据候选状态和当前安装状态显示例如成像装置20的平面图像(可通过在水平平面上投影成像装置20获得的图像)、正面图像、背面图像、立体图像(成像装置20的鸟瞰图像)等。此外,建议侧控制单元14可以以其它形式显示指示当前安装状态的平面图像等和指示候选状态的平面图像等。此外,建议侧控制单元14可以以不同形式显示与候选状态一致的平面图像等和在指示当前安装状态的平面图像等中不同于候选状态的平面图像等。此外,建议侧控制单元14可以建议例如用于使成像装置20的当前安装状态与候选状态协调的调整内容(例如,指示调整方向的箭头或音频)。此外,建议侧控制单元14可以显示由与当前安装状态和候选状态关联的成像装置20捕获的图像。此外,由于每个成像装置20的视野角在多视点成像、全景成像等中变得重要,因此建议侧控制单元14可以建议每个成像装置20的视野角。在这种情况下,每个成像装置20还可以将关于视野角的信息连同上述传感器信息一起发送到信息处理装置10。而且,关于视野角的信息可以被预先存储在信息处理装置10中,或者可以由用户输入到信息处理装置10。此后,信息处理装置10结束该处理。
此外,建议侧控制单元14可以至少执行步骤S30的处理,或者可以使另一个装置(例如,成像装置20((例如,CPU负载最小的成像装置20)或另一个通信装置)来执行另一个处理并接收结果。即,建议侧控制单元14可以将步骤S10和S20的处理分布到不同的装置,使得这些装置能够执行这些处理。例如,给定的成像装置20可以计算其自身的当前安装状态和相邻成像装置20的当前安装状态,并将结果发送到信息处理装置10。
此外,在上述处理中,已经建议了对应于一个成像阵型的候选状态,但是可以计算多个成像阵型中的每一个的候选状态,并且可以建议候选状态使得候选状态可以被彼此区分开(例如,颜色编码显示或亮度变化显示)。通过上述处理,即使当用户事先不了解候选状态时,用户也可以很容易地和交互地理解候选状态。因此,由于用户能够对比当前安装状态和候选状态,因此用户可以很容易地使成像装置20的安装状态与候选状态协调。此外,在候选状态中的每个成像装置20都可以捕获具有更高一致性的捕获图像。因此,信息处理装置10可以减少后续处理(编辑操作等)对用户的负担。
(2-4.由信息处理装置执行的处理的例子)
在下文中,将进一步描述由信息处理装置10执行的处理的具体例子。但是,由信息处理装置10执行的处理当然不限于以下例子。此外,在以下例子中,信息处理装置10是用户可携带的装置(例如,智能电话或智能平板),但是其它信息处理装置10可以执行以下处理。
(2-4-1.建议环形多视点成像阵型的处理的例子)
作为由信息处理装置10执行的处理的例子,首先,将参考图6的流程图描述建议环形多视点成像阵型的处理。
在步骤S100中,用户安装M(其中M是1或者等于或大于2的整数)个成像装置20,并接通其电源开关。成像装置20的安装状态优选地在考虑环形多视点成像阵型的情况下确定,但是也可以在考虑任何阵型的情况下确定。在图7中示出了安装状态的例子。在这个例子中,两个成像装置20围绕对象30进行安装,并且成像装置20的所有光轴40都朝向对象30。此外,对象30与各个成像装置20之间的距离基本上是相同的。
接着,信息处理装置10检测安装的成像装置20并计算成像装置20的当前安装状态。具体而言,例如,建议侧控制单元14使通信单元12将指示请求传感器信息的请求信息发送到每个成像装置20。响应于该请求信息,每个成像装置20将传感器信息发送到信息处理装置10,然后信息处理装置10的通信单元12将传感器信息输出到建议侧控制单元14。当安装状态被用户决定时,成像装置20可以将传感器信息发送到信息处理装置10。
建议侧控制单元14基于从每个成像装置20给出的传感器信息来检测安装的成像装置20。然后,建议侧控制单元14计算成像装置20的当前安装状态(位置关系),并且得到安装的成像装置20的数量。对基于每条传感器信息的具体计算方法没有特别的限制。
此外,计算当前安装状态的方法不限于这种方法。例如,如在图7中所示出的,当安装多个成像装置20时,信息处理装置10可以从成像装置20获取捕获图像,并基于捕获图像之间的视差等计算成像装置20的当前安装状态。
此外,成像装置20确定环形多视点成像阵型的被摄体。例如,建议侧控制单元14将通常在从成像器件20给出的捕获图像中绘出的被摄体确定为环形多视点成像阵型的被摄体。例如,在图7所示的情况下,由于在从成像装置20给出的捕获图像中通常绘出对象30,因此建议侧控制单元14可以将对象30确定为被摄体。当然,确定被摄体的方法不限于此。上面已经描述了其它确定方法的具体内容。
随后,建议侧控制单元14建议成像装置20的当前安装状态。具体而言,建议侧控制单元14生成成像装置20的多个平面图像,并以根据当前安装状态的形式(即,在根据当前安装位置的显示位置处和根据当前安装姿势的显示姿势)在显示单元13a上显示平面图像。这里,显示姿势是包括平面图像的光轴方向和旋转角度的概念。即,平面图像的显示位置对应于当前安装位置,并且平面图像的光轴方向和旋转角度对应于当前安装姿势。此外,建议侧控制单元14还显示指示被摄体的被摄体图像。
随后,建议侧控制单元14基于成像装置20的当前安装状态将环形多视点成像阵型确定为成像阵型。例如,如在图7中所示出的,当成像装置20环绕对象30并且成像装置20的光轴朝向对象30时,建议侧控制单元14将环形多视点成像阵型确定为成像阵型。此外,建议侧控制单元14可以向建议单元13建议成像阵型的列表,使得用户可以选择环形多视点成像阵型。
此外,建议侧控制单元14确定构成环形多视点成像阵型的成像装置20的数量N(其中N>M)。建议侧控制单元14可以让用户确定成像装置的数量N,或者可以基于成像装置20的当前安装状态和成像阵型来确定成像装置的数量。
例如,建议侧控制单元14基于成像装置20的当前安装状态来计算环形多视点成像阵型的半径。例如,建议侧控制单元14计算被摄体和各个成像装置20之间的距离,并且将距离的平均值设置为环形多视点成像阵型的半径。然后,建议侧控制单元14将环形多视点成像阵型的周长除以相邻成像装置20之间的距离,并且将通过该除法获得的值设置为成像装置20的数量N。
在步骤S110中,建议侧控制单元14基于成像阵型和成像装置20的数量N来确定成像装置20的候选状态(布置候选)(即,获取候选状态)。例如,建议侧控制单元14确定成像装置20的候选位置,使得成像装置20在环形多视点成像阵型中被布置为相同间隔。当然,可以使用任何间隔作为成像装置20之间的间隔。建议侧控制单元14确定光轴方向(候选姿势),使得成像装置20的光轴朝向被摄体。此外,建议侧控制单元14将每个成像装置20的旋转角度(候选姿势)设置为0度。
在步骤S120中,建议侧控制单元14建议成像装置20的候选状态。具体而言,建议侧控制单元14生成成像装置20的多个平面图像,并以根据候选状态的形式(即,在根据候选位置的显示位置处和根据候选姿势的显示姿势)显示平面图像。即,平面图像的显示位置对应于候选位置,并且平面图像的光轴方向和旋转角度对应于候选姿势。
此外,建议侧控制单元14生成成像装置20的多个平面图像,并以根据当前安装状态的形式(即,在根据当前安装位置的显示位置处和根据当前安装姿势的显示姿势)在显示单元13a上显示平面图像。这里,建议侧控制单元14以不同的形式(例如,颜色编码)显示指示当前安装状态的平面图像和指示候选状态的平面图像。此外,建议侧控制单元14以不同的形式(例如,颜色编码)显示与候选状态一致的平面图像和在指示当前安装状态的平面图像中与候选状态不一致的平面图像。在下文中,与候选状态一致的平面图像的显示形式被称为“一致形式”,而与候选状态不一致的平面图象的显示形式被称为“不一致形式”。建议侧控制单元14可以以颜色编码的方式显示各个形式,例如,以一致形式被显示为蓝色并且不一致形式被显示为黄色(或红色)的方式。此外,建议侧控制单元14还显示指示被摄体的被摄体图像。此外,建议侧控制单元14可以显示指示成像阵型的线条图像(连接指示候选状态的平面图像的图像)。
在图8中示出了显示例子。在图8中,平面图像20a指示当前安装状态,并且平面图像20b指示候选状态。平面图像20a的光轴40a都朝向被摄体图像30a。此外,由平面图像20a指示的安装状态与候选状态一致。平面图像20a和20b以颜色编码的方式进行显示。此外,在图8中,平面图像20a和20b的显示颜色之间的差异通过阴影的存在或不存在以及线条类型的不同来表示。线条图像20c指示环形多视点成像阵型。线条图像20c是以被摄体图像30a为中心的圆形图像。
在图9中示出了另一个显示例子。在图9中,平面图像20a和20a'指示当前安装状态,并且平面图像20b指示候选状态。平面图像20a和20b的光轴40a和40a'都朝向被摄体图像30a。此外,由平面图像20a指示的安装状态与候选状态一致,并且由平面图像20a'指示的安装状态与候选状态不一致。平面图像20a和20a'以颜色编码的方式被显示。在图9中,平面图像20a和20a'的显示颜色之间的差异通过阴影的存在或不存在来表示。此外,如在图8中所示,平面图像20a和20b以颜色编码的方式被显示。在这个例子中,构成成像阵型的成像装置20的数量(4)小于在图8中示出的成像装置20的数量(8),因此由平面图像20a'指示的安装状态不同于候选状态。此外,在这种结构中,与没有执行成像的视点对应的图像(即,内插图像)可以基于在靠近该视点的视点处捕获的捕获图像来产生。因此,处理适用于例如自由视点显示装置(能够从任何视点观看图片的显示装置)。
在步骤S130中,用户在对象30附近新安装成像装置20并且接通成像装置20的电源开关。建议侧控制单元14通过执行与步骤S100相同的处理来检测新添加的成像装置20。
在步骤S140中,建议侧控制单元14通过执行与步骤S100相同的处理来计算新添加的成像装置20的当前安装状态。
在步骤S150中,建议侧控制单元14建议新添加的成像装置20的当前安装状态。具体处理内容与步骤S120的那些相同。在图10中示出了显示例子。在这个例子中,平面图像20a'被新添加到在图8中示出的例子。平面图像20a'指示新添加的成像装置20的当前安装状态。由平面图像20a'指示的安装状态不同于候选状态。由于这个原因,平面图像20a'的显示形式变为不一致形式。
在步骤S160中,用户利用显示单元13a上的显示内容将新添加的成像装置20移动到候选位置并使姿势与候选姿势协调。然后,用户执行决定安装状态的操作。当执行这个操作时,建议侧控制单元14判定成像装置20的当前安装状态是否与候选状态一致。当当前安装状态与候选状态一致时,建议侧控制单元14将平面图像的显示形式改变为一致形式。当成像装置20的当前安装状态不同于候选状态时,建议侧控制单元14将平面图像的显示形式保持为不一致形式。此外,当成像装置20的当前安装状态与候选状态一致时,建议侧控制单元14可以自动地判定安装状态,并且可以将显示形式改变为一致形式。此外,当当前安装状态与候选状态一致时,建议侧控制单元14可以输出任何音频(例如,警告声音)。
在步骤S170中,建议侧控制单元14判定是否安装了N个成像装置20并且其安装状态是否与候选状态一致。当判定这个条件被满足时,建议侧控制单元14结束该处理。当判定这个条件不满足时,该处理返回到步骤S130。
(2-4-2.建议环形多视点成像阵型的处理的另一个例子)
在上述例子中,当用户只安装在构成环形多视点成像阵型的成像装置20中的一些成像装置20时,处理启动。在这个例子中,用户预先安装构成环形多视点成像阵型的数量的成像装置20。当然,用户可以在以后安装更多的成像装置20。
首先,用户安装构成环形多视点成像阵型的数量的成像装置20并接通其电源开关。成像装置20的安装状态优选地在考虑环形多视点成像阵型的情况下确定,但是也可以在考虑任何阵型的情况下确定。在图12中示出了安装状态的例子。在这个例子中,围绕对象30安装了八个成像装置20,并且成像装置20的所有光轴40都朝向对象30。此外,对象30和各个成像装置20之间的距离基本上是相同的。
随后,在步骤S200和S210中,建议侧控制单元14执行与步骤S100相同的处理。示意性地,建议侧控制单元14检测安装的成像装置20,并计算成像装置20的当前安装状态。此外,建议侧控制单元14还指定被摄体。此外,建议侧控制单元14建议成像装置20的当前安装状态。此外,建议侧控制单元14将环形多视点成像阵型确定为成像阵型,并且确定八为成像装置的数量。
在步骤S220中,建议侧控制单元14基于成像装置20的成像阵型和数量(八)来确定成像装置20的候选状态(布置候选)。具体处理内容与步骤S110的处理内容相同。
在步骤S230中,建议侧控制单元14建议成像装置20的候选状态。具体处理内容与步骤S120的处理内容相同。在图13中示出了显示例子。在这个例子中,显示了平面图像20a'和20b、线条图像20c和被摄体图像30a。平面图像20a'指示当前安装状态,并且平面图像20b指示候选状态。平面图像20a'和平面图像20b以不同的形式显示。此外,由于由平面图像20a'指示的安装状态都不同于候选状态,因此安装状态以不一致形式显示。此外,在上述环形多视点成像阵型中,每个成像装置20的视野角都可以连同每个平面图像一起显示。
(2-4-3.建议串联形多视点成像阵型的处理的例子)
接着,将描述建议串联形多视点成像阵型的处理的例子。具体处理流程遵循在图5中示出的流程图。例如,用户安装成像装置20,如在图14中所示出的。除了每个成像装置20之外,图14还示出了每个成像装置20的45度的视野角。另一方面,建议侧控制单元14通过执行步骤S10至S30的处理来显示例如在图15中示出的图像。在这个例子中,显示了指示成像装置20的当前安装状态的平面图像20a和20a'、和指示成像装置20的候选状态的平面图像20b。此外,还显示了指示成像装置20的视野角的视野角图像45a、45a'和45b。平面图像20a以一致形式被显示,并且平面图像20a'以不一致形式被显示。视野角图像45a和45a'指示在成像装置20的当前安装状态中的视野角,并且视野角图像45b指示在成像装置20的候选状态中的视野角。因此,用户可以确认在当前安装状态中的视野角的重叠状态和在候选状态中的视野角的重叠状态。
(2-4-4.建议360度全景成像阵型的处理的例子)
接着,将描述建议360度成像阵型的处理的例子。具体处理流程遵循在图5中示出的流程图。例如,用户安装一个成像装置20或多个成像装置20。另一方面,建议侧控制单元14通过执行步骤S10至S30的处理来显示例如在图16中示出的图像。在这个例子中,显示了指示成像装置20的当前安装状态的平面图像20a和指示成像装置20的候选状态的平面图像20b。此外,还显示了指示成像装置20的视野角的视野角图像45a和45b。视野角图像45a指示在成像装置20的当前安装状态中的视野角,并且视野角图像45b指示在成像装置20的候选状态中的视野角。因此,用户可以确认在当前安装状态中的视野角的重叠状态和在候选状态中的视野角的重叠状态。
(2-4-5.建议堆成像阵型的处理的例子)
接着,将描述建议堆成像阵型的处理的例子。具体处理流程遵循在图5中示出的流程图。例如,用户安装一个成像装置20或多个成像装置20。另一方面,建议侧控制单元14通过执行步骤S10至S30的处理来显示例如在图17中示出的图像。在这个例子中,显示了指示成像装置20的当前安装状态的背面图像20f和20f'和指示成像装置20的候选状态的背面图像20g。由背面图像20f指示的安装状态与候选状态一致,并且由背面图像20f'指示的安装状态不同于候选状态。背面图像20f和20f'以不同的形式(例如,颜色编码)显示。在图17中,背面图像20f和20f'的显示颜色之间的差异通过阴影的存在或不存在来表示。
2-5.各种显示例子
在上述2.4中已经描述了用于每个成像阵型的由信息处理装置10执行的处理的例子。此外,已经示出了每个处理的显示例子。但是,显示例子不限于上述例子。因此,将在2.5中描述各种显示例子。这些显示例子当然也适用于任何上述成像阵型。
(2-5-1.建议正面图像的例子)
建议侧控制单元14可以利用成像装置20的正面图像来显示当前安装状态和候选状态。在图18中示出了显示例子。在这个例子中,显示了指示成像装置20的当前安装状态的正面图像20d和20d'、以及指示成像装置20的候选状态的正面图像20e。由正面图像20d指示的安装状态与候选状态一致,并且由正面图像20d'指示的安装状态不同于候选状态。正面图像20d和正面图像20d'以颜色编码的方式显示。在图18中,正面图像20d和20d'的显示颜色之间的差异通过阴影的存在或不存在来表示。在这个例子中清楚的是,建议侧控制单元14建议正面图像,因此用户可以容易地理解成像装置20的当前安装姿势和候选姿势之间的差异。
(2-5-2.只建议候选状态的例子)
在每个上述例子中,都已描述了当前安装状态和候选状态两者。但是,当用户至少知道候选状态时,用户可以利用候选状态作为参考来安装成像装置20。因此,建议侧控制单元14可以只建议候选状态。在图19中示出了显示例子。在这个例子中,在建议上述环形多视点成像阵型的例子中,当前安装状态的显示被省略。在这个例子中,用户可以利用候选状态作为参考来以环形多视点成像阵型安装成像装置20。
(2-5-3.显示捕获图像的例子)
为用户显示由成像装置20捕获的捕获图像(图片)是优选的,因为用户可以理解捕获图像的重叠状态。因此,当建议成像装置20的候选状态时,建议侧控制单元14优选地显示成像装置20的捕获图像。此外,建议侧控制单元14优选地显示与当前安装状态关联的各个捕获图像,使得用户可以容易地理解哪些被显示的捕获图像对应于哪些成像装置20。在图20中示出了显示例子。在这个例子中,显示单元13a被划分为右侧和左侧部分,使得左侧显示区域用作二维图显示区域13a-1并且右侧显示区域用作捕获图像显示区域13a-2。此外,指示当前安装状态的平面图像20a'、指示候选状态的平面图像20b等被显示在二维图显示区域13a-1中,并且捕获图像被显示在捕获图像显示区域13a-2中。在捕获图像显示区域13a-2中,捕获图像以垂直的方向进行布置。
在这个例子中,在二维图显示区域13a-1中,平面图像被显示为环形多视点成像阵型的显示例子。此外,建议侧控制单元14可以使平面图像单元20a'的布置序列与捕获图像的布置序列一致,以便将当前安装状态与捕获图像关联。例如,建议侧控制单元14将平面图像20a'中的一个平面图像20a'(例如,平面图像20a'中在最靠近显示单元13a的上端的位置处显示的平面图像)设为标准。此外,建议侧控制单元14从用作标准的平面图像20a'开始沿顺时针方向赋予每个平面图像20a'序列号。然后,建议侧控制单元14根据赋予每个成像装置20的平面图像20a'的序列号从捕获图像显示区域13a-2的上端开始显示成像装置20的捕获图像。建议侧控制单元14可以以不同于其它平面图像20a'的形式(例如,颜色编码)显示用作标准的平面图像20a'。
例如,当平面图像20a'-1至20a'-3分别对应于成像装置21至23时,建议侧控制单元14可以将平面图像20a'-1设置为标准。然后,建议侧控制单元14可以在捕获图像显示区域13a-2的上端处显示成像装置21的捕获图像,在从顶部起的第二位置处显示成像装置22的捕获图像,并且在从顶部起的第三位置处显示成像装置23的捕获图像。上述标准和序列号可以由用户来选择。
此外,建议侧控制单元14可以根据信息处理装置10的安装状态改变每个区域的显示内容。这里,信息处理装置10的安装状态是例如包括安装位置和安装姿势的概念。信息处理装置10的安装姿势是例如包括信息处理装置10的方向(在信息处理装置10的纵向方向上延伸的矢量的方向)的概念。
即,建议侧控制单元14可以以根据信息处理装置10的当前安装状态的形式建议当前安装状态和候选状态。这里,当信息处理装置10具有与位置检测单元34相同的功能时,信息处理装置10的当前安装状态可以被检测到。
例如,当成像装置23的安装位置最靠近信息处理装置10的当前位置时,建议侧控制单元14可以将指示成像装置23的当前安装状态的平面图像20a'-3设置为标准。在这种情况下,平面图像20a'-3以不同于其它平面图像20a'的形式被显示。此外,从平面图像20a'-3开始沿顺时针方向赋予每个平面图像20a'序列号。此外,成像装置23的捕获图像被显示在捕获图像显示区域13a-2的最上部。此外,建议侧控制单元14可以改变平面图像20a'和20b的布置,使得平面图像20a'-3被显示在最靠近显示单元13a的上端的位置处。
此外,当建议侧控制单元14检测信息处理装置10的方向时,在信息处理装置10朝向的方向上,成像装置20中最靠近信息处理装置10的成像装置可以被设置为标准。
此外,建议侧控制单元14可以显示关于每个成像装置20的标识信息(例如,产品名称或ID)或者上述捕获图像和平面图像20a'的边上的序列号。此外,当建议侧控制单元14将显示单元13a划分为多个显示区域并在显示区域中显示不同信息时,响应于用户的操作等,在这些显示区域中显示的信息可以被同时显示,或者只有在一个显示区域中显示的信息可以被显示。这种信息可以被切换。
在图21中示出了另一个例子。在这个例子中,显示单元13a被上下划分,使得上部显示区域用作背面图显示区域13a-3并且下部显示区域用作捕获图像显示区域13a-4。指示成像装置20的当前安装状态的背面图像20m-1、20m'-2和20m'-3以及指示成像装置20的候选状态的背面图像20e'被显示在背面图显示区域13a-3中。此外,成像装置20的捕获图像被显示在捕获图像显示区域13a-4中。由背面图像20m-1指示的安装状态与候选状态一致,并且由背面图像20m'-2和20m'-3指示的安装状态不同于候选状态。背面图像20m-1和背面图像20m'-2及20m'-3以彩色编码方式显示。在图21中,背面图像20m-1和背面图像20m'-2及20m'-3的显示颜色之间的差异通过阴影的存在或不存在来表示。
此外,建议侧控制单元14可以显示与当前安装状态关联的捕获图像。例如,在这个例子中,当背面图像20m-1指示成像装置21的当前安装状态时,建议侧控制单元14在紧接着背面图像20m-1的下方显示成像装置21的捕获图像。同样,当背面图像20m'-2指示成像装置22的当前安装状态时,建议侧控制单元14在紧接着背面图像20m'-2的下方显示成像装置22的捕获图像。当背面图像20m'-3指示成像装置23的当前安装状态时,建议侧控制单元14在紧接着背面图像20m'-3的下方显示成像装置23的捕获图像。
在图22中示出了另一个显示例子。在这个显示例子中,建议侧控制单元14通过建议用于使成像装置20的当前安装状态与候选状态协调的调整内容来建议候选状态。具体而言,建议侧控制单元14显示成像装置21至29的捕获图像。同时,建议侧控制单元14显示指示用于使成像装置23、24、26和28的当前安装状态与候选状态协调的调整内容的箭头图像20h-3、20h-4、20h-6和20h-8,使得箭头图像20h-3、20h-4、20h-6和20h-8被叠加在成像装置23、24、26和28的捕获图像上。例如,参考箭头图像20h-3,用户可以通过将成像装置23绕光轴旋转到左侧来使成像装置23的安装状态与候选状态协调。当然,这是例子,并且箭头图像可以被叠加在其它捕获图像上。
此外,建议侧控制单元14可以将关于成像装置20的标识信息赋予捕获图像,使得用户可以容易地理解被显示的捕获图像对应于哪些成像装置20。此外,如在图20的例子中,建议侧控制单元14可以预先赋予每个成像装置20序列号,并根据该序列号显示捕获图像。在这种情况下,建议侧控制单元14优选地显示每个成像装置20以及与其对照的序列号,使得用户可以理解赋予每个成像装置20的序列号。
在图23中示出了另一个显示例子。在上述例子中,特别地,在图20和22的显示例子中,显示了相对大量的捕获图像。但是,当信息处理装置10是例如智能电话时,显示单元13a小,因此在一些情况下不容易同时显示许多捕获图像。另一方面,只要用户可以同时查看仅仅期望的捕获图像,那么在很多情况下就没有问题。因此,在这个显示例子中,当用户选择一个平面图像20a'时,建议侧控制单元14只显示与选定平面图像20a'和在这个平面图像20a'的两侧的平面图像20a'对应的捕获图像。
因此,用户可以容易地理解期望的捕获图像之间的重叠状态。此外,作为允许用户选择成像装置20的方法,例如,可以举例说明允许用户触摸平面图像20a'的方法。当然,本公开的实施例不限于这种方法。例如,当平面图像20a'-1至20a'-3对应于成像装置21至23并且用户触摸平面图像20a'-2时,建议侧控制单元14显示成像装置21至23的捕获图像。捕获图像优选地被显示在对应的平面图像20a'的附近。
此外,建议侧控制单元14可以只显示由用户选择的成像装置20的捕获图像。在这种情况下,用户优选地被允许选择多个成像装置20(例如,相邻的成像装置20),并且建议侧控制单元14优选地显示由用户同时选择的捕获图像。这是因为用户可以容易地理解捕获图像之间的重叠状态。
在图24中示出了另一个显示例子。在这个显示例子中,建议侧控制单元14将指示信息处理装置10的当前安装状态的图标图像10a添加到在图20中示出的显示例子。具体而言,建议侧控制单元14在二维图显示区域13a-1中显示图标图像10a。图标图像10a的显示位置对应于信息处理装置10的当前安装位置,并且显示姿势对应于信息处理装置10的当前安装姿势。因此,由于用户可以容易地理解每个成像装置20和信息处理装置10之间的位置关系,因此成像装置20的当前安装状态可以容易地匹配显示单元13a的显示内容。即,用户可以很容易地理解每个平面图像20a'对应于哪个成像装置20。因此,用户可以很容易地使每个成像装置20的安装状态与候选状态协调。
(从多个视点显示成像装置的例子)
在上述例子中的每一个中,只显示了在每个成像装置20的平面图像、正面图像和背面图像中的一种类型的图像,但是,可以同时显示多种类型的图像。在图25中示出了显示例子。在这个例子中,显示单元13a被上下划分。平面图像20a-1、20a'-2、20a'-3、20b-2和20b-3以及视野角图像45a-1、45a'-2、45a'-3、45b-2和45b-3被显示在上部显示区域13a-5中。背面图像20m-1、20m'-2、20m'-3、20e'-2和20e'-3被显示在下部显示区域13a-6中。
此外,平面图像20a-1和背面图像20m-1指示成像装置21的当前安装状态,并且视野角图像45a-1指示在成像装置21的当前安装状态中的视野角。成像装置21的当前安装状态与其候选状态一致。平面图像20a'-2和背面图像20m'-2指示成像装置22的当前安装状态,并且视野角图像45a'-2指示在成像装置22的当前安装状态中的视野角。成像装置22的当前安装状态不同于其候选状态。平面图像20a'-3和背面图像20m'-3指示成像装置23的当前安装状态,并且视野角图像45a'-3指示在成像装置23的当前安装状态中的视野角。成像装置23的当前安装状态不同于其候选状态。因此,平面图像20a-1和背面图像20m-1、平面图像20a'-2和20a'-3以及背面图像20m'-2和20m'-3以颜色编码方式显示。在图25中,图像的显示颜色之间的差异通过阴影的存在或不存在来表示。
此外,平面图像20b-2和背面图像20e'-2指示相同的候选状态,并且视野角图像45b-2指示在候选状态中的视野角。平面图像20b-3和背面图像20e'-3指示相同的候选状态,并且视野角图像45b-3指示在候选状态中的视野角。在这个例子中,由于用户可以同时理解成像装置20的候选位置和候选姿势,因此用户可以容易地使成像装置20的安装状态与候选状态协调。
(可听地指导候选状态的例子)
接着,将描述可听地指导候选状态的例子。在图26中示出了显示例子。在这个例子中,建议侧控制单元14显示捕获图像,如在图22中所示。具体处理内容如在图22的例子中所描述的。此外,建议侧控制单元14接收由用户执行的捕获图像选择操作(例如,触摸捕获图像的操作),并且以强调方式显示由用户选择的捕获图像。例如,当选择成像装置24的捕获图像时,建议侧控制单元14以强调方式显示成像装置24的捕获图像。此外,建议侧控制单元14可听地输出由用户选择的捕获图像,即,用于使成像装置20的当前安装状态与候选状态协调的调整内容。例如,当选择成像装置24时,建议侧控制单元14输出音频20j-4:“稍微往左一些”。通过这个处理,用户可以容易地使成像装置20的当前安装状态与候选状态协调。
(3维地显示候选状态的例子)
在显示例子中,建议侧控制单元14利用成像装置20的3维图像(成像装置20的鸟瞰图像)显示成像装置20的候选状态。即,在上述例子中,成像装置20的当前安装状态和候选状态被显示为二维图像。但是在这个例子中,成像装置20的状态被显示为3维图像。显示3维图像是通过例如成像3D目录来实现的。
具体而言,建议侧控制单元14定义虚拟空间并在虚拟空间中布置指示每个成像装置20的当前安装状态的3维图像和指示其候选状态的3维图像。这里,每个成像装置20的3维图像都可以被预先存储在信息处理装置10中,或者可以基于当前安装状态和候选状态进行实时地计算。然后,建议侧控制单元14在虚拟空间中从用户的期望视点显示每个3维图像。此外,当用户改变视点(或角度)时,建议侧控制单元14在虚拟空间中从改变的视点(或角度)显示每个3维图像。这里,视点改变操作的例子包括用手指轻拂(flick)触摸面板的操作和鼠标拖动操作。在图27和28中示出了显示例子。
即,例如,如在图27中所示出的,建议侧控制单元14以叠加的方式显示指示成像装置21至23的当前安装状态的3维图像20j-1至20j-3和指示成像装置21至23的候选状态的3维图像20k。建议侧控制单元14优选地以不同于3维图像20j-1至20j-3的形式显示3维图像20k。
当用户执行视点改变操作时,例如,如在图28中示出的,建议侧控制单元14在虚拟空间中从改变的视点显示3维图像。在图28中示出的例子中,建议侧控制单元14以叠加的方式显示指示成像装置24至26的当前安装状态的3维图像20j-4至20j-6和指示成像装置24至26的候选状态的3维图像20k。因此,建议侧控制单元14可以无缝地显示从不同视点观看的3维图像。此外,3维图像可以比二维图像(平面图像、正面图像、背面图像等)表达更多种的安装状态。即,3维图像可以表达安装位置和安装姿势两者。因此,用户可以容易地理解成像装置20的候选状态。
(3维地显示候选状态的修改例子)
在修改例子中,用户通过利用信息处理装置10为成像装置20成像来获取捕获图像(下文也称为“安装状态建议捕获图像”)。然后,建议侧控制单元14将指示成像装置20的候选状态的3维图像叠加在安装状态建议捕获图像上。这里,3维图像的显示位置对应于候选位置,并且其显示姿势对应于候选姿势。
具体显示例子与上述例子相同。例如,在图27示出的例子中,用户为成像装置21至23成像,并且在安装状态建议捕获图像中绘出了指示成像装置21至23的当前安装状态的3维图像20j-1至20j-3。此外,指示成像装置21至23的候选状态的3维图像20k被叠加在安装状态建议捕获图像上。建议侧控制单元14优选地以不同于3维图像20j-1至20j-3的形式显示3维图像20k。
另一方面,在图28示出的例子中,用户为成像装置24至26成像,并且在安装状态建议捕获图像中绘出了成像装置24至26的3维图像20j-4至20j-6。此外,指示成像装置24至26的候选状态的3维图像20k被叠加在安装状态建议捕获图像上。3维图像可以比二维图像(平面图像、正面图像、背面图像等)表达更多种的安装状态。即,3维图像可以表达安装位置和安装姿势两者。因此,通过为期望的成像装置20成像,用户可以容易地理解成像装置20的候选状态。
此外,这些例子适用于所谓的可穿戴装置。当可穿戴装置被描述为其中电子装置被安装在眼镜上的例子时,眼镜的玻璃表面用作显示单元13a。用户通过眼镜的玻璃观看每个成像装置20。即,成像装置20的当前安装状态被显示在眼镜的玻璃表面上。建议侧控制单元14在眼镜的玻璃表面上(透明地)显示指示成像装置20的候选状态的3维图像。因此,当用户通过眼镜观看成像装置20时,用户可以理解成像装置20的候选状态,因此可以容易地使成像装置20的安装状态与候选状态协调。在这个处理中,候选状态的显示是通过为所谓的增强现实(AR)成像来实现的。此外,根据这个处理,即使当成像装置20没有被打开时,用户也可以理解候选状态。
建议侧控制单元14可以选择任何上述显示例子(建议形式)并且以选定的建议形式显示候选状态、当前安装状态等,或者可以以由用户选择的建议形式显示候选状态、当前安装状态等。当用户被允许选择建议形式时,建议侧控制单元14可以预先向每个建议形式赋予标识信息并且显示标识信息的列表。用户可以从该列表中选择期望的建议形式。此外,建议侧控制单元14可以根据显示单元13a的布局或纵横比来选择建议形式。例如,当信息处理装置10是智能电话或智能平板时,显示单元13a是例如矩形的。然后,由于显示单元13a被用在垂直长状态(其中较长边是垂直朝向的状态)和水平长状态(其中较长边是水平朝向的状态)中的一个中,因此纵横比在每个状态中不同。例如,当显示单元13a具有垂直长纵横比时,建议侧控制单元14可以显示当前安装状态和候选状态中的至少一个,如在图8至10、13、15至19、27和28中所示出的。此外,当显示单元13a具有水平长纵横比时,建议侧控制单元14可以显示更多种信息,如在图20至26中示出的。此外,建议侧控制单元14可以根据成像阵型切换建议形式。此外,建议侧控制单元14可以根据信息处理装置10是否参与成像来切换建议形式(其中信息处理装置10参与的例子将在第二实施例中进行描述)。
此外,建议侧控制单元14可以任意地组合上述显示例子。例如,建议侧控制单元14可以甚至在不同的显示例子中建议上述箭头图像或音频。更具体而言,例如,建议侧控制单元14可以在图20等中示出的平面图像20a的边上显示箭头图像,或者可以在由用户选择的平面图像20a的边上显示箭头图像。当用户选择一个平面图像20a时,建议侧控制单元14可以输出上述音频。此外,建议侧控制单元14可以将箭头图像叠加在图20等中示出的捕获图像上。此外,建议侧控制单元14可以在每个显示例子中显示指示调整内容的字符图像。此外,建议侧控制单元14可以按比例缩放和显示每个上述显示例子中的至少一部分。
<3.第二实施例(信息处理装置参与成像的例子)>
在第一实施例中,已经描述了信息处理装置10不参与成像的例子。在第二实施例中,将描述信息处理装置10参与成像的例子,即,信息处理装置用作成像装置的例子。
(3-1.成像装置的配置)
首先,将参考图29描述根据第二实施例的成像装置50的配置。在成像装置50中,如在图29中所示出的,成像单元15被添加到信息处理装置10。成像单元15可以利用例如类似于成像装置20的透镜200、透镜驱动电路201、图像传感器202、AFE电路203和图像处理电路204的配置的硬件配置来实现。成像单元15生成捕获图像并且将捕获图像输出到建议侧控制单元14。
(3-2.由成像装置执行的处理的例子)
接着,将描述由成像装置50执行的处理的例子。由于成像装置50具有与信息处理装置10的配置共同的配置,因此成像装置50可以执行与第一实施例的处理相同的处理。附加地,在第二实施例中,可以实现以下的显示。
即,建议侧控制单元14可以将捕获图像叠加在当前捕获图像(即,当成像装置50的安装状态变为候选状态时被捕获的捕获图像)上。在图30中示出了显示例子。
在图30中,通过实线指示的捕获图像60表示当前正在被成像装置50捕获的捕获图像,并且通过虚线指示的捕获图像表示当成像装置50的安装状态变为候选状态时捕获的捕获图像。在这个例子中,用户可以容易地理解成像装置50如何从当前安装状态转移,以使安装状态与候选状态协调。此外,如在图30中所示出的,除了当前安装位置和安装姿势之外,在显示单元13a上还可以显示候选位置和候选姿势。这些值可以是全球使用的值(诸如纬度和经度),或者可以是来自给定标准的距离(米等)。也可以用任何值作为候选姿势。例如,光轴的方向的矢量分量可以被表示为xyz坐标值或极座标值。
此外,这个例子还适用于所谓的可穿戴装置。当可穿戴装置被描述为其中电子装置被安装在眼镜上的例子时,眼镜的玻璃表面用作显示单元13a。用户通过眼镜的玻璃观看周围的景象。当成像装置50的安装状态变为候选状态时,建议侧控制单元14在眼镜的玻璃表面上(透明地)显示由用户观看的景象。因此,当用户通过眼镜观看景象时,用户可以理解成像装置50的候选状态,因此可以容易地使成像装置50的安装状态与候选状态协调。在这个处理中,候选状态的显示是通过为所谓的增强现实(AR)成像来实现的。此外,本处理例子还适用于其中信息处理装置10不参与成像的情况。
如上所述,根据上述实施例,由于建议侧控制单元14执行控制,使得建议了多个成像装置20的候选状态,因此用户可以容易地和交互地理解多个成像装置20的候选状态。因此,用户可以容易地使每个成像装置20的安装状态与候选状态协调。
此外,由于建议侧控制单元14执行控制,使得建议了成像装置20的当前安装状态和候选状态,因此用户可以容易地将当前安装状态与候选状态对比。因此,用户可以更容易地使每个成像装置20的安装状态与候选状态协调。
此外,由于建议侧控制单元14执行控制,使得以不同形式建议了与候选状态一致的安装状态和当前安装状态中不同于候选状态的安装状态,因此用户可以容易地理解安装状态不同于候选状态的成像装置20。因此,用户可以更容易地使多个成像装置20的安装状态与候选状态协调。
此外,由于建议侧控制单元14执行控制,使得在每个成像装置20的安装位置和安装姿势之间建议了至少一个候选,因此用户可以理解更详细的候选状态。
此外,由于建议侧控制单元14执行控制,使得建议了成像装置20的视野角,因此用户可以在理解成像装置20的视野角的同时调整安装状态。
此外,由于建议侧控制单元14执行控制,使得建议了成像装置20的捕获图像和候选状态,因此用户可以在确认捕获图像的重叠状态的同时调整成像装置20的安装状态。
此外,由于建议侧控制单元14建议了调整内容来使成像装置20的当前安装状态与候选状态协调,因此用户可以更容易地使成像装置20的安装状态与候选状态协调。
此外,由于建议侧控制单元14执行控制,使得建议了信息处理装置10的当前安装状态和候选状态,因此用户可以容易地使成像装置20的当前安装状态与显示内容匹配。
此外,由于建议侧控制单元14执行控制,使得以与信息处理装置10的当前安装状态一致的形式建议了候选状态,因此用户可以容易地使成像装置20的当前安装状态与显示内容匹配。
此外,由于建议侧控制单元14执行控制,使得候选状态被叠加在显示表面(例如,上述玻璃表面)上显示的成像装置的图像上,因此用户可以容易地将当前状态与候选状态对比。
此外,由于建议侧控制单元14能够在候选状态的建议形式之间切换,因此用户可以理解各种建议形式的候选状态。
此外,由于建议侧控制单元14基于成像装置20的当前安装状态计算候选状态,因此建议侧控制单元14可以更精确地计算候选状态。
此外,建议侧控制单元14基于成像装置20的当前安装状态来确定作为用于多个成像装置的阵型的候选的候选阵型,并且基于该候选阵型计算候选状态。因此,建议侧控制单元14可以更精确地计算候选状态。
以上已参考附图详细地描述了本公开的优选实施例,但是本公开的技术范围不限于所述例子。对本公开的领域的技术人员清楚的是,在权利要求所描述的技术精神和本质的范围内,可以做出各种修改例子和修正例子,并且这些修改例子和修正例子当然被视为属于本公开的技术范围。
例如,在上述实施例中,已经建议了候选状态,但是本技术的实施例不限于这些例子。例如,当当前安装状态不同于候选状态时,可以执行给出给定警告的简单处理(执行可听见的通知)。
此外,本技术也可以被配置为如下。
(1)
一种信息处理装置,包括:
获取单元,配置为获取候选状态,其中候选状态是用于多个成像装置的安装状态的候选;及
控制单元,配置为以建议候选状态的方式执行控制。
(2)
根据(1)所述的信息处理装置,其中所述控制单元以建议成像装置的当前安装状态和候选状态的方式执行控制。
(3)
根据(2)所述的信息处理装置,其中所述控制单元以用不同的形式建议与候选状态一致的安装状态和在当前安装状态之中不同于候选状态的安装状态的方式执行控制。
(4)
根据(1)至(3)中任何一项所述的信息处理装置,其中所述控制单元以从每个成像装置的安装位置和安装姿势之中建议至少一个候选的方式执行控制。
(5)
根据(1)至(4)中任何一项所述的信息处理装置,其中所述控制单元以建议成像装置的视野角的方式执行控制。
(6)
根据(1)至(5)中任何一项所述的信息处理装置,其中所述控制单元以建议由成像装置捕获的捕获图像和候选状态的方式执行控制。
(7)
根据(1)至(6)中任何一项所述的信息处理装置,其中所述控制单元通过建议调整内容来建议候选状态,以使成像装置的当前安装状态与候选状态协调。
(8)
根据(1)至(7)中任何一项所述的信息处理装置,其中所述控制单元以建议信息处理装置的当前安装状态和候选状态的方式执行控制。
(9)
根据(1)至(8)中任何一项所述的信息处理装置,其中所述控制单元以用与信息处理装置的当前安装状态一致的形式建议执行候选状态的方式执行控制。
(10)
根据(1)至(9)中任何一项所述的信息处理装置,其中所述控制单元以候选状态被叠加在显示表面上显示的成像装置的图像上的方式执行控制。
(11)
根据(1)至(10)中任何一项所述的信息处理装置,其中所述控制单元能够切换候选状态的建议形式。
(12)
根据(1)至(11)中任何一项所述的信息处理装置,其中所述获取单元基于成像装置的当前安装状态计算候选状态。
(13)
根据(12)所述的信息处理装置,其中所述获取单元基于成像装置的当前安装状态确定候选阵型,并且基于候选阵型计算候选状态,其中候选阵型是用于所述多个成像装置的阵型的候选。
(14)
一种成像装置,包括:
获取单元,配置为获取候选状态,其中候选状态是用于多个成像装置的安装状态的候选;及
控制单元,配置为以建议候选状态的方式执行控制。
(15)
一种显示控制方法,包括:
获取候选状态,其中候选状态是用于多个成像装置的安装状态的候选;及
以建议候选状态的方式执行控制。
(16)
一种程序,使得计算机实现:
获取候选状态的获取功能,其中候选状态是用于多个成像装置的安装状态的候选;及
以建议候选状态的方式执行控制的控制功能。
(17)
一种系统,包括:
电路,配置为
基于多个成像装置中的每一个的当前安装状态之间的关系,建议与所述多个成像装置中的每一个对应的候选安装状态;及
基于多个成像装置中的每一个的当前安装状态和确定的候选安装状态,输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
(18)
如(17)所述的系统,其中
安装状态对应于所述多个成像装置中的每一个的位置和安装姿势中的至少一个。
(19)
如(17)至(18)中任何一项所述的系统,其中
所述安装姿势与所述多个成像装置中的每一个的成像表面的光轴的方向和所述多个成像装置中的每一个相对于光轴的旋转角度对应。
(20)
如(17)至(19)中任何一项所述的系统,其中
所述系统被配置为经由与所述多个成像装置中的每一个的通信链路从所述多个成像装置中的每一个获取指示当前安装状态的信息。
(21)
如(17)至(20)中任何一项所述的系统,其中所述电路被配置为:
获取从所述多个成像装置中的每一个输出的传感器信息;及
基于获取的传感器信息计算指示所述多个成像装置中的每一个的当前安装状态的信息。
(22)
如(17)至(21)中任何一项所述的系统,其中所述电路被配置为:
获取由所述多个成像装置中的每一个捕获的图像数据;及
基于获取的图像数据计算指示当前安装状态的信息。
(23)
如(17)至(22)中任何一项所述的系统,其中
所述电路被配置为基于与所述多个成像装置中每一个对应的成像模式来确定候选安装状态。
(24)
如(23)所述的系统,其中
所述成像模式是串联形多视点成像模式。
(25)
如(23)所述的系统,其中
所述成像模式是360度全景成像模式。
(26)
如(23)所述的系统,其中
所述成像模式是环形多视点成像模式。
(27)
如(23)所述的系统,其中
所述电路被配置为基于所述多个成像装置中的每一个的当前安装状态来确定成像模式。
(28)
如(17)至(27)中任何一项所述的系统,其中
所述电路被配置为基于所述多个成像装置中的每一个的当前安装状态之间的关系来计算候选安装状态。
(29)
如(17)至(28)中任何一项所述的系统,其中所述电路被配置为:
确定所述多个成像装置的数量;及
基于确定的所述多个成像装置的数量,确定候选安装状态。
(30)
如(17)至(29)中任何一项所述的系统,其中
所述电路被配置为控制显示器以显示指示与所述多个成像装置中的至少一个对应的建议安装状态的信息。
(31)
如(17)至(30)中任何一项所述的系统,其中
所述电路被配置为输出与所述多个成像装置中的每一个对应的建议候选安装状态。
(32)
如(17)至(31)中任何一项所述的系统,其中
所述电路被配置为输出与所述多个成像装置中的每一个对应的建议候选安装状态和指示所述多个成像装置中的每一个的当前安装状态的信息。
(33)
如(17)至(32)中任何一项所述的系统,其中
所述电路被配置为以第一显示形式输出指示建议候选安装状态的信息和以不同于第一显示形式的第二显示形式输出指示当前安装状态的信息。
(34)
如(17)至(33)中任何一项所述的系统,其中
所述电路被配置为输出所述多个成像装置中的至少一个的推荐安装姿势。
(35)
权利要求1所述的系统,其中
所述电路被配置为输出所述多个成像装置中的至少一个的推荐视野角。
(36)
如(17)至(35)中任何一项所述的系统,其中
所述电路被配置为输出显示信息,所述显示信息包括与建议候选安装状态对应的第一图像,其中第一图像与和所述多个成像装置中的至少一个的当前安装状态对应的第二图像叠加。
(37)
如(17)至(36)中任何一项所述的系统,其中
所述电路被配置为控制显示器以显示与所述多个成像装置中的每一个对应的建议候选安装状态、指示所述多个成像装置中的每一个的当前安装状态的信息、以及由所述多个图像捕获装置中的每一个捕获的图像数据。
(38)
如(17)至(37)中任何一项所述的系统,其中
所述电路被配置为控制显示器以显示与候选安装状态对应的第一图像、以及由所述多个图像捕获装置中的每一个捕获的图像数据,其中第一图像与和所述多个成像装置中的至少一个的当前安装状态对应的第二图像叠加。
(39)
如(17)至(38)中任何一项所述的系统,还包括:
显示器,其中
所述电路被配置为控制显示器以显示指示建议候选安装状态的信息。
(40)
如(17)至(39)中任何一项所述的系统,其中
所述电路被配置为将建议的安装输出到所述多个成像装置中的至少一个。
(41)
如(17)至(40)中任何一项所述的系统,其中所述电路被配置为:
检测新的成像装置的安装;及
基于所述检测确定新的候选安装状态以及输出新的建议候选安装状态。
(42)
如(17)至(41)中任何一项所述的系统,其中所述电路被配置为:
从所述多个图像捕获装置中的每一个获取图像数据;及
基于获取的图像数据生成合成图像。
(43)
一种包括计算机程序指令的非暂态计算机可读介质,其中当所述计算机程序指令被系统执行时使得系统:
基于多个成像装置中的每一个的当前安装状态之间的关系,建议与所述多个成像装置中的每一个对应的候选安装状态;及
基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态,输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
(44)
一种方法,包括:
基于多个成像装置中的每一个的当前安装状态之间的关系,通过电路建议与所述多个成像装置中的每一个对应的候选安装状态;及
基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态,通过电路输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
参考符号列表
10信息处理装置
11输入单元
12通信单元
13建议单元
13a显示单元
13b音频输出单元
14建议控制单元
15成像单元
20成像装置
21成像单元
22通信单元
23建议单元
24位置检测单元
25成像侧控制单元
Claims (44)
1.一种信息处理装置,包括:
获取单元,配置为获取候选状态,其中候选状态是用于多个成像装置的安装状态的候选;及
控制单元,配置为以建议候选状态的方式执行控制。
2.如权利要求1所述的信息处理装置,其中所述控制单元以建议成像装置的当前安装状态和候选状态的方式执行控制。
3.如权利要求2所述的信息处理装置,其中所述控制单元以用不同的形式建议与候选状态一致的安装状态和在当前安装状态之中不同于候选状态的安装状态的方式执行控制。
4.如权利要求1所述的信息处理装置,其中所述控制单元以从每个成像装置的安装位置和安装姿势之中建议至少一个候选的方式执行控制。
5.如权利要求1所述的信息处理装置,其中所述控制单元以建议成像装置的视野角的方式执行控制。
6.如权利要求1所述的信息处理装置,其中所述控制单元以建议由成像装置捕获的捕获图像和候选状态的方式执行控制。
7.如权利要求1所述的信息处理装置,其中所述控制单元通过建议调整内容来建议候选状态,以使成像装置的当前安装状态与候选状态协调。
8.如权利要求1所述的信息处理装置,其中所述控制单元以建议信息处理装置的当前安装状态和候选状态的方式执行控制。
9.如权利要求1所述的信息处理装置,其中所述控制单元以用与信息处理装置的当前安装状态一致的形式建议候选状态的方式来执行控制。
10.如权利要求1所述的信息处理装置,其中所述控制单元以候选状态被叠加在显示表面上显示的成像装置的图像上的方式执行控制。
11.如权利要求1所述的信息处理装置,其中所述控制单元能够切换候选状态的建议形式。
12.如权利要求1所述的信息处理装置,其中所述获取单元基于成像装置的当前安装状态计算候选状态。
13.如权利要求12所述的信息处理装置,其中所述获取单元基于成像装置的当前安装状态确定候选阵型,并且基于候选阵型计算候选状态,其中候选阵型是用于所述多个成像装置的阵型的候选。
14.一种成像装置,包括:
获取单元,配置为获取候选状态,其中候选状态是用于多个成像装置的安装状态的候选;及
控制单元,配置为以建议候选状态的方式执行控制。
15.一种显示控制方法,包括:
获取候选状态,其中候选状态是用于多个成像装置的安装状态的候选;及
以建议候选状态的方式执行控制。
16.一种程序,使得计算机实现:
获取候选状态的获取功能,其中候选状态是用于多个成像装置的安装状态的候选;及
以建议候选状态的方式执行控制的控制功能。
17.一种系统,包括:
电路,配置为
基于多个成像装置中的每一个的当前安装状态之间的关系,建议与所述多个成像装置中的每一个对应的候选安装状态;及
基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态,输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
18.如权利要求17所述的系统,其中
安装状态与所述多个成像装置中的每一个的位置和安装姿势中的至少一个对应。
19.如权利要求18所述的系统,其中
所述安装姿势与所述多个成像装置中的每一个的成像表面的光轴的方向和所述多个成像装置中的每一个相对于光轴的旋转角度对应。
20.如权利要求17所述的系统,其中
所述系统被配置为经由与所述多个成像装置中的每一个的通信链路从所述多个成像装置中的每一个获取指示当前安装状态的信息。
21.如权利要求17所述的系统,其中所述电路被配置为:
获取从所述多个成像装置中的每一个输出的传感器信息;及
基于获取的传感器信息计算指示所述多个成像装置中的每一个的当前安装状态的信息。
22.如权利要求17所述的系统,其中所述电路被配置为:
获取由所述多个成像装置中的每一个捕获的图像数据;及
基于获取的图像数据计算指示当前安装状态的信息。
23.如权利要求17所述的系统,其中
所述电路被配置为基于与所述多个成像装置中的每一个对应的成像模式来确定候选安装状态。
24.如权利要求23所述的系统,其中
所述成像模式是串联形多视点成像模式。
25.如权利要求23所述的系统,其中
所述成像模式是360度全景成像模式。
26.如权利要求23所述的系统,其中
所述成像模式是环形多视点成像模式。
27.如权利要求23所述的系统,其中
所述电路被配置为基于所述多个成像装置中的每一个的当前安装状态来确定成像模式。
28.如权利要求17所述的系统,其中
所述电路被配置为基于所述多个成像装置中的每一个的当前安装状态之间的关系来计算候选安装状态。
29.如权利要求17所述的系统,其中所述电路被配置为:
确定所述多个成像装置的数量;及
基于确定的所述多个成像装置的数量确定候选安装状态。
30.如权利要求17所述的系统,其中
所述电路被配置为控制显示器以显示指示与所述多个成像装置中的至少一个对应的建议安装状态的信息。
31.如权利要求17所述的系统,其中
所述电路被配置为输出与所述多个成像装置中的每一个对应的建议候选安装状态。
32.如权利要求17所述的系统,其中
所述电路被配置为输出与所述多个成像装置中的每一个对应的建议候选安装状态和指示所述多个成像装置中的每一个的当前安装状态的信息。
33.如权利要求17所述的系统,其中
所述电路被配置为以第一显示形式输出指示建议候选安装状态的信息和以不同于第一显示形式的第二显示形式输出指示当前安装状态的信息。
34.如权利要求17所述的系统,其中
所述电路被配置为输出所述多个成像装置中的至少一个的推荐安装姿势。
35.如权利要求17所述的系统,其中
所述电路被配置为输出所述多个成像装置中的至少一个的推荐视野角。
36.如权利要求17所述的系统,其中
所述电路被配置为输出显示信息,所述显示信息包括与建议候选安装状态对应的第一图像,其中第一图像与和所述多个成像装置中的至少一个的当前安装状态对应的第二图像叠加。
37.如权利要求17所述的系统,其中
所述电路被配置为控制显示器以显示与所述多个成像装置中的每一个对应的建议候选安装状态、指示所述多个成像装置中的每一个的当前安装状态的信息、以及由所述多个图像捕获装置中的每一个捕获的图像数据。
38.如权利要求17所述的系统,其中
所述电路被配置为控制显示器以显示与候选安装状态对应的第一图像、以及由所述多个图像捕获装置中的每一个捕获的图像数据,其中第一图像与和所述多个成像装置中的至少一个的当前安装状态对应的第二图像叠加。
39.如权利要求17所述的系统,还包括:
显示器,其中
所述电路被配置为控制显示器以显示指示建议候选安装状态的信息。
40.如权利要求17所述的系统,其中
所述电路被配置为将建议的安装输出到所述多个成像装置中的至少一个。
41.如权利要求17所述的系统,其中所述电路被配置为:
检测新的成像装置的安装;及
基于所述检测确定新的候选安装状态并且输出新的建议候选安装状态。
42.如权利要求17所述的系统,其中所述电路被配置为:
从所述多个图像捕获装置中的每一个获取图像数据;及
基于获取的图像数据生成合成图像。
43.一种包括计算机程序指令的非暂态计算机可读介质,其中当所述计算机程序指令被系统执行时使得系统:
基于多个成像装置中的每一个的当前安装状态之间的关系,建议与所述多个成像装置中的每一个对应的候选安装状态;及
基于所述多个成像装置中的每一个的当前安装状态和确定的候选安装状态,输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
44.一种方法,包括:
基于多个成像装置中的每一个的当前安装状态之间的关系,通过电路建议与所述多个成像装置中的每一个对应的候选安装状态;及
基于所述多个成像装置中每一个的当前安装状态和确定的候选安装状态,通过电路输出与所述多个成像装置中的至少一个对应的建议候选安装状态。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013-122989 | 2013-06-11 | ||
JP2013122989A JP6163899B2 (ja) | 2013-06-11 | 2013-06-11 | 情報処理装置、撮像装置、情報処理方法、及びプログラム |
PCT/JP2014/002601 WO2014199564A1 (en) | 2013-06-11 | 2014-05-16 | Information processing device, imaging device, information processing method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105308946A true CN105308946A (zh) | 2016-02-03 |
CN105308946B CN105308946B (zh) | 2019-07-16 |
Family
ID=
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107231550A (zh) * | 2016-03-25 | 2017-10-03 | 卡西欧计算机株式会社 | 图像处理装置、图像处理方法以及计算机可读取的记录介质 |
CN108234900A (zh) * | 2018-02-13 | 2018-06-29 | 深圳市瑞立视多媒体科技有限公司 | 一种摄像机配置方法和装置 |
US11165945B2 (en) | 2016-02-29 | 2021-11-02 | Sony Corporation | Information processing device, method, and multi-camera system |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003047026A (ja) * | 2001-08-02 | 2003-02-14 | Mitsubishi Heavy Ind Ltd | 画像収集システムおよび画像収集用誘導装置 |
JP2003179800A (ja) * | 2001-12-13 | 2003-06-27 | Sony Corp | 多視点画像生成装置、画像処理装置、および方法、並びにコンピュータ・プログラム |
JP2005033329A (ja) * | 2003-07-08 | 2005-02-03 | Citizen Watch Co Ltd | 温度補償型圧電発振器 |
JP2005286619A (ja) * | 2004-03-29 | 2005-10-13 | Matsushita Electric Ind Co Ltd | 監視カメラシステム |
CN101300460A (zh) * | 2005-11-18 | 2008-11-05 | 通腾科技股份有限公司 | 显示交通信息的导航装置 |
US20090033740A1 (en) * | 2007-07-31 | 2009-02-05 | Kddi Corporation | Video method for generating free viewpoint video image using divided local regions |
US20090153650A1 (en) * | 2007-06-18 | 2009-06-18 | Fujifilm Corporation | Camera position recognition system |
CN102782721A (zh) * | 2009-12-24 | 2012-11-14 | 康耐视公司 | 用于相机校准误差的运行时测定的系统和方法 |
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003047026A (ja) * | 2001-08-02 | 2003-02-14 | Mitsubishi Heavy Ind Ltd | 画像収集システムおよび画像収集用誘導装置 |
JP2003179800A (ja) * | 2001-12-13 | 2003-06-27 | Sony Corp | 多視点画像生成装置、画像処理装置、および方法、並びにコンピュータ・プログラム |
JP2005033329A (ja) * | 2003-07-08 | 2005-02-03 | Citizen Watch Co Ltd | 温度補償型圧電発振器 |
JP2005286619A (ja) * | 2004-03-29 | 2005-10-13 | Matsushita Electric Ind Co Ltd | 監視カメラシステム |
CN101300460A (zh) * | 2005-11-18 | 2008-11-05 | 通腾科技股份有限公司 | 显示交通信息的导航装置 |
US20090153650A1 (en) * | 2007-06-18 | 2009-06-18 | Fujifilm Corporation | Camera position recognition system |
US20090033740A1 (en) * | 2007-07-31 | 2009-02-05 | Kddi Corporation | Video method for generating free viewpoint video image using divided local regions |
CN102782721A (zh) * | 2009-12-24 | 2012-11-14 | 康耐视公司 | 用于相机校准误差的运行时测定的系统和方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11165945B2 (en) | 2016-02-29 | 2021-11-02 | Sony Corporation | Information processing device, method, and multi-camera system |
CN107231550A (zh) * | 2016-03-25 | 2017-10-03 | 卡西欧计算机株式会社 | 图像处理装置、图像处理方法以及计算机可读取的记录介质 |
CN108234900A (zh) * | 2018-02-13 | 2018-06-29 | 深圳市瑞立视多媒体科技有限公司 | 一种摄像机配置方法和装置 |
CN108234900B (zh) * | 2018-02-13 | 2020-11-20 | 深圳市瑞立视多媒体科技有限公司 | 一种摄像机配置方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
US10375305B2 (en) | 2019-08-06 |
EP3008888B1 (en) | 2020-02-19 |
US20160050367A1 (en) | 2016-02-18 |
WO2014199564A1 (en) | 2014-12-18 |
JP2014241496A (ja) | 2014-12-25 |
EP3008888A1 (en) | 2016-04-20 |
JP6163899B2 (ja) | 2017-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6163899B2 (ja) | 情報処理装置、撮像装置、情報処理方法、及びプログラム | |
US8953048B2 (en) | Information processing apparatus and control method thereof | |
CN109308205B (zh) | 应用程序的显示适配方法、装置、设备及存储介质 | |
CN109240572B (zh) | 一种获取图片的方法、对图片进行处理的方法及装置 | |
US9906762B2 (en) | Communication apparatus, method of controlling communication apparatus, non-transitory computer-readable storage medium | |
CN102402383A (zh) | 信息处理设备和信息处理方法 | |
CN113645494B (zh) | 一种屏幕融合方法、显示设备、终端设备及服务器 | |
EP3460745B1 (en) | Spherical content editing method and electronic device supporting same | |
US11128909B2 (en) | Image processing method and device therefor | |
CN108196755B (zh) | 背景图片显示方法及装置 | |
CN104704805A (zh) | 信息处理装置、信息处理方法和程序 | |
JP2018180051A (ja) | 電子機器及びその制御方法 | |
CN104284117A (zh) | 图像投影装置以及图像投影装置的控制方法 | |
CN113110731B (zh) | 媒体内容生成的方法和装置 | |
CN109040729B (zh) | 图像白平衡校正方法、装置、存储介质及终端 | |
RU2740119C1 (ru) | Устройство управления отображением, устройство формирования изображения, способ управления и компьютерно-читаемый носитель | |
JP5244084B2 (ja) | 表示制御システムおよび表示制御方法 | |
CN114494073A (zh) | 图像处理方法、装置、设备及存储介质 | |
CN110442314A (zh) | 一种显示方法、终端及计算机可读存储介质 | |
CN103959204A (zh) | 信息处理装置、信息处理方法和记录介质 | |
CN113553368A (zh) | 多层饼图的标签信息处理方法、装置及终端 | |
EP3016372A1 (en) | Panorama photographing method | |
JP2018005091A (ja) | 表示制御プログラム、表示制御方法および表示制御装置 | |
CN105308946B (zh) | 信息处理装置、成像装置以及信息处理方法 | |
KR20190129982A (ko) | 전자기기 및 그 제어 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |