CN111587570A - 信息设备、以及照相机图像共享系统 - Google Patents
信息设备、以及照相机图像共享系统 Download PDFInfo
- Publication number
- CN111587570A CN111587570A CN201880086195.2A CN201880086195A CN111587570A CN 111587570 A CN111587570 A CN 111587570A CN 201880086195 A CN201880086195 A CN 201880086195A CN 111587570 A CN111587570 A CN 111587570A
- Authority
- CN
- China
- Prior art keywords
- camera
- composition
- captured image
- image
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000000203 mixture Substances 0.000 claims abstract description 142
- 230000006854 communication Effects 0.000 claims abstract description 13
- 238000004891 communication Methods 0.000 claims abstract description 11
- 239000002131 composite material Substances 0.000 claims description 11
- 238000011156 evaluation Methods 0.000 claims description 7
- 230000002194 synthesizing effect Effects 0.000 claims 2
- 238000000034 method Methods 0.000 description 46
- 238000010586 diagram Methods 0.000 description 40
- 230000008569 process Effects 0.000 description 38
- 230000006870 function Effects 0.000 description 15
- 238000010295 mobile communication Methods 0.000 description 4
- 238000003825 pressing Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 241000167854 Bourreria succulenta Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000019693 cherries Nutrition 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000000059 patterning Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Closed-Circuit Television Systems (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
在具有照相机和显示器的信息设备中，通过通信单元连接到照相机图像共享服务提供装置，上传照相机的拍摄图像和其特征量，并且下载其它信息设备的拍摄图像和其特征量。另外，连接到自动构图服务提供装置，下载用于合成多个拍摄图像的多个构图模式。信息设备的构图单元计算照相机的拍摄图像的特征量，根据计算出的特征量和下载的其它信息设备的拍摄图像的特征量，从下载的多个构图模式选择1个构图模式，合成所述照相机和其它信息设备的拍摄图像。将合成的所述照相机和其它信息设备的拍摄图像显示于显示器。
Description
技术领域
本发明涉及带照相机和显示器的信息设备、以及共享多个照相机的拍摄图像的照相机图像共享系统。
背景技术
在由CPU(Central Processing Unit，中央处理单元)和存储器等构成的信息设备中，广泛利用将无线网络功能、照相机功能、显示器功能一体化的信息设备。具体而言，能够通过智能手机、平板PC(Personal Computer，个人电脑)，随时随地用照相机拍摄，并将拍摄的图像经由网络在SNS(Social Network Service，社交网络服务)上分享。进而，还有除了外照相机(out camera)以外还具备自拍用的内照相机(in camera)的信息设备。
作为对用多个照相机拍摄的图像进行合成的方法，在专利文献1中公开了以下方法：分层地处理多个照相机图像，用户将第一层的图像的一部分剪下，在剪下的区域显示第二层的图像，将多个图像合成显示。
现有技术文献
专利文献
专利文献1：日本特开2014-057258号公报
发明内容
在专利文献1中，用户为了将第一层的图像的一部分剪下、并在剪下的区域显示第二层的图像，在用于得到合成图像的操作中需要花费工夫和时间。特别，在照相机图像的数量多的情况下，对于用户而言，该操作变得麻烦。
本发明的目的在于提供一种无需为了合成多个照相机拍摄图像而进行特别的用户操作、进行合成的图像的选择容易的信息设备以及照相机图像共享系统。
本发明在具有照相机和显示器的信息设备中，通过通信单元连接到照相机图像共享服务提供装置，上传照相机的拍摄图像和其特征量，并且下载其它信息设备的拍摄图像和其特征量。另外，连接到自动构图服务提供装置，下载用于合成多个拍摄图像的多个构图模式。信息设备的构图单元计算照相机的拍摄图像的特征量，根据计算出的特征量和下载的其它信息设备的拍摄图像的特征量，从下载的多个构图模式选择1个构图模式，合成所述照相机和其它信息设备的拍摄图像。将合成的所述照相机和其它信息设备的拍摄图像显示于显示器。
根据本发明，能够提供无需为了合成多个照相机拍摄图像而进行特别的用户操作、进行合成的图像的选择容易的信息设备以及照相机图像共享系统。
附图说明
图1是示出实施例1所涉及的信息设备的外观的图。
图2是示出信息设备的结构的框图。
图3是示出由信息设备和服务提供装置构成的照相机图像共享系统的结构的图。
图4A是示出信息设备的拍摄处理的动作流程的图。
图4B是示出信息设备的再生处理的动作流程的图。
图4C是示出信息设备的SNS处理的动作流程的图。
图5是示出信息设备的自动构图处理的动作流程的图。
图6是示出在自动构图处理中使用的照相机图像的特征量的例子的图。
图7A是示出信息设备的显示画面的例子(拍摄时)的图。
图7B是示出信息设备的显示画面的例子(自动构图处理)的图。
图7C是示出信息设备的显示画面的例子(再生时)的图。
图7D是示出信息设备的显示画面的例子(构图模式变更)的图。
图7E是示出信息设备的显示画面的例子(构图模式变更)的图。
图7F是示出信息设备的显示画面的例子(不同的合成画面)的图。
图8是示出实施例2所涉及的用户管理数据库的例子的图。
图9是示出自动构图服务提供装置的动作流程的图。
图10是示出构图模式的评价指标值的例子的图。
图11是示出实施例3所涉及的信息设备的拍摄动作流程的图。
图12A是示出信息设备的显示画面的例子(横向画面拍摄时)的图。
图12B是示出信息设备的显示画面的例子(纵向画面拍摄时)的图。
图13A是示出信息设备的显示画面的例子(图像的选择方法)的图。
图13B是示出信息设备的显示画面的例子(图像的选择方法)的图。
图13C是示出信息设备的显示画面的例子(图像的选择方法)的图。
图14A是示出信息设备的显示画面的例子(再生时)的图。
图14B是示出信息设备的显示画面的例子(再生时)的图。
(符号说明)
1：信息设备(照相机)；2：OUT照相机；3：IN照相机；4：显示器；9：因特网；10：自动构图服务提供装置；11：构图处理部；12：构图表格；13：照相机图像共享服务提供装置；14：用户管理DB；15：图像存储设备；16：SNS服务提供装置；101a：移动通信IF；101b：无线LANIF；102：CPU；103：RAM；104：FROM；104a：照相机共享应用；104b：图像通信过程；104c：自动构图过程；104d：SNS应用；105b：SDC；108：位置传感器；109：影像处理器；110：图形处理器。
具体实施方式
以下，参照附图，说明本发明的实施方式。本发明涉及包括具有照相机功能的信息设备和照相机图像共享服务提供装置的图像共享系统，关于各装置分开进行说明。
实施例1
在实施例1中，说明具有照相机和显示器的信息设备。
图1是示出实施例1所涉及的信息设备1的外观的图，(a)是前表面图，(b)是背表面图。信息设备1是将照相机功能和显示器功能一体化的信息设备，例如，相当于智能手机、平板PC等。在其结构中，1a是返回钮、1b是主页钮、1c是多任务钮、2是外(OUT)照相机、2a是自动对焦(AF)传感器、2b/2c是RGB传感器/LED闪光灯、3是内(IN)照相机、4是触摸传感器一体型的显示器、4a是光传感器、5是听筒。处于背表面侧的外(OUT)照相机2能够对外部的被摄体进行拍摄，处于前表面侧(显示器4侧)的内(IN)照相机3能够进行自拍。以下，将信息设备1还简称为“照相机”。
图2是示出信息设备(照相机)1的结构的框图。OUT照相机2包括图像传感器201和照相机处理器202。在用OUT照相机2拍摄时，AF传感器2a支持自动对焦功能，RGB传感器2b支持自动白平衡功能，LED闪光灯2c支持暗的拍摄环境下的闪光灯功能。RGB传感器2b和LED闪光灯2c能够排它地动作，如图1(b)所示，RGB传感器2b和LED闪光灯2c共享配置有OUT照相机2的背表面的1个窗。另外，IN照相机3包括图像传感器301和照相机处理器302，如图1(a)所示配置于前表面，将信息设备1的用户的自拍作为主要的目的来使用。
光传感器4a探测周围的明亮度来控制显示器4的背光源，将拍照出的显示画面设定为对于用户来说易于观察的明亮度。位置传感器108通过GPS(Global PositioningSystem，全球定位系统)取得信息设备1的位置信息。
影像处理器109处理从网络下载的图像数据、从SDC(SD卡)105b读出的图像数据，然后送到图形处理器110。图形处理器110除了这些图像数据以外，还将由CPU102处理的HTML(Hyper Text Markup Language，超文本标识语言)数据等变换为图形数据显示于显示器4。
移动通信接口(IF)101a支持3G、LTE(Long Term Evolution，长期演进)这样的通信方式，与无线LAN接口(IF)101b一起提供适合于下载图像数据等大容量数据的无线网络功能。无线网络也可以是这些以外的方式。
CPU102、RAM(Random Access Memory，随机存取存储器)103、FROM(Flash ROM：快闪ROM)104承担信息设备1的核心的运算以及程序执行的作用。在FROM104中，储存图像以及声音的处理、HTML浏览器等程序，根据需要在RAM103中展开，由CPU102执行。在RAM103中还临时地积蓄图像以及HTML的数据。
特别，在FROM104中，储存作为本实施例的特征的照相机共享应用104a、SNS应用104d的程序。另外，这些程序也在RAM103中展开，由CPU102执行。在此，照相机共享应用104a包括：图像通信过程104b，经由移动通信IF101a、无线LANIF101b在与因特网9之间发送接收图像数据；以及自动构图过程104c，定义在显示器4合成显示多个照相机图像的结构。
SDIF105a能够将各种数据储存在SDC(SD卡)105b中。例如，除了将由所述OUT照相机2、IN照相机3拍摄的图像数据积蓄到FROM104以外，通过将由所述OUT照相机2、IN照相机3拍摄的图像数据积蓄到SDC105b，从而能够实现大容量的积蓄。USBIF106是连接USB设备、或者从外部接受电源供给的接口。
麦克风107a、听筒扬声器5被用于语音通话，扬声器107b被用于收听音乐数据。
图3是示出由多个信息设备1和服务提供装置构成的照相机图像共享系统的结构的图。设想在某个特定的区域7(例如活动会场)存在多个持有信息设备(照相机)1的用户6(A～F)的状态。各用户A～F以登记到照相机图像共享服务提供装置13为前提，但登记方法没有限定。各照相机1每当各个用户6按压快门而进行拍摄时，经由因特网9向照相机图像共享服务提供装置13上传照相机的拍摄图像和该拍摄图像的特征量。以后，关注用户A的拍摄动作，说明利用照相机图像共享服务提供装置13的情况。
各照相机1和因特网9用移动通信的基站或者无线LAN的接入点8连接。另外，因特网9连接有自动构图服务提供装置10、照相机图像共享服务提供装置13、SNS服务提供装置16(以下将各“…服务提供装置”简记为“…服务”)。
照相机图像共享服务13具有用户管理数据库(DB)14和图像存储设备15，该图像存储设备15储存照相机的拍摄图像数据、拍摄图像数据的特征量。自动构图服务10具有构图处理部11、和记述由构图处理部11生成的构图模式的构图表格12。在此，构图模式是指，记述合成多个照相机图像时的各图像的配置、大小等显示规则的内容。自动构图服务10设为是与照相机图像共享服务13连动的服务。在本例子中，是支持以下内容的系统，即、针对登记到照相机图像共享服务13具有的用户管理DB14的用户提供照相机图像共享服务13和自动构图服务10，共享多个用户拍摄的照相机图像，适宜地合成这些多个图像(自动构图处理)。
接下来，分别分成图4A～4C，说明信息设备(照相机)1的拍摄/再生/SNS的动作流程。
图4A是示出信息设备1的拍摄处理的动作流程(S100)的图。在该处理中，通过自动构图处理选择并保存本照相机的拍摄图像和与其合成的其它照相机的图像。
用户起动信息设备(照相机)1的OUT照相机2或者IN照相机3(S101)。在本实施例中，在共享多个照相机1的照相机图像这样的目的下，设想利用OUT照相机2，但也可以是IN照相机3。在照相机起动时，自动地设定照相机的各种设定(自动对焦、自动白平衡、自动曝光、自动闪光灯、摄像像素数的默认值设定等)(S102)。当然，也可以手动设定一部分。在照相机设定结束时，照相机开始拍摄，将拍摄的图像显示于显示器4(S103)。但是，在该时间点，是用户未按压快门的状态。
接着，用户按压照相机图像共享服务钮(图7A的符号412)而起动照相机共享应用104a，登录到照相机图像共享服务13(S104)。此时，也同时开始自动构图服务10，下载构图表格12的一部分，更新已保存于照相机1的构图表格12a(S105)。
接下来，从照相机图像共享服务13下载其它照相机的图像数据(S106)。下载的其它照相机的图像数据仅限制于适合于共享的照相机。即，使用由位置传感器108取得的位置信息，限定为在本照相机的周边存在的照相机，例如，以本照相机为基准，针对前后、左右、斜向的合计8个方向，选定处于附近的位置的照相机。进而，关于拍摄时刻，仅限定于在从当前时刻算起预定时间以内拍摄的最新的图像数据。这些其它照相机的图像数据与该图像的特征量一起下载。
另外，关于本照相机的拍摄图像，计算是否有人物被拍照到拍摄图像中、被拍照在拍摄图像中的人数、人物或者成群的物体的大小、这些图像内的位置等特征量(S107)。
接下来，使用本照相机的图像和其它照相机的图像的特征量，通过自动构图过程104c进行自动构图处理(S108)。在该处理中，自动地决定将哪个照相机的图像在显示器4的哪个位置以何种程度的大小显示、在多个图像的显示重叠的情况下将哪些图像在前面显示等成为显示规则的构图模式。图形处理器110依照决定的构图模式制作将本照相机和其它照相机的图像合成的显示画面，并显示于显示器4(S109)。使用图5、图6，详细说明自动构图处理(S108)。
用户观察显示于显示器4的多个照相机图像的合成画面，选择希望与本照相机图像合成的其它照相机图像(S110)。在选择其它照相机图像之后，当用户按压照相机1的快门钮(图7A、7B的符号413)后，进行拍摄处理，本照相机的拍摄图像被保存到SDC105b等存储介质(S111)。此时，被选择的其它照相机图像是已经下载的图像，不被重新保存，而是与本照相机的图像数据关联起来。进而，在快门被按压的定时，由本照相机拍摄的图像数据和其特征量、以及基于S110中的图像选择的构图模式的信息被上传到照相机图像共享服务13(S112)。这些上传的数据在其它照相机的用户利用照相机图像共享服务13时也能使用。
用户选择是否继续拍摄(S113)，在继续时返回到S106，从其它照相机的图像的下载起反复进行。这样，根据照相机1的位置的移动、时间的经过，按照需要更新应下载的其它照相机的图像。此外，如果已下载的数据有效，则无需重复下载。
图4B是示出信息设备1的再生处理的动作流程(S120)的图。在该处理中，对拍摄的本照相机图像合成其它照相机图像来进行再生显示。当用户按压再生钮(图7B的符号415)时(S121)，从存储介质读出已拍摄并保存的本照相机图像、和与其关联起来的其它照相机图像(S122)。针对这些读出的图像，通过自动构图过程104c进行自动构图处理(S123)，其合成画面被再生显示于显示器4(S124)。另外，在合成时选择的构图模式的信息被上传(S125)。
此外，在再生时，根据用户的指示变更了构图模式时，例如，在如使本照相机图像以外的图像优先地显示于画面最前面的情况下(S126)，返回到S123的自动构图处理，在S125中，再次上传变更后的构图模式的信息。
图4C是示出信息设备1的SNS处理的动作流程(S130)的图。在此，利用SNS(SocialNetwork Service)服务16上传拍摄图像、注释。
用户按压SNS钮(图7C等符号401)来起动SNS应用104d(S131)，登录到SNS服务16(S132)。然后，进行照相机图像、注释等的上传(S133)。此外，在从所述照相机图像的再生处理(图4B)转移到SNS处理的情况下，能够将再生画面容易地上传到SNS。即，能够原样地上传进行了自动构图处理(S123)和合成画面的再生显示(S124)后的画面(后述的图7C、图7D)。在继续SNS的情况下(S134)，返回到S133，反复进行图像、注释等的上传。
图5是示出信息设备1的自动构图处理(S140)的动作流程的图，与图4A的步骤S108对应。但是，在此，不限定于S108中的处理而进行自动构图处理的基本的说明。
与登录到照相机图像共享服务13一起，开始自动构图处理(S140)。本照相机连续拍摄，拍摄图像例如以每秒几个镜头至几十个镜头程度刷新。从连续刷新的图像中捕捉1个镜头的图像(S141)，针对捕捉的图像进行特征量的计算(S142)。另外，针对其它照相机，使用在S106中从照相机图像共享服务13下载的特征量(S143)。
图6是示出在自动构图处理中使用的照相机图像的特征量的例子的图。在本照相机图像的情况下，是拍照的人数、人群的群体的大小和位置、人脸的大小、是否拍照用户自身、焦距、对焦的物体的位置和大小等。另一方面，在其它照相机图像中，除了这些以外，将各个照相机的位置(从本照相机起的方位和距离)、拍摄时刻等作为特征量追加。
接下来，根据本照相机以及其它照相机的特征量，从本照相机保存的构图表格12a选择构图模式(S144)。在该方法中，使用以特征量为要素的检索用的索引矢量，从构图表格12a自动地选择具有在加权距离上与该索引矢量接近的索引矢量的构图模式。此外，当开始照相机图像共享服务13时，构图表格12a在S105被更新。图形处理器110使用选择出的构图模式制作合成了包括本照相机在内的多个照相机的图像的显示画面(S145)。制作出的合成画面被显示于显示器4。
图7A～图7F是信息设备(照相机)1的显示画面的例子。在此，示出用户A所持的照相机1中的显示画面。
图7A示出图4A的拍摄图像显示状态(S103)下的显示画面。在照相机1的显示器4中，显示用户A的照相机的拍摄图像41、和表示用户是A的用户标志411、照相机图像共享服务钮412、快门钮413、设定钮414。用户A通过按压照相机图像共享服务钮412开始向照相机图像共享服务13登录。
图7B示出通过图4A的自动构图处理(S108)合成的合成画面的显示状态(S109)。除了用户A的照相机的拍摄图像41以外，还显示用户B的照相机的拍摄图像42、用户C的照相机的拍摄图像43、用户D的照相机的拍摄图像44、用户E的照相机的拍摄图像45、用户F的照相机的拍摄图像46。这些照相机的拍摄图像是从照相机图像共享服务13下载的图像(图4A的S106)，照相机A的拍摄图像41是当前时刻的图像，相对于此，其它拍摄图像是在稍微早的时刻按压快门并上传到照相机图像共享服务13的图像。在各拍摄图像中，显示各个用户标志421、431、441、451、461。进而，在各拍摄图像中显示选择是否与用户A的拍摄图像41关联起来保存(S110)的选择钮422、432、442、452、462。通过进行这样的合成显示，能够一起观察相同的活动中的用户A的拍摄图像41和其他用户B～F的拍摄图像42～46，能够易于理解地传达活动的临场感。
接着，在图7B的例子中，为了合成用而选择(关联起来)了用户B的拍摄图像42和用户C的拍摄图像43，当用户A按压快门钮413时，A的拍摄图像41和特征量被保存到存储介质，并且将B的拍摄图像42和C的拍摄图像43、以及各自的特征量关联起来保存(S111)。
图7C示出通过图4B的再生时的自动构图处理(S123)合成的合成画面的显示状态(S124)。针对用户A的拍摄图像41、以及与其关联起来的用户B的拍摄图像42和用户C的拍摄图像43，进行该情况的自动构图处理(S123)。用户A的拍摄图像41比其它图像更优先显示于前面。另外，如果按压SNS钮401，则SNS应用104d起动，能够上传该画面。
图7D示出在图7C的状态下变更构图模式的情况。在此，是用户A触摸用户B的拍摄图像42，使B的拍摄图像42优先，而再次执行自动构图处理之后的显示画面。一般，用自己(用户A)的OUT照相机对自己自身的周围的样子进行拍摄，而并非对自己自身进行拍摄。另一方面，存在用他人的照相机对自己自身(用户A)进行拍摄的可能性。在图7D的例子中，是在B的拍摄图像42中拍照有用户A的情况，用户A触摸B的拍摄图像42，将拍照有用户A的B的拍摄图像42放大而显示于前面。
图7E示出在图7C的状态下变更构图模式的其它情况。在此，是触摸用户A的拍摄图像41而放大显示于整个画面的例子。
图7C～7E的显示画面都能够上传到SNS服务16。特别是如图7C、图7D那样将A的拍摄图像与B和C的拍摄图像一起上传到SNS，从而能够将活动会场的样子作为有临场感的图像传递给其他的SNS用户。
图7F示出与图7B不同的合成画面的例子。在该例子中，在邻接的拍摄图像在其边界相互有重叠的情况下，将重叠的部分的图像倾斜地剪切而合成。由此，防止图像重叠而看不到的区域集中于特定的图像，即均等地显示各图像的边界。
以上，根据实施例1，能够提供无需为了得到合成多个照相机图像的显示画面而进行特别的用户操作、进行合成的照相机图像的选择容易的信息设备以及图像共享系统。进而，能够在活动等中一眼确认多个照相机的状况，并且能够将合成多个照相机图像的画面上传到SNS，在用户之间共享有临场感的图像。
实施例2
在实施例2中，对照相机图像共享系统中的照相机图像共享服务提供装置(照相机图像共享服务)13和自动构图服务提供装置(自动构图服务)10的动作进行说明。
图8是示出照相机图像共享服务提供装置13的用户管理数据库(DB)14的例子的图。登记到用户管理DB14的用户以预先共享或者交换照相机图像为目的，形成组名为“活动T”这样的用户组。在用户管理DB14中，以“樱花”为首登记N名用户，记述该用户昵称、手机号码、IP地址、密码、邮件地址的数据。这些用户使用的信息设备(照相机)无需是特定的设备，只要是具有照相机功能和显示器功能的信息设备就能够利用。例如，能够输入邮件地址和密码而登录到照相机图像共享服务13，接受服务的提供。
图9是示出自动构图服务提供装置10中的构图处理部11的动作流程的图。此处的构图处理(S200)是如下处理：收集用户的照相机图像的特征量，以被分组(关联起来)的多个照相机图像的特征量为要素，求出索引矢量。然后，求出适合于对多个照相机图像进行合成显示的构图模式，与索引矢量对应地登记到构图表格12。
当从照相机1对图像数据和特征量进行上传接收时(S201)，开始构图表格12的更新(S202)。首先，将上传的特征量登记到照相机特征量数据库11a(S203)。进而，从上传的照相机的位置信息检索位于例如图3的用户A的照相机的周边的照相机(用户B、C、D、E、F)，从照相机特征量数据库11a读出这些特征量(S204)。
接下来，使用读出的特征量制作构图模式候补(S205)。所谓构图模式是合成各照相机图像时的显示规则(配置和大小等)并根据图10所示的构图模式的评价指标来制作的(S206)。在制作的候补满足评价指标的情况下，追加登记到构图表格12(S207)，结束处理(S208)。在制作的候补不满足评价指标的情况下，返回到S205，修正构图模式的候补而再次制作，反复评价。
图10是示出构图模式的评价指标的例子的图。作为条件，例举出在显示器4中尽可能减小哪个照相机图像也不显示的空白区域、在各个照相机图像中拍照的中心被摄体(例如人物)是易于视觉辨认的程度的大小(为此进行照相机图像的放大/缩小、修剪处理)。进而，要求一边使用照相机的位置信息来维持现实的照相机的相对位置关系一边进行与距离相应的显示、具体而言离A的照相机较近的照相机图像显示得比较大而离A的照相机较远的照相机图像显示得较小。通过满足这些，能够制作再现活动会场的临场感的合成画面。
另外，在制作构图模式候补(S205)时，反馈过去的构图模式的选择实际成果。在构图表格12中，登记有过去有大量的选择实际成果的构图模式，积蓄广泛利用自动构图服务10的照相机的实际成果，而并非限定于单一组。通过针对这些大量的实际成果进行AI(Artificial Intelligence，人工智能)学习处理，能够制作包括更适合的构图模式的构图表格12。
根据实施例2，能够从处于因特网9上的自动构图服务提供装置10接受适合的构图模式的提供，在信息设备1中减轻用于图像合成的用户操作。另外，还带来信息设备1的小型化、轻量化。
实施例3
在实施例3中，说明在信息设备1中同时操作OUT照相机2和IN照相机3来进行这些图像的自动构图处理的情况。信息设备1(照相机)的结构与实施例1(图2)所示的结构相同，通过储存于FROM104的自动构图过程104c执行OUT照相机2和IN照相机3的图像的自动构图处理。
图11是示出实施例3中的信息设备1的拍摄动作流程的图。对与实施例1(图4A)的动作流程(S100)相同功能的步骤，赋予同一编号，以与图4A的动作流程不同的步骤为中心进行说明。
当进行照相机起动时(S101)，进行OUT照相机2和IN照相机3的设定(S102a)。在照相机的特征量计算(S107a)中，计算OUT照相机2和IN照相机3各自的照相机图像的特征量，在自动构图处理(S108a)中，将OUT照相机2和IN照相机3的2个照相机图像作为对象。此外，在信息设备1具备OUT照相机2、IN照相机3以外的照相机的情况下，可以将具备的所有照相机图像作为对象。作为自动构图处理的结果，显示合成了OUT照相机2和IN照相机3的照相机图像的画面(S109)。用户从其中选择要拍摄的图像(S110a)，进行拍摄保存(快门按压)(S111)。
此外，在本实施例中，也能够利用照相机图像共享服务13，用虚线表示其路径。在任意的定时登录(S104)，下载构图表格12、其它用户的照相机图像(S106)进行自动构图处理(S108)。将其拍摄保存，然后上传照相机图像数据、特征量以及进一步选择的构架模式(S112)。
此外，关于再生处理和SNS处理，与实施例1(图4B、图4C)的动作流程相同。
图12～图14是信息设备(照相机)1的显示画面的例子。
图12A和图12B示出拍摄时的合成画面的显示状态，与图11中的步骤S109对应。在图12A中，应用按照横向画面进行照相机拍摄并将OUT照相机2的图像48和IN照相机3的图像47横向排列显示的构图模式(S108a)。在拍摄图像的选择(S110a)中，勾选选择钮482，选择OUT照相机2的图像48。
在图12B中，应用按照纵向画面进行照相机拍摄并将OUT照相机2的图像48和IN照相机3的图像47纵向排列显示的构图模式。在拍摄图像的选择中，勾选选择钮482和472，选择OUT照相机2的图像48和IN照相机3的图像47这两方。当在该状态下按压快门钮413时(S111)，OUT照相机2和IN照相机3这两方的图像被同时拍摄保存。
图13A～图13C是示出要合成的照相机图像的选择操作方法的图。在本例子中，照相机图像的选择并非通过选择钮来进行而是通过快门钮413来进行，使快门钮413移动(拖动)到希望选择的照相机图像的位置。
在图13A中，示出使快门钮413移动到IN照相机3的图像47上，将图像47的外框用粗线高亮显示而选择。在图13B中，示出使快门钮413移动到OUT照相机2的图像48上，将图像48高亮显示而选择。另外，在图13C中，使快门钮413移动到图像48和图像47的边界线上，将图像48和图像47高亮显示而选择OUT照相机2和IN照相机3这两方的图像。
在本例子中，采用用快门钮413来选择要拍摄保存的图像这样的简单操作方法。进而，如果设为移动(拖动)快门钮413并在将手指从快门钮413挪开时能按下快门，则选择照相机图像这样的操作和按快门这样的操作能够通过用户的一连串的操作来实现，使用性进一步提高。
图14A和图14B示出对拍摄保存的照相机图像进行了再生显示的状态。在图4B的再生时的动作流程中，在自动构图处理(S123)之后，对应于合成画面的显示(S124)。在图14A、图14B的例子中，将照相机图像的中心附近的被摄体全部特写显示。其中，在图14A中，应用将OUT照相机2的图像48和IN照相机3的图像47等同地处置的构图模式，相对于此，在图14B中，应用以OUT照相机2的图像48为主地进行显示的构图模式。
以上，根据实施例3，能够提供无需为了得到合成了OUT照相机和IN照相机的图像的显示画面而进行特别的用户操作、进行拍摄的照相机的选择容易的信息设备以及照相机图像共享系统。进而，还能够提供照相机图像的选择操作和快门操作无缝的GUI(图形用户接口)。
以上说明了各实施例，但本发明不限于这些，例如能够将某个实施例的结构的一部分置换为其它实施例。另外，还能够对某个实施例的结构加上其它实施例的结构。它们全部属于本发明的范畴。进而，在文中、图中出现的数值、消息等仅为一个例子，即使使用不同的例子也不会损害本发明的效果。
另外，发明的功能等也可以通过例如用集成电路进行设计等而用硬件安装它们的一部分或者全部。另外，也可以通过微型处理器单元、CPU等解释并执行实现各个功能等的动作程序而用软件安装。另外，不限定软件的安装范围，也可以并用硬件和软件。
Claims (15)
1.一种信息设备，具有第一照相机和显示器，其特征在于，具备：
通信单元，经由网络，下载外部的第二照相机的拍摄图像；以及
构图单元，合成所述第一照相机的拍摄图像和所述下载的所述第二照相机的拍摄图像，
将所述合成的画面显示于所述显示器，当由用户从显示于所述显示器的画面选择与所述第一照相机的拍摄图像关联起来显示的所述第二照相机的拍摄图像时，将表示选择哪个拍摄图像的关联信息与所述第一照相机的拍摄图像一起保存到存储介质。
2.根据权利要求1所述的信息设备，其特征在于，
所述通信单元将所述第二照相机的拍摄图像与该拍摄图像的特征量一起下载，
所述构图单元计算所述第一照相机的拍摄图像的特征量，根据该计算出的特征量和所述下载的所述第二照相机的拍摄图像的特征量，决定用于合成所述第一照相机和所述第二照相机的拍摄图像的构图模式。
3.根据权利要求2所述的信息设备，其特征在于，
所述通信单元下载用于合成拍摄图像的多个构图模式的集合，
所述构图单元根据所述特征量从下载的所述构图模式的集合选择1个构图模式。
4.根据权利要求1所述的信息设备，其特征在于，
在所述通信单元下载所述第二照相机的拍摄图像时，所述构图单元通过所述第二照相机的位置信息和拍摄时刻信息，限定要下载的拍摄图像。
5.根据权利要求1所述的信息设备，其特征在于，
在所述第一照相机拍摄时，将该第一照相机的拍摄图像和该拍摄图像的特征量以及位置信息，通过所述通信单元上传到所述网络。
6.根据权利要求1所述的信息设备，其特征在于，
所述通信单元将所述第二照相机的拍摄图像与该拍摄图像的特征量一起下载，
所述构图单元计算所述第一照相机的拍摄图像的特征量，根据该计算出的特征量和所述关联起来的所述第二照相机的拍摄图像的特征量，决定用于合成所述第一照相机的拍摄图像和所述第二照相机的拍摄图像的构图模式，
依照该决定的构图模式，将合成所述第一照相机的拍摄图像和所述关联起来的所述第二照相机的拍摄图像后的画面显示于所述显示器。
7.根据权利要求2所述的信息设备，其特征在于，
将由所述构图单元决定的构图模式的信息通过所述通信单元上传到所述网络。
8.根据权利要求6所述的信息设备，其特征在于，
针对显示于所述显示器的合成画面，用户触摸任意的拍摄图像，从而所述构图单元变更所述构图模式的决定。
9.根据权利要求1所述的信息设备，其特征在于，
所述构图单元在显示于所述显示器的多个拍摄图像在其边界有重叠的情况下，变更各拍摄图像的显示边界，以使各拍摄图像的边界均等地显示。
10.一种信息设备，具有第一照相机、第二照相机以及显示器，其特征在于，
具备构图单元，该构图单元合成所述第一照相机的拍摄图像和所述第二照相机的拍摄图像，
将所述合成后的画面显示于所述显示器，当由用户从显示于所述显示器的画面选择所述第一照相机的拍摄图像和所述第二照相机的拍摄图像的至少一方时，将该选择出的拍摄图像保存到存储介质。
11.根据权利要求10所述的信息设备，其特征在于，
所述构图单元计算所述第一照相机的拍摄图像的特征量和所述第二照相机的拍摄图像的特征量，根据该计算出的特征量决定用于合成所述第一照相机和所述第二照相机的拍摄图像的构图模式。
12.根据权利要求10所述的信息设备，其特征在于，
为了从显示于所述显示器的画面选择保存到所述存储介质的拍摄图像，用户使显示于所述显示器的快门钮移动到期望的拍摄图像的位置。
13.一种照相机图像共享系统，经由网络，将具有照相机和显示器的多个信息设备与照相机图像共享服务提供装置和自动构图服务提供装置连接，所述照相机图像共享系统的特征在于，
所述照相机图像共享服务提供装置具备：
用户管理数据库，管理所述多个信息设备；以及
图像存储设备，保存从所述多个信息设备上传的拍摄图像及该拍摄图像的特征量，
所述自动构图服务提供装置具备：
构图处理部，使用从所述多个信息设备上传的拍摄图像的特征量，生成用于合成多个拍摄图像的构图模式；以及
构图表格，将生成的所述构图模式与所述特征量对应起来登记，
所述信息设备具备：
通信单元，经由所述网络，将所述照相机的拍摄图像和该拍摄图像的特征量上传到所述照相机图像共享服务提供装置，并且从所述照相机图像共享服务提供装置下载其它信息设备的拍摄图像和该拍摄图像的特征量，以及从所述自动构图服务提供装置下载用于合成多个拍摄图像的多个构图模式；以及
构图单元，计算所述照相机的拍摄图像的特征量，根据该计算出的特征量和所述下载的所述其它信息设备的拍摄图像的特征量，从下载的所述多个构图模式选择1个构图模式，合成所述照相机的拍摄图像和所述其它信息设备的拍摄图像，
将由所述构图单元合成的所述照相机的拍摄图像和所述其它信息设备的拍摄图像显示于所述显示器。
14.根据权利要求13所述的照相机图像共享系统，其特征在于，
所述自动构图服务提供装置的所述构图处理部将被合成的多个拍摄图像的位置关系、大小、在合成画面中所占的图像区域作为评价指标来生成构图模式，登记到所述构图表格。
15.根据权利要求14所述的照相机图像共享系统，其特征在于，
所述自动构图服务提供装置的所述构图处理部学习在所述信息设备中选择的构图模式的过去的选择实际成果，生成构图模式。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2018/000713 WO2019138552A1 (ja) | 2018-01-12 | 2018-01-12 | 情報機器、及びカメラ画像共有システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111587570A true CN111587570A (zh) | 2020-08-25 |
Family
ID=67219485
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201880086195.2A Pending CN111587570A (zh) | 2018-01-12 | 2018-01-12 | 信息设备、以及照相机图像共享系统 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US12081910B2 (zh) |
| JP (2) | JP6886048B2 (zh) |
| CN (1) | CN111587570A (zh) |
| WO (1) | WO2019138552A1 (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7432463B2 (ja) | 2019-09-19 | 2024-02-16 | 株式会社モリタホールディングス | 収納台、訪問入浴車 |
| US11997409B2 (en) | 2019-10-30 | 2024-05-28 | Beijing Bytedance Network Technology Co., Ltd. | Video processing method and apparatus, and terminal and storage medium |
| CN110784674B (zh) | 2019-10-30 | 2022-03-15 | 北京字节跳动网络技术有限公司 | 视频处理的方法、装置、终端及存储介质 |
| CN117425057A (zh) * | 2022-07-07 | 2024-01-19 | 抖音视界(北京)有限公司 | 用于影像拍摄的方法、装置、设备和存储介质 |
| CN115334246A (zh) | 2022-09-06 | 2022-11-11 | 抖音视界有限公司 | 用于影像拍摄的方法、装置、设备和存储介质 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10003762B2 (en) * | 2005-04-26 | 2018-06-19 | Invention Science Fund I, Llc | Shared image devices |
| US8947547B1 (en) * | 2010-09-12 | 2015-02-03 | Thomas Nathan Millikan | Context and content based automated image and media sharing |
| JP5773618B2 (ja) * | 2010-11-08 | 2015-09-02 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、プログラム |
| US20120179960A1 (en) * | 2011-01-07 | 2012-07-12 | Cok Ronald S | Image layout adjustment aparatus |
| JP5990068B2 (ja) | 2012-09-13 | 2016-09-07 | シャープ株式会社 | 制御装置、制御方法、および制御プログラム |
| JP6128929B2 (ja) | 2013-04-17 | 2017-05-17 | キヤノン株式会社 | 撮像装置及びその制御方法並びにプログラム |
| JP2015011578A (ja) * | 2013-06-28 | 2015-01-19 | 株式会社東芝 | 情報処理装置および表示制御方法 |
| JP5788455B2 (ja) | 2013-09-30 | 2015-09-30 | 富士フイルム株式会社 | 画像割当装置および画像割当方法 |
| JP2016048835A (ja) | 2014-08-27 | 2016-04-07 | オリンパス株式会社 | 撮像装置、撮像装置の制御方法、撮像装置の制御プログラム、及び撮像システム |
| JP6529108B2 (ja) | 2014-10-14 | 2019-06-12 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
| CA2942396A1 (en) * | 2015-11-24 | 2017-05-24 | Via Capitale | Image-based search engine |
| KR102422448B1 (ko) * | 2017-11-21 | 2022-07-19 | 삼성전자 주식회사 | 이미지와 관련된 링크 정보를 이용하여 외부 전자 장치와 이미지를 공유하는 방법 및 전자 장치 |
-
2018
- 2018-01-12 CN CN201880086195.2A patent/CN111587570A/zh active Pending
- 2018-01-12 JP JP2019564246A patent/JP6886048B2/ja active Active
- 2018-01-12 WO PCT/JP2018/000713 patent/WO2019138552A1/ja active Application Filing
- 2018-01-12 US US16/960,489 patent/US12081910B2/en active Active
-
2021
- 2021-05-13 JP JP2021081702A patent/JP7144571B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP7144571B2 (ja) | 2022-09-29 |
| WO2019138552A1 (ja) | 2019-07-18 |
| US12081910B2 (en) | 2024-09-03 |
| US20210067741A1 (en) | 2021-03-04 |
| JP2021132392A (ja) | 2021-09-09 |
| JPWO2019138552A1 (ja) | 2020-12-24 |
| JP6886048B2 (ja) | 2021-06-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111587570A (zh) | 信息设备、以及照相机图像共享系统 | |
| US9894220B2 (en) | Image display apparatus having image-related information displaying function | |
| JP5218989B2 (ja) | 通信端末装置、及び、プログラム | |
| CN104303146A (zh) | 移动设备中的图像相关应用的入口点 | |
| KR20110020746A (ko) | 오브젝트 정보 제공방법 및 이를 적용한 촬영장치 | |
| JP2005267146A (ja) | 画像認識機能を利用した電子メール作成方法および装置 | |
| JP2023036595A (ja) | スマートフォン、スマートフォンの制御方法、プログラム | |
| JP2015220616A (ja) | 電子機器 | |
| CN114009003A (zh) | 图像采集方法、装置、设备及存储介质 | |
| JP2009055432A (ja) | 撮影装置、撮影方法、およびプログラム | |
| EP3764633B1 (en) | Photographing method, device, storage medium, and computer program | |
| CN109963078B (zh) | 图像处理系统、图像处理方法、图像处理装置、记录介质及便携终端 | |
| JP2015011190A (ja) | 写真シール遊戯システム | |
| CN111461950A (zh) | 图像处理方法及装置 | |
| JP2010041527A (ja) | 撮影支援方法、システム、プログラム | |
| JP6725926B1 (ja) | 情報処理装置、情報処理システム、コンピュータプログラム及び情報処理方法 | |
| JP2006277227A (ja) | 合成画像作成装置 | |
| JP2017134403A (ja) | 写真シール遊戯システム | |
| JP2012199811A (ja) | 情報端末装置、送信方法及びプログラム | |
| JP2009251832A (ja) | ユーザ相関図作成装置、ユーザ相関図作成方法、ユーザ相関図作成プログラム、及びユーザ相関図作成システム | |
| JP2021131519A (ja) | 情報処理方法、撮影装置、および画像管理装置 | |
| JP2013073309A (ja) | 画像注目領域抽出方法、並びに当該方法を実現する電子機器、システム、及びプログラム | |
| CN109474782A (zh) | 用于数据编辑的接口装置、数据编辑方法、记录介质 | |
| JP7027750B2 (ja) | 画像共有システム、サーバ、情報端末、およびプログラム | |
| KR100747426B1 (ko) | 피사체의 실루엣 정보를 제공하는 사진촬영장치 및 그 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: Kyoto, Japan Applicant after: MAXELL, Ltd. Address before: Kyoto, Japan Applicant before: MAXELL HOLDINGS, Ltd. |
|
| CB02 | Change of applicant information | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20211109 Address after: Kyoto, Japan Applicant after: MAXELL HOLDINGS, Ltd. Address before: Kyoto, Japan Applicant before: MAXELL, Ltd. |
|
| TA01 | Transfer of patent application right |