CN108028881A - 摄像辅助系统、装置及方法、以及摄像终端 - Google Patents

摄像辅助系统、装置及方法、以及摄像终端 Download PDF

Info

Publication number
CN108028881A
CN108028881A CN201680054656.9A CN201680054656A CN108028881A CN 108028881 A CN108028881 A CN 108028881A CN 201680054656 A CN201680054656 A CN 201680054656A CN 108028881 A CN108028881 A CN 108028881A
Authority
CN
China
Prior art keywords
information
image
check object
shooting
object thing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680054656.9A
Other languages
English (en)
Inventor
山岸荣辉
洼田聪
根来雅之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN108028881A publication Critical patent/CN108028881A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G06V20/176—Urban or other man-made structures
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/20—Administration of product repair or maintenance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/08—Construction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30244—Camera pose
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Health & Medical Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Studio Devices (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

本发明的目的在于提供一种能够从普通人有效地获取需要摄像的检查对象物的摄像图像的摄像辅助系统、装置及方法、以及摄像终端。从摄像终端获取用于确定相对于摄像终端存在于预先设定的范围内的检查对象物即周边检查对象物的确定信息。根据确定信息，从多个检查对象物中确定周边检查对象物。访问存储至少包括多个检查对象物的每一个的摄像图像的维护检查信息的数据库，并参考周边检查对象物的维护检查信息而得到结果，根据该结果，评价是否存在需要对周边检查对象物获取新的摄像图像的图像获取区域。将表示评价为需要获取新的摄像图像的图像获取区域的图像获取区域信息输出到摄像终端。

Description

摄像辅助系统、装置及方法、以及摄像终端
技术领域
本发明涉及一种辅助基于摄像终端的检查对象物的摄像的摄像辅助系统、摄像辅助装置及摄像辅助方法、以及在该摄像辅助系统中使用的摄像终端。
背景技术
桥梁、道路、隧道、水坝、堤坝及大厦等各种建筑物(也称为建筑物或构造物或构筑物或城市基础设施的检查对象物)的检查由具有专业知识的专家进行。专家利用智能手机、平板电脑终端及数码相机等各种摄像终端对建筑物的检查部位进行摄像。通过该摄像获得的摄像图像数据登录到建筑物管理用的数据库，用于建筑物的管理(维护检查、检查管理、维持管理)。
专利文献1中，公开有根据从摄像终端获取的位置信息确定摄像对象的建筑物之后，参考该建筑物的检查基准来确定建筑物的检查部位，由此将与未由摄像终端进行摄像的检查部位有关的信息输出到摄像终端的摄像辅助装置。由此，能够无遗漏地获取各种建筑物的检查部位的摄像图像数据并登录到建筑物管理用数据库中。
近年来，相对于专家的数量，检查对象的建筑物的数量大幅增加，因此无法充分进行基于专家的建筑物的检查。因此，近年来实行从普通人获取建筑物的摄像图像数据并登录到建筑物管理用数据库中的方式(参考非专利文献1)。
以往技术文献
专利文献
专利文献1：日本专利2013-164786号公报
非专利文献
非专利文献1：“ChibaRepo～连结市民和行政的新的沟通工具～(千叶县千叶市)”、[online]、[平成27年8月31日检索]、互联网<http：//www.applic.or.jp/pdf/futuer_18/04/10.pdf>
发明内容
发明要解决的技术课题
非专利文献1中，记载了从普通人获取建筑物的摄像图像数据，但是关于建筑物的检查，不具有专业知识的普通人通常不清楚需要检查(摄像)哪个建筑物，或者建筑物的哪个部位是需要检查(摄像)的部位。因此，事实上很难从普通人获得需要摄像的建筑物的摄像图像数据。
本发明鉴于这种情况而完成，其目的在于提供一种能够从普通人有效地获取需要摄像的检查对象物的摄像图像的摄像辅助系统及装置及方法、以及该摄像辅助系统中使用的摄像终端。
用于解决技术课题的手段
用于实现本发明的目的的摄像辅助系统，具备：具有摄像部的摄像终端；及摄像辅助装置，辅助基于摄像终端的检查对象物的摄像，摄像辅助装置具备：确定信息获取部，从摄像终端获取用于确定相对于摄像终端存在于预先设定的范围内的检查对象物即周边检查对象物的确定信息；检查对象物确定部，根据由确定信息获取部获取的确定信息，从多个检查对象物中确定周边检查对象物；必要性评价部，访问存储至少包括多个检查对象物的每一个的摄像图像的维护检查信息的数据库，并参考检查对象物确定部确定的周边检查对象物的维护检查信息而得到结果，根据该结果，评价是否存在需要对周边检查对象物获取新的摄像图像的图像获取区域；及图像获取区域信息输出部，将表示必要性评价部评价为需要获取新的摄像图像的图像获取区域的图像获取区域信息输出到摄像终端，摄像终端具备：确定信息输出部，向确定信息获取部输出确定信息；及显示部，根据从图像获取区域信息输出部输出的图像获取区域信息，显示图像获取区域。
根据该摄像辅助系统，能够对摄像终端用户提示需要获取新的摄像图像的图像获取区域的摄像。
本发明的另一方式所涉及的摄像辅助系统中，摄像终端具备获取摄像终端的位置信息的位置信息获取部，确定信息中包括位置信息获取部获取的位置信息，检查对象物确定部获取表示多个检查对象物的位置的地图信息，并根据地图信息和确定信息获取部获取的确定信息中包含的位置信息来确定周边检查对象物。由此，能够从通过摄像终端获取的位置信息确定周边检查对象物。
本发明的另一方式所涉及的摄像辅助系统中，摄像终端具备获取摄像终端的摄像方向的摄像方向获取部，确定信息还包括摄像方向获取部获取的摄像方向，检查对象物确定部根据确定信息获取部获取的确定信息中所包含的位置信息及摄像方向，确定摄像部的摄像范围内所包含的周边检查对象物，必要性评价部根据检查对象物确定部的确定结果，评价在摄像部的摄像范围内是否存在图像获取区域，图像获取区域信息输出部将表示摄像范围内的图像获取区域的图像获取区域信息输出到摄像终端，显示部在根据通过摄像部的摄像获得的摄像图像显示实时取景图像的情况下，根据图像获取区域信息能判别地显示图像获取区域。由此，能够对摄像终端用户提示需要获取新的摄像图像的图像获取区域的摄像。
本发明的另一方式所涉及的摄像辅助系统中，检查对象物为建筑物，摄像终端具备获取摄像终端的摄像方向的摄像方向获取部，确定信息还包括摄像方向获取部获取的摄像方向，摄像辅助装置具备设计信息确定部，所述设计信息确定部预先获取多个检查对象物的设计信息，并根据设计信息和检查对象物确定部确定的周边检查对象物，确定周边检查对象物的设计信息，检查对象物确定部根据确定信息获取部获取的确定信息所包含的位置信息及摄像方向和设计信息确定部确定的设计信息，进一步确定摄像部的摄像范围内的周边检查对象物的部位，必要性评价部根据访问数据库并参考周边检查对象物的维护检查信息的结果，评价在检查对象物确定部确定的部位中是否存在图像获取区域。由此，能够在摄像范围内的周边检查对象物的部位的单元进行摄像终端中的图像获取区域的显示，因此摄像终端用户能够容易判别在摄像范围内的周边检查对象物中拍摄哪一部位。
本发明的另一方式所涉及的摄像辅助系统中，检查对象物为建筑物，确定信息还包括通过摄像部的摄像获得的摄像图像，摄像辅助装置具备设计信息确定部，所述设计信息确定部预先获取多个检查对象物的设计信息，并根据设计信息和检查对象物确定部确定的周边检查对象物，确定周边检查对象物的设计信息，检查对象物确定部根据确定信息获取部获取的确定信息所包含的位置信息及摄像图像和设计信息确定部确定的设计信息，进一步确定摄像部的摄像范围内的周边检查对象物的部位，必要性评价部根据访问数据库并参考周边检查对象物的维护检查信息的结果，评价在检查对象物确定部确定的部位中是否存在图像获取区域。由此，能够在摄像范围内的周边检查对象物的部位的单元进行摄像终端中的图像获取区域的显示，因此摄像终端用户能够容易判别在摄像范围内的周边检查对象物中拍摄哪一部位即可。
本发明的另一方式所涉及的摄像辅助系统中，图像获取区域信息输出部将表示通过必要性评价部评价为需要获取新的摄像图像的且在摄像范围内的图像获取区域的图像获取区域信息输出到摄像终端，显示部在根据通过摄像部的摄像获得的摄像图像显示实时取景图像的情况下，根据图像获取区域信息能判别地显示图像获取区域。由此，能够对摄像终端用户提示需要获取新的摄像图像的图像获取区域的摄像。
本发明的另一方式所涉及的摄像辅助系统中，图像获取区域信息中包括能够确定地图上的图像获取区域的位置的信息，显示部根据从图像获取区域信息输出部输出的图像获取区域信息，显示表示了地图上的图像获取区域的位置的图像获取区域显示地图。由此，能够对摄像终端用户提示需要获取新的摄像图像的图像获取区域的摄像。
本发明的另一方式所涉及的摄像辅助系统中，摄像终端具备图像输出部，所述图像输出部在摄像部对图像获取区域进行摄像的情况下将图像获取区域的摄像图像输出到摄像辅助装置，摄像辅助装置具备数据库管理部，所述数据库管理部将从图像输出部输出的摄像图像作为与图像获取区域对应的周边检查对象物的维护检查信息而登录到数据库。由此，能够将通过普通人的摄像终端摄像的摄像图像作为周边检查对象物的维护检查信息登录到数据库。
本发明的另一方式所涉及的摄像辅助系统中，数据库管理部在将从预先设定的特定用户的摄像终端的图像输出部输出的摄像图像登录到数据库的情况下，删除作为周边检查对象物的维护检查信息先登录到数据库的摄像图像且从确定与用户不同的用户的摄像终端获取的摄像图像。由此，能够减少登录到数据库的数据量。
用于实现本发明的目的的摄像辅助装置，具备：确定信息获取部，从摄像终端获取用于确定存在于相对于摄像终端预先设定的范围内的检查对象物即周边检查对象物的确定信息；检查对象物确定部，根据由确定信息获取部获取的确定信息，从多个检查对象物中确定周边检查对象物；必要性评价部，访问存储至少包括多个检查对象物的每一个的摄像图像的维护检查信息的数据库，并参考检查对象物确定部确定的周边检查对象物的维护检查信息而得到结果，根据该结果，评价是否存在需要对周边检查对象物获取新的摄像图像的图像获取区域；及图像获取区域信息输出部，将表示必要性评价部评价为需要获取新的摄像图像的图像获取区域的图像获取区域信息输出到摄像终端。
用于实现本发明的目的的摄像终端构成上述任一项的摄像辅助系统。
用于实现本发明的目的的摄像辅助方法，通过摄像辅助装置辅助基于具有摄像部的摄像终端的检查对象物的摄像，所述方法包括：确定信息获取步骤，摄像辅助装置从摄像终端获取用于确定存在于相对于摄像终端预先设定的范围内的检查对象物即周边检查对象物的确定信息；检查对象物确定步骤，摄像辅助装置根据通过确定信息获取步骤获取的确定信息，从多个检查对象物中确定周边检查对象物；必要性评价步骤，摄像辅助装置访问存储至少包括多个检查对象物的每一个的摄像图像的维护检查信息的数据库，并参考通过检查对象物确定步骤确定的周边检查对象物的维护检查信息而得到结果，根据该结果评价是否存在需要对周边检查对象物获取新的摄像图像的图像获取区域；图像获取区域信息输出步骤，摄像辅助装置将表示在必要性评价步骤中评价为需要获取新的摄像图像的图像获取区域的图像获取区域信息输出到摄像终端；及显示步骤，摄像终端根据在图像获取区域信息输出步骤中从摄像辅助装置获取的图像获取区域信息，将图像获取区域显示于显示部。
发明效果
本发明的摄像辅助系统及装置及方法、以及摄像终端能够从普通人有效地获取需要摄像的检查对象物的摄像图像。
附图说明
图1是第1实施方式的摄像辅助系统的概要图。
图2是表示摄像终端及摄像辅助装置的结构的框图。
图3是用于说明基于建筑物确定部的周边建筑物的确定处理的说明图。
图4是用于说明登录到数据库内的维护检查信息的一例的说明图。
图5是表示基于必要性评价部的必要性评价的处理的流程的流程图。
图6是用于说明图5的步骤S11的处理的说明图。
图7是用于说明通过摄像终端的显示部在实时取景图像上显示的图像获取区域的一例的说明图。
图8是表示相对于基于第1实施方式的摄像辅助系统的摄像终端的摄像辅助处理的流程的流程图。
图9是表示第2实施方式的摄像辅助系统的摄像辅助装置的结构的框图。
图10是用于说明第2实施方式的图像获取区域的说明图。
图11是用于说明通过第2实施方式的摄像终端的显示部在实时取景图像上显示的图像获取区域的一例的说明图。
图12是表示相对于基于第2实施方式的摄像辅助系统的摄像终端的摄像辅助处理的流程的流程图。
图13是表示第2实施方式的摄像辅助系统的变形例中使用的摄像辅助装置的结构的框。
图14是表示第3实施方式的摄像辅助系统的结构的框图。
图15是用于说明显示部中显示的图像获取区域显示地图数据、周边建筑物整体图像数据及放大图像数据的一例的说明图。
图16是表示相对于基于第3实施方式的摄像辅助系统的摄像终端的摄像辅助处理的流程的流程图。
图17是表示第4实施方式的摄像辅助系统的结构的框图。
图18是用于说明基于第4实施方式的数据库管理部的专家检查信息的登录处理的说明图。
具体实施方式
图1是本发明的第1实施方式的摄像辅助系统10的概要图。如图1所示，在摄像辅助系统10中，从普通人拥有的摄像终端12获取作为其周边的预先设定的范围内存在的建筑物的周边建筑物9中需要摄像的周边建筑物9的摄像图像数据13。另外，建筑物相当于本发明的检查对象物(能够成为检查或管理的对象的物体)，包括桥梁、道路、隧道、水坝、堤坝及大厦等。并且，周边建筑物9相当于本发明的周边检查对象物。并且，普通人是指不具有与建筑物的检查有关的专业知识的人员。该摄像辅助系统10构成为包括摄像终端12及摄像辅助装置14。
摄像辅助装置14从摄像终端12获取能够确定周边建筑物9的确定信息15并确定周边建筑物9。接着，摄像辅助装置14参考存储多个建筑物(包括周边建筑物9以外的物体)的维护检查信息38(参考图2)的数据库16，评价有无存在在需要对先前确定的周边建筑物9获取新的摄像图像数据13的图像获取区域17。而且，当评价为存在图像获取区域17时，摄像辅助装置14对摄像终端12输出表示该图像获取区域17的图像获取区域信息17A。作为这种摄像辅助装置14，例如可适用个人计算机、服务器等。
在本发明中，“终端”是指具备信息的通信功能(优选为无线通信功能)的设备。摄像终端12例如可适用智能手机、平板电脑终端及便携式个人计算机等具有摄像功能的各种便携终端、或具备通信功能(优选为无线通信功能)的数码相机等。摄像终端12将前述确定信息15输出到摄像辅助装置14，接收该确定信息15的输入来获取并显示从摄像辅助装置14输出的图像获取区域信息17A，由此提示用户拍摄图像获取区域17。而且，摄像终端12在拍摄图像获取区域17时生成该图像获取区域17的摄像图像数据13并输出到摄像辅助装置14。
从摄像终端12输出到摄像辅助装置14的确定信息15包括摄像终端12的位置信息及摄像终端12的摄像方向(摄像终端12的摄像光轴的方向)。位置信息通过由内置于摄像终端12的GPS(Global Positioning System，全球定位系统)传感器或陀螺仪传感器及加速度传感器等构成的后述位置信息获取部20(参考图2)来获取。摄像方向为三维方向，并且通过内置于摄像终端12的三维地磁传感器和姿势检测传感器等构成的摄像方向获取部21(参考图2参考)来获取。
并且，在本例中，从摄像终端12将摄像终端12的后述的摄像部22(参考图2)的焦距信息(视角信息)23和附带信息24与确定信息15一同输出到摄像辅助装置14。在后面进行详细叙述，该焦距信息23用于确定摄像终端12的摄像部22的摄像范围R(参考图3)。附带信息24是用于从摄像辅助装置14对摄像终端12输出(发送)前述图像获取区域信息17A的信息，例如为摄像终端12的IP地址(Internet Protocol address，互联网协议地址)。
图2是表示摄像终端12及摄像辅助装置14的结构的框图。首先对摄像辅助装置14的结构进行说明。
<摄像辅助装置>
如图2所示，摄像辅助装置14由包括CPU(Central Processing Unit，中央处理单元)的各种运算部、处理部及存储部等构成，并具备确定信息获取部30、相当于本发明的检查对象物确定部的建筑物确定部31、必要性评价部32、图像获取区域信息输出部33及数据库管理部34。
确定信息获取部30例如为能够通过有线或无线通信连接到摄像终端12的通信接口，并从摄像终端12获取确定信息15、焦距信息23及附带信息24。而且，确定信息获取部30将已获取的确定信息15及焦距信息23输出到建筑物确定部31。并且，关于确定信息获取部30省略图示，将已获取的附带信息24输出到图像获取区域信息输出部33。
建筑物确定部31根据从确定信息获取部30输入的确定信息15中所包含的位置信息和访问数据库16而获取的地图信息36来确定摄像终端12的周边建筑物9。另外，建筑物确定部31根据确定信息15中所包含的摄像方向及焦距信息23来确定摄像终端12的摄像部22的摄像范围R(参考图3)内所包含的周边建筑物9。
图3是用于说明基于建筑物确定部31的周边建筑物9的确定处理的说明图。如图3所示，地图信息36表示在使用摄像辅助系统10的国家或所使用的区域内存在的多个建筑物(包括周边建筑物9以外的物体)的位置、例如GPS坐标等。另外，本例的地图信息36优选为三维地图数据，以便能够针对多个建筑物的每一个判别来自多个方向的三维形状(立体形状)。另外，地图信息36无需存储于数据库16，可以存储于互联网上的服务器。此时，建筑物确定部31通过访问互联网上的服务器来获取地图信息36。
建筑物确定部31通过对照确定信息15中所包含的位置信息和地图信息36来确定相对于摄像终端12存在于预先设定的范围内的周边建筑物9。另外，在图3中，为了防止凸面的复杂化，作为周边建筑物9仅将桥梁显示于地图信息36上，但周边建筑物9中还包括道路、隧道、水坝、堤坝及大厦等其他建筑物。另外，关于“预先设定的范围”并无特别限定，为了指示摄像终端12的用户拍摄图像获取区域17，优选为能够通过摄影师的肉眼确认周边建筑物9的距离的范围，该范围通过实验或模拟来确定。
接着，建筑物确定部31根据确定信息15中所包含的摄像方向和焦距信息23(视角信息)从先前确定的周边建筑物9中确定存在于摄像终端12的摄像部22的摄像范围R内的周边建筑物9(在图中用斜线表示)。建筑物确定部31能够从摄像方向判别摄像终端12的摄像部22的摄像光轴指向哪个方向，并能够从焦距信息23判别摄像终端12的摄像部22的摄像范围R(视角)。因此，根据这些判别结果，建筑物确定部31能够在先前确定的周边建筑物9中确定处于摄像终端12的摄像部22的摄像范围R内的周边建筑物9。
返回到图2，建筑物确定部31将确定存在于摄像终端12(摄像部22)的摄像范围R内的周边建筑物9的确定结果输出到必要性评价部32。该确定结果中，例如包括周边建筑物9的坐标(GPS坐标等)，作为能够确定存在于摄像范围R内的周边建筑物9的信息。另外，当能够从地图信息36确定周边建筑物9的名称或地址等时，也可将周边建筑物9的名称或地址包含在前述确定结果。
必要性评价部32根据从建筑物确定部31输入的确定结果，参考登录到数据库16内的维护检查信息38，进行必要性评价，即评价是否存在需要对存在于摄像范围R内的周边建筑物9获取新的摄像图像数据13的图像获取区域17。
图4是用于说明登录到数据库16内的维护检查信息38的一例的说明图。如图4所示，维护检查信息38为表示对存在于使用了摄像辅助系统10的国家或地区的多个建筑物(包括除了周边建筑物9以外的物体)进行的维护检查的结果的信息。该维护检查信息38包括“建筑物信息”、“部位信息”、“检查履历信息”及“修补履历信息”。
“建筑物信息”为能够分别识别多个建筑物的信息，包括作为预先赋予各建筑物的识别号码的“ID(identification，识别)”、建筑物的“名称”及建筑物在地图上的“位置”(在本例中GPS坐标等的坐标)等。另外，“位置”优选包括建筑物的轮廓上的多个部位的坐标，以便能够掌握建筑物的三维形状。并且，“建筑物信息”中也可包括建筑物的地址和建筑物的种类(桥梁、道路、隧道、水坝、堤坝、大厦等)等。
“部位信息”为能够识别建筑物内需要检查的部位的信息，包括部位的“名称”及建筑物内的部位的“相对位置”(本例中为坐标)等。“名称”例如在建筑物为桥梁的情况下是桥墩或横梁等，在建筑物为隧道的情况下是天花板或侧壁面等。由于需要对每种类型的建筑物进行检查的部位(部位)是公知的，因此省略详细说明。“相对位置”为建筑物基准的位置信息(本例中为坐标)，该“相对位置”中优选包括部位的轮廓的多个部位的位置信息，以便能够掌握部位的三维形状。另外，也可以代替“相对位置”或者除了“相对位置”以外，将如前述GPS坐标那样的地球基准的绝对位置登录到“部位信息”。
“检查履历信息”为表示对建筑物内需要检查的部位进行的检查的履历的信息，包括“专家检查履历”和“非专家获取履历”。
“专家检查履历”为具有有关建筑物的检查的专业知识的专家对建筑物内的部位进行检查的检查结果，包括“检查日期和时间”、“图像”及“损伤程度”。另外，“专家检查履历”中也可包括建筑物中产生的损伤的种类(龟裂、腐蚀、松弛、破裂、挠曲、漏水等)。
“检查日期和时间”为由专家进行建筑物的部位的检查的日期和时间。“图像”为检查建筑物的部位时由专家拍摄的摄像图像数据13。
“损伤程度”是对建筑物内的部位中发生的损伤的程度进行评价。在本例中，将损伤程度划分为分类1(没有对建筑物的功能产生障碍的状态)、分类2(没有对建筑物的功能产生障碍，但从预防维护的观点考虑优选采取措施的状态)、分类3(可能对建筑物的功能产生障碍，应尽早采取措施的状态)、分类4(对建筑物的功能产生障碍或产生障碍的可能性极高，应紧急采取措施的状态)这4种分类进行评价。有关这4种分类的详情，希望参考国土交通省道路局发布的道路桥梁定期检查要领或桥梁定期检查要领。另外，损伤程度的分类并不特别限定于上述说明的分类。
“非专家获取履历”是通过不具有与建筑物的检查有关的专业知识的普通人、即摄像终端12的用户拍摄的建筑物(包括建筑物内的部位)的摄像图像数据13的获取履历，包括“摄像日期和时间”和”图像”。“摄像日期和时间”是在摄像终端12进行建筑物的摄像的日期和时间，例如能够从摄像图像数据13的标签信息获取。“图像”为通过摄像终端12拍摄的建筑物的摄像图像数据13。
“修补履历信息”为表示对多个建筑物内的部位进行的修补的履历的信息，包括“修补日期和时间”和”图像”。“修补日期和时间”为对建筑物内的部位进行修补的日期和时间。“图像”为拍摄修补前后的建筑物内的部位的摄像图像数据13，由前述专家拍摄而得。另外，也可将对建筑物内的部位进行的修补的内容登录到“修补履历信息”。
必要性评价部32根据从建筑物确定部31输入的确定结果访问数据库16并参考与摄像范围R内的周边建筑物9对应的维护检查信息38。并且，必要性评价部32根据参考的维护检查信息38内的“检查履历信息”及”修补履历信息”的登录的有无和质量来进行必要性评价，即评价是否存在需要对摄像范围R内的周边建筑物9获取新的摄像图像数据13的图像获取区域17。
在此，在本例(第1实施方式)中，为了便于理解发明，对摄像范围R内的周边建筑物9的必要性评价以摄像范围R内的各周边建筑物9为单位进行，不以周边建筑物9的部位为单位进行。即，本例中的图像获取区域17不是周边建筑物9中的一部分的部位，是指包括需要获取新的摄像图像数据13的部位的周边建筑物9整体(参考图6)。另外，关于以周边建筑物9的部位为单位进行对摄像范围R内的周边建筑物9的必要性评价的例，在后述第2实施方式中进行说明。
“检查履历信息”及“修补履历信息”的登录的有无表示在过去拍摄摄像范围R内的周边建筑物9而得的摄像图像数据13是否登录到数据库16内。在过去拍摄摄像范围R内的周边建筑物9而得的摄像图像数据13未登录到数据库16时，需要获取该周边建筑物9的新的摄像图像数据13。
“检查履历信息”的质量包括从登录到“专家检查履历”的“检查日期和时间”到现在的经过时间及登录的摄像图像数据13的画质及从登录到“非专家获取履历”的“摄像日期和时间”到现在的经过时间及登录的摄像图像数据13的画质。并且，“修补履历信息”的质量包括从登录到“修补履历信息”的“修补日期和时间”到现在的经过时间及登录的摄像图像数据13的画质。
即使在过去拍摄摄像范围R内的周边建筑物9而得的摄像图像数据13登录到数据库16，从通过专家检查时，通过普通人拍摄时及修补时分别经过预定时间(一定时间)的情况下，不能说该摄像图像数据13表示当前的周边建筑物9的状态。因此，需要获取该周边建筑物9的新的摄像图像数据13。
并且，即使在过去拍摄摄像范围R内的周边建筑物9而得的摄像图像数据13登录到数据库16，当摄像图像数据13的画质不适当时，无法从该摄像图像数据13确认当前的周边建筑物9的状态，因此需要获取该周边建筑物9的新的摄像图像数据13。另外，摄像图像数据13的画质适当意味着在本例中摄像图像数据13的分辨率、曝光、失真、抖动或模糊适当，但并不特别限定于这些。
图5是表示基于必要性评价部32的必要性评价的处理的流程的流程图。如图5所示，必要性评价部32访问数据库16，参考与摄像范围R内的周边建筑物9对应的维护检查信息38，评价有无各维护检查信息38中的“专家检查履历”的登录(步骤S1)。
接着，必要性评价部32针对评价为有“专家检查履历”的登录的维护检查信息38(步骤S1中为是)，评价从登录到“专家检查履历”的“检查日期和时间”到目前为止的经过时间是否在预先设定的预定时间经过之前(步骤S2)。
而且，必要性评价部32针对在步骤S2中评价为从“检查日期和时间”经过预定时间之前的维护检查信息38(步骤S2中为是)，评价登录到“专家检查履历”的摄像图像数据13的画质是否适当(步骤S3)。另外，登录到“专家检查履历”的摄像图像数据13是由前述专家拍摄而得的，画质适当的可能性高，因此可以省略步骤S3的评价。
在步骤S3中，必要性评价部32从登录到“专家检查履历”的摄像图像数据13检测分辨率、曝光、失真及抖动或模糊，这些分辨率、曝光、失真及抖动或模糊全部满足预先设定的各基准时，评价为摄像图像数据13的画质适当(步骤S3中为是)。另一方面，当在摄像图像数据13的分辨率、曝光、失真及抖动或模糊中不满足基准的为一个或预先设定的数量以上时，必要性评价部32评价为摄像图像数据13的画质不适当(步骤S3中为否)。
必要性评价部32针对在摄像范围R内的周边建筑物9中，相对应的维护检查信息38在步骤S1至步骤S3的所有步骤中被评价为是的周边建筑物9，无需获取新的摄像图像数据13，并且评价为不对应于图像获取区域17(步骤S4)。在此，本例(第1实施方式)中的上述“相对应的维护检查信息38”，在周边建筑物9只存在一个部位的情况下为该部位的维护检查信息38，在周边建筑物9存在多个部位的情况下为所有部位的维护检查信息38。
另一方面，必要性评价部32针对在步骤S1至步骤S3中的任一步骤中被评价为否的摄像范围R内的周边建筑物9所对应的维护检查信息38，评价该维护检查信息38中有无登录“修补履历信息”(步骤S5)。
接着，必要性评价部32针对评价为有登录“修补履历信息”的维护检查信息38(步骤S5中为是)，评价从登录到该“修补履历信息”的“修补日期和时间”到目前为止的经过时间是否为经过预先设定的预定时间之前(步骤S6)。
而且，必要性评价部32针对在步骤S5中评价为从“修补日期和时间”经过预定时间之前的维护检查信息38(步骤S6中为是)，与如上所述的步骤S3同样地评价登录到“修补履历信息”的摄像图像数据13的画质是否适当(步骤S7)。另外，针对登录到“修补履历信息”的摄像图像数据13，也是由前述专家拍摄而得的，画质适当的可能性较高，因此省略步骤S7的评价。
必要性评价部32针对在摄像范围R内的周边建筑物9中，相对应的维护检查信息38在步骤S5至步骤S7的所有步骤中被评价为是的周边建筑物9，也无需获取新的摄像图像数据13，评价为不对应于图像获取区域17(步骤S4)。
另一方面，必要性评价部32针对在步骤S5至步骤S7中的任一步骤中被评价为否的摄像范围R内的周边建筑物9的维护检查信息38，评价该维护检查信息38中有无登录“非专家获取履历”(步骤S8)。
接着，必要性评价部32针对评价为有登录“非专家获取履历”的维护检查信息38(步骤S8中为是)，评价从登录到“非专家获取履历”的“摄像日期和时间”到目前为止的经过时间是否为经过预先设定的预定时间之前(步骤S9)。
而且，必要性评价部32针对在步骤S9中评价为从“摄像日期和时间”经过预定时间之前的维护检查信息38(步骤S9中为是)，与如上所述的步骤S3同样地评价登录到“非专家获取履历”的摄像图像数据13的画质是否适当(步骤S10)。
必要性评价部32针对在摄像范围R内的周边建筑物9中，相对应的维护检查信息38在步骤S8至步骤S10的所有步骤中被评价为是的周边建筑物9，也无需获取新的摄像图像数据13，评价为不对应于图像获取区域17(步骤S4)。
图6是用于说明图5的步骤S11的处理的说明图。如图5及图6所示，当存在在摄像范围R内的周边建筑物9中，相对应的维护检查信息38在步骤S8至步骤S10中的任一步骤中被评价为否的周边建筑物9时，必要性评价部32评价为该周边建筑物9对应于需要获取新的摄像图像数据13的图像获取区域17(图5的步骤S11)。
由此完成基于必要性评价部32的必要性评价的处理。而且，必要性评价部32将必要性评价的评价结果输出到图像获取区域信息输出部33(参考图2、图4)。
另外，基于必要性评价部32的必要性评价的方法并不限定于图5所示的流程图中说明的方法，可适当变更。例如，分别对“专家检查履历”的评价(步骤S1～S3)、“修补履历信息”的评价(步骤S5～S7)及“非专家获取履历”的评价(步骤S8～S10)进行加权，在各评价中每次评价为是时总计权重，并且可以根据各评价的权重的总计值来进行必要性评价。此时，根据各评价的权重的总计值是否达到预先设定的基准值以上，评价周边建筑物9是否对应于图像获取区域17。
并且，基于必要性评价部32的必要性评价的项目并不限定于图5所示的流程图中说明的“专家检查履历”的评价(步骤S1～S3)、“修补履历信息”的评价(步骤S5～S7)及“非专家获取履历”的评价(步骤S8～S10)，也可适当添加评价项目。另外，也可以设为能够选择图5所示的各步骤的评价中要执行的项目和不执行的项目。
返回到图2，图像获取区域信息输出部33根据从必要性评价部32输入的必要性评价的评价结果，当存在需要相对于摄像终端12的摄像范围R内的周边建筑物9获取新的摄像图像数据13的图像获取区域17时，生成表示该图像获取区域17的图像获取区域信息17A。而且，图像获取区域信息输出部33根据先前从确定信息获取部30获取的附带信息24将所生成的图像获取区域信息17A输出到确定信息15等的输出源(发送源)的摄像终端12。另外，可以使图像获取区域信息输出部33与前述确定信息获取部30一体化。
图像获取区域信息17A包括摄像终端12的摄像范围R内的表示图像获取区域17的位置及形状的信息。
例如在前述的地图信息36为三维地图数据时，摄像范围R内的图像获取区域17(与图像获取区域17对应的周边建筑物9)的位置及形状能够根据记录于该地图信息36的周边建筑物9的三维形状、摄像终端12的位置信息及摄像方向及摄像终端12的焦距信息23来判别。并且，在数据库16内的维护检查信息38的“建筑物信息”的“位置”登录有表示周边建筑物9的轮廓的多个坐标时，从这些坐标求出与图像获取区域17对应的周边建筑物9的三维形状，与其他位置信息及摄像方向及焦距信息23进行比较，从而能够判别图像获取区域17的位置及形状。另外，判别摄像范围R内的图像获取区域17的位置及形状的方法并无特别限定。
数据库管理部34获取从摄像终端12输出的后述图像获取区域17的摄像图像数据13，并将该摄像图像数据13登录到与图像获取区域17对应的周边建筑物9的维护检查信息38的“非专家获取履历”。
<摄像终端>
摄像终端12构成为包括前述位置信息获取部20及摄像方向获取部21及摄像部22、存储部40、确定信息输出部41、图像获取区域信息获取部42、显示控制部43、显示部44、图像输出部45。
存储部40存储作为用于使摄像终端12作为摄像辅助系统10的一部分而发挥功能的应用程序的程序46及前述附带信息24。通过启动该程序46，执行基于摄像终端12的确定信息15等的输出、通过摄像终端12获取和显示图像获取区域信息17A、通过摄像终端12向摄像辅助装置14输出摄像图像数据13。
摄像部22具有光学系统和图像传感器，在程序46的控制下，开始拍摄包括周边建筑物9的被摄体，将实时取景显示用的摄像图像数据13依次输出到显示控制部43。并且，摄像部22在程序46的控制下，将光学系统的焦距信息23输出到确定信息输出部41。
确定信息输出部41在程序46的控制下将包括由位置信息获取部20获取的位置信息和由摄像方向获取部21获取的摄像方向的确定信息15输出到摄像辅助装置14。并且，确定信息输出部41将从摄像部22获取的焦距信息23和从存储部40获取的附带信息24输出到摄像辅助装置14。由此，通过摄像辅助装置14的确定信息获取部30获取确定信息15、焦距信息23及附带信息24。其结果，从摄像辅助装置14的图像获取区域信息输出部33将前述图像获取区域信息17A输出到摄像终端12。
图像获取区域信息获取部42为能够通过有线或无线通信连接到摄像辅助装置14的通信接口。另外，可以使图像获取区域信息获取部42与前述确定信息输出部41一体化。图像获取区域信息获取部42在程序46的控制下获取从图像获取区域信息输出部33输出的图像获取区域信息17A并输出到显示控制部43。
显示控制部43在程序46的控制下，根据从摄像部22输入的摄像图像数据13将实时取景图像显示于摄像终端12的显示部44。作为该显示部44，例如可列举所谓触摸面板，其显示图像和文本信息等，将信息可视地传递给用户，并且检测用户对已显示的信息的操作。另外，显示部44并不限于与摄像终端12一体设置的显示部，包括通过有线或无线与摄像终端12连接的显示部。
当从图像获取区域信息获取部42输入图像获取区域信息17A时，显示控制部43根据该图像获取区域信息17A，由显示部44在实时取景图像上以能够判别的方式显示图像获取区域17。
图7是用于说明通过摄像终端12的显示部44在实时取景图像上显示的图像获取区域17的一例的说明图。如图7所示，显示控制部43根据图像获取区域信息17A所包含的摄像范围R内的图像获取区域17的位置及形状判别显示部44的显示面内的图像获取区域17的位置及形状。而且，根据该判别结果，显示控制部43改变显示部44中显示的实时取景图像内的与图像获取区域17对应的部分的显示方式。
在此所谓改变显示方式是指例如改变在显示部44中与图像获取区域17对应的部分的亮度、色调(色度、色调)、或者在与图像获取区域17对应的部分重叠(叠加)显示各种图案和标记等。由此，能够在显示部44显示的实时取景图像上以能够判别的方式显示图像获取区域17。其结果，能够指示摄像终端12的用户拍摄图像获取区域17(需要获取新的摄像图像数据13的周边建筑物9)。
返回到图2，当在通过显示部44显示实时取景图像的过程中，从摄像终端12的用户接收摄像操作的输入时，摄像部22在程序46的控制下拍摄被摄体(在此为图像获取区域17)并生成摄像图像数据13，将该摄像图像数据13输出到图像输出部45。
图像输出部45在程序46的控制下将从摄像部22输入的摄像图像数据13输出到摄像辅助装置14。由此，通过前述数据库管理部34获取图像获取区域17的摄像图像数据13，该摄像图像数据13登录到与图像获取区域17对应的周边建筑物9的维护检查信息38的“非专家获取履历”。
[第1实施方式的图像登录系统的作用]
接着，利用图8对上述结构的摄像辅助系统10的作用进行说明。图8是表示相对于基于第1实施方式的摄像辅助系统10的摄像终端12的摄像辅助处理(本发明的摄像辅助方法)的流程的流程图。
<输出来自摄像终端的确定信息>
若摄像终端12的用户进行程序46的启动操作，则在摄像终端12执行程序46(步骤S20)。在该程序46的控制下，摄像部22开始拍摄包括周边建筑物9的被摄体，并将实时取景显示用的摄像图像数据13依次输出到显示控制部43。由此，显示控制部43在显示部44显示实时取景图像(步骤S21)。
并且，在程序46的控制下，确定信息输出部41将基于从位置信息获取部20获取的位置信息和从摄像方向获取部21获取的摄像方向的确定信息15输出到摄像辅助装置14(步骤S22)。另外，确定信息输出部41将从摄像部22获取的焦距信息23和从存储部40获取的附带信息24输出到摄像辅助装置14。
<摄像辅助装置中的必要性评价>
摄像辅助装置14的确定信息获取部30获取从摄像终端12输出的确定信息15、焦距信息23及附带信息24(步骤S23，相当于本发明的确定信息获取步骤)。而且，确定信息获取部30将已获取的确定信息15及焦距信息23输出到建筑物确定部31，并且将已获取的附带信息24输出到图像获取区域信息输出部33。
如前述图3所示，从确定信息获取部30接收确定信息15及焦距信息23的输入的建筑物确定部31首先根据确定信息15所包含的位置信息和从数据库16获取的地图信息36确定摄像终端12的周边建筑物9(步骤S24，相当于本发明的检查对象物确定步骤)。接着，建筑物确定部31根据确定信息15所包含的摄像方向及焦距信息23确定摄像终端12(摄像部22)的摄像范围R所包含的周边建筑物9，并将该确定结果输出到必要性评价部32。
从建筑物确定部31接收存在于摄像范围R内的周边建筑物9的确定结果的输入的必要性评价部32根据该确定结果访问数据库16并参考与摄像范围R内的周边建筑物9对应的维护检查信息38。而且，如前述图5及图6中所说明，必要性评价部32进行必要性评价(步骤S25，相当于本发明的必要性评价步骤)，即评价相对于摄像范围R内的周边建筑物9是否存在需要获取新的摄像图像数据13的图像获取区域17。必要性评价部32将必要性评价的评价结果输出到图像获取区域信息输出部33。
当相对于摄像范围R内的周边建筑物9存在图像获取区域17时，如上所述，从必要性评价部32接收必要性评价的评价结果的图像获取区域信息输出部33生成包括表示摄像范围R内的图像获取区域17的位置及形状的信息的图像获取区域信息17A(步骤S26中为是)。另一方面，当不存在图像获取区域17时，图像获取区域信息输出部33为待机状态，直到从必要性评价部32输入指示存在图像获取区域17的评价结果(步骤S26中为否)。
在步骤S26为是的情况下，图像获取区域信息输出部33根据之前从确定信息获取部30获取的附带信息24，将图像获取区域信息17A输出到确定信息15等的输出源(发送源)的摄像终端12(步骤S27，相当于本发明的图像获取区域信息输出步骤)。
<显示摄像终端内的图像获取区域>
摄像终端12的图像获取区域信息获取部42成为待机状态直到从摄像辅助装置14输出图像获取区域信息17A为止。此时，若通过前述步骤S21中说明的显示部44显示实时取景图像，则继续输出前述步骤S22中说明的确定信息15等(步骤S28中为否)。
若从摄像辅助装置14输出图像获取区域信息17A，则由图像获取区域信息获取部42获取该图像获取区域信息17A并输出到显示控制部43(步骤S28中为是)。
接收来自图像获取区域信息获取部42的图像获取区域信息17A的输入的显示控制部43根据图像获取区域信息17A判别显示部44的显示面内的图像获取区域17的位置及形状。而且，如前述图7所示，显示控制部43根据图像获取区域17的位置及形状的判别结果改变在显示部44中显示的实时取景图像内与图像获取区域17对应的部分的显示方式。由此，在显示部44中显示的实时取景图像上以能够判别的方式显示图像获取区域17(步骤S29，相当于本发明的显示步骤)。其结果，摄像终端12的用户能够在图像获取区域17即摄像范围R内的周边建筑物9中识别需要获取新的摄像图像数据13的周边建筑物9。
<输出图像获取区域的摄像图像数据>
摄像终端12的用户根据显示部44中显示的实时取景图像上的图像获取区域17调整摄像终端12的位置及朝向，以便该图像获取区域17位于摄像部22的摄像范围R(视角)的中心。另外，根据需要可进行变焦调整等。接着，用户对摄像终端12进行摄像操作(步骤S30中为是)。接收该摄像操作的摄像部22在程序46的控制下拍摄图像获取区域17并生成摄像图像数据13，将该摄像图像数据13输出到图像输出部45。
从摄像部22接收图像获取区域17的摄像图像数据13的输入的图像输出部45在程序46的控制下，将该摄像图像数据13输出到摄像辅助装置14(步骤S31)。
<登录到数据库>
摄像辅助装置14的数据库管理部34获取从摄像终端12输出的图像获取区域17的摄像图像数据13(步骤S32)。而且，数据库管理部34访问数据库16，将获取的图像获取区域17的摄像图像数据13登录到与该图像获取区域17对应的周边建筑物9的维护检查信息38的“非专家获取履历”(步骤S33)。
[第1实施方式的效果]
如上所述，在第1实施方式的摄像辅助系统10(摄像辅助装置14)中，根据由普通人从摄像终端12获取的确定信息15等，进行是否存在需要对摄像终端12的摄像范围R内存在的周边建筑物9获取新的摄像图像数据13的图像获取区域17的必要性评价，若评价为有获取的必要性，则将表示图像获取区域17的图像获取区域信息17A输出到摄像终端12，因此能够指示摄像终端12的用户拍摄图像获取区域17。其结果，能够从普通人的摄像终端12有效地获取需要摄像的建筑物的摄像图像数据13并登录到数据库16。
[第2实施方式的摄像辅助系统]
接着，对本发明的第2实施方式的摄像辅助系统进行说明。在上述第1实施方式中，摄像辅助装置14的必要性评价部32以摄像范围R内的周边建筑物9为单位进行必要性评价，摄像终端12以摄像范围R内的周边建筑物9为单位显示图像获取区域17。相对于此，在第2实施方式的摄像辅助系统中，以摄像范围R内的周边建筑物9的部位(图4参考)为单位进行前述必要性评价，以摄像范围R内的周边建筑物9的部位为单位进行摄像终端12中的图像获取区域17的显示。
图9是表示第2实施方式的摄像辅助系统的摄像辅助装置14A的结构的框图。另外，第2实施方式的摄像辅助系统中，摄像辅助装置14A的结构的一部分与第1实施方式的摄像辅助装置14不同，除了这一点以外，基本上与第1实施方式的摄像辅助系统10为相同的结构。因此，针对与上述第1实施方式在功能或结构上相同的结构标准相同符号并省略其说明。
如图9所示，第2实施方式的摄像辅助装置14A具备设计信息确定部51、相当于本发明的检查对象物确定部的建筑物确定部31A及必要性评价部32A，除了这一点以外，基本上与第1实施方式的摄像辅助装置14为相同的结构。
设计信息确定部51从数据库16获取多个建筑物(包括周边建筑物9以外的物体)的设计信息53，根据已获取的各设计信息53和从后述建筑物确定部31A获取的摄像终端12的摄像范围R内的周边建筑物9的确定结果来确定摄像范围R内的周边建筑物9的设计信息53。另外，设计信息53无需登录到数据库16，也可登录到互联网上的服务器。此时，设计信息确定部51从互联网上的服务器获取多个建筑物的设计信息53。
设计信息53例如除了前述图4所示的“建筑物信息”以外还包括能够识别建筑物内的所有部位(也包括无需检查的物体)的“部位信息”。该“部位信息”包括前述图4所示的部位的“名称”及建筑物内的部位的“相对位置”(绝对位置或两者均可)等。通过参考该设计信息53，能够判别建筑物内的各部位的位置(相对位置、绝对位置)，因此在从任意方向拍摄建筑物时能够确定位于该摄像范围R内的部位。设计信息确定部51将摄像范围R内的周边建筑物9的设计信息53输出到建筑物确定部31A。
建筑物确定部31A与上述第1实施方式的建筑物确定部31同样地确定摄像终端12的摄像范围R内的周边建筑物9，并将该确定结果输出到设计信息确定部51。由此，建筑物确定部31A如前述那样能够获取摄像范围R内的周边建筑物9的设计信息53。
接着，建筑物确定部31A根据从确定信息获取部30获取的确定信息15所包含的位置信息及摄像方向和从设计信息确定部51获取的摄像范围R内的周边建筑物9的设计信息53确定位于摄像范围R内的周边建筑物9的部位。根据摄像范围R内的周边建筑物9的设计信息53能够判别该周边建筑物9内的各部位的位置(相对位置、绝对位置)，因此从摄像终端12所在的位置及摄像方向拍摄周边建筑物9时，还能够确定位于该摄像范围R内的周边建筑物9的部位。
建筑物确定部31A将确定摄像终端12的摄像部22的摄像范围R内的周边建筑物9及其部位的确定结果输出到必要性评价部32A。该确定结果中，作为能够确定摄像范围R内的周边建筑物9及其部位的信息，例如包括周边建筑物9的坐标及摄像范围R内的部位的相对位置或绝对位置的坐标等。另外，若能够确定设计信息53到摄像范围R内的周边建筑物9及其部位的名称，则可将周边建筑物9及其部位的名称包含在前述确定结果中。
必要性评价部32A根据从建筑物确定部31A输入的确定结果，访问数据库16，并参考与摄像范围R内的周边建筑物9的部位对应的维护检查信息38(参考图4)。而且，必要性评价部32A根据所参考的维护检查信息38内的“检查履历信息”及“修补履历信息”的登录的有无和质量，进行必要性评价，即评价在摄像范围R内的周边建筑物9的部位中是否存在需要获取新的摄像图像数据13的图像获取区域17。
具体而言，必要性评价部32A对每一个与摄像范围R内的周边建筑物9的部位对应的维护检查信息38进行前述图5中说明的必要性评价。而且，必要性评价部32A在摄像范围R内的周边建筑物9的部位中，针对相对应的维护检查信息38在前述图5所示的步骤S1至步骤S3的所有步骤中评价为是的周边建筑物9的部位，评价为无需获取新的摄像图像数据13，并且不对应于图像获取区域17(步骤S4)。并且，必要性评价部32A针对在步骤S5至步骤S7的所有步骤或步骤S8至步骤S10的所有步骤中评价为是的周边建筑物9的部位同样地评价为无需获取新的摄像图像数据13，并且不对应于图像获取区域17(步骤S4)。
另一方面，必要性评价部32A在摄像范围R内的周边建筑物9的部位中，当存在相对应的维护检查信息38在步骤S8至步骤S10的任一个中评价为否的部位时，评价为该周边建筑物9的部位对应于需要获取新的摄像图像数据13的图像获取区域17(步骤S11)。
图10是用于说明第2实施方式的图像获取区域17的说明图。如图10所示，在第2实施方式的必要性评价部32A中，以摄像范围R内的周边建筑物9的部位为单位进行必要性评价，因此能够以摄像范围R内的周边建筑物9的部位为单位评价是否存在需要获取新的摄像图像数据13的图像获取区域17。由此，例如能够判别在摄像范围R内的桥梁中桥墩为需要获取新的摄像图像数据13的图像获取区域17。而且，必要性评价部32A将必要性评价的评价结果输出到图像获取区域信息输出部33。
返回到图9，第2实施方式的图像获取区域信息输出部33根据从必要性评价部32A输入的必要性评价的评价结果，当在摄像终端12的摄像范围R内的周边建筑物9的部位中存在需要获取新的摄像图像数据13的图像获取区域17时，生成表示该图像获取区域17的图像获取区域信息17A。该图像获取区域信息17A中，与第1实施方式同样地包括表示摄像终端12的摄像范围R内的图像获取区域17的位置及形状的信息。而且，图像获取区域信息输出部33将已生成的图像获取区域信息17A与前述第1实施方式相同地输出到确定信息15等的输出源的摄像终端12。
进行向摄像终端12输出图像获取区域信息17A以后的处理的结构基本上与第1实施方式相同。当从图像获取区域信息获取部42输入图像获取区域信息17A时，第2实施方式的摄像终端12的显示控制部43根据该图像获取区域信息17A，通过显示部44在实时取景图像上以能够判别的方式显示图像获取区域17。
图11是用于说明通过第2实施方式的摄像终端12的显示部44显示于实时取景图像上的图像获取区域17的一例的说明图。如图11所示，在第2实施方式中，以摄像范围R内的周边建筑物9的部位为单位进行必要性评价，因此在摄像范围R内的周边建筑物9的部位中能够改变与图像获取区域17对应的部位的显示方式。另外，进行后续处理的结构由于基本上与前述第1实施方式相同，因此省略具体说明。
[第2实施方式的摄像辅助系统的作用]
接着，利用图12对第2实施方式的摄像辅助系统(摄像辅助装置14A)的作用进行说明。图12是表示通过第2实施方式的摄像辅助系统(摄像辅助装置14A)对摄像终端12进行摄像辅助处理(本发明的摄像辅助方法)的流程的流程图。另外，从步骤S20至步骤S24的处理的流程基本上与前述图8所示的第1实施方式相同，因此在此省略具体说明。
<第2实施方式的摄像辅助装置>
在步骤S24中，建筑物确定部31A与上述第1实施方式同样地，在确定摄像终端12的摄像范围R内的周边建筑物9之后，将该确定结果输出到设计信息确定部51。接着，设计信息确定部51根据从建筑物确定部31A输入的确定结果及从数据库16获取的多个建筑物的设计信息53，确定摄像范围R内的周边建筑物9的设计信息53并输出到建筑物确定部31A(步骤S24A1)。由此，建筑物确定部31A根据先前获取的确定信息15所包含的位置信息及摄像方向、摄像范围R内的周边建筑物9的设计信息53，确定在摄像范围R内的周边建筑物9的部位(步骤S24A2)。而且，建筑物确定部31A将在摄像范围R内的周边建筑物9及其部位的确定结果输出到必要性评价部32A。
建筑物确定部31A接收确定结果的输入的必要性评价部32A根据该确定结果访问数据库16并参考与摄像范围R内的周边建筑物9的部位对应的维护检查信息38。接着，必要性评价部32A对每个与摄像范围R内的周边建筑物9的部位对应的维护检查信息38进行前述图5中说明的必要性评价(步骤S25A)。由此，能够以摄像范围R内的周边建筑物9的部位为单位评价是否存在需要获取新的摄像图像数据13的图像获取区域17。必要性评价部32A将必要性评价的评价结果输出到图像获取区域信息输出部33。
另外，步骤S26至步骤S28之间的处理基本上与前述图8所示的第1实施方式相同，因此在此省略具体说明。
<第2实施方式的摄像终端>
在步骤S28中为是时，摄像终端12的显示控制部43根据从图像获取区域信息获取部42输入的图像获取区域信息17A判别显示部44的显示面内的图像获取区域17的位置及形状。而且，显示控制部43根据图像获取区域17的位置及形状的判别结果，如前述图11所示那样改变在显示于显示部44的实时取景图像内与图像获取区域17对应的部分的显示方式。由此，在显示于显示部44的实时取景图像上以能够判别的方式显示图像获取区域17(步骤S29A)。其结果，摄像终端12的用户能够判别摄像范围R内的周边建筑物9的部位中是否存在需要获取新的摄像图像数据13的图像获取区域17。
步骤S30以后的处理基本上与前述图8所示的第1实施方式相同，因此在此省略具体说明。
[第2实施方式的效果]
如上述那样在第2实施方式的摄像辅助系统(摄像辅助装置14A)中，以摄像范围R内的周边建筑物9的部位为单位进行是否存在需要获取新的摄像图像数据13的图像获取区域17的必要性评价，因此能够以摄像范围R内的周边建筑物9的部位为单位进行摄像终端12内的图像获取区域17的显示。由此，摄像终端用户能够容易判别在摄像范围R内的周边建筑物9中拍摄哪一部位。其结果，能够与第1实施方式同样地指示摄像终端12的用户拍摄图像获取区域17，因此能够有效地从普通人的摄像终端12获取需要摄像的建筑物的摄像图像数据13并登录到数据库16。
[第2实施方式的摄像辅助系统(摄像辅助装置)的变形例]
接着，对第2实施方式的摄像辅助系统的变形例进行说明。在该变形例中，确定在摄像范围R内的周边建筑物9及其部位的方法与第2实施方式不同。
图13是表示第2实施方式的摄像辅助系统的变形例中使用的摄像辅助装置14A1的结构的框图。第2实施方式的变形例的摄像辅助系统中，该摄像辅助装置14A具备确定信息获取部30A1及建筑物确定部31A1，除了这点以外，为与第2实施方式基本上相同的结构。因此，对与上述第2实施方式在功能或结构上相同的标注相同符号并省略其说明。
如图13所示，摄像辅助装置14A1的确定信息获取部30A1从摄像终端12获取确定信息15A1及附带信息24。该确定信息15A1包括前述位置信息和通过摄像终端12的摄像部22拍摄而得的实时取景显示用的摄像图像数据13。另外，虽然省略图示，在第2实施方式的摄像辅助系统的变形例中，摄像终端12的确定信息输出部41(参考图2)将包括由位置信息获取部20获取的位置信息和摄像部22拍摄而得的实时取景显示用的摄像图像数据13的确定信息15A1输出到摄像辅助装置14A1。
建筑物确定部31A1与上述第2实施方式的建筑物确定部31A同样地确定摄像终端12的摄像范围R内的周边建筑物9，并将该确定结果输出到设计信息确定部51，由此从设计信息确定部51获取摄像范围R内的周边建筑物9的设计信息53。另外，本例中的设计信息53中登录有表示多个建筑物(包括周边建筑物9以外的物体)及其各部位的外观形状的数据。
建筑物确定部31A1分析从确定信息获取部30A1获取的确定信息15A1所包含的摄像图像数据13，确定该摄像图像数据13、即摄像终端12的摄像范围R内所包含的周边建筑物9。作为确定摄像图像数据13(摄像范围R)内的周边建筑物9的方法，例如可使用将已获取的设计信息53所包含的周边建筑物9的外观形状数据作为模板图像进行模板匹配并从摄像图像数据13检索(提取)外观形状匹配的周围建筑物的方法。
接着，建筑物确定部31A1根据已确定的摄像范围R内的周边建筑物9的设计信息53，将该设计信息53所包含的周边建筑物9的各部位的外观形状数据作为模板图像进行模板匹配，通过从摄像图像数据13检索外观形状匹配的等，确定摄像范围R内的周边建筑物9的部位。
另外，在本例中，作为从摄像图像数据13确定摄像范围R内的周边建筑物9及其部位的方法列举模板匹配法进行了说明，但确定方法不限定于模板匹配法。
这样，在第2实施方式的变形例的建筑物确定部31A1中也与第2实施方式的建筑物确定部31A同样地能够确定摄像终端12的摄像部22的摄像范围R内的周边建筑物9及其部位。而且，建筑物确定部31A1将摄像范围R内的周边建筑物9及其部位的确定结果输出到必要性评价部32A。
进行后续的处理的结构基本上与前述第2实施方式相同，因此省略具体说明。由此，可获得与上述第2实施方式相同的效果。另外，上述第1实施方式的建筑物确定部31确定摄像范围R内的周边建筑物9时，也可与第2实施方式的变形例同样地使用从摄像终端12获取的位置信息及摄像图像数据13来进行确定。
[第3实施方式的摄像辅助系统]
接着，利用图14对本发明的第3实施方式的摄像辅助系统10B进行说明。图14是表示第3实施方式的摄像辅助系统10B的结构的框图。在上述各实施方式中，在显示于显示部44的实时取景图像上以能够判别的方式显示图像获取区域17，在第3实施方式的摄像辅助系统10B中将表示图像获取区域17的位置的地图显示于显示部44。该摄像辅助系统10B构成为包括摄像终端12B及摄像辅助装置14B。另外，对与上述各实施方式在功能或结构上相同的标注相同符号并省略其说明。
<第3实施方式的摄像辅助装置>
第3实施方式的摄像辅助装置14B具备确定信息获取部30B、相当于本发明的检查对象物确定部的建筑物确定部31B、必要性评价部32B、图像获取区域信息输出部33B及数据库管理部34。
确定信息获取部30B从摄像终端12B获取包括摄像终端12B的位置信息的确定信息15B及附带信息24，并将已获取的确定信息15B输出至建筑物确定部31B。并且，确定信息获取部30B与第1实施方式同样地将附带信息24输出到图像获取区域信息输出部33B。
建筑物确定部31B根据从确定信息获取部30B输入的确定信息15B及从数据库16获取的地图信息36，与第1实施方式同样地确定摄像终端12B的周边建筑物9，并将该确定结果输出到必要性评价部32B。
必要性评价部32B根据从建筑物确定部31B输入的周边建筑物9的确定结果，访问数据库16，参考与周边建筑物9对应的维护检查信息38参考图4)。此时，本例的维护检查信息38按照周边建筑物9的各部位登录到数据库16中，因此必要性评价部32B参考与周边建筑物9的所有部位对应的维护检查信息38。
接着，必要性评价部32B按照与周边建筑物9的各部位对应的每个维护检查信息38进行前述图5中说明的必要性评价。具体而言，必要性评价部32B在周边建筑物9的部位中，关于相对应的维护检查信息38在前述图5所示的步骤S1至步骤S3的所有步骤中评价为是的周边建筑物9的部位，评价为无需获取新的摄像图像数据13，并且不对应于图像获取区域17(步骤S4)。并且，必要性评价部32B针对在步骤S5至步骤S7的所有步骤或步骤S8至步骤S10的所有步骤中评价为是的周边建筑物9的部位，也同样地评价为无需获取新的摄像图像数据13，并且不对应于图像获取区域17(步骤S4)。
另一方面，在摄像范围R内的周边建筑物9的部位中，当存在相对应的维护检查信息38在步骤S8至步骤S10中的任一步骤中评价为否的周边建筑物9的部位时，必要性评价部32B评价为该周边建筑物9的部位对应于需要获取新的摄像图像数据13的图像获取区域17(步骤S11)。而且，必要性评价部32B将必要性评价的评价结果输出到图像获取区域信息输出部33B。
图像获取区域信息输出部33B根据从必要性评价部32B输入的必要性评价的评价结果，当周边建筑物9的部位中存在需要获取新的摄像图像数据13的图像获取区域17时，生成表示该图像获取区域17的图像获取区域信息17B。
图像获取区域信息17B包括能够确定在地图上图像获取区域17所在的周边建筑物9的位置的信息及能够确定在该周边建筑物9内评价为对应于图像获取区域17的周边建筑物9的部位的信息。例如，在本例中，作为能够确定周边建筑物9在地图上的位置的信息使用前述图4所示的“建筑物信息”，作为能够确定评价为对应于图像获取区域17的周边建筑物9的部位的信息使用前述图4所示的“部位信息”。而且，图像获取区域信息输出部33B根据先前从确定信息获取部30B获取的附带信息24，将已生成的图像获取区域信息17B输出到确定信息15B等的输出源的摄像终端12B。
<第3实施方式的摄像终端>
第3实施方式的摄像终端12B构成为包括位置信息获取部20、摄像部22、存储部40、确定信息输出部41B、图像获取区域信息获取部42B、显示控制部43B、显示部44及图像输出部45。
存储部40存储用于使摄像终端12B作为摄像辅助系统10B的一部分而发挥功能的前述程序46、前述附带信息24、地图信息56及照片信息57。地图信息56基本上与前述地图信息36相同，表示多个建筑物(包括周边建筑物9以外的物体)的位置。照片信息57为预先拍摄多个建筑物及其各部位而得的照片图像数据。另外，作为照片信息57，例如可使用通过计算机绘图描绘多个建筑物及其各部位而得的图像数据等、能够识别多个建筑物及其各部位的外观的图像数据。
确定信息输出部41B在程序46的控制下将包括由位置信息获取部20获取的位置信息的确定信息15B和从存储部40获取的附带信息24输出到摄像辅助装置14B。由此，在摄像辅助装置14B的确定信息获取部30B中获取确定信息15B及附带信息24，因此从摄像辅助装置14B的图像获取区域信息输出部33B对摄像终端12B输出前述图像获取区域信息17B。
图像获取区域信息获取部42B基本上与第1实施方式的图像获取区域信息获取部42相同，在程序46的控制下，获取从图像获取区域信息输出部33B输出的图像获取区域信息17B并输出到显示控制部43B。
显示控制部43B在通过摄像终端12B拍摄时，与第1实施方式同样地根据从摄像部22逐一输入的摄像图像数据13，将实时取景图像显示于显示部44。
另一方面，当从图像获取区域信息获取部42B输入图像获取区域信息17B时，显示控制部43B在程序46的控制下，根据图像获取区域信息17B和从存储部40获取的地图信息56而生成图像获取区域显示地图数据58(参考图15)。该图像获取区域显示地图数据58相当于本发明的图像获取区域显示地图，表示地图上的包括图像获取区域17的周边建筑物9的位置和摄像终端12的位置。另外，摄像终端12的位置能够从位置信息获取部20获取。
并且，显示控制部43B在程序46的控制下从存储部40获取图像获取区域信息17B所包含的与前述“建筑物信息”对应的照片信息57，并根据该照片信息57生成周边建筑物9整体中表示图像获取区域17的位置的周边建筑物整体图像数据59(参考图15)。另外，显示控制部43B在程序46的控制下从存储部40获取图像获取区域信息17B所包含的与前述“部位信息”对应的照片信息57，并根据该照片信息57生成将周边建筑物9中的图像获取区域17放大的放大图像数据60(参考图15)。
图像获取区域显示地图数据58、周边建筑物整体图像数据59及放大图像数据60中，使与图像获取区域17对应的部分的显示形态与其他部分不同(参考图15)。而且，显示控制部43B将图像获取区域显示地图数据58、周边建筑物整体图像数据59及放大图像数据60分别显示于显示部44。
图15是用于说明显示于显示部44的图像获取区域显示地图数据58、周边建筑物整体图像数据59及放大图像数据60的一例的说明图。如图15所示，通过图像获取区域显示地图数据58显示包括图像获取区域17的周边建筑物9与摄像终端12B的位置关系。通过周边建筑物整体图像数据59来显示周边建筑物9整体中的图像获取区域17的位置。通过放大图像数据60来显示摄像对象的图像获取区域17的外观。由此，能够在显示部44中可判别地显示图像获取区域17。其结果，能够指示摄像终端12B的用户拍摄图像获取区域17。
另外，进行后续的处理的结构基本上与前述第1实施方式相同，因此省略具体说明。
[第3实施方式的摄像辅助系统的作用]
接着，利用图16对第3实施方式的摄像辅助系统10B(摄像辅助装置14B)的作用进行说明。图16是表示相对于基于第3实施方式的摄像辅助系统10B(摄像辅助装置14B)的摄像终端12B的摄像辅助处理(本发明的摄像辅助方法)的流程的流程图。
<输出来自第3实施方式的摄像终端的确定信息>
若在摄像终端12B中执行程序46(步骤S20)，则在该程序46的控制下，确定信息输出部41B将包括从位置信息获取部20获取的位置信息的确定信息15B和从存储部40获取的附带信息24输出到摄像辅助装置14B(步骤S22B)。
<第3实施方式的摄像辅助装置中的必要性评价>
摄像辅助装置14B的确定信息获取部30B获取从摄像终端12B输出的确定信息15B及附带信息24(步骤S23B)。而且，确定信息获取部30B将已获取的确定信息15B输出到建筑物确定部31B，并且将已获取的附带信息24输出到图像获取区域信息输出部33B。
从确定信息获取部30B接收确定信息15B的输入的建筑物确定部31B根据该确定信息15B(位置信息)和从数据库16获取的地图信息36来确定摄像终端12的周边建筑物9，并将该确定结果输出到必要性评价部32B(步骤S24B)。
从建筑物确定部31B接收确定结果的输入的必要性评价部32B访问数据库16并参考与周边建筑物9的所有部位对应的维护检查信息38。接着，必要性评价部32B对与周边建筑物9的各部位对应的每一个维护检查信息38进行前述图5中说明的必要性评价(步骤S25B)。而且，必要性评价部32B将必要性评价的评价结果输出到图像获取区域信息输出部33B。
在周边建筑物9的部位中存在需要获取新的摄像图像数据13的图像获取区域17时，从必要性评价部32B接收必要性评价的评价结果的图像获取区域信息输出部33B生成表示该图像获取区域17的图像获取区域信息17B(步骤S26B中为是)。而且，图像获取区域信息输出部33B根据先前获取的附带信息24对确定信息15等的输出源的摄像终端12B输出图像获取区域信息17B(步骤S27B)。
<第3实施方式的摄像终端中的图像获取区域的显示>
当从摄像辅助装置14B输出图像获取区域信息17B时，摄像终端12B的图像获取区域信息获取部42B获取该图像获取区域信息17B并输出到显示控制部43B(步骤S28B中为是)。
接收来自图像获取区域信息获取部42B的图像获取区域信息17B的输入的显示控制部43B根据该图像获取区域信息17B和从存储部40获取的地图信息56来生成图像获取区域显示地图数据58。并且，显示控制部43B从存储部40获取与图像获取区域信息17B所包含的“建筑物信息”及“部位信息”分别对应的照片信息57，并根据这些照片信息57生成周边建筑物整体图像数据59和放大图像数据60。
接着，如前述图15所示，显示控制部43B将图像获取区域显示地图数据58、周边建筑物整体图像数据59及放大图像数据60分别显示于显示部44(步骤S29B)。由此，包括图像获取区域17的周边建筑物9与摄像终端12B的位置关系、周边建筑物9内的图像获取区域17的位置、图像获取区域17的外观显示于显示部44。其结果，在显示部44中可判别地显示图像获取区域17，因此能够指示摄像终端12B的用户拍摄图像获取区域17。
步骤S30以后的处理基本上与前述图8所示的第1实施方式相同，在此省略具体的说明。
[第3实施方式的效果]
如上所述，在第3实施方式的摄像辅助系统10B中，将表示评价为需要获取新的摄像图像数据13的图像获取区域17在地图上的位置的图像获取区域显示地图数据58等显示于摄像终端12B的显示部44，因此能够指示摄像终端12B的用户拍摄图像获取区域17。其结果，能够从普通人的摄像终端12B有效地获取需要摄像的建筑物的摄像图像数据13并登录到数据库16。
<第3实施方式的变形例>
在上述第3实施方式中，通过摄像终端12B的显示控制部43B生成图像获取区域显示地图数据58、周边建筑物整体图像数据59及放大图像数据60，可在摄像辅助装置14B的图像获取区域信息输出部33B生成这些数据并作为前述图像获取区域信息17B输出到摄像终端12B。
[第4实施方式的摄像辅助系统]
接着，利用图17对本发明的第4实施方式的摄像辅助系统10C进行说明。图17是表示第4实施方式的摄像辅助系统10C的结构的框图。在上述各实施方式中，将从普通人的摄像终端12、12B获取的图像获取区域17的摄像图像数据13通过数据库管理部34登录到数据库16内的维护检查信息38的“非专家获取履历”。此时，由普通人拍摄的图像获取区域17的摄像图像数据13中可能包含画质(分辨率、曝光、失真、抖动或模糊等)不适当或者图像获取区域17的大小等不适当等的情况。
因此，在第4实施方式的摄像辅助系统10C中，将由专家拍摄的图像获取区域17的摄像图像数据13登录到数据库16内的维护检查信息38时，删除登录到维护检查信息38内“非专家获取履历”中的信息(摄像图像数据13等)。
第4实施方式的摄像辅助系统10C构成为包括普通人及相当于本发明的预先设定的特定用户的专家的摄像终端12及摄像辅助装置14C。另外，摄像辅助系统10C的摄像辅助装置14C具备数据库管理部34C这一点以外，为与上述各实施方式的摄像辅助系统基本上相同的结构。因此，对与上述各实施方式在功能或结构上相同的标注相同符号并省略其说明。
数据库管理部34C与上述各实施方式同样地从普通人的摄像终端12获取图像获取区域17的摄像图像数据13，除此以外，从进行了周边建筑物9的各部位的检查的专家的摄像终端12获取显示其检查结果的专家检查信息63，并将该专家检查信息63登录到数据库16内的维护检查信息38。
专家检查信息63包括能够识别专家的ID等的“识别信息”、能够识别进行了检查的建筑物及其部位的“建筑物信息”及“部位信息”(参考图4)、进行了检查的日期和时间即“检查日期和时间”、进行了检查的建筑物的部位的“摄像图像数据13”、对进行了检查的建筑物的部位所产生的损伤程度进行了评价的“损伤程度”。另外，除了“识别信息”及“摄像图像数据13”以外，专家检查信息63中包含的信息的种类并无特别限定。
图18是用于说明基于第4实施方式的数据库管理部34C的专家检查信息63的登录处理的说明图。如图18所示，当专家检查信息63所包含的“识别信息”登录到预先制作的专家的识别信息的目录(省略图示)时，数据库管理部34C将专家检查信息63登录到数据库16内的相对应的维护检查信息38。
具体而言，数据库管理部34C访问数据库16，在与专家检查信息63的“建筑物信息”及”部位信息”对应的维护检查信息38的“专家检查履历”中登录专家检查信息63的“检查日期和时间”、“摄像图像数据13”及“损伤程度”。
并且，数据库管理部34C在进行专家检查信息63的登录时，在该登录对象的维护检查信息38的“非专家获取履历”中登录有摄像图像数据13等时，删除登录到“非专家获取履历”的摄像图像数据13等的信息。
[第4实施方式的效果]
如上所述，在第4实施方式的摄像辅助系统10C中，将由专家拍摄的图像获取区域17的摄像图像数据13登录到数据库16内的维护检查信息38时，删除登录到相对应的维护检查信息38的“非专家获取履历”的摄像图像数据13等，因此能够减少登录到数据库16的数据量。
[其他]
在上述各实施方式中，数据库16与摄像辅助装置14等分开设置，也可内置于摄像辅助装置14等。
在上述各实施方式中，作为本发明的检查对象物列举建筑物进行了说明，例如树木等自然物体、建筑物以外的人造物、塌方等灾害或事故的发生地点等能够成为各种检查(也包括管理)的对象的物体也包含于本发明的检查对象物中。
作为上述各实施方式中说明的摄像辅助装置，将用于使计算机发挥作用的程序记录于CD-ROM(Compact Disc Read Only Memory，只读存储型光盘)或磁盘或其他计算机可读取介质(作为有形物体的非暂时性信息存储介质)，并能够通过信息记录介质提供程序。并且，也能够代替在信息存储介质中存储程序来提供的方式而利用互联网等通信网络作为下载服务来提供程序。
符号说明
9-周边建筑物，10、10B、10C-摄像辅助系统，12、12B-摄像终端，13-摄像图像数据，14、14A～14C-摄像辅助装置，15、15A1、15B-确定信息，16-数据库，17-图像获取区域，17A、17B-图像获取区域信息，20-位置信息获取部，21-摄像方向获取部，22-摄像部，30、30A1、30B-确定信息获取部，31、31A、31A1、31B-建筑物确定部，32、32A、32B-必要性评价部，33、33B-图像获取区域信息输出部，34、346-数据库管理部，36-地图信息，38-维护检查信息，41、41B-确定信息输出部，42、42B-图像获取区域信息获取部，43、43B-显示控制部，44-显示部，45-图像输出部，51-设计信息确定部，53-设计信息，58-图像获取区域显示地图数据。

Claims (12)

1.一种摄像辅助系统，具备：具有摄像部的摄像终端；及辅助基于所述摄像终端的检查对象物的摄像的摄像辅助装置，
所述摄像辅助装置具备：
确定信息获取部，从摄像终端获取用于确定相对于所述摄像终端存在于预先设定的范围内的检查对象物即周边检查对象物的确定信息；
检查对象物确定部，根据由所述确定信息获取部获取的所述确定信息，从多个检查对象物中确定所述周边检查对象物；
必要性评价部，访问存储至少包括所述多个检查对象物的每一个的摄像图像的维护检查信息的数据库，并参考所述检查对象物确定部确定的所述周边检查对象物的所述维护检查信息而得到结果，根据该结果，评价是否存在需要对该周边检查对象物获取新的摄像图像的图像获取区域；及
图像获取区域信息输出部，将表示由所述必要性评价部评价为需要获取新的摄像图像的所述图像获取区域的图像获取区域信息输出到所述摄像终端，
所述摄像终端具备：
确定信息输出部，向所述确定信息获取部输出所述确定信息；及
显示部，根据从所述图像获取区域信息输出部输出的所述图像获取区域信息来显示所述图像获取区域。
2.根据权利要求1所述的摄像辅助系统，其中，
所述摄像终端具备获取该摄像终端的位置信息的位置信息获取部，
所述确定信息包括由所述位置信息获取部获取的所述位置信息，
所述检查对象物确定部获取表示所述多个检查对象物的位置的地图信息，并根据所述地图信息和由所述确定信息获取部获取的所述确定信息所包含的所述位置信息来确定所述周边检查对象物。
3.根据权利要求2所述的摄像辅助系统，其中，
所述摄像终端具备获取该摄像终端的摄像方向的摄像方向获取部，
所述确定信息还包括由所述摄像方向获取部获取的所述摄像方向，
所述检查对象物确定部根据由所述确定信息获取部获取的所述确定信息所包含的所述位置信息及所述摄像方向，确定所述摄像部的摄像范围内所包含的所述周边检查对象物，
所述必要性评价部根据所述检查对象物确定部的确定结果，评价在所述摄像部的摄像范围内是否存在所述图像获取区域，
所述图像获取区域信息输出部将表示所述摄像范围内的所述图像获取区域的所述图像获取区域信息输出到所述摄像终端，
所述显示部在根据通过所述摄像部的摄像获得的摄像图像显示实时取景图像的情况下，根据所述图像获取区域信息能判别地显示所述图像获取区域。
4.根据权利要求2所述的摄像辅助系统，其中，
所述检查对象物为建筑物，
所述摄像终端具备获取该摄像终端的摄像方向的摄像方向获取部，
所述确定信息还包括由所述摄像方向获取部获取的所述摄像方向，
所述摄像辅助装置具备设计信息确定部，所述设计信息确定部预先获取所述多个检查对象物的设计信息，并根据所述设计信息和由所述检查对象物确定部确定的所述周边检查对象物来确定该周边检查对象物的所述设计信息，
所述检查对象物确定部根据由所述确定信息获取部获取的所述确定信息所包含的所述位置信息及所述摄像方向和由所述设计信息确定部确定的所述设计信息，进一步确定所述摄像部的摄像范围内的所述周边检查对象物的部位，
所述必要性评价部根据访问所述数据库并参考所述周边检查对象物的所述维护检查信息的结果，评价由所述检查对象物确定部确定的所述部位中是否存在所述图像获取区域。
5.根据权利要求2所述的摄像辅助系统，其中，
所述检查对象物为建筑物，
所述确定信息还包括通过所述摄像部的摄像获得的摄像图像，
所述摄像辅助装置具备设计信息确定部，所述设计信息确定部预先获取所述多个检查对象物的设计信息，并根据所述设计信息和由所述检查对象物确定部确定的所述周边检查对象物来确定该周边检查对象物的所述设计信息，
所述检查对象物确定部根据由所述确定信息获取部获取的所述确定信息所包含的所述位置信息及所述摄像图像和由所述设计信息确定部确定的所述设计信息，进一步确定所述摄像部的摄像范围内的所述周边检查对象物的部位，
所述必要性评价部根据访问所述数据库并参考所述周边检查对象物的所述维护检查信息的结果，评价所述检查对象物确定部确定的所述部位中是否存在所述图像获取区域。
6.根据权利要求4或5所述的摄像辅助系统，其中，
所述图像获取区域信息输出部将表示通过所述必要性评价部评价为需要获取新的摄像图像的且在所述摄像范围内的所述图像获取区域的所述图像获取区域信息输出到所述摄像终端，
所述显示部在根据通过所述摄像部的摄像获得的摄像图像显示实时取景图像的情况下，根据所述图像获取区域信息能判别地显示所述图像获取区域。
7.根据权利要求2所述的摄像辅助系统，其中，
所述图像获取区域信息包括能够确定地图上的所述图像获取区域的位置的信息，
所述显示部根据从所述图像获取区域信息输出部输出的所述图像获取区域信息，显示表示了地图上的所述图像获取区域的位置的图像获取区域显示地图。
8.根据权利要求1至7中任一项所述的摄像辅助系统，其中，
所述摄像终端具备图像输出部，所述图像输出部在所述摄像部对所述图像获取区域进行摄像的情况下，将所述图像获取区域的所述摄像图像输出到所述摄像辅助装置，
所述摄像辅助装置具备数据库管理部，所述数据库管理部将从所述图像输出部输出的所述摄像图像作为与所述图像获取区域对应的所述周边检查对象物的所述维护检查信息而登录到所述数据库。
9.根据权利要求8所述的摄像辅助系统，其中，
所述数据库管理部在将从预先设定的特定用户的所述摄像终端的所述图像输出部输出的所述摄像图像登录到所述数据库的情况下，删除作为该周边检查对象物的所述维护检查信息先登录到所述数据库的所述摄像图像且从与所述特定用户不同的用户的所述摄像终端获取的所述摄像图像。
10.一种摄像辅助装置，具备：
确定信息获取部，从摄像终端获取用于确定相对于所述摄像终端存在于预先设定的范围内的检查对象物即周边检查对象物的确定信息；
检查对象物确定部，根据由所述确定信息获取部获取的所述确定信息，从多个检查对象物中确定所述周边检查对象物；
必要性评价部，访问储存至少包括所述多个检查对象物的每一个的摄像图像的维护检查信息的数据库，并参考由所述检查对象物确定部确定的所述周边检查对象物的所述维护检查信息而得到结果，根据该结果，评价是否存在需要对该周边检查对象物获取新的摄像图像的图像获取区域；及
图像获取区域信息输出部，将表示由所述必要性评价部评价为需要获取新的摄像图像的所述图像获取区域的图像获取区域信息输出到所述摄像终端。
11.一种摄像终端，其构成权利要求1至9中任一项所述的摄像辅助系统。
12.一种摄像辅助方法，通过摄像辅助装置辅助通过具有摄像部的摄像终端进行的检查对象物的摄像，所述方法包括：
确定信息获取步骤，所述摄像辅助装置从所述摄像终端获取用于确定相对于所述摄像终端存在于预先设定的范围内的检查对象物即周边检查对象物的确定信息；
检查对象物确定步骤，所述摄像辅助装置根据由所述确定信息获取步骤获取的所述确定信息，从多个检查对象物中确定所述周边检查对象物；
必要性评价步骤，所述摄像辅助装置访问存储至少包括所述多个检查对象物的每一个的摄像图像的维护检查信息的数据库，并参考通过所述检查对象物确定步骤确定的所述周边检查对象物的所述维护检查信息而得到结果，根据该结果，评价是否存在需要对该周边检查对象物获取新的摄像图像的图像获取区域；
图像获取区域信息输出步骤，所述摄像辅助装置将表示在所述必要性评价步骤中评价为需要获取新的摄像图像的所述图像获取区域的图像获取区域信息输出到所述摄像终端；及
显示步骤，所述摄像终端根据在所述图像获取区域信息输出步骤中从所述摄像辅助装置获取的所述图像获取区域信息，将所述图像获取区域显示于显示部。
CN201680054656.9A 2015-09-25 2016-09-12 摄像辅助系统、装置及方法、以及摄像终端 Pending CN108028881A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015-188538 2015-09-25
JP2015188538 2015-09-25
PCT/JP2016/076730 WO2017051735A1 (ja) 2015-09-25 2016-09-12 撮像支援システム及び装置及び方法、並びに撮像端末

Publications (1)

Publication Number Publication Date
CN108028881A true CN108028881A (zh) 2018-05-11

Family

ID=58386469

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680054656.9A Pending CN108028881A (zh) 2015-09-25 2016-09-12 摄像辅助系统、装置及方法、以及摄像终端

Country Status (5)

Country Link
US (1) US10726262B2 (zh)
EP (1) EP3355570A1 (zh)
JP (1) JP6513207B2 (zh)
CN (1) CN108028881A (zh)
WO (1) WO2017051735A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7015130B2 (ja) * 2017-09-12 2022-02-02 五洋建設株式会社 データ処理装置
JP6931578B2 (ja) * 2017-09-19 2021-09-08 国立大学法人 東京大学 データ管理装置、データ管理方法及びデータ管理プログラム
JP6591594B2 (ja) * 2018-03-16 2019-10-16 株式会社Ｌｉｆｕｌｌ 情報提供システム、サーバ装置、及び情報提供方法
JP6956670B2 (ja) * 2018-03-29 2021-11-02 株式会社Ｎｔｔドコモ 撮像計画決定装置
WO2020225843A1 (ja) * 2019-05-07 2020-11-12 富士通株式会社 撮影支援プログラム、撮影支援装置及び撮影支援方法
CN110324648B (zh) * 2019-07-17 2021-08-06 咪咕文化科技有限公司 直播展现方法和系统
JP7089103B1 (ja) * 2021-10-26 2022-06-21 東京海上日動火災保険株式会社 事故分析装置、事故分析方法、およびプログラム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008250474A (ja) * 2007-03-29 2008-10-16 Hitachi Ltd カメラ付き情報検索装置
US20110050888A1 (en) * 2009-08-27 2011-03-03 Fujifilm Corporation Inspection system, mobile terminal, inspection method, and recording medium
US20120069233A1 (en) * 2010-09-17 2012-03-22 Osamu Nonaka Photographing apparatus and photographing method
CA2739054A1 (en) * 2011-05-03 2012-11-03 Lavoie, Michel Building inspection system
CN102843539A (zh) * 2011-11-30 2012-12-26 沈阳理工大学 兼容多gis平台的有线电视数据采集与维护系统
US20130272569A1 (en) * 2012-04-17 2013-10-17 Hitachi, Ltd. Target identification system target identification server and target identification terminal
CN104396285A (zh) * 2012-11-14 2015-03-04 Sk普兰尼特有限公司 提供地图信息的方法、系统和终端

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007280282A (ja) * 2006-04-11 2007-10-25 Oriental Consultants:Kk 構造物の点検記録システム
JP2010277442A (ja) * 2009-05-29 2010-12-09 Fujifilm Corp 建設検査システム、携帯端末、建設検査方法およびプログラム
JP6187958B2 (ja) * 2011-12-16 2017-08-30 ギアヌーヴ株式会社 工事現場撮影装置及びシステム
JP2013164786A (ja) * 2012-02-13 2013-08-22 Fujitsu Ltd 構造物撮影支援方法、構造物撮影支援プログラム及び構造物撮影支援装置
JP6076852B2 (ja) * 2013-07-11 2017-02-08 株式会社 日立産業制御ソリューションズ カメラシステム、その制御方法およびその制御プログラム
WO2017043276A1 (ja) * 2015-09-10 2017-03-16 富士フイルム株式会社 損傷情報抽出装置、損傷情報抽出方法および損傷情報抽出プログラム
JP6412658B2 (ja) * 2015-09-25 2018-10-24 富士フイルム株式会社 点検計画立案支援システム、方法およびプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008250474A (ja) * 2007-03-29 2008-10-16 Hitachi Ltd カメラ付き情報検索装置
US20110050888A1 (en) * 2009-08-27 2011-03-03 Fujifilm Corporation Inspection system, mobile terminal, inspection method, and recording medium
US20120069233A1 (en) * 2010-09-17 2012-03-22 Osamu Nonaka Photographing apparatus and photographing method
CA2739054A1 (en) * 2011-05-03 2012-11-03 Lavoie, Michel Building inspection system
CN102843539A (zh) * 2011-11-30 2012-12-26 沈阳理工大学 兼容多gis平台的有线电视数据采集与维护系统
US20130272569A1 (en) * 2012-04-17 2013-10-17 Hitachi, Ltd. Target identification system target identification server and target identification terminal
CN104396285A (zh) * 2012-11-14 2015-03-04 Sk普兰尼特有限公司 提供地图信息的方法、系统和终端

Also Published As

Publication number Publication date
JP6513207B2 (ja) 2019-05-22
JPWO2017051735A1 (ja) 2018-06-14
EP3355570A4 (en) 2018-08-01
WO2017051735A1 (ja) 2017-03-30
US10726262B2 (en) 2020-07-28
EP3355570A1 (en) 2018-08-01
US20180197006A1 (en) 2018-07-12

Similar Documents

Publication Publication Date Title
CN108028881A (zh) 摄像辅助系统、装置及方法、以及摄像终端
US20200267314A1 (en) Real time assessment of picture quality
CN105659287B (zh) 图像处理装置、图像处理方法和成像系统
CN101910936B (zh) 基于图像捕捉设备呈现的用户推荐的引导摄影
CN105339758B (zh) 使用重叠区域优化光束法平差的系统、方法和设备
CN105981368A (zh) 在成像装置中的照片构图和位置引导
CN107945103A (zh) 无人机图像的隐私遮挡方法、装置及无人机
US10198796B2 (en) Information processing apparatus, control method of information processing apparatus, and non-transitory storage medium storing information processing program
TWI413854B (zh) A digital camera capable of detecting the name of the subject being used and a method thereof
JP6496832B2 (ja) 画像登録装置及び画像登録方法及び画像登録システム
EP3712782B1 (en) Diagnosis processing apparatus, diagnosis system, and diagnosis processing method
JP2008027336A (ja) 位置情報配信装置、カメラ、位置情報配信方法およびプログラム
JP2008513852A (ja) 写真中の対象体を識別する方法及びシステム，並びにそのシステムを実現するためのプログラム，記録媒体，端末及びサーバ
CN112017137B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
JP2013167494A (ja) 構造物点検支援方法、構造物点検支援プログラム及び構造物点検支援装置
KR101874345B1 (ko) 증강현실을 이용한 왕릉 유물 정보 출력방법
CN108986062A (zh) 图像处理方法及装置、电子装置、存储介质和计算机设备
US20140247342A1 (en) Photographer&#39;s Tour Guidance Systems
CN109785439A (zh) 人脸素描图像生成方法及相关产品
CN109816628A (zh) 人脸评价方法及相关产品
See et al. Virtual reality 360 interactive panorama reproduction obstacles and issues
Pezzica et al. Photogrammetry as a participatory recovery tool after disasters: A grounded framework for future guidelines
Kersten 3D models and virtual tours for a museum exhibition of vietnamese cultural heritage exhibits and sites
Chatzifoti On the popularization of digital close-range photogrammetry: a handbook for new users.
Cera et al. Fast survey procedures in urban scenarios: some tests with 360 cameras

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180511

RJ01 Rejection of invention patent application after publication