CN114071072A - 显示装置、摄影系统、显示控制方法、存储介质 - Google Patents
显示装置、摄影系统、显示控制方法、存储介质 Download PDFInfo
- Publication number
- CN114071072A CN114071072A CN202110897307.6A CN202110897307A CN114071072A CN 114071072 A CN114071072 A CN 114071072A CN 202110897307 A CN202110897307 A CN 202110897307A CN 114071072 A CN114071072 A CN 114071072A
- Authority
- CN
- China
- Prior art keywords
- image
- display
- unit
- photographing
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 97
- 238000000034 method Methods 0.000 title claims abstract description 81
- 238000001514 detection method Methods 0.000 claims abstract description 94
- 230000008569 process Effects 0.000 claims abstract description 62
- 238000012545 processing Methods 0.000 claims description 62
- 230000001133 acceleration Effects 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 4
- 230000005856 abnormality Effects 0.000 abstract description 34
- 238000007689 inspection Methods 0.000 description 97
- 239000003550 marker Substances 0.000 description 49
- 238000013523 data management Methods 0.000 description 39
- 238000004891 communication Methods 0.000 description 38
- 238000010586 diagram Methods 0.000 description 25
- 230000002159 abnormal effect Effects 0.000 description 21
- 238000005286 illumination Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 16
- 238000007726 management method Methods 0.000 description 13
- 241000519995 Stachys sylvatica Species 0.000 description 11
- 238000011161 development Methods 0.000 description 10
- 238000012986 modification Methods 0.000 description 10
- 230000004048 modification Effects 0.000 description 10
- 230000008859 change Effects 0.000 description 9
- 238000003745 diagnosis Methods 0.000 description 7
- 230000002093 peripheral effect Effects 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 6
- 238000010801 machine learning Methods 0.000 description 5
- 230000008520 organization Effects 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 230000003213 activating effect Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000012508 change request Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005336 cracking Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
- Studio Devices (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
Abstract
本发明涉及减少漏掉发现摄影图像显示的微小异常,使用户能够在短时间内高效查核摄影图像成败的显示装置、摄影系统、显示控制方法、存储介质以及计算机装置,用于显示隧道的摄影图像的显示装置接收由控制隧道的摄影处理的控制装置发送的多个摄影图像数据以及指定的检测结果,将收到的多个摄影图像数据各自经过缩小后的多个缩小图像与该缩小图像所对应的检测结果关联起来,显示到图像阅览画面(300)上。而后,显示装置受理被显示的缩小图像中指定位置的选择,将具有比受理的位置所对应的缩小图像更高倍率的放大图像显示到图像阅览画面(300)上。
Description
技术领域
本发明涉及显示装置、摄影系统、显示控制方法以及存储介质和计算机装置。
背景技术
隧道等结构物上由于覆盖混凝土,随着时间的变化,会产生龟裂等变形。如果弃之不顾,则混凝土块会发生剥落,对行驶通过的车辆和行人造成危害。为此,隧道等结构物的检查单位定期检查,并向国家或地方的相关机构报告检查结果。检查单位递交的报告中包括国家或地方规定的文件。
现有技术在上述隧道等的维修管理中,为了提高现有的人工检查效率,使用搭载摄像头的摄影车辆一边行驶一边拍摄隧道壁面,制作整个隧道的展开图像。此时,搭乘摄影车辆的检查作业者为了在摄影后查核摄影是否成功,采用利用摄影图像的缩略图像进行确认,或确认若干摄影图像采样等方法。专利文献1(JP专利6366707号公报)公开了一种查核摄影图像的方法,该方法将多个监视摄像机拍摄的影像在包含多个区域的第一形式和数据量比仅包含操作者指定的区域的第一形式多的第二形式之间切换显示。
但是,现有方法在显示摄影图像的缩略图像时,由于图像的分辨率差,很难发现摄影图像所显示的微小异常。而显示摄影图像的采样图像时,如果增加采样数量,则摄影成败查核需要时间,因此存在容易忽视摄影图像所显示的微小异常,难以在短时间内完成摄影图像成败查核的问题。
发明内容
为了解决上述课题,本发明提供一种用于显示结构的物摄影图像的显示装置,其中包括接收部,用于接收用来控制结构物的摄影处理的控制装置发送的多个摄影图像数据以及指定的检测结果;显示控制部,用于将收到的多个所述摄影图像数据各自经过缩小后的多个缩小图像和与该缩小图像对应的检测结果关联起来,显示到显示画面上;以及受理部,用于受理被显示的所述缩小图像上指定的位置的选择,所述显示控制部将具有比与所述受理部受理的所述位置相对应的所述缩小图像更高倍率的放大图像显示到所述显示画面上。
本发明的效果在于,可以减少漏掉发现摄影图像显示的微小异常,让用户能够在短时间内高效查核摄影图像的成败。
附图说明
图1是诊断系统的一例整体构成示意图。
图2是摄影系统的一例构成的简视图。
图3是用于说明在拍摄车辆上拍摄隧道壁面的一例示意图,其中,(A)是从行驶方向看拍摄车辆的示意图,(B)是车辆在隧道内部行驶的示意图。
图4是显示装置的一例硬件结构框图。
图5是摄影系统的一例功能结构框图。
图6是一例取得数据管理表的示意图。
图7是一例标志条件管理表的示意图。
图8是摄影系统的一例摄影处理时序图。
图9是由制装置执行的一例摄影控制处理流程图。
图10是一例摄影图像的成败查核处理流程图。
图11是显示装置上显示的一例图像浏览画面的示意图。
图12是显示装置上显示的一例图像浏览画面的示意图。
图13是摄影图像的成败查核处理的变形例的流程图。
图14是显示装置上显示的图像浏览画面的变形例的示意图。
图15是摄影系统的构成的变形例的简视图。
图16是示显示装置上显示的图像浏览画面的变形例的示意图。
具体实施方式
以下参考附图,说明实施本发明的方式。在附图的说明中,对相同元素标注相同的符号,省略重复说明。
《实施方式》
<系统概述>
首先用图1至图3简要说明本实施方式的诊断系统。图1是诊断系统的一例整体构成的示意图。图1所示的诊断系统1是用隧道6等构造物的摄影图像实施构造物状态诊断的系统。
诊断系统1包括诊断装置40及数据管理装置50。构成诊断系统1的诊断装置40及数据管理装置50可以通过通信网络100通信。通信网络100由因特网、移动通信网、LAN(LocalAreaNetwork)等构成。另外,通信网络100除了有线通信以外,还包括3G(3rdGeneration)、4G(4th Generation)、5G(5th Generation)、Wi-Fi(Wireless Fidelity)(注册商标)、WiMAX(Worldwide Interoperability for Microwave Access)或LTE(Long TermEvolution)等基于无线通信的网络。诊断装置40及数据管理装置50也可以具备基于NFC(Near Field Communication(注册商标))等近距离通信技术的通信功能。
在图1中,乘坐在检查车辆7上进行检查的检查作业者,用特殊粉笔在裂纹等变形部分上做标记,让变形部分变得醒目,或记录裂纹的宽度是多少厘米等。此时,检查作业者在野外记录本等上记录表示变形形态及评价结果的评注。另一方面,不在检查车辆7上的辅助者等在野外记录本上记录检查作业者发出的评述,或根据情况进行整体摄影。在检查作业者戴的头盔上配备小型麦克风和小型摄像头,可以用小型麦克风记录检查作业者发出的评论,用摄像头拍摄评论对象的部位。此时,还可以通过声音识别装置识别录音的声音信息并将其电子化,与小型照相机拍摄的图像一起自动记录到野外记录本(平板终端等)上。
然后,搭载照相机的摄影车辆9一边从隧道6内的入口行驶到出口,一边拍摄隧道6的墙壁,从而能够得到后述的图5所示的隧道展开图像的数据。隧道展开图像中,由于显示出检查作业者用特殊粉笔记录的部分,因此,日后检查作业者只要看到隧道展开图像,就可以很容易地掌握变形部分的位置或形状。
数据管理装置50是管理由摄影车辆9取得的各种数据的计算机。数据管理装置50从摄影车辆9具备的显示装置20接收各种数据,将收到的各种数据交给进行数据分析的诊断装置40。信息管理装置50交给诊断装置40的各种取得信息的交接方式也可以是使用USB(UniversalSerialBus)存储器等的人员移动。数据管理装置50管理评注、后述的隧道展开图像及各种传感器的检测数据、以及隧道记录本等数据。数据管理装置50还进行诊断装置40所描绘的裂纹等变形部分经过数值化的数据的管理、以及隧道展开图像中的坐标数据的管理等。数据管理装置50也可以构成为把各项功能分散到多台计算机来实现。数据管理装置50既可以是存在于云环境中的服务器计算机,也可以是存在于本地环境中的服务器计算机。
诊断装置40是基于从数据管理装置50收到的各种数据,进行摄影图像阅览以及摄影图像各种数据的输入的笔记本电脑等计算机。诊断装置40搭载浏览器,能够显示从数据管理装置50发送来的隧道展开图像。诊断装置40安装有阅览用或描绘用的专用应用程序。诊断装置40的利用者(以下称为检查作业者)将辅助者等记录的野外记录本等的评注、从作为一例结构物的隧道6内的入口到出口所拍摄的隧道展开图像的数据、以及各传感器的检测数据,输入诊断装置40。检查作业者还把从国家和地方相关机构等处获得的隧道记录本的数据输入到诊断装置40中。隧道记录本中记录隧道的长度及高度等。
检查作业者在隧道展开图像所显示的裂纹等变形部分上描绘线条等,用位置坐标将图像的变形部分数值化。诊断装置40从数据管理装置50下载提交文件的数据,该提交文件包括通过描绘变形部分而生成的变形展开图。然后,检查作业者向国家等递交打印文件或未打印状态的电子数据。诊断装置40除了笔记本电脑以外,还可以是智能手机或平板终端等。
即,数据管理装置50通过通信网络100向诊断装置40发送包括描绘变形部分而生成的变形展开图在内的汇报文件的数据。诊断装置40由此收到汇报文件的数据。诊断装置40通过通信网络100向国家和地方相关机构等发送汇报文件的数据。或者,诊断装置40向打印装置发送汇报文件的数据,打印后由检查作业者等向国家等相关机关递交汇报文件的打印纸张。或者,诊断装置40把汇报文件的数据记录到DVD-R等记录介质中后,由检查作业者等把记录介质交给国家等相关机构。另外,为了确保向国家等相关机构递交的文件(包括电子数据)的可信性,推荐对文件进行防篡改处理。
在此,用图2及图3说明摄影车辆9所具备的摄影系统8的构成。图2是摄影系统的一例构成的简视图。如图2所示,摄影系统8具备用于隧道6的摄影的摄影单元900及显示装置20。摄影单元900包括相机单元901、照明单元902、TOF(Time Of Flight)传感器903、IMU(Inertial Measurement Unit)904、车速计/移动距离计905以及传感器控制板90。摄影单元900是一个摄影单元的例子。
相机单元901是搭载了包括多个摄像头,将光电变换元件配置成一排或多排的线传感器的线阵相机。相机单元901设置成各自与相邻相机的视角一部分重叠,并且把整个隧道圆周方向的一半容纳在视角内。相机单元901也可以由搭载将光电转换元件配置成面形状的区域传感器的摄像头或立体摄像头等构成。
照明单元902包括多个光源,与相机单元901一样,设置成各自与相邻光源的一部分照射角重叠。照明单元902的照射角覆盖相机单元901的整个视角。
TOF传感器903是第一测距传感器,用于测量摄影车辆9和隧道6的壁面之间的距离。TOF传感器903在使用相机单元901等进行拍摄的同时进行测量,测量从隧道6的壁面到TOF传感器903的距离,从而检测从隧道6的壁面到摄影车辆9的距离。进一步具体而言,TOF传感器903根据向隧道6的壁面照射光到接收到其反射光为止的时间,检测到隧道6的壁面的距离。TOF传感器903在使用区域传感器作为受光元件的情况下,获得用显示颜色表示距离变化的二维等高线图像。除了TOF传感器,第一测距传感器也可以是LIDAR(LightDetectionand Ranging)传感器或雷达传感器等。
IMU904是陀螺传感器,用于检测摄影车辆9的角度(姿势)及角速度(或角加速度)等。IMU904测量控制摄影车辆9的运动的三轴的角度、角速度及加速度。IMU904用于计算摄影车辆9的移动轨迹。
车速计/移动距离计905是第二测距传感器,用于测量摄影车辆9的行进方向的速度及移动距离。车速计/移动距离计905与IMU904一样,被用来计算摄影车辆9的移动轨迹。车速计/移动测距计905还具有在每个等间隔移动量产生脉冲的作用,作为相机单元901摄影时的快门。
在此,TOF传感器903、IMU904或车速计/移动距离计905测量的数据被用于摄影的几何校正。例如,数据管理装置50根据由IMU904及车速计/移动距离计905测量的数据求出摄影车辆9的移动轨迹,由此可知各摄像头以何种姿势进行摄影,并且,对各像素进行修正,使其成为从隧道6的中心拍摄的图像。在摄影车辆9拍摄时,TOF传感器903测量的数据用于自动决定相机单元901及照明单元902以怎样的配置来进行摄影。
传感器控制板90是控制装置,用于控制相机单元901、照明单元902、TOF传感器903、IMU904以及车速计/移动距离计905的,并控制隧道6的摄影处理。以下将传感器控制板90称为控制装置90。控制装置90具备CPU(Central Processing Unit)911、ROM(Read OnlyMemory)912、RAM(Random Access Memory)913、HDD(Hard Disk Drive)914、外设I/F(Interface)915以及总线916。
其中,CPU911控制摄像单元900整体的动作。CPU911从ROM912等中将程序及数据、以及设定信息等读出到RAM913上,执行处理。CPU911实现的控制、图像数据处理及各种功能的一部分或全部,也可以由FPGA(Field-Programmable Gate Array)或ASIC(ApplicationSpecific Integrated Circuit)实现。
ROM912中保存各种程序和数据、以及各种设定信息等。RAM913被作为CPU911的工作区使用。HDD914中保存从相机单元901输入的图像数据、或者从TOF传感器903、IMU904以及车速计/移动距离计905输入的传感器数据等。
外设I/F915是用于连接各种外设的接口。外设I/F915通过无线或有线的方式与供用户操作摄影单元900的显示装置20连接,进行数据或信号的交换。总线916是用于电连接图2所示的CPU911等各构成要素的地址总线或数据总线等。
显示装置20是用于操作摄影单元900的笔记本电脑等计算机。例如,坐在摄影车辆9的副驾驶席上的检查作业者使用显示装置20操作录像开始按钮或停止按钮,控制摄影单元900,将摄影图像数据及各种传感器数据保存到HDD914中。在进行摄影单元900的摄影处理时,操作显示装置20的检查作业者将规定的评注输入显示装置20。显示装置20将摄影图像数据、各传感器的检测数据以及评注通过通信网络100发送到数据管理装置50。除了笔记本电脑,显示装置20也可以是智能手机或平板终端等。
接着用图3说明摄影车辆9拍摄隧道6的壁面。图3是用于说明拍摄车辆拍摄隧道壁面的一例示意图,其中,(A)是从行驶方向看拍摄车辆的图,(B)是隧道内部车辆行驶的图。
如图3的(A)所示,摄影单元900被固定在摄影车辆9的车顶上。相机单元901及照明单元902通过滑块单元920在与摄影车辆9的行驶方向交叉的方向上滑动,并固定在基于规定的道路结构长度而设定的两个位置上。
规定的道路结构长度是指与摄影车辆9的行驶方向交叉的方向上的步行道的宽度。在此,步行道是指行人通行的道路,是指与车道等并设、为了行人通行而在构造上分开的道路的部分。步行道的宽度随着行人通行量而不同,一般在1.5~3m左右。如果步行道宽度为1.5m,则根据步行道宽度确定的两个位置之间的距离可以定义为1.5m。或者,如果步行道的宽度为3m等且超过车辆的宽度,则基于步行道的宽度确定的两个位置之间的间隔可以被确定为摄影车辆9的最大宽度。此外,如果除步行道之外还有检查路或路侧带,基于步行道宽度确定的两个位置之间的距离可以被定为步行道宽度与检查路或路侧带宽度之差的长度。
在两个位置取得图像时,首先,在与摄影车辆9的行驶方向交叉的方向上,基于步行道宽度确定的两个位置中的一个位置上,固定相机单元901和照明单元902,取得所需区域的隧道6的壁面的区域图像。接着,在两个位置中的另一个位置上固定相机单元901及照明单元902,取得所需区域的隧道6的壁面的区域图像。
在图3的(A)中,相机单元901及照明单元902朝着行驶方向滑动到滑块920的左端后受到固定。另一方面,在图3的(B)中,道路700的中心C左侧为车道710,右侧为车道720。摄影车辆9在车道710中相对于图3的(B)表面从图内向图外的方向行驶。图3的(B)中车道710(摄影车辆9行驶的车道)一侧有步行道730。
图3的(B)的F1表示摄影系统8的摄影范围。即,摄影系统8拍摄隧道6的壁面中用虚线F1表示的摄影范围内的区域60(粗线表示的区域)。如粗线所示,摄影系统8拍摄到隧道6的壁面(遮工部)与地面的交界处为止。这样,摄影系统8一边使摄影车辆9行驶一边进行摄影,从入口到出口,拍摄隧道6壁面中图3的(B)的左侧一半。
另一方面,在车道720中,摄影车辆9相对于图3的(B)表面从图内向图外的方向行驶,可以拍摄图3的(B)的右侧一半壁面。此时,相机单元901及照明单元902朝着行驶方向滑动到滑块920的右侧后固定。
这样,诊断系统1将拍摄到的壁面左半部图像和壁面右半部图像连接起来,获得从隧道6的入口到出口的所有壁面(全周)的图像。在此,优选拍摄系统8拍摄的图像各自的拍摄区域互相重叠。为了将图像拼接起来制作一张隧道展开图像,优选把图3的(B)所示的无步行道一侧的图像和有步行道一侧的图像拍摄成隧道顶部互相重叠。换言之,摄影系统8通过往返来拍摄隧道6的壁面时,为了避免隧道6的壁面有漏掉拍摄的区域,优选前往时的摄影区域和返回时的摄影区域在与摄影车辆9的行驶方向交叉的方向上互相重叠。
在此,预先说明所谓的“与隧道6的壁面相对的方向”。隧道6与摄影车辆9的行驶方向正交的截面为半圆形。因此,隧道6的壁面中,地面附近的壁面面对的是水平方向,天顶附近的壁面面对的时垂直方向。“与隧道6的壁面相对的方向”是指与不同部位所具有的不同朝向的壁面相对的方向。在地面附近,“与隧道6的壁面相对的方向”大致是水平方向等。而在天顶附近,“与隧道6的壁面相对的方向”大致是垂直方向。
<硬件构成>
接着,用图4说明构成诊断系统1的各装置的硬件构成。图4所示的硬件构成中可以根据需要增删构成元素。诊断装置40及数据管理装置50的硬件构成与显示装置20相同,因此省略说明。
显示装置的硬件构成
图4是显示装置的一例硬件构成示意图。显示装置20由计算机构成,如图4所示,具有CPU201、ROM202、RAM203、HD(Hard Disk)204、HDD控制器205、显示器206、外设连接I/F208、网络I/F209、总线210、键盘211、指点设备212、DVD-RW(Digital Versatile DiskRewritable)驱动器214、以及介质I/F216。
其中,CPU201控制显示装置20整体的动作。ROM202中保存IPL等用于驱动CPU201的程序。RAM203被用作CPU201的工作区。HD204中保存程序等各种数据。HDD控制器205根据CPU201的控制,控制对HD204的各种数据的读出或写入。显示器206显示光标、菜单、窗口、文字或图像等各种信息。显示器206是一个显示部的例子。显示器206也可以是具备输入装置的触摸面板显示器。外设连接I/F208是用于连接各种外设的接口。此时的外设如是USB存储器或打印机等。网络I/F209是用于利用通信网络100进行数据通信的接口。总线210是用于电连接图4所示的CPU201等各构成要素的地址总线或数据总线等。
键盘211是一种具备用于输入文字、数值、各种指示等的多个键的输入装置。指点设备212是一种进行各种指示的选择或执行、处理对象的选择、或者光标的移动等的输入装置。除了键盘211及指点设备212,输入装置也可以是触摸面板或声音输入装置等。DVD-RW驱动器214控制对作为一例可装卸记录介质的DVD-RW213的各种数据的读出或写入。除了DVD-RW,可装卸记录介质也可以是DVD-R或Blu-ray(注册商标)Disc(蓝光光盘)等。介质I/F216用于控制对闪存等记录介质215的数据读出或写入(存储)。
上述各程序也可以以可安装形式或可执行形式的文件,保存到计算机可读取的记录媒体中用以流通。作为记录媒体的例子,可以举出CDR(Compact Disc Recordable)、DVD(Digital Versatile Disk)、Blu-ray Disc、SD或USB存储器等。记录媒体还可以作为程序产品(Program Product),向国内外提供。例如,显示装置20通过执行本发明涉及的程序来实现本发明涉及的显示控制方法。
<功能构成>
接着用图5至图7说明实施方式的摄影系统的功能构成。图5是表示摄影系统的一例功能结构框图。图5中仅显示图1及图2所示的装置中与后述的处理或动作相关的装置。
显示装置的功能构成
首先,用图5说明显示装置20的功能构成。显示装置20具有收发部21、受理部22、显示控制部23、判断部24、图像处理部25、应用程序启动部26、通信部27以及存储及读出部29。这些部是图4所示的各构成元素中的任意一个元素,执行来自按照从HD204读出后展开到RAM203上的显示装置用程序运行的CPU201的指令,进行动作而实现的功能或手段。显示装置20具有以图4所示的ROM202以及HD204构成的存储部2000。
收发部21主要通过CPU201对网络I/F209的处理来实现,通过通信网络100与其他装置之间进行各种数据或信息的通信。收发部21例如将摄影单元900取得的摄影图像数据及检测数据发送到数据管理装置50。
受理部22主要通过CPU201对键盘211或指点设备212的处理来实现,受理来自用户的各种选择或输入。受理部22例如受理在后述的图像阅览画面300、400、500上的各种选择或输入。显示控制部23主要通过CPU201的处理来实现,在显示器206上显示各种图像。显示控制部23例如在显示器206上显示后述的图像阅览画面300、400、500。
判断部24通过CPU201的处理实现,进行各种判断。图像处理部25主要通过CPU201的处理来实现,对通信部27收到的摄影图像数据进行各种处理。图像处理部25例如根据检查作业者的要求,改变后述的图像阅览画面300上显示的摄影图像的亮度。
应用程序启动部26主要通过CPU201的处理来实现,用于启动安装于显示装置20中的应用程序启动。显示装置20例如通过应用程序启动部26启动成败查核应用程序250,实现摄影图像成败查核功能。
通信部27主要通过CPU201对外设连接I/F208的处理来实现,是与控制装置90之间进行各种数据或信息交换的功能。通信部27例如向控制装置90发送与通过检查作业者的输入操作而受理的请求相对应的规定的请求信号。通信部27接收例如从控制装置90发送的摄影图像数据及各种检测数据。
存储及读出部29主要通过CPU201的处理来实现,在存储部2000中保存各种数据(或信息),或从存储部2000读出各种数据(或信息)。
显示装置20的存储部2000中保存用于查核由摄影单元900拍摄并取得的摄影图像的成败而安装的成败查核应用程序250。成败查核应用程序250是用于查核检查作业者是否正常进行了摄影处理,即用来查核摄影图像是否存在异常而执行的应用程序。显示装置20通过执行安装的成败查核应用程序250,显示后述的图像阅览画面300。然后,检查作业者通过查阅图像阅览画面300上显示的摄影图像,选择将摄影图像上传到数据管理装置50,或者重新进行摄影处理。
控制装置的功能构成
接着,用图5说明控制装置(传感器控制板)90的功能构成。控制装置90具有通信部91、传感器控制部92、数据取得部93、取得数据管理部94、标志条件管理部95、检测部96、标志信息生成部97以及存储及读出部99。这些部是图2所示的各构成元素中的任一个元素,执行来自按照从HDD914读取后展开到RAM913上的控制装置用程序的CPU911的命令,进行动作而实现的功能或手段。控制装置90具有由图2所示的ROM912及HDD914构成的存储部9000。
通信部91主要通过CPU911对外部I/F915的处理来实现,是与显示装置20之间进行各种数据或信息的交换的功能部。通信部91例如接收从显示装置20发送来的规定的请求信号。通信部91还向比如显示装置20发送由数据取得部93取得的摄影图像数据及各种检测数据。
传感器控制部92主要通过CPU911的处理来实现,用于根据来自显示装置20的请求,控制摄影单元900的处理。传感器控制部92响应例如检查作业者的要求,要求摄影单元900中的相机单元901等开始处理。数据取得部93主要通过CPU911的处理实现,用于通过摄影单元900的处理取得各种数据。数据取得部93取得比如通过相机单元901的拍摄处理所获得的摄影图像数据。数据取得部93还取得通过比如TOF传感器903、IMU904及车速计/移动距离计905等各种传感器的处理获得的各种检测数据。
取得数据管理部94主要通过CPU911的处理实现用于管理数据取得部93取得的各种数据。取得数据管理部94将通过数据取得部93取得的摄影图像数据及各种检测数据保存到取得数据管理DB9001中进行管理。标志条件管理部95主要通过CPU911的处理来实现,用于管理用来对摄影图像赋予标志信息的标志条件。本实施方式中的标志信息是指对摄影图像有可能发生异常的部位赋予的信息。
检测部96主要通过CPU911的处理来实现,用于根据摄影图像及标记条件实行规定的检测处理,检测符合摄影图像的标记条件的内容。标志信息生成部97主要通过CPU911的处理来实现,用于生成赋予到检测部96检测到的摄影图像的部位上的标志图像。
存储及读出部99主要通过CPU911的处理来实现,用于把各种数据(或信息)保存到存储部9000中,或从存储部9000读出各种数据(或信息)。
取得数据管理表
图6是一例取得数据管理表的示意图。取得数据管理表用来管理通过摄影单元900的拍摄处理所取得的各种数据。在存储部9000中构建了由图6所示的取得数据管理表所构成的取得数据管理DB9001。该取得数据管理表按顺序(No.)管理识别摄影车辆9的拍摄处理的拍摄ID以及每个拍摄时间的取得数据。取得数据管理表将用于识别摄影图像的图像ID、摄影图像的图像数据、与摄影图像同步的各种检测数据以及标志种类关联起来保存。其中,标志种类是用于识别检测部96的检测结果的信息,对每个检测结果的内容分配不同的识别信息。
标志条件管理表
图7是一例标志条件管理表的示意图。标志条件管理表用于管理用来对摄影图像赋予标志信息的标志条件。存储部9000中构建了由图7所示的标志条件管理表构成的标志条件管理DB9002。该标志条件管理表将表示用来检测摄影图像异常部位的内容的标志条件以及标志种类关联起来管理。各标志条件的具体内容将在以后叙述。
<实施方式的处理或动作>
摄影系统的摄影处理
接着,用图8至图16说明实施方式的诊断系统的处理或动作。图8是表示摄影系统的一例摄影处理时序图。检查作业者搭乘在摄影车辆9上拍摄隧道6的壁面,用显示装置20对所取得的摄影图像进行成败查核处理。具体如下。
首先,检查作业者用键盘211等输入装置进行规定的输入操作,显示装置20的受理部22受理摄影开始请求(步骤S11)。然后,通信部27向控制装置90发送摄影开始请求,请求开始拍摄隧道6(步骤S12)。控制装置90的通信部91收到从显示装置20发送来的摄影开始请求。
接着,控制装置90执行摄影单元900的摄影处理。在此,用图9详述用控制装置90执行的摄影处理。图9是控制装置的一例摄影控制处理的流程图。
控制装置90一边使摄影车辆9行驶,一边开始隧道6的摄影处理(步骤S31)。具体而言,传感器控制部92通过向摄影单元900输出摄影请求,开始隧道6的壁面的摄影处理。摄影单元900开始相机单元901的拍摄处理以及与拍摄处理同步且同时由TOF传感器903等各种传感器进行的检测处理。然后,数据取得部93取得通过摄影单元900的处理所得到的摄影图像数据以及各种检测数据。
接着,存储及读出部99读取保存在标志条件管理DB9002(参见图7)中的标志条件(步骤S32)。当检测部96检测到符合在步骤S32中读出的标志条件的内容时(步骤S33的是),处理前往步骤S34。而检测部96在没有检测到符合标志条件的内容(步骤S33的否),则处理前往步骤S35。
在此说明检测部96的处理。检测部96用数据取得部93取得的摄影图像数据或各种检测数据,检测符合步骤S32读出的标志条件中的任意一个条件的内容。图7所示的标志条件是用于检测摄影图像发生异常的可能性的条件。
检测部96例如检测摄影图像的白斑或黑斑,或者图像的模糊不清等。检测部96基于比如摄影图像的灰度信息,当8bit图像中偏离规定灰度范围的像素在规定值以上的行数达到阈值以上时,检测白斑或黑斑。在此,规定灰度范围例如是灰度值10~240的范围。关于判断偏离规定灰度范围的像素数量的规定值,例如在以线阵相机作为相机单元901时,用该相机单元901拍摄的摄影图像的每一行像素数量来判断,此时,每一行为0.1%。进而,偏离规定灰度范围的像素为规定值以上的线数量的阈值例如为10根。
另外,在例如事先粘贴在隧道6的壁面上的规定标记或MTF(Modulation TransferFunction)图表或裂纹刻度等图表等基准图像的检测率不到规定数值时,检测部96检测图像的模糊不清。检测部96用基准图像的MTF或分辨能力等计算检测率。
进而,作为拍摄隧道6的目的,为了查核所进行的摄影是否能够识别损伤部(以下称为变形部),检测部96检测检测隧道6的变形部。检查作业者通过查核变形部的检测结果,能够高效进行摄影图像成败查核的判断。关于检测变形部可以使用例如CNN(Convolutional Neural Network)方法。检测部96预先学习变形部的图像,用识别变形部的图像的识别器,实时检测隧道6的变形部。
当TOF传感器903的测量距离在规定范围外时,检测部96检测为异常值。检测部96例如通过TOF传感器903逐次测量被摄体和照相机之间的距离,检测焦点位置的被摄景深以外的距离的发生。这是因为,在景深以外的位置可能发生图像模糊,成为异常图像。
进而,检测部96也同样用TOF传感器903进行隧道6的出入口或紧急停车带的检测等。隧道6的出入口是亮度差非常大,容易发生白斑或黑斑等的部位。因此,检测部96检测容易发生摄影图像的白斑或黑斑等的隧道6的出入口的位置。
由于紧急停车带的前后,摄影单元900(相机单元901及照明单元902)与隧道6的壁面(被摄物体)之间的距离非连续性变化,即使是自动曝光控制也难以追随紧急停车带,因此紧急停车带容易发生白斑或黑斑,图像变得模糊。另外,当存在紧急停车带等的非连续截面时,一般的摄影处理难以正确拍摄非连续部分。因此,摄影系统8也可以根据紧急停车带的检测结果切换摄影处理。具体而言,检测部96检测紧急停车带的设置位置。在前者的情况下,检查作业者将检测结果用于查核紧急停车带是否为异常图像。在后者的情况下,检查作业者将检测结果用来查核是否正确检测到紧急停车带。无论在哪种情况下,检查作业者均可通过查核紧急停车带的检测结果,有效查核紧急停车带的拍摄是否顺利。另外,检测部96还检测除紧急停车带以外的具有非连续截面形状的部位,比如车道数量变化造成的非连续截面(例如从三车道变为二车道的变化部位)、或因隧道6的建筑方法所造成的非连续截面(例如,从涵洞(矩形)向山岳隧道(圆形)的变化部位)等。
另外,检测部96用IMU904及车速计/移动距离计905,检测摄影车辆9的速度或加速度的异常值。当摄影车辆9的行驶速度比预设的检查作业的保证速度快或慢时,有可能出现噪音大、画质变差,或车辆摇动使得图像中出现低频振动等情况。在此,检查作业中摄影车辆9的保证速度在比如0km/h~60km/h的范围内。为此,当摄影车辆9的速度在规定范围以外时,检测部96将其检测为异常值。该规定范围是上述摄影车辆9的保证速度的范围,所谓规定范围以外是例如摄影车辆9的速度小于10km/h或大于60km/h。此外,控制装置90也可以不需要让检查作业者查核摄影图像,而是在检测部96的检测阶段,检查作业的保证范围之外时,重新执行摄影处理。
在此,在将作为线阵相机的相机单元901的线周期设定为快门速度时,为了获得SN比高的画质,控制装置90将快门速度与摄像头周期结合起来进行设定。在这种情况下,如果摄影车辆9突然加速或减速,则自动曝光控制可能来不及,因而发生摄影图像的白斑或黑斑,或者在摄影图像中出现摄影车辆9的振动。因此,当摄影车辆9的加速度为规定值以上时,检测部96检测为异常值。例如,当摄影车辆9的加速度为0.15G以上时,检测部96检测为异常值。作为异常值被检测出的加速度的值可以根据摄影车辆9的性能或行驶环境、或者检查作业的内容等适当设定,因此不限于上述数值。
这样,检测部96通过实施利用标志条件的规定检测处理,能够检测出摄影车辆9的行驶摄影中发生异常可能性的部位。
接着,当检测部96检测到摄影图像异常时(步骤S33的是),标志信息生成部97基于步骤S33的检测结果,生成表示摄影图像异常或异常发生的可能性的标志信息(步骤S34)。具体而言,存储及读出部99将与步骤S33检测出的内容对应的标志条件作为检索键,检索标志条件管理DB9002(参见图7),由此读出与标志条件相关联的标志种类。而后,标志信息生成部97生成与读出的标志种类对应的标志信息。标志信息包括例如与标志种类对应的标志图像。标志图像是例如颜色、形状或大小等根据标志种类而不同,检查作业者能够识别各自的标志条件(标志种类)的形式的图像。例如,标志信息生成部97在由作为线阵相机的相机单元901拍摄的图像(线阵图像)的后端设置页脚区域,将生成的标志信息写入各线的页脚区域。
存储及读出部99将通过上述处理得到的数据保存到取得数据管理DB9001(参见图6)(步骤S35)。存储及读出单元99将摄影图像数据和各种检测数据与表示在步骤S34中生成的标志信息的标志种类相关联,并保存在取得数据管理DB9001中。
然后,在隧道6的拍摄结束时(步骤S36的是),控制装置90结束处理。而如果隧道6的拍摄未结束(步骤S36的否),则控制装置90重复从步骤S33开始的处理,直至隧道6的拍摄结束。
这样,在摄影车辆9的行驶摄影中,控制装置90用摄影图像及各种检测数据,实时进行摄影图像的异常检测。然后,控制装置90将检测到的时刻的摄影图像与检测结果关联起来保存。控制装置90检测摄影中可能发生异常的部位,通过将表示有效标记的标记图像与对应于检测出的摄影位置的摄影图像相关联,可以保存摄影图像的异常候补的位置。
返回图8,控制装置90的通信部91向显示装置20发送通过步骤S13的处理取得的各种数据(步骤S14)。显示装置20的通信部27接收控制装置90发送的各种数据。此时,通信部91也可以不必等待整个隧道6的摄影结束(图9的步骤S36),随时向显示装置20发送包含摄影图像数据及标志信息等各种数据。
显示装置20执行在步骤S14中接收到的取得数据即摄影图像的成败查核处理(步骤S15)。在此,用图10详述显示装置20进行的成败查核处理。图10是摄影图像的一例成败查核处理流程图。
首先,应用程序启动部26在行驶摄影结束后,启动安装在显示装置20上的成败查核应用程序250(步骤S51)。然后,显示控制部23通过执行由应用程序启动部26启动的成败查核应用程序250,将显示了所取得的摄影图像的图像阅览画面300显示在显示器206上(步骤S52)。图11是显示装置上显示的一例图像浏览画面的示意图。图11所示的图像阅览画面300包括俯瞰图像显示区域310、标志显示区域320、以及摄影位置显示区域330。俯瞰图像显示区域310显示以在步骤S14中取得的摄影图像数据构成的整个隧道6的俯瞰图像,标志显示区域320显示与俯瞰图像显示区域310所显示的摄影图像对应的标志图像,摄影位置显示区域330显示俯瞰图像显示区域310中显示的摄影图像的位置。
其中,俯瞰图像显示区域310显示隧道6整个俯瞰图像。隧道6的俯瞰图像是按照拍摄顺序排列多个摄影图像的图像,以便俯瞰整个隧道6(从入口到出口)。俯瞰图像的横向是摄影车辆9的行进方向,纵向是隧道6的周向。俯瞰图像包括在步骤S14中取得的多个摄影图像数据的倍率分别经过图像处理部25缩小处理的多个缩小图像。图像处理部25生成将生成的多个缩小图像按拍摄顺序排列的俯瞰图像。
隧道6的摄影图像容量大,读取从隧道6的入口到出口的全部图像时,需要非常长的时间。因此,图像阅览画面300在俯瞰图像显示区域310中,一边把像素稀疏到能够一眼俯瞰从入口到出口的整个隧道6的大小,一边显示摄影图像。在长隧道的情况下,当稀疏量过大而无法辨别拍摄了什么时,显示装置20不是显示俯瞰隧道6的入口到出口,而是显示缩小到规定的缩小率的摄影图像,滚动显示俯瞰图像显示区域310,从而可以查核从隧道入口到隧道出口。
标志显示区域320在俯瞰图像显示区域310中显示的俯瞰图像与摄影车辆9的行进方向同步的位置上显示标志图像。显示控制部23通过读取被写入摄影图像的页脚区域的标志信息,显示与俯瞰图像在行进方向上同步的标志图像。检查作业者可以通过查核在行进方向(横向)上与俯瞰图像显示区域310上显示的俯瞰图像中检测到异常的部位相同的位置上所显示的标志图像,掌握发生异常的部位。例如在存在多个检测结果的情况下,标志显示区域320也可以用改变标志图像的颜色或形状等显示方法,或者纵向排列多个标志图像进行显示。在图11的示例中,标志显示区域320在行进方向(横向)上与俯瞰图像显示区域310中显示的俯瞰图像中出现白斑的部位(例如隧道6内的照明)的场所相同的位置上显示黑色标志图像。
在此,当俯瞰图像的缩小率(稀疏)大、标志显示区域320中显示的标志的间隔短的情况下,如果单纯缩小标志图像,则标志信息有可能被漏掉。对此,为了防止标志信息漏掉,显示控制部23在标志显示区域320中显示标志图像时,进行OR剔除等稀疏处理。OR剔除是指在剔除的标志信息中,即便只有一个有效的标志,剔除后标志变为有效的处理。可以根据标志图像的有无来判断标志的有效或无效。另外,由于考虑到一行中太小而可以不必在意的情况,因此,显示控制部23也可以控制为只要标志的有效数量在规定的阈值以下就不使得标志有效。
摄影位置显示区域330显示构成俯瞰图像显示区域310所显示的俯瞰图像的摄影图像的摄影位置。摄影位置显示区域330将随着摄影车辆9的行驶摄影得到的摄影图像的摄影顺序与构成俯瞰图像的摄影图像的位置对应起来显示。
图像阅览画面300包括如下部分:放大图像显示区域350,其中放大显示俯瞰图像显示区域310中显示的俯瞰图像之中被指定的位置上的放大图像;标志显示区域360,其中显示与放大图像显示区域350中显示的放大图像对应的标志图像;选择区域380,选择在图像阅览画面300上显示的摄影图像的显示状态;“摄影”按钮307,再次提出在规定的摄影位置上进行摄影处理的要求时按动的按钮;“上传”按钮309,在步骤S14中取得的摄影图像的上传时按动的按钮;“关闭”按钮301,中断或结束成败查核处理,关闭图像阅览画面300时按动的按钮。
其中,放大图像显示区域350以俯瞰图像显示区域310中显示的俯瞰图像上的指定位置坐标为中心,显示分辨率高于俯瞰图像的高分辨率(高倍)放大图像。放大图像例如可以是与步骤S14中获得的摄影图像具有相同分辨率(倍率)的图像,也可以是比获得的摄影图像分辨率小的(倍率)的图像。标志显示区域360用与放大图像相同比例显示与在放大图像显示区域350上显示的放大图像对应的标志图像。
选择区域380是用于接受在图像阅览画面300上显示的摄影图像之中处于激活状态的显示区域上显示的图像上的操作的选择的区域。选择区域380包括如下部,倍率调整部381,用于调整在图像阅览画面300上显示的摄影图像的倍率;摄影位置选择部383,用于选择图像阅览画面300上显示的摄影图像的摄影位置;亮度调整部385,用于改变摄影图像的亮度;全画面显示选择按钮387,用于选择进行在图像阅览画面300上显示的摄影图像的全画面显示的全画面显示功能;显示消去按钮389,用于隐藏在处于激活的显示区域中显示的图像;以及显示切换按钮391,用于在进行放大图像显示区域350显示的放大图像的帧前进时受到选择。图11所示的图像阅览画面300显示使用选择区域380对处于激活的一个显示区域(窗口)进行操作的构成,但也可以构成为具备对各显示区域(窗口)分别进行操作的多个选择区域。
检查作业者通过利用输入部的指针p1,对图11所示的滑块方式的倍率调整部381进行移动操作,用以放大或缩小激活显示区域上显示的摄影图像。受理部22通过检查作业者对倍率调整部381的操作,接受处于激活的显示区域上显示的摄影图像的放大操作或缩小操作。检查作业者通过利用输入部的指针p1对图11所示的滑块方式的摄影位置选择部383进行移动操作,切换放大图像显示区域350上显示的放大图像。受理部22通过检查作业者对摄影位置选择部383的操作,接受放大图像显示区域350上显示的摄影图像的摄影位置的选择。
亮度调整部385用如图11所示的滑块方式,接受处于激活的显示区域所显示的图像亮度的改变。在受到隧道6的壁面状态或外光等的影响而使摄影图像过亮或过暗的情况下,图像阅览画面300通过调整摄影图像的亮度,摄影图像的内容变得容易判断。例如当摄影图像过暗而难以发现裂纹时,显示装置20通过让整体变亮,让裂纹变得容易判断。另外,当难以发现摄影图像显示的壁面上记录的粉笔时,显示装置20可以通过让整体变暗,改善与粉笔的对比度,以便于判断粉笔。
具体来说,检查作业者用指针p1对亮度调整部385进行移动操作,受理部22由此收到改变与滑块指定的位置对应的亮度的请求。例如,受理部22接受作为更改请求的与滑块的移动量(滑动量)线相应的伽玛值。图像处理部25用收到的伽玛值,用下式(1)求出亮度改变后的摄影图像的亮度值。在此,X是亮度改变前的亮度值,Y是亮度改变后的亮度值,γ是步骤S201中接受的伽玛值。例如,在亮度调整部385的默认位置,γ=1,亮度改变前的亮度=亮度变更后的亮度。
亮度调整部385通过采用滑块方式,可以在显示摄影图像的当前亮度的同时,接受指定要改变的亮度值。检查作业者可以根据滑块的位置,从视觉上掌握所显示的摄影图像的当前亮度和改变后的亮度。图像阅览画面300也可以改为滑块方式的亮度调整部385,在显示摄影图像的亮度数值的同时,让检查作业者直接输入改变后的亮度值的显示输入区域。
在显示区域小而难以查核图像等情况下,检查作业者通过选择全画面显示选择按钮387,用全画面显示俯瞰图像显示区域310及放大图像显示区域350之中处于激活的显示区域。受理部22通过全画面显示选择按钮387的操作,受理全画面显示激活显示区域的选择。然后,显示控制部23控制在图像阅览画面300上用全画面显示处于激活的显示区域上显示的图像。
进而,检查作业者通过选择显示消去按钮389,消去(隐藏)俯瞰图像显示区域310及放大图像显示区域350之中处于激活状态的显示区域上显示的图像。受理部22通过检查作业者的显示消去按钮389的操作,受理激活显示区域的图像消去的选择。然后,显示控制部23隐藏图像阅览画面300中激活显示区域显示的图像。检查作业者例如在查核了放大图像显示区域350上显示的放大图像中有无异常之后,在查核下一个标记的位置时,一次性地消去放大图像显示区域350上显示的图像,以便于进行下一个作业。
如果检查作业者选择显示切换按钮391的右侧按钮,可以在放大图像显示区域350上显示摄影车辆9的行进方向上与右侧相邻的图像。而如果检查作业者选择显示切换按钮391的左侧按钮,则可以在放大图像显示区域350上显示摄影车辆9的行进方向上与左侧相邻的图像。受理部22通过检查作业者操作显示切换按钮391,接受在放大图像显示区域350上切换显示图像。然后,显示控制部23根据显示切换按钮391的操作内容,切换显示放大图像显示区域350上显示的图像。例如,当显示放大图像显示区域350中被指定的位置上的放大图像时,如果指定的位置稍有偏离,希望向右或向左时,检查作业者可以使用显示切换按钮391,顺利查阅指定位置附近的图像。
这样,图像阅览画面300通过将俯瞰隧道6的入口到出口的俯瞰图像和标志图像相关联地进行显示,可供检查作业者有效掌握异常候补的位置。
返回到图10,当受理部22受理了俯瞰图像中的异常查核位置的选择的时(步骤S53的是),处理前往步骤S54。具体而言,通过检查作业者用指点设备312等输入装置操作指针p1,选择标志显示区域320所示的标志图像,受理部22受理异常查核位置的选择。而当受理部22未受理俯瞰图像中的异常查核位置的选择时(步骤S53的否),则处理前往步骤S57。
检查作业者一边查阅俯瞰图像显示区域310上显示的俯瞰图像以及显示在标志显示区域320上的标志图像,一边寻找可能无法正常拍摄的位置,并选择该位置为异常查核位置。检查作业者例如在标志图像上移动指针p 1,右击作为指点设备212的鼠标,选择想要查核是否是异常图像的位置(异常查核位置)。此外,检查作业者也可以将指针p 1移动到俯瞰图像显示区域310上显示的俯瞰图像上想要查核的位置,右击鼠标,选择想要确认是否是异常图像的位置。供检查作业者选择想要确认是否是异常图像的位置的方法并不限于此,只要是能够选择俯瞰图像上任意位置的方法均可使用。
在此,检查作业者大多希望查核标志显示区域320上显示了标志图像的位置,即标志有效的位置。为此,为了便于标志有效位置的选择,显示装置20既可以在指针p 1接近标志有效位置时,指针p1被吸引到标志图像而自动选择,也可以构成为通过该自动指定功能的设定来选择ON(有效)或OFF(无效)。
接着,显示控制部23在放大图像显示区域350上显示与在步骤S53中接受的异常查核位置、即与受到选择的标志图像的位置对应的放大图像(步骤S54)。图12显示在步骤S54中显示的图像阅览画面300的一例画面的示意图。图12所示的图像阅览画面300是放大图像显示区域350上显示的与俯瞰图像显示区域310上显示的俯瞰图像的摄影位置“6”对应的放大图像。如图12所示,图像阅览画面300并列显示俯瞰图像显示区域310上显示的俯瞰图像和放大图像显示区域350上显示的放大图像。在图12所示的例子的情况下,放大图像中所示的照明部分为白斑的异常图像,标志显示区域360在与放大图像中所示的照明部分对应的位置上显示标志图像。检查作业者在隧道6检查中,存在发生壁面上的白斑时无法判断有无损伤的问题,但照明部分出现白斑也问题不大,因此可以查核所显示的放大图像不是异常图像。此外,图像阅览画面300也可以去拿走标记显示区域360,仅显示放大图像显示区域350,从而使放大图像显示得更大。
接着,受理部22在受理了“摄影”按钮307的选择的情况下(步骤S55的是),使处理前往步骤S56。另一方面,如果在步骤S55中,受理部22没有受理“摄影”按钮307的选择(步骤S55的否),则处理转移到步骤S57。这种情况下,检查作业者观察放大图像显示区域350上显示的放大图像,判断为异常图像时,通过使用指点设备312等输入装置操作指针p1,按动“摄影”按钮307。
检查作业者通过观察显示在放大图像显示区域350上的放大图像,判断放大图像是否为可以容许的异常图像。在是不能容许的异常图像的情况下,检查作业者为了重新进行行驶摄影(步骤S13),选择“摄影”按钮307。检查作业者在图12的放大图像那样的只有照明的部位有白斑等可容许的图像的情况下,继续进行成败查核作业。
接着,在步骤S55中接受了“摄影”按钮307的选择的情况下,通信部27向控制装置90发送请求再次拍摄隧道6的摄影请求(步骤S56)。该摄影请求包含在步骤S55中“摄影”按钮307受到选择时放大图像显示区域350上显示的放大图像的摄影位置信息。据此,控制装置90的通信部91接收从显示装置20发送来的摄影请求。然后,控制装置90再次执行摄影请求包含的摄影位置信息所表示的拍摄位置的摄影处理(步骤S13),并向显示装置20发送通过摄影处理获得的数据(步骤S14)。
然后,在步骤S57中,受理部22在受理了“上传”按钮309的选择的情况下(步骤S57的是),处理转移到步骤S58。在这种情况下,当判断成败查核处理结束时,检查作业者通过用定点设备312等输入装置操作指针p1,按动“上传”按钮309。相反,如果受理部22未受理“上传”按钮309的选择(步骤S57的否),则重复从步骤S53开始的处理,继续成败查核处理。
然后,收发部21对数据管理装置50发送(上传)在步骤S14中收到的取得数据(步骤S58)。由此,数据管理装置50如图1所示,对接收到的注释、摄影图像数据及各种检测数据等取得数据进行管理。此后,使用诊断装置40的检查作业者使用由数据管理装置50管理的各种数据,对隧道6进行诊断,生成递交给政府机关的文件数据。
这样,显示装置20将由缩小了摄影图像的多个缩小图像构成的俯瞰图像与表示控制装置90检测到的检测结果的标志图像相关联,显示在图像阅览画面300上,同时,将由检查作业者选择的规定位置的放大图像显示在图像阅览画面300上。由此,检查作业者能够减少漏掉摄影图像所显示的微小异常,能够在短时间内高效实施摄影图像的成败查核。
成败查核处理的变形例
接着,用图13和图14,说明图10至图12所示的显示装置20实施的成败查核处理的变形例。图13是摄影图像成败查核处理的变形例的流程图。图13与图10所示的成败查核处理不同,是在图像阅览画面400上显示分辨率不同的放大图像。
首先,应用程序启动部26在行驶摄影结束后,启动安装在显示装置20上的成败查核应用程序250(步骤S71)。然后,显示控制部23通过执行由应用程序启动部26启动的成败查核应用程序250,将显示了所取得的摄影图像的图像阅览画面400显示到显示器206上(步骤S72)。图14所示的图像浏览画面400包括第一放大图像显示区域410及标志显示区域420,以及第二放大图像显示区域430及标志显示区域440,取代上述图像阅览画面300所示的放大图像显示区域350及标志显示区域360,。
其中,第一放大图像显示区域410以俯瞰图像显示区域310中显示的俯瞰图像上的指定位置坐标为中心,显示比俯瞰图像具有更高分辨率(高倍)的第一放大图像。标记显示区域420以与第一放大图像相同的比例显示与第一放大图像显示区域410中显示的第一放大图像对应的标志图像。
第二放大图像显示区域430以俯瞰图像显示区域310中显示的俯瞰图像上的指定的位置坐标为中心,显示比第一放大图像显示区域410中显示的第一放大图像具有更高分辨率(高倍率)的第二放大图像。标志显示区域440以与第二放大图像相同的比例显示与第二放大图像显示区域430中显示的第二放大图像对应的标志图像。
图像阅览画面400也可以以将需要显示的放大图像重写在图10所示的图像阅览画面的放大图像显示区域350上的形式,切换第一放大图像和第二放大图像的显示。另外,图像阅览画面400还可以例如显示第3放大图像及第4放大图像那样的两个阶段以上的放大图像。显示装置20通过显示分辨率不同的层级结构的图像,与从最初开始读取像素等倍的最大分辨率的图像一边滚动一边显示的情况相比,能够在短时间内有效供检查作业者进行成败查核。
而后,在受理部22受理了异常查核位置的选择时(步骤S73的是),处理转移到步骤S74。而在受理部22在未受理异常查核位置的选择时(步骤S73的否),处理转移到步骤S79。异常查核位置的选择方法与步骤S53的处理相同。然后,显示控制部23把与在步骤S73接受的异常查核位置、即被选择的标志图像的位置对应的第一放大图像显示在第一放大图像显示区域410上(步骤S74)。
接着,在受理部22受理了图像阅览画面400的“放大”按钮405的选择时(步骤S75的是),处理转移到步骤S76。然后,显示控制部23把分辨率比在步骤S73中接受的异常查核位置、即受到选择的标志图像的位置对应的第一放大图像更高的第二放大图像显示在第二放大图像显示区域430上(步骤S76)。显示控制部23与例如第一放大图像的显示方法相同,检查作业者将指针p 1移动到第一放大图像的想要放大的部位,右击作为指点设备212的鼠标,显示以指针p1的坐标位置为中心的第二放大图像。
接着,在受理部22受理了“摄影”按钮307的选择时(步骤S77的是),处理转移到步骤S78。而如果在步骤S77中受理部22没有受理“摄影”按钮307的选择(步骤S77的否),则处理转移到步骤S79。此时,检查作业者观察第一放大图像显示区域410或第二放大图像显示区域430上显示的放大图像,判断为异常图像时,用指点设备312等输入装置操作指针p1,按动“摄影”按钮307。
然后,在步骤S77中接受了“摄影”按钮307的选择时,通信部27向控制装置90发送再次拍摄隧道6的摄影请求(步骤S78)。该摄影请求包含在步骤S77中选择了“摄影”按钮307时第一放大图像显示区域410或第二放大图像显示区域430上显示的放大图像的摄影位置信息。这样,控制装置90的通信部91接收从显示装置20发送来的摄影请求。然后,控制装置90再次执行摄影请求中包含的摄影位置信息所表示的摄影位置的摄影处理(步骤S13),并将通过摄影处理获得的数据发送到显示装置20(步骤S14)。
然后,在步骤S79中,在受理部22受理了“上传”按钮309的选择时(步骤S79的是),使处理转移到步骤S80。此时,当判断成败查核处理结束时,检查作业者用指点设备312等输入装置操作指针p1,按动“上传”按钮309。而如果受理部22未受理“上传”按钮309的选择(步骤S79的否),则反复进行从步骤S73开始的处理,继续成败查核处理。然后,收发部21向数据管理装置50发送(上传)在步骤S14中收到的取得数据(步骤S80)。
这样,显示装置20阶段性地改变检查作业者所选择的位置上的放大图像的分辨率(倍率)后显示该放大图像,与一次性地显示在显示出来之前需要花费时间的高分辨率的放大图像相比,可供检查作业者在短时间内高效进行摄影图像成败查核。另外,显示装置20通过将第一放大图像和第二放大图像与作为各自对应的位置上的检测结果即标志图像关联起来显示,能够让检查作业者正确地掌握检测部位,降低漏掉摄影图像微小异常的可能性。
摄影系统的变形例
接下来,用图15和图16说明图2所示的摄影系统的构成的变形例。图15是摄影系统的构成的变形例的示意图。图15所示的摄影系统8A具备由多个单元构成的摄影单元900A。摄影单元900A包括主单元600和两个从单元601、602。
主单元600和两个从单元601、602所包含的构成与图2所示的摄影单元900所包含的构成相同。主单元600和从单元601602分别用于控制一台相机单元和照明单元,在图15的示例中,摄影单元900A包括三台相机和照明。主单元600和从单元601、602的每个单元中必须具有相机单元和照明单元,但不必具有其它传感器单元。因此,图15用虚线表示从单元601及从单元602中包含的TOF传感器903b、903c及IMU904b、904c。主单元600的传感器控制板90a除了用来控制构成主单元600的传感器类之外,还控制从单元601、602。控制传感器板90a、90b、90c通过开关集线器930分别连接。
显示装置20通过开关集线器930与传感器控制板90a通信。当来自显示装置20的摄影开始请求或摄影停止请求被传送到传感器控制板90a时,主单元600不仅使用相机单元901a及照明单元902a进行摄影开始或摄影停止,还向从单元601、602的传感器控制板90b、90c传送相同的指令。从单元601、602根据来自传感器控制板90a的指令,用各自的相机单元901b、901c及照明单元902b、902c进行摄影开始或摄影停止。显示装置20在进行成败查核处理时,从传感器控制板90a取得分别保存在主单元600及从单元601、602中的图像数据及检测结果。
图15例示了摄影单元900A包含两个从单元601、602的构成,但从单元的数量并不限于此,摄影单元900A也可以根据构成行式像机的相机数量等,具有三个以上的从单元。
接着,用图16说明如图15所示的由多个相机拍摄的摄影图像进行一次性的成败查核作业时所使用的图像阅览画面的例子。
图16所示的图像浏览画面500包括如下元素:俯瞰图像显示区域510,用摄影单元900A中包含的多个单元所取得的摄影图像数据显示表示整个隧道6的俯瞰图像的区域;放大图像显示区域550,显示俯瞰图像显示区域510上显示的俯瞰图像之中受到指定的位置的放大图像的区域;选择区域580,选择图像阅览画面500上显示的摄影图像的显示状态的区域;“摄影”按钮507,再次要求规定摄影位置上的摄影处理时受到按动的按钮;“上传”按钮509,执行摄影图像上传时受到按动的按钮;以及“关闭”按钮501,中断或结束成败查核处理而关闭图像阅览画面500时受到按动的按钮。
其中,俯瞰图像显示区域510垂直排列显示由构成摄影单元900A的各单元取得的摄影图像所构成的俯瞰图像。此时,显示装置20与主单元600的传感器控制板90a通信,一边进行规定的稀疏处理,一边接收各单元各自保存的摄影图像数据。各单元的俯瞰图像与图10所示的俯瞰图像显示区域310中显示的俯瞰图像相同。俯瞰图像显示区域510上检测部96的检测结果,即标志图像,被重叠在俯瞰图像上显示。另外,标志图像例如可以成为半透明,即使在具有标志图像的部位也可以知道俯瞰图像的内容。俯瞰图像显示区域510也可以如同图像阅览画面300的俯瞰图像显示区域310和标志显示区域320,分开显示俯瞰图像和标志图像。
俯瞰图像显示区域510还显示矩形区域t1,在选择俯瞰图像中的放大区域时,与矩形区域t1对应的俯瞰图像的部位被放大显示在放大图像显示区域550上。例如在通过倍率选择部583等改变了倍率的情况下,图像阅览画面500显示的矩形区域t1的面积随着倍率改变而发生变化。另一方面,在通过操作矩形区域t1而使矩形区域t1的大小发生变化时,图像阅览画面500显示随着矩形区域t1的大小改变而发生变化的倍率值的倍率选择部583。
检查作业者例如通过用输入装置等操作指针p1,放大矩形区域t1并移动到想要查核的位置。检查作业者通过观察显示在俯瞰图像显示区域510上的俯瞰图像及标记图像,决定需要放大检视的位置。然后,检查作业者例如将指针p1移动到矩形区域t1上,右击指点设备212的鼠标,选择需要查核是否是异常图像的位置。在图16的示例中,由于标志图像的显示横跨由两个单元拍摄的图像,因此检查操作者移动矩形区域t1使其横跨两个图像。
放大图像显示区域550显示与俯瞰图像显示区域510中显示的矩形区域t1的位置对应的经过放大的放大图像。放大图像显示区域550包括两个显示区域550a、550b。显示区域550a、550b分别显示由不同单元拍摄的图像。这是因为当标志图像横跨由多个单元拍摄的图像时,可以通过矩形区域t1选择多个单元的摄影图像。图像浏览画面500通过显示由多个单元拍摄的图像的放大图像,可供检查作业者查阅不同单元拍摄的图像之间是否存在重叠区域。这是因为,在合成由所有单元拍摄的摄影图像以生成一张展开图像时,如果没有相邻相机重叠的区域,则不能进行合成(处于脱落状态),因此当摄影车辆9的蛇行较大时需要进行查核。放大图像显示区域550不仅可以显示矩形区域t1所选择的图像,还可以显示对应于相同摄影位置(隧道6的周向上的相同位置)的所有单元拍摄的图像。
选择区域580是用于接受对图像浏览画面500上显示的摄影图像之中处于激活的图像的图像操作的选择的区域。选择区域580包括数据选择区域581,用于选择阅览对象的摄影图像;倍率选择单元583,用于选择在图像阅览画面500上显示的摄影图像的倍率;亮度调整单元585,用于改变摄影图像的亮度;摄影位置选择单元591,用于选择图像阅览画面300上显示的摄影图像的摄影位置;以及,显示切换按钮595,该按钮在进行放大图像显示区域550上显示的放大图像的帧前进时受到选择。
其中,数据选择区域581中用下拉列表显示控制装置90a的取得数据管理DB9001中保存的摄影ID及摄影时间。检查作业者通过操作数据选择区域581,选择与进行成败查核的摄影处理相对应的摄影ID以及摄影时间。通信部27向控制装置90a发送与受理部22受理了选择的摄影ID及摄影时间对应的取得数据的取得请求。控制装置90a的存储及读出部99将收到的摄影ID及摄影时间作为检索键,检索取得数据管理DB9001,从而读出对应的取得数据,通信部91向显示装置20发送读出的取得数据。然后,显示装置20的显示控制部23在俯瞰图像显示区域510上显示由通信部27收到的取得数据构成的俯瞰图像和标志图像。
检查作业者通过利用输入装置的指针p1操作倍率选择部583,放大或缩小被显示在激活显示区域上的摄影图像。受理部22通过检查作业者操作倍率选择部583,受理用来扩大或缩小激活显示区域中显示的摄影图像的倍率的选择。当受理部22接受倍率选择部583所示的数值的更改时,显示控制部23在放大图像显示区域550上显示与受到更改的倍率(放大率)对应的放大图像。倍率选择部583也可以是如图像阅览画面300的倍率调整部381那样的滑块方式的操作装置。
亮度调整装置585、摄影位置选择装置591以及显示切换按钮595分别与图像阅览画面300的亮度调整部385、摄影位置选择部383及显示切换按钮391的构成相同。检查作业者例如使用摄影位置选择部383或显示切换按钮39,选择在放大图像显示区域550上显示的放大图像的摄影位置,或进行所显示的放大图像的帧前进。除了图15所示的构成以外,图像阅览画面500也可以包括图像阅览画面300的全画面显示选择按钮387及显示消去按钮389等。
这样,在同时查核多个相机的摄影图像的成败时,显示装置20通过一次性显示相邻相机的放大图像,可以让检查作业者在短时间内有效地查核相邻相机的摄影部位是否重叠等。
<实施方式的效果>
如上所述,在用显示装置20进行成败查核时,摄影系统8同时显示从俯瞰隧道6的入口到出口的多个缩小图像(俯瞰图像)和标记图像,基于显示的缩小图像和标记图像,检查作业者选择任意位置时,显示以受选的位置坐标为中心的放大图像。由此,检查作业者能够高效查核摄影图像的异常候补位置的放大图像。
在考虑伴随电池小型化的摄影系统8的耗电量削减或交通管制等引起的现场的时间限制等的情况下,提高检查作业者的成败查核处理的效率十分重要。另外,如果现场没有发现异常,而日后检查作业者制作展开图像中发现异常,则需要再次到现场进行拍摄,因此,成败查核处理的精度也同样重要。对此,在摄影系统8中,搭乘摄影车辆9的检查作业者使用的显示装置20将隧道6的俯瞰图像和表示异常候补位置的检测结果关联起来显示,并显示由检查作业者选择的位置的放大图像,由此能够在短时间内高精度地实现检查作业者的摄影图像的成败查核处理。
在上述的实施方式中,以道路上的隧道6为一例构造物,说明了隧道6的诊断的例子,但是诊断系统1也可以用于例如路面、桥梁或坡面等道路上各种构造物的诊断用途。诊断系统1还可用于其它构造物的诊断用途,例如大楼的墙壁、电梯的壁面或地铁隧道。另外,用摄影车辆9作为一例移动体,说明了显示拍摄的摄影图像的处理,但诊断系统1也可以显示通过无人机等其他移动体或人的移动所拍摄的摄影图像。进而,说明了用显示在显示装置20上的图像阅览画面300、400、500来进行摄影图像阅览的例子,但诊断系统1也可以在检查作业者使用的诊断装置40上显示图像阅览画面300、400、500,阅览摄影图像。
《总结》
如上所述,本发明的一种实施方式涉及的显示装置是显示拍摄隧道6(一例构造物)的图像的显示装置20。显示装置20接收从控制隧道6的摄影处理的控制装置90发送的多个摄影图像数据以及指定的检测结果,将收到的多个摄影图像数据分别缩小后的多个缩小图像和与该缩小图像对应的检测结果相关联,显示到图像阅览画面300(一例显示画面)上。然后,显示装置20接受所显示的缩小图像上规定位置的选择,在图像阅览画面300上显示比与所接受的位置对应的缩小图像具有更高倍率的放大图像。由此,显示装置20能够减少对漏掉摄影图像所显示的微小异常,使检查作业者在短时间内高效进行摄影图像的成败查核。
另外,本发明的一种实施方式涉及的摄影系统是具备显示装置20和控制装置90的摄影系统8。控制装置90对摄影单元900、900A(一例摄影单元)拍摄的摄影图像进行规定的检测处理,将与由摄影单元900、900A拍摄的摄影图像对应的摄影图像数据以及检测结果发送到显示装置20。由此,摄影系统8能够检测出隧道6等构造物的摄影中有异常可能性的部位。
《补充》
以上描述的实施方式的各功能可以通过一个或多个处理电路来实现。在此,本实施方式中的“处理电路”是指包括通过电子电路安装的处理器那样的通过软件执行各项功能而经过编程的处理器、以及执行上述各项功能而经过设计的ASIC、DSP(digital signalprocessor)、FPGA、SOC(System on a chip)、GPU(Graphics Processing Unit)以及现有的电路模块等的设备。
上述说明的实施方式的各种表格也可以通过机器学习的学习效果生成,也可以不使用表格,而通过机械学习对相关联的各项目的数据进行分类。在此,所谓机器学习是指,使计算机获得像人一样的学习能力的技术,是一种让计算机从预先取得的学习数据中自主生成数据识别等判断所需要的算法,对新的数据应用该算法进行预测的技术。机器学习的学习方式可以是监督式学习、无教师学习、半教师学习、强化学习和深层学习中的任意一种方式,也可以是这些学习方式的组合,只要式用于机器学习的学习方式,任何学习方式均可以使用。
至此,说明了本发明的实施方式涉及的显示装置、摄影系统、显示控制方法、存储介质以及计算机装置,但是,本发明并不受上述实施方式的限制,在上述实施方式的基础上可以在本领域技术人员所能想到的范围内进行增删或更改等,但无论何种方式,只要起到本发明的作用、效果,均应该属于本发明本发明的范畴。
符号说明
1诊断系统,6隧道(一例构造物),8摄影系统,9摄影车辆(一例移动体),20显示装置,22受理部,23显示控制部,27通信部(一例接收部),40诊断装置,50数据管理装置,90传感器控制单元(一例控制部),91通信部(一例发送部),96检测部,300、400、500图像阅览画面(一例显示画面),900、900A摄影单元(一例摄影装置)
Claims (20)
1.一种用于显示结构物摄影图像的显示装置,其中包括
接收部,用于接收用来控制结构物的摄影处理的控制装置发送的多个摄影图像数据以及指定的检测结果;
显示控制部,用于将收到的多个所述摄影图像数据各自经过缩小后的多个缩小图像和与该缩小图像对应的检测结果关联起来,显示到显示画面上;以及
受理部,用于受理所显示的所述缩小图像上指定的位置的选择,
所述显示控制部将具有比与所述受理部受理的所述位置相对应的所述缩小图像更高倍率的放大图像显示到所述显示画面上。
2.根据权利要求1所述的显示装置,其中,所述显示控制部将与所述检测结果对应的标志图像与所述缩小图像关联起来,显示到所述显示画面上。
3.根据权利要求2所述的显示装置,其中,所述显示控制部将与所述放大图像的大小对应的所述标志图像与所述放大图像关联起来,显示到所述显示画面上。
4.根据权利要求1至3中任意一项所述的显示装置,其中,所述显示控制部在所述显示画面上显示用多个所述缩小画面表示的整个所述结构物的俯瞰画面。
5.根据权利要求1至3中任意一项所述的显示装置,其中,所述显示控制部将所述俯瞰图像和所述放大图像并列显示在所述显示画面上。
6.根据权利要求1至5中任意一项所述的显示装置,其中,所述显示控制部将所述放大图像显示在整个所述显示画面上。
7.根据权利要求1至6中任意一项所述的显示装置,其中,
所述受理部接受在所述显示画面上显示的、作为所述放大图像的第一放大图像上指定的位置的选择,
所述显示控制部将具有比所述受理部受理的所述位置所对应的所述第一放大图像更高倍率的第二放大图像显示到所述显示画面上。
8.根据权利要求1至7中任意一项所述的显示装置,其中,当所述受理部受理的所述位置是与多个所述缩小图像对应的位置时,所述显示控制部将所述受理部受理的所述位置所对应的多个所述缩小图像各自的所述放大图像显示到所述显示画面上。
9.一种摄影系统,其中具备权利要求1至8中任意一项所述的显示装置和所述控制装置,其中,所述控制装置具备
检测部,用于对摄影装置拍摄的摄影图像进行规定的检测处理;以及
发送部,用于项所述显示装置发送所述摄影图像数据以及所述检测部检测到的检测结果。
10.根据权利要求9所述的摄影系统,其中,所述检测部检测所述摄影图像的灰度信息是否在规定该范围以外。
11.根据权利要求9或10所述的摄影系统,其中,所述检测部检测所述摄影图像的模糊不清。
12.根据权利要求9至11中任意一项所述的摄影系统,其中,所述检测部检测所述结构物的出入口。
13.根据权利要求9至12中任意一项所述的摄影系统,其中,所述检测部检测所述结构物的截面形状呈非连续性变化的部位。
14.根据权利要求9至13中任意一项所述的摄影系统,其中,所述检测部检测所述摄影图像显示的所述结构物的损伤部。
15.根据权利要求9至14中任意一项所述的摄影系统,其中,所述检测部检测具备所述摄影装置的移动体的速度是否在规定范围以外。
16.根据权利要求15所述的摄影系统,其中,所述检测部检测所述移动体的加速度是否达到规定值以上。
17.根据权利要求9至16中任意一项所述的摄影系统,其中,所述检测部检测所述摄影装置和所述结构物之间的距离是否在规定范围以外。
18.一种供用来显示结构物的摄影图像的显示装置实行的显示控制方法,其中包括以下步骤,
接收步骤,接收用来控制结构物的摄影处理的控制装置发送的多个摄影图像数据以及指定的检测结果;
显示控制步骤,将收到的多个所述摄影图像数据各自经过缩小后的多个缩小图像和与该缩小图像对应的检测结果关联起来,显示到显示画面上;
受理步骤,受理被显示的所述缩小图像上指定的位置的选择;以及
第二显示控制步骤,将具有比在所述受理步骤中受理的所述位置对应的所述缩小图像更高倍率的放大图像显示到所述显示画面上。
19.一种计算机可读的存储介质,其中保存可供计算机装置执行包括以下步骤的程序,
接收步骤,接收用来控制结构物的摄影处理的控制装置发送的多个摄影图像数据以及指定的检测结果;
显示控制步骤,将收到的多个所述摄影图像数据各自经过缩小后的多个缩小图像和与该缩小图像对应的检测结果关联起来,显示到显示画面上;
受理步骤,受理被显示的所述缩小图像上指定的位置的选择;以及
第二显示控制步骤,将具有比在所述受理步骤中受理的所述位置对应的所述缩小图像更高倍率的放大图像显示到所述显示画面上。
20.一种计算机装置,其中具备存储装置和处理器,所述存储装置中保存了程序,通过所述处理器执行所述程序,所述计算机装置实行以下步骤,
接收步骤,接收用来控制结构物的摄影处理的控制装置发送的多个摄影图像数据以及指定的检测结果;
显示控制步骤,将收到的多个所述摄影图像数据各自经过缩小后的多个缩小图像和与该缩小图像对应的检测结果关联起来,显示到显示画面上;
受理步骤,受理被显示的所述缩小图像上指定的位置的选择;以及
第二显示控制步骤,将具有比在所述受理步骤中受理的所述位置对应的所述缩小图像更高倍率的放大图像显示到所述显示画面上。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020-134475 | 2020-08-07 | ||
JP2020134475A JP7552131B2 (ja) | 2020-08-07 | 2020-08-07 | 表示装置、撮影システム、表示制御方法およびプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114071072A true CN114071072A (zh) | 2022-02-18 |
Family
ID=80233663
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110897307.6A Pending CN114071072A (zh) | 2020-08-07 | 2021-08-05 | 显示装置、摄影系统、显示控制方法、存储介质 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7552131B2 (zh) |
CN (1) | CN114071072A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024101046A1 (ja) * | 2022-11-10 | 2024-05-16 | 富士フイルム株式会社 | 画像表示装置、画像表示装置の作動方法、および画像表示装置の作動プログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1701213A (zh) * | 2003-05-29 | 2005-11-23 | 奥林巴斯株式会社 | 立体摄像机支持装置、立体摄像机支持方法、校准检测装置、校准校正装置以及立体摄像机系统 |
JP2008160879A (ja) * | 2008-02-04 | 2008-07-10 | Nikon Corp | 電子カメラおよび画像表示装置および画像表示方法 |
CN104246468A (zh) * | 2012-05-25 | 2014-12-24 | 夏普株式会社 | 显示装置的检查方法和显示装置的检查装置 |
JP2019061667A (ja) * | 2017-09-26 | 2019-04-18 | 株式会社リコー | 診断処理装置、診断システム、入力方法、及びプログラム |
CN110895443A (zh) * | 2018-09-07 | 2020-03-20 | 爱信精机株式会社 | 显示控制装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102005029242B4 (de) | 2005-06-23 | 2012-10-25 | Siemens Ag | Verfahren zur Aufnahme und Auswertung von Bilddaten eines Untersuchungsobjekts und dazugehörige Einrichtung |
JP2007147354A (ja) | 2005-11-25 | 2007-06-14 | I-Pulse Co Ltd | 検査機、検査方法および実装ライン |
JP4050777B1 (ja) | 2007-04-06 | 2008-02-20 | 株式会社デジタルマックス | 画像表示システム |
-
2020
- 2020-08-07 JP JP2020134475A patent/JP7552131B2/ja active Active
-
2021
- 2021-08-05 CN CN202110897307.6A patent/CN114071072A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1701213A (zh) * | 2003-05-29 | 2005-11-23 | 奥林巴斯株式会社 | 立体摄像机支持装置、立体摄像机支持方法、校准检测装置、校准校正装置以及立体摄像机系统 |
JP2008160879A (ja) * | 2008-02-04 | 2008-07-10 | Nikon Corp | 電子カメラおよび画像表示装置および画像表示方法 |
CN104246468A (zh) * | 2012-05-25 | 2014-12-24 | 夏普株式会社 | 显示装置的检查方法和显示装置的检查装置 |
JP2019061667A (ja) * | 2017-09-26 | 2019-04-18 | 株式会社リコー | 診断処理装置、診断システム、入力方法、及びプログラム |
CN110895443A (zh) * | 2018-09-07 | 2020-03-20 | 爱信精机株式会社 | 显示控制装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2022030436A (ja) | 2022-02-18 |
JP7552131B2 (ja) | 2024-09-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7070683B2 (ja) | 劣化診断装置、劣化診断システム、劣化診断方法、プログラム | |
CN111753649B (zh) | 车位检测方法、装置、计算机设备和存储介质 | |
US8401296B2 (en) | Image processing method for locating and recognizing barcodes in image frame, computer readable storage medium, and image processing apparatus | |
EP3889825A1 (en) | Vehicle lane line detection method, vehicle, and computing device | |
CN104427255A (zh) | 车载相机的图像处理方法和使用该方法的图像处理设备 | |
CN111976601B (zh) | 自动泊车方法、装置、设备和存储介质 | |
CN111967396A (zh) | 障碍物检测的处理方法、装置、设备及存储介质 | |
US11037352B2 (en) | Information processing apparatus, system of assessing structural object, method of assessing structural object and storage medium | |
CN115134537B (zh) | 一种图像处理方法、装置及车辆 | |
CN114071072A (zh) | 显示装置、摄影系统、显示控制方法、存储介质 | |
JPWO2012014972A1 (ja) | 車両挙動解析装置及び車両挙動解析プログラム | |
JP7559417B2 (ja) | 表示装置、表示システム、表示制御方法およびプログラム | |
JP2021033494A (ja) | アノテーション支援方法、アノテーション支援装置、及びアノテーション支援プログラム | |
WO2021226852A1 (zh) | 车位检测方法、装置、计算机设备和存储介质 | |
JPWO2020079807A1 (ja) | 物体追跡装置、物体追跡方法、およびプログラム | |
US20210314533A1 (en) | Data transmission device and data transmission method | |
CN112016514B (zh) | 一种交通标志识别方法、装置、设备及储存介质 | |
US11481996B2 (en) | Calculation device, information processing method, and storage medium | |
JP7286612B2 (ja) | 操作検出装置及び操作検出方法 | |
JP2022148338A (ja) | 車線境界検出装置、車線境界検出方法及び車線境界検出用コンピュータプログラム | |
JP2022136357A (ja) | 撮影システム、データ処理システム、撮影処理方法およびプログラム | |
JP5853345B2 (ja) | ピント指標算出装置、画像処理装置、コンピュータプログラム及びピント指標算出方法 | |
CN113516145B (zh) | 图像处理与车辆信息提供方法、设备及存储介质 | |
WO2013146737A1 (ja) | 運転行動診断装置、運転行動診断方法、及びそのプログラム | |
JP2022108617A (ja) | 表示制御装置、表示制御方法及び監視システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |