JP6612689B2 - 計測支援装置及び計測支援方法 - Google Patents

計測支援装置及び計測支援方法 Download PDF

Info

Publication number
JP6612689B2
JP6612689B2 JP2016127710A JP2016127710A JP6612689B2 JP 6612689 B2 JP6612689 B2 JP 6612689B2 JP 2016127710 A JP2016127710 A JP 2016127710A JP 2016127710 A JP2016127710 A JP 2016127710A JP 6612689 B2 JP6612689 B2 JP 6612689B2
Authority
JP
Japan
Prior art keywords
image
unit
scale
scale image
width
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016127710A
Other languages
English (en)
Other versions
JP2018004308A (ja
Inventor
浩明 菊池
恒夫 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2016127710A priority Critical patent/JP6612689B2/ja
Publication of JP2018004308A publication Critical patent/JP2018004308A/ja
Application granted granted Critical
Publication of JP6612689B2 publication Critical patent/JP6612689B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Description

本発明は、計測支援装置及び計測支援方法に関し、特にユーザによる対象物の幅の計測を支援する計測支援装置及び計測支援方法に関する。
従来より、対象物をカメラで撮影し、その撮影画像を使用して対象物のサイズの計測を行う技術が提案されている。例えば、橋梁、トンネル、道路、及びビル等の構造物におけるひび割れ等の損傷を対象物とした場合には、ひび割れ等をカメラで撮影し、その撮影画像を加工又は解析して、ひび割れ等のサイズの計測を行う技術が知られている。
特許文献1では、ひび割れが撮影された撮影画像と、ひび割れのサイズを測定するためのクラックスケール画像とを合成して表示させる技術が提案されている。
特開2009−85785号公報
特許文献1には、クラックスケール画像に複数の線画及び各線画の示す幅を示す数値で構成された一つのスケールを有するクラックスケール画像が示されている。
ここで、一般に撮影画像上のひび割れ(ひび割れ画像)とクラックスケール画像の線画とを比較してひび割れの幅を測定する場合には、ユーザは、試行錯誤を重ねてひび割れの幅に最も近い線画を見つけ出す。すなわち、ひび割れの幅を測定する場合にユーザは、クラックスケール画像の複数の線画とひび割れ画像との比較を繰り返して、ひび割れ画像の幅と最も合致する幅を有する線画を見つけ出し、その線画に基づいてひび割れの幅を計測する。したがって、クラックスケール画像の線画の幅とひび割れ画像のひび割れの幅との比較が容易に行えると、ユーザはより正確で迅速なひび割れ計測を行うことができる。
上述した特許文献1では、撮影画像にクラックスケール画像の表示領域を設け、その表示領域をひび割れ画像に近く調節し、ひび割れ画像に沿って線画が表示されるように調節することが記載されている。
しかしながら、特許文献1に記載されているように、一つのスケールをひび割れ画像の近くに表示させたとしても、ひび割れの幅と線画の幅との比較が困難な場合がある。すなわち、一つのスケールをひび割れ画像の近くに表示させた場合には、ひび割れの幅と線画の幅との比較は一箇所でしか行われないので、ひび割れの幅と線画の幅との比較が困難になる場合がある。
本発明はこのような事情に鑑みてなされたもので、その目的は、ユーザが線画の幅とひび割れの幅との比較を容易に行うことができ、ひび割れの幅を正確に且つ迅速に計測することができる計測支援装置及び計測支援方法を提供することである。
上記目的を達成するために、本発明の一の態様である計測支援装置は、線状の対象物を含む撮影画像を取得する画像取得部と、取得された撮影画像を表示する表示部と、対象物の幅を計測するための複数の線画が配列され、かつ各線画の幅を示す数値が付されたスケールの全部又は一部を含むスケール画像を生成するスケール画像生成部と、撮影画像が表示された表示部に、生成されたスケール画像を重畳して表示させる重畳表示制御部であって、撮影画像内の対象物に線画を沿わせて表示させる重畳表示制御部と、複数の線画の移動を指示する第1の操作部と、を備え、スケール画像生成部は、第1の操作部からの指示に基づいてスケールを複数の線画が配列された方向に移動し、互いに対向する一対のスケールを有するスケール画像を生成する。
本態様によれば、スケール画像生成部が生成するスケール画像は、線画を線画が配列された方向に移動させることができ、互いに対向する一対のスケールを有する。これにより本態様ではユーザは、線画の幅とひび割れの幅との比較を少なくとも二箇所で行うことができ、容易に線画の幅とひび割れの幅との比較を行うことができ、ひび割れの幅を正確に且つ迅速に計測することができる。
好ましくは、スケール画像生成部は、互いに対向する一対のスケールの間に、撮影画像における対象物の表示領域を有するスケール画像を生成する。
本態様によれば、スケール画像生成部が生成するスケール画像は、互いに対向する一対のスケールの間に、撮影画像における対象物の表示領域を有する。これにより本態様では、撮影画像における対象物がスケールで挟み込まれるように表示されるので、ユーザは、線画の幅とひび割れの幅との比較を容易に行うことができる。
好ましくは、スケール画像生成部は、線画が直線形状又は曲線形状であるスケール画像を生成する。
本態様によれば、スケール画像生成部は、線画が直線形状又は曲線形状であるスケール画像を生成する。これにより本態様は、対象物が直線形状又は曲線形状である場合であっても、線画と対象物とが似た形状となるので、対象物の幅の測定を正確且つ迅速に行うことができる。
好ましくは、計測支援装置は、画像取得部で取得された撮影画像における対象物の形状を認識する形状認識部をさらに備え、スケール画像生成部は、線画が形状認識部で認識された対象物の形状であるスケール画像を生成する。
本態様によれば、形状認識部により撮影画像における対象物の形状が認識され、スケール画像生成部は形状認識部が認識した形状に基づいてスケール画像を生成する。したがって、本態様は、スケール画像生成部が生成する線画を対象物の形状に合った形状とすることができるので、対象物の幅の測定を正確に且つ迅速に行うことができる。
好ましくは、スケール画像生成部は、線画の配列の一端に達した場合には線画の配列の他端より同方向に移動が開始されるスケール画像を生成する。
本態様によれば、ユーザが線画の配列の一方の端部まで線画を移動させた場合に、線画の配列の他端から線画の移動が始まることにより、ユーザは一方向に移動させることにより再度比較を行うことができ、スムーズなスケール画像の操作性を提供することができる。一方で、ユーザが線画の配列の一方の端部まで線画を移動させた場合に、端部に移動したことによりその方向への移動が停止してしまうと、スムーズなスケール画像の操作性は実現されない場合がある。
好ましくは、重畳表示制御部により、撮影画像内の対象物に線画を沿わせた箇所を拡大表示させる拡大表示制御部をさらに備える。
本態様によれば、拡大表示制御部は、対象物に線画を沿わせた箇所を拡大表示させるので、ユーザは対象物とスケール画像との対比をより容易に行うことができる。
好ましくは、計測支援装置は、取得された撮影画像に基づいて、対象物の撮影画像内の位置及び方向を検出する対象物検出部をさらに備え、重畳表示制御部は、検出された対象物の位置及び方向に基づいて、対象物に線画を重ねて又は平行にさせてスケール画像を表示させる。
本態様によれば、対象物検出部により撮影画像における対象物の位置及び方向が検出され、重畳表示制御部により検出された対象物の位置及び方向に基づいて、対象物に線画を重ねて又は平行にさせてスケール画像が表示される。これにより、本態様は、ユーザは対象物とスケール画像との対比をより容易に行うことができる。
好ましくは、計測支援装置は、撮影画像における対象物の幅を画像処理によって推測する推測部をさらに備え、スケール画像生成部は、推測部で推測された対象物の幅に最も近い線画を少なくとも有するスケール画像を生成する。
本態様によれば、推測部により撮影画像における対象物の幅が推測され、その後重畳表示制御部により推測された対象物の幅に最も近い線画を対象物に重畳表示される。これにより、本態様は、対象物の幅に最も近い線画が対象物に重畳表示されるので、ユーザは対象物とスケール画像との対比をより容易に行うことができる。
好ましくは、計測支援装置は、スケール画像の平行移動及び回転移動を指示する第2の操作部をさらに備え、重畳表示制御部は、第2の操作部からの指示に基づいてスケール画像を平行移動及び回転移動させる。
本態様によれば、第2の操作部からの指示に基づいてスケール画像を平行移動及び回転移動させるので、スケール画像をより撮影画像における対象物に沿わせることができる。
本発明の一の態様である計測支援方法は、線状の対象物を含む撮影画像を取得する画像取得ステップと、取得された撮影画像を表示する表示ステップと、対象物の幅を計測するための複数の線画が配列され、かつ各線画の幅を示す数値が付されたスケールの全部又は一部を含むスケール画像を生成するスケール画像生成ステップと、表示ステップで表示された撮影画像に、生成されたスケール画像を重畳して表示させる重畳表示制御ステップであって、撮影画像内の対象物に線画を沿わせて表示させる重畳表示制御ステップと、複数の線画の移動を指示する第1の操作ステップと、を含み、スケール画像生成ステップでは、第1の操作ステップでの指示に基づいてスケールを複数の線画が配列された方向に移動し、互いに対向する一対のスケールを有するスケール画像を生成する。
本発明によれば、スケール画像生成部が生成するスケール画像は、線画を線画が配列された方向に移動させることができ、互いに対向する一対のスケールを有するので、ユーザは、線画の幅とひび割れの幅との比較を少なくとも二箇所で行い、容易に線画の幅とひび割れの幅との比較を行い、ひび割れの幅を正確に且つ迅速に計測することができる。
本発明の適用対象の例である橋梁を示す図である。 計測支援システムを概念的に示す図である。 計測支援装置の機能ブロック図を示している。 スケールの表示形態及び移動動作に関して説明する図である。 スケールの表示形態及び移動動作に関して説明する図である。 計測支援装置の動作フローを示す図である。 計測支援装置の機能ブロック図である。 計測支援装置の表示部の表示例に関して説明する図である。 空間分解能に関して説明を行うための図である。 ひび割れの幅と輝度分布との関係を説明するための図である。 ひび割れの幅と輝度分布との関係を説明するための図である。 輝度分布と線画の濃淡表示の対応関係の例を示す図である。 線画の濃淡表示について、階調値の例を付して説明する図である。 線画の濃淡表示について、階調値の例を付して説明する図である。 計測支援装置の機能ブロック図である。 スケール画像を示す概念図である。 線画生成の処理手順を示すフローチャートである。 撮影画像の例を示す図である。 ひび割れの画像を回転した状態を示す図である。 ひび割れの幅方向と直交する方向に沿って複数の濃度分布を取得する様子を示す図である。 ひび割れの一部を拡大した様子を示す図である。 濃度分布(各ピクセル位置での濃度)の例を示す図である。 濃度分布を曲線近似した様子を示す図である。 濃度分布をシフトして整列する様子を示す図である。 従来の方法により濃度分布を求める様子を示す図である。 スマートフォンの外観図である。 図26に示すスマートフォンの構成を示すブロック図である。
以下、添付図面に従って本発明に係る計測支援装置及び計測支援方法の好ましい実施の形態について説明する。
計測支援装置及び計測支援方法での対象物としては、様々なものを採用することができる。以下の説明では、対象物がひび割れの場合について説明を行うが、本発明が適用される対象物はひび割れに限定されるものではない。
図1は、本発明に係る計測支援装置及び計測支援方法における計測対象物(対象物)であるひび割れが存在する構造物の例である橋梁1(構造物、コンクリート構造物)の構造を示す斜視図である。図1に示す橋梁1は主桁3を有し、主桁3は接合部3Aで接合されている。主桁3は橋台及び/または橋脚の間に渡され、床版2上の車輌等の荷重を支える部材である。また主桁3の上部には、車輌等が走行するための床版2が打設されている。床版2は鉄筋コンクリート製のものとする。なお橋梁1は、床版2及び主桁3の他に図示せぬ横桁、対傾構、及び横構等の部材を有する。
橋梁1の損傷を検査する場合、検査員(ユーザ)はカメラ11(図2参照)を用いて橋梁1を下方から撮影し(図1のD3方向)、検査範囲について画像を取得する。撮影は、橋梁1の延伸方向(図1のD1方向)及びその直交方向(図1のD2方向)に適宜移動しながら行う。なお橋梁1の周辺状況により検査員の移動が困難な場合は、橋梁1に沿って移動可能な移動体にカメラ11を設けて撮影してもよい。このような移動体には、カメラ11の昇降機構及び/または、パン及び/またはチルト機構を設けてもよい。なお移動体の例としては車輌、ロボット、及び飛翔体を挙げることができるが、これらに限定されるものではない。また撮影は検査員によるカメラ11への指示入力(例えばレリーズボタンの押し下げ操作)に応じて行われる。
図2は、カメラ11と本発明の実施形態に係る計測支援装置13とから構成される計測支援システム10を概念的に示す図である。計測支援システム10ではカメラ11で撮影された対象物の撮影画像は、無線又は有線を使用して計測支援装置に送信される。図2では、カメラ11により床版2の対象物であるひび割れAが撮影され、その撮影画像が計測支援装置13であるコンピュータに無線通信により送信されている。カメラ11は、ひび割れAが撮影可能なデジタルカメラが使用され、ステレオ画像が取得可能なデジタルカメラ、TOF(Time of Flight)カメラが用いられてもよい。
<第1の実施形態>
次に、計測支援装置13の各機能に関して説明する。図3は、計測支援装置13の機能ブロック図である。
計測支援装置13は、画像取得部121、対象物検出部123、表示部125、スケール画像生成部127、重畳表示制御部129、操作部131、及びスケール操作部135から構成される。
画像取得部121は、対象物が撮影された撮影画像を取得する。撮影画像は例えばカメラ11により取得され、撮影画像には幅計測の計測対象である線状の像が含まれている。
対象物検出部123は、取得された撮影画像に基づいて、対象物の撮影画像内の位置及び方向を検出する。すなわち、対象物検出部123は、撮影画像を画像処理することにより対象物を検出する。なお、対象物検出部123が行う撮影画像の画像処理は公知の技術が適用される。対象物検出部123の検出結果は、重畳表示制御部129に送られてスケール画像を撮影画像に重畳表示させるときに利用される。すなわち、撮影画像とスケール画像との重畳表示が重畳表示制御部129により自動で行われる場合には、重畳表示制御部129は、対象物検出部123の検出結果である対象物の位置及び方向に基づいて、撮影画像中の対象物に線画を重ねて又は平行にさせてスケール画像を表示させる。一方、スケール画像を撮影画像に手動で重畳表示させる場合には、重畳表示制御部129は、操作部(第2の操作部)131からの指示に基づいて、スケール画像を移動させて撮影画像に重畳表示させる。例えば、操作部131からスケール画像を平行移動及び回転移動させる指示が発せられた場合には、重畳表示制御部129は、スケール画像を平行移動及び回転移動させて、スケール画像と撮影画像中の対象物とを重畳表示させる。
このように重畳表示制御部129は、撮影画像が表示された表示部125に、生成したスケール画像を重畳して表示させる。また重畳表示制御部129は、撮影画像内の対象物にスケール画像を沿わせて表示させる。ここで、撮影画像内の対象物にスケール画像を沿わせて表示させるとは、撮影画像の対象物の近傍にスケール画像を表示させること、及び対象物に重畳してスケール画像を表示させることを含む。
表示部125は、取得した撮影画像及び生成されたスケール画像を表示する。また撮影画像に重畳表示されたスケール画像も表示する。
スケール画像生成部127は、対象物の幅を計測するための複数の線画が配列されており、各線画の幅を示す数値が付されたスケールの全部又は一部を含むスケール画像を生成する。なお、ここで、線画とはひび割れの幅を測定するための一定の幅を持った線状の画像であり、スケールはその線画と線画の幅に対応し線画が示す幅の数値とで構成されるものであり、スケール画像100に表示される目盛りである。また、スケール画像生成部127は、スケール操作部135(第1の操作部)からの指示に基づいてスケールを複数の線画が配列された方向に移動させるスケール画像100を生成する。すなわちスケール画像生成部127は、スケールがユーザからの指示に基づいて移動可能に表示される。このように、スケール画像のスケールのみが移動することにより、スケール画像全体を移動させなくてもひび割れの幅と線画の幅との比較を行うことが可能となる。さらにスケール画像生成部127は、線画の配列の一端に達した場合には線画の配列の他端より同方向に移動が開始されるスケール画像を生成する。例えばスケール画像生成部127は、スケールの一端と他端とが連結されたスケール画像を生成し、線画の配列の一端に達した後に線画の配列の他端より同方向の移動が開始されるスケール画像を生成する。
スケール操作部135(第1の操作部)は線画の移動を指示する。例えばスケール操作部135は表示部125におけるタッチパネルで構成され、ユーザからのスケールの移動の指示を受け付ける。
図4及び図5は、スケール101の表示形態及びスクロール回転に関して説明する図である。例えばスケール画像生成部127は、スケール101の一端と他端とを連結させ、スケール操作部135からの指示に基づいてスケール101をスクロールさせるスケール画像100を生成する。すなわちスケール画像生成部127は、ユーザからのスケール操作部135を介してのスケール101のスクロールの指示に基づいて、スケール101がスクロールする画像を生成する。また、図4及び図5に示したスケール画像100は0.1mmから0.6mmのスケール101(目盛り)を有するものであり、図4及び図5で示されたスケール画像100はスケール101の一部を含むものである。なお、スケール画像100は、スケール101の全て(図4及び図5に示された場合では0.1mmから0.6mmのスケール全て)を含む態様にしてもよい。
具体的にはスケール画像生成部127は、図4及び図5に記載されているようにスケール101が、図4及び図5の矢印方向にスクロール回転(ドラム回転)するスケール画像100を生成する。ここでスケール101のスクロール回転とは、図4に記載されているようにスケール101の0.1mm、0.2mm、0.3mm、0.4mm、0.5mmの線画が表示されていたスケール画像100が、図5に記載されているにスケール101の0.5mm、0.6mm、0.1mm、0.2mm、0.3mmの線画が表示されたスケール画像100に遷移することをいう。
また、図4及び図5に記載されているスケール画像100のスケール101は、上述したように0.1mmから0.6mmの範囲のものであり、線画の配列の一端は0.1mmの線画であり、線画の配列の他端は0.6mmである。そしてスケール画像100では、0.1mmの線画の次に0.6mmの線画が配列されており、0.6mmの線画までスケール101が移動された場合には次に0.1mmの線画から始まる。なおスケール画像100は、図4及び図5の矢印方向にスクロール回転するように示しているが、これに限定されるものではなく、矢印の逆方向、又は両方向にスクロール回転してもよい。
またスケール画像生成部127は、互いに対向する一対のスケール101を有するスケール画像100を生成する。ここで互いに対向する一対のスケール101は、0.1から0.6の線画と線画の幅を示す数値とで構成された一つのスケール101(図4に向かって左側のスケール)と、0.1から0.6の線画と線画の幅を示す数値とで構成された一つのスケール101(図4に向かって右側のスケール)とで構成される。このように対向する一対のスケール101を有するスケール画像100では、撮影画像における対象物(例えばひび割れ)を対向するスケールとスケールとの間に表示させることによって、ユーザは撮影画像とスケールとの比較を正確に且つ迅速に行うことができる。すなわち、スケール画像100は対向するスケールとスケールとの間に対象物の表示領域Bを有し、ユーザは各スケール毎でひび割れの幅と線画の幅との比較を行うことができるので、ユーザは正確に且つ迅速なひび割れの幅の計測を行うことができる。
なお対向する一対のスケール(二つのスケール)は、同期して移動可能でもよいし、互いに独立して移動可能でもよい。一対のスケールが独立して動作する場合には、それぞれのスケールで異なる線幅を計測することが可能となる。
図6は、計測支援装置13の動作フローを示す図である。
先ず、計測支援装置13の画像取得部121は撮影画像を取得する(画像取得ステップ:ステップS11)。撮影画像は、例えばカメラ11により対象物が撮影された撮影画像である。その後、計測支援装置13のスケール画像生成部127はスケール画像100を生成する(スケール画像生成ステップ:ステップS12)。スケール画像生成部127は互いに対向する一対のスケールを有するスケール画像を生成する。その後、重畳表示制御部129は、撮影画像とスケール画像100とを重畳表示する(表示ステップ及び重畳表示制御ステップ:ステップS13)。その後、スケール操作部135を介してスケール画像100のスケールの移動の指示を受け付ける(第1の操作ステップ:ステップS14)。そして、スケール画像生成部127は、移動の指示に応じたスケール画像100を逐次生成する。
上述の各構成及び機能は、任意のハードウェア、ソフトウェア、或いは両者の組み合わせによって適宜実現可能である。例えば、上述の処理ステップ(処理手順)をコンピュータに実行させるプログラム、そのようなプログラムを記録したコンピュータ読み取り可能な記録媒体(非一時的記録媒体)、或いはそのようなプログラムをインストール可能なコンピュータに対しても本発明を適用することが可能である。
<第2の実施形態>
次に、本発明の応用例2に関して説明をする。本例ではスケール画像100の線画が曲線形状となる。
図7は、本例の計測支援装置13の機能ブロック図である。なお、図3で既に説明を行った箇所は、同じ符号を付し説明を省略する。
計測支援装置13は、画像取得部121、対象物検出部123、推測部141、形状認識部143、表示部125、スケール画像生成部127、重畳表示制御部129、操作部131、スケール操作部135、及び拡大表示制御部145から構成される。本例の計測支援装置13は、図3で示された計測支援装置13と比較して、推測部141、形状認識部143、及び拡大表示制御部145が追加されている。
推測部141は、撮影画像における対象物の幅を画像処理によって推測する。すなわち、推測部141は、公知の画像処理技術を撮影画像に適用し、対象物の幅を推測する。そして重畳表示制御部129は、推測部で推測された対象物の幅に最も近い線画を対象物に重畳表示させる。
形状認識部143は、撮影画像における対象物の形状を認識する。すなわち、形状認識部143は、公知の画像処理技術を撮影画像に適用し、対象物の形状を認識する。そしてスケール画像生成部127は、線画が形状認識部143で認識された対象物の形状であるスケール画像100を生成する。例えば形状認識部143は撮影画像におけるひび割れの形状を画像処理により認識し、スケール画像生成部127は形状認識部143の認識結果に基づいて線画を生成する。
拡大表示制御部145は、重畳表示制御部129により、撮影画像内の対象物に線画を沿わせた箇所を拡大表示させる。すなわち拡大表示制御部145は、重畳表示制御部129が線画を撮影画像のひび割れに沿わせた場合に、その沿わせた箇所を拡大する。
図8は、本例の計測支援装置13の表示部125の表示例に関して説明する図である。図8では、推測部141で撮影画像におけるひび割れAの幅が推測され、その推測された幅に最も近い0.4mmの線画が撮影画像におけるひび割れAに重畳表示されている。具体的には、推測部141により撮影画像におけるひび割れAが0.4mmと推測され、その推測結果に基づいて重畳表示制御部129は0.4mmに最も近い線画(図8の場合は0.4mmの線画)を撮影画像のひび割れAに重畳表示させる。
またスケール画像生成部127は、形状認識部143で認識された撮影画像のひび割れAの形状に応じた線画を生成する。すなわち、形状認識部143はひび割れAの形状を曲線形状と認識し、スケール画像生成部127はその認識結果に基づいて線画を曲線形状で生成する。スケール101Aとスケール101Bは、互いに対向する一対のスケールであり、ひび割れAの曲線形状に沿った形状である線画を有している。
さらに図8では拡大表示制御部145により、線画がひび割れAに沿っている箇所が拡大表示(符号Cで示す)されている。このように拡大表示されることによって、検査員は撮影画像のひび割れAの幅を正確に計測することができる。
<応用例>
次に本発明の応用例に関して説明する。応用例では、スケール画像100の線画が濃淡表示される。
撮影画像における対象物は、対象物からの光束を受光する撮像素子の出力値が一定ではないために濃淡を有して表示される場合がある。すなわち、対象物からの光束を素子全体で受光した場合の出力値と素子の一部で受光した場合の素子から出力値とは異なり、この場合例えば輝度値が異なることにより撮影画像においては対象物が濃淡を有して表示される。
特にひび割れ等の細い線状を撮影した撮影画像では、ひび割れが濃淡を有するように表示される場合がある。例えば、カメラ11の空間分解能と同等又はそれよりも細いひび割れは、撮影画像において濃淡を有する線状の画像として表示される。
一方で、対象物を撮影し、その撮影画像とスケール画像100とを重畳表示させて対象物のサイズの計測を支援する場合には、撮影画像における対象物とスケール画像100との表示が同じであると、対象物とスケールとの比較が行い易くなり、より正確なサイズの計測を迅速に行うことができる。例えば、撮影画像における対象物と幅の計測のための線画との濃淡が同程度であると、対象物と線画との比較が行い易く、より正確な対象物の幅の計測を迅速に行うことができる。
したがって、スケール画像100における線画の濃淡を撮影画像における対象物の濃淡表示に合わせて生成することにより、ユーザは、線画と対象物との比較を容易に行うことができるようになり、正確な対象物の幅の計測を迅速に行うことができる。本例では、ユーザがこのように正確な対象物の幅の計測を迅速に行えるように、線画を濃淡表示させる。なお、特に対象物として線幅が小さい線状のものであると、本例の効果が好適に奏される。線幅が小さい線状のものとは、例えば構造物のひび割れ、血管等が挙げられる。
先ず本例における空間分解能に関して説明をする。
本例における空間分解能とは、カメラ11に搭載される撮像素子(CCD(charge coupled device))を構成する画素(ピクセル)の1つが画像上で表す大きさが実際の被写体ではどれくらいの大きさに対応するかの指標である。以下に詳細に空間分解能に関して説明する。
図9は、空間分解能に関して説明を行うための図である。なお図9におけるX軸方向はカメラ11の鉛直方向であり、Y軸方向は鉛直方向に垂直に交わる水平方向を示している。
図9は、カメラ11により床版2を正対して撮影する場合の床版2の撮影範囲等を示す図である。
ここで、カメラ11に搭載されるレンズ17は、焦点距離fが3cmであり、搭載されている撮像素子19は、水平方向及び垂直方向の寸法がそれぞれ2cm及び1.5cm(不図示)で、水平方向及び垂直方向の画素数が4000×3000画素(画素ピッチp=5μm)で構成されているものとする。
図9に示すように、このカメラ11によりカメラ11(レンズ17)からの距離(被写体距離)が6mの床版2を正対して撮影すると、床版2の撮影範囲は4m×3mとなる。
また、この場合の空間分解能は、1mm/画素である。また例えば、被写体距離が6mから3mに変わった場合には、空間分解は0.5mm/画素である。
図10及び図11は、ひび割れの幅と輝度分布との関係を説明するための図であり、図10は空間分解能が1mm/画素の条件で、ひび割れの幅が0.5mmのひび割れを撮影した場合の輝度分布を示し、図11は空間分解能が1mm/画素の条件で、ひび割れの幅が0.3mmのひび割れを撮影した場合の輝度分布を示している。
図10において符号21は、0.5mmの幅を有するひび割れを撮影した場合の、理想的なひび割れ画像の輝度分布を示す。ひび割れの幅0.5mmに比べて空間分解能が十分に高い場合、理想的な輝度分布又は理想的な輝度分布に近い輝度分布が得られ、ひび割れの幅を精度よく測定することができるが、この場合、特殊なカメラ(超高解像度カメラ)や床版2の撮影範囲を狭くして撮影する(ズーム倍率を高くする、又は被写体距離を短くする)必要があり、現実的でない。
空間分解能が0.5mm/画素の条件で、0.5mmの幅を有するひび割れを撮影した場合、実際には、図10の符号23に示すように、0.5mmよりも幅が広く、かつ濃度差の低い輝度分布を有するひび割れ画像として撮影される。
図11では、ひび割れの幅が0.3mmである場合について示されている。図10における符号21に示したものと同様に符号25は、理想的なひび割れ画像の輝度分布を示す。
また、符号27は、空間分解能が0.5mm/画素の条件で、0.3mmの幅を有するひび割れを撮影した場合の、ひび割れ画像の輝度分布を示している。ただし、0.3mmのひび割れと0.5mmのひび割れとでは、撮影時の空間分解能が同一であるため、輝度分布の幅は変わらないが、0.3mmのひび割れ画像の輝度分布のピークは、0.5mmのひび割れ画像の輝度分布のピークよりも低くなる。
図12は、ひび割れ画像の輝度分布と線画の濃淡表示の対応関係の例を示す図である。
図12の符号29で示される輝度分布は、2m先の床版2に発生している0.1mmのひび割れを、空間分解能が0.1mm/画素以下の条件で撮影した場合に得られるひび割れ画像の輝度分布である。そして、図12で示される線画31は、幅0.1mmのひび割れを測定するための線画であり、符号29で示された輝度分布に対応する濃淡表示を有する。すなわち線画31は、符号29で示された輝度分布を表現できる数式モデルと撮影条件とに基づいて濃淡表示され、幅0.1mmのひび割れを撮影した場合に得られるひび割れ画像の輝度分布と同等の輝度分布を有するように表示される。なお、線画31は濃淡表示の説明のために拡大表示されている。また、符号29で示される輝度分布は、幅が既知のひび割れを撮影して取得してもよいし、幅が既知のひび割れのモデルを撮影することにより取得してもよい。
図13及び図14は、線画の濃淡表示における階調値の例を付して説明する図である。図13の線画33は0.2mmの幅を示す線画であり、図14の線画35は0.1mmの幅を示す線画であり、各線画の横には濃淡表示に対応する階調値が示されている。図13の線画33は、中心では0の階調値を示すが線画の幅方向の中心から外に向かって階調値が段々と変化して64、128と変化する。また図14の線画35は、中心では階調値64を示すが線画の幅方向の中心から外に向かって階調値が段々と変化して96、128と変化する。線画の濃淡表示は、例えばこのように階調値を変えることにより行われる。
このように、スケール画像100の線画において幅方向に輝度分布を持たせて濃淡表示を行うことによって、同等の幅を有するひび割れも撮影画像において同じように濃淡表示されているので、ユーザは撮影画像におけるひび割れとスケール画像100との比較を正確に且つ迅速に行うことができる。
次に、計測支援装置13の各機能に関して説明する。図15は、計測支援装置13の機能ブロック図である。なお、図3で既に説明を行った箇所は、同じ符号を付し説明を省略する。
計測支援装置13は、画像取得部121、対象物検出部123、表示部125、スケール画像生成部127、重畳表示制御部129、操作部131、スケール操作部135、及び記憶部133から構成される。なお、図3で既に説明を行った箇所は同じ符号を付し説明は省略する。
スケール画像生成部127は、線画が示す幅方向の輝度分布を表現できる数式モデルと対象物を撮影したときの撮影条件とに基づいて、スケール画像を生成する。例えばスケール画像生成部127は、ガウス関数を表す数式モデルに基づいてスケール画像を生成する。なおスケール画像生成部127が行う数式モデルと撮影条件とに基づいてスケール画像の生成に関する詳しい説明は後述する。
図16は、スケール画像生成部127が生成するスケール画像の例を示す概念図である。なお図16に示される図では互いに対向する一対のスケールのうちの一つのスケールが示されている。スケール画像100は、複数の直線形状の線画103が平行に配列され、線画103が示す幅の数値と線画103から構成されるスケール101が示されている。具体的にはスケール画像100は、0.1mm、0.2mm、0.3mm、0.4mm、及び0.5mmの幅を計測するための線画103を有し、各線画103は線画103が示す幅の数値とともに示されている。また各線画103は、各線画が示す幅を有する対象物が撮影画像上において示す輝度分布と同様な輝度分布及び幅を有するように生成される。
線画の濃淡表示は、撮影画像における同じ幅有する対象物と同等の濃淡表示を有するように、スケール画像生成部127により生成されている。例えば線画の濃淡表示及び幅は、線画が示す幅を有する線状のモデルを、対象物を撮影する場合と同じ撮影条件によりカメラ11で撮影をし、その撮影により取得した撮影画像におけるモデル画像の輝度分布及びモデル画像の幅と同じにする。すなわちスケール画像生成部127は、上述したモデル画像の輝度分布を表現できる数式モデルとモデルを撮影したときの撮影条件に基づいて、線画を生成する。
記憶部133は、計測支援装置13で行われる演算及び処理に必要な情報を記憶する。例えば記憶部133は、線画103の輝度分布(濃淡表示)に使用される数式モデルを記憶する。なお数式モデルについては後で詳述する。また例えば記憶部133は、線状のモデルをカメラ11により撮影し、その線状のモデルが撮影画像上で示す幅及び輝度分布に関する情報を記憶する。
次に、計測支援装置13が行うスケール画像生成において使用するモデル画像の幅、幅方向の輝度分布、及び輝度分布を表現する数式モデルの取得に関して説明する。ここでは、幅が既知のモデルを基準被写体としてモデル画像を取得して線画を生成する場合について説明する。なお、基準被写体とは別の方法により幅が測定された、あるいは人為的に作成された等により幅が既知である被写体であるものとする。ここで基準被写体について「幅が既知」とは、測定精度への要求に応じて幅に不確定性がある場合をも含むものとする。
また以下の説明では、上述した計測支援装置13を備えるコンピュータ(スケール画像生成部127)により、輝度分布及び数式モデルを取得する場合について説明する。なお輝度分布は以下に説明するように取得する場合に限定されない。
図17は線画生成の処理手順を示すフローチャートである。まずカメラ11は、検査員の指示入力(例えばレリーズボタンの押し下げ操作)に応じて橋梁1(床版2)に生じているひび割れ(線状の被写体の一例)を撮影して画像を取得する(ステップS102:撮影工程)。画像の取得は、画像取得部121の制御により自動的に行ってもよい。図18は、撮影画像の例を示す図であり、ひび割れC1−1〜C1−4からなるひび割れ群C1が被写体として撮影された画像i1を示している。それぞれのひび割れC1−1〜C1−4は、他の測定方法により幅が知られているものとし、ひび割れC1−1〜C1−4は線状のモデルである。
画像取得部121には、撮影して得られた画像(ここでは画像i1)が入力される(ステップS104:画像入力工程)。なお、入力された画像に対し、必要に応じアオリ補正等の処理を行ってもよい。また、入力された画像は1つでも複数でもよく、複数の画像が入力された場合には画像を合成して(つなぎ合わせて)1つの画像を生成してもよい。
スケール画像生成部127は、ひび割れが正面画像の上下方向に配置されるように、ステップS104で入力した画像を回転する(ステップS106工程:画像回転工程)。ここでは、ひび割れC1−2が上下方向に配置されるように画像i1を回転する。回転して得られた画像(画像i1R)を図19に示す。なおステップS106では、ひび割れC1−2をベクトル化して、ベクトルの方向が上下方向を向くように画像i1を回転することができる。このように画像を回転することで、複数の輝度分布を容易に取得することができる。なお正面画像とは、被写体の正面から撮影した画像(撮影方向が撮影面と垂直である画像)を意味する。
スケール画像生成部127は、回転後の画像i1Rについて、ひび割れC1−2の幅方向の濃度分布(輝度分布)を、幅方向と直交する方向に沿って複数取得する(ステップS108:濃度分布取得工程)。濃度分布の取得の様子を図20に示す。図20では、ひび割れC1−2の幅方向の濃度分布を、幅方向と直交する方向(矢印D4の方向)に沿って複数取得している。
図20中の点線は、濃度分布(輝度分布)の取得位置である。このように、複数の位置において濃度分布を取得することが、濃淡表示を正解なものとする観点より好ましい。
図21はひび割れC1−2のA−A線付近における拡大図であり、各ピクセル位置での濃度を模擬的に示したものである。図21では、図20のA−A線の部分での濃度を取得するものとする。
図21のようにして取得した濃度分布の例を図22に示す。図22の横軸はピクセル位置(整数値)、縦軸は濃度を示す。図22の黒丸は各ピクセル位置での濃度であり、図22の上方向に向かうほど明るく(階調値が大きく)、下方向に向かうほど暗い(階調値が小さい)状態を示す。
図22のような濃度分布に対し、スケール画像生成部127は、図22のように濃度分布を曲線近似して、中心になるピクセル位置を実数値で推定する(ステップS110:中心推定工程)。近似は、濃度分布の複数の点を通る曲線(2次曲線、3次曲線等)を求めることにより行うことができる。また、中心位置を求めるための曲線近似は、濃度分布の一部の点について行ってよい。図23では点P1〜P4について2次曲線CVで近似した例を示している。この2次曲線CVを微分することでピーク位置を求めることができ、図22の例ではピクセル位置0.4(実数値)で濃度がピークになる(最も暗くなる)ものとする。
ステップS110で濃度分布の中心が推定されたら、スケール画像生成部127はピクセル位置ゼロで濃度がピークになるように、濃度分布全体を幅方向にシフトする(ステップS112:整列工程)。図23の例では、濃度分布を−0.4ピクセル分シフトする。シフトした結果の例を図24に示す。
スケール画像生成部127は、ステップS108(濃度分布取得工程)で取得した全ての濃度分布についてステップS110(中心推定工程)及びステップS112(整列工程)の処理を繰り返し(ステップS114でNoの間)、全ての濃度分布についてこれらの処理が終了したら(ステップS114でYes)ステップS116へ進む。全ての濃度分布についてステップS110及びステップS112の処理を行うことにより、中心が揃った複数の濃度分布を得ることができ、以下に示す確率分布関数を正確に求めることができる。なお、これに対し従来の手法では、図25のように各ピクセル位置での濃度を単純な直線で結んで濃度分布としているので、正確な指標を求めることができない。
ステップS116では、中心が揃った複数の濃度分布に対応する確率分布関数を算出する(関数算出工程)。具体的には、下記の式(1)のような関数F(x)をひび割れのモデルとして濃度データを非線形回帰分析し、パラメータα,λ,及びcを求める。パラメータα,λはガウス関数の形状を示すパラメータであり、パラメータcはひび割れ周囲の明るさを示すパラメータである。
パラメータが算出できたら、スケール画像生成部127は、上述の式(1)に基づいてひび割れC1−2の幅を示す線画S1を生成する(ステップS118:指標生成工程)。
ステップS118に続いて、スケール画像生成部127はひび割れ周囲の明るさ、ひび割れまでの距離、及びひび割れ周囲の色に応じて、生成した線画を補正する(ステップS120:補正工程)。例えば、上述した線画S1の輝度分布に対し以下の式(2)のようにひび割れ周囲の明るさ、ひび割れまでの距離、及びひび割れ周囲の色の関数である補正係数C(=f(c,d,g))を乗じて得られた値を、補正後の線画S2の輝度分布とする。式(2)中、cは上述したひび割れ周囲の明るさを示すパラメータcであり、dはひび割れまでの距離、gはひび割れ周囲の色を示す。
(S2の輝度分布)=(S1の輝度分布)×C …(2)
このようにして、ひび割れC1−2の幅と線画S2の値との関係を知ることができる。そして上述したステップS102からステップS120までの処理を幅が既知の他のひび割れ(例えば図24のひび割れC1−1,C1−3,C1−4)について繰り返すことで、ひび割れ幅と線画との関係を把握することができる。
本実施形態では、このように中心を揃えた複数の濃度分布に対応する数式モデルに基づいて線画を生成し、生成した線画をひび割れ周囲の明るさ等に基づいて補正するので、測定環境やノイズの影響を低減して正確かつ安定的に線画を生成することができる。そして、幅が既知の被写体(上述の例では、ひび割れC1−2)について線画を生成することで、被写体の幅と線画との関係を把握することができる。
[スマートフォンの構成例]
次に計測支援装置13を構成するコンピュータの具体例に関して説明する。
図26は、計測支援装置13の一例であるコンピュータを搭載するスマートフォン300の外観を示すものである。図26に示すスマートフォン300は、平板状の筐体302を有し、筐体302の一方の面に表示部としての表示パネル321(表示部125)と、入力部(操作部131、スケール操作部135)としての操作パネル322とが一体となった表示入力部320を備えている。また、係る筐体302は、スピーカ331と、マイクロホン332、操作部340と、カメラ部341とを備えている。なお、筐体302の構成はこれに限定されず、例えば、表示部と入力部とが独立した構成を採用したり、折り畳み構造やスライド機構を有する構成を採用することもできる。
図27は、図26に示すスマートフォン300の構成を示すブロック図である。図27に示すように、スマートフォンの主たる構成要素として、無線通信部310と、表示入力部320と、通話部330と、操作部340と、カメラ部341と、記憶部350と、外部入出力部360と、GPS(global positioning system)受信部370と、モーションセンサ部380と、電源部390と、主制御部301とを備える。また、スマートフォン300の主たる機能として、基地局装置BSと移動通信網とを介した移動無線通信を行う無線通信機能を備える。
無線通信部310は、主制御部301の指示にしたがって、移動通信網に収容された基地局装置BSに対し無線通信を行うものである。係る無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信や、Webデータやストリーミングデータなどの受信を行う。
表示入力部320は、主制御部301の制御により、画像(静止画像及び動画像)や文字情報などを表示して視覚的にユーザに情報を伝達するとともに、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル321と、操作パネル322とを備える。
表示パネル321は、LCD(liquid crystal display)、OELD(organic electro-luminescence display)などを表示デバイスとして用いたものである。操作パネル322は、表示パネル321の表示面上に表示される画像を視認可能に載置され、ユーザの指やペン型入力装置によって操作される一又は複数の座標を検出するデバイスである。係るデバイスをユーザの指やペン型入力装置によって操作すると、操作に起因して発生する検出信号を主制御部301に出力する。次いで、主制御部301は、受信した検出信号に基づいて、表示パネル321上の操作位置(座標)を検出する。
図26に示すように、スマートフォン300の表示パネル321と操作パネル322とは一体となって表示入力部320を構成しているが、操作パネル322が表示パネル321を完全に覆うような配置となっている。係る配置を採用した場合、操作パネル322は、表示パネル321外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル322は、表示パネル321に重なる重畳部分についての検出領域(以下、表示領域と称する)と、それ以外の表示パネル321に重ならない外縁部分についての検出領域(以下、非表示領域と称する)とを備えていてもよい。
なお、表示領域の大きさと表示パネル321の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル322が、外縁部分と、それ以外の内側部分の2つの感応領域を備えていてもよい。更に、外縁部分の幅は、筐体302の大きさなどに応じて適宜設計されるものである。更にまた、操作パネル322で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式などが挙げられ、いずれの方式を採用することもできる。
通話部330は、スピーカ331やマイクロホン332を備え、マイクロホン332を通じて入力されたユーザの音声を主制御部301にて処理可能な音声データに変換して主制御部301に出力したり、無線通信部310あるいは外部入出力部360により受信された音声データを復号してスピーカ331から出力するものである。また、図26に示すように、例えば、スピーカ331を表示入力部320が設けられた面と同じ面に搭載し、マイクロホン332を筐体302の側面に搭載することができる。
操作部340は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図26に示すように、操作部340は、スマートフォン300の筐体302の側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。
記憶部350は、主制御部301の制御プログラムや制御データ、アプリケーションソフトウェア、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、WebブラウジングによりダウンロードしたWebデータや、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータなどを一時的に記憶するものである。また、記憶部350は、スマートフォン内蔵の内部記憶部351と着脱自在な外部メモリスロットを有する外部記憶部352により構成される。なお、記憶部350を構成するそれぞれの内部記憶部351と外部記憶部352は、フラッシュメモリタイプ(flash memory type)、ハードディスクタイプ(hard disk type)、マルチメディアカードマイクロタイプ(multimedia card micro type)、カードタイプのメモリ(例えば、MicroSD(登録商標)メモリ等)、RAM(random access memory)、ROM(read only memory)などの格納媒体を用いて実現される。
外部入出力部360は、スマートフォン300に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等(例えば、ユニバーサルシリアルバス(USB)など)又はネットワーク(例えば、インターネット、無線LAN(local area network)、ブルートゥース(bluetooth)(登録商標)、RFID(radio frequency identification)、赤外線通信(infrared data association:IrDA)(登録商標)、UWB(ultra wideband)(登録商標)、ジグビー(ZigBee)(登録商標)など)により直接的又は間接的に接続するためのものである。
スマートフォン300に連結される外部機器としては、例えば、有/無線ヘッドセット、有/無線外部充電器、有/無線データポート、カードソケットを介して接続されるメモリカード(memory card)やSIM(subscriber identity module card)/UIM(user identity module card)カード、オーディオビデオI/O(input/output)端子を介して接続される外部オーディオビデオ機器、無線接続される外部オーディオビデオ機器、有/無線接続されるスマートフォン、有/無線接続されるパーソナルコンピュータ、有/無線接続されるPDA(personal digital assistant)、イヤホンなどがある。外部入出力部は、このような外部機器から伝送を受けたデータをスマートフォン300の内部の各構成要素に伝達することや、スマートフォン300の内部のデータが外部機器に伝送されるようにする。
GPS受信部370は、主制御部301の指示にしたがって、GPS衛星ST1〜STnから送信されるGPS信号を受信し、受信した複数のGPS信号に基づく測位演算処理を実行し、スマートフォン300の緯度、経度、高度を含む位置を検出する。GPS受信部370は、無線通信部310や外部入出力部360(例えば、無線LAN)から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
モーションセンサ部380は、例えば、3軸の加速度センサなどを備え、主制御部301の指示にしたがって、スマートフォン300の物理的な動きを検出する。スマートフォン300の物理的な動きを検出することにより、スマートフォン300の動く方向や加速度が検出される。係る検出結果は、主制御部301に出力されるものである。
電源部390は、主制御部301の指示にしたがって、スマートフォン300の各部に、バッテリ(図示しない)に蓄えられる電力を供給するものである。
主制御部301は、マイクロプロセッサを備え、記憶部350が記憶する制御プログラムや制御データにしたがって動作し、スマートフォン300の各部を統括して制御するものである。また、主制御部301は、無線通信部310を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
アプリケーション処理機能は、記憶部350が記憶するアプリケーションソフトウェアにしたがって主制御部301が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部360を制御して対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、Webページを閲覧するWebブラウジング機能などがある。
また、主制御部301は、受信データやダウンロードしたストリーミングデータなどの画像データ(静止画像や動画像のデータ)に基づいて、映像を表示入力部320に表示する等の画像処理機能を備える。画像処理機能とは、主制御部301が、上記画像データを復号し、係る復号結果に画像処理を施して、画像を表示入力部320に表示する機能のことをいう。
更に、主制御部301は、表示パネル321に対する表示制御と、操作部340、操作パネル322を通じたユーザ操作を検出する操作検出制御を実行する。
表示制御の実行により、主制御部301は、アプリケーションソフトウェアを起動するためのアイコンや、スクロールバーなどのソフトウェアキーを表示したり、あるいは電子メールを作成するためのウィンドウを表示する。なお、スクロールバーとは、表示パネル321の表示領域に収まりきれない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
また、操作検出制御の実行により、主制御部301は、操作部340を通じたユーザ操作を検出したり、操作パネル322を通じて、上記アイコンに対する操作や、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付ける。
更に、操作検出制御の実行により主制御部301は、操作パネル322に対する操作位置が、表示パネル321に重なる重畳部分(表示領域)か、それ以外の表示パネル321に重ならない外縁部分(非表示領域)かを判定し、操作パネル322の感応領域や、ソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
また、主制御部301は、操作パネル322に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも1つについて軌跡を描く操作を意味する。
カメラ部341は、CMOS(complementary metal oxide semiconductor)撮像センサやCCD(charge coupled device)撮像センサなどの撮像素子を用いて電子撮影するデジタルカメラである。また、カメラ部341は、主制御部301の制御により、撮像によって得た画像データを例えばJPEG(joint photographic coding experts group)などの圧縮した画像データに変換し、記憶部350に記録したり、外部入出力部360や無線通信部310を通じて出力することができる。図26に示すスマートフォン300において、カメラ部341は表示入力部320と同じ面に搭載されているが、カメラ部341の搭載位置はこれに限らず、表示入力部320の背面に搭載されてもよいし、あるいは、複数のカメラ部341が搭載されてもよい。なお、複数のカメラ部341が搭載されている場合には、撮影に供するカメラ部341を切り替えて単独にて撮影したり、あるいは、複数のカメラ部341を同時に使用して撮影することもできる。
また、カメラ部341はスマートフォン300の各種機能に利用することができる。例えば、表示パネル321にカメラ部341で取得した画像を表示することや、操作パネル322の操作入力のひとつとして、カメラ部341の画像を利用することができる。また、GPS受信部370が位置を検出する際に、カメラ部341からの画像を参照して位置を検出することもできる。更には、カメラ部341からの画像を参照して、3軸の加速度センサを用いずに、或いは、3軸の加速度センサと併用して、スマートフォン300のカメラ部341の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部341からの画像をアプリケーションソフトウェア内で利用することもできる。なお、カメラ部341は、対象物を撮影するカメラ11としても使用することができる。
なお、上述した計測支援装置13の機能は主に主制御部301で実現される。
以上で本発明の例に関して説明してきたが、本発明は上述した実施の形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。
1 橋梁
2 床版
3 主桁
3A 接合部
10 計測支援システム
11 カメラ
13 計測支援装置
19 撮像素子
31、33、35、103 線画
100 スケール画像
101 スケール
121 画像取得部
123 対象物検出部
125 表示部
127 スケール画像生成部
129 重畳表示制御部
131 操作部
133 記憶部
135 スケール操作部
141 推測部
143 形状認識部
145 拡大表示制御部
300 スマートフォン
301 主制御部
302 筐体
310 無線通信部
320 表示入力部
321 表示パネル
322 操作パネル
330 通話部
331 スピーカ
332 マイクロホン
340 操作部
341 カメラ部
350 記憶部
351 内部記憶部
352 外部記憶部
360 外部入出力部
370 GPS受信部
370 受信部
380 モーションセンサ部
390 電源部

Claims (9)

  1. 線状の対象物を含む撮影画像を取得する画像取得部と、
    取得された前記撮影画像を表示する表示部と、
    前記対象物の幅を計測するための複数の線画が配列され、かつ各前記線画の幅を示す数値が付された互いに対向する一対のスケールの全部又は一部を含み、前記互いに対向する一対のスケールの間に前記撮影画像の前記対象物の表示領域を有するスケール画像を生成するスケール画像生成部と、
    前記撮影画像が表示された前記表示部に、前記生成されたスケール画像を重畳して表示させる重畳表示制御部であって、前記撮影画像内の前記対象物に前記線画を沿わせて表示させる前記重畳表示制御部と、
    前記複数の線画の移動を指示する第1の操作部と、を備え、
    前記スケール画像生成部は、前記第1の操作部からの指示に基づいて、前記互いに対向する一対のスケールが同期して、前記複数の線画が配列された方向に移動する前記スケール画像を生成する計測支援装置。
  2. 前記スケール画像生成部は、前記線画が直線形状又は曲線形状である前記スケール画像を生成する請求項1に記載の計測支援装置。
  3. 前記画像取得部で取得された前記撮影画像における前記対象物の形状を認識する形状認識部をさらに備え、
    前記スケール画像生成部は、前記線画が前記形状認識部で認識された前記対象物の形状である前記スケール画像を生成する請求項1又は2に記載の計測支援装置。
  4. 前記スケール画像生成部は、前記線画の配列の一端に達した場合には前記線画の配列の他端より同方向に移動が開始される前記スケール画像を生成する請求項1からのいずれか1項に記載の計測支援装置。
  5. 前記重畳表示制御部により、前記撮影画像内の前記対象物に前記線画を沿わせた箇所を拡大表示させる拡大表示制御部をさらに備える請求項1からのいずれか1項に記載の計測支援装置。
  6. 前記取得された前記撮影画像に基づいて、前記対象物の前記撮影画像内の位置及び方向を検出する対象物検出部をさらに備え、
    前記重畳表示制御部は、前記検出された前記対象物の位置及び方向に基づいて、前記対象物に前記線画を重ねて又は平行にさせて前記スケール画像を表示させる請求項1からのいずれか1項に記載の計測支援装置。
  7. 前記撮影画像における前記対象物の幅を画像処理によって推測する推測部をさらに備え、
    前記スケール画像生成部は、前記推測部で推測された前記対象物の前記幅に最も近い前記線画を少なくとも有する前記スケール画像を生成する請求項1からのいずれか1項に記載の計測支援装置。
  8. 前記スケール画像の平行移動及び回転移動を指示する第2の操作部をさらに備え、
    前記重畳表示制御部は、前記第2の操作部からの指示に基づいて前記スケール画像を平行移動及び回転移動させる請求項1からのいずれか1項に記載の計測支援装置。
  9. 線状の対象物を含む撮影画像を取得する画像取得ステップと、
    取得された前記撮影画像を表示する表示ステップと、
    前記対象物の幅を計測するための複数の線画が配列され、かつ各前記線画の幅を示す数値が付された互いに対向する一対のスケールの全部又は一部を含み、前記互いに対向する一対のスケールの間に前記撮影画像の前記対象物の表示領域を有するスケール画像を生成するスケール画像生成ステップと、
    前記表示ステップで表示された前記撮影画像に、前記生成されたスケール画像を重畳して表示させる重畳表示制御ステップであって、前記撮影画像内の前記対象物に前記線画を沿わせて表示させる前記重畳表示制御ステップと、
    前記複数の線画の移動を指示する第1の操作ステップと、を含み、
    前記スケール画像生成ステップでは、前記第1の操作ステップでの指示に基づいて、前記互いに対向する一対のスケールが同期して、前記複数の線画が配列された方向に移動する前記スケール画像を生成する計測支援方法。
JP2016127710A 2016-06-28 2016-06-28 計測支援装置及び計測支援方法 Active JP6612689B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016127710A JP6612689B2 (ja) 2016-06-28 2016-06-28 計測支援装置及び計測支援方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016127710A JP6612689B2 (ja) 2016-06-28 2016-06-28 計測支援装置及び計測支援方法

Publications (2)

Publication Number Publication Date
JP2018004308A JP2018004308A (ja) 2018-01-11
JP6612689B2 true JP6612689B2 (ja) 2019-11-27

Family

ID=60949067

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016127710A Active JP6612689B2 (ja) 2016-06-28 2016-06-28 計測支援装置及び計測支援方法

Country Status (1)

Country Link
JP (1) JP6612689B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7151652B2 (ja) * 2019-07-18 2022-10-12 株式会社デンソー ひび割れ幅計測装置
WO2024029026A1 (ja) * 2022-08-04 2024-02-08 株式会社センシンロボティクス 情報処理システム及びプログラム、情報処理方法、サーバ

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4944880A (en) * 1989-10-16 1990-07-31 Exxon Research And Engineering Company Polyimide/aliphatic polyester copolymers
JP4954006B2 (ja) * 2007-09-28 2012-06-13 三洋電機株式会社 クラック幅計測システム、操作装置、クラック幅計測方法、及びクラック幅計測プログラム
JP5531148B1 (ja) * 2013-08-09 2014-06-25 ジビル調査設計株式会社 構造物の点検装置
JP6214508B2 (ja) * 2014-10-10 2017-10-18 矢崎総業株式会社 車両用表示装置

Also Published As

Publication number Publication date
JP2018004308A (ja) 2018-01-11

Similar Documents

Publication Publication Date Title
JP6612685B2 (ja) 計測支援装置及び計測支援方法
EP3188467B1 (en) Method for image capturing using unmanned image capturing device and electronic device supporting the same
EP2698980B1 (en) Camera device and methods for aiding users in use thereof
US20180220071A1 (en) Image processing device, imaging device, image processing method, and program
US9721346B2 (en) Image assessment device, method, and computer readable medium for 3-dimensional measuring and capturing of image pair range
JP2017146749A (ja) 制御プログラム、制御方法およびコンピュータ
US11039072B2 (en) Display control apparatus, display control method, and computer program
JP2002092012A (ja) 特定地域内情報表示システム
US20120229487A1 (en) Method and Apparatus for Reflection Compensation
US20180197006A1 (en) Imaging support system, device and method, and imaging terminal
KR102186597B1 (ko) 타겟 크기 측정 시스템 및 그 방법
US11368612B1 (en) Venue operated camera system for automated capture of images
CN110457571B (zh) 获取兴趣点信息的方法、装置、设备及存储介质
EP3712782A1 (en) Diagnosis processing apparatus, diagnosis system, and diagnosis processing method
CN113205515B (zh) 目标检测方法、装置、及计算机存储介质
CN112184787A (zh) 图像配准方法及装置、电子设备和存储介质
JP6612689B2 (ja) 計測支援装置及び計測支援方法
CN110503159B (zh) 文字识别方法、装置、设备及介质
JP5152281B2 (ja) 画像処理装置、方法及びプログラム
CN114125411B (zh) 投影设备校正方法、装置、存储介质以及投影设备
JP2012080236A (ja) 電子機器、情報付き撮像画面表示方法及びプログラム
JP6387455B2 (ja) カメラ装置、画像処理装置及び画像処理方法
CN112529781B (zh) 图像处理方法、装置以及可读存储介质
JP2012089921A (ja) 撮影支援システム、方法及びプログラム、並びに携帯端末
CN112804481B (zh) 监控点位置的确定方法、装置及计算机存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190516

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190515

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190708

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191031

R150 Certificate of patent or registration of utility model

Ref document number: 6612689

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250