JP3808182B2 - Vehicle repair cost estimation system and recording medium storing repair cost estimation program - Google Patents

Vehicle repair cost estimation system and recording medium storing repair cost estimation program Download PDF

Info

Publication number
JP3808182B2
JP3808182B2 JP23313097A JP23313097A JP3808182B2 JP 3808182 B2 JP3808182 B2 JP 3808182B2 JP 23313097 A JP23313097 A JP 23313097A JP 23313097 A JP23313097 A JP 23313097A JP 3808182 B2 JP3808182 B2 JP 3808182B2
Authority
JP
Japan
Prior art keywords
vehicle
data
repair
line
sight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP23313097A
Other languages
Japanese (ja)
Other versions
JPH1173456A (en
Inventor
道元 酒井
次郎 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsubasa System Co Ltd
Original Assignee
Tsubasa System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsubasa System Co Ltd filed Critical Tsubasa System Co Ltd
Priority to JP23313097A priority Critical patent/JP3808182B2/en
Publication of JPH1173456A publication Critical patent/JPH1173456A/en
Application granted granted Critical
Publication of JP3808182B2 publication Critical patent/JP3808182B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、視線入力デジタルスチルカメラ装置により修理車両を撮影した修理車両データに基づき、修理車両の修理費見積もりを行う車両修理費見積もりシステム及び修理費見積もりプログラムを格納した記録媒体に関する。
【0002】
【従来の技術】
近年、事故車の見積もりにおいて、CD−ROM等の記憶媒体から供給される修理作業指数データベース、部品データベース等を活用したコンピュータ処理による修理費見積もりシステムが利用されている。
【0003】
たとえば、対向車との衝突により左フロント部を損傷した事故車の修理費を見積もる場合、まず、目視により事故車の損傷部分、損傷の程度を判断する。
そして、事故車の左側フロントフェンダ、フロントバンパ、ラジエータグリル、ヘッドランプ等の損傷部分を見つけると、見積者は、修理費見積もりシステムに対して各損傷部分を個別に手入力し、その修理内容・修理作業(取替、脱着、板金、点検)を手入力で指示する。
【0004】
すると、修理費見積もりシステムは、指示された入力に対応した修理作業指数をデータベースから取得し、あらかじめシステムに入力されているレバーレート(作業時間単価)より修理技術料金を算出し、修理箇所に対応した部品データベースから所要部品及び部品代金を取得し、修理費用の見積もりを行う。
【0005】
なお、過去の事故車整備の作業情報を事故車修理費見積もりシステム内に持たせ、新規見積もりの参考資料としてシステムの表示画面に表示させるシステムや、表示画面に車のイラストイメージを表示し、見積者がイラストイメージ上で事故車の損傷部を指定するようにしたシステムも提案されている。
【0006】
【発明が解決しようとする課題】
上述した従来のシステムでは、修理に要する部品価格が瞬時にして得られるので、従前の手作業による見積もり作業に比べ、大幅に見積もり作業時間が短縮されてきているが、修理を要する箇所、損傷内容の判断、修理作業内容の判断は、見積者自身が一から行わざるを得ない。このため、経験と勘に頼った見積もりが行われており、定量的な数値に基づく見積もりではないため、見積者の業務経験やレベルの差または見積もりの際の注意度によって、見積もり費用に差ができてしまい、見積もりの信頼度を低下させていた。
【0007】
すなわち、上述のように車の左フロント部が対向車との衝突により損傷した場合でも、車の構造は車両毎に異なり、事故の際の力の大きさ、力の入力点も事故車毎に異なるので、事故車毎に損傷箇所、損傷程度は全く異なるといってよく、目視による判断に頼った見積もりでは、変形量等が定量的に把握されることも希で、たとえば、ボンネットはどの程度の変形・損傷で交換が必然となるのか、ドアパネル立付位置のズレがどの程度であるとどのような損傷が考えられ、どのような修理が必要となるのか、どの程度凹んだ場合に修復が不能となるのか、等の判断を行うことなく、経験と勘により修理箇所と修理作業内容を選択していた。
【0008】
もっとも、事故車の修理費用を見積もる場合、事故に応じて千差万別な損傷を外側から目視により確認判断しても目視により確認不能な車両骨格部及び車両内部の損傷箇所は、実際に外装パネル、車輪等を取り外した分解状態とした上で、左サイドメンバの曲がりの有無、テンション ロッド ブラケットの変形・亀裂の有無等、隣接箇所個々の部品毎に確認点検しなければ正確に把握することはできず、事故のケースによって外見的に損傷がないと思われる反対側(右側)の部位、部品等の確認も要する等、事前見積もりを行うには、経験と勘に頼らざるを得なかったという実状もある。
【0009】
したがって、見積もり段階では、相当にラフな修理作業項目を列挙しておき、実際に事故車を修理した後に、実際に行った作業を修理費見積もりシステムに入力するケースも少なくなかった。
【0010】
そこで、本発明の目的はこのような点をふまえ、経験と勘により手入力していた損傷箇所及び修理作業内容の判断を、視線入力デジタルスチルカメラ装置を用いて撮影した修理車両データに基づき定量的データを把握して行うことにより、簡便かつ定量的に修理費見積もりが行え、見積もり内容の根拠を撮影画像とともに記録し、修理費見積もり作業の高度レベル均一化及び適正かつ透明化した板金業の事前見積もりを可能とする車両修理費見積もりシステム及び車両修理費見積もりプログラムを格納した記録媒体を提供することにある。
【0011】
また、本発明の他の目的は、視線入力入力デジタルスチルカメラ装置を用いて撮影した修理車両データに基づき、塗装料金の算出を自動的かつ正確に行うことのできる車両修理費見積もりシステム及び車両修理費見積もりプログラムを格納した記録媒体を提供することにある。
【0012】
【課題を解決するための手段】
本発明は、前述した課題を解決するために、以下の手段を採用した。
すなわち、本発明に係る車両修理費見積もりシステムは、プログラムされた計算装置により修理車両の修理費見積もりを行う車両修理費見積もりシステムである。
【0013】
そして、画像の二次平面上における視線位置を検出するイメージセンサを有し、このイメージセンサにより検出された視線位置データに基づいて修理車両を撮影する撮影者の視線位置を当該修理車両の損傷部検出データとして記憶するとともに、撮影画像データを記憶する画像記憶部を有し、この画像記憶部に記憶された損傷部検出データ及び撮影画像データを修理車両データとして出力する視線入力デジタルスチルカメラ装置と、あらかじめ格納した車両属性データから前記修理車両に対応する車両属性データを検索するとともに、前記視線入力デジタルスチルカメラ装置の出力に基づき入力された前記修理車両データを用いて修理車両の損傷位置、損傷範囲及び変形量またはこれらのうち少なくとも1つを特定し、当該修理車両の修理費を計算する計算装置とを備え、前記車両属性データ及び前記修理車両データに基づいて修理費見積もりを行うものである。
【0014】
次に、この車両修理費見積もりシステムは、画像の二次平面上における視線位置を検出するイメージセンサを有し、このイメージセンサにより検出された視線位置データに基づいて修理車両を撮影する撮影者の視線位置を当該修理車両の損傷部検出データとして記憶するとともに、撮影画像データを記憶する画像記憶部を有し、この画像記憶部に記憶された損傷部検出データ及び撮影画像データを修理車両データとして出力する視線入力デジタルスチルカメラ装置と、あらかじめ格納した車両属性データから前記修理車両に対応する車両属性データを検索するとともに、前記視線入力デジタルスチルカメラ装置の出力に基づき入力された前記修理車両データを用いて修理車両の損傷位置、損傷範囲及び損傷度またはこれらのうち少なくとも1つを特定し、当該修理車両の修理費を計算する計算装置とを備えている。
【0015】
そして、前記計算装置は、前記修理費計算に必要な前記修理車両データを入力し、前記修理車両に対応する非損傷車両画像データを車両属性データとしてあらかじめ格納するとともに、この非損傷車両画像データと前記修理車両データとを比較演算して修理車両の損傷位置、損傷範囲及び損傷度またはこれらのうち少なくとも1つを特定し、前記車両属性データ及び前記修理車両データに基づいて修理費見積もりを行うものである。
【0016】
さらに、前記修理車両データは、複数の視線位置に基づく損傷部検出データからなり、各視線位置データをつなぐ線分を損傷部検出データとし、及び/または各視線位置データをつなぐ線分を輪郭とする閉じられた区画範囲を損傷部検出データとすることもできる。
【0017】
本発明によれば、視線入力デジタルスチルカメラ装置から取り込んだ修理車両の画像データを計算装置へと入力し、計算装置は、あらかじめ格納した車両属性データから修理車両の画像データに対応する車両属性データを検索する。
【0018】
そして、入力された修理車両の画像データに基づいて修理車両の損傷位置、損傷範囲及び変形量を決定するとともに、車両属性データを基準として修理車両の画像データを用いて修理費見積もりを行うものである。
【0019】
さらに、修理車両データと非損傷車両画像データとを比較演算して、修理車両の損傷位置、損傷範囲及び損傷度を決定し、車両属性データ基準として修理車両の画像データを用いて修理費見積もりを行うものである。
【0020】
次に、本発明を構成する視線入力デジタルカメラ装置は、レンズ系を通じて入射した光をCCD等の撮像板に結像させ電気信号に変換した後、この情報をメモリーに記憶させておき、自在に出力させることができるようにしたものである。
【0021】
また、撮影者の視線を感知して、視線位置を合焦点として撮影し、当該視線位置を併せて記憶させることができるようになっている。
その原理は、人の眼球に微弱な光線を照射し、その反射光をイメージセンサに向けることで眼球の角度すなわち視線方向を算出するものであり、合焦点は、一般には十字形に各合焦点を配置しているが、横列を増加させ3列計15ポイント、5列計25ポイントの合焦点が設けられていることが好ましい。
【0022】
したがって、この視線入力デジタルカメラ装置は、修理車両の画像データとともに、視線位置データに基づいて修理車両を撮影する撮影者の視線位置を当該修理車両の損傷部検出データとし、修理車両データとして出力する。
【0023】
なお、視線位置データに加える情報データとして、当該視線位置の外板パネル位置データを同時に記憶できるように構成されていることが好ましい。たとえば、視線入力デジタルカメラ装置に外板パネル位置、外板パネル名等の修理用車両諸元データをROM化して内蔵させ、シャッタースピード、露出等を変化させる場合と同様のボタン操作ないしダイヤル操作で外板パネル位置、パネル名等を記憶させるように構成することができる。
【0024】
このようにすれば、画像中の任意の位置(各視線入力位置あるいは視線入力位置以外の各合焦点位置であることが好ましい)に、左フロントパネル、フロントバンパー等各損傷位置の名称を表示すると同時に位置認識をさせたり、これら損傷位置の変形量を損傷形態に合わせて作業指数の難易度判別に対応させた「著しい折れ、つぶれ、延びが認められない」「プレスラインにまたがる」等のランク付け、判別付けをして記憶させることも可能となる。
【0025】
また、さらに加える方策として、あらかじめ外板パネル位置を記憶させた透過型車両イメージスクリーンを使用し、視線位置と当該透過型車両イメージスクリーンの照合により視線位置を外板パネル位置に反映させ、修理車両の損傷位置が左側フロントパネル、フロントバンパである場合、画像中の任意の視線位置が左側フロントパネル、フロントバンパのどの位置であるか認識させるように構成することもできる。
【0026】
なお、視線入力デジタルスチルカメラ装置に所有者、車両ナンバー等の車検証記載データの記憶をさせることも可能であり、前記修理車両データと関係づけて記憶させることもできる。
【0027】
また、この視線入力デジタルスチルカメラ装置からの修理車両データの出力並びに計算装置への入力は、通信機能によっても、メモリカード等の記録媒体によっても可能であり、適宜の入出力インタフェースを用いることができる。逆に、同様の方法で視線入力デジタルスチルカメラ装置に計算装置、携帯電子端末装置等から所定のデータを入力することもできる。
【0028】
視線入力デジタルスチルカメラ装置に通信機能を持たせれば、携帯電話やPHS等の通信媒体を用いて記憶内容を通信転送することも可能となり、また、逆に計算装置、携帯電子端末装置から所定のデータを通信転送することも可能となる。
【0029】
次に、修理費を計算する計算装置は、車両属性データをあらかじめ格納した記録媒体から、これらデータを読み込むための補助記憶装置を接続または内蔵している。そして、この記録媒体は、CD-ROM、MO、フロッピーディスク等を使用している。
【0030】
なお、あらかじめ格納した車両属性データには、日本国内で現在走行するほぼ全乗用車両の類別データ、型式データ、車両重量等の車両諸元データ、登録陸運事務所等の自動車登録関係データをはじめ、車両の部品価格及びこの部品の交換あるいは修正に要する工賃を算出するための基礎となる脱着・取替作業指数及び、脱着・取替作業データ、外板修正作業指数及び外板修正作業データ、内板骨格修正作業指数及び内板骨格修正作業データ、塗装指数及び塗装作業データ等の各作業指数データ群を格納するとともに、車両の破損部位と損傷度に伴って交換、脱着、修正、調整等が必要となる部品との対応データ、その他修理見積もりに必要な各種データを格納してある。
【0031】
また、これら格納されたデータには、前記視線入力デジタルスチルカメラ装置で記憶された修理車両データが含まれる。
さらに、過去の修理車両データと、このデータから把握される過去の修理車両の損傷データと、前記過去の修理車両に使用した部品データと、前記過去の損傷位置等を検索する車両イメージデータをともに格納することができる。
【0032】
次に、表示装置は、CRTや液晶パネル等、画像を表示するものであり、表面にタッチセンサが設けられているものでも良い。また、入力装置としては、キーボード、マウス等のポインティングデバイス、ライトペン等を用いることができる。
【0033】
次に、計算装置は、車両属性データを基準として入力された修理車両データを用いて修理費見積もり処理を行うものであり、中央処理装置(以下、CPUという)、ハードディスク及びRAM並びにROM等から構成する主記憶装置(以下、メモリという)とから形成する。
【0034】
そして、計算装置は、表示装置に表示された修理車両データを解析して、これを修理見積もりの基礎データとして用いる。この解析作業は、キーボードやマウスを利用したマニュアル処理あるいは自動処理のいずれの方法でも良く、修理車両データを記憶するメモリの各データファイルに、対応する修理車両データを特定する番号等を記憶させるとともに、各部位毎に作成されたデータファイルに、対応する修理車両データを格納することもできる。
【0035】
また、表示装置に表示された修理車両データとメモリにあらかじめ格納している非損傷車両画像データとを比較演算して、視線入力デジタルスチルカメラ装置から入力された修理車両データの詳細な解析が可能なように構成しても良い。そして、この計算装置は、外部へデータを送受信するための通信機能を有していても良い。
【0036】
このように構成された車両修理費見積もりシステムで、実際に修理車の見積もり作業を行う場合、最初に、視線入力デジタルスチルカメラ装置で撮影した損傷部検出データを含む修理車両データ(画像データを含む)を入出力インタフェースを通じて計算装置へと入力する。
【0037】
一方、メモリからは車両の全体図及び部分図の定型的な車両図形が表示装置に表示される。ここで、表示されている修理車両データが全体図または部分図におけるどの部分に該当するものであるかを、視線入力デジタルスチルカメラ装置にて記憶された各データ等から自動的に判別するようにしても良い。これにより、それぞれの画像データがどこの損傷を示しているかが明確になる。
【0038】
同様に、全ての修理車両データ(画像データを含む)を解析して、視線入力位置、その他の情報データから当該修理対象車両の損傷に関する基礎データを算出する。
【0039】
そして、計算装置により修理費の計算を行う場合に、視線入力位置、その他の情報データから算出した当該修理対象車両の損傷に関する基礎データに基づき、修理費見積もりを行う。このとき、モデルケースの修理内容と修理車両の損傷基礎データとの照合を行うように構成しても良い。
【0040】
なお、表示されたデータは、必要に応じてプリントアウトされる。また、表示データはサーバや外部メモリに格納することも可能である。
次に、本発明に係る車両修理費見積もりシステムは、修理車両の修理見積もりを行うために、以下のプログラムを格納した記録媒体を用いている。
【0041】
すなわち、あらかじめ格納した車両属性データから前記修理車両に対応する車両属性データを検索する手段と、画像の二次平面上における視線位置を検出するイメージセンサを有し、このイメージセンサにより検出された視線位置データに基づいて修理車両を撮影する撮影者の視線位置を当該修理車両の損傷部データとして記憶するとともに、撮影画像を記憶する画像記憶部を有し、この画像記憶部に記憶された撮影画像を修理車両データとして入力可能な入力手段と、前記修理車両に関する修理車両データ及び前記修理車両に対応する車両属性データまたはこれらのうち少なくとも1つを表示する表示手段と、入力された前記修理車両データを用いて修理車両の損傷位置、損傷範囲及び損傷度またはこれらのうち少なくとも1つを特定し、前記車両属性データ及び入力された前記修理車両データに基づいて当該修理車両の修理費見積もりを行う手段とを実行させるプログラムを記録した読み取り可能な記録媒体である。
【0042】
【発明の実施の形態】
以下、本実施の形態に係る車両修理費見積もりシステムを図1〜図11に基づいて具体的に説明する。
【0043】
本実施の形態に係る車両修理費計算システムは、図1に示すようにパーソナルコンピュータ1(以下、PCという。)と、視線入力デジタルスチルカメラ装置5を用いて、修理車の損傷位置及び損傷度を決定して修理車両の修理費見積もりを行うものである。
【0044】
そして、この車両修理費計算システムは、入出力インタフェース2を通じて接続された補助記憶装置3(CD−ROM、MO、FD等)及び入力装置4(キーボード、OCR、OMR、バーコードリーダ、ディジタイザ、イメージスキャナ等)並びに視線入力デジタルスチルカメラ5と、主記憶装置1b(ハードディスク、ROM、RAM〔以下メモリという〕)及び中央処理装置1a(以下CPUという)から構成するPC1本体と、入出力インタフェース2を通じて接続された表示装置6及び印字装置7、通信装置8等から構成する出力装置で形成する。さらに、この通信装置8は、通信回線を通じて図示しない端末装置に接続されている。
【0045】
次に、PC1には、メモリ1bとしてハードディスク、RAM及びROMが内蔵され、必要なOSをあらかじめ記憶している。
すなわち、OSによる制御の下にメモリ1bまたは補助記憶装置3にキャッシュされているプログラムを起動し、所定のタスク(プロセス)を実行する。
【0046】
そして、PC1本体を構成するCPU1aは、与えられたデータに対して四則演算、論理演算等を行う演算装置1a2と、実行される命令部1b1のアドレスをもとにメモリ1bからCPUに命令を取り込み、命令の内容を解読し必要な動作指示を他の装置に対して出す制御装置1a1とを有する。
【0047】
この制御装置1a1は、図1に示すように入力装置等に対して入力制御指令を出し、メモリ1bに対しては、メモリ制御指令を出し、表示装置等に対しては、出力制御指令を出す。
【0048】
そして、入力装置4等より入力されたコマンドは、最初にメモリ1bへと転送されてメモリ1bでは、与えられたコマンドからデータ及び命令を選択するとともに、選択されたデータ及び命令をそれぞれデータ部1b2及び命令部1b1に格納し、CPU1aの制御装置1a1へと転送する。
【0049】
次に、メモリまたはCD−ROMには、あらかじめ車両図形データが記憶されていて、この車両図形データは、セダン車やハードトップ車等の代表的な図形が記憶されており、見積作成者が修理車両に該当する車両図形を選択する。
【0050】
そして、選択された車両図形は、たとえば、立体的なグラフィックスとして車両図形6aの全体図を表すようになっていて、PC1に入出力インタフェース2を通じて接続された表示装置6に表示される。
【0051】
なお、この表示装置6に表示される車両図形6aは、実車の画像等であってもよい。また、車両図形6aデータは、さらに、詳細に各車種毎(A車、B車、C車・・毎)の車両図形6aを記憶させておき、各車種に合った図形が表示装置8に表示されるようにしても良い。
【0052】
ところで、CD−ROMドライブの内部に装着したCD−ROMには、日本国内で現在走行するほぼ全乗用車両の類別データ、型式データ、車両重量等の車両諸元データ、登録陸運事務所等の自動車登録関係データをはじめ、車両の部品価格及びこの部品の交換あるいは修正に要する工賃を算出するための基礎となる脱着・取替作業指数及び脱着・取替作業データ、外板修正作業指数及び外板修正作業データ、内板骨格修正作業指数及び内板骨格修正作業データ、塗装指数及び塗装作業データ等の各作業指数データ群を格納するとともに、車両の破損部位と損傷度に伴って交換、脱着、修正、調整等が必要となる部品との対応データ、その他修理見積もりに必要な各種データを格納してある。
【0053】
これらのデータ群は、CD−ROMから入出力インタフェースを通じてPC1のデータ部1b2に格納される。
次に、修理車両を撮影するためのの視線入力デジタルスチルカメラ装置5は、図2に示すようにレンズ系42から入射した光をCCD43上に結像させるように構成し、このCCD43は、MPU(micro prossing unit)44で圧縮処理された上で映像記録を兼ねる画像記憶部40に記憶される。そして、記憶された画像は、インターフェイス45を通じてPC1に転送する。
【0054】
一方、の視線入力デジタルスチルカメラ装置5には、光学ファインダ46が設けられていて、この光学ファインダ46内には2枚のハーフミラー47、49が配置されている。
【0055】
そして、このハーフミラー47は、撮影者の視線を反射させてイメージセンサ41に結像させるものであり、ハーフミラー48は発光ダイオード49の光線を撮影者の眼球に照射するものである。
【0056】
このイメージセンサ41の出力は、MPU44により処理され、イメージセンサ41は、図3に示すようにL1、L2等のピクセルからなる面を網羅しており、視線位置に対応できるようになっている。
【0057】
次に、発光ダイオード49から出た光は、ハーフミラー48で屈折して眼球に達する。そして、眼球で反射した光は、ハーフミラー47で反射してイメージセンサ41に入射する。ここで、その反射光は眼球の角度、つまり視線によって変化するため、MPU44はこの情報から撮影者がどこに視線を置いているかを算出する。
【0058】
ここで、図4に示すように車両の左フロントドアに線状の傷6bがある場合、最初に傷の始点M1に視線位置を合わせの視線入力デジタルスチルカメラ装置5のシャッターを切るとその視線を置いた部分が指定され、これが画像記憶部に記憶される。
【0059】
次に、傷の終点M2に視線位置を合わせの視線入力デジタルスチルカメラ装置5のシャッターを切るとその視線を置いた部分が指定される。
このようにして指定された視線位置(以下、合焦点という)M1、M2は、一旦画像記憶部に記憶され、記憶された画像は、インターフェイス45を通じてPC1へと転送される。ここで、の視線入力デジタルスチルカメラ装置5は、撮影した合焦点M1からの視線入力デジタルスチルカメラ装置5までの距離を検出するとともに、合焦点M2からの視線入力デジタルスチルカメラ装置5までの距離を検出する。
【0060】
そして、PC1は、入力されたこれら合焦点M1及び合焦点M2からの視線入力デジタルスチルカメラ装置5までの距離に基づいて、合焦点M1から合焦点M2までの距離(ここでは直線距離)を算出する。すなわち、合焦点M1及び合焦点M2からの視線入力デジタルスチルカメラ装置5までの距離を基礎に三角測量を行うことにより直線距離を算出する。なお、三角測量の原理は、それぞれの点を結んだ視準線が、1つの三角形あるいはいくつかの連続する三角形を形成するようないくつかの点の選定から始め、連続する三角形においては、各三角形はそれぞれ隣り合う三角形と少なくとも1つの辺を共通する。そして、最初の辺、すなわち、基線がすべての角度と同様に測定され、正弦法則を順次用いることによって、残りのすべての辺長を計算する。また辺の方向も順次計算されるのですべての点の相対的位置を決定するものである。
【0061】
次に、視線入力デジタルスチルカメラ装置5には、この視線入力デジタルスチルカメラ装置5に外板パネル位置、外板パネル名等の修理用車両諸元データをROM化して内蔵させ、シャッタースピード、露出等を変化させる場合と同様のボタン操作ないしダイヤル操作で外板パネル位置、パネル名等を記憶させるように構成することもできる。
【0062】
このようにすれば、画像中の任意の位置(各視線入力位置あるいは視線入力位置以外の各合焦点位置であることが好ましい)に、左フロントパネル、フロントバンパー等各損傷位置の名称を表示すると同時に位置認識をさせたり、これら損傷位置の変形量を損傷形態に合わせて作業指数の難易度判別に対応させた「著しい折れ、つぶれ、延びが認められない」「プレスラインにまたがる」等のランク付け、判別付けをして記憶させることも可能となる。
【0063】
このように損傷した部分や損傷の形状を指定してPC1へと入力することにより、PC1では、損傷部分である左フロントドアを含む画像データを表示装置6に表示させる。
【0064】
そして、PC1は、指定された合焦点M1、合焦点M2に基づいて損傷の位置とともにほぼ直線状の傷を特定する。すなわち、修理車両の画像データは、多数のピクセル上に描かれており、視線位置(合焦点M1、合焦点M2)に対応するピクセルのアドレスを検索し、ピクセルのアドレスに基づいて損傷位置を特定するとともに、これら視線位置を結ぶことで傷の形状及び長さを解析する。
【0065】
次に、多少の凹み程度の損傷を特定する場合は、図5に示すように視線をM3、M4、M5の位置にそれぞれ移動させてシャッターを切ることにより、前述した三角測量を用いてそれぞれ合焦点M3、M4、M5に囲まれた区画を解析するとともに、合焦点M3、M4、M5が結ぶ線分の長さを割り出す。そして、線分の長さを割り出すとこれらの長さに基づいて当該三角形状の面積、すなわち、損傷範囲を算出することもできる。
【0066】
また、合焦点M3、M4、M5からの視線入力デジタルスチルカメラ装置5までの距離に基づいて損傷の程度を割り出すこともできる。ここで、このほぼ三角形状の傷の程度、すなわち、変形量を割り出す場合は、たとえば、三角形状の傷のほぼ中心部にかけて凹みが生じ、この中心部が凹みの最大深さである場合、中心部に視線をあわせてシャッターを切る。すると、これまでに撮影した傷の外縁である合焦点M3〜M5からの視線入力デジタルスチルカメラ装置5までの距離と、合焦点M6からの視線入力デジタルスチルカメラ装置5までの距離は、凹み分だけ合焦点M6からの視線入力デジタルスチルカメラ装置5までの距離が長くなる。
【0067】
したがって、合焦点M3〜M5からの視線入力デジタルスチルカメラ装置5までの距離と、合焦点M6からの視線入力デジタルスチルカメラ装置5までの距離を比較することで凹みの深さ、すなわち、変形量を解析することができる。
【0068】
さらに、ここでもの視線入力デジタルスチルカメラ装置5に、外板パネル位置、外板パネル名等の修理用車両諸元データをROM化して内蔵させ、シャッタースピード、露出等を変化させる場合と同様のボタン操作ないしダイヤル操作で外板パネル位置、パネル名等を記憶させるように構成することもできる。
【0069】
そして、これらデータを入出力インタフェース2を通じてPC1へと入力し、PC1では、損傷部分である左フロントドアを含む画像データを表示装置6に表示させる。
【0070】
そして、PC1は、指定された合焦点M3〜M5に基づいて損傷の位置とともにほぼ三角形状の傷を特定する。そして、合焦点M3〜M5と合焦点M6に基づいて変形量を特定する。
【0071】
すなわち、車両のモデル画像データは、多数のピクセル上に描かれており、視点M3〜視点M5に対応するピクセルのアドレスを検索し、ピクセルのアドレスに基づいて損傷位置を特定するとともに、これら視線位置を結ぶことで傷の形状と視点M1〜視点M3に囲まれた面積及び凹みの程度を特定する。
【0072】
ところで、上述した修理車両の損傷位置、損傷範囲及び変形量は、視線入力デジタルスチルカメラ装置5により定量的に把握することができる損傷に限られる。
【0073】
すなわち、視線入力デジタルスチルカメラ装置5で定量的に特定できるのは、この視線入力デジタルスチルカメラ装置5にて指定される損傷位置や合焦点に対応するピクセルのアドレスに基づいて、修理車両の損傷位置を定量的に把握すること、次に、PC1へと取り込んだ修理車両の画像データ上で示される各合焦点をそれぞれ結んで、これら結ばれた各合焦点間の線分の長さを算出し、この長さから損傷範囲である面積を定量的に把握すること、さらに、視線入力デジタルスチルカメラ装置5から各合焦点までの距離を算出し、これら距離の長短から定量的に変形量を把握することである。
【0074】
ここで、たとえば、判別可能または判別不可能の別をしきい値としてあらかじめPC1に格納しておき、視線入力デジタルスチルカメラ装置5からの修理車両データを解析した結果、変形が複雑または大きくしきい値を越え、変形量が定量的に判別不可能と判断した場合、以下に説明する修理車両データと非損傷車両画像データとを比較演算することによって損傷度を特定する。
【0075】
すなわち、図6に示すように損傷箇所が複数の部分に亘り、変形量が複雑でかつ損傷の程度が大きい場合は、それぞれの損傷部分に視線を合わせ損傷の部分毎に合焦点を得る。
【0076】
ここでは、合焦点は、左側フロントパネルに合焦点M7、左側フロントバンパに合焦点M8、左側ヘッドライトに合焦点M9、左側フロントフェンダに合焦点M10とする。
【0077】
このようにして撮影した修理車両の複数の修理車両データ(損傷部検出データ、撮影画像データ)は、PC1へと入力されて非損傷車両画像データと比較演算することで、修理車両の損傷位置、損傷範囲及び損傷度の解析が行われる。
【0078】
ここで、これら損傷位置、損傷範囲及び損傷度の解析は、最初に撮影しPC1へ入力された修理車両データに2値化処理を施す。この2値化処理は、多階調画像から白黒(1、0)の2値画像を得るもので、多階調画像に対してある閾値を設定し、各画素の濃度値がこの閾値より大きいか小さいかで各画素の値を1か0に変換する。これらの方法にはp−タイル法やモード法が知られている。
【0079】
次に、2値化した修理車両の画像データから輪郭線の追跡を行う。この輪郭線の追跡処理は、最初に画像データをラスタ走査し、追跡済みのマークのついていない画素値1の点(輪郭線状の点)を探す。
【0080】
そして、該当する点P0を発見すると、その点の4近傍(4連結)または8近傍(8連結)の画素値を時計回り(または反時計回り)に調査する。次に、最初に発見した値1の画素を次の輪郭線状の点P1として追跡を継続する。
【0081】
このように求められた点P1の4(または8)近傍の中で値1の点を探す(このときP0は除く)。
次に、点P1の4(または8)近傍の中で値1の点を点P2とし、以下同様の方法でP3、P4を求めて行く。ここで、N回の追跡の後、PN=P0になると追跡処理を終了する。
【0082】
そして、追跡途中で各Piには追跡済みのマークを付けておく、閉ループであれば元の場所に戻るのでそこで処理を終了する。なお、追跡経路が交差する場合は、滑らかな方向や全体にまとまりがある方向を選択して進む。
【0083】
次に、輪郭の解析が終了すると平滑処理や特徴抽出を行うこともできる。平滑処理を行うことで、濃度値の変化するエッジが強調され、画像がより鮮明になるシャープニング効果を得ることができる。また、特徴抽出により曲がり点、不連続点等の特徴点の抽出や太さ、位置、向き等の特徴線の抽出及び屈折率、曲率、表面粗さ等の特徴面を解析することができる。
【0084】
そして、あらかじめ格納し2値化した非損傷車両画像データとの比較を行い、特徴抽出等により抽出した特徴点、特徴線、特徴面等を随時比較して損傷範囲及び損傷度を解析する。
【0085】
このように修理車両の画像データと正常車両の非損傷車両画像データとの比較を行って、損傷位置(ここでは、左側フロントパネル、左側フロントバンパ、左側ヘッドライト、左側フロントフェンダ)を検出し、さらに、検出した損傷位置の損傷範囲や損傷度を特定することができる。
【0086】
次に、損傷位置、損傷範囲、変形量または損傷度の特定が終了すると、見積もり計算を開始する。この車両修理費の見積もり計算は、見積作成者が表示装置6に表示された車両の画像データを見ながらそれぞれ修理に必要なデータを入力することにより行う。
【0087】
最初に見積もり作業の対象である修理車両の画像データが入出力インタフェース2を通じてPC1へと入力される。次に、車両諸元データ、自動車登録関係データ等の車種特定データを入力装置4から入力する。
【0088】
そして、これらのデータが入力されると修理車両に対応する車両属性データを検索する。次に、PC1は、視線入力デジタルスチルカメラ装置5から入力された修理車両データから定量的に特定することができる損傷位置、損傷範囲及び変形量を特定し、定量的に特定することができない損傷度については、修理車両データとこの修理車両データに対応する非損傷車両データとの比較演算を行って、損傷位置、損傷範囲及び損傷度を算出する。
【0089】
次に、これらの特定が終了するとPC1は、得られた全ての修理車両データの内容を表示装置6に一覧表示させる。さらに、PC1は、視線入力デジタルスチルカメラ装置5から入力された修理車両の画像データを表示させる。
【0090】
次に、表示装置6の表示画面上に表示された修理車両の各種データから必要とするデータを入力装置4により選択する。ここで、選択されたデータが部品の交換あるいは修正に要する工賃を算出するための脱着・取替作業データである場合PC1は、部品価格データ及び脱着・取替作業データを検索し、これら脱着・取替作業データの内容を表示装置6に一覧表示させる。
【0091】
そして、表示装置6の表示画面上に一覧表示された全脱着・取替作業データの中から必要とする作業部品等を選択して入力装置4から入力する。このように選択された脱着・取替作業データ中のコード区分データの値が0の場合は、脱着・取替作業コードデータによって作業指数データベースを検索し、作業名データ及び作業指数データを得る。
また、選択された脱着・取替作業データ中のコード区分データの値が1の場合は、脱着・取替作業コードデータによって部品マスタデータベースを検索し、部品名データ及び部品金額データを得る。
【0092】
次に、PC1は、得られた検索結果のうちの各作業指数データから総作業金額を算出する。具体的には、PC1は、得られた各作業指数データを所定の作業単価(レバーレート)に乗じて各作業金額データを算出する。そして、これら各作業金額データの総和を算出して、総金額データとする。
【0093】
次に、PC1は、得られた作業名データ、作業金額データ、部品名データ、部品金額データ、車両修理費金額データに基づいて、車両修理費見積書を出力装置に印刷させる。さらに、車両修理費見積書の内容を表示装置に表示させる。
【0094】
次に、実際の表示画面に基づいて修理費見積もりの作成過程の一例を説明する。ここで、作成する見積もりは、前述した左フロントドアの線状の傷に対してこの傷を修正する場合の作成過程である。なお、表示画面に表示されるデータには、修理箇所の修正のみならず交換をした際の費用をも同時に表示される。
【0095】
そして、図7に示すように視線入力デジタルスチルカメラ装置5により撮影した修理車両の複数の画像データが表示装置6に表示される。
ここで、視線入力デジタルスチルカメラ装置5にて定量化できる損傷部分(ここでは左フロントドアの傷)について修理車両の修理費見積計算を行う場合、見積作成者は、左フロントドアを含む修理車両の車両画像データを選択し、入力装置から表示させる画像を選択して入力する。
【0096】
すると、図8に示すように視線入力デジタルスチルカメラ装置5で撮影された複数の画像データから選択した見積対象の損傷位置を含む画像データが表示装置6に表示される。
【0097】
ここで、表示される内容は、損傷面積が4dm2であり、損傷の程度は損傷面積が4dm2以下で著しい折れ、つぶれ、延びがない、損傷位置はプレスライン部またはパネル端部におよばない位置、作業性はパネル裏面からハンマおよびドリー、スプーン等で作業ができるという内容が表示される。ここで、作業位置及び作業性の内容に誤り等がある場合は、Noの位置にカーソルを合わせてクリックすることにより、内容の変更等をすることができる。
【0098】
次に、これら損傷面積、損傷程度、損傷位置、作業性に誤りがなくこれらを変更する必要がない場合は、図9に示すように左フロントドアの修理にかかる費用の額の具体的な内容が表示される。
【0099】
図9に示す表示画面は、画像データの表示とともに、視線入力デジタルスチルカメラ装置5により定量化された損傷範囲(ここでは直線の長さ)が同時に表示され、この定量化された損傷範囲に基づいて算出された作業時間、難易度が表示される。
【0100】
ここで、作業時間の特定は、損傷範囲の変形量と作業時間との相関関係をあらかじめマップとしてメモリに格納しておき、視線入力デジタルスチルカメラ装置5から得られた変形量を格納されたマップ上に位置づけることにより算出する。
【0101】
次に、作業の難易度は、作業時間の特定と同様に損傷範囲の変形量と難易度との相関関係をあらかじめマップとしてメモリに格納しておき、視線入力デジタルスチルカメラ装置5から得られた変形量を格納されたマップ上に位置づけることにより算出する。
【0102】
具体的にこの線状の傷は、損傷範囲は4dm2、面積も4dm2であり、作業時間が指数1.40時間、難易度が1.00で表示される。
そして、表示画面上にはフロントドアの修正に係る費用が表示される。フロントドアの修正に係る費用は、単位時間あたりの作業工賃であるレバーレートに作業の難易度に対応した指数1.40を乗じて技術料金が9,800円、トリム、サービスホール脱着は、レバーレートに指数0.30を乗じて技術料金が2,100円、塗装では、レバーレートを7,000円に設定し、指数2.60を乗じて技術料金が18,200円、さらに、塗料の料金が1,760円となり、フロントドアの修正に係る費用の総額は、31,860円になる。
【0103】
次に、PC1の動作原理を図11に示すフローチャートに基づいて説明する。
まず、修理車の車種を特定する車両諸元データ、自動車登録関係データ等の修理車両に関する各種データを入力装置4により入力し、入出力インタフェース2を通じてPC1に転送する(ステップ100)。そして、この視線入力デジタルスチルカメラ装置5で撮影した修理車両の複数の損傷部検出データ及び撮影画像データからなる修理車両データを、入出力インタフェース2を通じてPC1に入力する(ステップ101、ステップ102)。
【0104】
次に、これら入力された修理車両データの解析の結果から得られる値とあらかじめ設定しているしきい値との比較が行われ、設定されたしきい値の範囲内であるか否かが判断される(ステップ103)。
【0105】
ここで、設定されたしきい値の範囲内であると判断すると、視線入力デジタルスチルカメラ装置5で撮影された損傷部検出データ及び撮影画像データから損傷位置、損傷範囲及び変形量を特定する(ステップ104)。
【0106】
次いで、表示装置6に表示された脱着・取替作業データや外板修正作業データ等の各種作業データを入力する(ステップ105)。そして、PC1は、これらのデータに基づき見積計算を行う(ステップ106)。ステップ106以降では、各損傷位置における変形量から、必要部品の照合等が行われ、修理に必要な部品のリストが得られる。そして、部品群のそれぞれの価格と、それぞれの工賃が算出される。この結果が表示装置6に表示される。
【0107】
このようにして得られた見積結果は、印字装置7によりあらかじめフォーマットが決められた用紙にプリントアウトすることができる(ステップ107)。
次に、ステップ103に戻って、設定されたしきい値の範囲外であると判断すると、視線入力デジタルスチルカメラ装置5で撮影された修理車両データと非損傷車両画像データとの比較演算が画像データの補正を行いながら行われ(ステップ108、ステップ109)、この比較演算結果に基づいて損傷位置、損傷範囲及び損傷度を特定する(ステップ110)。
【0108】
次いで、表示装置6に表示された脱着・取替作業データや外板修正作業データ等の各種作業データを入力する(ステップ111)。そして、PC1は、これらのデータに基づき見積計算を行う(ステップ112)。ステップ112以降では、各損傷位置における変形量から、必要部品の照合等が行われ、修理に必要な部品のリストが得られる。そして、部品群のそれぞれの価格と、それぞれの工賃が算出される。この結果が表示装置6に表示される。
【0109】
このようにして得られた見積結果は、印字装置7によりあらかじめフォーマットが決められた用紙にプリントアウトすることができる。(ステップ113)
以上述べたように、修理車両の損傷部分を見ながら視線入力デジタルスチルカメラ装置5で撮影し、これを本システムに入力することにより損傷位置及び損傷範囲、変形量または損傷度を特定することができるため、その後の修理に必要な部品、修理時間、費用を迅速に算出することができる。
【0110】
【発明の効果】
本発明によれば、視線入力デジタルスチルカメラ装置により複数修理車両の画像を取り込んで、この修理車両データを計算装置へと入力することにより、計算装置では、視線入力により定量化できる損傷である場合、修理車両データに基づいて損傷位置、損傷範囲及び変形量を特定し、さらに、あらかじめ格納し選択された各種作業データと特定した損傷位置、損傷範囲及び変形量に基づいて修理車両の修理費見積もりを行う。したがって、これまで損傷位置、損傷範囲及び変形量を目視により確認し、これらを手入力していた手間が省け、さらに、目視による誤りも防止することができる。
【0111】
また、簡易、定量的に修理費見積もりが行え、見積もり内容の根拠を撮影画像とともに記録し、修理費見積もり作業の均一化及び適正かつ透明化した板金業の事前見積もり行うことができる。
【0112】
さらに、効率良く見積処理を行うことができ、見積もり作成にかかる時間を大幅に短縮することができる。
次に、視線入力により定量化できない損傷である場合は、修理車両データと非損傷車両画像データとを比較演算することによって、損傷位置、損傷範囲及び損傷度を特定し、さらに、あらかじめ格納し選択された各種作業データと特定した損傷位置、損傷範囲及び変形量に基づいて修理車両の修理費見積もりを行う。したがって、ここでも従来の見積もり計算に必要であった損傷位置、損傷範囲及び損傷度を目視により確認し、これらを手入力していた手間が省け、さらに、目視による誤りも防止することができる。
【0113】
さらに、本発明に係る修理費見積もりシステムを使用して作成した見積書では、具体的な数値とともに、損傷位置等を明確に示すことができるため、ユーザー等に明確かつ透明な見積書を提示することができる。
【図面の簡単な説明】
【図1】本発明の一実施の形態に係る車両修理費見積もりシステムのブロック図
【図2】本実施の形態に係る視線入力デジタルスチルカメラのブロック図
【図3】本実施の形態に係る視線入力デジタルスチルカメラのイメージセンサ部分のピクセルを示す正面図
【図4】本実施の形態に係る車両修理費見積もりシステムにおける撮影画像図
【図5】本実施の形態に係る車両修理費見積もりシステムにおける撮影画像図
【図6】本実施の形態に係る車両修理費見積もりシステムにおける撮影画像図
【図7】本実施の形態に係る車両修理費見積もりシステムの表示装置に表示された修理車両図
【図8】本実施の形態に係る車両修理費見積もりシステムの表示装置に表示された修理車両の付属品脱着作業の時間を表示する図
【図9】本実施の形態に係る車両修理費見積もりシステムの表示装置に表示された修理車両の修正または交換にかかる費用を表示する図
【図10】本実施の形態に係る車両修理指示システムの動作原理を示すフローチャート図
【符号の説明】
1 ・・・パーソナルコンピュータ
1a・・・中央処理装置
1b・・・主記憶装置
2 ・・・入出力インタフェース
3 ・・・補助記憶装置
4 ・・・入力装置
5 ・・・視線入力デジタルスチルカメラ
6 ・・・表示装置
7 ・・・印字装置
8 ・・・通信装置
40・・・画像記憶部
41・・・イメージセンサ
44・・・MPU
45・・・インタフェース
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a vehicle repair cost estimation system for estimating a repair cost of a repaired vehicle based on repaired vehicle data obtained by photographing the repaired vehicle with a line-of-sight input digital still camera device, and a recording medium storing a repair cost estimation program.
[0002]
[Prior art]
In recent years, in the estimation of an accident vehicle, a repair cost estimation system by computer processing utilizing a repair work index database, a parts database, etc. supplied from a storage medium such as a CD-ROM has been used.
[0003]
For example, when estimating the repair cost of an accident vehicle whose left front portion has been damaged due to a collision with an oncoming vehicle, first, the damaged portion of the accident vehicle and the degree of damage are determined visually.
Then, when finding damaged parts such as the left front fender, front bumper, radiator grill, headlamp, etc. of the accident car, the estimate person manually inputs each damaged part individually into the repair cost estimation system. Instruct repair work (replacement, desorption, sheet metal, inspection) manually.
[0004]
Then, the repair cost estimation system acquires the repair work index corresponding to the instructed input from the database, calculates the repair technology fee from the lever rate (work unit price) entered in the system in advance, and corresponds to the repair location Obtain the required parts and parts price from the parts database and estimate the repair cost.
[0005]
In addition, past accident vehicle maintenance work information is stored in the accident vehicle repair cost estimation system and displayed on the system display screen as reference materials for new estimates, and vehicle illustration images are displayed on the display screen for estimation. A system has also been proposed in which a person designates a damaged part of an accident vehicle on an illustration image.
[0006]
[Problems to be solved by the invention]
With the above-mentioned conventional system, the price of parts required for repair can be obtained instantaneously, so the estimated work time has been greatly reduced compared to the previous manual estimate work. The estimate and the work of the repair work must be determined from scratch. For this reason, the estimation is based on experience and intuition, and is not based on quantitative figures.Therefore, there is a difference in the estimated cost depending on the work experience and level of the estimator or the level of caution during the estimation. It was possible to reduce the reliability of the estimate.
[0007]
In other words, even if the left front of the vehicle is damaged due to a collision with an oncoming vehicle as described above, the structure of the vehicle differs from vehicle to vehicle, and the magnitude of the force at the time of the accident and the input point of the force are Because it is different, it can be said that the damaged part and degree of damage are completely different for each accident vehicle, and it is rare that the amount of deformation etc. is quantitatively grasped by estimation relying on visual judgment, for example, how much is the bonnet It is necessary to replace it due to deformation or damage of the door, how much the door panel installation position is misaligned, what kind of damage can be considered, what kind of repair is necessary, and how much it is recessed The repair location and the content of the repair work were selected based on experience and intuition without determining whether it would be impossible.
[0008]
However, when estimating the repair cost of an accident vehicle, the vehicle skeleton and the damaged part inside the vehicle that cannot be visually confirmed even if they are visually confirmed from the outside for various kinds of damage according to the accident are actually exterior After disassembling the panel, wheels, etc., if the left side member is not bent, the tension rod bracket is deformed / cracked, etc. In order to make a preliminary estimate, it is necessary to rely on experience and intuition to confirm the opposite side (right side) part, parts, etc. that seem to be apparently not damaged by the accident case. There is also the actual situation.
[0009]
Therefore, in the estimation stage, there are many cases where considerably rough repair work items are listed, and after actually repairing the accident vehicle, the work actually performed is input to the repair cost estimation system.
[0010]
Therefore, the object of the present invention is based on such points, and the determination of the damaged part and the repair work contents manually input by experience and intuition is quantified based on the repair vehicle data photographed using the gaze input digital still camera device. The cost of repair can be estimated easily and quantitatively, and the basis of the estimate content is recorded together with the photographed image, and the level of repair cost estimation work is made uniform at a high level and appropriate and transparent. It is an object of the present invention to provide a vehicle repair cost estimation system and a recording medium storing a vehicle repair cost estimation program that enable a prior estimate.
[0011]
Another object of the present invention is to provide a vehicle repair cost estimation system and vehicle repair capable of automatically and accurately calculating a painting fee based on repair vehicle data photographed using a line-of-sight input digital still camera device. The object is to provide a recording medium storing a cost estimation program.
[0012]
[Means for Solving the Problems]
The present invention employs the following means in order to solve the above-described problems.
In other words, the vehicle repair cost estimation system according to the present invention is a vehicle repair cost estimation system that estimates the repair cost of a repaired vehicle using a programmed calculation device.
[0013]
And an image sensor that detects a line-of-sight position on a secondary plane of the image, and the line-of-sight position of a photographer who photographs the repair vehicle based on the line-of-sight position data detected by the image sensor. A line-of-sight input digital still camera device having an image storage unit for storing captured image data as well as detection data, and outputting the damaged portion detection data and the captured image data stored in the image storage unit as repair vehicle data; The vehicle attribute data corresponding to the repaired vehicle is retrieved from the previously stored vehicle attribute data, and the repaired vehicle data is input based on the output of the line-of-sight input digital still camera device. Specify range and amount of deformation or at least one of these, and repair costs And a computing computing device, performs a repair cost estimate based on the vehicle attribute data and the repair vehicle data.
[0014]
Next, the vehicle repair cost estimation system includes an image sensor that detects a line-of-sight position on a secondary plane of an image, and a photographer shooting a repair vehicle based on the line-of-sight position data detected by the image sensor. The line-of-sight position is stored as damaged part detection data of the repaired vehicle, and has an image storage unit for storing captured image data. The damaged part detection data and the captured image data stored in the image storage unit are used as repaired vehicle data. The line-of-sight input digital still camera device to be output and vehicle attribute data corresponding to the repaired vehicle are searched from previously stored vehicle attribute data, and the repaired vehicle data input based on the output of the line-of-sight input digital still camera device is Use repair vehicle damage location, damage range and damage degree or at least one of them Identify, and a computing device for calculating the repair cost of the repair vehicle.
[0015]
And the said calculation apparatus inputs the said repair vehicle data required for the said repair cost calculation, and stores beforehand the non-damaged vehicle image data corresponding to the said repair vehicle as vehicle attribute data, and this non-damaged vehicle image data and Comparing and calculating the repair vehicle data to identify the damage position, damage range and damage degree of the repair vehicle or at least one of them, and estimating the repair cost based on the vehicle attribute data and the repair vehicle data It is.
[0016]
Further, the repair vehicle data includes damaged part detection data based on a plurality of line-of-sight positions, line segments connecting the line-of-sight position data are used as damaged part detection data, and / or line segments connecting the line-of-sight position data are contours. The closed section range to be used can be used as damaged portion detection data.
[0017]
According to the present invention, the image data of the repair vehicle captured from the line-of-sight input digital still camera device is input to the calculation device, and the calculation device receives the vehicle attribute data corresponding to the image data of the repair vehicle from the previously stored vehicle attribute data. Search for.
[0018]
Then, the damage position, damage range and deformation amount of the repair vehicle are determined based on the input image data of the repair vehicle, and the repair cost is estimated using the repair vehicle image data based on the vehicle attribute data. is there.
[0019]
Furthermore, the repair vehicle data and non-damaged vehicle image data are compared and calculated to determine the damage position, damage range and damage level of the repair vehicle. Repair vehicle The repair cost is estimated using image data.
[0020]
Next, the line-of-sight input digital camera device constituting the present invention forms an image of light incident through the lens system on an imaging plate such as a CCD and converts it into an electrical signal, and then stores this information in a memory. It can be output.
[0021]
In addition, it is possible to sense a photographer's line of sight, photograph the line of sight position as a focal point, and store the line of sight position together.
The principle is to irradiate the human eyeball with a weak light beam and direct the reflected light to the image sensor to calculate the angle of the eyeball, that is, the direction of the line of sight. However, it is preferable that the row is increased to provide a focal point of 15 points for 3 rows and 25 points for 5 rows.
[0022]
Therefore, this line-of-sight input digital camera device uses the repaired vehicle image data of the repaired vehicle as well as the repaired vehicle data of the repaired vehicle's line-of-sight position of the photographer shooting the repaired vehicle based on the line of sight position data .
[0023]
In addition, it is preferable that the outer panel panel position data of the line-of-sight position can be stored simultaneously as information data to be added to the line-of-sight position data. For example, the gaze input digital camera device incorporates repair vehicle specification data such as the position of the outer panel and the name of the outer panel into a ROM, and the same button operation or dial operation as when changing the shutter speed, exposure, etc. The outer panel position, the panel name, etc. can be stored.
[0024]
In this way, the names of the damaged positions such as the left front panel and the front bumper are displayed at an arbitrary position in the image (preferably each line-of-sight input position or each in-focus position other than the line-of-sight input position). Rankings such as “No significant breakage, crushing, or extension”, “Spanning the press line”, etc. are made to recognize the position and match the deformation amount of these damaged positions according to the damage form according to the difficulty level determination of the work index It is also possible to discriminate and store them.
[0025]
As a further measure, a transmissive vehicle image screen in which the outer panel position is stored in advance is used, and the sight line position is reflected on the outer panel panel position by collating the sight line position with the transmissive vehicle image screen. In the case where the damage position is the left front panel and the front bumper, it can be configured to recognize the position of the arbitrary line-of-sight position in the image on the left front panel and the front bumper.
[0026]
In addition, it is possible to store the vehicle verification description data such as the owner and the vehicle number in the line-of-sight input digital still camera device, and it is also possible to store it in association with the repair vehicle data.
[0027]
Further, the repair vehicle data output from the line-of-sight digital still camera device and the input to the calculation device can be performed by a communication function or a recording medium such as a memory card, and an appropriate input / output interface is used. it can. Conversely, predetermined data can also be input to the line-of-sight input digital still camera device from a computing device, a portable electronic terminal device, or the like by the same method.
[0028]
If the line-of-sight digital still camera device has a communication function, it is also possible to transfer the stored contents using a communication medium such as a mobile phone or a PHS. It is also possible to transfer data by communication.
[0029]
Next, the calculation device for calculating the repair cost is connected or built in an auxiliary storage device for reading these data from a recording medium in which vehicle attribute data is stored in advance. This recording medium uses a CD-ROM, MO, floppy disk or the like.
[0030]
The pre-stored vehicle attribute data includes classification data of almost all passenger vehicles currently running in Japan, model data, vehicle specification data such as vehicle weight, and vehicle registration data such as registered land transportation offices, Desorption / replacement work index, desorption / replacement work index, outer plate modification work index, and outer plate modification work data, which are the basis for calculating vehicle parts price and labor required for replacement or modification of this part, Stores each work index data group such as plate skeleton modification work index, inner plate skeleton modification work data, painting index and painting work data, and can be replaced, removed, modified, adjusted, etc. according to the damaged part and damage degree of the vehicle Stores correspondence data with necessary parts and other various data necessary for repair estimation.
[0031]
The stored data includes repair vehicle data stored in the line-of-sight input digital still camera device.
Furthermore, past repair vehicle data, past repair vehicle damage data grasped from this data, parts data used in the past repair vehicle, and vehicle image data for searching for the past damage position, etc. Can be stored.
[0032]
Next, the display device, such as a CRT or a liquid crystal panel, displays an image, and may have a touch sensor on the surface. As the input device, a keyboard, a pointing device such as a mouse, a light pen, or the like can be used.
[0033]
Next, the calculation device performs repair cost estimation processing using repair vehicle data input on the basis of vehicle attribute data, and includes a central processing unit (hereinafter referred to as a CPU), a hard disk, a RAM, a ROM, and the like. Main memory device (hereinafter referred to as memory).
[0034]
Then, the calculation device analyzes the repair vehicle data displayed on the display device, and uses this as basic data for the repair estimate. This analysis work may be either manual processing or automatic processing using a keyboard or mouse, and each data file in a memory storing repair vehicle data stores a number for identifying the corresponding repair vehicle data. The corresponding repair vehicle data can also be stored in the data file created for each part.
[0035]
In addition, the repair vehicle data displayed on the display device and the non-damaged vehicle image data stored in the memory in advance can be compared and calculated to allow detailed analysis of the repair vehicle data input from the line-of-sight digital still camera device. You may comprise as follows. The computing device may have a communication function for transmitting and receiving data to the outside.
[0036]
In the vehicle repair cost estimation system configured as described above, when actually performing repair vehicle estimation work, first, repair vehicle data (including image data) including damaged portion detection data photographed by the line-of-sight input digital still camera device is used. ) To the computing device through the input / output interface.
[0037]
On the other hand, from the memory, a typical vehicle figure of an overall view and a partial view of the vehicle is displayed on the display device. Here, it is automatically determined from the data stored in the line-of-sight input digital still camera device which portion of the repair vehicle data displayed corresponds to the whole view or the partial view. May be. This makes it clear where each image data indicates damage.
[0038]
Similarly, all repair vehicle data (including image data) is analyzed, and basic data regarding damage to the repair target vehicle is calculated from the line-of-sight input position and other information data.
[0039]
When the repair cost is calculated by the calculation device, the repair cost is estimated based on the basic data regarding the damage of the repair target vehicle calculated from the line-of-sight input position and other information data. At this time, the repair contents of the model case and the damage basic data of the repaired vehicle may be collated.
[0040]
The displayed data is printed out as necessary. Display data can also be stored in a server or external memory.
Next, the vehicle repair cost estimation system according to the present invention uses a recording medium storing the following program in order to estimate the repair vehicle repair cost.
[0041]
That is, it has means for retrieving vehicle attribute data corresponding to the repaired vehicle from vehicle attribute data stored in advance, and an image sensor for detecting the position of the line of sight on the secondary plane of the image, and the line of sight detected by this image sensor The line-of-sight position of the photographer shooting the repaired vehicle based on the position data is stored as damaged part data of the repaired vehicle, and has an image storage unit that stores the captured image, and the captured image stored in the image storage unit Input means capable of inputting as repair vehicle data, display means for displaying repair vehicle data relating to the repair vehicle and vehicle attribute data corresponding to the repair vehicle or at least one of them, and the input repair vehicle data Is used to identify the repair vehicle's damage location, extent and extent or at least one of them, Serial is readable recording medium recording a program for executing the means for performing the repair cost estimate of the repair vehicle based on the vehicle attribute data and the inputted the repaired vehicle data.
[0042]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, the vehicle repair cost estimation system according to the present embodiment will be specifically described with reference to FIGS.
[0043]
The vehicle repair cost calculation system according to the present embodiment uses a personal computer 1 (hereinafter referred to as a PC) and a line-of-sight input digital still camera device 5 as shown in FIG. The repair cost estimate for the repaired vehicle is made.
[0044]
The vehicle repair cost calculation system includes an auxiliary storage device 3 (CD-ROM, MO, FD, etc.) and an input device 4 (keyboard, OCR, OMR, bar code reader, digitizer, image) connected through the input / output interface 2. Scanner 1), line-of-sight input digital still camera 5, PC 1 main body composed of main storage device 1 b (hard disk, ROM, RAM (hereinafter referred to as “memory”)) and central processing unit 1 a (hereinafter referred to as “CPU”); It is formed by an output device composed of the connected display device 6, printing device 7, communication device 8 and the like. Further, the communication device 8 is connected to a terminal device (not shown) through a communication line.
[0045]
Next, the PC 1 includes a hard disk, a RAM, and a ROM as the memory 1b, and stores a necessary OS in advance.
That is, a program cached in the memory 1b or the auxiliary storage device 3 is started under the control of the OS, and a predetermined task (process) is executed.
[0046]
Then, the CPU 1a constituting the PC 1 main body performs an arithmetic operation 1a, a logical operation, etc. on given data. 2 And the instruction part 1b to be executed 1 The control device 1a fetches a command from the memory 1b to the CPU based on the address of the command, decodes the content of the command, and issues a necessary operation instruction to another device 1 And have.
[0047]
This control device 1a 1 1 issues an input control command to the input device or the like as shown in FIG. 1, issues a memory control command to the memory 1b, and issues an output control command to the display device or the like.
[0048]
Then, a command input from the input device 4 or the like is first transferred to the memory 1b, and the memory 1b selects data and an instruction from the given command, and the selected data and instruction are respectively stored in the data portion 1b. 2 And command part 1b 1 And the control device 1a of the CPU 1a 1 Forward to.
[0049]
Next, vehicle graphic data is stored in advance in the memory or CD-ROM, and the vehicle graphic data stores typical figures such as a sedan car and a hard top car. Select the vehicle figure corresponding to the vehicle.
[0050]
The selected vehicle graphic is displayed as an overall view of the vehicle graphic 6a as, for example, three-dimensional graphics, and is displayed on the display device 6 connected to the PC 1 through the input / output interface 2.
[0051]
The vehicle figure 6a displayed on the display device 6 may be an image of a real vehicle. Further, the vehicle figure 6a data further stores the vehicle figure 6a for each vehicle type (car A, car B, car C,...) In detail, and displays a figure suitable for each car type on the display device 8. You may be made to do.
[0052]
By the way, the CD-ROM mounted inside the CD-ROM drive includes classification data, model data, vehicle specification data such as vehicle weight, automobiles such as registered land transportation offices, etc. for almost all passenger vehicles currently running in Japan. Including registration-related data, the detachment / replacement work index and detachment / replacement work data, the outer plate modification work index, and the outer plate, which are the basis for calculating the parts price of the vehicle and the labor required to replace or modify this part Stores each work index data group such as correction work data, inner plate skeleton correction work index and inner plate skeleton correction work data, painting index and painting work data, and replacement, desorption, etc. according to the damaged part and degree of damage of the vehicle, Corresponding data with parts that need correction, adjustment, etc., and other various data necessary for repair estimation are stored.
[0053]
These data groups are stored in the data portion 1b of the PC 1 from the CD-ROM through the input / output interface. 2 Stored in
Next, the line-of-sight input digital still camera device 5 for photographing the repair vehicle is configured to form an image of light incident from the lens system 42 on the CCD 43 as shown in FIG. After being compressed by the (micro prossing unit) 44, it is stored in the image storage unit 40 which also serves as a video recording. Then, the stored image is transferred to the PC 1 through the interface 45.
[0054]
On the other hand, the line-of-sight input digital still camera apparatus 5 is provided with an optical finder 46, and two half mirrors 47 and 49 are arranged in the optical finder 46.
[0055]
The half mirror 47 reflects the photographer's line of sight and forms an image on the image sensor 41, and the half mirror 48 irradiates the photographer's eye with the light beam of the light emitting diode 49.
[0056]
The output of the image sensor 41 is processed by the MPU 44, and the image sensor 41 covers a plane composed of pixels such as L1 and L2 as shown in FIG. 3, and can correspond to the line-of-sight position.
[0057]
Next, the light emitted from the light emitting diode 49 is refracted by the half mirror 48 and reaches the eyeball. Then, the light reflected by the eyeball is reflected by the half mirror 47 and enters the image sensor 41. Here, since the reflected light changes depending on the angle of the eyeball, that is, the line of sight, the MPU 44 calculates where the photographer puts the line of sight from this information.
[0058]
Here, as shown in FIG. 4, when there is a linear scratch 6b on the left front door of the vehicle, when the shutter of the line-of-sight input digital still camera device 5 is first aligned with the scratch starting point M1, the line of sight is displayed. The portion where is placed is designated and stored in the image storage unit.
[0059]
Next, when the shutter of the line-of-sight input digital still camera device 5 in which the line-of-sight position is aligned with the wound end point M2, the portion where the line of sight is placed is designated.
The line-of-sight positions (hereinafter referred to as in-focus points) M1 and M2 thus specified are temporarily stored in the image storage unit, and the stored images are transferred to the PC 1 through the interface 45. Here, the line-of-sight input digital still camera device 5 detects the distance from the captured focal point M1 to the line-of-sight input digital still camera device 5, and the distance from the focal point M2 to the line-of-sight input digital still camera device 5 Is detected.
[0060]
Then, the PC 1 calculates a distance (here, a linear distance) from the focal point M1 to the focal point M2 based on the inputted focal point M1 and the distance from the focal point M2 to the line-of-sight input digital still camera device 5. To do. That is, the linear distance is calculated by performing triangulation based on the distance from the focal point M1 and the focal point M2 to the line-of-sight input digital still camera device 5. It should be noted that the principle of triangulation starts with the selection of several points such that the line of sight connecting each point forms one triangle or several continuous triangles. Each triangle shares at least one side with each adjacent triangle. The first side, i.e., the baseline, is then measured in the same way as all angles, and all remaining side lengths are calculated by sequentially using the sine law. In addition, since the direction of the side is sequentially calculated, the relative positions of all the points are determined.
[0061]
Next, the line-of-sight input digital still camera device 5 incorporates repair vehicle specification data such as the position of the outer panel and the name of the outer panel into a ROM, and incorporates the shutter speed and exposure into the line-of-sight digital still camera device 5. It is also possible to store the outer panel position, the panel name, etc. by the same button operation or dial operation as in the case of changing.
[0062]
In this way, the names of the damaged positions such as the left front panel and the front bumper are displayed at an arbitrary position in the image (preferably each line-of-sight input position or each in-focus position other than the line-of-sight input position). Rankings such as “No significant breakage, crushing, or extension”, “Spanning the press line”, etc. are made to recognize the position and match the deformation amount of these damaged positions according to the damage form according to the difficulty level determination of the work index It is also possible to discriminate and store them.
[0063]
By designating the damaged part and the shape of the damage in this way and inputting them into the PC 1, the PC 1 causes the display device 6 to display image data including the left front door that is the damaged part.
[0064]
Then, the PC 1 specifies a substantially linear flaw along with the position of damage based on the designated focal point M1 and focal point M2. That is, the image data of the repair vehicle is drawn on a large number of pixels, and the address of the pixel corresponding to the line-of-sight position (focus point M1, focus point M2) is searched, and the damage position is identified based on the pixel address. At the same time, the shape and length of the flaw is analyzed by connecting these line-of-sight positions.
[0065]
Next, in order to specify a slight degree of dent damage, the line of sight is moved to the positions M3, M4, and M5 as shown in FIG. The section surrounded by the focal points M3, M4, and M5 is analyzed, and the length of the line segment that connects the focal points M3, M4, and M5 is determined. Then, when the length of the line segment is calculated, the triangular area, that is, the damage range can be calculated based on these lengths.
[0066]
The degree of damage can also be determined based on the distance from the focal points M3, M4, and M5 to the line-of-sight input digital still camera device 5. Here, when determining the extent of the substantially triangular scratch, that is, the amount of deformation, for example, a recess is formed substantially at the center of the triangular scratch, and the center is the maximum depth of the recess. Aim the line of sight and release the shutter. Then, the distance from the focal point M3 to M5, which is the outer edge of the wound photographed so far, to the line-of-sight input digital still camera device 5 and the distance from the focal point M6 to the line-of-sight input digital still camera device 5 are indentations. Only the distance from the focal point M6 to the line-of-sight input digital still camera device 5 is increased.
[0067]
Therefore, by comparing the distance from the focal point M3 to M5 to the line-of-sight input digital still camera device 5 and the distance from the focal point M6 to the line-of-sight input digital still camera device 5, the depth of the recess, that is, the deformation amount. Can be analyzed.
[0068]
Further, the line-of-sight digital still camera device 5 here also includes repair vehicle specification data such as the position of the outer panel and the name of the outer panel in a ROM format, and is similar to the case where the shutter speed, exposure, etc. are changed. It is also possible to store the outer panel position, the panel name, etc. by button operation or dial operation.
[0069]
Then, these data are input to the PC 1 through the input / output interface 2, and the PC 1 causes the display device 6 to display image data including the left front door which is a damaged portion.
[0070]
Then, the PC 1 specifies a substantially triangular wound along with the position of the damage based on the designated focal points M3 to M5. Then, the deformation amount is specified based on the focal points M3 to M5 and the focal point M6.
[0071]
That is, the model image data of the vehicle is drawn on a large number of pixels, the addresses of the pixels corresponding to the viewpoints M3 to M5 are searched, and the damage position is specified based on the addresses of the pixels. , The area surrounded by the flaw shape, the viewpoint M1 to the viewpoint M3, and the degree of the dent are specified.
[0072]
By the way, the damage position, damage range, and deformation amount of the repair vehicle described above are limited to damage that can be quantitatively grasped by the line-of-sight input digital still camera device 5.
[0073]
That is, the line-of-sight digital still camera device 5 can quantitatively specify the damage of the repaired vehicle based on the damage position designated by the line-of-sight digital still camera device 5 or the address of the pixel corresponding to the focal point. Grasping the position quantitatively, and then connecting the focal points shown on the image data of the repaired vehicle imported to PC1, and calculating the length of the line segment between these focal points From this length, it is possible to quantitatively grasp the area that is the damage range, calculate the distance from the line-of-sight input digital still camera device 5 to each focal point, and quantitatively determine the deformation amount from the length of these distances. It is to grasp.
[0074]
Here, for example, whether or not discrimination is possible is stored in the PC 1 in advance as a threshold value, and the repair vehicle data from the line-of-sight input digital still camera device 5 is analyzed. When the value exceeds the value and it is determined that the amount of deformation cannot be determined quantitatively, the degree of damage is specified by comparing and calculating repair vehicle data and non-damaged vehicle image data described below.
[0075]
That is, as shown in FIG. 6, when a damaged portion extends over a plurality of portions and the amount of deformation is complicated and the degree of damage is large, the line of sight is aligned with each damaged portion to obtain a focal point for each damaged portion.
[0076]
Here, the focal point is the focal point M7 on the left front panel, the focal point M8 on the left front bumper, the focal point M9 on the left headlight, and the focal point M10 on the left front fender.
[0077]
A plurality of repair vehicle data (damaged part detection data, photographed image data) of the repaired vehicle photographed in this manner is input to the PC 1 and compared with the non-damaged vehicle image data, so that the damage position of the repaired vehicle, Analysis of damage range and damage level is performed.
[0078]
Here, in the analysis of the damage position, the damage range, and the damage degree, the binarization process is performed on the repair vehicle data that is first photographed and input to the PC 1. This binarization process is to obtain a black and white (1, 0) binary image from a multi-tone image. A certain threshold is set for the multi-tone image, and the density value of each pixel is larger than this threshold. If it is smaller, the value of each pixel is converted to 1 or 0. As these methods, a p-tile method and a mode method are known.
[0079]
Next, the contour line is traced from the binarized repair vehicle image data. In this contour line tracking process, image data is first raster-scanned to find a point having a pixel value of 1 (a point having a contour line shape) without a tracked mark.
[0080]
And the corresponding point P 0 Is found, the pixel values in the vicinity of 4 (4 connected) or 8 (8 connected) of the point are examined clockwise (or counterclockwise). Next, the first pixel of value 1 found is set to the next contour point P 1 Continue tracking as.
[0081]
The point P thus obtained 1 Search for a point of value 1 in the vicinity of 4 (or 8) 0 Except).
Next, point P 1 A point with value 1 in the vicinity of 4 (or 8) 2 In the same manner, P Three , P Four Go for. Here, after N traces, P N = P 0 When it comes to, the tracking process ends.
[0082]
And each P i In the case of a closed loop, the process returns to the original place so that the process is terminated. In the case where the tracking paths intersect, a smooth direction or a direction in which there is a unity is selected to proceed.
[0083]
Next, when the analysis of the contour is completed, smoothing processing and feature extraction can be performed. By performing the smoothing process, it is possible to obtain a sharpening effect in which the edge where the density value changes is enhanced and the image becomes clearer. Further, by extracting features, it is possible to extract feature points such as bent points and discontinuous points, extract feature lines such as thickness, position, and orientation, and analyze feature surfaces such as refractive index, curvature, and surface roughness.
[0084]
Then, comparison with non-damaged vehicle image data stored in advance and binarized is performed, and feature points, feature lines, feature surfaces, etc. extracted by feature extraction or the like are compared at any time to analyze the damage range and damage degree.
[0085]
In this way, by comparing the image data of the repaired vehicle and the non-damaged vehicle image data of the normal vehicle, the damaged position (here, the left front panel, the left front bumper, the left headlight, the left front fender) is detected, Furthermore, it is possible to identify the damage range and the degree of damage at the detected damage position.
[0086]
Next, when the identification of the damage position, the damage range, the deformation amount or the damage degree is completed, the estimation calculation is started. The estimate calculation of the vehicle repair cost is performed by the estimate creator inputting data necessary for repair while viewing the image data of the vehicle displayed on the display device 6.
[0087]
First, image data of a repaired vehicle to be estimated is input to the PC 1 through the input / output interface 2. Next, vehicle type specifying data such as vehicle specification data and automobile registration related data is input from the input device 4.
[0088]
When these data are input, the vehicle attribute data corresponding to the repaired vehicle is searched. Next, the PC 1 specifies the damage position, the damage range, and the deformation amount that can be quantitatively specified from the repair vehicle data input from the line-of-sight input digital still camera device 5, and the damage that cannot be quantitatively specified. The degree of damage is calculated by comparing the repaired vehicle data with the non-damaged vehicle data corresponding to the repaired vehicle data to calculate the damage position, the damage range, and the damage degree.
[0089]
Next, when these identifications are completed, the PC 1 causes the display device 6 to display a list of the contents of all obtained repair vehicle data. Furthermore, the PC 1 displays the image data of the repaired vehicle input from the line-of-sight input digital still camera device 5.
[0090]
Next, the input device 4 selects necessary data from various data of the repaired vehicle displayed on the display screen of the display device 6. Here, when the selected data is detachment / replacement work data for calculating labor required for replacement or correction of parts, the PC 1 retrieves the part price data and detachment / replacement work data, and these detachment / replacement work data. The contents of the replacement work data are displayed as a list on the display device 6.
[0091]
Then, necessary work parts and the like are selected from all the detachment / replacement work data displayed as a list on the display screen of the display device 6 and input from the input device 4. When the value of the code classification data in the detachment / replacement work data selected in this way is 0, the work index database is searched using the detachment / replacement work code data to obtain work name data and work index data.
When the value of the code classification data in the selected detachment / replacement work data is 1, the parts master database is searched using the detachment / replacement work code data to obtain part name data and part price data.
[0092]
Next, the PC 1 calculates the total work amount from each work index data in the obtained search results. Specifically, the PC 1 calculates each work amount data by multiplying each obtained work index data by a predetermined work unit price (lever rate). Then, the sum total of these pieces of work amount data is calculated to obtain total amount data.
[0093]
Next, the PC 1 causes the output device to print a vehicle repair cost estimate based on the obtained work name data, work amount data, part name data, part amount data, and vehicle repair cost amount data. Further, the contents of the vehicle repair cost estimate are displayed on the display device.
[0094]
Next, an example of a process for creating a repair cost estimate based on an actual display screen will be described. Here, the estimate to be created is a creation process in the case of correcting this scratch with respect to the aforementioned linear scratch on the left front door. The data displayed on the display screen displays not only the repair location but also the cost for replacement.
[0095]
Then, as shown in FIG. 7, a plurality of image data of the repair vehicle photographed by the line-of-sight input digital still camera device 5 is displayed on the display device 6.
Here, when the repair cost estimate calculation of the repair vehicle is performed for the damaged portion (here, the scratch on the left front door) that can be quantified by the line-of-sight input digital still camera device 5, the estimate creator includes the repair vehicle including the left front door. Vehicle image data is selected, and an image to be displayed is selected and input from the input device.
[0096]
Then, as shown in FIG. 8, image data including the estimated damage position selected from the plurality of image data captured by the line-of-sight input digital still camera device 5 is displayed on the display device 6.
[0097]
Here, the displayed content is a damage area of 4 dm 2 The extent of damage is 4 dm 2 In the following, there is no significant breakage, crushing, or extension, the damage position is a position that does not reach the press line portion or the panel end, and the workability is displayed that the work can be performed with a hammer, dolly, spoon, etc. from the back of the panel. Here, if there is an error in the contents of work position and workability, the contents can be changed by placing the cursor on the position of No and clicking.
[0098]
Next, if there is no error in the damaged area, degree of damage, damaged position, and workability, and there is no need to change them, the specific contents of the cost of repairing the left front door as shown in FIG. Is displayed.
[0099]
The display screen shown in FIG. 9 simultaneously displays the damage range (here, the length of a straight line) quantified by the line-of-sight input digital still camera device 5 together with the display of the image data, and is based on the quantified damage range. The calculated work time and difficulty level are displayed.
[0100]
Here, the work time is specified by storing the correlation between the deformation amount of the damage range and the work time in advance in a memory as a map, and storing the deformation amount obtained from the line-of-sight input digital still camera device 5. Calculate by positioning on top.
[0101]
Next, the work difficulty level is obtained from the line-of-sight input digital still camera device 5 in which a correlation between the deformation amount of the damage range and the difficulty level is stored in advance in a memory as in the case of specifying the work time. The deformation amount is calculated by positioning it on the stored map.
[0102]
Specifically, this linear scratch has a damage range of 4 dm. 2 , The area is also 4dm 2 The working time is displayed with an index of 1.40 hours and a difficulty level of 1.00.
And the expense concerning correction of a front door is displayed on a display screen. The cost for the modification of the front door is calculated by multiplying the lever rate, which is the work cost per unit time, by an index of 1.40 corresponding to the difficulty of the work, and the technical fee is 9,800 yen. Multiply the rate by the index of 0.30 and the technical fee is 2,100 yen. For painting, set the lever rate to 7,000 yen, multiply by the index of 2.60 and the technical fee is 18,200 yen. The fee is 1,760 yen, and the total cost for the modification of the front door is 31,860 yen.
[0103]
Next, the operation principle of the PC 1 will be described based on the flowchart shown in FIG.
First, various data relating to a repaired vehicle such as vehicle specification data for specifying a vehicle type of the repaired vehicle and vehicle registration related data are input by the input device 4 and transferred to the PC 1 through the input / output interface 2 (step 100). Then, repair vehicle data including a plurality of damaged portion detection data and photographed image data of the repair vehicle photographed by the line-of-sight input digital still camera device 5 is input to the PC 1 through the input / output interface 2 (step 101, step 102).
[0104]
Next, the value obtained from the analysis result of the input repair vehicle data is compared with a preset threshold value, and it is determined whether or not the value is within the set threshold value range. (Step 103).
[0105]
Here, when it is determined that it is within the set threshold range, the damage position, the damage range, and the deformation amount are specified from the damaged portion detection data and the captured image data captured by the line-of-sight input digital still camera device 5 ( Step 104).
[0106]
Next, various work data such as detachment / replacement work data and skin correction work data displayed on the display device 6 are input (step 105). Then, the PC 1 performs estimation calculation based on these data (step 106). In step 106 and subsequent steps, necessary parts are collated from the deformation amount at each damage position, and a list of parts necessary for repair is obtained. Then, each price of the parts group and each labor cost are calculated. This result is displayed on the display device 6.
[0107]
The estimation result obtained in this way can be printed out on a paper whose format has been determined in advance by the printing device 7 (step 107).
Next, returning to step 103, when it is determined that the value is outside the set threshold range, the comparison operation between the repair vehicle data photographed by the line-of-sight input digital still camera device 5 and the non-damaged vehicle image data is performed on the image. The correction is performed while correcting the data (steps 108 and 109), and the damage position, damage range and damage degree are specified based on the comparison calculation result (step 110).
[0108]
Next, various work data such as detachment / replacement work data and skin correction work data displayed on the display device 6 are input (step 111). Then, the PC 1 performs an estimate calculation based on these data (step 112). In step 112 and subsequent steps, necessary parts are collated from the amount of deformation at each damage position, and a list of parts necessary for repair is obtained. Then, each price of the parts group and each labor cost are calculated. This result is displayed on the display device 6.
[0109]
The estimation result obtained in this way can be printed out on a paper whose format has been determined in advance by the printing device 7. (Step 113)
As described above, it is possible to take an image with the line-of-sight input digital still camera device 5 while observing the damaged portion of the repaired vehicle, and specify the damage position, the damage range, the deformation amount, or the damage degree by inputting the image into the system. Therefore, it is possible to quickly calculate the parts, repair time, and cost required for the subsequent repair.
[0110]
【The invention's effect】
According to the present invention, when the image of a plurality of repaired vehicles is captured by the line-of-sight input digital still camera device, and the repaired vehicle data is input to the calculation device, the calculation device has damage that can be quantified by the line-of-sight input. The damage position, damage range and deformation amount are identified based on the repair vehicle data, and the repair cost estimate of the repair vehicle is based on the various stored and selected work data and the specified damage position, damage range and deformation amount. I do. Therefore, the damage position, the damage range, and the deformation amount can be visually confirmed so far, and the trouble of manually inputting these can be saved, and further, the visual error can be prevented.
[0111]
In addition, the repair cost can be estimated simply and quantitatively, and the basis of the estimated content can be recorded together with the photographed image, so that the repair cost estimation work can be made uniform and appropriate and transparent sheet metal work can be estimated in advance.
[0112]
Furthermore, the estimation process can be performed efficiently, and the time taken to create the estimate can be greatly reduced.
Next, in the case of damage that cannot be quantified by line-of-sight input, the repair vehicle data and non-damaged vehicle image data are compared and identified, and the damage position, damage range, and damage degree are specified, and stored and selected in advance. The repair cost of the repaired vehicle is estimated based on the various work data thus specified and the specified damage position, damage range, and deformation amount. Therefore, here again, it is possible to visually confirm the damage position, damage range, and damage degree required for the conventional estimation calculation, and to save the trouble of manually inputting these, and to prevent visual errors.
[0113]
Furthermore, since the estimate prepared using the repair cost estimation system according to the present invention can clearly indicate the damage position and the like together with specific numerical values, a clear and transparent estimate is presented to the user. be able to.
[Brief description of the drawings]
FIG. 1 is a block diagram of a vehicle repair cost estimation system according to an embodiment of the present invention.
FIG. 2 is a block diagram of a line-of-sight digital still camera according to the present embodiment.
FIG. 3 is a front view showing pixels of an image sensor portion of the line-of-sight input digital still camera according to the present embodiment.
FIG. 4 is a photographed image diagram of the vehicle repair cost estimation system according to the present embodiment.
FIG. 5 is a photographed image diagram of the vehicle repair cost estimation system according to the present embodiment.
FIG. 6 is a photographed image diagram of the vehicle repair cost estimation system according to the present embodiment.
FIG. 7 is a repair vehicle diagram displayed on the display device of the vehicle repair cost estimation system according to the present embodiment.
FIG. 8 is a diagram for displaying the time for the attachment / detachment work of the repaired vehicle displayed on the display device of the vehicle repair cost estimation system according to the present embodiment;
FIG. 9 is a diagram for displaying a cost for correcting or replacing a repaired vehicle displayed on the display device of the vehicle repair cost estimating system according to the present embodiment;
FIG. 10 is a flowchart showing the operation principle of the vehicle repair instruction system according to the present embodiment.
[Explanation of symbols]
1 ... Personal computer
1a: Central processing unit
1b ... Main memory device
2 ... I / O interface
3 ... Auxiliary storage device
4 ... Input device
5 ... Gaze input digital still camera
6 ... Display device
7 ... Printing device
8: Communication device
40: Image storage unit
41 ... Image sensor
44 ... MPU
45 ・ ・ ・ Interface

Claims (3)

プログラムされた計算装置により修理車両の修理費見積もりを行う車両修理費見積もりシステムにおいて、
画像の二次平面上における視線位置を検出するイメージセンサを有し、このイメージセンサにより検出された視線位置データに基づいて修理車両を撮影する撮影者の視線位置を当該修理車両の損傷部検出データとして記憶するとともに、撮影画像データを記憶する画像記憶部を有し、この画像記憶部に記憶された損傷部検出データ及び撮影画像データを修理車両データとして出力する視線入力デジタルスチルカメラ装置と、
車両の部品価格及びこの部品の交換あるいは修正に要する工賃を算出するための基礎となる作業指数データ群、並びに、車両の破損部位と損傷度に伴って交換、脱着、修正、調整等が必要となる部品との対応データ等の車両属性データを格納した記憶装置と、
修理費計算に必要な修理車両データ等を入力する入力装置と、
図形及び各種データを表示するための表示装置と、
前記憶装置に格納された車両属性データから前記修理車両に対応する車両属性データを検索するとともに、前記視線入力デジタルスチルカメラ装置の出力に基づき入力された前記修理車両データを用いて修理車両の損傷位置、損傷範囲及び変形量またはこれらのうち少なくとも1つを特定し、当該修理車両の修理費を計算する中央処理装置とを備え、
前記中央処理装置は、前記修理車両に関する修理車両データ及び前記修理車両に対応する車両属性データまたはこれらのうち少なくとも1つを前記表示装置に表示させるとともに、前記車両属性データ及び前記修理車両データに基づいて修理費見積もりを行い前記表示装置に表示させることを特徴とする車両修理費見積もりシステム。
In a vehicle repair cost estimation system that estimates the repair cost of a repaired vehicle using a programmed computing device,
An image sensor for detecting a line-of-sight position on a secondary plane of an image, and a photographer's line-of-sight position for photographing a repair vehicle based on the line-of-sight position data detected by the image sensor. And a line-of-sight input digital still camera device that has an image storage unit that stores captured image data and outputs the damaged portion detection data and the captured image data stored in the image storage unit as repair vehicle data;
Work index data group which is the basis for calculating vehicle parts price and labor required for replacement or correction of this part, and replacement, detachment, correction, adjustment etc. are required according to the damaged part and damage degree of the vehicle A storage device storing vehicle attribute data such as correspondence data with
An input device for inputting repair vehicle data necessary for repair cost calculation,
A display device for displaying graphics and various data;
The vehicle attribute data corresponding to the repaired vehicle is retrieved from the vehicle attribute data stored in the previous storage device, and the repaired vehicle data is damaged by using the repaired vehicle data input based on the output of the line-of-sight input digital still camera device. A central processing unit for identifying a position, a damage range and a deformation amount or at least one of them, and calculating a repair cost of the repaired vehicle ,
The central processing unit causes the display device to display repair vehicle data related to the repair vehicle and vehicle attribute data corresponding to the repair vehicle or at least one of them, and based on the vehicle attribute data and the repair vehicle data A vehicle repair cost estimation system, wherein repair cost estimation is performed and displayed on the display device .
プログラムされた計算装置により修理車両の修理費見積もりを行う車両修理費見積もりシステムにおいて、
画像の二次平面上における視線位置を検出するイメージセンサを有し、このイメージセンサにより検出された視線位置データに基づいて修理車両を撮影する撮影者の視線位置を当該修理車両の損傷部検出データとして記憶するとともに、撮影画像データを記憶する画像記憶部を有し、この画像記憶部に記憶された損傷部検出データ及び撮影画像データを修理車両データとして出力する視線入力デジタルスチルカメラ装置と、
車両の部品価格及びこの部品の交換あるいは修正に要する工賃を算出するための基礎となる作業指数データ群、並びに、車両の破損部位と損傷度に伴って交換、脱着、修正、調整等が必要となる部品との対応データ、修理車両に対応する非損傷車両画像データ等の車両属性データを格納した記憶装置と、
修理費計算に必要な修理車両データ等を入力する入力装置と、
図形及び各種データを表示するための表示装置と、
前記憶装置に格納された車両属性データから前記修理車両に対応する車両属性データを検索するとともに、前記視線入力デジタルスチルカメラ装置の出力に基づき入力された前記修理車両データを用いて修理車両の損傷位置、損傷範囲及び損傷度またはこれらのうち少なくとも1つを特定し、当該修理車両の修理費を計算する中央処理装置とを備え、
前記中央処理装置は、前記修理車両に関する修理車両データ及び前記修理車両に対応する車両属性データまたはこれらのうち少なくとも1つを前記表示装置に表示させ、前記非損傷車両画像データと前記修理車両データとを比較演算して修理車両の損傷位置、損傷範囲及び損傷度またはこれらのうち少なくとも1つを特定し、前記車両属性データ及び前記修理車両データに基づいて修理費見積もりを行い前記表示装置に表示させることを特徴とする車両修理費見積もりシステム。
In a vehicle repair cost estimation system that estimates the repair cost of a repaired vehicle using a programmed computing device,
An image sensor for detecting a line-of-sight position on a secondary plane of an image, and a photographer's line-of-sight position for photographing a repair vehicle based on the line-of-sight position data detected by the image sensor. And a line-of-sight input digital still camera device that has an image storage unit that stores captured image data and outputs the damaged portion detection data and the captured image data stored in the image storage unit as repair vehicle data;
Work index data group which is the basis for calculating vehicle parts price and labor required for replacement or correction of this part, and replacement, detachment, correction, adjustment etc. are required according to the damaged part and damage degree of the vehicle Storage device storing vehicle attribute data such as correspondence data with non-damaged vehicle image data corresponding to a repair vehicle,
An input device for inputting repair vehicle data necessary for repair cost calculation,
A display device for displaying graphics and various data;
The vehicle attribute data corresponding to the repaired vehicle is retrieved from the vehicle attribute data stored in the previous storage device, and the repaired vehicle data is damaged by using the repaired vehicle data input based on the output of the line-of-sight input digital still camera device. A central processing unit for determining a position, a damage range and a damage degree or at least one of them, and calculating a repair cost of the repaired vehicle ,
The central processing unit, the repair of at least one repair vehicle data and of the vehicle attribute data or those corresponding to the repair vehicle about the vehicle is displayed on the display device, wherein the non-damaged vehicle image data and the repair vehicle data And calculating at least one of the damage position, damage range and damage degree of the repaired vehicle, estimating the repair cost based on the vehicle attribute data and the repaired vehicle data, and displaying the repair cost on the display device. A vehicle repair cost estimation system characterized by that.
前記修理車両データは、複数の視線位置に基づく損傷部検出データからなり、各視線位置をつなぐ線分を損傷部検出データとするとともに、各視線位置をつなぐ線分を輪郭とする閉じられた区画範囲を損傷部検出データとすることを特徴とする請求項1または請求項2記載の車両修理費見積もりシステム。 The repair vehicle data is composed of damaged portion detection data based on a plurality of line-of-sight positions, the line segments connecting the line-of-sight positions are used as damaged portion detection data, and the closed section is contoured with the line segments connecting the line-of-sight positions 3. The vehicle repair cost estimation system according to claim 1, wherein the range is damaged portion detection data.
JP23313097A 1997-08-28 1997-08-28 Vehicle repair cost estimation system and recording medium storing repair cost estimation program Expired - Lifetime JP3808182B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP23313097A JP3808182B2 (en) 1997-08-28 1997-08-28 Vehicle repair cost estimation system and recording medium storing repair cost estimation program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP23313097A JP3808182B2 (en) 1997-08-28 1997-08-28 Vehicle repair cost estimation system and recording medium storing repair cost estimation program

Publications (2)

Publication Number Publication Date
JPH1173456A JPH1173456A (en) 1999-03-16
JP3808182B2 true JP3808182B2 (en) 2006-08-09

Family

ID=16950223

Family Applications (1)

Application Number Title Priority Date Filing Date
JP23313097A Expired - Lifetime JP3808182B2 (en) 1997-08-28 1997-08-28 Vehicle repair cost estimation system and recording medium storing repair cost estimation program

Country Status (1)

Country Link
JP (1) JP3808182B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11341746B2 (en) * 2017-11-21 2022-05-24 Advanced New Technologies Co., Ltd. Method and apparatus for identifying a damaged part of a vehicle, server, client and system

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000348093A (en) * 1999-06-02 2000-12-15 Eac:Kk Process control system and computer-readable medium where program is recorded
JP2001229239A (en) * 2000-02-15 2001-08-24 Eac:Kk System and method for estimating vehicle repair
JP2002063293A (en) * 2000-08-21 2002-02-28 Holiday:Kk Session system for deciding processing to object via session
JP2002073857A (en) * 2001-07-23 2002-03-12 Tsubasa System Co Ltd System and method of calculating vehicle work wage
JP2003228634A (en) * 2002-02-05 2003-08-15 Mazda Motor Corp Damage level determination device and method for product and recording medium with its program recorded
JP2003228633A (en) * 2002-02-05 2003-08-15 Mazda Motor Corp Damage level determination device and method for product and recording medium with its program recorded
JP2005056023A (en) * 2003-07-31 2005-03-03 Secom Techno Service Co Ltd Operation managing system
JP2005071180A (en) * 2003-08-26 2005-03-17 Tsubasa System Co Ltd Repair estimate sheet transfer method
CN103493051B (en) * 2011-02-25 2016-11-09 奥达特克斯有限责任公司 For estimating the system of collsion damage to automobile, method and apparatus
US20130311111A1 (en) * 2012-05-15 2013-11-21 Arne K. Lewis Damage assessment system and methods of operating same
JP5258008B1 (en) * 2012-09-14 2013-08-07 株式会社ケンテックス Vehicle repair cost estimation system and apparatus
EP3019984A4 (en) * 2013-07-08 2016-12-21 Oct Triple Ind Llc System and method for pre-evaluation vehicle diagnostic and repair cost estimation
GB201517462D0 (en) * 2015-10-02 2015-11-18 Tractable Ltd Semi-automatic labelling of datasets
CN108860085A (en) * 2015-12-18 2018-11-23 张莉 Auto repair shop based on ZigBee wireless telecommunications intelligently repairs system
JP6954741B2 (en) * 2017-01-13 2021-10-27 株式会社ブロードリーフ Damage judgment device, period / schedule calculation device and repair / repair cost calculation device using this device.
CN111971522B (en) * 2018-03-29 2023-01-13 特威纳有限公司 Vehicle detection system
JP6782497B1 (en) * 2019-05-31 2020-11-11 ホームネットカーズ株式会社 Simple quotation device, simple quotation system, control method of simple quotation system, program, and recording medium
CN111369373B (en) * 2020-03-06 2023-05-05 德联易控科技(北京)有限公司 Vehicle interior damage determination method and device
CN113954688B (en) * 2020-07-01 2024-01-23 广汽埃安新能源汽车有限公司 Method and system for estimating driving range of electric automobile

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06139252A (en) * 1992-10-23 1994-05-20 Toshiba Syst Kaihatsu Kk Method for generating estimation sheet and device for generating and portable estimation sheet
JPH07101423B2 (en) * 1992-12-28 1995-11-01 株式会社イー・エー・シー Car repair quotation system
JPH09329430A (en) * 1996-06-12 1997-12-22 Minolta Co Ltd Method and device for measuring degree of damage of object and repair cost calculating device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11341746B2 (en) * 2017-11-21 2022-05-24 Advanced New Technologies Co., Ltd. Method and apparatus for identifying a damaged part of a vehicle, server, client and system

Also Published As

Publication number Publication date
JPH1173456A (en) 1999-03-16

Similar Documents

Publication Publication Date Title
JP3808182B2 (en) Vehicle repair cost estimation system and recording medium storing repair cost estimation program
US7773773B2 (en) Method and system for determining a volume of an object from two-dimensional images
CN109547753B (en) Method and system for providing at least one image captured by a scene camera of a vehicle
EP1983484B1 (en) Three-dimensional-object detecting device
US8515152B2 (en) Process and system for analyzing deformations in motor vehicles
JP4380838B2 (en) Video image automatic road sign recognition method, road sign automatic recognition device, and road sign automatic recognition program
EP1386800A2 (en) System and method for recognizing damaged portion of vehicle after accident
KR20010108507A (en) System for recognizing damaged part of accident-involved car and computer-read-able medium on which program is recorded
CN110569864A (en) vehicle loss image generation method and device based on GAN network
JP2000517452A (en) Viewing method
CN110569856B (en) Sample labeling method and device, and damage category identification method and device
CN108323209B (en) Information processing method, system, cloud processing device and computer storage medium
US20220358751A1 (en) Tool for labelling training images for a vehicle characteristic detection model
US20090010496A1 (en) Image information processing apparatus, judging method, and computer program
JP4517003B2 (en) Automatic road sign recognition system
CN110929782B (en) River channel abnormity detection method based on orthophoto map comparison
EP1215612A1 (en) System for estimating car repair expense and estimating method
JP6123265B2 (en) Information processing apparatus, vehicle identification method, and vehicle identification program
CN110969135B (en) Vehicle logo recognition method in natural scene
JP3194913B2 (en) Vehicle repair cost calculation system
JP4057571B2 (en) Image analysis system and image analysis method
JP2861014B2 (en) Object recognition device
JP3801732B2 (en) Vehicle damage data recognition system and computer-readable recording medium on which vehicle damage data recognition program is recorded
CN114677331A (en) Pipe defect detection method and device based on fusion of gray level image and depth data
CN109690555A (en) Face detector based on curvature

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060123

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060517

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313114

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090526

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090526

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110526

Year of fee payment: 5

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term