JP4946238B2 - Vehicle periphery photographing transmission device and vehicle periphery photographing transmission program - Google Patents

Vehicle periphery photographing transmission device and vehicle periphery photographing transmission program Download PDF

Info

Publication number
JP4946238B2
JP4946238B2 JP2006201847A JP2006201847A JP4946238B2 JP 4946238 B2 JP4946238 B2 JP 4946238B2 JP 2006201847 A JP2006201847 A JP 2006201847A JP 2006201847 A JP2006201847 A JP 2006201847A JP 4946238 B2 JP4946238 B2 JP 4946238B2
Authority
JP
Japan
Prior art keywords
image
past
facility
shooting
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006201847A
Other languages
Japanese (ja)
Other versions
JP2008026253A (en
Inventor
豊 吾妻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2006201847A priority Critical patent/JP4946238B2/en
Publication of JP2008026253A publication Critical patent/JP2008026253A/en
Application granted granted Critical
Publication of JP4946238B2 publication Critical patent/JP4946238B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Instructional Devices (AREA)
  • Navigation (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Description

本発明は、車両周辺撮影送信装置および車両周辺撮影送信プログラムに関する。   The present invention relates to a vehicle periphery photographing transmission device and a vehicle periphery photographing transmission program.

従来、地図表示装置、ナビゲーション装置等において、施設情報(POI情報)が広く用いられている。店舗の閉店や新たな開店などに施設情報を追従させるためには、頻繁な更新が必要となる。施設情報の頻繁な更新を実施するためには、施設の変化を継続的に収集することが必要である。実際には、調査員が日々調査を実施している。   Conventionally, facility information (POI information) has been widely used in map display devices, navigation devices, and the like. In order for the facility information to follow the closing of a store or the opening of a new store, frequent updates are required. In order to frequently update facility information, it is necessary to continuously collect changes in facilities. In fact, investigators conduct daily surveys.

また、特許文献1には、車両のユーザの音声により施設情報の誤りを検知する技術が開示されている。この技術によれば、施設情報の誤りを指摘するユーザの音声の情報が車両からセンタに集められ、その情報を元にセンタが施設情報の更新を実施する。
特開2004−239727号公報
Patent Document 1 discloses a technique for detecting an error in facility information using the voice of a user of a vehicle. According to this technique, voice information of a user who points out an error in facility information is collected from the vehicle to the center, and the center updates the facility information based on the information.
JP 2004-239727 A

しかし、特許文献1に記載の技術では、ユーザが施設情報の誤りを声に出す必要があり、ユーザに負担がかかる。   However, with the technique described in Patent Document 1, it is necessary for the user to speak out the facility information error, which places a burden on the user.

本発明は上記点に鑑み、新規な方法で、施設情報の更新を実現することを目的とする。   An object of this invention is to implement | achieve the update of facility information by a novel method in view of the said point.

上記の目的を達成するための本発明の第1の特徴においては、車両に搭載される車両周辺撮影送信装置が、当該車両の周辺を撮影するカメラを備え、さらに、ある施設について過去に撮影された過去画像を取得する。そして、車両周辺撮影送信装置は、過去画像中の当該施設の、当該過去画像中の交差点に対する相対位置を、特定し、取得された過去画像中の交差点の位置および特定した前記相対位置に基づいて、前記撮影画像中の当該施設の画像(以下、該当位置画像という)を特定し、前記該当位置画像がが、取得した過去画像中の当該施設の画像と同じであるか否かを判定し、判定結果が否定的なものであるとき、撮影画像をセンタに送信する。 In the first feature of the present invention for achieving the above object, a vehicle periphery photographing transmission device mounted on a vehicle includes a camera for photographing the periphery of the vehicle, and is further photographed in the past for a certain facility. Get past images. Then, the vehicle periphery photographing transmission device identifies the relative position of the facility in the past image with respect to the intersection in the past image, and based on the acquired position of the intersection in the past image and the identified relative position. the said facility image in the captured image (hereinafter, referred to corresponding position image) to identify the corresponding position image, but to determine the same in either with the facility of an image in the past image acquired, When the determination result is negative, the captured image is transmitted to the center.

これによって、センタに、格納画像中の施設の場所に当該施設と異なるものがあることを示す撮影画像が送信されるので、センタ、またはセンタを介してその情報を取得した装置または人は、この比較結果の情報に基づいて、施設情報を更新することができる。また、このように、交差点からの相対位置を利用することで、過去画像中の当該施設と比較する対象の画像をより精度良く特定することができる。 As a result, a photographed image indicating that there is something different from the facility in the location of the facility in the stored image is transmitted to the center, so that the center or the device or person who acquired the information through the center The facility information can be updated based on the comparison result information . In addition, by using the relative position from the intersection in this way, it is possible to more accurately identify the target image to be compared with the facility in the past image.

また、車両周辺撮影送信装置は、当該車両の現在位置を特定するようになっていてもよい。その場合、車両周辺撮影送信装置は、過去画像が撮影されたときの撮影視点位置を取得し、取得した撮影視点位置と特定した現在位置とが同じであるか否かを判定し、その判定結果が肯定的であることに基づいて、当該車両の周辺をカメラで撮影するようになっていてもよい。このように、取得した過去画像の撮影位置に当該車両がさしかかったときに撮影を行うことで、無駄な撮影および情報の送信を減らすことができる。なお、ここでいう「撮影視点位置と現在位置とが同じ」とは、2つの位置がまったく同じである場合も、許容誤差(例えば10メートル、0.1秒の走行距離等)の範囲内で同じである場合も含む。   Moreover, the vehicle periphery imaging | photography transmission apparatus may identify the present position of the said vehicle. In that case, the vehicle periphery photographing transmission device acquires the photographing viewpoint position when the past image is photographed, determines whether or not the acquired photographing viewpoint position and the specified current position are the same, and the determination result Based on being positive, the surroundings of the vehicle may be photographed with a camera. In this way, by performing shooting when the vehicle approaches the shooting position of the acquired past image, it is possible to reduce unnecessary shooting and information transmission. Here, “the photographing viewpoint position and the current position are the same” means that even if the two positions are exactly the same, within a range of an allowable error (for example, 10 meters, a travel distance of 0.1 seconds, etc.). Including the same case.

また、車両周辺撮影送信装置は、さらに、当該車両の走行方向を特定するようになっていてもよい。この場合、車両周辺撮影送信装置は、さらに、過去画像が撮影されたときの撮影方向を取得し、「取得した撮影視点位置と特定した現在位置とが同じであり、かつ、取得した撮影方向と特定した走行方向とが同じである」か否かを判定するようになっていてもよい。このように、取得した過去画像の撮影位置で撮影方向へ走行する当該車両がさしかかったときに撮影を行うことで、無駄な撮影および情報の送信を減らすことができる。カメラでの撮影は、常時実施されており、撮影時間や撮影位置などの付加情報と共に記憶媒体に一定時間保持されるようにしてもよい。そのような構成であれば、瞬時に撮影をする必要なく、記憶媒体より必要とする画像を取得できる。   Further, the vehicle periphery photographing transmission device may further specify the traveling direction of the vehicle. In this case, the vehicle periphery photographing transmission device further acquires a photographing direction when the past image is photographed, and “the acquired photographing viewpoint position is the same as the specified current position, and the acquired photographing direction and It may be determined whether or not the specified traveling direction is the same. As described above, by performing shooting when the vehicle traveling in the shooting direction approaches the shooting position of the acquired past image, it is possible to reduce unnecessary shooting and transmission of information. Shooting with a camera is always performed and may be held in a storage medium for a certain period of time together with additional information such as shooting time and shooting position. With such a configuration, it is possible to acquire a necessary image from a storage medium without having to shoot instantly.

また、車両周辺撮影送信装置は、さらに、当該車両の走行レーンを特定するようになっていてもよい。この場合、車両周辺撮影送信装置は、さらに、過去画像が撮影されたときの撮影視点位置のレーンを取得し、「取得した撮影視点位置と特定した現在位置とが同じであり、かつ、撮影視点位置のレーンと特定した走行方向のレーンとが同じである」か否かを判定するようになっていてもよい。このようになっていることで、取得した過去画像の撮影位置で、当該撮影位置のあるレーンを走行する当該車両がさしかかったときに撮影を行うことで、無駄な撮影および情報の送信を減らすことができる。 Further, the vehicle periphery photographing transmission device may further specify a travel lane of the vehicle. In this case, the vehicle periphery photographing transmission device further acquires the lane of the photographing viewpoint position when the past image is photographed, and “the acquired photographing viewpoint position is the same as the specified current position, and the photographing viewpoint It may be determined whether or not the lane at the position is the same as the lane in the specified traveling direction. In this way, at the shooting position of the acquired past image, shooting is performed when the vehicle traveling on the lane where the shooting position is located, thereby reducing unnecessary shooting and transmission of information. It is Ru can.

また、車両周辺撮影送信装置は、過去画像中の当該施設の画像のうち、当該施設の看板の画像と、該当位置画像中の当該看板の位置に相当する画像と、を比較し、その比較結果に応じて、該当位置画像と、過去画像中の当該施設の画像とが同じであるか否かを判断するようになっていてもよい。建物の輪郭、デザインが変わらずに、看板だけが変化する場合があること、および、看板は施設の特徴を顕著に表すものであることに鑑みれば、この看板を比較対象とすることで、より精度良く施設の変化を検出することができる。 Further, the vehicle periphery photographing transmission device compares the image of the signboard of the facility with the image corresponding to the position of the signboard in the corresponding position image among the images of the facility in the past image , and the comparison result Accordingly, it may be determined whether the corresponding position image is the same as the image of the facility in the past image. In view of the fact that only the signboard may change without changing the outline and design of the building, and that the signboard represents the feature of the facility, it is more It is possible to detect changes in facilities with high accuracy.

また、本発明の第の特徴は、車両に搭載される車両周辺撮影送信装置のための車両周辺撮影送信プログラムであって、施設について過去に撮影された過去画像を取得する過去画像取得手段、前記過去画像中の前記施設の、前記過去画像中の交差点に対する相対位置を、特定し、当該車両の周辺を撮影するカメラが撮影した結果の撮影画像中の交差点の位置および特定した前記相対位置に基づいて、前記撮影画像中の当該施設に該当する位置の画像(以下、該当位置画像という)を特定し、前記該当位置画像が、当該取得手段が取得した当該過去画像中の当該施設の画像と同じであるか否かを判定する比較手段、および当該比較手段の判定結果が否定的なものであるとき、当該撮影画像をセンタに送信する送信手段として、コンピュータを機能させる車両周辺撮影送信プログラム。としても捉えることができる。 A first feature of the present invention is a vehicle periphery photographing transmission program for a vehicle periphery photographing transmission device mounted on a vehicle, the past image obtaining means for obtaining a past image photographed in the past for a facility, wherein the facility in the past in the image, the relative position with respect to the intersection of the past in the image, identified, located and identified the relative position of the intersection in the photographed image obtained by the camera for photographing the periphery of this the vehicle photographed Based on the above, the image of the position corresponding to the facility in the captured image (hereinafter referred to as the corresponding position image) is specified, and the corresponding position image is the image of the facility in the past image acquired by the acquisition unit. comparing means for determining whether or not the same as, and when the determination result of the comparison means is negative, the transmitting means for transmitting the captured image to the center, the machine computer Vehicle around shooting the transmission program to be. Can also be understood.

以下、本発明の一実施形態について説明する。図1および図2に、本実施形態の作動の概要を模式的に示す。道路1を走行する車両2は、道路1上の特定の地点で前方を撮影することで撮影画像3を取得する。そして、車両2の装置内にあらかじめ記録されている、その撮影地点において過去に撮影された格納画像4と、撮影画像3とを比較する。   Hereinafter, an embodiment of the present invention will be described. 1 and 2 schematically show an outline of the operation of the present embodiment. The vehicle 2 traveling on the road 1 acquires the captured image 3 by capturing the front at a specific point on the road 1. Then, the stored image 4 recorded in advance in the device of the vehicle 2 and photographed in the past at the photographing point is compared with the photographed image 3.

このような車両2の作動を実現するために、車両2には車両用ナビゲーション装置5が搭載されている。車両2は、後述するような作動により、無線通信の基地局6と無線接続することで、基地局6に接続する通信ネットワーク7を介して、通信ネットワーク7に接続するセンタ8と通信することができる。そして車両2は、上述の比較の結果、格納画像4中の施設の画像と、撮影画像3中の当該施設に対応する位置の画像とが異なっていれば、撮影画像3をセンタ8に送信する。センタ8は、送信された撮影画像3を受信し、自動でまたはユーザの操作に基づいて、その撮影画像3に基づいて、当該施設の情報を更新する。   In order to realize such an operation of the vehicle 2, a vehicle navigation device 5 is mounted on the vehicle 2. The vehicle 2 can communicate with the center 8 connected to the communication network 7 via the communication network 7 connected to the base station 6 by wirelessly connecting to the base station 6 for wireless communication by the operation described below. it can. Then, as a result of the comparison, the vehicle 2 transmits the captured image 3 to the center 8 if the image of the facility in the stored image 4 is different from the image at the position corresponding to the facility in the captured image 3. . The center 8 receives the transmitted captured image 3 and updates the information of the facility based on the captured image 3 automatically or based on a user operation.

図3に、車両用ナビゲーション装置5のハードウェア構成を示す。この車両用ナビゲーション装置5は、カメラ10、位置検出器11、画像表示装置12、操作スイッチ群13、スピーカ14、無線通信部15、RAM16、ROM17、地図データ取得部18、および制御回路19を有している。   FIG. 3 shows a hardware configuration of the vehicle navigation device 5. This vehicle navigation device 5 includes a camera 10, a position detector 11, an image display device 12, an operation switch group 13, a speaker 14, a wireless communication unit 15, a RAM 16, a ROM 17, a map data acquisition unit 18, and a control circuit 19. is doing.

カメラ10は、車両2に取り付けられ、制御回路19からの制御に基づいて車両2の進行方向に対する特定の方向(例えば前方)を撮影し、撮影の結果である撮影画像を、制御回路19に出力する。   The camera 10 is attached to the vehicle 2, captures a specific direction (for example, forward) with respect to the traveling direction of the vehicle 2 based on control from the control circuit 19, and outputs a captured image that is a result of the capturing to the control circuit 19. To do.

位置検出器11は、いずれも周知の図示しない地磁気センサ、ジャイロスコープ、車速センサ、およびGPS受信機等のセンサを有しており、これらセンサの各々の性質に基づいた、車両の現在位置や向きを特定するための情報を制御回路19に出力する。画像表示装置12は、制御回路19から出力された映像信号に基づいた映像を表示する。   The position detector 11 includes a well-known sensor (not shown) such as a geomagnetic sensor, a gyroscope, a vehicle speed sensor, and a GPS receiver. The current position and direction of the vehicle based on the characteristics of each of these sensors. Is output to the control circuit 19. The image display device 12 displays a video based on the video signal output from the control circuit 19.

操作スイッチ群13は、車両用ナビゲーション装置5に設けられた複数のメカニカルスイッチ、画像表示装置12の表示面に重ねて設けられたタッチパネル等の入力装置から成り、ユーザによるメカニカルスイッチの押下、タッチパネルのタッチに基づいた信号を制御回路19に出力する。   The operation switch group 13 includes a plurality of mechanical switches provided in the vehicle navigation device 5 and an input device such as a touch panel provided so as to overlap the display surface of the image display device 12. A signal based on the touch is output to the control circuit 19.

無線通信部15は、図示しないアンテナが受信した信号に対して増幅、周波数変換、復調、A/D変換等、所定の無線受信処理を施し、その結果を制御回路19に出力する。また無線通信部15は、制御回路19から入力されたデータに対してD/A変換、変調、周波数変換、増幅等、所定の無線送信処理を施し、その結果の信号を上記のアンテナに出力する。このような作動により、無線通信部15は、制御回路19の制御に基づいて、基地局6と無線接続し、その無線接続を介してセンタ8と通信することができる。   The wireless communication unit 15 performs predetermined wireless reception processing such as amplification, frequency conversion, demodulation, and A / D conversion on a signal received by an antenna (not shown), and outputs the result to the control circuit 19. In addition, the wireless communication unit 15 performs predetermined wireless transmission processing such as D / A conversion, modulation, frequency conversion, amplification, and the like on the data input from the control circuit 19 and outputs the resultant signal to the antenna. . By such an operation, the wireless communication unit 15 can wirelessly connect to the base station 6 and communicate with the center 8 via the wireless connection based on the control of the control circuit 19.

地図データ取得部18は、HDD等の不揮発性の記憶媒体およびそれら記憶媒体に対してデータの読み出しおよび書き込みを行う装置から成る。そして地図データ取得部18は、それら記憶媒体中の、制御回路19が実行するプログラム、経路案内用の地図データ等を取得できるようになっている。   The map data acquisition unit 18 includes a nonvolatile storage medium such as an HDD and a device that reads and writes data from and to the storage medium. The map data acquisition unit 18 can acquire the program executed by the control circuit 19, map data for route guidance, and the like in these storage media.

地図データは、道路データおよび施設データを有している。道路データは、リンクの位置情報、種別情報、ノードの位置情報、種別情報、および、ノードとリンクとの接続関係の情報等を含んでいる。施設データは、施設毎のレコードを複数有しており、各レコードは、対象とする施設の名称情報、所在位置情報、土地地番情報、電話番号情報、施設種類情報等を示すデータを有している。また、それらレコードの中には、対象とする施設の過去撮影情報を有するものもある。個々の過去撮影情報は、格納画像(特許請求の範囲の過去画像に相当する)データ、撮影視点位置データ、撮影方向データ、看板位置データ等を有している。   The map data has road data and facility data. The road data includes link position information, type information, node position information, type information, information on connection relations between nodes and links, and the like. The facility data has a plurality of records for each facility, and each record has data indicating name information, location information, land lot number information, telephone number information, facility type information, etc. of the target facility. Yes. Some of these records have past shooting information of the target facility. Each past shooting information includes stored image data (corresponding to the past image in the claims) data, shooting viewpoint position data, shooting direction data, signboard position data, and the like.

格納画像データは、道路を走行している車両等からその周囲の特定の方向(例えば前方)を撮影した画像のうち、道路および対象とする施設(およびその施設の看板)のみを、それらの配置を保存したまま、抽出した画像である。この格納画像の撮影は、製造業者等によって地図データ作成前に行われる。図4に、格納画像データの示す画像の一例40を示す。この格納画像40は、道路41〜44、これら道路が接続する交差点45、この交差点45の左手前にある施設建物46、および施設看板47の画像を含む。なお、1つの格納画像データが、複数の施設建物の画像を含んでいてもよい。この場合、当該格納画像データを含む過去撮影情報は、複数の施設のレコードに共有されることになる。   The stored image data includes only the road and the target facility (and the signboard of the facility) in an image of a specific direction (for example, forward) around the vehicle or the like traveling on the road. This is an extracted image while keeping. This stored image is taken by a manufacturer or the like before creating map data. FIG. 4 shows an example 40 of the image indicated by the stored image data. The stored image 40 includes images of roads 41 to 44, an intersection 45 to which these roads are connected, a facility building 46 in front of the intersection 45, and a facility signboard 47. One stored image data may include images of a plurality of facility buildings. In this case, past photographing information including the stored image data is shared by records of a plurality of facilities.

撮影視点位置データは、当該格納画像が撮影されたときの、当該車両の位置(例えば、特定のリンク上の、当該リンクの始点ノードから100メートルの位置)を示すデータである。撮影方向データは、当該格納画像が撮影されたときの当該車両の走行方向(例えば、リンクの始点ノード→終点ノードへの方向)を示すデータである。看板位置データは、当該格納画像中の施設建物の画像に対する看板画像の相対位置(例えば右上端、右下端)を示すデータである。撮影視点位置データ、撮影方向データ、および看板位置データは、対応する格納画像データを地図データに含めるときに作成されるようになっている。   The shooting viewpoint position data is data indicating the position of the vehicle (for example, a position on a specific link 100 meters from the start point node of the link) when the stored image is shot. The shooting direction data is data indicating the traveling direction of the vehicle (for example, the direction from the link start point node to the end point node) when the stored image is shot. The signboard position data is data indicating the relative position (for example, the upper right end and the lower right end) of the signboard image with respect to the facility building image in the stored image. The photographing viewpoint position data, the photographing direction data, and the signboard position data are created when the corresponding stored image data is included in the map data.

制御回路(コンピュータに相当する)18は、ROM17または地図データ取得部18から読み出した車両用ナビゲーション装置5の動作のためのプログラムを実行し、その実行の際にはRAM16、ROM17、および地図データ取得部18から情報を読み出し、RAM16および地図データ取得部18に対して情報の書き込みを行い、位置検出器11、画像表示装置12、操作スイッチ群13、およびスピーカ14と信号の授受を行う。   The control circuit (corresponding to a computer) 18 executes a program for the operation of the vehicle navigation device 5 read from the ROM 17 or the map data acquisition unit 18, and at the time of executing the RAM 16, the ROM 17, and the map data acquisition Information is read from the unit 18, information is written to the RAM 16 and the map data acquisition unit 18, and signals are exchanged with the position detector 11, the image display device 12, the operation switch group 13, and the speaker 14.

制御回路19がプログラムを実行することによって行う具体的な処理としては、現在位置特定処理、誘導経路算出処理、地図表示制御処理、経路案内処理、施設データ更新処理、施設撮影・送信処理等がある。   Specific processing performed by the control circuit 19 executing the program includes current position specifying processing, guidance route calculation processing, map display control processing, route guidance processing, facility data update processing, facility photographing / transmission processing, and the like. .

現在位置特定処理は、位置検出器11からの信号に基づいて、周知のマップマッチング等の技術を用いて車両の現在位置や向きを特定する処理である。   The current position specifying process is a process for specifying the current position and direction of the vehicle based on a signal from the position detector 11 using a known technique such as map matching.

地図表示制御処理は、現在位置特定処理によって特定された現在位置、操作スイッチ群13による操作、および他の処理からの要求に応じて、地図データ取得部18を介して地図データの一部を取得し、取得した当該一部について地図を、その中の道路データおよび施設データに基づいて、生成し、生成した地図データを画像表示装置に描画させる処理である。   The map display control process acquires part of the map data via the map data acquisition unit 18 according to the current position specified by the current position specifying process, the operation by the operation switch group 13, and a request from other processes. Then, a map is generated for the acquired part based on the road data and facility data therein, and the generated map data is drawn on the image display device.

誘導経路算出処理は、現在位置特定処理によって特定した現在位置、およびユーザが操作スイッチ群13を用いて特定した目的地に基づいて、当該現在位置から当該目的地までの最適な誘導経路を算出する処理である。   The guide route calculation process calculates an optimum guide route from the current position to the destination based on the current position specified by the current position specifying process and the destination specified by the user using the operation switch group 13. It is processing.

経路案内処理は、自車両を誘導経路に沿って走行させるためにドライバーを支援する処理である。具体的には、経路案内処理においては、制御回路19は、車両2が当該案内交差点に近づいたとき、音声または画像によってドライバーに進行方向等を指示する。音声を用いた指示はスピーカ14を用いて行い、画像を用いた指示は、地図表示制御処理に、当該交差点の拡大図を表示させるよう要求することで実現する。   The route guidance process is a process for assisting the driver in order to drive the host vehicle along the guidance route. Specifically, in the route guidance process, the control circuit 19 instructs the driver in the direction of travel or the like by voice or image when the vehicle 2 approaches the guidance intersection. The instruction using the voice is performed using the speaker 14, and the instruction using the image is realized by requesting the map display control process to display an enlarged view of the intersection.

以下、施設データ更新処理および施設撮影・送信処理のための車両用ナビゲーション装置5の作動について説明する。図5に、これら施設データ更新処理および施設撮影・送信処理において車両用ナビゲーション装置5およびセンタ8がやりとりする信号の送信タイミングの一例を示す。車両用ナビゲーション装置5は、施設撮影・送信処理を実施することで、必要に応じてカメラ10で撮影した画像を含む信号510をセンタ8に送信する。この施設撮影・送信処理のために、制御回路19は、図6に示すプログラム100を繰り返し実行する。   Hereinafter, the operation of the vehicle navigation device 5 for facility data update processing and facility photographing / transmission processing will be described. FIG. 5 shows an example of the transmission timing of signals exchanged between the vehicle navigation device 5 and the center 8 in the facility data update process and the facility photographing / transmission process. The vehicle navigation apparatus 5 transmits a signal 510 including an image captured by the camera 10 to the center 8 as necessary by performing facility imaging / transmission processing. For this facility photographing / transmission process, the control circuit 19 repeatedly executes the program 100 shown in FIG.

その実行において、制御回路19は、まずステップ105で、地図データ取得部18を用いて、過去撮影情報を、より詳しくは、過去撮影情報中の複数の撮影視点位置データおよび撮影方向データを読み出す。続いてステップ110で、現在位置特定処理を実行することで、自車両2の位置を算出する。   In the execution, first, in step 105, the control circuit 19 uses the map data acquisition unit 18 to read past photographing information, more specifically, a plurality of photographing viewpoint position data and photographing direction data in the past photographing information. Subsequently, in step 110, the current position specifying process is executed to calculate the position of the host vehicle 2.

続いてステップ120では、ステップ105および110の実行結果に基づいて、他の車両等によって格納画像が撮影されたときと同じ走行状態に車両2があるか否かを判定する。ここで、「同じ」とは、「所定の許容誤差範囲内で同じ」であることを意味する。この判定は、具体的には、車両2の現在位置が、複数の撮影始点位置データのいずれか1つと、(例えば10メートルの許容誤差範囲内で)同じであり、かつ、車両2の進行方向が、当該1つの撮影始点位置データに対応する撮影方向データと同じであるとき、肯定的な結果となり、それ以外の場合に、否定的な結果となる。判定結果が肯定的な場合、続いてステップ130を実行し、否定的な場合、プログラム100の1回分の実行を終了する。   Subsequently, at step 120, based on the execution results of steps 105 and 110, it is determined whether or not the vehicle 2 is in the same running state as when the stored image was taken by another vehicle or the like. Here, “same” means “same within a predetermined allowable error range”. Specifically, in this determination, the current position of the vehicle 2 is the same as any one of the plurality of shooting start point position data (for example, within an allowable error range of 10 meters), and the traveling direction of the vehicle 2 Is the same as the shooting direction data corresponding to the one shooting start position data, a positive result is obtained, and a negative result is obtained otherwise. If the determination result is affirmative, step 130 is subsequently executed. If the determination result is negative, execution of the program 100 once is terminated.

ステップ130では、カメラ10を用いて車両2の周辺を撮影し、その結果の撮影画像を取得する。図7に、取得した撮影画像の一例70を示す。この撮影画像70は、交差点71、施設建物72、施設看板73、および他の建造物の画像を含んでいる。   In step 130, the periphery of the vehicle 2 is imaged using the camera 10, and the resulting captured image is acquired. FIG. 7 shows an example 70 of the acquired captured image. The captured image 70 includes images of an intersection 71, a facility building 72, a facility signboard 73, and other buildings.

続いてステップ140では、ステップ120で、同じ走行状態であると判定した対象の走行状態に対応した格納画像を読み出す。続いてステップ150では、ステップ130で取得した撮影画像と、ステップ140で取得した格納画像とが、同じであるか否かを判定する。より詳しくは、当該格納画像中の比較対象となる施設の画像(以下、画像Aという)と、当該撮影画像中の当該施設に対応する位置の画像(特許請求の範囲の該当位置画像の一例に相当する。以下、画像Bという)とが同じであるか否かを判定する。ここで、「同じ」とは、「所定の許容誤差範囲内で同じ」であることを意味する。判定結果が否定的な場合、続いてステップ160を実行し、肯定的な場合、プログラム100の1回分の実行が終了する。 Subsequently, in step 140, a stored image corresponding to the target traveling state determined to be the same traveling state in step 120 is read. Subsequently, in step 150, it is determined whether or not the captured image acquired in step 130 and the stored image acquired in step 140 are the same. More specifically, an image of a facility to be compared in the stored image (hereinafter referred to as image A) and an image of a position corresponding to the facility in the captured image (as an example of the corresponding position image in the claims) (Hereinafter referred to as image B) is determined. Here, “same” means “same within a predetermined allowable error range”. If the determination result is negative, step 160 is subsequently executed. If the determination result is affirmative, one execution of the program 100 ends.

ステップ160では、ステップ130で取得した撮影画像を、無線通信部15を用いてセンタ8に送信する。ステップ160の後、プログラム100の1回分の実行が終了する。   In step 160, the captured image acquired in step 130 is transmitted to the center 8 using the wireless communication unit 15. After step 160, one execution of the program 100 ends.

なお、ステップ150における判定のために、制御回路19は、図8に示すプログラム200を実行する。このプログラム200は、プログラム100の一部である。このプログラム200の実行においては、制御回路19は、まずステップ210で、上述の通り取得した格納画像および撮影画像のそれぞれについて、画像認識技術を用いて、道路の白線を検出し、その検出した白線の交差する位置を、交差点の位置として特定する。   For the determination in step 150, the control circuit 19 executes the program 200 shown in FIG. This program 200 is a part of the program 100. In the execution of the program 200, the control circuit 19 first detects the white line of the road using the image recognition technique for each of the stored image and the captured image acquired as described above in step 210, and the detected white line. The position at which the two intersect is specified as the position of the intersection.

続いてステップ220で、各画像中で、比較対象の画像A、Bの位置を特定する。具体的には、格納画像中で、当該格納画像に対応する施設のレコード中の位置情報および道路データ中の当該交差点(すなわちノード)の位置情報との関係に基づいて、格納画像中における当該施設の当該交差点に対する相対位置(すなわち画像Aの交差点に対する相対位置)を特定する。この相対位置は、例えば、例えば交差点のすぐ右下の位置、交差点から画像長さの1/4だけ左上に離れた位置、となる。あるいは、画像認識技術により、格納画像から道路以外の構造物の位置を抽出し、その位置の画像を画像Aとし、その画像Aの位置に基づいて上述の相対位置を特定するようになっていてもよい。さらに、特定した相対位置関係および撮影画像中の交差点の位置に基づいて、撮影画像中の当該施設に対応する位置の画像Bを特定する。   Subsequently, at step 220, the positions of the images A and B to be compared are specified in each image. Specifically, in the stored image, the facility in the stored image is based on the relationship between the position information in the record of the facility corresponding to the stored image and the position information of the intersection (ie, node) in the road data. Relative position with respect to the intersection (that is, relative position with respect to the intersection of image A). This relative position is, for example, a position immediately below and right from the intersection, or a position away from the intersection by ¼ of the image length to the upper left. Alternatively, the position of the structure other than the road is extracted from the stored image by the image recognition technique, the image at the position is set as the image A, and the above-described relative position is specified based on the position of the image A. Also good. Furthermore, based on the specified relative positional relationship and the position of the intersection in the captured image, the image B at the position corresponding to the facility in the captured image is specified.

続いてステップ230では、特定した画像Aの建物部分と画像Bの建物部分とを比較し、それらの輪郭およびデザイン(例えば、色彩、模様、質感)が一致するか否かを判定する。ここで、画像Aおよび画像Bの建物部分とは、画像Aおよび画像Bの看板部分を除いた部分をいう。画像A中の看板部分の位置は、施設データ中の当該施設についての看板位置データに基づいて特定する。また、画像B中の看板部分の位置も、画像A中の看板部分の位置と同じであるとして特定する。ステップ230の判定結果が肯定的である場合、続いてステップ240を実行し、否定的である場合続いてステップ260を実行する。   Subsequently, in step 230, the building part of the specified image A and the building part of the image B are compared, and it is determined whether or not their contours and designs (for example, color, pattern, texture) match. Here, the building portions of the images A and B are portions excluding the signboard portions of the images A and B. The position of the signboard portion in the image A is specified based on the signboard position data for the facility in the facility data. Also, the position of the signboard portion in the image B is specified as being the same as the position of the signboard portion in the image A. If the determination result of step 230 is affirmative, step 240 is subsequently executed, and if it is negative, step 260 is subsequently executed.

ステップ240では、特定した画像Aの看板部分と画像Bの看板部分とを比較し、それらの輪郭およびデザインが一致するか否かを判定する。ステップ240の判定結果が肯定的である場合、続いてステップ250を実行し、否定的である場合続いてステップ260を実行する。   In step 240, the sign part of the specified image A and the sign part of the image B are compared, and it is determined whether or not their contours and designs match. If the determination result of step 240 is affirmative, step 250 is subsequently executed, and if it is negative, step 260 is subsequently executed.

ステップ250では、ステップ120における判定結果として、2つの画像A、Bは同じ画像であると判定する。ステップ260では、ステップ120における判定結果として、2つの画像A、Bは異なる画像であると判定する。ステップ250および260の後、プログラム200の実行が終了する。   In step 250, as the determination result in step 120, it is determined that the two images A and B are the same image. In step 260, as the determination result in step 120, it is determined that the two images A and B are different images. After steps 250 and 260, execution of program 200 ends.

このようなプログラム100を制御回路19に実行させることで、車両用ナビゲーション装置5は、格納画像が撮影された位置の情報(ステップ105参照)および現在の車両位置(ステップ110参照)に基づいて、他の車両等によって格納画像が撮影されたときと同じ走行状態(具体的には走行位置、走行方向)に車両2があると判定すると(ステップ120参照)、地図データから取得した格納画像(ステップ140参照)中の施設の画像と今回撮影した画像(ステップ130参照)中の当該施設に該当する位置の画像とが同じか否かを判定し(ステップ150参照)、その判定結果が否定的なものであるときには、今回撮影した画像をセンタ8に送信し(ステップ160参照)、その判定結果が肯定的なものであるときには、今回撮影した画像をセンタ8に送信することを抑制する。 By causing the control circuit 19 to execute such a program 100, the vehicle navigation device 5 is based on the information on the position where the stored image was taken (see step 105) and the current vehicle position (see step 110). When it is determined that the vehicle 2 is in the same driving state (specifically, the driving position and the driving direction) when the stored image is taken by another vehicle or the like (see step 120), the stored image acquired from the map data (step 140) and whether the image at the position corresponding to the facility in the currently captured image (see step 130) is the same (see step 150), and the determination result is negative. but when those, sends this captured image to the center 8 (see step 160), when the determination result is affirmative, shooting time Refrains from transmitting an image to the center 8.

これによって、車両用ナビゲーション装置5からセンタ8に、格納画像中の施設の場所に当該施設と異なるものがあることを示す撮影画像が送信されるので、センタ8、またはセンタ8を介してその情報を取得した装置または人は、この比較結果の情報に基づいて、施設情報を更新することができる。   As a result, a photographed image indicating that there is something different from the facility in the location of the facility in the stored image is transmitted from the vehicle navigation device 5 to the center 8, so that information is transmitted via the center 8 or the center 8. The device or person who has acquired the information can update the facility information based on the information of the comparison result.

また、2つの画像の比較の結果、それらが異なっているときに撮影画像を送信するという車両用ナビゲーション装置5の作動、および、比較の結果2つの画像が同じときに撮影画像の送信を抑制するという車両用ナビゲーション装置5の作動により、センタ8側は、画像を受信したときに、比較結果が異なっていた可能性が高いと判断することができる。つまり、これらの車両用ナビゲーション装置5は、このような作動全体により、格納画像と撮影画像との比較結果の情報を送信していることになる。   Further, as a result of the comparison between the two images, the operation of the vehicle navigation device 5 that transmits the captured image when they are different, and the transmission of the captured image is suppressed when the two images are the same as a result of the comparison. By the operation of the vehicle navigation device 5, the center 8 side can determine that there is a high possibility that the comparison result is different when the image is received. That is, these vehicle navigation devices 5 transmit information on the comparison result between the stored image and the captured image through such an overall operation.

また、車両用ナビゲーション装置5は、格納画像が撮影されたときの撮影視点位置を取得し、取得した撮影視点位置と特定した現在位置とが同じであるか否かを判定し、その判定結果が肯定的であることに基づいて、車両2の周辺をカメラで撮影するようになっている。このように、取得した過去画像の撮影位置に当該車両2がさしかかったときにのみ撮影を行うことで、無駄な撮影および情報の送信を減らすことができる。   Further, the vehicle navigation device 5 acquires the shooting viewpoint position when the stored image is shot, determines whether or not the acquired shooting viewpoint position is the same as the specified current position, and the determination result is Based on being positive, the periphery of the vehicle 2 is photographed with a camera. As described above, by performing shooting only when the vehicle 2 approaches the shooting position of the acquired past image, wasteful shooting and information transmission can be reduced.

さらには、車両用ナビゲーション装置5は、格納画像が撮影されたときの撮影方向を取得し、「取得した撮影視点位置と特定した現在位置とが同じであり、かつ、取得した撮影方向と特定した走行方向とが同じである」か否かを判定するようになっている。このように、格納画像の過去の撮影位置で撮影方向へ走行する当該車両がさしかかったときに撮影を行うことで、無駄な撮影および情報の送信をさらに減らすことができる。   Further, the vehicle navigation device 5 acquires the shooting direction when the stored image is shot, and identifies “the acquired shooting viewpoint position is the same as the specified current position and the acquired shooting direction is specified. It is determined whether or not the traveling direction is the same. As described above, by performing shooting when the vehicle traveling in the shooting direction at the past shooting position of the stored image approaches, it is possible to further reduce unnecessary shooting and transmission of information.

また、格納画像中の施設の画像Aと今回撮影した撮影画像中の当該施設に該当する位置の画像Bとの比較(ステップ150および図8のプログラム200参照)においては、車両用ナビゲーション装置5は、格納画像および撮影画像中の道路の白線から各画像中の交差点を特定し(ステップ210参照)、格納画像中の当該施設の交差点に対する相対位置に基づいて、撮影画像中の当該施設に該当する位置を特定する(ステップ220参照)。そして、画像A中の当該施設の建物の画像の輪郭および色と、画像B中の当該建物に対応する位置の画像の輪郭およびデザインが一致しており(ステップ230参照)、かつ、画像A中の当該施設の看板の画像の輪郭および色と、画像B中の当該看板に対応する位置の画像の輪郭およびデザインが一致しているとき(ステップ240参照)、画像Aと画像Bとが同じであると判定する(ステップ250参照)。そしてこれらのうちの1つでも一致していないときには、画像Aと画像Bとが同じでないと判定する(ステップ260参照)。   Further, in the comparison between the image A of the facility in the stored image and the image B at the position corresponding to the facility in the captured image taken this time (see step 150 and the program 200 in FIG. 8), the vehicle navigation device 5 The intersection in each image is identified from the stored image and the white line of the road in the captured image (see step 210), and corresponds to the facility in the captured image based on the relative position to the intersection of the facility in the stored image. The position is specified (see step 220). The contour and color of the image of the building of the facility in the image A match the contour and design of the image at the position corresponding to the building in the image B (see step 230), and in the image A When the outline and color of the image of the signboard of the facility coincide with the outline and design of the image at the position corresponding to the signboard in the image B (see step 240), the image A and the image B are the same. It is determined that it exists (see step 250). When even one of these does not match, it is determined that the image A and the image B are not the same (see step 260).

このように、車両用ナビゲーション装置5は、格納画像中の当該施設と格納画像中の交差点との位置関係を特定し、撮影画像中の交差点の位置および特定した位置関係に基づいて、上述した該当画像Bを特定する。このように、交差点からの相対位置を利用することで、格納画像中の当該施設と比較する対象の画像Bをより精度良く特定することができる。   As described above, the vehicle navigation device 5 identifies the positional relationship between the facility in the stored image and the intersection in the stored image, and the above-described correspondence is based on the position of the intersection in the captured image and the identified positional relationship. Image B is specified. In this manner, by using the relative position from the intersection, the image B to be compared with the facility in the stored image can be identified with higher accuracy.

また、車両用ナビゲーション装置5は、過去画像中の当該施設の画像のうち、当該施設の看板の画像と、画像B中の当該看板の位置に相当する画像と、を比較することで、画像Bと画像Aとの比較を実現するようになっていてもよい。建物の輪郭、デザインが変わらずに、看板だけが変化する場合があること、および、看板は施設の特徴を顕著に表すものであることを鑑みれば、この看板を比較対象とすることで、より精度良く施設の変化を検出することができる。   In addition, the vehicle navigation device 5 compares the image of the signboard of the facility with the image corresponding to the position of the signboard in the image B among the images of the facility in the past image, so that the image B And image A may be compared. Considering that only the signboard may change without changing the outline and design of the building, and that the signboard represents the feature of the facility, it is more It is possible to detect changes in facilities with high accuracy.

このようにして送信された図5の信号510を受けるセンタ8は、通信機能を有する周知のコンピュータ(パーソナルコンピュータ、ワークステーション等)であり、通信ネットワーク7および基地局6を介して車両用ナビゲーション装置5と通信することができるようになっている。また、センタ8は、上述したような地図データを記憶する、書き換え可能な不揮発性の記憶媒体(例えばハードディスク)を有している。   The center 8 that receives the signal 510 of FIG. 5 transmitted in this way is a well-known computer (personal computer, workstation, etc.) having a communication function, and is a vehicle navigation device via the communication network 7 and the base station 6. 5 can be communicated with. The center 8 has a rewritable nonvolatile storage medium (for example, a hard disk) that stores the map data as described above.

図9に、このセンタ8の作動の手順をフローチャートで示す。センタ8は、車両用ナビゲーション装置5から送信された信号510を受信する度に、ステップ310で画像を受信したと判定し、続いてステップ320で、受信した画像に基づいて施設データの更新を行う。   FIG. 9 is a flowchart showing the operation procedure of the center 8. Every time the center 8 receives the signal 510 transmitted from the vehicle navigation device 5, the center 8 determines that an image has been received in step 310, and subsequently, in step 320, updates the facility data based on the received image. .

この施設データの更新においては、センタ8は、受信した撮影画像を画像表示装置に表示させることで作業者に提示する。作業者は、当該撮影画像を見て、どのように施設データを更新するかを判断し、その判断に応じた更新内容をセンタ8に入力する。センタ8は、この入力に基づいて地図データ中の施設データを更新する。あるいは、センタ8の記憶媒体が、あらかじめ複数種類の施設(特定の種類のコンビニエンスストア、特定の種類のファミリーレストラン等)のそれぞれについての看板の画像を記憶していてもよい。このとき、センタ8は、受信した撮影画像から、記憶媒体中の看板画像を、周知のパターンマッチング技術により探し出し、見つかった看板の種別、見つかった看板の撮影画像中の位置、および、その撮影画像の撮影位置、撮影方向等の情報に基づいて、自動的に施設データを更新するようになっていてもよい。   In updating the facility data, the center 8 presents the received captured image to the operator by displaying it on the image display device. The operator looks at the captured image, determines how to update the facility data, and inputs the updated content according to the determination to the center 8. The center 8 updates the facility data in the map data based on this input. Alternatively, the storage medium of the center 8 may store in advance an image of a signboard for each of a plurality of types of facilities (a specific type of convenience store, a specific type of family restaurant, etc.). At this time, the center 8 searches for the signboard image in the storage medium from the received photographed image by a well-known pattern matching technique, the type of the signboard found, the position of the found signboard in the photographed image, and the photographed image. The facility data may be automatically updated based on information such as the shooting position and the shooting direction.

また、車両用ナビゲーション装置5の制御回路19は、ユーザの操作スイッチ群13を用いた実行指示等に基づいて、施設データ更新処理を実行し、その施設データ更新処理中に、無線通信部15を用いて、施設データ更新要求の信号520をセンタ8宛てに送信する。   In addition, the control circuit 19 of the vehicle navigation device 5 executes the facility data update process based on an execution instruction or the like using the operation switch group 13 of the user, and the wireless communication unit 15 is turned on during the facility data update process. The facility data update request signal 520 is transmitted to the center 8.

センタ8は、この施設データ更新要求の信号520を受信する度に、ステップ330で、施設データ更新要求を受信したと判定し、続いてステップ340で、記憶媒体中の更新された施設データを含む信号530を車両用ナビゲーション装置5に送信する。   Each time the center 8 receives the facility data update request signal 520, the center 8 determines in step 330 that it has received the facility data update request, and subsequently includes the updated facility data in the storage medium in step 340. The signal 530 is transmitted to the vehicle navigation device 5.

無線通信部15を介してこの信号530を受信した車両用ナビゲーション装置5の制御回路19は、上述の施設データ更新処理によって、信号530中の更新された施設データの内容を、自らが地図表示処理等において使用する地図データ中の更新された施設データに反映させる。   The control circuit 19 of the vehicle navigation apparatus 5 that has received the signal 530 via the wireless communication unit 15 performs the map display process on the content of the updated facility data in the signal 530 by the facility data update process described above. It is reflected in the updated facility data in the map data used in

以上のように、センタ8は、受信した撮影画像データ(すなわち比較結果)に基づいて、施設データを更新し、その施設データの送信要求を受けると、更新された施設データを送信する。また、車両用ナビゲーション装置5は、車両2や他の車両から送信された撮影画像に基づいてセンタ8で更新された施設データを受信し、この受信したデータに基づいて自らが使用する施設データを更新することができる。   As described above, the center 8 updates the facility data based on the received photographed image data (that is, the comparison result), and transmits the updated facility data when receiving the facility data transmission request. In addition, the vehicle navigation device 5 receives the facility data updated in the center 8 based on the captured image transmitted from the vehicle 2 or another vehicle, and the facility data used by itself based on the received data. Can be updated.

なお、上記の実施形態において、車両用ナビゲーション装置5が、車両周辺撮影送信装置の一例に相当し、プログラム100およびプログラム200が、車両周辺撮影送信プログラムの一例に相当する。また、制御回路19がプログラム100のステップ140を実行することで過去画像取得手段の一例として機能し、ステップ150を実行することで比較手段の一例として機能し、ステップ160を実行することで送信手段の一例として機能し、ステップ110を実行することで特定手段の一例として機能し、ステップ105を実行することで過去撮影情報取得手段の一例として機能し、ステップ120を実行することで判定手段の一例として機能する。
(他の実施形態)
以上、本発明の実施形態について説明したが、本発明の範囲は、上記実施形態のみに限定されるものではなく、本発明の各発明特定事項の機能を実現し得る種々の形態を包含するものである。
In the above embodiment, the vehicle navigation device 5 corresponds to an example of a vehicle periphery photographing transmission device, and the program 100 and the program 200 correspond to an example of a vehicle periphery photographing transmission program. Further, the control circuit 19 functions as an example of a past image acquisition unit by executing step 140 of the program 100, functions as an example of a comparison unit by executing step 150, and transmits by executing step 160. , Function as an example of specifying means by executing step 110, function as an example of past photographing information acquisition means by executing step 105, and example of determining means by executing step 120 Function as.
(Other embodiments)
As mentioned above, although embodiment of this invention was described, the scope of the present invention is not limited only to the said embodiment, The various form which can implement | achieve the function of each invention specific matter of this invention is included. It is.

例えば、制御回路19は、プログラム100のステップ110で、当該車両の走行レーンを特定するようになっていてもよい。このために、位置検出器11のGPS受信機は、(例えば、D−GPS方式や、干渉測位GPS方式を用いて)1メートル以下の精度で現在位置を特定することができるようになっており、さらに、地図データの道路データは、各リンクのレーン数の情報、各レーンの位置の情報を含んでいればよい。さらに、地図データの過去撮影情報は、格納画像が撮影されたときの、撮影位置のレーンを特定する情報を含んでいてもよい。このとき、制御回路19は、プログラム100のステップ120で、「取得した撮影視点位置と特定した現在位置とが同じであり、かつ、撮影視点位置のレーンと特定した走行方向のレーンとが同じである」か否かを判定するようになっていてもよい。また、ステップ120では、「取得した撮影視点位置と特定した現在位置とが同じであり、かつ、撮影視点位置のレーンと特定した走行方向のレーンとが同じであり、かつ、取得した撮影方向と特定した走行方向とが同じである」か否かを判定するようになっていてもよい。このようになっていることで、取得した格納画像の撮影位置に、当該撮影位置のあるレーンを走行する当該車両がさしかかったときに撮影を行うことで、無駄な撮影および情報の送信を減らすことができる。   For example, the control circuit 19 may specify the travel lane of the vehicle in step 110 of the program 100. For this reason, the GPS receiver of the position detector 11 can specify the current position with an accuracy of 1 meter or less (for example, using the D-GPS method or the interference positioning GPS method). Furthermore, the road data of the map data only needs to include information on the number of lanes of each link and information on the position of each lane. Furthermore, the past shooting information of the map data may include information for specifying the lane at the shooting position when the stored image is shot. At this time, the control circuit 19 determines in step 120 of the program 100 that “the acquired shooting viewpoint position is the same as the specified current position, and the lane at the shooting viewpoint position is the same as the lane in the specified traveling direction. It may be determined whether or not there is. In step 120, “the acquired shooting viewpoint position and the specified current position are the same, the lane of the shooting viewpoint position is the same as the lane of the specified traveling direction, and the acquired shooting direction and It may be determined whether or not the specified traveling direction is the same. In this way, shooting is performed when the vehicle traveling on the lane with the shooting position approaches the shooting position of the acquired stored image, thereby reducing unnecessary shooting and transmission of information. Can do.

また、制御回路19は、プログラム200のステップ230および240の判定のどちらかのみを実行し、その判定結果が肯定的または否定的である場合に、それぞれステップ250およびステップ260を実行するようになっていてもよい。   Further, the control circuit 19 executes only one of the determinations of steps 230 and 240 of the program 200, and when the determination result is affirmative or negative, it executes steps 250 and 260, respectively. It may be.

また、上記の実施形態において、制御回路18がプログラムを実行することで実現している各機能は、それらの機能を有するハードウェア(例えば回路構成をプログラムすることが可能なFPGA)を用いて実現するようになっていてもよい。   In the above embodiment, each function realized by the control circuit 18 executing the program is realized using hardware having those functions (for example, an FPGA capable of programming the circuit configuration). You may come to do.

また、本発明に係る車両周辺撮影送信装置は、車両用ナビゲーション装置5に限らず、車両に搭載され、施設について過去に撮影された過去画像を取得し、カメラで撮影した結果の撮影画像中の当該施設に該当する位置の画像を、取得した過去画像中の当該施設の画像と比較し、その較結果の情報を、センタに送信するようになっているものであれば、どのようなものでもよい。   Further, the vehicle periphery photographing transmission device according to the present invention is not limited to the vehicle navigation device 5, and is mounted on the vehicle, acquires a past image taken in the past for the facility, and in the photographed image as a result of photographing with the camera. Any image can be used as long as the image of the location corresponding to the facility is compared with the image of the facility in the acquired past image and the comparison result information is transmitted to the center. Good.

本発明の実施形態の作動の概要を示す模式図である。It is a schematic diagram which shows the outline | summary of the action | operation of embodiment of this invention. 本実施形態の通信の概要を示す模式図である。It is a schematic diagram which shows the outline | summary of the communication of this embodiment. 車両用ナビゲーション装置5のハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware constitutions of the navigation apparatus 5 for vehicles. 車両用ナビゲーション装置5が記憶媒体から取得する格納画像40の一例を示す図である。It is a figure which shows an example of the stored image 40 which the navigation apparatus for vehicles 5 acquires from a storage medium. 車両用ナビゲーション装置5とセンタ8との間でやりとりされる信号の送信タイミングを示すシーケンス図である。FIG. 6 is a sequence diagram showing transmission timings of signals exchanged between the vehicle navigation device 5 and the center 8. 車両用ナビゲーション装置5の制御回路19が実行するプログラム100のフローチャートである。It is a flowchart of the program 100 which the control circuit 19 of the vehicle navigation apparatus 5 performs. 撮影画像70の一例を示す図である。4 is a diagram illustrating an example of a captured image 70. FIG. 制御回路19が実行するプログラム200のフローチャートである。It is a flowchart of the program 200 which the control circuit 19 performs. センタ8の作動を示すフローチャートである。3 is a flowchart showing the operation of the center 8.

符号の説明Explanation of symbols

1…道路、2…車両、3…撮影画像、4…格納画像、5…車両用ナビゲーション装置、
6…基地局、7…通信ネットワーク、8…センタ、10…カメラ、11…位置検出器、
12…画像表示装置、13…操作スイッチ群、14…スピーカ、15…無線通信部、
16…RAM、17…ROM、18…地図データ取得部、19…制御回路、
40…格納画像、41〜44…道路、45、71…交差点、46、72…施設建物、
47、73…施設看板、70…撮影画像、100、200…プログラム、
510〜530…信号。
DESCRIPTION OF SYMBOLS 1 ... Road, 2 ... Vehicle, 3 ... Photographed image, 4 ... Stored image, 5 ... Vehicle navigation apparatus,
6 ... base station, 7 ... communication network, 8 ... center, 10 ... camera, 11 ... position detector,
DESCRIPTION OF SYMBOLS 12 ... Image display apparatus, 13 ... Operation switch group, 14 ... Speaker, 15 ... Wireless communication part,
16 ... RAM, 17 ... ROM, 18 ... Map data acquisition unit, 19 ... Control circuit,
40 ... Stored image, 41-44 ... Road, 45, 71 ... Intersection, 46, 72 ... Facility building,
47, 73 ... Facility signboard, 70 ... Photographed image, 100, 200 ... Program,
510-530 ... signal.

Claims (6)

車両に搭載される車両周辺撮影送信装置であって、
前記車両の前方を撮影するカメラと
前記車両の現在位置および走行方向を特定する特定手段と、
施設について過去に撮影された過去画像を取得する過去画像取得手段と
前記取得手段が取得する前記過去画像が撮影されたときの撮影視点位置および撮影方向を取得する過去撮影情報取得手段と、
前記過去撮影情報取得手段が取得した前記撮影視点位置と前記特定手段が特定した前記現在位置とが同じであり、かつ、前記過去撮影情報取得手段が取得した前記撮影方向と前記特定手段が特定した前記走行方向とが同じであるか否かを判定する判定手段と、
前記過去撮影情報取得手段が取得した前記撮影視点位置と前記特定手段が特定した前記現在位置とが同じであり、かつ、前記過去撮影情報取得手段が取得した前記撮影方向と前記特定手段が特定した前記走行方向とが同じであると前記判定手段が判定した場合、前記カメラに前記車両の周辺を撮影させる手段と、
前記過去画像中の交差点の位置情報および前記施設の位置情報を地図データから読み出し、読み出した当該交差点および当該施設の位置情報に基づいて、前記過去画像中の前記施設の、前記過去画像中の前記交差点に対する相対位置を特定し、また、前記カメラが撮影した結果の撮影画像中の交差点の位置および特定した前記相対位置に基づいて、前記撮影画像中の前記施設に該当する位置の画像(以下、該当位置画像という)を特定し、前記該当位置画像が、前記取得手段が取得した前記過去画像中の前記施設の画像と同じであるか否かを判定する比較手段と、
前記比較手段の判定結果が否定的なものであるとき、前記撮影画像をセンタに送信する送信手段と、を備えた車両周辺撮影送信装置。
A vehicle periphery photographing transmission device mounted on a vehicle,
A camera for photographing the front of the vehicle ;
A specifying means for specifying a current position and a traveling direction of the vehicle;
Past image acquisition means for acquiring past images taken in the past for the facility ;
Past photographing information obtaining means for obtaining a photographing viewpoint position and a photographing direction when the past image obtained by the obtaining means is photographed;
The shooting viewpoint position acquired by the past shooting information acquisition unit is the same as the current position specified by the specifying unit, and the shooting direction acquired by the past shooting information acquisition unit and the specifying unit specified Determining means for determining whether or not the traveling direction is the same;
The shooting viewpoint position acquired by the past shooting information acquisition unit is the same as the current position specified by the specifying unit, and the shooting direction acquired by the past shooting information acquisition unit and the specifying unit specified Means for causing the camera to photograph the periphery of the vehicle when the determination means determines that the traveling direction is the same;
Reading the position information of the intersection of the past in the image positional information and the facility from the map data, based on the read the intersection and the position information of the facility, prior Symbol the facility in the past in the image, of the past in the image identifying a relative position with respect to the intersection, also based on the position and identified the relative position of the intersection in the photographed image obtained when the camera is taken, the position of the image corresponding to the facility in the captured image (hereinafter Comparing means for determining whether the corresponding position image is the same as the image of the facility in the past image acquired by the acquiring means;
A vehicle periphery photographing transmission device comprising: a transmission means for transmitting the photographed image to the center when the determination result of the comparison means is negative.
前記比較手段は、画像認識技術を用いて前記撮影画像中の交差点の位置および前記過去画像中の交差点の位置を特定することを特徴とする請求項1に記載の車両周辺撮影送信装置。 The vehicle periphery photographing transmission device according to claim 1, wherein the comparison unit specifies an intersection position in the photographed image and an intersection position in the past image by using an image recognition technique . 前記比較手段は、前記過去画像中の交差点の位置および特定した前記相対位置に基づいて、前記過去画像中の前記施設の画像を特定することを特徴とする請求項に記載の車両周辺撮影送信装置。 3. The vehicle periphery photographing transmission according to claim 2 , wherein the comparison unit specifies an image of the facility in the past image based on a position of an intersection in the past image and the specified relative position. apparatus. 前記特定手段は、さらに、前記車両の走行レーンを特定し、
前記過去撮影情報取得手段は、さらに、前記過去画像が撮影されたときの撮影視点位置
のレーンを取得し、
前記判定手段は、前記過去撮影情報取得手段が取得した前記撮影視点位置と前記特定手
段が特定した前記現在位置とが同じであり、かつ、前記過去撮影情報取得手段が取得した
前記撮影視点位置のレーンと前記特定手段が特定した前記走行方向のレーンとが同じであ
るか否かを判定することを特徴とする請求項2に記載の車両周辺撮影送信装置。
The specifying means further specifies a traveling lane of the vehicle,
The past shooting information acquisition unit further acquires a lane at a shooting viewpoint position when the past image was shot,
The determination unit has the same shooting viewpoint position acquired by the past shooting information acquisition unit as the current position specified by the specifying unit, and the shooting viewpoint position acquired by the past shooting information acquisition unit. The vehicle periphery photographing transmission device according to claim 2, wherein it is determined whether or not the lane and the lane in the traveling direction specified by the specifying unit are the same.
前記比較手段は、前記過去画像中の前記施設の画像のうち、前記施設の看板の画像と、
前記該当位置画像中の前記看板の位置に相当する画像と、を比較し、その比較結果に応じ
て、前記該当位置画像と、前記過去画像中の前記施設の画像とが同じであるか否かを判断
することを特徴とする請求項1ないし4のいずれか1つに記載の車両周辺撮影送信装置。
The comparing means includes an image of a signboard of the facility among the images of the facility in the past image,
The image corresponding to the position of the signboard in the corresponding position image is compared, and according to the comparison result, whether or not the corresponding position image and the image of the facility in the past image are the same The vehicle periphery photographing transmission device according to any one of claims 1 to 4, characterized by:
車両に搭載される車両周辺撮影送信装置のための車両周辺撮影送信プログラムであって

前記車両の現在位置および走行方向を特定する特定手段、
施設について過去に撮影された過去画像を取得する過去画像取得手段
前記取得手段が取得する前記過去画像が撮影されたときの撮影視点位置および撮影方向を取得する過去撮影情報取得手段、
前記過去撮影情報取得手段が取得した前記撮影視点位置と前記特定手段が特定した前記現在位置とが同じであり、かつ、前記過去撮影情報取得手段が取得した前記撮影方向と前記特定手段が特定した前記走行方向とが同じであるか否かを判定する判定手段、
前記過去撮影情報取得手段が取得した前記撮影視点位置と前記特定手段が特定した前記現在位置とが同じであり、かつ、前記過去撮影情報取得手段が取得した前記撮影方向と前記特定手段が特定した前記走行方向とが同じであると前記判定手段が判定した場合、前記カメラに前記車両の周辺を撮影させる手段、
前記過去画像中の交差点の位置情報および前記施設の位置情報を地図データから読み出し、読み出した当該交差点および当該施設の位置情報に基づいて、前記過去画像中の前記施設の、前記過去画像中の前記交差点に対する相対位置を、特定し、また、前記車両の前方を撮影するカメラが撮影した結果の撮影画像中の交差点の位置および特定した前記相対位置に基づいて、前記撮影画像中の前記施設に該当する位置の画像(以下、該当位置画像という)を特定し、前記該当位置画像が、前記取得手段が取得した前記過去画像中の前記施設の画像と同じであるか否かを判定する比較手段、および
前記比較手段の判定結果が否定的なものであるとき、前記撮影画像をセンタに送信する
送信手段として、コンピュータを機能させる車両周辺撮影送信プログラム。
A vehicle periphery photographing transmission program for a vehicle periphery photographing transmission device mounted on a vehicle,
,
A specifying means for specifying a current position and a traveling direction of the vehicle;
Past image acquisition means for acquiring past images taken in the past for the facility ;
Past shooting information acquisition means for acquiring a shooting viewpoint position and a shooting direction when the past image acquired by the acquisition means is shot;
The shooting viewpoint position acquired by the past shooting information acquisition unit is the same as the current position specified by the specifying unit, and the shooting direction acquired by the past shooting information acquisition unit and the specifying unit specified Determining means for determining whether or not the traveling direction is the same;
The shooting viewpoint position acquired by the past shooting information acquisition unit is the same as the current position specified by the specifying unit, and the shooting direction acquired by the past shooting information acquisition unit and the specifying unit specified Means for causing the camera to photograph the periphery of the vehicle when the determination means determines that the traveling direction is the same;
Reading the position information of the intersection of the past in the image positional information and the facility from the map data, based on the read the intersection and the position information of the facility, prior Symbol the facility in the past in the image, of the past in the image a relative position with respect to the intersection, identified, also on the basis of the said relative position camera for capturing the front is located and the specific intersection in the photographed image as a result of the photographing of the vehicle, in the facility in the captured image Comparison means for identifying an image of a corresponding position (hereinafter referred to as a corresponding position image) and determining whether the corresponding position image is the same as the image of the facility in the past image acquired by the acquisition means When the determination result of the comparison means is negative, vehicle periphery photographing transmission that causes a computer to function as transmission means for transmitting the photographed image to the center program.
JP2006201847A 2006-07-25 2006-07-25 Vehicle periphery photographing transmission device and vehicle periphery photographing transmission program Expired - Fee Related JP4946238B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006201847A JP4946238B2 (en) 2006-07-25 2006-07-25 Vehicle periphery photographing transmission device and vehicle periphery photographing transmission program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006201847A JP4946238B2 (en) 2006-07-25 2006-07-25 Vehicle periphery photographing transmission device and vehicle periphery photographing transmission program

Publications (2)

Publication Number Publication Date
JP2008026253A JP2008026253A (en) 2008-02-07
JP4946238B2 true JP4946238B2 (en) 2012-06-06

Family

ID=39117021

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006201847A Expired - Fee Related JP4946238B2 (en) 2006-07-25 2006-07-25 Vehicle periphery photographing transmission device and vehicle periphery photographing transmission program

Country Status (1)

Country Link
JP (1) JP4946238B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014215204A (en) * 2013-04-26 2014-11-17 パイオニア株式会社 Server device, terminal device, information processing method, information processing system and information processing program
JP2014215205A (en) * 2013-04-26 2014-11-17 パイオニア株式会社 Information processing device, server device, information processing method, information processing system and information processing program
JP2018010320A (en) * 2017-10-05 2018-01-18 パイオニア株式会社 Server device, terminal device, information processing method, information processing system, and information processing program
JP2019174845A (en) * 2019-07-08 2019-10-10 パイオニア株式会社 Server device, terminal device, information processing method, information processing system, and information processing program
JP2020004371A (en) * 2018-06-27 2020-01-09 バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド Method, device and system for processing image tagging information
JP2020013411A (en) * 2018-07-19 2020-01-23 Zホールディングス株式会社 Information providing device, information providing method, and program
JP2020013556A (en) * 2019-06-12 2020-01-23 Zホールディングス株式会社 Information processing device, information processing method, program, and application program
JP2020014158A (en) * 2018-07-19 2020-01-23 Zホールディングス株式会社 Information processing device, information processing method, program, and application program

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI578283B (en) * 2009-02-20 2017-04-11 尼康股份有限公司 Carrying information machines, information acquisition systems, information retrieval servers, and information machines
GB201202344D0 (en) * 2012-02-10 2012-03-28 Isis Innovation Method of locating a sensor and related apparatus
JP2016125851A (en) * 2014-12-26 2016-07-11 株式会社トヨタマップマスター Business status change estimation system of facility, output unit, method thereof, computer program thereof, and recording medium with computer program recorded therein
US10467284B2 (en) * 2015-08-03 2019-11-05 Google Llc Establishment anchoring with geolocated imagery
JP6838522B2 (en) 2017-08-10 2021-03-03 トヨタ自動車株式会社 Image collection systems, image collection methods, image collection devices, and recording media
JP6775555B2 (en) * 2018-08-30 2020-10-28 ヤフー株式会社 Information processing equipment, information processing methods and information processing programs
US20210396543A1 (en) * 2018-11-06 2021-12-23 Sony Group Corporation Information processing apparatus, information processing method, and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4479070B2 (en) * 2000-07-04 2010-06-09 株式会社ニコン Image data collection device
JP4685286B2 (en) * 2001-08-03 2011-05-18 三菱電機株式会社 Information update processing device
JP2004151523A (en) * 2002-10-31 2004-05-27 Mitsubishi Electric Corp Map data update apparatus

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014215204A (en) * 2013-04-26 2014-11-17 パイオニア株式会社 Server device, terminal device, information processing method, information processing system and information processing program
JP2014215205A (en) * 2013-04-26 2014-11-17 パイオニア株式会社 Information processing device, server device, information processing method, information processing system and information processing program
JP2018010320A (en) * 2017-10-05 2018-01-18 パイオニア株式会社 Server device, terminal device, information processing method, information processing system, and information processing program
JP2020004371A (en) * 2018-06-27 2020-01-09 バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド Method, device and system for processing image tagging information
US11106933B2 (en) 2018-06-27 2021-08-31 Baidu Online Network Technology (Beijing) Co., Ltd. Method, device and system for processing image tagging information
JP2020013411A (en) * 2018-07-19 2020-01-23 Zホールディングス株式会社 Information providing device, information providing method, and program
JP2020014158A (en) * 2018-07-19 2020-01-23 Zホールディングス株式会社 Information processing device, information processing method, program, and application program
JP2020013556A (en) * 2019-06-12 2020-01-23 Zホールディングス株式会社 Information processing device, information processing method, program, and application program
JP7160763B2 (en) 2019-06-12 2022-10-25 ヤフー株式会社 Information processing device, information processing system, information processing method, program, and application program
JP2019174845A (en) * 2019-07-08 2019-10-10 パイオニア株式会社 Server device, terminal device, information processing method, information processing system, and information processing program
JP2021099506A (en) * 2019-07-08 2021-07-01 パイオニア株式会社 Server device, terminal device, information processing method, information processing system, and information processing program

Also Published As

Publication number Publication date
JP2008026253A (en) 2008-02-07

Similar Documents

Publication Publication Date Title
JP4946238B2 (en) Vehicle periphery photographing transmission device and vehicle periphery photographing transmission program
CN108413975B (en) Map acquisition method and system, cloud processor and vehicle
JP4293917B2 (en) Navigation device and intersection guide method
JP4915281B2 (en) Signal detection device, signal detection method and program
US20200353914A1 (en) In-vehicle processing device and movement support system
JP4556742B2 (en) Vehicle direct image display control apparatus and vehicle direct image display control program
JP6106495B2 (en) Detection device, control method, program, and storage medium
CN110998684B (en) Image collection system, image collection method, image collection device, and recording medium
JP2012155660A (en) Map data generation device and travel support device
JP2015161592A (en) Navigation device, communication device, server device, control method, program, and storage medium
JP2018195227A (en) Driving support system
JP2013257268A (en) Information generation device, navigation device, control method, program, and recording medium
JP2018127065A (en) Parking support device
JP2005326168A (en) Driving support system, vehicle, and driving support method
JP2012048345A (en) On-vehicle device
JP5067847B2 (en) Lane recognition device and navigation device
JP2009068890A (en) Device, method and program for recording environmental sound pressure
JP4800252B2 (en) In-vehicle device and traffic information presentation method
JP2008293280A (en) Traffic light detection device, traffic light detection method, and program
US20190143926A1 (en) Vehicle management system, inspection information transmission system, information management system, vehicle management program, inspection information transmission program, and information management program
JP2001289651A (en) Navigation system, map matching method and recording medium
JP2005227035A (en) Navigation system
JP2023152109A (en) Feature detection device, feature detection method and computer program for detecting feature
JP4220354B2 (en) Other vehicle position display device and other vehicle information presentation method
JP2007249463A (en) Vehicle information acquisition system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080905

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101202

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101207

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110705

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110829

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120207

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120220

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150316

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4946238

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150316

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees