JP2020204709A - Map information update system and map information update method - Google Patents

Map information update system and map information update method Download PDF

Info

Publication number
JP2020204709A
JP2020204709A JP2019112275A JP2019112275A JP2020204709A JP 2020204709 A JP2020204709 A JP 2020204709A JP 2019112275 A JP2019112275 A JP 2019112275A JP 2019112275 A JP2019112275 A JP 2019112275A JP 2020204709 A JP2020204709 A JP 2020204709A
Authority
JP
Japan
Prior art keywords
delivery
information
image
data
map information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019112275A
Other languages
Japanese (ja)
Inventor
和男 歌代
Kazuo Utashiro
和男 歌代
Original Assignee
株式会社ジースキャン
G-Scan Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ジースキャン, G-Scan Co Ltd filed Critical 株式会社ジースキャン
Priority to JP2019112275A priority Critical patent/JP2020204709A/en
Publication of JP2020204709A publication Critical patent/JP2020204709A/en
Pending legal-status Critical Current

Links

Images

Abstract

To provide a map information update system and a map information update method capable of updating a map reflecting the latest situation almost every day.SOLUTION: A map information update system acquires, at any time, a delivery ledger, in which address information of a delivery is updated sequentially in units of house number, sequentially acquires delivery image data in time series together with at least any of photographing position information and the related data at the time of delivery by a plurality of delivery vehicles for deliveries, collects the acquired delivery image data together with its photographing position information, refers to the acquired photographing position information regarding each piece of the collected delivery image data, detects difference on the images with the delivery image data previously photographed at the same photographing position, refers to the acquired delivery ledger, verifies matching of the detected difference on the images with address information at a house number corresponding to the photographing position where the difference is detected, and updates information based on the difference on the images at the photographing position with respect to the map information when the matching is verified.SELECTED DRAWING: Figure 5

Description

本発明は、道路上を走行する車両により撮影された配達画像データに基づいて既存の地図情報を逐次更新する地図情報更新システム及び地図情報更新方法に関する。 The present invention relates to a map information updating system and a map information updating method for sequentially updating existing map information based on delivery image data taken by a vehicle traveling on a road.
近年においてPCやスマートフォン、タブレット型端末等を介して地図を画面上に表示して各種動作を実行するアプリケーションが普及している。特に近年においては、様々な道路上の地点で撮影した全周囲パノラマ画像を再生する、いわゆるストリートビューと呼ばれるサービスも実現されている。 In recent years, applications that display a map on a screen and execute various operations via a PC, a smartphone, a tablet terminal, or the like have become widespread. Particularly in recent years, a so-called street view service has also been realized, which reproduces panoramic images of the entire circumference taken at various points on the road.
このようなアプリケーションを通じて表示される地図情報は、実際の道路について撮影した画像データに対して画像認識処理を行うことにより取得される。従来は、このような画像データは航空写真を通じて撮像されたものを使用するのが一般的であったが、特に近年においては、道路上を走行する車両から撮影される走行画像を使用するケースが増加している(例えば、特許文献1、2参照。)。 The map information displayed through such an application is acquired by performing image recognition processing on the image data taken about the actual road. In the past, it was common to use such image data captured through aerial photographs, but in recent years, in particular, there have been cases where traveling images taken from vehicles traveling on the road are used. It is increasing (see, for example, Patent Documents 1 and 2).
特開2005−098853号公報JP-A-2005-098853 特開2010−156815号公報JP-A-2010-156815
上述した特許文献1、2の開示技術では、何れも高性能な全方位撮影カメラを車両に搭載し、高精度な地図を作成することを前提としている。このような全方位撮影カメラは、一般的に高価であることが多く、限られた車両にしか搭載することができない。このため、限られた車両では地図上の全ての道路を走行する上で長期間を要してしまう。その結果、ある道路上の撮影地点に着目した場合に、その全方位カメラが搭載された限られた車両の走行頻度はいきおい低くなってしまい、その撮影された走行画像に基づく地図の更新間隔が長期間に亘り空いてしまうという問題点が生じる。 The disclosed technologies of Patent Documents 1 and 2 described above are all based on the premise that a high-performance omnidirectional shooting camera is mounted on a vehicle to create a highly accurate map. Such omnidirectional shooting cameras are generally expensive and can only be installed in a limited number of vehicles. For this reason, it takes a long time for a limited number of vehicles to travel on all the roads on the map. As a result, when focusing on a shooting point on a certain road, the running frequency of the limited vehicle equipped with the omnidirectional camera becomes extremely low, and the update interval of the map based on the shot running image becomes very low. There is a problem that it will be vacant for a long time.
この更新間隔が長期間に亘り空くことになれば、その間において道路、建築構造物、土木構造物、入居者が変化した場合にそれが地図に反映されるのが遅くなってしまうという問題点が生じる。例えば、新たな道が開通した場合であっても、或いは新たにビルが建設された場合であっても、或いは新たにビルのテナントとしてコンビニエンスストアが入居した場合であってもこれが最新の地図に反映されていないことになる。 If this update interval is vacant for a long period of time, there is a problem that if the road, building structure, civil engineering structure, or resident changes during that period, it will be delayed to be reflected on the map. Occurs. For example, even if a new road is opened, a new building is constructed, or a convenience store moves in as a new tenant of the building, this is the latest map. It will not be reflected.
従って、地図を活用するユーザの利便性を考慮するのであれば、ほぼ毎日に亘り最新の状況が反映された地図を活用することができるシステムを提案する必要があった。 Therefore, considering the convenience of users who use maps, it was necessary to propose a system that can utilize maps that reflect the latest situation almost every day.
そこで、本発明を適用した地図情報更新システム及び地図情報更新方法は、上述した問題点を解決するために案出されたものであり、その目的とするところは、道路上を走行する車両により撮影された配達画像データと、撮影位置情報及び配達状況に関する関連データの少なくとも何れかに基づいて既存の地図情報を逐次更新する地図情報更新システム及び地図情報更新方法において、特に最新の道路、建築構造物、土木構造物、入居者等の状況が反映された地図にほぼ毎日に亘り更新することが可能な地図情報更新システム及び地図情報更新方法を提供することにある。 Therefore, the map information updating system and the map information updating method to which the present invention is applied have been devised in order to solve the above-mentioned problems, and the purpose thereof is to take a picture with a vehicle traveling on the road. In the map information update system and the map information update method that sequentially update the existing map information based on at least one of the delivered delivery image data and the related data regarding the shooting position information and the delivery status, particularly the latest roads and building structures. The purpose is to provide a map information update system and a map information update method that can be updated almost every day on a map that reflects the situation of civil engineering structures, residents, etc.
上述した課題を解決するために、本発明に係る地図情報更新システムは、地図情報を保持する地図情報保持手段と、番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得手段と、複数の配達物の配達用車両にそれぞれ設置され、当該各配達用車両の配達時において配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に時系列的に順次取得するデータ取得手段と、上記各データ取得手段によりそれぞれ取得された配達画像データをその撮影位置情報と共に収集するデータ収集サーバと、上記データ収集サーバにより収集された各配達画像データについて、取得した上記取得位置情報を参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出手段と、上記配達原簿情報取得手段により取得された配達原簿を参照し、上記差異検出手段により検出された画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合手段と、上記整合性照合手段により整合性が照合された場合には、地図情報保持手段により保持される地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新手段とを備えることを特徴とする。 In order to solve the above-mentioned problems, the map information updating system according to the present invention obtains a map information holding means for holding map information and a delivery ledger in which the destination information of deliveries is sequentially updated for each address. It is installed in each of the ledger information acquisition means and the delivery vehicle of a plurality of deliveries, and at the time of delivery of each delivery vehicle, the delivery image data is collected in chronological order together with at least one of the shooting position information and the related data regarding the delivery status. The data acquisition means to be sequentially acquired, the data collection server that collects the delivery image data acquired by each of the above data acquisition means together with the shooting position information, and each delivery image data collected by the data collection server are acquired. The difference detecting means for detecting the difference on the image with the delivery image data previously captured at the same shooting position by referring to the acquired position information, and the delivery ledger acquired by the delivery ledger information acquiring means. By referring to the consistency matching means for collating the difference on the image detected by the difference detecting means with the destination information at the address corresponding to the detected shooting position, and the consistency matching means. When the consistency is collated, the map information held by the map information holding means is provided with a map information updating means for updating the information based on the difference on the image at the shooting position. ..
上述した課題を解決するために、本発明に係る地図情報更新システムは、地図情報を保持する地図情報保持手段と、番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得手段と、複数の配達物の配達用車両にそれぞれ搭載され、当該各配達用車両の配達時において配達画像データを撮影位置情報及び上記関連データの少なくとも何れかと共に時系列的に順次取得するデータ取得手段と、上記データ取得手段により取得された各配達画像データについて、取得した上記撮影位置情報及び上記関連データの少なくとも何れかを参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出手段と、上記各差異検出手段によりそれぞれ取得された配達画像データの画像上の差異をその撮影位置情報及び上記関連データの少なくとも何れかと共に収集するデータ収集サーバと、上記配達原簿情報取得手段により取得された配達原簿を参照し、上記データ収集サーバにより収集された画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合手段と、上記整合性照合手段により整合性が照合された場合には、地図情報保持手段により保持される地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新手段とを備えることを特徴とする。 In order to solve the above-mentioned problems, the map information updating system according to the present invention obtains a map information holding means for holding map information and a delivery ledger in which the destination information of deliveries is sequentially updated for each address. It is mounted on each of the ledger information acquisition means and the delivery vehicle of a plurality of deliveries, and at the time of delivery of each delivery vehicle, the delivery image data is sequentially acquired in chronological order together with at least one of the shooting position information and the above-mentioned related data. With respect to the data acquisition means to be performed and each delivery image data acquired by the data acquisition means, the delivery image previously captured at the same shooting position by referring to at least one of the acquired shooting position information and the related data. The difference detecting means for detecting the difference on the image with the data and the difference on the image of the delivery image data acquired by each of the above difference detecting means are collected together with the shooting position information and at least one of the related data. With reference to the data collection server to be used and the delivery ledger acquired by the delivery ledger information acquisition means, the difference on the image collected by the data collecting server and the destination information at the address corresponding to the detected shooting position. When the consistency is collated by the consistency collating means for collating the consistency with the above-mentioned consistency collating means, the map information held by the map information holding means is displayed on the image at the shooting position. It is characterized by providing a map information updating means for updating information based on the difference.
上述した課題を解決するために、本発明に係る地図情報更新方法は、地図情報を保持する地図情報保持ステップと、番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得ステップと、複数の配達物の配達用車両の配達時において配達画像データを撮影位置情報と共に時系列的に順次取得するデータ取得ステップと、上記各データ取得ステップにおいてそれぞれ取得した配達画像データをその撮影位置情報及び上記関連データの少なくとも何れかと共に収集するデータ収集ステップと、上記データ収集ステップにおいて収集した各配達画像データについて、取得した上記撮影位置情報及び上記関連データの少なくとも何れかを参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出ステップと、上記配達原簿情報取得ステップにおいて取得した配達原簿を参照し、上記差異検出ステップにより検出された画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合ステップと、上記整合性照合ステップにより整合性が照合された場合には、地図情報保持ステップにおいて保持する地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新ステップとを有することを特徴とする。 In order to solve the above-mentioned problems, the map information updating method according to the present invention includes a map information holding step for holding map information and a delivery for which the destination information of the delivery is sequentially updated for each address. The ledger information acquisition step, the data acquisition step of sequentially acquiring delivery image data together with the shooting position information at the time of delivery of a plurality of delivery vehicles, and the delivery image data acquired in each of the above data acquisition steps. Refer to at least one of the acquired shooting position information and the related data for each delivery image data collected in the data collection step and the data collection step of collecting the image together with at least one of the shooting position information and the related data. Then, referring to the difference detection step for detecting the difference on the image with the delivery image data previously captured at the same shooting position and the delivery ledger acquired in the delivery ledger information acquisition step, the difference detection step When the consistency is collated by the consistency collation step for collating the difference on the image detected by and the destination information at the address corresponding to the detected shooting position and the consistency collation step described above. Is characterized in that it has a map information update step for updating information based on a difference on an image at the shooting position with respect to the map information held in the map information holding step.
上述した課題を解決するために、本発明に係る地図情報更新方法は、地図情報を保持する地図情報保持ステップと、番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得ステップと、複数の配達物の配達用車両の配達時において配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に時系列的に順次取得するデータ取得ステップと、上記データ取得ステップにより取得した各配達画像データについて、取得した上記撮影位置情報及び上記関連データの少なくとも何れかを参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出ステップと、上記各差異検出ステップにおいてそれぞれ取得した配達画像データの画像上の差異をその撮影位置情報と共に収集するデータ収集ステップと、上記配達原簿情報取得ステップにおいて取得した配達原簿を参照し、上記データ収集ステップにおいて収集した画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合ステップと、上記整合性照合ステップにより整合性が照合された場合には、地図情報保持ステップにおいて保持する地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新ステップとを有することを特徴とする。 In order to solve the above-mentioned problems, the map information updating method according to the present invention includes a map information holding step for holding map information and a delivery for which the destination information of the delivery is sequentially updated for each address. The ledger information acquisition step, the data acquisition step of sequentially acquiring the delivery image data together with at least one of the shooting position information and the related data related to the delivery status at the time of delivery of the delivery vehicle of a plurality of deliveries, and the above data. For each delivery image data acquired in the acquisition step, the difference on the image is different from the delivery image data previously captured at the same shooting position by referring to at least one of the acquired shooting position information and the related data. The difference detection step for detecting the difference, the data collection step for collecting the difference on the image of the delivery image data acquired in each of the above difference detection steps together with the shooting position information, and the delivery ledger acquired in the above delivery ledger information acquisition step. Refer to the consistency collation step that collates the difference on the image collected in the data collection step with the destination information at the address corresponding to the detected shooting position, and the consistency collation step. When the sexes are collated, the map information held in the map information holding step is characterized by having a map information updating step for updating the information based on the difference on the image at the shooting position.
上述した構成からなる本発明を適用した地図情報更新システムは、毎日のように道路上の同一の箇所を巡回する配達用車両から配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に時系列的に順次取得し、同一の撮影位置において撮像した以前の配達画像データと画像上の差異を確認することで、その撮影位置における宛先情報の更新を画像上から先ず把握する。また画像上の判断のみに終始することなく、その宛先情報の更新を配達原簿からも確認する。この配達原簿もほぼ毎日のように更新されるものであり、特に住所変更や移転、新設の場合には、その旨が最初に宛先情報に反映される。 The map information updating system to which the present invention having the above-described configuration is applied captures delivery image data from a delivery vehicle that patrols the same location on the road on a daily basis. At least one of the position information and the related data related to the delivery status. By sequentially acquiring the data in chronological order and confirming the difference between the previous delivery image data captured at the same shooting position and the image, the update of the destination information at the shooting position is first grasped from the image. In addition, the update of the destination information is confirmed from the delivery ledger, not just the judgment on the image. This delivery ledger is also updated almost every day, and especially in the case of address change, relocation, or new establishment, that fact is first reflected in the destination information.
つまり毎日のように最新の状況が反映される配達画像データを撮影位置情報及び配達状況に関する関連データと配達原簿の3つを取得してその更新を確認することができ、また更新を確認することができた場合には、その更新内容を地図情報に対して更新することができる。 In other words, you can check the update by acquiring the delivery image data that reflects the latest situation on a daily basis, the shooting position information, the related data related to the delivery status, and the delivery ledger, and also check the update. If it is possible, the updated contents can be updated with respect to the map information.
このため、本発明を適用した地図情報更新システムは、地図情報を最新の道路、建築構造物、土木構造物、入居者等の状況を反映させることができ、最新の状態のものにほぼ毎日に亘り更新することが可能となる。 Therefore, the map information update system to which the present invention is applied can reflect the latest road, building structure, civil engineering structure, resident, etc., in the map information, and the latest state is updated almost every day. It will be possible to update over.
本発明を適用した地図情報更新システムの全体構成を示すブロック図である。It is a block diagram which shows the whole structure of the map information update system to which this invention is applied. 道路上を走行する車両の構成例を示す図である。It is a figure which shows the configuration example of the vehicle traveling on the road. 制御装置とデータ取得部の詳細なブロック構成図である。It is a detailed block block diagram of a control device and a data acquisition part. データ収集サーバ周辺のブロック構成図である。It is a block block diagram around a data collection server. 配達時のあるタイミングに撮像された配達画像に対して、その撮影位置情報を取得する例について説明するための図である。It is a figure for demonstrating an example of acquiring the photographing position information with respect to the delivery image imaged at a certain timing at the time of delivery. 差異検出部により画素の輝度等を介して両者間の画像上の差異を検出する例を示す図である。It is a figure which shows the example which detects the difference on the image between the two through the brightness of a pixel, etc. by the difference detection part. 地図情報更新部により地図情報を更新する例について説明するための図である。It is a figure for demonstrating the example of updating the map information by the map information update part. 画像上の差異と、取得した宛先情報の組み合わせに対する地図情報の更新との3段階以上の組み合わせ連関度を予め取得する例を示す図である。It is a figure which shows the example which acquires the combination association degree of 3 or more stages of the difference on an image, and the update of the map information with respect to the combination of acquired destination information in advance.
以下、本発明を適用した地図情報更新システムについて、図面を参照しながら詳細に説明をする。 Hereinafter, the map information updating system to which the present invention is applied will be described in detail with reference to the drawings.
図1は、本発明を適用した地図情報更新システム1の全体構成を示すブロック図である。地図情報更新システム1は、各地域拠点毎に設けられ、傘下にある集配局の区域内で撮像された配達画像データが撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に集められる中継サーバ10と、各中継サーバ10に集められた配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に1箇所に収集する、中央に設けられたデータ収集サーバ11とを備えている。各サーバ10、11間は、有線通信又は無線通信により配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に送受信可能とされている。 FIG. 1 is a block diagram showing an overall configuration of a map information updating system 1 to which the present invention is applied. The map information update system 1 is provided for each regional base, and is a relay server 10 that collects delivery image data captured in the area of the collection and delivery station under its umbrella together with at least one of shooting position information and related data related to the delivery status. And a data collection server 11 provided at the center, which collects the delivery image data collected in each relay server 10 together with at least one of the shooting position information and the related data regarding the delivery status at one place. Delivery image data can be transmitted and received between the servers 10 and 11 together with at least one of shooting position information and related data related to the delivery status by wired communication or wireless communication.
また中継サーバ10は、管轄する区域内の各所において張り巡らされた無線基地局12との間で無線通信により配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に受信可能としている。 Further, the relay server 10 makes it possible to receive the delivery image data together with at least one of the shooting position information and the related data regarding the delivery status by wireless communication with the radio base stations 12 spread in various places in the area under the jurisdiction. ..
無線基地局12は、図2に示すように道路上を走行する車両14から配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に受信する。 As shown in FIG. 2, the radio base station 12 receives the delivery image data from the vehicle 14 traveling on the road together with at least one of the shooting position information and the related data regarding the delivery status.
車両14は、自動車やトラック等の四輪者、バイクやオートバイ等の二輪車等も含む。この車両14は、配達物を配達するためのいわゆる配達用車両である。車両14は、配達画像を撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に取得するための制御装置2と、その制御装置2による撮影位置を取得するデータ取得部3と備えている。 The vehicle 14 also includes a four-wheeled vehicle such as an automobile or a truck, a two-wheeled vehicle such as a motorcycle or a motorcycle, and the like. The vehicle 14 is a so-called delivery vehicle for delivering deliverables. The vehicle 14 includes a control device 2 for acquiring a delivery image together with at least one of shooting position information and related data related to the delivery status, and a data acquisition unit 3 for acquiring the shooting position by the control device 2.
図3は、この制御装置2とデータ取得部3の詳細なブロック構成図を示している。 FIG. 3 shows a detailed block configuration diagram of the control device 2 and the data acquisition unit 3.
制御装置2は、制御部21と、この制御部21に接続された取得部22、操作部23、通信部24、記憶部25を備えており、更にこの制御部21には、データ取得部3が接続される。 The control device 2 includes a control unit 21, an acquisition unit 22, an operation unit 23, a communication unit 24, and a storage unit 25 connected to the control unit 21, and further, the control unit 21 includes a data acquisition unit 3 Is connected.
制御部21は、CPU(Central Processing Unit)211と、このCPU211に対してそれぞれ接続されているメモリ212とを有している。 The control unit 21 has a CPU (Central Processing Unit) 211 and a memory 212 connected to the CPU 211, respectively.
メモリ212は、ROM(Read Only Memory)やRAM(Random Access Memory)として具現化される記憶手段である。ROMは、制御装置2全体のハードウェア資源を制御するためのプログラムが格納されている。またRAMは、データの蓄積や展開等に使用する作業領域として使用され、制御装置2全体のハードウェア資源を制御するときの各種命令を一時的に記憶する。 The memory 212 is a storage means embodied as a ROM (Read Only Memory) or a RAM (Random Access Memory). The ROM stores a program for controlling the hardware resources of the entire control device 2. The RAM is also used as a work area used for data storage and expansion, and temporarily stores various instructions for controlling the hardware resources of the entire control device 2.
CPU211は、全ての構成要素を制御するためのいわゆる中央演算ユニットである。このCPU211は、メモリ212に記憶されているプログラムを読み出して各種動作を行うための命令を各構成要素に対して通知する。例えばメモリ212に記憶されているプログラムが一定の時間間隔毎に、全方位360°方向の配達画像データを撮像するものであれば、これに基づいて、取得部22に対してかかる命令を実行するための信号を送信する。またメモリ212に記憶されているプログラムが、取得部22による配達画像データの撮像と同時に現時点の位置情報又は配達状況に関する関連データを取得する場合には、取得部22並びにデータ取得部3に対してかかる命令を実行するための信号を送信する。 The CPU 211 is a so-called central arithmetic unit for controlling all the components. The CPU 211 notifies each component of an instruction for reading a program stored in the memory 212 and performing various operations. For example, if the program stored in the memory 212 captures the delivery image data in the 360 ° omnidirectional direction at regular time intervals, the acquisition unit 22 is executed based on this. Send a signal for Further, when the program stored in the memory 212 acquires the current position information or the related data regarding the delivery status at the same time as the acquisition unit 22 captures the delivery image data, the acquisition unit 22 and the data acquisition unit 3 are contacted. A signal is transmitted to execute such an instruction.
更にCPU211は、取得部22により取得されて一時的に記憶部25に記憶された配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に通信部24を介して送信するための制御を実行する。 Further, the CPU 211 controls the delivery image data acquired by the acquisition unit 22 and temporarily stored in the storage unit 25 to be transmitted via the communication unit 24 together with at least one of the shooting position information and the related data related to the delivery status. To execute.
取得部22は、例えば図示しないレンズと撮像素子から構成されており、360°方向に亘り全方位の画像を取得することが可能なカメラで構成されている。また、取得部22は、配達状況に関する各種の関連データを取得する。関連データには、例えばテキストデータ、信号、音声データの他に配達物や天気の画像データ等が含まれてもよい。この取得部22による撮像又は取得のタイミングは、制御部21におけるCPU211によりコントロールされることになる。取得部22により撮像された全方位に亘る配達画像データは撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に、記憶部25に一度記憶されることになる。ちなみに、この取得部22は全方位の画像を取得する場合に限定するものではなく、ある一方位のみの画像を取得する場合も含まれる。 The acquisition unit 22 is composed of, for example, a lens (not shown) and an image sensor, and is composed of a camera capable of acquiring an image in all directions over a 360 ° direction. In addition, the acquisition unit 22 acquires various related data regarding the delivery status. The related data may include, for example, text data, signals, voice data, as well as image data of deliveries and weather. The timing of imaging or acquisition by the acquisition unit 22 is controlled by the CPU 211 in the control unit 21. The omnidirectional delivery image data captured by the acquisition unit 22 is stored once in the storage unit 25 together with at least one of the shooting position information and the related data regarding the delivery status. Incidentally, the acquisition unit 22 is not limited to the case of acquiring an omnidirectional image, but also includes the case of acquiring an image of only one position.
操作部23は、制御装置2を操作するための操作情報を入力するためのタッチパネル、ボタン、レバー等で構成されている。また操作部23は、ユーザに対して各種情報を表示するための液晶パネル等も含まれる。操作部23は、入力された操作情報を制御部21に送る。制御部21は、この操作部23から送信されてきた操作情報に基づいて各種制御を行うことになる。 The operation unit 23 is composed of a touch panel, buttons, levers, and the like for inputting operation information for operating the control device 2. The operation unit 23 also includes a liquid crystal panel and the like for displaying various information to the user. The operation unit 23 sends the input operation information to the control unit 21. The control unit 21 performs various controls based on the operation information transmitted from the operation unit 23.
通信部24は、制御部21による制御の下、取得部22に撮像された配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に無線通信を通じて無線基地局12に送信する。この通信部24は、無線通信を行う上で必要な周波数変換やその他各種変換処理を行い、電気信号を電波に変換し、或いは電波を電気信号に変換するアンテナも含まれる。通信部24は、無線基地局12から信号を受信する機能も有しており、これを無線基地局12から信号を受信した場合にはこれを制御部21に送る。 Under the control of the control unit 21, the communication unit 24 transmits the delivery image data captured by the acquisition unit 22 to the wireless base station 12 via wireless communication together with at least one of the shooting position information and the related data regarding the delivery status. The communication unit 24 also includes an antenna that performs frequency conversion and other various conversion processes necessary for performing wireless communication, converts an electric signal into a radio wave, or converts a radio wave into an electric signal. The communication unit 24 also has a function of receiving a signal from the radio base station 12, and when receiving a signal from the radio base station 12, sends the signal to the control unit 21.
記憶部25は、配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に記憶することが可能なハードディスク、メモリ等で構成されている。この記憶部25に対しては制御部21による制御の下で配達画像データが撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に記憶され、また制御部21による制御の下で記憶されている配達画像データが撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に読み出されることになる。 The storage unit 25 is composed of a hard disk, a memory, or the like that can store delivery image data together with at least one of shooting position information and related data related to the delivery status. The delivery image data is stored in the storage unit 25 together with at least one of the shooting position information and the related data regarding the delivery status under the control of the control unit 21, and is stored under the control of the control unit 21. The delivery image data will be read out together with at least one of the shooting position information and the related data regarding the delivery status.
データ取得部3は、人工衛星から送られてくる衛星測位信号に基づいて車両14の現時点の位置情報をリアルタイムに取得する。車両14が道路上を配達する過程で、このデータ取得部3により衛星測位信号を随時受信することにより、その配達する道路上の各地点における位置情報を取得することができる。また取得部22による画像の撮像タイミングに合わせてデータ取得部3により衛星測位信号を受信することにより、その画像の撮像地点における位置情報を取得することが可能となる。実際にこのデータ取得部3における衛生測位信号の受信時、ひいては位置情報の取得時は、制御部21により制御されることとなる。このため、制御部21を通じてデータ取得部3による衛星測位信号の取得タイミングと、取得部22による撮像タイミングが同時になるように制御することで、この撮像地点における位置情報を取得することが可能となる。 The data acquisition unit 3 acquires the current position information of the vehicle 14 in real time based on the satellite positioning signal sent from the artificial satellite. In the process of delivering the vehicle 14 on the road, the data acquisition unit 3 receives the satellite positioning signal at any time, so that the position information at each point on the delivered road can be acquired. Further, by receiving the satellite positioning signal by the data acquisition unit 3 at the timing of capturing the image by the acquisition unit 22, it is possible to acquire the position information at the imaging point of the image. When the data acquisition unit 3 actually receives the sanitary positioning signal, and by extension, when the position information is acquired, the control unit 21 controls it. Therefore, by controlling the acquisition timing of the satellite positioning signal by the data acquisition unit 3 and the imaging timing by the acquisition unit 22 at the same time through the control unit 21, it is possible to acquire the position information at the imaging point. ..
図4は、データ収集サーバ11周辺のブロック構成を示している。このデータ収集サーバ11には、地図情報保持部31と、配達原簿情報取得部32と、差異検出部33と、整合性照合部34と、地図情報更新部35とを備えている。 FIG. 4 shows a block configuration around the data collection server 11. The data collection server 11 includes a map information holding unit 31, a delivery ledger information acquisition unit 32, a difference detection unit 33, a consistency collation unit 34, and a map information update unit 35.
地図情報保持部31は、日本国内の地図、世界各国の地図からなる地図情報を記憶する。ここでいう地図情報は、地図を平面的に記述した二次元マップ、地図を立体的に記述した三次元マップ、道路上の地点で撮影した全周囲パノラマ画像からなるストリートビュー画像で具現化される電子データとして構成される。このような地図情報に基づいてPCやスマートフォン、タブレット型端末等を介して地図を画面上に表示することが可能となり、ひいてはアプリケーションを通じてこの表示された地図に対して各種動作を実行することが可能となる。この地図情報保持部31は、当初の地図情報をインターネット上に掲載されている地図の電子データを取得するようにしてもよいし、他の無料で配布される、或いは市販される地図の電子データを取得するようにしてもよい。地図情報保持部31はこのようにして入手して保持している地図情報は、後述する地図情報更新部35による随時更新処理が施されることになる。 The map information holding unit 31 stores map information including a map of Japan and a map of each country in the world. The map information referred to here is embodied in a two-dimensional map that describes the map in a plane, a three-dimensional map that describes the map in three dimensions, and a street view image consisting of a panoramic image of the entire circumference taken at a point on the road. It is configured as electronic data. Based on such map information, it is possible to display a map on the screen via a PC, smartphone, tablet terminal, etc., and by extension, it is possible to execute various operations on this displayed map through an application. It becomes. The map information holding unit 31 may acquire the electronic data of the map posted on the Internet from the initial map information, or the electronic data of the map distributed free of charge or commercially available. May be obtained. The map information obtained and held by the map information holding unit 31 in this way will be updated at any time by the map information updating unit 35, which will be described later.
配達原簿情報取得部32は、番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する。この配達原簿は、郵便局により作成されるものであり、地域の全住民の居住者リストが番地単位で記述されている。この配達原簿における宛先情報には、番地や部屋番号に対して、世帯主名、会社名等が記載されている。宛先情報には、戸建だけでなく、集合住宅の全部屋の住民の名前も部屋番号単位で掲載される。この配達原簿における宛先情報により、配達員は、配達出発前に局内で、配達物と照らし合わせて、宛名の人物が住んでいるかの現住確認を行うことができる。また配達原簿における宛先情報には、このような住民以外に、テナントとして入居している企業や店舗等の情報も記述される。更にこの宛先情報には、新たにビル、マンション、戸建住宅等に関する情報も宛先情報には記述される。 The delivery ledger information acquisition unit 32 acquires a delivery ledger at any time, in which the destination information of the deliveries is sequentially updated for each street address. This delivery ledger is prepared by the post office and contains a list of residents of all residents in the area by street address. In the address information in this delivery ledger, the householder's name, the company name, etc. are described with respect to the street number and the room number. In the address information, not only the names of the residents of all the rooms of the apartment house but also the names of the residents of all the rooms of the apartment house are listed in units of room numbers. The destination information in this delivery ledger allows the delivery person to confirm the current residence of the addressee by comparing it with the delivery within the station before the delivery departs. In addition to such residents, the destination information in the delivery ledger also includes information on companies and stores that are occupying as tenants. Further, in this destination information, information about a building, a condominium, a detached house, etc. is newly described in the destination information.
この配達原簿における宛先情報は、通常は住民やテナント等の住所変更があれば即座に反映されるものであり、道路の新設等で新たに番地ができればこれも即座に登録される。また建築構造物の新設や補修等により内容に変更が生じる場合も即座に反映される。配達原簿情報取得部32は、このような配達原簿を毎日又は数日に一度は取得する。このため、配達原簿情報取得部32には、最新の状況が更新された宛先情報を取得すること可能となる。 The address information in this delivery ledger is usually reflected immediately when there is a change in the address of residents, tenants, etc., and if a new address is created due to the construction of a new road, etc., this is also immediately registered. In addition, any changes in the content due to new construction or repair of building structures will be reflected immediately. The delivery ledger information acquisition unit 32 acquires such a delivery ledger every day or once every few days. Therefore, the delivery ledger information acquisition unit 32 can acquire the destination information with the latest status updated.
差異検出部33は、データ収集サーバにより収集された各配達画像データ及び関連データの少なくとも何れかについて、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する。この画像上の差異は、画素単位で、或いは複数の画素から構成されるブロック単位で行われ、従来の画像処理技術を適用し、その輝度等を介して差異の有無が判断される。 The difference detection unit 33 detects a difference on the image of at least one of the delivery image data and the related data collected by the data collection server from the delivery image data previously captured at the same shooting position. .. This difference on the image is performed on a pixel-by-pixel basis or on a block-by-block basis composed of a plurality of pixels, and the presence or absence of the difference is determined based on the brightness and the like by applying the conventional image processing technique.
整合性照合部34は、差異検出部33により検出された画像上の差異と、その差異が検出された撮影位置に対応する番地における宛先情報との整合性を照合する。この宛先情報との整合性については、配達原簿情報取得部32により取得された配達原簿を参照することで行う。整合性照合部34は、その整合性が照合された場合にはその旨を地図情報更新部35へ通知する。 The consistency collation unit 34 collates the consistency of the difference on the image detected by the difference detection unit 33 with the destination information at the address corresponding to the shooting position where the difference is detected. Consistency with this destination information is performed by referring to the delivery ledger acquired by the delivery ledger information acquisition unit 32. When the consistency is collated, the consistency collation unit 34 notifies the map information update unit 35 to that effect.
地図情報更新部35は、整合性照合部34により整合性が照合された場合には、地図情報保持部31により保持される地図情報に対して、画像上の差異に基づく情報を更新する。 When the consistency is collated by the consistency collation unit 34, the map information updating unit 35 updates the information based on the difference on the image with respect to the map information held by the map information holding unit 31.
次に、本発明を適用した地図情報更新システム1の動作例について説明をする。 Next, an operation example of the map information updating system 1 to which the present invention is applied will be described.
制御装置2と、データ取得部3とが設置された車両14は、上述したように配達物を配達するための配達用車両であることが前提である。このため、車両14は、配達物を配達するために、自らの管轄区域内の各所をほぼ毎日走行することになる。車両14が走行する過程では、制御装置2における取得部22により全方位からなる配達画像を撮像すると共に、データ取得部3により位置情報及び関連データの少なくとも何れかを取得することを実行する。この配達画像の撮像タイミングとデータ取得部3による位置情報及び関連データの少なくとも何れかの取得タイミングとが同時になるように制御部21により制御する。その結果、データ取得部3により取得される位置情報及び関連データの少なくとも何れかは、配達画像の撮像時点に対応することになる。以下、この配達画像の撮像時点に対応した位置情報を、撮影位置情報という。 It is premised that the vehicle 14 in which the control device 2 and the data acquisition unit 3 are installed is a delivery vehicle for delivering the delivered product as described above. For this reason, the vehicle 14 travels almost every day in various places within its jurisdiction in order to deliver the deliverables. In the process in which the vehicle 14 travels, the acquisition unit 22 of the control device 2 captures a delivery image consisting of all directions, and the data acquisition unit 3 acquires at least one of the position information and the related data. The control unit 21 controls the imaging timing of the delivered image and the acquisition timing of at least one of the position information and the related data by the data acquisition unit 3 at the same time. As a result, at least one of the position information and the related data acquired by the data acquisition unit 3 corresponds to the time when the delivery image is captured. Hereinafter, the position information corresponding to the time when the delivered image is captured is referred to as the shooting position information.
このような取得部22による配達画像の撮像とデータ取得部3による撮像位置情報及び配達状況に関する関連データの少なくとも何れかの取得を連続的に実行する。その結果、図5に示すように、配達時のあるタイミングt1に撮像された配達画像P1に対して、その撮影位置情報(x1、y1)及び関連データQ1の少なくとも何れかを取得することができる。次のタイミングt2において撮像された配達画像P2に対して、撮影位置情報(x2、y2)及び関連データQ2の少なくとも何れかを取得することができる。同様に、次のタイミングtnにおいて撮像された配達画像Pnに対して、撮影位置情報(xn、yn)及び関連データQnの少なくとも何れかを取得することができる。 Such acquisition of the delivery image by the acquisition unit 22 and acquisition of at least one of the imaged position information and the related data regarding the delivery status by the data acquisition unit 3 are continuously executed. As a result, as shown in FIG. 5, at least one of the shooting position information (x1, y1) and the related data Q1 can be acquired for the delivery image P1 captured at a certain timing t1 at the time of delivery. .. At least one of the shooting position information (x2, y2) and the related data Q2 can be acquired for the delivery image P2 captured at the next timing t2. Similarly, at least one of the shooting position information (xn, yn) and the related data Qn can be acquired for the delivery image Pn captured at the next timing tn.
取得部22は、配達状況に関する関連データとして、例えば時間、距離、ルート、配達対象物、配達員、店舗、施設、交通機関、天候、温度、湿度、及び環境情報の少なくとも何れかからなるデータを取得する。関連データは、例えばテキストデータ、音声データ、信号データ、画像データであってもよい。 As related data regarding the delivery status, the acquisition unit 22 obtains data including at least one of, for example, time, distance, route, delivery object, delivery person, store, facility, transportation, weather, temperature, humidity, and environmental information. get. The related data may be, for example, text data, voice data, signal data, and image data.
制御装置2は、このようにして各タイミングtnにおいて撮像された配達画像Pnと、撮影位置情報(xn、yn)及び関連データQnの少なくとも何れかをそれぞれ通信部24を介して外部へと送信する。この配達画像Pnと撮影位置情報(xn、yn)及び関連データQnの少なくとも何れかは、中継サーバ10を介して、データ収集サーバ11へと送られる。結果として、この制御装置2は、この車両14からタイミングt1〜タイミングtnに至るまで時系列的にこの配達画像Pnと、取得位置情報(xn、yn)及び関連データQnの少なくとも何れかが送られてくることになる。その結果、それぞれの取得位置情報(x1、y1)〜(xn、yn)及び関連データQnの少なくとも何れかにおける配達画像P1〜Pnがこのデータ収集サーバ11において蓄積されることになる。 The control device 2 transmits at least one of the delivery image Pn captured at each timing tn, the shooting position information (xn, yn), and the related data Qn to the outside via the communication unit 24, respectively. .. At least one of the delivery image Pn, the shooting position information (xn, yn), and the related data Qn is sent to the data collection server 11 via the relay server 10. As a result, the control device 2 is sent at least one of the delivery image Pn, the acquired position information (xn, yn), and the related data Qn in chronological order from the vehicle 14 to the timing t1 to the timing tn. Will come. As a result, the delivery images P1 to Pn in at least one of the acquired position information (x1, y1) to (xn, yn) and the related data Qn are accumulated in the data collection server 11.
またデータ収集サーバ11には、全ての車両14に設置された制御装置2において撮像された配達画像Pnと取得位置情報(xn、yn)及び関連データQnの少なくとも何れかが送られてくる。その結果、各車両14はそれぞれの管轄区域内を巡回するものであれば、その全ての管轄区域の道路から撮像した配達画像Pnと取得位置情報(xn、yn)及び関連データQnの少なくとも何れかがこのデータ収集サーバ11に時系列的に順次蓄積されてくることになる。 Further, at least one of the delivery image Pn, the acquired position information (xn, yn), and the related data Qn captured by the control devices 2 installed in all the vehicles 14 is sent to the data collection server 11. As a result, if each vehicle 14 patrols within its own jurisdiction, at least one of the delivery image Pn, the acquired position information (xn, yn), and the related data Qn captured from the roads of all the jurisdictions. Will be sequentially accumulated in the data collection server 11 in chronological order.
データ収集サーバ11は、このようにして蓄積された配達画像Pnと取得位置情報(xn、yn)及び関連データQnの少なくとも何れかに対して、差異検出部33を介して以下に説明する差異検出のための処理動作を実行する。 The data collection server 11 detects at least one of the delivery image Pn, the acquired position information (xn, yn), and the related data Qn accumulated in this way via the difference detection unit 33, which will be described below. Perform the processing operation for.
差異検出部33は、新たに取得した配達画像データについて、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する。上述した図5の例の場合においては、タイミングt2において撮像した配達画像データP2を新たに取得した場合、これと同一撮影位置(x2、y2)及び関連データQ2の少なくとも何れかにて以前に撮像した配達画像データを読み出す。仮にその前日に同一の撮影位置(x2、y2)及び関連データQ2の少なくとも何れかにて撮像した配達画像データP2´を取得しているのであれば、配達画像データP2と、配達画像データP2´との間で画像上の差異を検出する。ちなみに、配達画像データP2と配達画像データP2´との撮影位置の同一性については、それぞれに対して紐付けられている撮影位置情報に基づいて判別を行うことになる。差異検出部33は、画像上の差異をディープラーニング技術を用いて検出するようにしてもよい。 The difference detection unit 33 detects the difference on the image of the newly acquired delivery image data from the delivery image data previously captured at the same shooting position. In the case of the above-mentioned example of FIG. 5, when the delivery image data P2 captured at the timing t2 is newly acquired, it is previously captured at at least one of the same shooting position (x2, y2) and the related data Q2. Read the delivered image data. If the delivery image data P2'captured at the same shooting position (x2, y2) and at least one of the related data Q2 on the previous day is acquired, the delivery image data P2 and the delivery image data P2' Detects differences on the image with. By the way, the identity of the shooting position between the delivery image data P2 and the delivery image data P2'is determined based on the shooting position information associated with each of them. The difference detection unit 33 may detect the difference on the image by using a deep learning technique.
差異検出部33は例えば画素の輝度等を介して両者間の画像上の差異を検出したところ、例えば図6に示すように、配達画像データP2には、新たに「○×商事」の看板が掲げられている点を画像上の差異として検出したものと仮定する。その前日に撮像された配達画像データP2´には、この「○×商事」の看板が無かったため、これが画像上の差異として検出されたものである。これは換言すれば前日から本日にかけて新たに「○×商事」の看板が掲げられたことを示唆するものである。 When the difference detection unit 33 detects the difference on the image between the two through, for example, the brightness of the pixels, for example, as shown in FIG. 6, the delivery image data P2 has a new signboard of "○ × Shoji". It is assumed that the listed points are detected as differences on the image. The delivery image data P2'captured the day before did not have this "○ × Shoji" sign, so this was detected as a difference on the image. In other words, this suggests that a new "○ × Shoji" sign was put up from the day before to today.
差異検出部33は、データ収集サーバ11により収集された各配達画像データPnについて、取得した撮影位置情報及び関連データQnの少なくとも何れかを参照する。そして差異検出部33は、例えば関連データQnに基づいて検出対象の配達画像データPnの絞り込みを行い、以前に同一の撮影位置において撮像された配達画像データPnの間で画像上の差異を検出する。 The difference detection unit 33 refers to at least one of the acquired shooting position information and the related data Qn for each delivery image data Pn collected by the data collection server 11. Then, the difference detection unit 33 narrows down the delivery image data Pn to be detected based on, for example, the related data Qn, and detects the difference on the image between the delivery image data Pn previously captured at the same shooting position. ..
このような同一の取得位置(x2、y2)及び関連データQ2の少なくとも何れかにおいて互いに撮像時点の異なる配達画像データP2と、配達画像データP2´との間で、両者間の変化に基づく画像上の差異が差異検出部33により検知された場合において、整合性照合部34は、配達原簿情報取得部32により取得された配達原簿を参照する。配達原簿情報取得部32には、番地単位で配達物の宛先情報がほぼ毎日更新されるため、ここにアクセスすることにより居住者に関する最新の情報を取得することができる。整合性照合部34は、この配達原簿情報取得部32にアクセスし、撮影位置(x2、y2)及び関連データQ2の少なくとも何れかに対応する番地の宛先情報を確認する。実際にこの撮影位置に対する番地の宛先情報の確認の利便性を向上させる観点から、番地と撮影位置情報との間での対応テーブルをこの配達原簿情報取得部32内において備えるようにしてもよい。この対応テーブルは、例えば撮影位置情報が緯度、経度で表されるものであれば、各番地に対してその緯度、経度を割り当てておくようにしてもよい。 On the image based on the change between the delivery image data P2 and the delivery image data P2', which have different imaging time points at least one of the same acquisition position (x2, y2) and the related data Q2. When the difference is detected by the difference detection unit 33, the consistency collation unit 34 refers to the delivery ledger acquired by the delivery ledger information acquisition unit 32. Since the delivery address information is updated almost every day in the delivery ledger information acquisition unit 32 for each street address, the latest information about the resident can be acquired by accessing this. The consistency collation unit 34 accesses the delivery ledger information acquisition unit 32 and confirms the destination information of the address corresponding to at least one of the shooting position (x2, y2) and the related data Q2. From the viewpoint of improving the convenience of actually confirming the address information of the address with respect to the shooting position, a correspondence table between the address and the shooting position information may be provided in the delivery ledger information acquisition unit 32. In this correspondence table, for example, if the shooting position information is represented by latitude and longitude, the latitude and longitude may be assigned to each address.
また、差異検出部3は、例えば配達画像データP2と、配達画像データP2´との間で両者間の変化に基づく画像上の差異を、道路標識、路面標示、道路区画線、案内表示、建築構造物、土木構造物、看板、案内板、集合ポスト、郵便受け、宅配ボックス、人物、入居者、及び出入口の少なくとも何れかからなる画像を用いて検出するようにしてもよい。これにより、配達画像データに含まれる特定部分又は範囲の差異を検出することが可能となる。 Further, the difference detection unit 3 displays, for example, a difference on the image between the delivery image data P2 and the delivery image data P2'based on the change between the two, such as a road sign, a road marking, a road marking, a guide display, and a construction. Detection may be performed using an image consisting of at least one of a structure, a civil engineering structure, a signboard, a guide board, a gathering post, a mailbox, a delivery box, a person, a resident, and an entrance / exit. This makes it possible to detect a difference in a specific part or range included in the delivery image data.
整合性照合部34はその宛先情報を確認した結果、新たにその撮影位置に対応する番地が「○×商事」となっていれば、その番地において居住者が移転したことが画像上の差異に加えて、配達原簿情報から確認できたことが分かる。つまり、差異検出部33により検出された画像上の差異と、その差異が検出された撮影位置に対応する番地における宛先情報との整合性が照合されたことが分かる。 As a result of confirming the destination information, the consistency collation unit 34 newly finds that the address corresponding to the shooting position is "○ × Shosha", that the resident has moved to that address, which is a difference on the image. In addition, it can be seen from the delivery ledger information that it was confirmed. That is, it can be seen that the consistency on the image detected by the difference detection unit 33 and the destination information at the address corresponding to the detected shooting position are collated.
かかる場合には、地図情報更新部35は、地図情報保持部31により保持される地図情報に対して、その番地(撮影位置x2、y2)の居住者を図7に示すように「○×商事」に更新する。 In such a case, the map information updating unit 35 indicates the resident of the address (shooting position x2, y2) with respect to the map information held by the map information holding unit 31 as shown in FIG. Update to.
なお、整合性照合部34は整合性確認の利便性を高める観点から、配達原簿情報取得部32に対して随時アクセスし、これが新たに更新された場合には、その更新された情報を取得しておくようにしてもよい。 From the viewpoint of enhancing the convenience of consistency confirmation, the consistency collation unit 34 accesses the delivery ledger information acquisition unit 32 at any time, and when it is newly updated, acquires the updated information. You may try to keep it.
また整合制照合部34は、例えば道路標識、路面標示、道路区画線、案内表示、建築構造物、土木構造物、看板、案内板、集合ポスト、郵便受け、宅配ボックス、人物、入居者、及び出入口の少なくとも何れかに関する変化に基づく画像上の差異と、その変化が反映された上記宛先情報との整合性を照合するようにしてもよい。これにより、配達画像データに含まれる特定部分又は範囲の整合性を照合することが可能となる。 In addition, the matching system collation unit 34 includes, for example, road markings, road markings, road markings, guidance displays, building structures, civil engineering structures, signboards, information boards, collective posts, mailboxes, delivery boxes, people, residents, and doorways. The consistency on the image based on the change with respect to at least one of the above may be collated with the above-mentioned destination information reflecting the change. This makes it possible to collate the consistency of a specific part or range included in the delivered image data.
また配達原簿情報取得部32は、過去の配達原簿情報を時系列的に蓄積しておくようにしてもよい。これにより、今回のように、撮影位置に対応する番地が配達原簿の宛先情報として「○×商事」に更新されたか否かを、これにより以前の配達原簿を読み出して確認することが可能となり、上述した照合作業の利便性を向上させることが可能となる。 Further, the delivery ledger information acquisition unit 32 may accumulate past delivery ledger information in chronological order. As a result, it is possible to read and confirm whether or not the address corresponding to the shooting position has been updated to "○ × Shoji" as the destination information of the delivery ledger as in this case. It is possible to improve the convenience of the collation work described above.
また、本発明によれば、このような画像上の差異に看板のような文字情報が反映される場合には、その文字情報をディープラーニング技術や周知の文字認識技術を活用してその文字列の中身を認識するようにしてもよい。そして、その認識した文字列と、配達原簿の宛先情報の整合性を確認し、同一性を確認するようにしてもよい。 Further, according to the present invention, when character information such as a signboard is reflected in such a difference on an image, the character information is used as a character string by utilizing deep learning technology or a well-known character recognition technology. You may try to recognize the contents. Then, the consistency between the recognized character string and the destination information in the delivery ledger may be confirmed, and the identity may be confirmed.
ちなみに、画像上の差異は、このような文字情報が反映される看板以外に、ビルや家屋等の建築構造物が新たに建造されたり、トンネルや橋梁等の土木構造物が新たに完成した場合も同様である。例えば建築中だったビルが新たに完成して入居可能になれば、画像上の差異としては、足場等が撤去される前のビルと、足場が撤去された完成したビルとの間で現れることになる。このような画像上の差異を検知することができた場合においても同様に整合性照合部34は、配達原簿情報取得部32にアクセスし、そのビルの撮影位置に対応する番地の宛先情報を確認する。ビルが完成して入居可能になれば、当然に配達原簿にその旨が更新されることから、これと照らし合わせることにより、宛先情報の整合性を確認し、同一性を確認することが可能となる。 By the way, the difference on the image is when a building structure such as a building or a house is newly constructed or a civil engineering structure such as a tunnel or a bridge is newly completed in addition to the signboard reflecting such text information. Is the same. For example, if a building that was under construction is newly completed and can be moved in, the difference in the image will be that it will appear between the building before the scaffolding etc. was removed and the completed building where the scaffolding was removed. become. Even when such a difference on the image can be detected, the consistency collation unit 34 similarly accesses the delivery ledger information acquisition unit 32 and confirms the address information of the address corresponding to the shooting position of the building. To do. When the building is completed and it becomes possible to move in, it will naturally be updated in the delivery ledger, so by comparing it with this, it is possible to confirm the consistency of the destination information and confirm the identity. Become.
道路が新設された場合も同様であり、道路が完成前の画像と、道路が完成したときの画像で画像上の差異を検知することができる。かかる場合には整合性照合部34は、配達原簿情報取得部32にアクセスし、その道路に対応する番地の宛先情報を確認する。道路が新設された番地等が更新されれば、当然に配達原簿にその旨が更新されることから、これと照らし合わせることにより、宛先情報の整合性を確認し、同一性を確認することが可能となる。 The same applies when a new road is constructed, and the difference on the image can be detected between the image before the road is completed and the image when the road is completed. In such a case, the consistency collation unit 34 accesses the delivery ledger information acquisition unit 32 and confirms the destination information of the address corresponding to the road. If the address where the road is newly established is updated, that fact will naturally be updated in the delivery ledger, so it is possible to confirm the consistency and identity of the destination information by comparing it with this. It will be possible.
このようにしてそれぞれ整合性照合部34による照合が完了した後、地図情報更新部35は、地図情報保持部31により保持される地図情報に対して順次更新を行っていくことになる。 After the collation by the consistency collation unit 34 is completed in this way, the map information update unit 35 sequentially updates the map information held by the map information holding unit 31.
本発明を適用した地図情報更新システム1は、毎日のように道路上の同一の箇所を巡回する配達用車両からこのような配達画像データを撮像し、同一の撮影位置及び配達状況に関する関連データの少なくとも何れかにおいて撮像した以前の走行画像データと画像上の差異を確認することで、その撮影位置及び配達状況に関する関連データの少なくとも何れかにおける宛先情報の更新を画像上から先ず把握する。また画像上の判断のみに終始することなく、その宛先情報の更新を配達原簿からも確認する。この配達原簿もほぼ毎日のように更新されるものであり、特に住所変更や移転、新設の場合には、その旨が最初に宛先情報に反映される。 The map information updating system 1 to which the present invention is applied captures such delivery image data from a delivery vehicle that patrols the same location on the road on a daily basis, and obtains related data regarding the same shooting position and delivery status. By confirming the difference on the image from the previous running image data captured in at least one of them, the update of the destination information in at least one of the related data regarding the shooting position and the delivery status is first grasped from the image. In addition, the update of the destination information is confirmed from the delivery ledger, not just the judgment on the image. This delivery ledger is also updated almost every day, and especially in the case of address change, relocation, or new establishment, that fact is first reflected in the destination information.
つまり毎日のように最新の状況が反映される配達画像データと配達原簿の宛先情報の2つを取得してその更新を確認することができ、また更新を確認することができた場合には、その更新内容を地図情報に対して更新することができる。 In other words, you can get the delivery image data that reflects the latest situation and the destination information of the delivery ledger on a daily basis and check the update, and if you can check the update, The updated contents can be updated with respect to the map information.
このため、本発明を適用した地図情報更新システム1は、地図情報を最新の道路、建築構造物、土木構造物、入居者等の状況を反映させることができ、最新の状態のものにほぼ毎日に亘り更新することが可能となる。 Therefore, the map information update system 1 to which the present invention is applied can reflect the latest road, building structure, civil engineering structure, resident, etc. in the map information, and the latest state is updated almost every day. It is possible to update over.
なお、本発明を適用した地図情報更新システム1は、地図情報の更新を行うに当たり、上述した図7に示すような二次元マップのみならず三次元マップ、更にはストリートビュー画像を更新するものであってもよい。配達画像データは、全方位360°方向の画像を撮像するものであるから、建築構造物や土木構造物の立体的な形状を取得することができ、これを地図上に反映させることができる。例えば、図6の配達画像データP2に示す建築構造物が新たに建設されたことを確認できた場合には、地図情報の更新に当たり、三次元マップ上にその建築構造物の形状を描くようにしてもよい。その建築構造物の立体的形状は、その撮像した配達画像データの画像に基づいて描くことになる。 The map information updating system 1 to which the present invention is applied updates not only the two-dimensional map as shown in FIG. 7 described above but also the three-dimensional map and the street view image when updating the map information. There may be. Since the delivery image data captures an image in the 360 ° direction in all directions, it is possible to acquire a three-dimensional shape of a building structure or a civil engineering structure, and this can be reflected on a map. For example, when it is confirmed that the building structure shown in the delivery image data P2 of FIG. 6 has been newly constructed, the shape of the building structure is drawn on the three-dimensional map when updating the map information. You may. The three-dimensional shape of the building structure will be drawn based on the image of the captured delivery image data.
またストリートビューの更新も同様に、例えば図6の配達画像データP2において新たに看板「○×商事」を更新する場合には、その看板「○×商事」が反映された配達画像データP2をそのままストリートビューとして更新するようにしてもよい。 Similarly, when updating the street view, for example, when the signboard "○ × Shoji" is newly updated in the delivery image data P2 of FIG. 6, the delivery image data P2 reflecting the signboard “○ × Shoji” is used as it is. You may update it as Street View.
なお、上述した実施の形態では、制御装置2内において撮像された配達画像データは撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に、そのまま通信部24を介してデータ収集サーバ11に送信される場合を例にとり説明をしたが、これに限定されるものではない。制御装置2内において、以前に同一の撮影位置において撮像された配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかとの間で画像上の差異を検出するようにしてもよい。かかる場合には、上述した差異検出部33に相当する構成を制御装置2内において設けておく。そして、配達画像データを撮像する都度、撮影位置情報を参照し、以前に同一の撮影位置において撮像された配達画像データを読み出して画像上の差異を比較する。そして画像上の差異が検出された場合には、その検出された画像上の差異を通信部24を介してデータ収集サーバ11に送信する。 In the above-described embodiment, the delivery image data captured in the control device 2 is directly transmitted to the data collection server 11 via the communication unit 24 together with at least one of the shooting position information and the related data regarding the delivery status. The explanation was given by taking the case as an example, but the explanation is not limited to this. In the control device 2, the delivery image data previously captured at the same shooting position may be detected as a difference on the image between at least one of the shooting position information and the related data regarding the delivery status. In such a case, a configuration corresponding to the difference detection unit 33 described above is provided in the control device 2. Then, each time the delivery image data is captured, the shooting position information is referred to, and the delivery image data previously captured at the same shooting position is read out and the difference on the image is compared. When a difference on the image is detected, the detected difference on the image is transmitted to the data collection server 11 via the communication unit 24.
これにより、画像上の差異と、撮影位置情報のみが通信部24を介して送られることになれば、データの送信量を大幅に縮減させることが可能となり、システム全体の効率を向上させることができる。 As a result, if only the difference on the image and the shooting position information are transmitted via the communication unit 24, the amount of data transmitted can be significantly reduced, and the efficiency of the entire system can be improved. it can.
データ収集サーバ11は、かかる画像上の差異を受信し、撮影位置に対応する番地の宛先情報を確認し、地図情報を更新していくことになる。 The data collection server 11 receives the difference on the image, confirms the destination information of the address corresponding to the shooting position, and updates the map information.
ちなみに、本発明によれば、当該各配達用車両の配達時において配達画像データを毎日取得すると共に、毎日取得される配達原簿を参照し、配達画像データの取得日と配達原簿の更新日とを合わせた上で整合日を照合することを前提としているが、これに限定されるものではなく、配達画像データや配達原簿の取得を数日おきに行うようにしてもよい。 By the way, according to the present invention, the delivery image data is acquired every day at the time of delivery of each delivery vehicle, and the delivery ledger acquired every day is referred to to obtain the acquisition date of the delivery image data and the update date of the delivery ledger. It is premised that the matching dates are collated after matching, but the present invention is not limited to this, and the delivery image data and the delivery ledger may be acquired every few days.
また本発明を適用した地図情報更新システム1は、実際の整合性の判断を以下に説明するスキームに基づいて実行するようにしてもよい。 Further, the map information updating system 1 to which the present invention is applied may execute the actual consistency determination based on the scheme described below.
このスキームでは、図8に示すように、画像上の差異と、取得した宛先情報の組み合わせに対する地図情報の更新との3段階以上の組み合わせ連関度を予め取得する。この組み合わせ連関度は、像上の差異と、取得した宛先情報に対する地図情報の更新がどの程度関係性が強いかを示す指標である。 In this scheme, as shown in FIG. 8, the degree of combination association of three or more stages of the difference on the image and the update of the map information with respect to the acquired combination of destination information is acquired in advance. This combination association degree is an index showing how strongly the difference on the image and the update of the map information with respect to the acquired destination information are related.
ここでいう地図情報の更新とは、実際に地図情報に対してどのような更新を反映させるかを示すものであり、例えば更新cは、地図情報中の特定の番地に、入居者の変更の更新を加えるものとして設定されていてもよいし、更新dは、地図情報中の特定の番地に立てられたビル名を更新するものとして設定されていてもよい。また更新eは道路が新たに新設され、その結果番地が新たに設定されたことを示すものであってもよい。 The update of the map information referred to here indicates what kind of update is actually reflected in the map information. For example, the update c is a change of the resident to a specific address in the map information. It may be set to add an update, or update d may be set to update a building name set at a specific address in the map information. In addition, update e may indicate that a new road has been constructed and as a result, a new address has been set.
この図8に示す組み合わせ連関度は、1以上の画像上の差異と、1以上の取得した宛先情報の組み合わせの集合がいわゆる隠れ層のノード61a〜61eとして表現されることとなる。各ノード61a〜61eは、画像上の差異、取得した宛先情報に対する重み付けと、出力解としての地図情報の更新に対する重み付けがそれぞれ設定されている。 The combination linkage degree shown in FIG. 8 means that a set of combinations of one or more differences on the image and one or more acquired destination information is expressed as so-called hidden layer nodes 61a to 61e. Each of the nodes 61a to 61e is set with a weighting for the difference on the image, the acquired destination information, and a weighting for updating the map information as an output solution.
この重み付けが3段階以上の組み合わせ連関度である。例えば、ノード61aは、ある画像上の差異P51が組み合わせ連関度80%で、また取得した宛先情報:番地の変更が80%で連関している。またノード61cは、画像上の差異P52が組み合わせ連関度60%で、取得した宛先情報:更新なしが組み合わせ連関度60%、取得した宛先情報:入居者の変更が組み合わせ連関度40%で連関している。なお、組み合わせ連関度はニューラルネットワークにより構成されていてもよい。 This weighting is a combination linkage degree of three or more stages. For example, in the node 61a, the difference P51 on a certain image is associated with a combination association degree of 80%, and the acquired destination information: address change is associated with 80%. In the node 61c, the difference P52 on the image is associated with a combination association degree of 60%, the acquired destination information: no update is associated with a combination association degree of 60%, and the acquired destination information: resident change is associated with a combination association degree of 40%. ing. The degree of combination linkage may be configured by a neural network.
このような組み合わせ連関度を予め取得しておく。そして、地図情報を更新しようとするときに、組み合わせを構成する画像上の差異と、宛先情報を取得する。 Such combination association degree is acquired in advance. Then, when trying to update the map information, the difference on the image constituting the combination and the destination information are acquired.
探索プログラムは、取得した画像上の差異と、宛先情報に基づいて、出力解の中から最適解としての地図情報の更新c〜gを1又は2以上に亘り選択する作業を行う。この最適解を選択する上で、予め取得した図8に示す組み合わせ連関度を参照する。例えば、取得した画像上の差異がP51であり、取得した宛先情報がビル名の更新であれば、組み合わせ連関度を介してノード61bが関連付けられており、このノード61bは、更新eが組み合わせ連関度60%、更新gが組み合わせ連関度40%で関連付けられている。このような組み合わせ連関度に基づき最適解を探索する。この最適解は組み合わせ連関度が最も高いもの出力する必要は無く、組み合わせ連関度がより低いものを選択するようにしてもよい。また、これ以外に矢印が繋がっていない出力解を選択してもよいことは勿論である。即ち、この出力解の選択は、組み合わせ連関度が高いものから順に選択される場合に限定されるものではなく、ケースに応じて組み合わせ連関度が低いものから順に選択されるものであってもよいし、その他いかなる優先順位で選択されるものであってもよい。 The search program performs an operation of selecting one or two or more updates c to g of map information as the optimum solution from the output solutions based on the acquired difference on the image and the destination information. In selecting this optimum solution, the combination association degree shown in FIG. 8 acquired in advance is referred to. For example, if the difference on the acquired image is P51 and the acquired destination information is the update of the building name, the node 61b is associated through the combination association degree, and the update e is the combination association of the node 61b. The degree 60% and the update g are associated with a combination association degree 40%. The optimum solution is searched for based on such combination linkage. It is not necessary to output the optimum solution having the highest degree of combination association, and the solution having the lower degree of combination association may be selected. Of course, other than this, an output solution to which the arrows are not connected may be selected. That is, the selection of the output solution is not limited to the case where the combination linkage degree is selected in order from the one having the highest combination linkage degree, and the combination linkage degree may be selected in order from the one having the lowest combination linkage degree depending on the case. However, it may be selected in any other priority.
上述したように本発明によれば、新たに探索を試みる地図情報の更新方法を効率的に探索することが可能となる。特に本発明によれば、地図情報の更新方法の探索を、特段の熟練を要することなく容易に行うことが可能となる。また本発明によれば、地図情報の更新方法の探索をより高精度に行うことが可能となる。更に、上述した組み合わせ連関度を人工知能で構成することにより、これを学習させることでその判別精度を更に向上させることが可能となる。 As described above, according to the present invention, it is possible to efficiently search for a method of updating map information for which a new search is attempted. In particular, according to the present invention, it is possible to easily search for a method for updating map information without requiring special skill. Further, according to the present invention, it is possible to search for a method for updating map information with higher accuracy. Further, by constructing the above-mentioned combination linkage degree by artificial intelligence, it is possible to further improve the discrimination accuracy by learning this.
また、本発明によれば、3段階以上に設定されている組み合わせ連関度を介して特許又は特許群の探索を行う点に特徴がある。組み合わせ連関度は、例えば0〜100%までの数値で記述することができるが、これに限定されるものではなく3段階以上の数値で記述できるものであればいかなる段階で構成されていてもよい。 Further, the present invention is characterized in that a patent or a group of patents is searched for through a combination linkage degree set to three or more stages. The degree of combination linkage can be described by a numerical value from 0 to 100%, for example, but is not limited to this, and may be configured at any stage as long as it can be described by a numerical value of 3 or more stages. ..
このような3段階以上の数値で表される組み合わせ連関度に基づいて探索することで、複数の地図情報の更新方法の判別結果が選ばれる状況下において、当該組み合わせ連関度の高い順に探索して表示することも可能となる。このように組み合わせ連関度の高い順にユーザに表示できれば、より可能性の地図情報の更新方法の判別結果を優先的に選択することを促すこともできる。一方、組み合わせ連関度の低い地図情報の更新方法の判別結果であってもセカンドオピニオンという意味で表示することができ、ファーストオピニオンで上手く分析ができない場合において有用性を発揮することができる。 By searching based on the combination association degree represented by the numerical values of three or more stages, the search is performed in descending order of the combination association degree in the situation where the determination result of the method for updating a plurality of map information is selected. It is also possible to display it. If the user can be displayed in descending order of the degree of combination association in this way, it is possible to prompt the user to preferentially select the determination result of the more probable update method of the map information. On the other hand, even the determination result of the update method of the map information having a low degree of combination association can be displayed in the meaning of the second opinion, and can be useful when the analysis cannot be performed well by the first opinion.
これに加えて、本発明によれば、組み合わせ連関度が1%のような極めて低い地図情報の更新方法の判別結果も見逃すことなく判断することができる。組み合わせ連関度が極めて低い特許又は特許群であっても僅かな兆候として繋がっているものであり、何十回、何百回に一度は、特許又は特許群の判別結果として役に立つ場合もあることをユーザに対して注意喚起することができる。 In addition to this, according to the present invention, it is possible to determine without overlooking the determination result of the update method of the map information having an extremely low degree of combination association such as 1%. Even patents or patent groups with extremely low degree of combination association are connected as a slight sign, and may be useful as a discrimination result of patents or patent groups once every tens or hundreds of times. It is possible to alert the user.
更に本発明によれば、このような3段階以上の組み合わせ連関度に基づいて探索を行うことにより、閾値の設定の仕方で、探索方針を決めることができるメリットがある。閾値を低くすれば、上述した組み合わせ連関度が1%のものであっても漏れなく拾うことができる反面、地図情報の更新方法の判別結果を好適に検出できる可能性が低く、ノイズを沢山拾ってしまう場合もある。一方、閾値を高くすれば、最適な地図情報の更新方法の判別結果を高確率で検出できる可能性が高い反面、通常は組み合わせ連関度は低くてスルーされるものの何十回、何百回に一度は出てくる好適な解を見落としてしまう場合もある。いずれに重きを置くかは、ユーザ側、システム側の考え方に基づいて決めることが可能となるが、このような重点を置くポイントを選ぶ自由度を高くすることが可能となる。 Further, according to the present invention, there is an advantage that the search policy can be determined by the method of setting the threshold value by performing the search based on the combination linkage degree of three or more stages. If the threshold value is lowered, even if the above-mentioned combination association degree is 1%, it can be picked up without omission, but it is unlikely that the determination result of the map information update method can be detected favorably, and a lot of noise is picked up. It may end up. On the other hand, if the threshold value is raised, there is a high possibility that the determination result of the optimum map information update method can be detected with high probability, but the combination linkage degree is usually low and it is passed through, but it is tens or hundreds of times. In some cases, the suitable solution that comes out once is overlooked. It is possible to decide which one should be emphasized based on the ideas of the user side and the system side, but it is possible to increase the degree of freedom in selecting the points to be emphasized.
またこれらの組み合わせ連関度をその人工知能により学習させるようにしてもよい。同様に特許特定情報並びに付帯情報との組み合わせに対する特許又は特許群との組み合わせ連関度を人工知能により学習させるようにしてもよい。 Further, the degree of association between these combinations may be learned by the artificial intelligence. Similarly, the degree of association with the patent or the patent group for the combination with the patent specific information and the incidental information may be learned by artificial intelligence.
本発明が適用される結果、ユーザやシステムにより選択された地図情報の更新に対する画像上の差異、取得した宛先情報との関係を取得し、これに基づいて上述した組み合わせ連関度を更新する。つまり、ユーザやシステムにより選択された関係については連関性を高く更新し、またユーザやシステムにより選択されなかった関係は連関性をより低く更新する。この更新については、人工知能やニューラルネットワーク等を利用してもよい。この更新は、画像上の差異が新たに取得される都度、定期的、又は不定期的に行うようにしてもよい。 As a result of applying the present invention, the difference on the image with respect to the update of the map information selected by the user or the system and the relationship with the acquired destination information are acquired, and the above-mentioned combination linkage degree is updated based on this. That is, relationships selected by the user or system are updated with high relevance, and relationships not selected by the user or system are updated with low relevance. For this update, artificial intelligence, neural networks, or the like may be used. This update may be performed periodically or irregularly each time a new difference on the image is acquired.
以上、本発明の実施形態を説明したが、この実施形態は例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although the embodiment of the present invention has been described above, this embodiment is presented as an example and is not intended to limit the scope of the invention. These novel embodiments can be implemented in various other embodiments, and various omissions, replacements, and changes can be made without departing from the gist of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are also included in the scope of the invention described in the claims and the equivalent scope thereof.
1 地図情報更新システム
2 制御装置
3 データ取得部
10 中継サーバ
11 データ収集サーバ
12 無線基地局
14 車両
21 制御部
22 取得部
23 操作部
24 通信部
25 記憶部
31 地図情報保持部
32 配達原簿情報取得部
33 差異検出部
34 整合性照合部
35 地図情報更新部
211 CPU
212 メモリ
1 Map information update system 2 Control device 3 Data acquisition unit 10 Relay server 11 Data collection server 12 Wireless base station 14 Vehicle 21 Control unit 22 Acquisition unit 23 Operation unit 24 Communication unit 25 Storage unit 31 Map information holding unit 32 Delivery ledger information acquisition Unit 33 Difference detection unit 34 Consistency collation unit 35 Map information update unit 211 CPU
212 memory

Claims (16)

  1. 地図情報を保持する地図情報保持手段と、
    番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得手段と、
    複数の配達物の配達用車両にそれぞれ設置され、当該各配達用車両の配達時において配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に時系列的に順次取得するデータ取得手段と、
    上記各データ取得手段によりそれぞれ取得された配達画像データをその撮影位置情報及び上記関連データの少なくとも何れかと共に収集するデータ収集サーバと、
    上記データ収集サーバにより収集された各配達画像データについて、取得した上記撮影位置情報及び上記関連データの少なくとも何れかを参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出手段と、
    上記配達原簿情報取得手段により取得された配達原簿を参照し、上記差異検出手段により検出された画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合手段と、
    上記整合性照合手段により整合性が照合された場合には、地図情報保持手段により保持される地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新手段とを備えること
    を特徴とする地図情報更新システム。
    Map information holding means for holding map information and
    Delivery ledger information acquisition means for acquiring delivery ledger at any time, in which the destination information of deliveries is updated sequentially for each street address.
    A data acquisition means that is installed in each of a plurality of delivery vehicles and sequentially acquires delivery image data together with at least one of shooting position information and related data related to the delivery status at the time of delivery of each delivery vehicle. When,
    A data collection server that collects delivery image data acquired by each of the above data acquisition means together with at least one of the shooting position information and the related data.
    For each delivery image data collected by the data collection server, at least one of the acquired shooting position information and the related data is referred to, and an image is displayed between the delivery image data and the delivery image data previously captured at the same shooting position. Difference detection means to detect the above difference and
    The delivery ledger acquired by the delivery ledger information acquisition means is referred to, and the consistency of the difference on the image detected by the difference detecting means and the destination information at the address corresponding to the detected shooting position is collated. Consistency collation means and
    When the consistency is collated by the above-mentioned consistency collating means, the map information updating means for updating the information based on the difference on the image at the shooting position with respect to the map information held by the map information holding means. A map information update system characterized by being prepared.
  2. 地図情報を保持する地図情報保持手段と、
    番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得手段と、
    複数の配達物の配達用車両にそれぞれ設置され、当該各配達用車両の配達時において配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に時系列的に順次取得するデータ取得手段と、
    上記データ取得手段により取得された各配達画像データについて、取得した上記撮影位置情報及び上記関連データの少なくとも何れかを参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出手段と、
    上記各差異検出手段によりそれぞれ取得された配達画像データの画像上の差異をその撮影位置情報及び上記関連データの少なくとも何れかと共に収集するデータ収集サーバと、
    上記配達原簿情報取得手段により取得された配達原簿を参照し、上記データ収集サーバにより収集された画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合手段と、
    上記整合性照合手段により整合性が照合された場合には、地図情報保持手段により保持される地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新手段とを備えること
    を特徴とする地図情報更新システム。
    Map information holding means for holding map information and
    Delivery ledger information acquisition means for acquiring delivery ledger at any time, in which the destination information of deliveries is updated sequentially for each street address.
    A data acquisition means that is installed in each of a plurality of delivery vehicles and sequentially acquires delivery image data together with at least one of shooting position information and related data related to the delivery status at the time of delivery of each delivery vehicle. When,
    For each delivery image data acquired by the data acquisition means, refer to at least one of the acquired shooting position information and the related data, and image the image with the delivery image data previously captured at the same shooting position. Difference detection means to detect the above difference and
    A data collection server that collects the difference on the image of the delivery image data acquired by each of the above difference detecting means together with at least one of the shooting position information and the related data.
    The delivery ledger acquired by the delivery ledger information acquisition means is referred to, and the consistency of the difference on the image collected by the data collecting server with the destination information at the address corresponding to the detected shooting position is collated. Consistency collation means and
    When the consistency is collated by the above-mentioned consistency collating means, the map information updating means for updating the information based on the difference on the image at the shooting position with respect to the map information held by the map information holding means. A map information update system characterized by being prepared.
  3. 上記データ取得手段は、上記関連データの配達状況を、時間、距離、ルート、配達対象物、配達員、店舗、施設、交通機関、天候、温度、湿度、及び環境情報の少なくとも何れかからなるデータにより取得すること
    を特徴とする請求項1又は2記載の地図情報更新システム。
    The data acquisition means obtains the delivery status of the related data as data consisting of at least one of time, distance, route, delivery object, delivery person, store, facility, transportation, weather, temperature, humidity, and environmental information. The map information update system according to claim 1 or 2, characterized in that the data is acquired by.
  4. 上記差異検出手段は、上記画像の差異を、道路標識、路面標示、道路区画線、案内表示、建築構造物、土木構造物、看板、案内板、集合ポスト、郵便受け、宅配ボックス、人物、入居者、及び出入口の少なくとも何れかからなる画像を用いて検出すること
    を特徴とする請求項1又は2記載の地図情報更新システム。
    The difference detecting means detects the difference in the image as a road sign, a road marking, a road marking line, a guide display, a building structure, a civil engineering structure, a signboard, a guide board, a gathering post, a mailbox, a delivery box, a person, a resident. The map information updating system according to claim 1 or 2, wherein the detection is performed using an image consisting of at least one of the entrance and exit.
  5. 上記差異検出手段は、上記画像上の差異をディープラーニング技術を用いて検出すること
    を特徴とする請求項1又は2記載の地図情報更新システム。
    The map information updating system according to claim 1 or 2, wherein the difference detecting means detects a difference on the image by using a deep learning technique.
  6. 上記整合性照合手段は、道路標識、路面標示、道路区画線、案内表示、建築構造物、土木構造物、看板、案内板、集合ポスト、郵便受け、宅配ボックス、人物、入居者、及び出入口の少なくとも何れかに関する変化に基づく画像上の差異と、その変化が反映された上記宛先情報との整合性を照合すること
    を特徴とする請求項1〜5のうち何れか1項記載の地図情報更新システム。
    The above consistency verification means are at least road signs, road markings, road markings, guidance signs, building structures, civil engineering structures, signs, information boards, collective posts, mailboxes, parcel boxes, people, residents, and doorways. The map information updating system according to any one of claims 1 to 5, wherein the difference on the image based on any one of the changes is collated with the above-mentioned destination information reflecting the change. ..
  7. 上記データ取得手段は、当該各配達用車両の配達時において配達画像データを毎日取得し、
    上記整合性照合手段は、上記配達原簿情報取得手段により毎日取得される配達原簿を参照し、上記配達画像データの取得日と上記配達原簿の更新日とを合わせた上で上記整合日を照合すること
    を特徴とする請求項1〜6のうち何れか1項記載の地図情報更新システム。
    The above data acquisition means acquires delivery image data every day at the time of delivery of each delivery vehicle.
    The consistency collation means refers to the delivery ledger acquired daily by the delivery ledger information acquisition means, and collates the consistency date after matching the acquisition date of the delivery image data and the update date of the delivery ledger. The map information updating system according to any one of claims 1 to 6, characterized in that.
  8. 上記地図情報保持手段は、二次元マップ、三次元マップ、又は上記撮影位置毎に撮影したパノラマ画像としてのストリートビュー画像の何れかからなる地図情報を保持し、
    上記地図情報更新手段は、当該撮影位置における画像上の差異に基づく情報を上記保持された二次元マップ、三次元マップ、ストリートビュー画像の何れかに対して更新すること
    を特徴とする請求項1〜7のうち何れか1項記載の地図情報更新システム。
    The map information holding means holds map information including a two-dimensional map, a three-dimensional map, or a street view image as a panoramic image taken at each shooting position.
    The map information updating means is characterized in that the information based on the difference on the image at the shooting position is updated for any of the held two-dimensional map, three-dimensional map, and street view image. The map information update system according to any one of ~ 7.
  9. 地図情報を保持する地図情報保持ステップと、
    番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得ステップと、
    複数の配達物の配達用車両の配達時において配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に時系列的に順次取得するデータ取得ステップと、
    上記各データ取得ステップにおいてそれぞれ取得した配達画像データをその撮影位置情報及び上記関連データの少なくとも何れかと共に収集するデータ収集ステップと、
    上記データ収集ステップにおいて収集した各配達画像データについて、取得した上記撮影位置情報及び上記関連データの少なくとも何れかを参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出ステップと、
    上記配達原簿情報取得ステップにおいて取得した配達原簿を参照し、上記差異検出ステップにより検出された画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合ステップと、
    上記整合性照合ステップにより整合性が照合された場合には、地図情報保持ステップにおいて保持する地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新ステップとを有すること
    を特徴とする地図情報更新方法。
    Map information retention step to retain map information and
    The delivery ledger information acquisition step for acquiring the delivery ledger at any time, in which the delivery address information is sequentially updated for each street address, and
    A data acquisition step of sequentially acquiring delivery image data together with at least one of shooting position information and related data related to the delivery status at the time of delivery of a plurality of delivery vehicles, and a data acquisition step.
    A data collection step of collecting the delivery image data acquired in each of the above data acquisition steps together with at least one of the shooting position information and the above-mentioned related data.
    For each delivery image data collected in the data collection step, at least one of the acquired shooting position information and the related data is referred to, and the delivery image data previously captured at the same shooting position is displayed on the image. Difference detection step to detect the difference in
    The delivery ledger acquired in the delivery ledger information acquisition step is referred to, and the consistency of the difference on the image detected by the difference detection step with the destination information at the address corresponding to the detected shooting position is collated. Consistency collation step and
    When the consistency is collated by the above-mentioned consistency collation step, it has a map information update step for updating the information based on the difference on the image at the shooting position with respect to the map information held in the map information retention step. A method of updating map information, which is characterized by this.
  10. 地図情報を保持する地図情報保持ステップと、
    番地単位で配達物の宛先情報が順次更新される配達原簿を随時取得する配達原簿情報取得ステップと、
    複数の配達物の配達用車両の配達時において配達画像データを撮影位置情報及び配達状況に関する関連データの少なくとも何れかと共に時系列的に順次取得するデータ取得ステップと、
    上記データ取得ステップにより取得した各配達画像データについて、取得した上記撮影位置情報及び上記関連データの少なくとも何れかを参照し、以前に同一の撮影位置において撮像された配達画像データとの間で画像上の差異を検出する差異検出ステップと、
    上記各差異検出ステップにおいてそれぞれ取得した配達画像データの画像上の差異をその撮影位置情報と共に収集するデータ収集ステップと、
    上記配達原簿情報取得ステップにおいて取得した配達原簿を参照し、上記データ収集ステップにおいて収集した画像上の差異と、それが検出された撮影位置に対応する番地における宛先情報との整合性を照合する整合性照合ステップと、
    上記整合性照合ステップにより整合性が照合された場合には、地図情報保持ステップにおいて保持する地図情報に対して、当該撮影位置における画像上の差異に基づく情報を更新する地図情報更新ステップとを有すること
    を特徴とする地図情報更新方法。
    Map information retention step to retain map information and
    The delivery ledger information acquisition step for acquiring the delivery ledger at any time, in which the delivery address information is sequentially updated for each street address, and
    A data acquisition step of sequentially acquiring delivery image data together with at least one of shooting position information and related data related to the delivery status at the time of delivery of a plurality of delivery vehicles, and a data acquisition step.
    For each delivery image data acquired in the data acquisition step, at least one of the acquired shooting position information and the related data is referred to, and the image is displayed between the delivery image data previously captured at the same shooting position. Difference detection step to detect the difference in
    A data collection step that collects the difference on the image of the delivery image data acquired in each of the above difference detection steps together with the shooting position information, and
    Matching that refers to the delivery ledger acquired in the delivery ledger information acquisition step and collates the consistency of the difference on the image collected in the data collecting step with the destination information at the address corresponding to the detected shooting position. Gender matching steps and
    When the consistency is collated by the above-mentioned consistency collation step, it has a map information update step for updating the information based on the difference on the image at the shooting position with respect to the map information held in the map information retention step. A method of updating map information, which is characterized by this.
  11. 上記データ取得ステップは、上記関連データの配達状況を、時間、距離、ルート、配達対象物、配達員、店舗、施設、交通機関、天候、温度、湿度、及び環境情報の少なくとも何れかからなるデータにより取得すること
    を特徴とする請求項9又は10記載の地図情報更新方法。
    The data acquisition step sets the delivery status of the related data as data consisting of at least one of time, distance, route, delivery object, delivery person, store, facility, transportation, weather, temperature, humidity, and environmental information. The map information updating method according to claim 9 or 10, wherein the map information is acquired by.
  12. 上記差異検出ステップは、上記画像の差異を、道路標識、路面標示、道路区画線、案内表示、建築構造物、土木構造物、看板、案内板、集合ポスト、郵便受け、宅配ボックス、人物、入居者、及び出入口の少なくとも何れかからなる画像を用いて検出すること
    を特徴とする請求項9又は10記載の地図情報更新方法。
    In the difference detection step, the difference in the above image is detected by road signs, road markings, road markings, guidance displays, building structures, civil engineering structures, signboards, information boards, collective posts, mailboxes, delivery boxes, people, and residents. The map information updating method according to claim 9 or 10, wherein the detection is performed using an image consisting of at least one of the entrance and exit.
  13. 上記差異検出ステップでは、上記画像上の差異をディープラーニング技術を用いて検出すること
    を特徴とする請求項9又は10記載の地図情報更新方法。
    The map information updating method according to claim 9 or 10, wherein in the difference detection step, a difference on the image is detected by using a deep learning technique.
  14. 上記整合性照合ステップでは、道路標識、路面標示、道路区画線、案内表示、建築構造物、土木構造物、看板、案内板、集合ポスト、郵便受け、宅配ボックス、人物、入居者、及び出入口の少なくとも何れかに関する変化に基づく画像上の差異と、その変化が反映された上記宛先情報との整合性を照合すること
    を特徴とする請求項9〜13のうち何れか1項記載の地図情報更新方法。
    In the above consistency verification step, at least of road signs, road markings, road markings, guidance signs, building structures, civil engineering structures, signboards, information boards, gathering posts, mailboxes, parcel boxes, people, residents, and doorways. The map information update method according to any one of claims 9 to 13, wherein the difference on the image based on any of the changes is collated with the above-mentioned destination information reflecting the change. ..
  15. 上記データ取得ステップでは、当該各配達用車両の配達時において配達画像データを毎日取得し、
    上記整合性照合ステップでは、上記配達原簿情報取得ステップにおいて毎日取得する配達原簿を参照し、上記配達画像データの取得日と上記配達原簿の更新日とを合わせた上で上記整合日を照合すること
    を特徴とする請求項9〜14のうち何れか1項記載の地図情報更新方法。
    In the above data acquisition step, delivery image data is acquired every day at the time of delivery of each delivery vehicle.
    In the consistency collation step, the delivery ledger acquired every day in the delivery ledger information acquisition step is referred to, and the matching date is collated after matching the acquisition date of the delivery image data and the update date of the delivery ledger. The map information updating method according to any one of claims 9 to 14, wherein the map information is updated.
  16. 上記地図情報保持ステップでは、二次元マップ、三次元マップ、又は上記撮影位置毎に撮影したパノラマ画像としてのストリートビュー画像の何れかからなる地図情報を保持し、
    上記地図情報更新ステップでは、当該撮影位置における画像上の差異に基づく情報を上記保持された二次元マップ、三次元マップ、ストリートビュー画像の何れかに対して更新すること
    を特徴とする請求項9〜15のうち何れか1項記載の地図情報更新方法。
    In the map information holding step, map information consisting of a two-dimensional map, a three-dimensional map, or a street view image as a panoramic image taken at each shooting position is held.
    9. The map information update step is characterized in that information based on the difference on the image at the shooting position is updated for any of the held two-dimensional map, three-dimensional map, and street view image. The map information updating method according to any one of ~ 15.
JP2019112275A 2019-06-17 2019-06-17 Map information update system and map information update method Pending JP2020204709A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019112275A JP2020204709A (en) 2019-06-17 2019-06-17 Map information update system and map information update method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019112275A JP2020204709A (en) 2019-06-17 2019-06-17 Map information update system and map information update method

Publications (1)

Publication Number Publication Date
JP2020204709A true JP2020204709A (en) 2020-12-24

Family

ID=73837937

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019112275A Pending JP2020204709A (en) 2019-06-17 2019-06-17 Map information update system and map information update method

Country Status (1)

Country Link
JP (1) JP2020204709A (en)

Similar Documents

Publication Publication Date Title
US10818188B2 (en) Method for dispatching a vehicle to a user's location
US20200012692A1 (en) Mobile information device, image pickup device, and information acquisition system
CN104143220B (en) Checking-in and positioning tracking system based on local-machine face recognition technology and intelligent terminal
CN102194007B (en) System and method for acquiring mobile augmented reality information
US20140132767A1 (en) Parking Information Collection System and Method
US20140214726A1 (en) Information management device, network system, information management program, and information management method
WO2020108065A1 (en) Collection system and collection method used for traffic safety equipment controlled by internet of things
CN105956091A (en) Extended information acquisition method and device
JP5140027B2 (en) Information providing apparatus, information providing method, and program
CN109509035B (en) House investigation system
CN1845089A (en) Transmission and query system for traffic tour and location information
KR20010105569A (en) 3- Dimensional real-estate geographic Information internet service system and method thereof
JP2020204709A (en) Map information update system and map information update method
KR100986622B1 (en) System and method for public resentment delivery using lbs based mobile terminal
JP2020204708A (en) Map information update system
JP2006003963A (en) Local guide system
JP2020204912A (en) Delivery information update system and delivery information update method
JP2019095550A (en) Map information update system and method
JPWO2017149777A1 (en) Space lending system, space lending method and program
WO2015174592A1 (en) Operation method of gathering information generating server for generating, sharing, and distributing gathering event by collecting smartphone usage log
CN107945323B (en) Security and protection method based on smart campus
JP4823699B2 (en) Area extraction system and area extraction method
JP2003029625A (en) Mapping method
US20080281514A1 (en) System and method for notice posting and verification
CN102521384A (en) Method for inquiring business card transmitting historical information by using network